python爬虫练习,爬取豆瓣最受欢迎的250部电影,并保存至excel

简介 目标:使用 BeautifulSoup + Reuqests,爬取豆瓣上评分最高的250部电影,并保存到excel表格中。 requests库,参考文章:python爬虫之reuqests库BeautifulSoup库,参考文章:python爬虫之Beautiful Soup库 一、创建xls表格 需要用到xlwt库,没安装的话,安装即可 创建空表格 二、创建请求函数 这里创建douban_ [……]

继续阅读»»»

python爬虫之Beautiful Soup库,基本使用以及提取页面信息

一、Beautiful Soup简介 爬虫正则表达式参考:Python 爬虫正则表达式和re库 在爬虫过程中,可以利用正则表达式去提取信息,但是有些人觉得比较麻烦。因为花大量时间分析正则表达式。这时候可以用高效的网页解析库Beautiful Soup。 Beautiful Soup 是一个HTML/XML 的解析器,主要用于解析和提取 HTML/XML 数据。 Beautiful Soup支持Py [……]

继续阅读»»»

python爬虫之reuqests库,及基本使用

一、Requests简介 urllib库参考:Python 爬虫之urllib库 Requests是用python语言基于urllib编写的,该模块主要用来发 送 HTTP 请求,requests 模块比 urllib 模块更简洁,是学习 python 爬虫的较好的http请求模块。 不是 python 的内置库,如果没有安装,可以安装先。 二、各种请求方式 requests里提供个各种请求方式, [……]

继续阅读»»»

Python 爬虫正则表达式和re库,及re库的基本使用,提取单个页面信息

一、正则表达式 正则表达式是处理字符串的强大工具,它有自己特定的语法结构,有了它,实现字符串的检索、替换、匹配验证都不在话下,正则表达式在所有编程里通用,所以不仅仅是python使用。 以下是常用的正则表达式,用的时候参考即可,不需要死记硬背,用得多了自然就熟悉了。 字符 描述 d 匹配任意数字,等价于 [0-9] D 匹配任意非数字的字符,d的取反 w 代表字母,数字,下划线。也就是 a-z、A [……]

继续阅读»»»

搭建自己的直播流媒体服务器SRS,以及SRS+OBS直播推拉流使用及配置

一、前言 目前,全球直播带货什么的,成为主流,那如何自己搭建一个直播服务器呢。首先需要一个流媒体服务器,搭建流媒体有很多种方式,如下: 流媒体解决方案 Live555 (C++) 流媒体平台框架 EasyDarwin (C++,国产精品) 实时流媒体播放服务器程序DarwinStreamingSrvr (C++) Flash流媒体服务器 Red5 (Java) 流媒体服务器 Open Stream [……]

继续阅读»»»

用acme.sh给网站域名,申请免费SSL永久证书(自动续期)

一:简介 申请ssl证书,即https有很多,有免费的,也有收费的。如第三方域名管理cloudflare也可以自动添加使用https,而且永久。 但是由于有些服务,需要在服务器使用自签证书,所以需要自己申请。免费的可以使用certbot,也可以是使用zeroSSL。 Cerbot可以参考我以前的文章:Certbot申请免费SSL证书 这里,介绍使用acme.sh生成免费的ssl证书,其完整实现了a [……]

继续阅读»»»

Linux搭建开源企业云盘Seafile,私有文件同步云盘及基本使用

一、简介 在日常生活经常需要在不同的设备间同步文件,还有在企业作为公司云存储备份使用。 类似的有谷歌云端硬盘,但是作为企业不能统一管理,即没有admin权限管理其他账号,而且免费空间有限。国内的百度网盘,并没有文件同步功能,只支持手动的上传和下载,而且也没有文件历史版本功能。 Seafile是一款优秀的开源企业云盘软件,拥有文件版本管理、跨平台文件同步和共享等功能,可以方便自建一个私有的云存储服务 [……]

继续阅读»»»

Python初学者练习小实例(21-50例),1个实例多个列子相互参考

以下所有测试实例来自于菜鸟教程:https://www.runoob.com/python3/python3-examples.html 21、Python 最大公约数算法 最大公约数,也称最大公因数、最大公因子,指两个或多个整数共有约数中最大的一个。 个人参考代码 执行结果 菜鸟教程参考代码 执行以上代码输出结果为: 其他人参考代码 可按以下思路减少循环次数: 当最小值为最大公约数时,直接返回; [……]

继续阅读»»»

◷2022/08/30   @运维笔记   ▤python相关   ⚑ 👁️:1,000 次浏览

Python初学者练习小实例(1-20例),1个实例多个列子相互参考

以下所有测试实例来自于菜鸟教程:https://www.runoob.com/python3/python3-examples.html 1:Python 数字求和 自己的代码 执行结果: 菜鸟教程参考代码 执行结果: 或者直接一行代码执行 %.1f 指的输出保留一位小数的浮点数。%f 表示其输出格式为浮点数。 其他人参考笔记 写了一个报错重新输入的处理 print(f” &#8220 [……]

继续阅读»»»

◷2022/08/20   @运维笔记   ▤python相关   ⚑ 👁️:1,024 次浏览