python
远去的星光
这个作者很懒,什么都没留下…
展开
-
python爬虫之爬取简书中的小文章标题
学习了三个星期的python基础语法,对python语法有了一个基本的了解,然后想继续深入学习,但不喜欢每天啃书本,太无聊了,只有实战才是练兵的最好效果。听说爬虫技术还是比较好玩的,就搞爬虫,但找了好多资料没有找到合适的资料,最后才找到传说中的合适爬虫初学者的书籍《Python 3网络爬虫开发实战 ,崔庆才著》(文末附书本下载链接),学习了三天,终于完整搞出了自己的第一爬虫,哈哈~。...原创 2018-08-03 16:22:05 · 9939 阅读 · 3 评论 -
python写爬虫之提取网页的内容(筛选)
利用网络爬虫获取简单信息的基本步骤是:提取网页源码——>筛选内容——>保存内容一、提取网页源码 取网页源码方法很多,常用的库有:urllib库,requests库等。。。具体的例程可访问我的上篇文件: https://blog.csdn.net/scx2006114/article/details/81389331二、筛选内容...原创 2018-08-06 17:03:55 · 52567 阅读 · 7 评论 -
爬虫之使用浏览器全自动访问简书的简书电影板块内容
目标:使用浏览器全自动的访问简书的简书电影板块内容环境:python3.65 pycharm编译环境 谷歌浏览器思路: 1.首先使用selenium模块打开谷歌浏览器并使用百度搜索“简书”,得到如图一所示的图片,网上这一步讲解很多并且很详细,我就不在此处详细讲解了。代码奉上。 ...原创 2018-08-16 10:35:25 · 556 阅读 · 0 评论 -
python爬取墨迹天气的8月份的温度情况并发送到邮箱
目标:获取墨迹天气的整个8月份的温度情况,并以txt格式的文件发送到邮箱 环境:pyhton3.6 pycharm软件 163邮箱(163邮箱要打开授权码,才能发送成功) 思路:1.获取墨迹天气8月份的温度网页源码 2.使用正则表达式或解析器对源码进行筛选,得到有用的数据信息,本文使用正则表达式 ...原创 2018-08-23 18:23:18 · 1954 阅读 · 0 评论 -
学习的爬虫一点小感悟附上爬取淘宝信息的教程
学习了一个月的爬虫,对爬虫的概念和思路有了一个基本了解,爬虫的基本思路是:首先获取网页源码,使用urllib,request库等;然后对网页源码进行筛选出需要的信息,使用正则表达式,BeautifulSoup库等,最常用的还是正则表达式;其次就是存储信息,可以将信息存储到excel表格,txt文件中,也可以存储到Mysql等数据库中。在学习爬虫的阶段也是对python语言的一种更深入...原创 2018-08-31 11:10:08 · 4207 阅读 · 3 评论 -
解决python编写代理爬虫出现的此问题:由于目标计算机积极拒绝,无法连接。
在编写爬虫时,设置在字典中两个IP地址,结果出现如下图所示的错误:[WinError 10061] 由于目标计算机积极拒绝,无法连接。设置代理IP为:proxy_handler = ProxyHandler({ 'http': '127.0.0.0:4973', 'https': '127.0.0.1:4973'})opener = build_opener(p...原创 2018-08-01 14:36:03 · 11914 阅读 · 10 评论 -
用Python写个上位机学习系列之第一个界面的设计
在学习中经常遇到上位机的问题,想自己做一个上位机玩玩,先使用Python设计一个简单界面。 目标:利用python语言设计一个简单界面 环境:PyQt5库,pycharm软件,QtDesigner软件 思路:利用QtDesignert软件设计界面,并保存,然后通过pyuic5程序将ui文件转换为py文件,最后编写一个main.py文...原创 2019-03-13 13:30:43 · 16012 阅读 · 0 评论 -
Python 利用PyQt5写一个简易的串口助手
学习单片机,STM32好长时间了,也做了一些项目,一直想利用上位机实现电脑与单片机之间的传输数据,利用串口助手是最直接的通信方式,但串口助手不适合做上位机,如果会写串口助手的软件,基本能写自己写一个上位机,历时一个月,终于写出一个简易的串口助手,笔者自己写的软件,有些Bug,分享出来,仅供参考,欢迎大家一起学习与讨论。 目标:利用Python语言写一个简易的串口助手...原创 2019-08-19 15:32:13 · 9579 阅读 · 0 评论