- 博客(5)
- 收藏
- 关注
原创 Task5:打卡
一、学习内容本文学习内容均参考下面链接。参考链接:team-learning-program/5.综合实践-微博个人信息采集.md at master · datawhalechina/team-learning-program · GitHub二、学习过程微博个人信息采集1.提取用户的id数字正则表达式匹配,需要匹配数字的正则表达式为【[0-9]+】2.用户性别正则表达式匹配,需要匹配数字的正则表达式为【[0-9]+】【(?<=class="W_icon)(.+?)(
2021-08-25 18:04:43 64
原创 Task4:综合实践
一、学习背景小张是某高校管理学研究生,在毕业课题中需要采集boss直聘武汉地区的相关数据,而小张同学因为是人文科学背景没有接触过爬虫,在网上搜索很多资料后,现在她找到你希望你帮她采集boss直聘网的相关数据,你应该怎么做呢?boss直聘武汉地区网站:https://www.zhipin.com/wuhan/二、学习过程根据前几期所学知识和自己查阅的相关八爪鱼知识,采取下面几种方法进行操作训练。(操作过程中因为卡顿等原因,视频中出现中止情况,为节省时间,只在中断的地方将操作步骤续录上)1.
2021-08-24 17:39:15 64
原创 Task03:打卡
一.学习链接3.自定义数据采集3.1京东关键词循环与特殊字段3.2豆瓣数据格式化3.3正则表达式*3.4练习与思考参考链接:https://www.bazhuayu.com/tutorial8/81srgjchttps://www.bazhuayu.com/tutorial8/81gshsj本文学习内容分享均来自上面学习链接的分享!二.学习视频(一)京东关键词循环视频(二)豆瓣数据格式化采集中我们发现作者和出版社等信息都混到了一起,如果我们只想要其中的
2021-08-21 18:15:42 90
原创 Task02打卡:自动识别初体验
一、学习内容2.自动识别初体验 2.1微博数据抓取(登陆Cookie设置) 2.2豆瓣图书数据抓取(翻页与循环) 2.3采集流程逻辑* 2.4练习与思考 二、学习过程
2021-08-18 16:19:19 90
原创 Task01学习打卡:
一、学习过程1.界面初识1.界面初识 下载好之后出现界面 2.输入要爬取数据的网址3.界面右下角出现图3所示后,开始自动识别,爬取数据。4.识别数据完成后,点击生成采集设置5.界面右下方出现弹框,点击“保存并开始采集”6.点击启动本地采集后,开始采集爬取的信息7.运行过程中提取数据的界面 8.在提取数据过程中可以根据需要随时停止采集,结束运行,导出数据,9.可以选择导出的格式10.点击保存的文件,可以看到爬取的数据二、学习思考1.体验了八爪鱼采集后,你觉得它能够用在学习和工作...
2021-08-16 17:18:51 67
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人