python爬虫
文章平均质量分 68
Douglas_Young
苏大18届信管本科生,
目前摔进了C++的坑;
用过C#,C,Sql server,mysql,thinkphp,python;
熟练使用PS,AI;
略懂AE,PR,AU;
展开
-
Python爬虫全(wei)攻略
目录简述网页爬虫的大致工作原理读取网页源代码读取网页中指定内容保存读取到的内容——链接并写入数据库进阶配置——反·反爬虫 反爬虫的大致原理设置网页头(header)信息设置暂停设置ip代理设置cookie设置post 实在不想写期中的BP作业……索性先趁着刚写完的热乎劲,给这篇攻略起个头。这篇攻略主要是针对文本信息的抓取,图片会稍微麻烦一点,假如需要的话,可能需要更多的HTM原创 2017-04-30 00:35:04 · 346 阅读 · 0 评论 -
DT_python精英团作业3-经验随笔
本作业教程地址→数据向:我到底是谁的歌迷?坑1except Exception as ex: wrong_time +=1 # print ex由于注释掉了报错,导致没有第一时间发现坑2,误认为while wrong_time 这一段里的10应该是抓取次数,然而实际情况是每抓取一次,进行写入,就报错一次坑2# 存储为文本的子函数def writ原创 2017-08-26 16:01:51 · 235 阅读 · 0 评论