![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
许RR
大四
展开
-
解决Linux下Python编码问题,以及导入模块的问题
今天想把win上抓取代理IP的代码迁移到Ubuntu上,然后写成定时任务,然后同项目小组的人直接调用服务器上api就能返回已经能用的代理IP地址以及端口,遇到了两个小问题。1. 模块的引入问题 我编写Python的IDE是eclipse+pydev,每次在win上运行的程序同一个包内引入程序也必须通过from [package] import [module]的方法导入同一个包下的模块 如果原创 2017-11-30 12:52:39 · 1965 阅读 · 0 评论 -
Python中抓取代理IP并测试
刚学Python,Python这种工具嘛,当然是用来做爬虫啦。但是爬虫有爬取策略,网站制作者也有反爬取策略,所以为了能够愉快的抓取数据,就不得不让自己的爬虫更加像人 爬虫的所谓的伪装,第一个,伪装header头的User-Agent,没什么意思,比较简单,事先弄好几个header头放在代码里,然后在合适的时候,比如说已经抓取了一页的数据,这个时候,就可以换换header头了: #coding:utf原创 2017-11-28 00:18:12 · 8388 阅读 · 1 评论