- 博客(2)
- 收藏
- 关注
转载 爬虫笔记(二)
一、安装scrapy框架:1,安装:pip install scrapy2,windows下,还需要安装pypiwin32(不安装,在运行scrapy项目的时候就会报错)二、创建项目爬虫:cmd下操作1,创建项目:scrapy startproject [爬虫名字]2,创建爬虫:进入到爬虫所在的路径下,执行命令:scrapy genspider [爬虫名字] ["爬虫的域名"]注意:...
2019-08-07 15:25:00 80
转载 爬虫笔记(一)
1 字符串和二进制之间的相互转换 字符串转化为二进制:encode() 默认为utf8,若为gbk需要注明 二进制转化为字符串:decode() 默认为utf8,若为gbk需要注明2 url规范: 只能由特定字符组成,字母、数字、下划线,如果出现其他字符(中文、空格等)就要对其进行编码3 urllib.response read() 读取相应的...
2019-08-07 15:21:00 60
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人