Python 爬虫学习笔记三:多页内容爬取&内容分析及格式化
- python int 与 string 之间的转换:
Python int与string之间的转化
string–>int1、10进制string转化为int
int(‘12’)
2、16进制string转化为int
int(‘12’, 16)
int–>string
1、int转化为10进制string
str(18)
2、int转化为16进制string
hex(18)
2 . 由于链家网上面选中第二页的时候,只是在页面后面多了一个“d2”, 如: http://sh.lianjia.com/ershoufang/pudong/d2 , 所以要想爬取更多的网页只需要循环更新requests 的页面URL
3 . 增加了一个循环之后,可以打印所有的爬取结果
from lxml import etree
import requests