爬取项目目标网站:
www.7rdao.com
想要获得的数据:
获取想要省份用户基本信息。
(你想要哪个省就爬哪个省份咯)
既然目标明确,工具齐备.
话不多说,直接打开网页分析.
网页分析:
这是我们想获取的信息.先提交一次看有什么反应!
完整的URL:
http://www.7rdao.com/user/search.aspx?sex=0&ddl_StartAge=23&ddl_EndAge=28&ddl_Province=%E5%9B%9B%E5%B7%9D&ddl_City=%E6%88%90%E9%83%BD&ddl_Area=%E5%8C%BA%E3%80%81%E5%8E%BF
是这样的一个字符出形式,从参数的命名可以看出来相关需要提交的参数和受控制所对应的元素。
sex=性别,0是女,1是男
ddl_StartAge=开始年龄
ddl_EndAge=结束年龄
ddl_Province=省份
ddl_City=城市
ddl_Area=县和区
这就是第一次操作得到的结果,我们试试能不能少提交某个参数,可不可以得到一些反馈,我就先把