本案例以土地市场列表页请求、供地结果搜索页请求为例,其实网站采集难度不大,但是一些细节值得学习。
链接:https://www.landchina.com/default.aspx?tabid=263
抓包分析
POST接口:https://www.landchina.com/default.aspx?tabid=263
Requests-headers中没有动态参数。
Formdata中看起来也没有动态参数。不过有一个参数是 (unable to decode value)
也就是说找到无法显示的 TAB_QuerySubmitConditionData 参数就能构造请求了。
参数定位
定位该参数:TAB_QuerySubmitConditionData
Initiator中没有堆栈记录,说明该请求是在页面中完成的。