1032851561的博客

原创 爬虫总结

美团美食通过分析不同的分类，发现不同的分类的页面和接口不是统一的，所以需要针对不同的分类编写对应的逻辑。以美食分类为例获取所有城市美团美食业态的访问地址为https://{city}.meituan.com/meishi/，浏览访问时会自动定位城市，所以进行爬虫时先把城市的数据爬下来，在切换城市界面解析一下html就可以获取到所有城市以及对应的code，随后就可以循环所有的城市，一个城市一个...