获取北京新发地蔬菜采集

目录

（一）获取网页请求方式和路径

1.获取网页地址

2.查看请求方式

3.获取网页cURL

4．访问解析网页内容网址，复制右边转换的代码

（二）获取北京新发地蔬菜采集

1.在tsak5中文建pyhthon文件

2..复制网页的CURL地址

3．修改北京新发地网站地址

4.查看请求状态

5．状态码返回结果

6.使用json格式请求数据

7．请求数据返回结果

8.查看网页预览里的post请求数据

9.修改参数

10.获取list里面的数据

11.使用for循环获取数据

12.匹配数据参数

13.査看数据

14.执行结果

（三）写入北京新发地蔬菜数据

1.写入文件

2.使用csv写入数据

3．调用数据写入

（四）采集北京新发地水果数据

1.分析北京新发地水果网页结构数据

​编辑

2．分析北京新发地水果网页结构第三页数据

3.使用for循环爬取前50页水果数据

4．修改写入数据的位置和文件

5.执行代码，返回结果

---

（一）获取网页请求方式和路径

1.获取网页地址

http://www.xinfadi.com.cn/getPriceData.html

2.查看请求方式

3.获取网页cURL

4．访问解析网页内容网址，复制右边转换的代码

（二）获取北京新发地蔬菜采集

1.在tsak5中文建pyhthon文件

2..复制网页的CURL地址

3．修改北京新发地网站地址

#北京新发地地址
xinfadi_url = http://www.xinfadi.com.cn/getPriceData.html'
#获取post请求方式
response = requests.post (xinfadi_url, headers=headers, data=data,
verify=False)

4.查看请求状态

#查看请求状态
print (response. status_code)

5．状态码返回结果

6.使用json格式请求数据

#使用json格式请求数据
data_json = response. json()
print (data_json)