以下是用Python编写的爬取淘宝价格的程序:
# coding:utf-8
"""
Compatible for python2.x and python3.x
requirement: pip install requests
"""
from __future__ import print_function
import requests
# 请求示例 url 默认请求参数已经做URL编码
url = "api-gw.xxx.cn/taobao/item_get/?key=<您自己的apiKey>&secret=<您自己的apiSecret>&num_iid=652874751412&is_promotion=1"
headers = {
"Accept-Encoding": "gzip",
"Connection": "close"
}
if __name__ == "__main__":
r = requests.get(url, headers=headers)
json_obj = r.json()
print(json_obj)
这段代码使用requests
库发送HTTP请求,使用BeautifulSoup
库解析HTML响应内容。首先构造搜索关键字的URL,然后发送请求获取响应。接着,使用select
方法提取商品价格信息,并将其存入一个列表中。最后,打印出所有价格。
1.请求方式:HTTP POST GET; 复制Taobaoapi2014获取APISDK文件
2.请求URL: