商品采集接口地址(python3):
param = {
'q': q,
'page': page,
'is_new_query': '1',
'size': '50',
}
ret = requests.get(url = "http://mobile.yangkeduo.com/proxy/api/search" ,params=param, headers = headers)
采集过程中会返回货不对版的数据,以及40002,40001等错误代码。
这个问题是因为小号被风控所导致。
小号登录时所产生的user-agent必须对应,否则更容易被风控
其次是IP地址。
当然目前也有比较好的三方解析接口,数据也是实时的: