python 生意参谋_GitHub - iOSDevLog/sycm: 生意参谋

sycm

生意参谋

需求

帮朋友做一个生意参谋的软件，需求如下。

首先选中两个竞品

再把更新时间选为日，获取每一天的数据再合并

竞品入店搜索词 后面选择 无线端

需要把 引流关键词 和 成交关键词 的数据导出 Excel

分析

第 4 点只要导出 csv 文件应该就可以了。

主要任务就是模拟一天一天的获取数据。

首先想到的解决方案是用爬虫，不过要动态获取。 X

再想要用 selenium 等模拟浏览器行为： 麻烦。 X

最后还是抓包再说。 O

用 Charles 抓取数据，对比后发现返回的是 json 模式数据。O O

好了，这下方便多了，分析一下 url 及返回数据格式。

还有一个登录的问题，我这里用最简单的，获取 Chrome 的 cookie，放到请求头中。

编码

花了 2 天时间，数据可以获取成功了，其中遇到不少坑。

比如 引流关键词 和 成交关键词 返回数据大概相同，我就用同一数据，结果问题报错。

后来才发现，里面的有一个字段不一样，郁闷。

cookie 本来想用 browsercookie 处理，后来发现不行，最后还是写到 cookie String 里面。

GUI