JAJAJAJarvis的博客

之前帮别人做一个小东西，需要爬取网上的内容回填到Excel，由于想短时间内完成，所以选择了 python脚本 + mysql数据库存储数据 + excel设计简易交互界面 的形式。记录如下1.环境配置 + 基础用法：1.1.Python(requests + xlwings + pymysql + bs4)写爬虫并作为数据录入端1.1.1.requests + bs4用来爬取和筛选数...

准备工作：利用到的库： requests、time、re、threading、wx利用chrome抓包模拟校园网登录的python脚本：打开浏览器的开发者工具，在network中找到 所有场馆页面信息的url 和 发送订票请求的url。我在这次用到的有：url、requests_headers、form_data和cookies1.1 在python中学习用requests创建会话并且发送http...

使用python库wx的时候，定义多个wx.app()并且进入app.MainLoop()后(利用button事件调用另一个界面)，关闭界面后不会返回主进程，接下来要找个时间去学习一下wx库了...

留个问题：今天在爬取1688的商品详情页面的时候遇到了遇到了一个情况，获取运费的网页请求里面有个参数templateID页面里找不到，但是发现<scripy>节点里面{{vars.freightTemplateId}}这个代替了那个参数，应该是利用js传递或者生成的参数。不想使用selenium库....觉得这次绕不开去学习js了——20190909================...