python
虾米吃螃蟹
这个作者很懒,什么都没留下…
展开
-
MySQL-python: Commands out of sync问题解决
问题一次在使用cursor进行alter table 增加字段时,出现了第一次部分字段无法增加,第二次才能增加的情况。于是开启在脚本中增加日志,发现报错信息:Commands out of sync解决过程首先先上bing搜索,发现比较多的都是说执行了多次,但是只获取了一次查询结果,再次调用 mysql_free_result()即可解决。这时解决问题的思路转为为何会执行多次,再次查看文章给了思路,先去看了执行日志确实执行了两条,然后在执行第三条时报错,然后去看配置文件发现在字段配置后出现了换行符。到原创 2021-03-19 21:33:16 · 1379 阅读 · 0 评论 -
python爬虫框架-scrapy简介
本博客内容来自于拓海的博客 1、框架简介 组件 Engine: 引擎负责控制数据流在系统中所有组件中流动,并在相应动作发生时触发事件。 Scheduler: 调度器从引擎接受Request并将他们入队,以便之后引擎请求他们时提供给引擎。 Downloader: 下载器负责获取页面数据并提供给引擎,而后提供给Spider。 Spiders: Spider是Scrapy用户编写的用于分...转载 2018-06-08 09:50:26 · 194 阅读 · 0 评论 -
Python爬虫框架-scrapy入门一
准备工作安装指南 一、创建项目 1、新建文件夹运行如下命令scrapy startproject tutorial 创建tutorial文件夹,结构如下:tutorial/ scrapy.cfg # 项目的配置文件 tutorial/ # 该项目的python模块。之后您将在此加入代码 __init__....原创 2018-06-09 21:56:51 · 202 阅读 · 0 评论