爬虫
文章平均质量分 81
lfq0404
这个作者很懒,什么都没留下…
展开
-
python爬虫、Django项目-电子词典
环境:Ubuntu16.04 + python3.5.2 + Django1.11.8功能点:1、将 "常用单词.txt" 的翻译存入数据库中2、实现用户的注册、登录验证3、查询单词 1、若数据库中存在,则返回数据库中的信息 2、若数据库中不存在,则爬取有道中的翻译并返回,同时提示是否保存到本地 1、是:保存到本地数据库 2、否:返回到查询页继续查询步骤:1...原创 2018-04-25 19:46:51 · 1124 阅读 · 1 评论 -
scrapy保存数据到MySQL-insert_db统一方法
如果items定义的字段名与MySQL的字段名一致,在pipielines的xxxPipeline.insert_db中,则可以使用以下代码统一处理 # 插入数据 def insert_db(self, item): """ 如果数据库的列名与items一致,则可以用该方法统一处理 :param item: :return...转载 2019-04-16 10:06:12 · 318 阅读 · 0 评论