Python分布式爬虫搜索引擎
文章平均质量分 82
学习笔记
咖啡要加奶
我的咖啡得加奶
展开
-
bug记录——selenium webdriver chrome 启动时奔溃
下载与chorm版本对应的chormchorm对应各版本下载地址.版本对应后仍失败chrome_options = Options()chrome_options.add_argument('--headless')chrome_options.add_argument('--no-sandbox')chrome_options.add_argument('--disable-de...原创 2020-04-16 12:19:01 · 388 阅读 · 0 评论 -
pycharm中 新建scrapy项目,spider文件,crawlspider文件
打开pycharm,点击Terminalcd 到准备创建scrapy项目的目标文件夹下创建scrapy项目scrapy startproject 项目名称 如:scrapy startproject job4. 创建成功后的目录创建spider文件创建项目成功后的提醒:You can start your first spider with: ...原创 2020-04-14 18:15:39 · 1099 阅读 · 0 评论 -
bug记录——python对于elasticsearch-dsl的创建mapping报错
在学习python搜索引擎中,python对于elasticsearch-dsl的创建mapping报错:elasticsearch.exceptions.RequestError: RequestError(400, ‘mapper_parsing_exception’, 'Root mapping definition has unsupported parameters: [praise_...原创 2020-03-25 20:53:28 · 737 阅读 · 0 评论