- 博客(5)
- 收藏
- 关注
RSS订阅原创 Scrapy爬取妹子图
Scrapy爬取妹子图详解代码编写items.pypipelines.pysettings.pyspiders.py scrapy的安装此处不做详细介绍，网上有跟多教程，可以自己找一下，直接上代码。 先看一下我们要开始爬的页面，将地址栏中的地址复制，作为我们的其实爬取点，也就是scrapy中的start_urls，然后提取图片的地址，利用scrapy自有的ImagesPipeline进行下载图片。...
2019-07-29 14:00:05
451
原创 VSCode调试Scrapy
VSCode调试Scrapy 在项目中新建python文件，该文件位置与settings.py这堆文件平级就可以了，然后添加以下代码，按F5就可以和调试平常的python代码一样调试scrapy程序了 from scrapy.cmdline import execute import os # 获取当前文件路径 dirpath = os.path.dirname(os.path.abspath(_...
2019-04-16 17:38:58
1504
原创 新手入门爬虫lxml+Requests+MongoDB
新手入门爬虫lxml+Requests+MongoDB测试爬取一加社区 测试爬取一加社区 import requests from lxml import etree import pymongo import proxyIP import time def get_UrlInfos(url,proxyIp): header = { 'User-Agent': 'Mo...
2019-03-26 21:55:44
221
原创 Sublime Text 3176安装package control加汉化
Sublime Text 3176官网最新版Package Control最简单的方法附带汉化方法 官网最新版 Package Control 关于破解不做太多介绍，网上随便找个注册码就可以破解！ 目前介绍最多的两种安装的方法： 1、使用官网给的代码，在console中输入进行安装 直接复制代码进行安装，基本上是不可能安装成功的，会提示连接超时 2、手动下载，然后替换到文件夹中进行手动安装 比较麻...
2019-01-31 13:47:17
392
原创 迅雷9边下边播绑定第三方播放器
迅雷9边下边播绑定第三方播放器测试版本（迅雷9绿色版）测试播放器 测试版本（迅雷9绿色版） 测试播放器 目前通过测试可以使用的播放器为potplayer、爱奇艺万能播放器，再加上又重新开始更新的QQ影音，之前的迅雷版本通过修改Xmp.ini文件可以调用第三方播放器进行边下边播，但是迅雷9却不可以了。。。 所以新的解决办法是修改注册表，修改内容如下： QQ影音通过测试发现根本就无法打开迅雷的下载...
2019-01-01 10:48:50
2996
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人