Byfar

原创 油猴脚本hook cookie 生成

插件 tampermonkey [油猴] 管理器# hook cookie 生成Object.defineProperty(document, 'cookie', { get: function() { console.log('getcookie'); debugger; return "";...

原创 文件夹操作

# 获取当前文件的上上层文件夹os.path.dirname(os.path.dirname(os.path.abspath(__file__)))

原创 Linux 笔记

linux查看谷歌版本：/usr/bin/google-chrome -versionCentOS 7 进行PPPOE拨号上网https://www.cnblogs.com/gotodsp/p/5513945.html?tdsourcetag=s_pctim_aiomsg

转载 scrapyd源码流程

原创 log模板

# scrapy_plus/utils/log.pyimport sysimport logging# 默认的配置DEFAULT_LOG_LEVEL = logging.INFO # 默认等级DEFAULT_LOG_FMT = '%(asctime)s %(filename)s [line:%(lineno)d] %(levelname)s: %(message)s' # ...

原创 框架安装setup.py

以下代码相当于一个模板，只用更改name字段出，改为对应的需要安装的模块名称就可以，比如这里是：scrapy_plus 将setup.py文件放到scrapy_plus的同级目录下from os.path import dirname, join# from pip.req import parse_requirementsfrom setuptools import ( f...

转载 【Python爬虫错误】'scrapyd-deploy' 不是内部或外部命令，也不是可运行的程序或批处理文件

【Python爬虫错误】‘scrapyd-deploy’ 不是内部或外部命令，也不是可运行的程序或批处理文件 环境：python3.7在部署分布式的时候，安装好scrapyd-client之后，运行scrapyd-deploy出现 “'scrapyd-deploy' 不是内部或外部命令，也不是可运行的程序或...