lewis@110-CSDN博客

原创 scrapy项目导入自定义包(报错 xxxx包未找到）

from xxx(项目名称).utils.MysqlUtils import Connectionmysql。错误信息：未找到 xxxx包。

2024-10-16 12:04:15 163 2

原创记录一次完整的微信小程序+反编译+AES加、解密爬虫

微信小程序反编译、逆向过程。。。

2023-12-15 17:25:59 15855 12

原创 python 爬虫遇到字体加密解决方案(woff2) ddddocr + 百度ocr 文字识别

爬虫遇到字体加密，字体解密。ddddocr + 百度ocr 文字识别

2023-09-14 19:17:19 4151 1

原创 linux scp、expect 批量分发文件至多台机器

1、创建 iplist.txt 文件，内容如下： 192.169.0.1 193.190.5.6 194.180.05.42、创建shell 脚本#!/bin/bashlogfile=logs.logip_list='iplist.txt'from_file=/root/workfilesto_file=/usr/local/user=rootpasswd=123456echo "--------(begin)--------" >$...

2020-05-22 16:16:47 1934 1

原创智能对话机器人

参考地址：https://github.com/Sithuruwan/Interview-Bot安装环境： 1、python >=3，我安装的 python3.6.5其他库版本：tensorflow=1.8.0nltk=3.4.5tflearn=0.3.2djangopygubu=0.9.8.4scipy=1.3.1numpy=1.16.0...

2019-10-25 09:59:20 355

原创虚拟环境 virtualenv 使用方法简述

一、安装python 环境，pip install virtualenv 即可二、使用（windows 环境）①、进入工作目录 cd 文件夹名称②、创建虚拟环境 virtualenv 文件夹名称③、要删除一个虚拟环境，只需删除它的文件夹④、进入虚拟环境： cd 文件夹/Scripts/ 执行 activate⑤、退出虚拟环境...

2019-09-18 14:11:12 251

原创 linux .sh文件，简单命令执行重启scrapy 程序（批量kill pid、后台运行程序）

#!/bin/shecho "begin kill pid for jd spider project......."# 执行 scrapy 命令得出来的打印结果赋值给变量: 变量名称=$(cmd命令)scrapyname=$(scrapy list)echo "the scrapy name is : $scrapyname"# 查找该name，批量kill pidp

2017-10-27 14:01:50 1885 3

原创 python win7共享文件夹下载文件夹

windows环境读取共享文件夹文件，copy至本地。

2017-10-18 16:12:03 6573

原创 python 采集使用代理身份验证的3个情况

1、urllib2：proxy_support = urllib2.ProxyHandler({"http": "http://"+user+":"+pwd+"@%s" % proxiip})opener = urllib2.build_opener(proxy_support)urllib2.install_opener(opener)requestx = urllib2.R

2017-09-20 14:20:51 3878