- 博客(15)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 2、scrapy模块爬取简书
scrapy模块爬取简书文章目录scrapy模块爬取简书1、创建爬虫1.1、使用pycharm打开项目，并在项目目录中创建爬虫启动文件1.2、修改settings.py文件1.3、修改爬虫文件 jianshu.py1.4、启动startjianshu.py文件，测试爬取2、获取某一篇文章的内容2.1、先确定想要获取到的数据2.2、对想要的内容进行解析获取3、获取右侧的推荐阅读的文章，获取到推荐阅读的url4、循环爬取1、创建爬虫scrapy startproject jianshuNote # 创
2020-12-09 20:30:09
478
原创 1、scrapy模块的简单使用
scrapy模块目录安装scrapy创建一个项目安装scrapy# 如果安装了conda 直接使用conda install scrapy# 使用pip 安装pip install scrapy# 安装出错# 如果是Twisted安装出错，进入官网https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml# 找到Twisted安装包，下载下来之后使用 pip 安装创建一个项目打开一个cmd，进入安装scrapy的环境创建一
2020-12-09 17:04:11
206
原创 爬虫基础
爬虫目录基础知识：Python基础字符串列表 字典操作文件写入操作，csv、json、txt文件的写入操作爬虫部分xpath语法网址结构其他部分数据库操作Python基础返回目录##### 字符串# 去空格，以及首尾多余的\n \r >>>a = ' \n erefe\r'>>>a = a.strip()>>>aerefe# 转换成列表>>>b = '1,2,3,4,
2020-12-09 17:03:43
293
原创 deepin深度系统安装docker
在网上搜索的教程，结合自己的实际操作deepin安装docker先检查以前是否有安装过，有就删除掉sudo apt-get remove docker.io docker-engine添加docker源deb [arch=amd64] https://download.docker.com/linux/ubuntu bionic stable# 上面的是国外的源，我找到了国内的源，最后更新的docker的时候我才添加的，如果之后操作有误，可以先使用国外的官方源试试deb [arch=amd
2020-11-21 16:23:00
1268
原创 opencv+tkinter录像程序
opencv+tkinter 实现录屏控制环境:opencvpython3PIL (pillow)编辑器:vscode模块导入 为了方便之后的打包，统一使用from导包from tkinter import Label, Button, Tk, Frame, ttk, Entry, StringVarfrom cv2 import VideoCapture, waitKey, VideoWriter, VideoWriter_fourcc, putText, cvtColor, d
2020-11-20 22:28:31
933
3
原创 系统盘格式化数据恢复
系统磁盘格式化，数据恢复电脑误格式化思考事情经过总结电脑误格式化本地系统在重启的时候不小心被学校的恢复系统格式化掉了，然后开始了痛苦的数据恢复过程ps:本地的数据全没有了，白天心痛到无法呼吸，晚上心痛到无法入眠，谨以此文告诫自己以及有着相同遭遇的不幸的人思考事情经过我一开始使用的是移动硬盘里的ubuntu系统（因为我本地windows系统全机械盘，过于卡顿）然后我安装好了gnome之后打算重启一下，然后就开始了，我重启的时候突然就还原成学校的系统了。。。：后来大佬过来帮我重装了系统（虽然我自己也
2020-11-17 13:07:13
601
原创 局域网使用树莓派配置内网穿透
使用frp配置内网穿透硬件设施：centos 主机 树莓派4b下载对应的frp下载地址 https://github.com/fatedier/frp/releases 我下载的分别是对应的压缩文件分别上传到对应的主机（解压缩过程请自行百度）服务器端：主要使用frps和frps.ini文件客户端：主要使用frpc和frpc.ini文件配置对应的文件服务器端 frps.ini文件[common]bind_port = 7000 # frp绑定的本机端口token =
2020-11-07 09:13:10
633
原创 windows10子系统ubuntu使用nmap扫描出现Couldn‘t open a raw socket. Error: Permission denied (13)
权限问题出现错误Couldn’t open a raw socket. Error: Permission denied (13)解决Ubuntu不具有windows的权限，即使是root用户也没有权限右键使用管理员权限打开子系统，重新扫描，就OK了结束！
2020-07-12 08:53:30
2967
1
原创 python的print()方法你真的get了么?（一）
起因于老师写的一小段代码说实话我从来觉得print()方法有什么特别的，一直都在用偶尔加个end,sep啥的也都不是问题但是老师的这句代码我刚开始看的时候居然没明白啥意思，file后面的是一个open的文件对象，我看file分明是一个参数，可是我怎么不知道还有file这个参数，虽然老师写的其他代码也一样看不懂，参数也都不知道，但是！但是print()这个最常用的我居然不知道赶紧ctrl一...
2020-04-16 21:23:28
340
原创 python编写简单的EXE启动器
exe启动器放假到现在一直憋在家里，最近实在无聊，就下了两个游戏玩，玩的时候，因为快捷方式放桌面感觉有点麻烦，path文件下图标有太多，就想起了自己编写一个exe启动器，就像是Readon 这个虽然好用，但是我感觉自己要是可以写出来一个就好了，现在还懒得添加游戏，自己写的才有兴趣添加我的思路很简单：可以列出已添加的EXE文件可以添加EXE文件，通过写入路径可以删除已经添加的EXE文件...
2020-02-12 22:21:10
3200
原创 Linux PATH环境变量配置错误
PATH 环境变量配置错误使用xshell连接的linux正确的export PATH=.:$PATH:${JAVA_HOME}/bin错误的export PATH=.:PATH:${JAVA_HOME}/bin结果就是...[root@master h3cu]# vi /etc/profile[root@master h3cu]# source /etc/profile[ro...
2020-01-19 13:48:24
819
2
原创 mysql登录1045错误
root@7b59350e395c:/# mysql -u root -pEnter password: ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: YES)使用docker安装好mysql之后登录竟然出了这样的错误记得之前在windows上安装mysql时页了这样的错误，上...
2019-12-31 12:04:52
151
原创 下载短篇小说存储到文件夹中
还是上次的网站，哎嘿嘿嘿上代码import requestsimport reimport osclass Update: def __init__(self): self.count1 = 0 self.count2 = 0 self.head = {'User-Agent': 'Mozilla/5.0 (Windows ...
2019-12-30 16:05:35
260
原创 爬取网页小说并存储到新建的文件夹里
import requestsimport reimport os# https://www.kanunu8.com/book3/8257/def main(): url = 'https://www.kanunu8.com/files/16.html' # 小说主页的网址 r0 = requests.get(url).content.decode('gbk') ...
2019-12-29 19:48:25
530
exe启动器.exe
2020-03-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人