- 博客(10)
- 收藏
- 关注
RSS订阅原创 二手房爬虫图形化界面
首先效果展示：刚运行的界面下面源代码部分：from bs4 import BeautifulSoup #网页解析，获取数据import re #正则表达式，进行文字匹配import urllib.request,urllib.error,urllib #制定URL，获取网页数据import xlwt #进行exclel操作import sqlite3 #进行SQLite数据库操作import ioimport sysimport csvimport requestsfro
2020-05-20 03:18:00
270
1
原创 scrapy的一些事
登录可以有以下操作：cookies:` def start_requests(self): cookies = "_s_tentry=-; Apache=1769401044437.5996.1588400454551; SINAGLOBAL=1769401044437.5996.1588400454551; ULV=1588400454765:1:1:1:1769401044437.5996.1588400454551:; login_sid_t=8111d554c0a2d6
2020-05-17 01:15:45
280
原创 小技巧集合(安装软件等等)
中国镜像源安装pyside库，正常安装速度很慢：pip install pyside2 -i https://pypi.douban.com/simple/安装mypy：pip3 install mypy
2020-05-12 11:28:05
133
原创 python跨目录导入文件问题
假设有目录如下：├── sub_ui.py├── main.py├── test/│ └── test1.py└── model/└── model1.py同级目录，main.py导入sub_ui.pyimport sub_ui或from sub_ui import *子目录，main.py导入model/model1.py需要在model/下建立__init__.py空文件，让编译器认为这是一个模块。import model.model1或from model.model
2020-05-11 19:01:21
247
原创 scrapy框架爬虫爬取网易电子书
笔记：Scrapy 安装：pip install scrapy若错误显示VC++14.0 Twister,则离线安装pip install ×××.whl验证是否安装成功：scrapy bench如果报错显示win32，则pip install pywin32入门实战：采集目标：网易电子书1.创建项目scrapy startproject xxx(项目名字)2.创建爬虫scr...
2020-05-06 13:42:16
201
原创 自学初级爬虫豆瓣电影Top250（爬虫基本套路）
spider.pyfrom bs4 import BeautifulSoup #网页解析，获取数据import re #正则表达式，进行文字匹配import urllib.request,urllib.error #制定URL，获取网页数据import xlwt #进行exclel操作import sqlite3 #进行SQLite数据库操作import ioimport sys...
2020-04-26 14:59:05
802
原创 下载安装django
下载安装django可以用下面的方法换源下载：pip install -i https://pypi.douban.com/simple django下载速度很快，成功
2020-04-03 23:21:49
124
1
原创 git将本地项目导入码云一些bug以及解决方法
1、码云上新建一个仓库，如：testgit (名字随便)2、本地创建一个文件夹D:/testgit，然后在文件夹内使用Git Bash Here3、使用 git init 命令 ，初始化一个git 本地仓库（项目）,会在本地创建一个 .git 的文件夹4、使用git remote add origin + 码云上复制的项目地址 //添加远程仓库（尽量使用ssh）5、使用 git pull ...
2020-03-31 17:43:00
187
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人