![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
LINZHENYU1996
这个作者很懒,什么都没留下…
展开
-
python 批量保存网页中的超链接网址源代码
python 批量保存网页中的超链接网址源代码原创 2017-03-19 00:10:33 · 1998 阅读 · 0 评论 -
Python之采集速卖通商品数据
访问网页类:1.模拟浏览器登陆,获取cookies2.利用requests访问页面源码3.cookies具有时效性,如果超出设定时间则重新登陆并更新它class Browser: req = None timePre = None def __init__(self): Browser.timePre = datetime.now()...原创 2019-04-23 00:21:42 · 7736 阅读 · 1 评论 -
python 批量下载图片
# -*- coding: cp936 -*-import urllib2import imghdrimport os#connect to a URLf1 = open("picfiles.txt") line = f1.readline() n=1while line: n=n+1 line=line.strip(...原创 2018-06-13 22:15:35 · 2718 阅读 · 0 评论 -
python base64
采集数据时碰到文件名用js控制加密,现利用python中的base64模块进行解密base64.# -*- coding: cp936 -*-import urllib2import base64import os#connect to a URLf1 = open("test.txt") # files nameline = f1.readline() ...原创 2018-06-13 22:12:57 · 295 阅读 · 0 评论 -
Python亚马逊采集之emoj表情过滤
除了上篇所说的,通过设置数据库编码格式和修改连接数据库的方式,如果我们不大需要其中的emoj表情,我们也可以过滤掉文本中的emoj表情。#3.过滤代码import redef emoj_fillter(src_string): try: highpoints = re.compile(u'[\U00010000-\U0010ffff]') except re.er...原创 2018-02-14 02:04:26 · 2062 阅读 · 0 评论 -
Python爬虫之Emoj表情无法插入数据库Mysql
#1.修改配置文件my.ini[client]port=3306default-character-set=utf8mb4[mysql]port=3306default-character-set=utf8mb4[mysqld]port=3306character-set-client-handshake= FALSEcharacter-set-server= ...原创 2018-02-14 01:50:37 · 963 阅读 · 0 评论 -
Python之在Windows下BeautifulSoup安装
1.下载 BeautifulSoup包。 http://www.crummy.com/software/BeautifulSoup/bs4/download/2.解压到python目录下,然后进入到BeautifulSoup的目录。 我的目录是C:\python27\beautifulsoup43.到cmd中,进行安装 (1)进入到你的BeautifulSoup4所在目录 (2)...原创 2018-02-27 00:11:50 · 517 阅读 · 0 评论 -
Python之亚马逊反爬虫User-Agent和IP
#1.User-Agent user_agent={"user-agent":"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.2; SV1; .NET CLR 1.1.4322)"} user_agents =['Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/535.8 (KHTML,...原创 2018-02-12 00:45:54 · 6310 阅读 · 0 评论 -
Python之Pycharm连接mysql一系列问题
问题来源于一个批量抓取某电商网站商品信息的程序,打算用Python实现,中途碰到了本地MYSQL链接不上/相关库没有安装/数据插入失败等一系列问题。#1.本地mysql连接不上排查原因:mysql-python包没有安装解决方法:下载MySQL-python-1.2.3.win-amd64-py2.7.exe安装#2.pymysql没有安装解决方法:下载PyMySQL在程序目录下运行命令pytho...原创 2018-02-10 22:40:14 · 1256 阅读 · 0 评论 -
Python 批量下载文件
Python 批量下载文件 模仿下载工具 突破文件数限制原创 2017-09-14 00:17:20 · 3259 阅读 · 0 评论 -
Python 批量合并多个txt文件
Python 批量合并多个txt文件原创 2017-09-14 00:15:35 · 19767 阅读 · 4 评论 -
Python 翻译文章 txt文件
使用python翻译文章 文章存储成txt文件 支持多个文件原创 2017-09-14 00:10:29 · 2190 阅读 · 1 评论 -
Python 抓取文章网url及其文章
使用python抓取文章:先抓取文章网的url,再用url抓取文章,存入本地txt文件。原创 2017-09-13 23:58:25 · 642 阅读 · 0 评论 -
Python 测试密码极速爆破工具 – cheetah
Python 测试密码极速爆破工具 – cheetah 。cheetah需requests模块。为安装requests模块但是还没有setuptools模块。原创 2017-04-19 17:14:26 · 2890 阅读 · 1 评论 -
Python之采集速卖通商品数据 2
访问网页类:https://blog.csdn.net/LINZHENYU1996/article/details/89464018数据库操作类:1.插入数据,返回插入主键id2.更新数据class DBHelper(): def __init__(self): self.host = "localhost" self.port = 33...原创 2019-04-23 00:24:02 · 3378 阅读 · 1 评论