Zyuchen

Embrace the World

Python之采集速卖通商品数据 2

访问网页类:https://blog.csdn.net/LINZHENYU1996/article/details/89464018 数据库操作类: 1.插入数据,返回插入主键id 2.更新数据 class DBHelper(): def __init__(self): ...

2019-04-23 00:24:02

阅读数 102

评论数 0

Python之采集速卖通商品数据

访问网页类: 1.模拟浏览器登陆,获取cookies 2.利用requests访问页面源码 3.cookies具有时效性,如果超出设定时间则重新登陆并更新它 class Browser: req = None timePre = None def __init...

2019-04-23 00:21:42

阅读数 183

评论数 0

python 批量下载图片

# -*- coding: cp936 -*- import urllib2 import imghdr import os #connect to a URL f1 = open("picfiles.txt") line = f1.r...

2018-06-13 22:15:35

阅读数 927

评论数 0

python base64

采集数据时碰到文件名用js控制加密,现利用python中的base64模块进行解密base64.# -*- coding: cp936 -*- import urllib2 import base64 import os #connect to a URL f1 = open("...

2018-06-13 22:12:57

阅读数 109

评论数 0

Python之在Windows下BeautifulSoup安装

1.下载 BeautifulSoup包。    http://www.crummy.com/software/BeautifulSoup/bs4/download/2.解压到python目录下,然后进入到BeautifulSoup的目录。 我的目录是C:\python27\beautifulsou...

2018-02-27 00:11:50

阅读数 126

评论数 0

Python亚马逊采集之emoj表情过滤

除了上篇所说的,通过设置数据库编码格式和修改连接数据库的方式,如果我们不大需要其中的emoj表情,我们也可以过滤掉文本中的emoj表情。#3.过滤代码import re def emoj_fillter(src_string): try: highpoints = re.c...

2018-02-14 02:04:26

阅读数 419

评论数 0

Python爬虫之Emoj表情无法插入数据库Mysql

#1.修改配置文件my.ini[client] port=3306 default-character-set=utf8mb4 [mysql] port=3306 default-character-set=utf8mb4 [mysqld] port=3306 character-...

2018-02-14 01:50:37

阅读数 257

评论数 0

Python之亚马逊反爬虫User-Agent和IP

#1.User-Agent user_agent={"user-agent":"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.2; SV1; .NET CLR 1.1.4322)&...

2018-02-12 00:45:54

阅读数 2173

评论数 0

Python之Pycharm连接mysql一系列问题

问题来源于一个批量抓取某电商网站商品信息的程序,打算用Python实现,中途碰到了本地MYSQL链接不上/相关库没有安装/数据插入失败等一系列问题。#1.本地mysql连接不上排查原因:mysql-python包没有安装解决方法:下载MySQL-python-1.2.3.win-amd64-py2...

2018-02-10 22:40:14

阅读数 469

评论数 0

Linux 搭建 ss加速器

Linux 搭建 ss加速器 2017

2017-10-14 23:59:48

阅读数 4164

评论数 0

Python 批量下载文件

Python 批量下载文件 模仿下载工具 突破文件数限制

2017-09-14 00:17:20

阅读数 1723

评论数 0

Python 批量合并多个txt文件

Python 批量合并多个txt文件

2017-09-14 00:15:35

阅读数 8587

评论数 1

Python 翻译文章 txt文件

使用python翻译文章 文章存储成txt文件 支持多个文件

2017-09-14 00:10:29

阅读数 499

评论数 0

Python 抓取文章网url及其文章

使用python抓取文章:先抓取文章网的url,再用url抓取文章,存入本地txt文件。

2017-09-13 23:58:25

阅读数 302

评论数 0

Python 测试密码极速爆破工具 – cheetah

Python 测试密码极速爆破工具 – cheetah 。cheetah需requests模块。为安装requests模块但是还没有setuptools模块。

2017-04-19 17:14:26

阅读数 1302

评论数 1

python 批量保存网页中的超链接网址源代码

python 批量保存网页中的超链接网址源代码

2017-03-19 00:10:33

阅读数 753

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭