Python3抓取糗百、不得姐、kanqu.com

2109人阅读 评论(1) 收藏 举报
测试电脑配置有点低,正常配置速度会比较快.



有问题可以加群:544471255 交流.


使用必看:


1.该代码使用Python3.6+版本;
2.需要安装依赖库如下(可使用类似:pip install requests进行安装.下面括号中的版本号是我本机的版本号):
        requests(2.12.4);
        BeautifulSoup(4.5.1)(安装方式有差异,使用[ pip install beautifulsoup4 ]安装4.X版本);
        urllib3(1.19.1);
3.本程序去掉了数据库部分(只为了更简单的......追求),但程序中已整理完所有数据(可自行选择数据库并进行新增等操作)[搜索函数:insertDataDB];
4.本程序仅供测试、学习之用,抓取的数据版权归原作者.
5.安装完依赖库之后,直接运行程序,等一会即可输出相应数据.

6.必须依赖:UserTools.py(这是一个工具脚本).


源码下载:http://download.csdn.net/detail/dcxy0/9835268


压缩包内文件说明:

UserTools.py(工具脚本,必须包含)

main.py(主程序脚本,必须包含)

demo.gif(运行示例)


关注:http://www.suancaiyu.xyz

程序仅供学习测试。

运行示例如下(测试电脑配置有点低,正常配置速度会比较快.):




查看评论

Python3抓取糗百、不得姐、轻松一刻,完整可运行源码程序

  • 2017年05月06日 18:36
  • 1.03MB
  • 下载

十五行代码爬取百思不得姐网站数百视频

看完这个爬虫教学视频,亲自实验了一下,提取视频关键内容,得出此文。 用不超过15行代码爬取百思不得姐网站上的视频: 爬取地址:http://www.budejie.com/video/ ...
  • qq_33639867
  • qq_33639867
  • 2017-02-06 10:33:24
  • 864

Python3 定向爬虫之“抓取糗事百科图片”

#--*--coding:utf-8--*-- #抓取糗事百科图片,并保存到文件夹中import re import urllib.request from urllib.error import U...
  • qq_28766327
  • qq_28766327
  • 2016-03-30 22:23:17
  • 526

Python3.4简单爬虫实现之抓取糗事百科段子

网上的python教程大都是2.X版本的,python2.X和python3.X相比较改动比较大,好多库的用法不太一样,我安装的是3.4.1,就用3.4.1实现一下网页内容抓取 首先是库,2...
  • King_818
  • King_818
  • 2016-03-01 15:30:53
  • 3744

iOS-仿百思不得姐app

仿百思不得姐app
  • yangmeng13930719363
  • yangmeng13930719363
  • 2016-03-21 15:04:32
  • 1717

百思不得姐(4.5.6)最新版高仿

你点进去肯定会喜欢,所以请不要吝啬你的star,点击打开链接,去下载吧  GitHub:  https://github.com/targetcloud/baisibudejie...
  • callzjy
  • callzjy
  • 2017-05-31 17:03:20
  • 866

[python3]糗事百科爬虫

python3的糗事百科爬虫
  • a472770699
  • a472770699
  • 2016-09-13 11:20:22
  • 527

android 版 重写百思不得姐的app项目代码

  • 2016年10月24日 18:34
  • 5.47MB
  • 下载

Python 爬虫,爬取”百思不得姐“搞笑视频

# -*- coding:utf-8 -*- import urllib import re import MySQLdb import sys import os #print sys.getdef...
  • gf574723691
  • gf574723691
  • 2016-10-08 14:43:45
  • 715

python爬虫系列三:爬取糗百成人的妹子图片(scrapy框架+正则)

python爬虫系列三:爬取糗百成人的妹子图片(scrapy框架+正则)windows下scrapy的安装具体的安装使用,详见scrapy官网:http://scrapy-chs.readthedoc...
  • u010445540
  • u010445540
  • 2017-03-03 13:13:24
  • 1207
    个人资料
    等级:
    访问量: 2085
    积分: 32
    排名: 195万+
    文章分类
    文章存档
    最新评论