关闭

Python3抓取糗百、不得姐、kanqu.com

1883人阅读 评论(1) 收藏 举报
测试电脑配置有点低,正常配置速度会比较快.



有问题可以加群:544471255 交流.


使用必看:


1.该代码使用Python3.6+版本;
2.需要安装依赖库如下(可使用类似:pip install requests进行安装.下面括号中的版本号是我本机的版本号):
        requests(2.12.4);
        BeautifulSoup(4.5.1)(安装方式有差异,使用[ pip install beautifulsoup4 ]安装4.X版本);
        urllib3(1.19.1);
3.本程序去掉了数据库部分(只为了更简单的......追求),但程序中已整理完所有数据(可自行选择数据库并进行新增等操作)[搜索函数:insertDataDB];
4.本程序仅供测试、学习之用,抓取的数据版权归原作者.
5.安装完依赖库之后,直接运行程序,等一会即可输出相应数据.

6.必须依赖:UserTools.py(这是一个工具脚本).


源码下载:http://download.csdn.net/detail/dcxy0/9835268


压缩包内文件说明:

UserTools.py(工具脚本,必须包含)

main.py(主程序脚本,必须包含)

demo.gif(运行示例)


关注:http://www.suancaiyu.xyz

程序仅供学习测试。

运行示例如下(测试电脑配置有点低,正常配置速度会比较快.):




0
0
查看评论
发表评论
* 以上用户言论只代表其个人观点,不代表CSDN网站的观点或立场

使用scrapy抓取糗事百科

scrapy抓取糗事百科
  • wangande105108
  • wangande105108
  • 2016-03-03 22:35
  • 1530

微信小程序实战之百思不得姐精简版

微信小程序基本组件和API已撸完,总归要回到正题的,花了大半天时间做了个精简版的百思不得姐,包括段子,图片,音频,视频,四个模块。这篇就带着大家简述下这个小的APP,源码会放到GitHub上欢迎sta...
  • u014360817
  • u014360817
  • 2016-10-08 07:38
  • 10635

python爬虫系列一:爬取糗百成人的妹子图片(urllib2)

撸叼屎是我朋友,单身已久,每天让我给介绍妹子,于是我写了一个python爬虫来暂时满足他。 给撸叼屎的程序#!/usr/bin/env python # -*- coding: utf-8 -*- f...
  • u010445540
  • u010445540
  • 2016-09-22 18:27
  • 2933

Python3抓取糗百、不得姐、轻松一刻,完整可运行源码程序

  • 2017-05-06 18:36
  • 1.03MB
  • 下载

Python学习笔记(Django篇)——3、创建第一个数据库模型 https://www.cnblogs.com/leejy/p/6745186.html

Python学习笔记(Django篇)——3、创建第一个数据库模型 Django里面集成了SQLite的数据库,对于初期研究来说,可以用这个学习。   第一步,创建数据库就涉及到建表等一系列...
  • u014449220
  • u014449220
  • 2017-12-23 10:31
  • 131

Python 3 中调用 COM 的库文件

在 Python 2.x 时代貌似有支持 COM的。 http://svn.python.org/projects/ctypes/tags/release_0_6_2/ctypes/win32/com...
  • polytechnic
  • polytechnic
  • 2012-08-20 12:52
  • 3349

用python3抓取必应美图的demo

  • 2018-01-07 11:32
  • 5KB
  • 下载

python3 抓取必应bing首页图片作为桌面背景

  • 2015-12-21 10:19
  • 2KB
  • 下载

python爬虫学习之路(3)_ 糗百故事爬取(改)

本人初学,教程出处:http://cuiqingcai.com/990.html 原文中的内容相当精辟,我就不再总结了(显得有点多余)!原文代码有些旧,自己改了一下,更新了一些 主要思路:     ...
  • woyizhidouzai0505
  • woyizhidouzai0505
  • 2016-10-20 17:13
  • 243

Python学习手册(第4版)(blog.snsgou.com推荐).part2.rar

  • 2014-06-18 11:44
  • 32.04MB
  • 下载
    个人资料
    • 访问:1859次
    • 积分:29
    • 等级:
    • 排名:千里之外
    • 原创:1篇
    • 转载:0篇
    • 译文:0篇
    • 评论:1条
    文章存档