- 博客(9)
- 收藏
- 关注
RSS订阅原创 爬虫从入门到放弃（四）
哈哈月初的时候老大给我下的爬虫“初级”任务，到九月的最后一天才开始搞???? 哎国庆前一天还要上班，真苦逼，只能搞搞爬虫玩一玩了233 ok，进入正题，今天要爬京东图书的数据，所有的图书。这次没有限制，随意发挥，想用什么库都可以，只要能爬???? 1.初步分析 既然是要爬所有的图书，那么就得找到所有图书的分类列表，因为分类列表肯定是有全部图书的分类，这一步就可以得到分类list。 进入京东图书，在左边导航栏...
2019-09-30 16:11:46
136
原创 mac中安装Jenkins+jdk
Jenkins是基于Java开发的一种持续集成工具，用于持续的软件版本发布/测试项目，并监控外部调用执行的工作。简单来说就是自动化测试+部署。 首先我们需要安装jdk，注意，目前jenkins只支持jdk8，不要下载更高版本的jdk 官网地址：https://www.oracle.com/technetwork/java/javase/downloads/index.html 下拉选择这个版本： ...
2019-09-29 15:10:40
321
原创 Unittest框架的从零到壹（一）
诶，搞搞自动化测试框架吧，真的就是从0到1，手把手教学！????其实我也不会… 希望大家能从本系列文章中，学会并能运用于实战当中！ 前言 Python中有非常多的单元测试框架，如unittest、pytest、nose、doctest等，Python2.1及其以后的版本已经将unittest作为一个标准模块放入Python开发包中。并且在pytest框架中，是可以兼容运行unittest的代码的，简单...
2019-09-29 11:37:20
119
原创 Unittest框架的从零到壹（一）
诶，搞搞自动化测试框架吧，真的就是从0到1，手把手教学！????其实我也不会… 希望大家能从本系列文章中，学会并能运用于实战当中！ 前言 Python中有非常多的单元测试框架，如unittest、pytest、nose、doctest等，Python2.1及其以后的版本已经将unittest作为一个标准模块放入Python开发包中。并且在pytest框架中，是可以兼容运行unittest的代码的，简单来...
2019-09-29 10:01:16
115
原创 爬虫从入门到放弃（三）
行吧，第三篇依然是一个简单的爬虫项目，毕竟新手还是要多练练手，熟悉了基本requests和re的使用，以及分析简单的爬虫项目，那么就可以往上进阶了。 今天这个项目主要是训练代码的封装，以及json模块的使用，想学的旁友认真看哈????♂️ 项目地址：https://movie.douban.com/explore#!type=movie&tag=%E7%83%AD%E9%97%A8&am...
2019-09-29 10:00:16
121
原创 爬虫从入门到放弃（二）
????来到第二篇爬虫入坑文章，寻思着第二篇应该放哪一个项目上来比较好，经过考虑，把一个较为简单的放上来了。 直接进入正题，介绍这次项目-任意贴吧的爬虫???? 要求： 可以指定贴吧名称, 起始页与结束页 爬取帖子标题、摘要、贴主（楼主）、帖子回复数、最后评论人 只能用requests、re实现 看过上一篇爬虫系列文章的同学应该清楚大致的爬虫流程了，我们再来回顾一哈 从url中提取响应内容 分析响应...
2019-09-29 09:59:07
164
原创 爬虫从入门到放弃（一）
分享一波爬虫从0.1到1的实战经验以及总结，特开此系列记录???? 为什么说是从0.1而不是0呢，因为当前仅有一些爬虫的基础知识而已，对于框架与实战经验的认知均为0。所以要是大佬打开了这篇文章，可能要让你失望了哈哈哈 每一个项目基本上都是边学边做，因为在实战中有很多坑，太少的知识储备让我在坑里爬不上来…希望各位看官也能从中学到东西！ ok，废话不多说，来看看爬虫坑的第一个实战项目-资讯爬取 目标地址：...
2019-09-29 09:58:10
162
原创 图床插件
很多时候需要用到图床来保存我们的图片链接，所以我去找了许多图床的软件。 经过多次测试，这一款微博图床绝对是最方便好用的。 插件的安装方法可以百度，但我相信你们都懂得！ 只需要登录微博账号即可使用~ ????????♀️ 链接: https://pan.baidu.com/s/1ajj1S8AW1o4JKC6Ih9gG-A 提取码: a2ra 复制这段内容后打开百度网盘手机App，操作更方便哦 ...
2019-09-29 09:55:21
109
原创 Mac下载设置ChromeDriver
如何在mac下设置Chromedriver ChromeDriver下载地址： https://npm.taobao.org/mirrors/chromedriver 如何查看chrome版本与ChromeDriver版本对应 查看chrome版本有多种方法，最简单就是在chrome浏览器输入:chrome://version 如何查看chrome对应的ChromeDriver...
2019-09-29 09:53:08
369
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人