- 博客(10)
- 收藏
- 关注
RSS订阅转载 使用神器Lombok优雅编码
Lombok介绍近来偶遇一款撸码神器，介绍给大家~相信许多小伙伴都深有体会，POJO类中的千篇一律的getter/setter，constructor等方法让人写的揪心，那么今天就有一种方法可以残暴的解决这个问题。接下来为大家介绍这款神器：Lombok以下是官方对Lombok的介绍...
2019-03-11 11:41:00
88
转载 Apache的基本使用
一. Apache简介Apache是世界使用排名第一的Web服务器软件。它可以运行在几乎所有广泛使用的计算机平台上，由于其跨平台和安全性被广泛使用，是最流行的Web服务器端软件之一。二. Apache安装注：以下操作均在Centos7.x系统下完成。在Centos系统上，安装Apach...
2019-02-10 16:24:00
174
转载 Redis快速使用
一.Redis简介1.非关系型数据库（Nosql）在了解Redis之前，我们需要先了解一下非关系型数据库。当前主流的关系型数据库有Oracle、DB2、Microsoft SQL Server、MySQL等。非关系型数据库有Cloudant、MongoDb、redis、HBase等。...
2019-02-06 11:20:00
134
转载 logback的简单使用
一、logback的介绍Logback是由log4j创始人设计的又一个开源日志组件，官方网站： http://logback.qos.ch。logback当前分成三个模块：logback-core,logback- classic和logback-access。logback-core...
2019-01-24 18:00:00
106
转载 使用代理处理反爬抓取微信文章
目标使用代理反爬抓取微信文章，获取文章标题、内容、公众号等信息，并存储到MongoDB数据库中。流程框架如果要抓取微信文章可以使用搜狗的搜索引擎，它会显示最新的文章，但是有两个问题需要大家注意：如果要抓取某一个主题（比如微信风景文章）的所有记录的话，需要先登录（也就是你的请求头hea...
2018-12-03 11:59:00
185
转载 使用Redis+Flask维护动态代理池
目标爬虫中经常遇到被封杀IP的情况,最有效的方式就是使用代理IP。我们可以在一些平台上购买代理IP,但是价格比较昂贵。另外很多IP代理网站也提供了一些免费的代理IP,可以爬取下这些代理IP,并使用webAPI方式提供代理IP服务。为什么要用代理池？许多网站有专门的反爬虫措施，可能遇到封...
2018-11-28 22:34:00
151
转载 使用selenium模拟浏览器抓取淘宝商品美食信息
目标通过Selenium模拟浏览器抓取淘宝商品美食信息，并存储到MongoDB数据库中。流程框架淘宝页面比较复杂，含有各种请求参数和加密参数，如果直接请求或者分析Ajax将会非常繁琐。Selenium是一个自动化测试工具，可以驱动浏览器去完成各种工作，比如模拟点击、输入和下拉等多种功能，...
2018-11-21 15:05:00
174
转载 web项目中的路径问题
访问路径与资源名称通常的URL资源访问路径由两部分构成：访问路径与资源名称。资源名称指的是要访问资源的直接名称，如show.jsp，或与要访问资源存在映射关系的间接名称，如show.do。而访问路径，则是通过该路径则可以定位到指定的资源，即在URL资源访问路径中除了资源名称以外的其他部分。 ...
2018-11-20 11:23:00
115
转载 Requests+正则表达式爬取猫眼电影
目标通过Request+正则表达式爬取猫眼电影TOP100电影的排名、名字、电影封面图片、主演、上映时间、猫眼评分，将爬取的内容写入文件中。流程框架进入到猫眼电影TOP100的页面，此时的URL为http://maoyan.com/board/4，点击第2页，会发现此时的URL为http...
2018-11-15 09:25:00
334
转载 springmvc之再解url-pattern
配置详解关于SpringMVC的配置文件web.xml中<url -pattern></url>应该怎么写的问题，相信许多初学的小伙伴会有疑惑，特此总结一下。<!-- 注册中央调度器 --><servlet> <servlet...
2018-11-15 09:06:00
141
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人