- 博客(3)
- 收藏
- 关注
RSS订阅原创 WebMagic完成爬虫可视化展示及增量爬取
前言最近在公司一直在做java爬虫，选用的是webmagic，问为什么就是这个爬虫框架真是简单好用。首先贴一下webmagic的官网地址：http://webmagic.io/这篇文章主要是讲一下使用webMagic的监听模块完成爬虫可视化见面的编写、如何使用代理ip爬取页面以及对框架进行一些小改动实现增量爬取。不涉及webMagic的基础使用，这些可以看作者的文档，介绍的很详细了，上手很快~tip：现在maven中央仓库可以使用0.7.4的版本了，具体的改动我没有看，但是我需要的Spid...
2021-05-19 12:08:17
1283
原创 Java 自定义注解实现时间范围自动填充
最近公司要做一些图形化的报表，搜索条件上都带有时间范围查询，秉承着谁都不信的态度，使用自定义注解对入参的时间数据进行自动填充，记录一下实现过程，功能非常简单但实现写的有些复杂，大佬们轻拍~首先先看一下需求入参的参数中有startTime和endTime两个参数，如果前端没有传递这两个参数，或者只传了其中一个，或者start和end的时间传反了，要求把参数转换成可以正常使用的参数，下面开始实现自定义一个注解/** * 入参时自动填充时间 */@Target(ElementType.METHO
2020-12-03 10:00:10
1611
原创 docker安装mysql并设置主从
docker安装mysql并设置读写分离1.centos7安装docker查看CentOS版本lsb_release -a确保yum为最新的版本，如果登录的账号不是root用户，那么可能需要输入密码sudo yum update查看是否已经安装了dockeryum list installed | grep docker安装dockeryum -y install docker-y代表不询问进行安装安装完毕后启动dockersystemctl start docker查
2020-12-02 10:08:49
341
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人