Java
Aaron_Plus
技术向善
展开
-
快速爬取A股4000+股票的250日行情
1 效果先上图2 项目开源https://github.com/Laichj/box-spider具体使用指南见readme文件3 项目介绍之前写过一篇文章简单介绍了项目框架https://blog.csdn.net/laichj/article/details/110239080这次是在原先新闻爬虫项目的基础上,添加了股票爬虫模块。股票信息的来源是东方财富网:https://www.eastmoney.com/...原创 2020-12-20 21:02:01 · 895 阅读 · 1 评论 -
使用Java快速开发一个新闻爬虫项目
一、项目简介其实使用Java开发一个爬虫项目并没有想象中那么难,流行的SpringBoot快速构建项目,还有现成的WebMagic之类的爬虫框架,实现简单的新闻爬虫项目还是很容易的。由于想要做一些热点分析的项目,写了个新闻爬虫项目。由于我需要的是历史的新闻数据,对实时性要求不高,所以每30分钟爬取一次新闻数据,并将数据保存在MongoDB中。目前支持爬取的新闻网站:腾讯新闻 凤凰资讯项目代码:https://github.com/Laichj/box-spider(随手给星的都是长得帅.原创 2020-11-28 00:12:07 · 2171 阅读 · 0 评论