- 博客(2)
- 收藏
- 关注
原创 nodejs爬虫项目(二)
之前已经爬取了多个网站的新闻数据,现在要对这些数据进行整理展示,具体要求如下 首先第一步要在final-project文件夹下npm install安装依赖包 这里我在安装过程中遇见了问题,安装一直失败而且安装进度非常慢,百度了一下大体了解到这是从国外的镜像服务器下获取包的资源,所以猜测可能和我家的网络有关。果然,在连接了学校的VPN之后再运行npm install很快就安装完成了(有一说一,移动的网真滴不行)。 接下来需要访问之前已经安装好的mysql数据库,新建立两个mysql表用来保存用户的操作日
2020-06-29 10:39:01
379
原创 nodejs爬虫实验项目
nodejs爬虫实验项目 这学期新开了web编程课,第一个项目的要求具体如下: ◦核心需求: ◦1、选取3-5个代表性的新闻网站(比如新浪新闻、网易新闻等,或者某个垂直领域权威性的网站比如经济领域的雪球财经、东方财富等,或者体育领域的腾讯体育、虎扑体育等等)建立爬虫,针对不同网站的新闻页面进行分析,爬取出编码、标题、作者、时间、关键词、摘要、内容、来源等结构化信息,存储在数据库中。 ◦2、建立网...
2020-04-30 01:01:32
627
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人