rvest爬虫及案例分析

由于最近准备着学习手数据挖掘，想着先从爬取数据开始。

---

现做一下总结，可能需要的R包有: rvest(主要)、xml2、stringr(主要用来实现字符串处理)

一、简单介绍rvest函数

read_html() #用来下载网页
htnl_nodes() #用来标记要抓取网页元素的节点
html_attrs() #用来下在相应的网址（2，3函数单数情况也可以使用）
html_tag() #提取标签名称
html_table() #用来抓取表格

注：1.html_table()在网页结构比较简单的情况下比较实用链接（这个案例就可以通过html_table()轻松抓取，可以自己动手试一试）

二.以下以具体的例子来解释

1.抓取慕课网所有的课程信息

在网易云课堂看了R实战，老师演示了这个实例感觉实现的效果不好，所以自己尝试了一下

思路

- 先抓取7个大类课程的网址

- 然后抓取每一类具体的文本信息

- 用循环来实现7大类