爬虫介绍

一、爬虫类型

• 静态网站
• 动态网站
• App内嵌HTML
• 移动端App

二、爬虫的实际应用

• 搜索引擎
• 新闻聚合
• 社会应用
• 舆情监测
• 人工智能
• 数据分析
• 行业数据
• 竞争对手监控

三、OSI七层模型

• 物理层：电器连接
• 数据连接层：交换机、STP、帧中继
• 网络层：路由器、IP协议
• 传输层：TCP、UDP协议
• 会话层：建立通信连接，网络拨号
• 表示层：每次连接
• 应用层：HTTP、FTP

四、TCP、IP五层模型