抓取张一山的《鹿鼎记》评分!!!
一、结果图
二、步骤
1. 添加 “生成记录” 组件,填入请求的URL和参数
URL_LINK:https://movie.douban.com/j/URnew_search_subjects?
User_Agent:'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.75 Safari/537.36'
2. 填写URL,发送POST请求以及其参数![在这里插入图片描述](https://img-blog.csdnimg.cn/20201123104819802.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzkzMjYwOQ==,size_16,color_FFFFFF,t_70#pic_center)
3. 从接口获取数据并进行解析
4. 将评分rate字段分为三个等级(best、secondary、worst)
5. switch/cast多分支操作![在这里插入图片描述](https://img-blog.csdnimg.cn/20201123105239402.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzkzMjYwOQ==,size_16,color_FFFFFF,t_70#pic_center)
6. Excel文件输出
7. 启动任务查看数据结果
这里仅进行Excel输出结果,如果数据需要处理还可以配置后续流程。
ETL工具kettle的Excel合并操作
https://blog.csdn.net/weixin_43932609/article/details/109326043
ETL工具kettle的插入更新操作
https://blog.csdn.net/weixin_43932609/article/details/109065366
ETL工具Kettle的发送邮件功能:
https://blog.csdn.net/weixin_43932609/article/details/108766325
ETL工具Kettle的列转行组件:
https://blog.csdn.net/weixin_43932609/article/details/108795244
ETL工具Kettle性能优化:
https://blog.csdn.net/weixin_43932609/article/details/108749304
=========================================================
人生得意须尽欢,莫使金樽空对月!
__一个热爱说唱的程序员。
今日份推荐音乐:Key.L刘聪《家书》(我混不好就不回来了)
=========================================================