caipiao_xm
风中飘摇我亦妖娆
大丈夫生于天地间
展开
-
jsoup抓取网页报错UnsupportedMimeTypeException
在抓腾讯新闻评论时出现如下异常 org.jsoup.UnsupportedMimeTypeException: Unhandled content type. Must be text/*, application/xml, or application/xhtml+xml. Mimetype=application/javascript; charset=utf-8, url=http://....转载 2018-08-06 14:31:57 · 194 阅读 · 0 评论 -
爬虫获取ajax异步请求的html内容
使用爬虫时有时会发现浏览器中看到的html内容在程序get()的结果中看不到,这是因为页面中使用了ajax技术,即在加载页面时不一次性发出所有内容,浏览器收到第一次发出的页面内容后运行其中的程序,再向服务器请求部分内容构成完整页面,用爬虫只能得到第一次发出的html,导致无法得到所需内容。 此处::befer和::after之间的部分在使用爬虫的get()方法得到的html中看不到,因为这是异步...转载 2018-08-06 14:59:58 · 1457 阅读 · 0 评论 -
使用fastjson进行json字符串和List的转换
原文链接:https://blog.csdn.net/neutron117/article/details/51830350 使用fastjson进行自定义类的列表和字符串转换 1.环境 jdk1.8,fastjson 2.pom.xml <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xs...转载 2018-08-06 15:02:52 · 3063 阅读 · 0 评论