java 爬数据工具 知乎_Java无框架实现爬取知乎用户信息、图片和知乎推荐内容并下载到本地或数据库中...

ZhiHuSpider简介 2016.3.22更新:\x3cbr\x3e添加爬取某话题下精华问题中第一个用户的信息\x3cbr\x3e利用JDBC把信息导入本地或远程数据库中\x3cbr\x3e用来进行数据分析或数据挖掘\x3cbr\x3e并且优化了代码,层次更加清晰\x3cbr\x3e\x3cbr\x3e-----------------------------------------\x3cbr\x3e\x3cbr\x3e2016.3.18\x3cbr\x3e原生Java无框架无jar包\x3cbr\x3e实现爬取知乎问题中的图片和知乎推荐内容\x3cbr\x3e并下载到本地\x3cbr\x3e通俗易懂,简介明了,可扩展性更高 ZhiHuSpider结构介绍 src\x3cbr\x3e bean\x3cbr\x3e ZhiHuBean.java ----- 爬取推荐内容的bean\x3cbr\x3e ZhiHuPicBean.java ----- 爬取问题中图片地址的bean\x3cbr\x3e ZhiHuUserBean.java ----- 爬取用户信息的bean\x3cbr\x3e mothod\x3cbr\x3e FlieReadWriter.java ----- 创建文件,下载推荐内容或图片的方法\x3cbr\x3e Spider.java() ----- 目前支持的三种功能方法\x3cbr\x3e Util.java() ----- 工具类\x3cbr\x3e test\x3cbr\x3e Main.java ----- 测试,抓取baidu的logo\x3cbr\x3e ZhiHuMain.java ----- 测试,下载图片及推荐内容、爬取用户信息 想法与问题... 报No subject alternative DNS name matching错的兄弟\x3cbr\x3e把url里的https,手动改成http就好\x3cbr\x3e\x3cbr\x3e目前模拟登陆和java操纵js模拟点击\x26#39

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值