- 博客(2)
- 收藏
- 关注
RSS订阅原创 hadoop是什么？新手自学hadoop教程（一）
百科释义：Hadoop是一个由Apache基金会所开发的分布式系统基础架构。Hadoop是一个专为离线和大规模数据分析而设计的，并不适合那种对几个记录随机读写的在线事务处理模式。Hadoop=HDFS（文件系统，数据存储技术相关）+ Mapreduce（数据处理），Hadoop的数据来源可以是任何形式，在处理半结构化和非结构化数据上与关系型数据库相比有更好的性能，具有更灵活的处理能力，不管任何数据...
2018-05-16 13:26:48
32293
原创 网络爬虫技术，如何实现登录破解，案例分享！
有时候大家在爬虫的时候会遇到要登录的情况，如果不登录则爬不到自己想要的东西，那么如何解决呢？这里大家也可以多思考利用什么方式可以达到目的。这里以博客园为例，here we go~~首先简单的介绍一下selenium和phantomJS：selenium是一款测试工具，能够模拟用户对浏览器进行操作。phantomJS是一款轻便式浏览器，其没有界面并且功能相对简单，因此速度上会比较快速。说到这大家应该...
2018-05-15 12:43:54
3717
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人