自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(2)
  • 资源 (4)
  • 收藏
  • 关注

原创 hadoop连接mongdb报错Exception authenticating

今天在新环境中部署hadoop项目,在调度作业的时候突然报了个错误。内容如下:17/07/12 11:25:54 INFO driver.cluster: Cluster created with settings {hosts=[10.56.69.173:27017], mode=MULTIPLE, requiredClusterType=UNKNOWN, serverSelecti

2017-07-12 15:53:59 729

原创 pyspider爬虫

### pyspider ## 架构 scheduler(调度器)-->fetcher(抓取器)-->processor(脚本执行)-->output  各个组件间使用消息队列连接,除了scheduler是单点的,fetcher 和 processor 都是可以多实例分布式部署的。 scheduler 负责整体的调度控制。任务由 scheduler 发起调度,fetcher 抓

2017-04-27 16:55:30 451

网站打点统计工具piwik

这是一个网站打点工具,这个文档是我总结的安装文档。另外还有结合大数据平台的hdfs持久化以及接入kafka的配置。

2018-02-06

元数据管理wherehows

wherehows是领英的开数据发现管理框架。目前开源的元数据管理只有wherehows和pentaho metadata editor。

2018-02-06

hadoop大数据视频教程

http://pan.baidu.com/s/1hsrHYIg

2017-08-29

hadoop大数据学习教程

百度云盘 http://pan.baidu.com/s/1hsrHYIg

2017-08-29

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除