![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
七分正经
这个作者很懒,什么都没留下…
展开
-
【hortonworks集群安装】Ambari2.7.4 HDP-3.1.4 超详细的安装过程
1 、大数据版本目前而言,不收费的Hadoop版本主要有三个国外厂商,分别是:Apache(最原始的版本,所有发行版均基于这个版本进行改进)。Hortonworks版本(Hortonworks Data Platform,简称“HDP”)。Cloudera版本(Cloudera’s Distribution Including Apache Hadoop,简称CDH)。对比:(1)Apache版本建议学习使用,不建议在生产环境使用。(2)Hortonworks 主打产品是Hort原创 2020-12-18 15:12:56 · 3141 阅读 · 0 评论 -
【Azkaban】高版本azkaban部署
Azkaban介绍 Azkaban是由Linkedin开源的一个批量工作流任务调度器。用于在一个工作流内以一个特定的顺序运行一组工作和流程。Azkaban定义了一种KV文件格式来建立任务之间的依赖关系,并提供一个易于使用的web用户界面维护和跟踪你的工作流。它有如下功能特点:Web用户界面 方便上传工作流 方便设置任...原创 2018-06-19 15:04:24 · 2124 阅读 · 0 评论 -
【Spark】IDEA在本地运行wordCount spark程序报错:Exception in thread "main" java.lang.UnsatisfiedLinkError
开发环境: hadoop-2.7.3 spark-2.2.1 scala-2.11.11 jdk-1.8报错信息如下:Exception in thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSums...原创 2018-06-19 15:30:06 · 1777 阅读 · 0 评论