cdh 简介_大数据技术之关于CDH6的一些介绍

本篇教程探讨了大数据技术之关于CDH6的一些介绍，希望阅读本篇文章以后大家有所收获，帮助大家对相关内容的理解更加深入。

一： cdh6 的介绍

1.1： cdh6 的发布Cloudera在北京时间5月16日的半夜，在其社区(community.cloudera.com)对外宣布发布Cloudera Enterprise 6，Beta。咱们在5月没有等到CDH5.15，等到C6 beta也是不错的C6相较于C5是一次各个组件的大版本升级，可以说是翻天覆地的，简单说你以前期待的Hadoop3的一些激动人心的新功能

1.2: cdh 6 版本的新功能1.打包集成Solr7，更好的应对无论是结构化数据还是非结构化数据。Solr7支持直接使用SQL查询，并且通过SQL接口可以将对非结构化数据的查询对接到传统BI工具。Cloudera Enterprise 6.0支持新的 JSON Facet Module以及Nested Documents，对于Solr7的新的查询界面UI也在6.x的Roadmap中。2.Hive2的矢量化(vectorization )进一步提升分析性能，带来20％-80％的性能提升。YARN可以在带有GPU的专有硬件上调度作业，对于深度学习用例的性能提升在5倍到10倍。3.通过全自动的wire encryption(TLS)以及对于Cloudera Manager用户的更加细粒度对每个集群访问的控制，提升Cloudera Manager的集群管理效率，并保护敏感数据以及对基础架构的访问。从而使管理员可以在几分钟之内部署超过2500个节点的多个集群，同时管理开销最小。

二： cdh 6 版本使用组件的版本

2.1： cdh6 使用的版本Cloudera Enterprise 6.0中的主要组件的升级：SDXCloudera Manager 6.0Cloudera Director 6.0Cloudera Navigator 6.0Cloudera Navigator Key Trustee 6.0Apache Sentry 2.0Apache Kafka 1.0Analytics and Machine Learning WorkloadsApache Solr 7.0Apache Spark 2.3Core PlatformApache Hadoop 3.0Apache Hive 2.1Apache HBase 2.0Apache Oozie 5.0Apache Avro 1.8Apache Parquet 1.9

2.2升级或者安装前置：CDH只支持从CDH5.7或以上版本升级到C6，所以如果你在使用CDH5.7以下版本，建议你至少先升级到5.7.外部数据库支持：MySQL 5.7或更高MariaDB 5.5或更高PostgreSQL 8.4或更高Oracle 12c或更高JDKOracle JDK1.8，将不再支持JDK1.7操作系统支持RHEL 6.8或更高RHEL 7.2或更高SLES 12 SP2或更高Ubuntu 16或更高重要的事情这里仅说一遍：未来不能从C6 beta升级到C6正式版。Cloudera Enterprise 6 beta是没有Cloudera官方支持的。但是你可以在Cloudera社区的一个新版面寻求一些帮助：https://community.cloudera.com/t5/C6-Beta/qa-p/C6_Beta，当然你也可以反馈一些你的建议。