鑫鑫23的博客

最近在做hadoop的时候，总结了一些hadoop的一些基本的功能运用和一些基本性能测试，记录一下，希望可以帮助大家，由于输出信息太多，在这里只介绍命令，具体输出信息大家可以自己试验一下。不同的hadoop版本里自带的测试类也不尽相同，我的版本是2.7.3，里面的测试类是hadoop-mapreduce-client-jobclient.jar，有的hadoop版本里面的类名是hadoop-Test

最近在看了一些spark的使用文档，以及官网简介，自己总结了一点使用文档，记录一下快速启动spark关于这一部分Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架，Spark，拥有Hadoop MapReduce所具有的

运用ambari安装phoenix,连接hbase,运用sql语句 数据存储在HBase中，通过SQL进行CRUD操作 创建test表create table test(pk VARCHAR primary key,col1 VARCHAR null,col2 VARCHAR null,col3 VARCHAR null);创建SRC_TABLE表cre...

1、安装最新版的KDC server ​yum install krb5-server krb5-libs krb5-workstation注：KDC (Key Distribution Center）密匙分配中心, 其在kerberos中通常提供两种服务：1.Authentication Service (AS)：认证服务 　　2.Ticket-Granting Servic...

最近在做一个东西时，出现一个需求，就是需要在一台linux机器上，需要两个不同版本的Python，并且不能相互影响（用过Python的都知道，Python各个版本是不兼容的），经过调研，发现下面方法可用，所以记录下来。 在机器里装有两个版本的Python,分别是2.7.5 和3.6.4,配置Python的版本同时存在 先运行以下命令查看Python的安装路径ll /usr/bin/ |...

安装Python3.6可能使用的依赖yum install openssl-devel bzip2-devel expat-devel gdbm-devel readline-devel sqlite-devel下载Python3.6 安装包,编译并安装到python官网下载https://www.python.org 下载最新版源码，使用make altinstall，...

1，anaconda安装和conda使用在linux上安装完Python之后（如果没有安装Python环境，或需要安装Python3.6请参照https://blog.csdn.net/qq_30408111/article/details/79709364），开始安装anaconda 把上面的安装包放到Linux目录下,执行sh Anaconda3-5.1.0-Linux-x86_64...