- 博客(16)
- 收藏
- 关注
RSS订阅原创 linux 克隆后的网卡处理
文章目录克隆后的网卡故障问题解决方案修改主机名修改网卡配置克隆后的网卡故障问题解决方案修改主机名vi /etc/sysconfig/network修改网卡配置vi /etc/udev/rules.d/70-persistent-net.rules看到两个网卡信息。删除掉上面eth0的， 保留下面eth1的，然后 改名为eth0。然后进入网卡eth0配置删除 掉 hw...
2018-10-23 01:02:05
624
原创 HIVE笔记梳理
文章目录1. hive 基本操作1.1 hive是什么？1.2 hive的用途？1.3 hive的使用方式1.4 HIVE的DDL语法1.4.1 建库1.4.2 建内部表1.4.3 建外部表内部表和外部表的区别1.4.4 导入数据1.4.4.1从本地或者从hdfs目录导入数据1.4.4.2 从别的表插叙数据后插入到一张新建表中1.4.5 建分区表1.4.6 插入数据到指定分区1.4.7 导出数据1...
2018-10-08 20:23:15
204
原创 zookeeper入门学习
文章目录zookeeper入门学习1 zookeeper 安装部署1.1 上传安装包到集群服务器1.2 解压1.3 修改配置文件1.4 从hdp20-01上scp安装目录到其他两个节点1.5 启动zookeeper集群2 zookeeper的命令行客户端操作2.1 zookeeper的数据存储形式2.2 数据管理功能2.3 数据监听功能2.4 zookeeper图形化客户端插件3. znode类型...
2018-10-08 10:36:09
264
原创 hive中自定义函数及自定义json字符串解析函数
hive中如何定义自己的函数写一个Java 程序，实现想要的函数功能1.导入hive安装目录的lib目录的包 2新建一个类继承 UDF类 3.重载父类中evaluate方法； 4.写下自己的逻辑package test;import org.apache.hadoop.hive.ql.exec.UDF;import net.sf.json.JSONObject;publ...
2018-10-08 09:40:29
963
原创 hbase的基本使用及重要特性
文章目录hbase的基本使用及重要特性1 启动hbase集群2 启动hbase的命令行客户端2.2 hbase命令行客户端操作2.2.1 建表2.2.2 插入数据3 查询方式一 ：scan扫描3.2 查询方式二 ： get单行数据4 删除4.1 删除一个kv 数据4.2 删除某一行数据4.3 删除整个表5 Hbase重要特性--排序特性（行键）hbase的基本使用及重要特性1 启动hbase...
2018-09-26 00:20:38
441
原创 hbase的安装与配置
文章目录1.安装准备2.安装步骤2.1 安装zookeeper2.2 安装hbase1.安装准备首先，要有一个HDFS集群，并正常运行； regionserver应该跟hdfs中的datanode在一起其次，还需要一个zookeeper集群，并正常运行然后，安装HBASE角色分配如下：例如：Hdp01: namenode datanode regionserver hmast...
2018-09-25 23:51:03
125
原创 linux 时间设置及多台主机时间统一
文章目录#linux 时间设置及多台主机时间统一// 设置在操作系统中date -s ’ ’ 设置时间例如date -s ‘2018-05-26 12:52:23’// 主板时钟hwclock -w
2018-09-25 23:41:27
1590
原创 hive中自定义函数及自定义json字符串解析函数
hive中如何定义自己的函数写一个Java 程序，实现想要的函数功能1.导入hive安装目录的lib目录的包 2新建一个类继承 UDF类 3.重载父类中evaluate方法； 4.写下自己的逻辑package test;import org.apache.hadoop.hive.ql.exec.UDF;import net.sf.json.JSONObject;...
2018-09-15 11:07:22
439
原创 jsp页面公共变量的定义
jsp页面公共变量的定义项目根目录的获取jsp页面公共变量的定义项目根目录的获取定义代码：<%String basePath = request.getScheme() + "://"+ request.getServerName() + ":" + request.getServerPort()+request.getContextPath + ...
2018-09-14 15:06:46
2621
原创 hwi 下载与配置
hwi 下载与配置下载源码打包进入hwi目录移动war包到hive家目录的bin目录下在进入conf 目录修改配置文件拷贝以下jar包到$HIVE_HOME/lib下 ：服务启动然后就可以打开网站hwi 下载与配置下载源码下载地址：http://www.apache.org/dyn/closer.cgi/hive/打包解压缩tar -...
2018-09-13 16:13:28
639
原创 hive安装与配置
hive安装与配置1.修改配置文件2.复制jar包3.配置环境变量hive安装与配置首先准备好安装包，官网都有下载， tar -zxvf +安装包名（apache-hive-1.2.2-bin.tar.gz） 解压缩完毕后 进入apache-hive-1.2.2-bin 目录下的conf 修改配置文件 1.修改配置文件创建一个 hive...
2018-09-11 19:19:58
422
原创 mapreduce运行平台YARN
mapreduce运行平台YARNmapreduce程序应该是在很多机器上并行启动，而且先执行map task，当众多的maptask都处理完自己的数据后，还需要启动众多的reduce task，这个过程如果用用户自己手动调度不太现实，需要一个自动化的调度平台——hadoop中就为运行mapreduce之类的分布式运算程序开发了一个自动化调度平台——YARNmapreduce运行平台...
2018-09-07 11:33:02
145
原创 使用java操作HDFS
使用java操作HDFS一.准备jar包1.common2.hdfs3.mapreduce4.yarn二.解决环境冲突问题1.在windouws下添加HADOOP_HOME系统环境变量2.将winutils.exe拷贝到HADOOP_HOME的bin目录下3.如果winutils.exe无法正常运行需要首先修复系统环境4.重启Eclipse三.初始化设置1.wi...
2018-09-06 15:37:53
362
2
原创 hadoop集群搭建及基本命令
hadoop集群搭建一.jdk安装1.解压缩2.环境变量配置3.刷新环境变量二安装Hapoop1.解压缩2.环境变量配置3.刷新环境变量三.hadoop配置1.core-site.xml2.hdfs-site.xml3.mapred-site-xml4.yarn-site.xml5.hadoop-env.sh6.slaves7.使用SSH拷贝文件四...
2018-09-06 15:04:02
481
原创 linux mysql rqm安装以及远程连接
首先准备两个rpm文件MySQL-client-5.6.40-1.el6.x86_64.rpmMySQL-server-5.6.40-1.el6.x86_64.rpmrpm后缀的文件是可以直接用rpm -ich +文件名安装的的 然后执行安装命令：rpm -ivh MySQL-server-5.6.40-1.el6.x86_64.rpm（安装服务端）记住这个文件等...
2018-08-31 18:29:49
458
1
原创 yum 配置本地源
配置yum本地源mkdir /mnt/cdrom 创建挂载目录mount /dev/cdrom /mnt/cdrom 挂载镜像文件ll /etc/yum.repos.d 显示如下： vi CentOS-Media.repo 进入编辑模式，编写文件如下图：此时使得本地源文件生效再去使默认的公网仓库文件失效，也可以直接删除，命令如下：mv Centos-Base.re...
2018-08-31 16:09:58
1190
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人