liulidoing
码龄6年
关注
提问 私信
  • 博客:11,477
    11,477
    总访问量
  • 16
    原创
  • 1,245,727
    排名
  • 8
    粉丝
  • 0
    铁粉
IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:广东省
  • 加入CSDN时间: 2018-08-27
博客简介:

liulidoing的博客

查看详细资料
个人成就
  • 获得3次点赞
  • 内容获得3次评论
  • 获得11次收藏
创作历程
  • 16篇
    2018年
成就勋章
TA的专栏
  • yum 配置本地源
    1篇
  • linux mysql   rqm安装以及远程连接
    1篇
  • hadoop学习
    14篇
兴趣领域 设置
  • 大数据
    flink
  • 人工智能
    机器学习数据分析
创作活动更多

超级创作者激励计划

万元现金补贴,高额收益分成,专属VIP内容创作者流量扶持,等你加入!

去参加
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

linux 克隆后的网卡处理

文章目录克隆后的网卡故障问题解决方案修改主机名修改网卡配置克隆后的网卡故障问题解决方案修改主机名vi /etc/sysconfig/network修改网卡配置vi /etc/udev/rules.d/70-persistent-net.rules看到两个网卡信息。删除掉上面eth0的, 保留下面eth1的,然后 改名为eth0。然后进入网卡eth0配置删除 掉 hw...
原创
发布博客 2018.10.23 ·
652 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

HIVE笔记梳理

文章目录1. hive 基本操作1.1 hive是什么?1.2 hive的用途?1.3 hive的使用方式1.4 HIVE的DDL语法1.4.1 建库1.4.2 建内部表1.4.3 建外部表内部表和外部表的区别1.4.4 导入数据1.4.4.1从本地或者从hdfs目录导入数据1.4.4.2 从别的表插叙数据后插入到一张新建表中1.4.5 建分区表1.4.6 插入数据到指定分区1.4.7 导出数据1...
原创
发布博客 2018.10.08 ·
231 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

zookeeper入门学习

文章目录zookeeper入门学习1 zookeeper 安装部署1.1 上传安装包到集群服务器1.2 解压1.3 修改配置文件1.4 从hdp20-01上scp安装目录到其他两个节点1.5 启动zookeeper集群2 zookeeper的命令行客户端操作2.1 zookeeper的数据存储形式2.2 数据管理功能2.3 数据监听功能2.4 zookeeper图形化客户端插件3. znode类型...
原创
发布博客 2018.10.08 ·
292 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hive中自定义函数及自定义json字符串解析函数

hive中如何定义自己的函数写一个Java 程序,实现想要的函数功能1.导入hive安装目录的lib目录的包 2新建一个类继承 UDF类 3.重载父类中evaluate方法; 4.写下自己的逻辑package test;import org.apache.hadoop.hive.ql.exec.UDF;import net.sf.json.JSONObject;publ...
原创
发布博客 2018.10.08 ·
998 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hbase的基本使用及重要特性

文章目录hbase的基本使用及重要特性1 启动hbase集群2 启动hbase的命令行客户端2.2 hbase命令行客户端操作2.2.1 建表2.2.2 插入数据3 查询方式一 :scan扫描3.2 查询方式二 : get单行数据4 删除4.1 删除一个kv 数据4.2 删除某一行数据4.3 删除整个表5 Hbase重要特性--排序特性(行键)hbase的基本使用及重要特性1 启动hbase...
原创
发布博客 2018.09.26 ·
469 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hbase的安装与配置

文章目录1.安装准备2.安装步骤2.1 安装zookeeper2.2 安装hbase1.安装准备首先,要有一个HDFS集群,并正常运行; regionserver应该跟hdfs中的datanode在一起其次,还需要一个zookeeper集群,并正常运行然后,安装HBASE角色分配如下:例如:Hdp01: namenode datanode regionserver hmast...
原创
发布博客 2018.09.25 ·
140 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

linux 时间设置及多台主机时间统一

文章目录#linux 时间设置及多台主机时间统一// 设置在操作系统中date -s ’ ’ 设置时间例如date -s ‘2018-05-26 12:52:23’// 主板时钟hwclock -w
原创
发布博客 2018.09.25 ·
1625 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hive中自定义函数及自定义json字符串解析函数

hive中如何定义自己的函数写一个Java 程序,实现想要的函数功能1.导入hive安装目录的lib目录的包 2新建一个类继承 UDF类 3.重载父类中evaluate方法; 4.写下自己的逻辑package test;import org.apache.hadoop.hive.ql.exec.UDF;import net.sf.json.JSONObject;...
原创
发布博客 2018.09.15 ·
471 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

jsp页面公共变量的定义

jsp页面公共变量的定义项目根目录的获取jsp页面公共变量的定义项目根目录的获取定义代码:<%String basePath = request.getScheme() + "://"+ request.getServerName() + ":" + request.getServerPort()+request.getContextPath + ...
原创
发布博客 2018.09.14 ·
2655 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hwi 下载与配置

hwi 下载与配置下载源码打包进入hwi目录移动war包到hive家目录的bin目录下在进入conf 目录修改配置文件拷贝以下jar包到$HIVE_HOME/lib下 :服务启动然后就可以打开网站hwi 下载与配置下载源码下载地址:http://www.apache.org/dyn/closer.cgi/hive/打包解压缩tar -...
原创
发布博客 2018.09.13 ·
676 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

hive安装与配置

hive安装与配置1.修改配置文件2.复制jar包3.配置环境变量hive安装与配置首先准备好安装包,官网都有下载, tar -zxvf +安装包名(apache-hive-1.2.2-bin.tar.gz) 解压缩完毕后 进入apache-hive-1.2.2-bin 目录下的conf 修改配置文件 1.修改配置文件创建一个 hive...
原创
发布博客 2018.09.11 ·
478 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

mapreduce运行平台YARN

mapreduce运行平台YARNmapreduce程序应该是在很多机器上并行启动,而且先执行map task,当众多的maptask都处理完自己的数据后,还需要启动众多的reduce task,这个过程如果用用户自己手动调度不太现实,需要一个自动化的调度平台——hadoop中就为运行mapreduce之类的分布式运算程序开发了一个自动化调度平台——YARNmapreduce运行平台...
原创
发布博客 2018.09.07 ·
173 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

使用java操作HDFS

使用java操作HDFS一.准备jar包1.common2.hdfs3.mapreduce4.yarn二.解决环境冲突问题1.在windouws下添加HADOOP_HOME系统环境变量2.将winutils.exe拷贝到HADOOP_HOME的bin目录下3.如果winutils.exe无法正常运行需要首先修复系统环境4.重启Eclipse三.初始化设置1.wi...
原创
发布博客 2018.09.06 ·
388 阅读 ·
1 点赞 ·
2 评论 ·
1 收藏

hadoop集群搭建及基本命令

hadoop集群搭建一.jdk安装1.解压缩2.环境变量配置3.刷新环境变量二安装Hapoop1.解压缩2.环境变量配置3.刷新环境变量三.hadoop配置1.core-site.xml2.hdfs-site.xml3.mapred-site-xml4.yarn-site.xml5.hadoop-env.sh6.slaves7.使用SSH拷贝文件四...
原创
发布博客 2018.09.06 ·
512 阅读 ·
0 点赞 ·
0 评论 ·
2 收藏

linux mysql rqm安装以及远程连接

首先准备两个rpm文件MySQL-client-5.6.40-1.el6.x86_64.rpmMySQL-server-5.6.40-1.el6.x86_64.rpmrpm后缀的文件是可以直接用rpm -ich +文件名安装的的 然后执行安装命令:rpm -ivh  MySQL-server-5.6.40-1.el6.x86_64.rpm(安装服务端)记住这个文件等...
原创
发布博客 2018.08.31 ·
491 阅读 ·
1 点赞 ·
1 评论 ·
1 收藏

yum 配置本地源

配置yum本地源mkdir /mnt/cdrom 创建挂载目录mount /dev/cdrom /mnt/cdrom 挂载镜像文件ll /etc/yum.repos.d  显示如下:  vi CentOS-Media.repo 进入编辑模式,编写文件如下图:此时使得本地源文件生效再去使默认的公网仓库文件失效,也可以直接删除,命令如下:mv Centos-Base.re...
原创
发布博客 2018.08.31 ·
1226 阅读 ·
1 点赞 ·
0 评论 ·
4 收藏
加载更多