自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(15)
  • 收藏
  • 关注

原创 hive常用函数大全超详细整理

文章目录1 关系运算1.1 1、等值比较: =1.2 2、不等值比较:1.3 3、小于比较: <1.4 4、小于等于比较: <=1.5 5、大于比较: >1.6 6、大于等于比较: >=1.7 7、空值判断: IS NULL1.8 8、非空判断: IS NOT NULL1.9 9、LIKE比较: LIKE1.10 10、JAVA的LIKE操作: RLIKE1.11 11、REGEXP操作: REGEXP2 数学运算:2.1 1、加法操作: +2.2 2、

2020-08-29 20:29:27 1547

原创 Linux下搭建高可用Hadoop集群详解

下载hadoop的Linux安装包

2020-08-24 21:14:11 395

原创 ZooKeeper的安装配置详解

解压文件到/opt/bigdata/hadoop,照着图中代码修改文件名,创建软链接如果zookeeper中光标闪动则软链接创建成功修改配置文件在zkdata创建一个myid文件加1,2,3,4,我在主机,所以加1,如果在第二个虚拟机加2,以此类推修改配置文件激活配置文件在其他虚拟机搭建zookeeper注意远程拷贝完,要在相应虚拟机修改相应myid的数值完成后source /etc/profile激活配置文件输入命令zkServer.sh ..

2020-08-23 23:29:36 126

原创 用Postman在ElasticSearch上简单的增删改查

Postman下载地址打开Postman添加索引PUT http://192.168.203.132:9200/school{ "settings":{ "number_of_shards":3, "number_of_replicas":1 }, "mappings":{ "student":{ "properties":{ "stuName":{"type":"keyword"}, "age":{"type":"integer"}, "resum

2020-08-21 22:21:32 1157

原创 Linux中使用Logstash解析文件并上传ElastSicSeaErch之二上传数据

在上一篇中,我们介绍了如何使用idea生成模拟数据并将java代码导成jar包,如果不清楚如何生成jar包的可以参考一下上一篇文章Linux中使用Logstash解析文件并上传ElastSicSeaErch之一生成模拟数据,现在我们进行下面的操作,上传数据到ElasticSearch1.先把生成好的jar包传到linux下 ,我这里在root根目录创建了一个kb08文件夹,把jar包放在这里面,并且创建了一个mylog.log的文件用来存放过会生成过的数据在kb08目录下输入命令java -ja

2020-08-21 15:19:50 217

原创 Linux中使用Logstash解析文件并上传ElastSicSeaErch之一生成模拟数据

当我们要把很多数据上传至ElasticSearch时,不可能一条条的put进入ElasticSearch,所以我们借助logstash帮助我们导入大量的数据,为了方便实验,我们本篇内容先模拟数据,在下篇介绍如何把模拟好的数据导入ElasticSearch.通过xftp上传logstash-6.2.2.tar.gz至/optinstall/elk目录下将logstash-6.2.2.tar.gz解压至/opt/bigdata/elk目录下,并改名为logstash622打开IEDA,创建

2020-08-21 14:40:36 228

原创 hadoop伪分布式集群搭建详细图解

先把四台虚拟机之间打通免密登录,如果不清楚如何进行免密登录可以看这篇Linux中root用户之间的免密登录把hadoop-2.6.0-cdh5.14.2.tar.gz和hadoop-native-64-2.6.0.tar通过xftp传到vmmaster这个虚拟机主机/opt/install/hadoop中将hadoop-2.6.0-cdh5.14.2.tar.gz加压到opt/bigdata/hadoop中tar -zxf hadoop-2.6.0-cdh5.14.2.tar.gz .

2020-08-18 18:56:29 482

原创 ElasticSearch集群安装配置详解二

ElasticSearch集群安装配置ElasticSearch-headmaster的安装配置nodejs的安装与配置ElasticSearch-headmaster的安装配置这里的headmaster是zip,要用unzip解压如果linux是最小化安装的话要下载unzip命令,否则跳过此步解压headmaster文件为了方便管理,把这个文件移动到/opt/bigdata/elk文件夹下进入移动的文件夹,可以看到文件名很长,为了方便使用重新命名nodejs

2020-08-12 19:54:47 207

原创 Linux普通用户之间的免密登录

一般情况下我们都是在普通用户下去启动各种服务,所以接下来我们进行用不同虚拟机普通用户的免密登录要用普通用户操作我们就要切换到普通用户在根目录下用ssh-keygen -t rsa -P""生成密钥这时根目录下会生成一个.ssh文件,cd .ssh/进入文件ssh-copy-id -i id_rsa.pub -p22 wu@myvm01 可以把密钥交给主机名是myvm01的虚拟机中的wu这个用户这样我在下次访问wu@myvm01时就不用输入密码了,注意myvm01代表ip地址,这样不用记住复杂

2020-08-11 19:02:08 1073

原创 ElasticSearch集群安装配置详解一

ElasticSearch在/opt下新建两个文件夹一个是install 另一个是bigdata 把elasticsearch-6.2.2.tar.gz等文件通过xftp传入install文件夹将解压到/opt/bigdata/elk下

2020-08-10 21:44:51 299

原创 Linux的常用命令01

ls 查看当前目录信息ls -la 查看当前目录详细信息ls -ll 和 ll 的功能与ls -la 的功能类似cd 指令cd ~ 或者cd 回到自己的家目录cd / 回到主目录cd /opt 进入到opt目录cd … 回到当前目录的上一级目录绝对路径【从 / 开始定位】从主目录开始相对路径【从当前的位置开始定位】例如当前在opt目录,就从opt目录开始mkdir 和touchmkdir 用于创建目录touch 用于创建文件rm -rf 强制删除文件或.

2020-08-10 12:13:54 77

原创 Linux中root用户之间的免密登录

不同虚拟机之间的免密登录(1)设置主机名:hostnamectl set-hostnamemyvmhost(2)查看别名:hostname(3)配置主机名:vi /etc/hosts前面是ip地址,后面是主机名称(4)免密登录:①进入主机根目录:cd/root②生成密钥:ssh-keygen -t rsa -P “”④拷贝密钥:cat id_rsa.pub >> authorized_keys⑤主机把密钥给从机就可以访问从机:ssh-copy-id -i id_.

2020-08-09 23:12:02 1810

原创 VMware下的Linux的安装配置详解

点击创建新的虚拟机自定义创建直接下一步选择一个CentOS镜像文件,可以去官网下载,然后下一步为虚拟机取一个名字,以及虚拟机要安装的位置根据自己电脑的配置分配处理器核数,电脑好一点可以给8个内核,差一点可以给2~4个内核这里根据自己电脑内存大小给定虚拟机内存,我电脑内存比较大,给了4g。如果电脑内存只有8g,给个1~2g差不多了下面都是下一步磁盘默认20g,如果能给个40g的话跟好依旧下一步进入自定义硬件添加一个网络适配器,方便以后连接外网,一个设为N.

2020-08-09 21:04:34 465

原创 MySQL入门——DQL

MySQL入门MySQL的登录退出MySQL服务的启动和停止MySQL服务的登录和退出DQL进阶1:基础查询进阶2:条件查询MySQL的登录退出MySQL服务的启动和停止方式一:通过命令行net start 服务名net stop 服务名方式二:计算机——右击——管理——服务MySQL服务的登录和退出登录:mysql 【-h 主机名 -P 端口号】 -u 用户名 -p密码退出:exit或ctrl+CDQL进阶1:基础查询语法:select 查询列表 from 表名;类似于:Sys

2020-08-01 22:04:04 62

原创 JDBC一Java代码与MySQL的结合

JDBC入门一、JDBC二、获取数据库连接Driver 接口加载与注册 JDBC 驱动建立连接(Connection)使用Statement操作数据表使用PreparedStatementPreparedStatement vs StatementResultSet释放资源三、案例一、JDBCJDBC(Java Database Connectivity)是一个独立于特定数据库管理系统、通用的SQL数据库存取和操作的公共接口(一组API),定义了用来访问数据库的标准Java类库,(java.sql,j

2020-08-01 21:38:51 220

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除