2020年04月_andyonlines

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 hive 管理表和外部表的转换

可以通过查看表的Table Type属性，来判断表的类型！在hive中除了属性名和属性值，其他不区分大小写！(1) MANAGED_TABLE—>EXTERNAL_TABLEalter table 表名 set TBLPROPERTIES('EXTERNAL'='TRUE')(2) EXTERNAL_TABLE—>MANAGED_TABLEalter table 表名 se...

2020-04-08 19:53:20 376

原创 hive 复合数据类型的分割符

1 描述数据类型描述语法示例*STRUCT*和c语言中的struct类似，都可以通过“点”符号访问元素内容。例如，如果某个列的数据类型是STRUCT{first STRING, last STRING},那么第1个元素可以通过字段.first来引用。struct()MAPMAP是一组键-值对元组集合，使用数组表示法可以访问数据。例如，如果某个列的数据类型是MAP...

2020-04-08 19:16:10 466

原创 if [[ ]] 问题

if [[ $1 != "start" && $1 != "stop" ]]在if之后要用空格,[[ 之后要有一个空格,]]之前要有空格,不然会出错.elif [[ $1 == "stop" ]] 双等号两边要有空格不然后会出错....

2020-04-08 00:49:16 1077 1

原创 MysqL 命令大全

文章目录1 .库操作1.1 创建库1.2 查看库1.3 选择库1.4 查看mysql的版本1 .库操作1.1 创建库create database name;1.2 查看库#查看mysql上有哪些库SHOW DATABASES;#查看具体库的信息SHOW CREATE DATABASE name;1.3 选择库USE DATABASE name;1.4 查看mysql...

2020-04-06 11:03:53 280

原创 Hadoop HA 重点

1 如果要实现HA，至少要启动3台Journalnode!2 journalnode进程采用paxos协议设计,适合运行在奇数台机器！3 如果启动了Journalnode，那么没有必要，也不能再启动SecondaryNamenode4 不能出现脑裂现象(不能同时出现两个active状态的namenode)5 hadoop ha配置(1) 三个文件添加JAVA_HOMEhadoop-en...

2020-04-04 22:29:52 163

原创 Zookeeper重点

1 一个leader,多个follower2 半数以上节点存活,集群才能存活(半数都不行)3 每个节点的数据都是一样的(Zookeeper值存储配置)4 请求按照顺序执行5 数据更新是原则性的6 命令命令基本语法功能描述help显示所有操作命令ls path [watch]使用 ls 命令来查看当前znode中所包含的内容stat查看节点状态...

2020-04-04 20:28:30 117