- 博客(4)
- 收藏
- 关注
RSS订阅原创 hive 外部表和内部表 区别
未被external修饰的是内部表（managed table），被external修饰的为外部表（external table）； 区别： 内部表数据由Hive自身管理，外部表数据由HDFS管理； 内部表数据存储的位置是hive.metastore.warehouse.dir（默认：/user/hive/warehouse），外部表数据的存储位置由自己制定； 删除内部表会直接删除元数据（meta...
2019-05-07 16:36:53
234
原创 hadoop集群format后，hadoop fs -ls /结果为空的分析过程
首先集群已经是使用过hive一段时间，然后手欠给format了，集群启动后执行hadoop fs -ls /发现结果为空，但是在hive中又能查到库的信息，如图： 可以看到hive中的配置信息中并没有指定warehouse的路径，所以为默认，如图： 此时再hive中随便创建名为的aaa的数据库 然后尝试删除之前的test库时报错： 结合上述截图，说明hive中显示的只是之前的元数据信息，本...
2019-05-07 16:17:30
2165
原创 关于hive数据导入的小实验
首先在自己本地路径编写2个数据文件： pv.txt： 1,111 2,111 1,222 user.txt: 111,25 111,18 222,32 然后hive中直接创建对应的2个表pv和users： create table pv( pageid string, userid string) row format delimited fields terminated by ‘,’; cre...
2019-05-07 15:49:52
215
原创 format Hadoop集群后slave的DataNode无法启动的问题
因为是头一次编写，尝试一下。 首先我们要做的是环境介绍。 3个虚拟机：1个master，2个slave。 主要操作在master上。 首先root 111111进入master。 启动Hadoop： /usr/local/src/hadoop-2.6.1/bin/hadoop namenode -format 然后启动集群： /usr/local/src/hadoop-2.6.1/sbin/...
2019-05-07 13:22:18
3070
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人