Hive
余建新-18588497759
这个作者很懒,什么都没留下…
展开
-
Hive 数据迁移
3、工作路径:cd /usr/local/fqlhadoop/hadoop/bin。2、操作机器:ETL 机器 XX.14.36.216。同步集团的数据到断直连环境。1、环境:断直连模拟环境。原创 2024-01-12 23:19:04 · 621 阅读 · 0 评论 -
Hive 记录
建表、导入数据DROP TABLE test_hive_row_number_1;CREATE TABLE IF NOT EXISTS test_hive_row_number_1( order_date INT, order_user STRING, order_city STRING, order_amount INT)ROW FORMAT DELIMITED FIELDS TERMINATED BY ',';DESCRIBE test_hive_row_nu原创 2022-04-02 14:45:56 · 3345 阅读 · 0 评论 -
详细总结 Hive VS 传统关系型数据库
本文思路,看图说话,一张图,清晰总结二者区别下面对图中的各条做详细总结1、查询语言不做赘述2、数据存储位置不做赘述3、数据格式Hive:Hive 中没有定义专门的数据格式,数据格式可以由用户指定,用户定义数据格式需要指定三个属性:列分隔符(通常为空格、”\t”、”\x001″)、行分隔符(”\n”)以及读取文件数据的方法(Hive 中默认有三个文件格式原创 2014-06-15 19:04:05 · 2520 阅读 · 0 评论 -
简要总结 数据仓库VS数据库
本文简要总结以下两个问题,旨在快速理解“数据仓库”1、什么是“数据仓库”?2、“数据仓库”与“数据库”的区别?下面做详细阐述:1、什么是“数据仓库”?“一个数据仓库通常是一个面向主题的、集成的、与时间相关且不可修改的(可以添加)数据集合,它用于对管理决策过程的支持。”此句话包含几个关键点:面向主题的、集成的、与时间相关的、不可修改的,具体含义欢迎留言交流。2、数据仓原创 2014-06-15 18:51:45 · 2698 阅读 · 0 评论 -
Hive命令的3种调用方式
方式1:hive –f /root/shell/hive-script.sql(适合多语句)hive-script.sql类似于script一样,直接写查询命令就行例如:[root@cloud4 shell]# vi hive_script3.sqlselect * from t1;select count(*) from t1;不进入交互模式,执行一个hive原创 2014-05-23 21:48:29 · 1261 阅读 · 0 评论 -
详细图解 Hive介绍、安装配置
写在前面一:本文总结“Hadoop生态系统”中的其中一员——Apache Hive,话不多说,直入正文写在前面二:环境说明:一、什么是Apache Sqoop官网最有力:Apache Sqoop(TM) is a tool designed for efficiently transferringbulk data between ApacheHadoo原创 2014-05-23 21:44:33 · 1728 阅读 · 5 评论 -
Hive中的4种表
1、内部表 CREATE TABLE t1(id int); LOAD DATA LOCAL INPATH '/home/yujianxin/hive/test1/id' INTO TABLE t1; 加LOCAL 直接从本地Linux读取数据; 不加LOCAL,是从HDFS中读取数据。 CREATE TABLE t2(id int,原创 2014-05-23 21:51:01 · 1719 阅读 · 0 评论 -
Hive整合HBase——通过Hive读/写 HBase中的表
写在前面一:本文将Hive与HBase整合在一起,使Hive可以读取HBase中的数据,让Hadoop生态系统中最为常用的两大框架互相结合,相得益彰。写在前面二:使用软件说明:约定所有软件的存放目录:/home/yujianxin一、Hive整合HBase原理Hive与HBase整合的实现是利用两者本身对外的API接口互相进行通信,相互通信主要是依靠hive-hbase-handler-0.9.0原创 2014-06-04 12:32:03 · 18185 阅读 · 7 评论