hive
文章平均质量分 83
jianmin0920
这个作者很懒,什么都没留下…
展开
-
Linux下升级安装Python-3.6.2版本
Linux下升级安装Python-3.6.2版本本文主要介绍在Linux(CentOS)下将Python的版本升级为3.6.2的方法众所周知,在2020年python官方将不再支持2.7版本的python,所以使用3.x版本的python是必要的,但是linux中默认安装的python一般是2.6和2.7版本的,要是使用linux下的python就很有必要升级一下进入正题1.检查确认系统的相关信息[root@zstest1 ~]# cat /etc/redhat-releaseCentOS re原创 2021-05-21 09:48:25 · 280 阅读 · 0 评论 -
Hadoop(伪分布式)和Hive的安装
一 hadoop的安装 1.解决本机的免密钥登录问题 在root用户在输入 ssh-keygen -t -rsa,连着敲三下,生成本机的密钥,后进入/root/.ssh目录下,将密钥写入到权限文件中,即 catid_rsa.pub >>authorized_keys 2.安装jdk 官网下载jdk后,解压至环境中的某一目录下,后在通过命令 vim /etc/profile,添加如下内容 export JAVA_HOME=/opt/...原创 2021-01-28 15:47:24 · 360 阅读 · 1 评论 -
执行脚本
export HIVE_HOME=/opt/install/hive-1.2.2-binfunction insert_into_part(){HIVEHOME/bin/hive−e"use∗∗∗∗∗∗∗;insertoverwritetable∗∗∗∗∗∗∗partition(inserttime=′HIVE_HOME/bin/hive -e "use *******; insert overwrite table ******* partition (原创 2020-07-08 15:29:27 · 167 阅读 · 0 评论 -
shell实现数据迁移
#!/bin/shexport SQOOP_HOME=/opt/install/sqoop-1.4.7.bin__hadoop-2.6.0export HIVE_HOME=/opt/install/hive-1.2.2-binhostname="..."user=“root”password="******"database=“populcationcensus”table=“AntiepidemicDataIncrement”table1=""curr_max=0function db原创 2020-07-07 09:24:57 · 711 阅读 · 0 评论 -
sqoop实现数据迁移
sqoop命令中的 \ 后不能接任何空格,否则报错(1)sqoop help 查看命令(2)显示所有库名方式一:sqoop list-databases –connect jdbc:mysql://...:3306 –username root –password 123456方式二:sqoop list-databases –connect jdbc:mysql://...:3306 –username root -P后直接提示通过键盘输入数据库密码(3)显示某个数据库里所有表原创 2020-07-02 11:53:46 · 464 阅读 · 0 评论