安装mysql:
(1)下载安装包文件:
wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm
(2)安装mysql-community-release-el7-5.noarch.rpm包:
rpm -ivh mysql-community-release-el7-5.noarch.rpm
(3)安装mysql:
yum install mysql-server
yum install mysql
yum install mysql-devel
(4)安装成功后重启mysql服务。
service mysqld restart
(5)第一次进入mysql,root账户没有密码。
[root@master ~]# mysql -u root
(6)设置密码
mysql> set password for 'root'@'localhost' =password('root');
(7)远程连接设置
把在所有数据库的所有表的所有权限赋值给位于所有IP地址的root用户。
mysql> grant all privileges on *.* to root@'%'identified by 'root';
如果是新用户而不是root,则要先新建用户
mysql>create user 'username'@'%' identified by 'root';
此时就可以进行远程连接了。
(8)配置默认编码
mysql配置文件为/etc/my.cnf,文末加上:
[mysql] default-character-set =utf8
安装hive:
hive与hadoop的对应关系,在hive官网查看
http://hive.apache.org/downloads.html
下载解压,创建软连接ln -s .. ..
环境变量:
#set hive env
export HIVE_HOME=/export/servers/hive
export PATH=$HIVE_HOME/bin:$HIVE_HOME/conf:$PATH
配置:/hive/conf/
hive-env.sh,指定hadoop目录
HADOOP_HOME=/export/servers/hadoop
hive-site.xml,配置 MySQL 数据库连接信息
<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true&characterEncoding=UTF-8&useSSL=false</value> </property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>root</value>
</property>
</configuration>
配置mysql的驱动:
将 mysql-connector-java-5.1.40-bin.jar 放入 $HIVE_HOME/lib 下。
(需要,虽然在后面会提示:加载类“com.mysql.jdbc.Driver”。这是弃用。
新的驱动类是“com.mysql.cj.jdbc.Driver”。
驱动程序通过SPI自动注册,通常不需要手动加载驱动程序类。)
下载地址:http://dev.mysql.com/downloads/connector/j/
解压出来有mysql-connector-java-8.0.12.jar
为Hive创建HDFS目录(直接复制下面命令):
创建 /tmp 和 /user/hive/warehouse 目录并给它们赋写权限。
(hive-site.xml 配置文件中属性项 hive.metastore.warehouse.dir 的默认值)
start-dfs.sh
hdfs dfs -mkdir /tmp
hdfs dfs -mkdir -p /usr/hive/warehouse
hdfs dfs -chmod g+w /tmp
hdfs dfs -chmod g+w /usr/hive/warehouse
hive在启动前到进行元数据初始化:
[root@master bin]# ./schematool -initSchema -dbType mysql
看到schemaTool completed 则初始化完成
启动:
[root@master conf]# hive
hive> show tables;
OK
Time taken: 0.771 seconds
hive>
创建一张表:
CREATE TABLE IF NOT EXISTS employee ( id int, name String, salary String, destination String)
hive> CREATE TABLE IF NOT EXISTS employee ( id int, name String, salary String, destination String);
OK
Time taken: 0.791 seconds
hive> show tables;
OK
employee
Time taken: 0.117 seconds, Fetched: 1 row(s)
hive>