- 博客(6)
- 收藏
- 关注
RSS订阅原创 Hive的安装与配置
（1）上传，导jar包。上传tar包，解压。此处我们用的hive是2.3.3。在hive的lib下添加一个mysql-connect-jar。将元数据管理配置为mysql。Hive的元数据默认是保存在DerBy数据库中，但是这个数据库会随着客户端的移动而重新生成。所以我们统一将元数据使用mysql来保存。在Hive的conf下添加以下配置信息。vi hive-site.xml <?xml version="1.0" encoding="UTF-8" standalone="
2021-11-07 15:01:01
1446
原创 hive处理json数据
{"movie":"1193","rate":"5","timeStamp":"978300760","uid":"1"}1、创建一张表，表中只有一个字段，这一个字段就是一条json数据。2、通过get_json_obejct()select get_json_obejct(data,'$.movie') movie,get_json_obejct(data,'$.rate') rate,get_json_obejct(data,'$.timeStamp') ts,get_json_obej.
2021-11-01 09:07:17
1052
原创 配置虚拟机环境变量
cd /usr/创建一个目录：mkdir software如果目录存在：rm -rf software，然后重新创建。cd software/把对应的tar拖进去。解压 tar -zxvf tar包名称解压完可以tar包删除：rm -rm tar包名称配置JDK的环境变量：vi /etc/profile在最后一行添加：export JAVA_HOME=/usr/software/jdk1.8.0_181export PATH=$PATH:$JAVA_HOME/bin重新加载环
2021-10-25 09:09:13
1428
原创 在虚拟机上搭建Hadoop集群
cd /usr/software/通过xshell把tar包拖进来tar -zxvf hadoop-2.7.3.tar.gzrm -rf hadoop-2.7.3.tar.gzcd hadoop-2.7.3/etc/hadoop/vi hadoop-env.sh找到并修改：export JAVA_HOME=/usr/software/jdk1.8.0_181vi core-site.xml在configuration的标签中间添加：<property><name>
2021-10-18 09:24:16
428
原创 mysql数据库的安装与配置
1.下载 MySQL :: Download MySQL Community Server (Archived Versions)下载后长这个样子解压，并在解压后的目录的同层级下面创建mysqlData文件，后续会用2.安装1.进入mysql8.0.15解压后的目录，创建一个my.ini文件，使用超文本进行编辑内容如下 [mysqld] # 设置3306端口 port=3306 # 自定义设置mysql的安装目录，即解压mysql.
2021-09-27 14:46:06
169
原创 Spring IOC的运用和扩展
IOC不是一种技术，只是一种思想，一个重要的面向对象编程的法则，它能指导我们如何设计出松耦合、更优良的程序。传统应用程序都是由我们在类内部主动创建依赖对象，从而导致类与类之间高耦合，难于测试；有了IOC容器后，把创建和查找依赖对象的控制权交给了容器，由容器进行注入组合对象，所以对象与对象之间是 松散耦合，这样也方便测试，利于功能复用，更重要的是使得程序的整个体系结构变得非常灵活。 其实IOC对编程带来的最大改变不是从代码上，而是从思想上，发生了“主从换位”的变化。应用程序原本是老大，要获取什么资源都是
2021-09-17 09:56:59
167
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人