![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据
文章平均质量分 58
大数据相关知识
Mercy92
这个作者很懒,什么都没留下…
展开
-
【数据仓库】原理
课程地址:https://www.bilibili.com/video/BV1qv411y7Wv原创 2021-02-07 17:09:18 · 134 阅读 · 0 评论 -
【数据仓库-Hive】笔记(未完)
一、数据库操作1.创建数据库show databases;create database 数据库名称 if not exit;ues 数据库名称;新建的数据库都保存在hdfs上,由hive-site.xml属性指定hive.metastore.warehouse.dir/user/hive/warehouse2.指定路径创建数据库create database 数据库名 location 位置3.设置数据库键值对信息create database 数据库名 with dbproper原创 2021-01-08 15:45:08 · 310 阅读 · 0 评论 -
【sqoop】笔记
一.简介二.安装三.导入1.全量导入到hdfs2.全量导入到hive方式一3.导入表数据的子集(where过滤)4.导入表数据的子集(query查询)5.增量导入1)append四、导出五、job作业原创 2020-12-22 11:48:19 · 107 阅读 · 0 评论 -
【Linux】shell脚本
一、基础知识1.shell简介shell是用户使用 Linux 的桥梁,在Linux中输入命令的界面就是shell,如[root@localhost ~]# alias ld=‘ll -d’[root@localhost ~]#echo $SHELL[root@localhost ~]#echo $02.shell版本最常用的是 /bin/bash3.shell脚本shell脚本是一个文本,通过赋权后可执行,执行的内容有文本内容决定。shell脚本搭配正则表达式、管道命令、数据流重定向等原创 2020-12-09 14:32:23 · 168 阅读 · 0 评论 -
【Linux搭建】安装jdk和kettle,并在linux中使用kettle以及后台执行定时任务
JDK镜像:http://www.sousou88.com/spec/java_openjdk.html原创 2020-12-06 22:21:45 · 1179 阅读 · 1 评论 -
【Linux搭建】使用yum命令安装mysql并远程连接
参考文档1:Linux环境yum,安装MySQL1.查看系统是否有安装mysql[root@localhost ~]#yum list installed mysql*[root@localhost ~]#rpm –qa|grep mysql*[root@localhost ~]#yum list mysql*2.安装mysql客户端[root@localhost ~]#yum install mysql3.安装mysql服务端1[root@localhost ~]#yum install原创 2020-12-05 12:49:36 · 269 阅读 · 0 评论 -
【Linux搭建】安装配置Linux虚拟机详细步骤
一、安装VMware搜索引擎下载安装VMwareVMware Woorkstation12二、安装虚拟机1.下载Centos7CentOS-7-x86_64-DVD-2003.iso2.在VMware上主页-创建新的虚拟机3.虚拟机向导配置:典型稍后安装操作系统操作系统:Linux ,版本Centos 64位修改虚拟机名称和位置自定义磁盘大小自定义硬件修改内存(本机的一半)添加镜像文件网络默认NAT模式4.开启虚拟机选择Install CentOS原创 2020-12-03 00:22:35 · 575 阅读 · 0 评论 -
【Linux搭建】Linux虚拟机上搭建Hadoop集群
教程参考:https://edu.hellobi.com/course/136文章目录一、安装虚拟机和远程连接二、准备工作三、下载安装包四、JDK的安装和配置五、配置SSH(免密码登陆)六、hadoop配置七、格式化Hdfs八、启动hadoop集群九、验证一、安装虚拟机和远程连接Vmwarecentos一般步骤可参考其他文章最小安装可能却很多东西连接网络xshell和xftp将网络设置为桥接模式(不是NAT模式),使用xshell从本机连接虚拟机,xftp从本地机给虚拟机传输文件在原创 2020-08-01 00:33:43 · 412 阅读 · 0 评论 -
【Linux】基础常用操作之二
文章目录一、压缩和解压命令1) `tar`【格式 .tar.gz】2)`zip`和`unzip`【格式 .zip】二、文件查找1)`find`查找文件2)`grep`查找文件内容3)`which`查找可执行文件位置三、系统管理命令1)`ps`查看系统中当前运行的进程2)`kill`杀死进程3) 管道`|`四、用户操作1)用户创建`useradd`和密码设置`passwd`2)用户删除 `userdel `3)切换用户`su`五、权限管理1)分析权限2)修改权限`chmod`六、网络和服务管理1)查看主机名`原创 2020-12-01 15:52:28 · 95 阅读 · 0 评论 -
【Linux】基础常用操作
一、安装1.Vmware2.centos3.xshellifconfig二、原创 2020-06-12 00:08:06 · 296 阅读 · 0 评论 -
【Kettle Spoon】课程要点简记
文章目录一、入门二、输入控件三、输出控件四、转换控件1.Concat fields2.值映射3.增加常量4.增加序列5.字段选择6.计算器7.剪切字符串+字符串替换+字符串操作一、入门二、输入控件三、输出控件四、转换控件1.Concat fields2.值映射3.增加常量4.增加序列5.字段选择6.计算器7.剪切字符串+字符串替换+字符串操作...原创 2020-06-05 16:20:29 · 2035 阅读 · 0 评论