![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
操作系统
文章平均质量分 69
Yet again
这个作者很懒,什么都没留下…
展开
-
安装和配置 Hive 数据仓库
文章目录准备条件实验步骤准备条件虚拟机 VMWareLinux 系统 UbuntuJava JDK8Hadoop 2.7.3Hive 2.1.1实验步骤步骤 1下载和解压 apache-hive-2.1.1-bin.tar.gz 到 ~ 目录tar -zxvf ./apache-hive-2.1.1-bin.tar.gzsudo mv apache-hive-2.1.1-bin hive-2.1.1 // 更改文件夹名称sudo chown -R 用户名 hive-2.1.1原创 2021-11-28 17:32:35 · 1788 阅读 · 0 评论 -
使用 Hive QL 操作数据
文章目录准备条件实验步骤准备条件虚拟机 VMWareLinux 系统 UbuntuJava JDK8Hadoop 2.7.3Hive 2.1.1实验步骤步骤1启动 HDFS ,注意 Hive 是运行在 HDFS 之上的,必须安装好和启动 HDFS 才能使用 Hive启动 Hive进入 Hive 命令行(CLI)cd ~/hive-2.1.1/binhive步骤2创建数据库 testdb.步骤3创建 student 表,包含下面 5 列:1. id 学号,使用原创 2021-11-28 17:23:25 · 1333 阅读 · 0 评论 -
HDFS Java API使用
文章目录准备条件实验步骤准备条件虚拟机VMWareLinux系统 UbuntuJava JDK8Hadoop 2.7.3Eclipsehadoop-eclipse-plugin-2.7.3.jar实验步骤步骤1启动 HDFS,cd ~~/hadoop-2.7.3/sbin/start-all.sh执行jps查看运行状态,确保Namenode,Datanode等进程已经启动步骤2安装好Eclipse,配置Hadoop插件步骤3启动Eclipse,使用HDFS Java原创 2021-11-28 17:18:52 · 1475 阅读 · 0 评论 -
HDFS Java开发环境Eclipse的配置
文章目录准备条件实验步骤准备条件虚拟机VMWareLinux系统UbuntuJava JDK8Hadoop 2.7.3Eclipsehadoop-eclipse-plugin-2.7.3.jar实验步骤步骤1为防止每次重启Linux,Namenode的格式化信息丢失导致Namenode无法启动,需要修改tm文件位置,执行sudomkdir ~/hadoop_tmp&&chmodo+w~/hadoop_tmp,然后设置tmp为home目录下的hadoop_tmp在原创 2021-11-28 17:15:15 · 489 阅读 · 0 评论 -
使用 HDFS Shell 命令管理文件系统
文章目录1. 熟悉常用 HDFS Shell 命令2. 会使用 Shell 对 HDFS 进行简单的文件管理1. 熟悉常用 HDFS Shell 命令2. 会使用 Shell 对 HDFS 进行简单的文件管理实验步骤:启动 HDFS 服务 命令:cd ~/hadoop-2.7.3/sbin ./start-all.sh 检查 HDFS 文件系统的整体状态命令: hdfs fsck /使用 ls 命令查看文件和目录,输出是空的吗?如果是空的表示什么?命令:hdfs dfs原创 2021-11-27 22:19:28 · 1043 阅读 · 0 评论 -
在单节点集群上安装Hadoop和HDFS
一、准备条件虚拟机VMWareLinux系统 UbuntuJava JDK8Hadoop 2.7.3二、实验目的回顾复习Linux 文件操作和vi编辑器使用方法学会在Ubuntu系统中安装和配置Hadoop掌握启动Hadoop和查看HDFS daemons服务状态的方法三、实验原理Linux系统下Java 运行和开发环境JDK的安装配置在Java环境中安装和运行Hadoop四、实验步骤步骤1在Ubuntu中下载Java 8 的tar文件jdk-8u101-linux-原创 2021-11-27 22:08:36 · 476 阅读 · 0 评论 -
使用 HDFS Shell 命令管理文件系统
启动 HDFS 服务 命令:cd ~/hadoop-2.7.3/sbin ./start-all.sh 检查 HDFS 文件系统的整体状态命令: hdfs fsck /使用 ls 命令查看文件和目录,输出是空的吗?如果是空的表示什么?命令:hdfs dfs -ls /是空的。表示文件系统里面没有任何文件。4. 使用 mkdir 创建两个文件夹,文件夹名称为 test1 和 test2.命令:hdfs dfs -mkdir -p /gs/test1 hdf.原创 2021-11-20 16:48:30 · 1027 阅读 · 0 评论 -
Linux 实时查看日志文件方法
@TOC1. tail Command – Monitor Logs in Real Time如前所述,tail 命令是实时显示日志的最常用的方法。不过该命令有两个版本,如下所示。第一个例子是为 tail 命令加上 -f 参数。$ sudo tail -f /var/log/apache2/access.log第二个例子就是 tailf 命令。它本身内建了 -f 参数,因此你无需再为它指定 -f 参数。$ sudo tailf /var/log/apache2/access.log通常 L原创 2021-11-19 14:12:51 · 524 阅读 · 0 评论 -
Shell命令使用
实验具体过程及结果.图形化用户界面下的Shell命令操作1)启动计算机,以超级用户身份登录图形化用户界面。2)依次单击顶部面板的“应用程序”->“附件”->“终端”菜单项,打开桌面环境下的终端工具。3)输入命令“date”,显示当前日期和时间。4)输入命令“date031608002020”,屏幕显示新修改的系统时间。5)输入命令“cal2020”,显示2020年的日历。6)输入“manls”命令,显示书册页中ls命令相关帮助信息的第一页,介绍ls命令的含义、语法结构以及-a原创 2021-11-14 00:28:44 · 2229 阅读 · 0 评论 -
Linux复习资料
1、DNS服务器的守护进程是named。2、Linux系统中DNS设置文件是/etc/resolv.conf。3、Linux内核版本有稳定版和开发版两种。4、超级用户root的家目录是 /root。5、Shell命令根据执行方式分为内置命令和外部命令 。6、Bash默认最多保存 1000 个Shell命令的历史记录。7、在Linux系统中,切换用户的命令是su。8、在一块磁盘上,主分区最大个数是4个。9、Linux文件系统物理结构有顺序、串联、索引和多重索引 等方式。10、如果未指原创 2021-09-20 23:32:48 · 2406 阅读 · 0 评论 -
Linux文件搜索、退出
文件搜索find / -name file1 从 ‘/’ 开始进入根文件系统搜索文件和目录find / -user user1 搜索属于用户 ‘user1’ 的文件和目录find /home/user1 -name *.bin 在目录 ‘/ home/user1’ 中搜索带有’.bin’ 结尾的文件find /usr/bin -type f -atime +100 搜索在过去100天内未被使用过的执行文件find /usr/bin -type f -mtime -10 搜索在10天内被创建或者修改原创 2021-09-20 00:47:08 · 712 阅读 · 0 评论