- 博客(26)
- 收藏
- 关注
RSS订阅原创 hive命令
（1）关闭RunJar服务，重写/opt/softs/hive3.1.2/conf/下的hive-site.xml文件。三、永久去除beeline中的info信息。（2）启动hive，检查info是否永久删除。
2024-06-19 19:54:21
110
原创 hive启动方式
注意：要保证进程中的RunJar只有一个，启动前先杀死进程中的RunJar。（1）先在/opt/softs/hive3.1.2中创建log目录。（1）编写shell脚本，保存文件名为 my_hive.sh。(2)上传文件到/opt/shell，运行脚本。二、使用hiveserver2命令。四、使用shell脚本启动。一、使用hive命令。
2024-06-19 09:32:36
231
原创 使用shell脚本开启Hadoop、查看JPS服务
（2）配置/opt/softs/hadoop3.1.3/sbin下的 start-dfs.sh、stop-dfs.sh文件。(1)编写my_hadoop.sh文件，注意文件格式。（3）运行shell文件。
2024-06-19 09:30:54
236
原创 Hive安装手册
(2)在/opt/softs/hadoop3.1.3/etc/hadoop/core-site.xml中添加代码。（1）在/opt/softs/hive3.1.2/conf/中添加hive-site.xml。2.在 /opt/softs/hive3.1.2/lib/下添加文件。6.可以在tmp中查看hive日志。初始化hive的元数据库后。3.查看MySQL数据库。2.配置Hive路径。
2024-06-12 11:19:36
137
原创 linux安装mysql
1.先将mysql-5.7.28-1.el7.x86_64.rpm-bundle.tar放到/opt/install_packages/中。
2024-06-11 16:58:21
214
原创 根据平均分划分学生
打包mapreduce_demo.jar放到/opt/jar文件夹中 ，上传/opt/file/student_message.txt文件到/input文件夹中。在linux虚拟机上执行程序。
2024-06-06 13:39:05
114
原创 _mapreducce计算手机流量使用
程序运行成功后，开启虚拟机dfs、yarn服务，打包mapreduce_demo.jar放到/opt/jar文件夹中，将文件phone_data.txt上传到/input文件夹。复制执行程序的全路径。
2024-06-05 22:02:58
136
1
原创 在虚拟机上执行IDEA代码
解决：先关闭dfs、yarn服务再修改以下两个文件，三个虚拟机的文件都修改完成后，重新开启服务，再执行操作。先删除原有的target包，再点击“1”处，打包后重新出现“2”，有“3”代表成功。第二个jar包比第一个多出External Libraries中的内容。3.将words.txt放到/opt/file下。在mapred-site.xml中添加如下内容。先修改一台虚拟机的文件内容，再拷贝到另外两台上。在yarn-site.xml中添加如下内容。将文件重命名拖到 /opt/jar下。
2024-06-04 21:37:45
211
原创 大数据实验Day05----通过JavaAPI操作
（3）点击winutils.exe，检查是否配置成功。（1）将D:\hadoop\hadoop3.1.3\bin中的hadoop.dll文件复制到C:\Windows\System32中。2.在IDEA中操作hdfs文件（windows主机）（3）在hdfs上创建一个文件，并写入指定的内容。（4）对hdfs上的文件修改其路径和名称。（5）在pom.xml中添加依赖。（7）从hdfs上下载文件到本地。（5）读取hdfs上的文件内容。（8）查看hdfs上的文件信息。（2）删除hdfs目录。
2024-05-31 16:35:50
132
原创 大数据实践Day04----hdfs基础命令
解决：在C:\Windows\System32\drivers\etc的hosts文件中加入。如果还是报错，就去检查防火墙状态，如未禁用，禁用防火墙。1.开启任务历史服务（方便查看日志）命令行操作有两种格式。(2)对于文件的操作。
2024-05-30 20:57:04
162
原创 大数据实践(Day03-02)----集群搭建（hadoop分布式安装）
7.将/etc/profile文件复制到另外两台虚拟机（bigdata02传到bigdata03、bigdata04）6.将整个Hadoop文件分发到另外两台上 （bigdata02传到bigdata03、bigdata04）上传文件到/opt/softs/hadoop3.1.3/etc/hadoop/ （直接拖进去）5.集群规划，搭建HDFS和YARN (在bigdata02上操作)6.配置DataNode所在的结点 (在bigdata02上操作)9.在bigdata02节点上，启动hdfs。
2024-05-29 17:01:31
308
原创 大数据实践（Day03-01）-----Hadoop的伪分布式
4. 将公钥发送给需要免密登录的虚拟机上。一、修改Hadoop中的一些配置。3.生成免密登录的公钥和私钥。1.配置proflie文件。4.增加用户信息，提高速度。
2024-05-29 11:14:06
214
原创 大数据实践（Day2）
4.关闭虚拟机，重启虚拟机，打开MobaXterm，创建新的session。1.关闭NetworkManager服务(只针对本次虚拟机运行时有效)手动修改虚拟机位置，使其与bigdata文件位于同一目录。（1）当前处于/opt目录中时,使用相对路径创建子目录。（2）在任意目录下时 可以使用绝对路径创建目录。2.关闭防火墙（只针对本次虚拟机运行时有效）eg: bigdata改为bigdata01。3.修改克隆后虚拟机bigdata01的。10.关闭模板虚拟机（直接点叉号关闭）1.查询防火墙的状态。
2024-05-28 13:44:28
333
原创 Linux环境搭建（学习笔记）
第一步：检查电脑是否开启虚拟化，支持虚拟机平台第二步：创建虚拟机第三步：配置网络第四步：开启虚拟机第五步：登录root用户第六步：配置本机IP地址第七步：重启网络
2024-05-27 22:28:47
312
原创 JDBC程序设计 实验一（纯用作记录代码）
1.新建连接 ("jdbc:mysql://localhost:3306/test","root","root")链接：https://pan.baidu.com/s/1xJNC7fMLSDzZd2sK2JX5Wg。1.导入库 mysql-connector-java-5.1.7-bin.jar。2.代码(类：User，userDao，Test1)一、Navicat for MySQL命令行。二、Net Beans IDE 7.4。3.命令行创建表Query1。2.新建数据库test。
2023-09-11 23:37:58
158
原创 计算机网络实验四——应用层协议分析与服务配置
在Packet Tracer中完成Web、FTP、Mail、DNS的配置，并验证服务的正确性。
2023-05-30 14:58:06
1295
2
原创 计算机网络实验——路由器安装与配置
答: 根据这些静态路由的目的IP子网进行汇总或者使用一条目的网段全0的静态默认路由代替之前的所有路由，也可以使用动态路由: route rip net下—跳的网络net其他连接在本路由器的网络。答：只要使用三个路由器R1、R2、R3，使得R1下一跳指向R2，R2下一跳指向R3，R3下一跳指向R1。6. 查看路由器的路由表，并分析分组的路由过程。当路由表中存在多条下一跳同样的静态路由，应如何简化路由的配置？机可以寻址的范围，即与其它哪些路由器的路径可达。图2 路由器接口启动后的拓扑。
2023-05-24 15:48:35
1905
2
原创 C++练习题及解析
1．建立一个类 MOVE，不进行排序，将数组中小于平均值的元素放到数组的左边，大于平 均值的元素放到数组的右边。 具体要求如下： （1）私有数据成员 float array[20]：一维整型数组。 int n：数组中元素的个数。 （2）公有成员函数 MOVE(float b[],int m)：构造函数，初始化成员数据。 void average()：输出平均值，并将数组中的元素按要求重新放置。 void prin...
2023-05-23 14:59:31
436
1
原创 安装matlab 2016b（Windows11系统）报错
matlab 2016b安装到78％ 弹出提示框 弹出dvd1并插入DVD2以继续，怎么处理？
2022-03-05 15:40:27
2668
原创 JAVA学习之Java语言基础（简单记录一点小细节）
1.每一个应用程序都必须包含一个main()方法，含有main()方法的类称为主类。2.文件名必须和类名相同。（eg:类名：First，文件名：First.java。)3.Java程序中的main()方法必须声明为public static void。4.Java语言是严格区分大小写的。一、基本数据类型。5. 8位等于一个字节。6.int型是Java整型值的默认数据类型。当对多个尚未定义数据类型的整数做运算时，运算的结果将默认为Int类型。public class Demo {
2022-02-07 21:09:02
99
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人