![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 50
#姚大姚
这里我主要会写一些在学习过程中遇到的困难。并且碰到好的学习资源也会分享出来,也把这个博客作为自己的知识库使用,正在学习的同学们也推荐建立一个自己的知识库,把自己遇到的问题记录下来。
展开
-
linux/centos/集群安装ntp时间同步,自身实验成功
1. 准备节点不管你有多少个节点,肯定要有一个 server 角色,至于谁是 server 你来决定。例如下面这样,我们姑且假设有这样四个节点192.168.11.101(server端 node1)192.168.11.102(client端 node2)192.168.11.103(client端 node3)2. 安装配置 server 节点在192.168.11.101端作为服务端,并在该节点进行以下步骤2.1 下载安装[root@node1 ~]# yum install n原创 2022-03-17 13:47:07 · 1169 阅读 · 0 评论 -
java 命令直接执行(运行)jar 包的几种方法【笔记自用】
主要有两种方式:一是打的 jar 包的 META-INF/MANIFEST.MF 文件里指定的 Main-Class;另一个是命令行指定要运行的 Main-Class。1jar 包里包含 Main-Class:java -jar MyJar.jar arg0 arg1通过 -jar 参数可以直接运行,需要打 jar 包时,在 META-INF/MANIFEST.MF 文件里指定 Main-Class。关于这种打包操作参考 Maven 生成(打包)带有依赖的可以直接执行的一个 jar 包。2j原创 2021-10-18 23:11:09 · 38572 阅读 · 0 评论 -
Exception in thread “main“ org.apache.hadoop.hbase.client.RetriesExhaustedException: Can‘t get the l
看尚硅谷视频,在windows上运行集群上的hbase时package org.example;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.client.HBaseAdmin;import java.io.IOException;public class TestHBaseApi { private static HBaseConfiguration conf;原创 2021-10-17 17:39:44 · 913 阅读 · 0 评论 -
windows下的eclipse运行hdfs程序时报错 (null) entry in command string: null chmod 0644【笔记自用】
运行下面代码时,报了 (null) entry in command string: null chmod 0644解决方案下载hadoop.dll文件并拷贝到C:\windows\system32目录中如果没用,则重启eclipse或者idea原创 2021-10-17 00:23:41 · 354 阅读 · 0 评论 -
.a和.so和.sa文件是什么意思,.a静态库,.sa动态库
静态库(.a):程序在编译链接的时候把库的代码链接到可执行文件中。程序运行的时候将不再需要静态库。动态库(.so或.sa):程序在运行的时候才去链接共享库的代码,多个程序共享使用库的代码。...原创 2021-10-15 12:45:29 · 1715 阅读 · 0 评论 -
Hadoop中Context类的作用和Mapper<LongWritable, Text, Text, LongWritable>.Context context是怎么回事【笔记自用】
问题导读:1.Context能干什么?2.你对Context类了解多少?3.Context在mapreduce中的作用是什么?下面我们通过来源码,来得到Context的作用:下面主要对Setup函数进行深入探讨:首先看下两个程序的区别:区别在于第一个程序把 context这个上下文对象作为map函数的参数传到map函数中,第二个程序则是在setup函数中处理了 context对象,从这个角度讲,在Map类的实例中是可以拿到Context这个上下文对象的,这一点是毋庸置疑的,不管是在类内部的哪原创 2021-05-03 00:35:51 · 2377 阅读 · 0 评论 -
IDEA上编写hadoop程序(Maven)【笔记自用】
说明:在IDEA上进行编写简单的hadoop程序,适用于个人简单入门版本:IDEA2019.3.3 + Hadoop2.6 + java8 + win10系列:一,创建项目1,创建项目 2,选择Maven,选择自己的JDK,不用选择Create from archetype(创建表单原型),点击Next 3,输入想要创建项目的Name(名称)和Location(工作区),这里输入的项目名称为WordCount,点击FilnishIEDA会帮你创建好项目的基础结构3.1,IDEA2019.原创 2021-04-22 00:35:57 · 3092 阅读 · 0 评论