- 博客(6)
- 资源 (24)
- 收藏
- 关注
原创 在eclipse中运行WordCount程序时的错误
有时候,我们为了方便学习或者编码,又或者是linux服务器就不在我们身边,我们只能利用远程来学习使用hadoop,这样我们就的在windows下面链接服务器端的hadoop服务,来作业。在配置的过程中,我遇到了好多问题,这里我只说一个错误。那就是在运行WordCount程序的时候遇到的错误。如下图:是不是比较明白?在FileUtil中的,checkReturnValue
2016-02-23 10:22:54 2419
原创 在了解hadoop过程中碰到的一些问题
在学习hadoop的时候,经常性的遇到问题是必不可少的阶段,因为想要学好一门技术,必须要经过无数的错误,才能百炼成金。1、当hadoop配置文件的配置发生变化的时候,有时候hadoop在启动的时候会进入安全模式,这样不能删除已经增加hdfs系统中的一些文件,因为处于保护状态,这对于进行维护hadoop非常有用,有时候我们只是进行测试工作,就必须要做一些工作来去除这个安全模式的困扰。解决办法
2016-02-20 14:31:25 844
原创 windows下,用eclipse连接虚拟机中的hadoop
1. 前言1.1 目标具体目标是:在windows 上能够使用eclipse连接Centos系统上部署的hadoop进行开发与测试1.2 软硬件要求硬件要求:三台普通PC。当然使用虚拟机也可以,本环境搭建也是VMWare10虚拟机上进行的。软件要求:操作系统:Centos7.1。Hadoop版本: ha
2016-02-20 14:08:51 6654
原创 在Centos系统中搭建Hadoop集群
之前我在一个Centos机器上面搭建了伪分布式的hadoop,接下来搭建多个机器的分布式hadoop集群。首先定义一下集群的一些规则:1、准备三台Centos系统(我都装在了虚拟机里面),版本一致,搭建的环境一致(JDK,Hadoop)2、配置三台机器的IP地址和主机名
2016-02-17 16:58:06 1114
原创 Hadoop相关命令中的【--config configdir】
当我们在profile文件中配置好hadoop的环境变量后,在执行hadoop的时候会出现如下这说明在执行hadoop的时候,可以带参数来执行相关的操作,比如我们有好几个版本的hadooop,那么我们在执行hadoop的时候,到底运行哪个呢?那么这样就可以执行hadoop命令时加上后面的参数来指定具体要执行那个版本的hadoop。例:hadoop --config /opt/h
2016-02-01 12:45:17 2938
原创 Hadoop随感
这几天感冒生病,终于有点起色了,就来这里看看,没想到发生了翻天覆地的变化,我热衷于学习的Hadoop,我来了。 学了这么长时间的Hadoop,就说下我的感受吧。 说起Hadoop,就的从我女朋友说起了。 一天公司下班,坐在回家的公交车上,我女朋友就给我打电话了:我从网上看到了一个光宇大数据的职位,薪水特别高,你要不要学学大数据方面的东西啊。我说好
2016-02-01 12:19:01 753
html导出exce.html
2019-07-09
table-editer可以滑动复制,可以编辑,可以使用日历选择日期的jquery代码实现
2018-12-06
vue写的confirm确认框,loading加载中,message提示消息
2018-12-06
Concurrent.Thread.js多线程执行大批量函数
2018-12-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人