![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 68
克念
这个作者很懒,什么都没留下…
展开
-
hadoop学习之单机环境搭建
环境:ubuntu 14 64位hadoop版本:1.2.1 release原创 2014-10-20 20:56:14 · 445 阅读 · 0 评论 -
Hadoop java运行时内存不足
服务器是一个云服务器,内存为1G,CPU为1核。然后执行一个Hadoop本身自带的example报错的。报错信息如下:There is insufficient memory for the Java Runtime Environment to continue.Native memory allocation (mmap) failed to map 12288 bytes for commi...原创 2018-04-11 14:51:39 · 2550 阅读 · 0 评论 -
Hadoop 伪分布式搭建(2.6.5)
Hadoop2和Hadoop1是不一样的,所以专门为了Hadoop2 做了一个记录。 我的环境是Ubuntu 16.4 首先确保Java已经安装完毕,并且环境变量已经配置OK,具体的细节我就不在这里讲解了。 然后确保ssh已经安装好,sshd需要启动并且使用Hadoop的脚本管理远程的Hadoop节点。 安装ssh相关:sudo apt-get install sshsudo apt-...原创 2018-04-11 14:52:11 · 431 阅读 · 0 评论 -
Hadoop 伪分布式环境, jobhistory 配置信息引起的报错
Hadoop 版本 2.6.5 Ubuntu Linux 伪分布式环境之前我的Hadoop环境因为运行时报了下面的错误:ava.io.IOException: java.net.ConnectException: Call From localhost.localdomain/127.0.0.1 to 0.0.0.0:10020 failed on connection exception: ...原创 2018-04-11 18:17:05 · 1080 阅读 · 0 评论 -
Ubuntu 查看异常登录 暴力攻击
最近我的腾讯云服务器报警说有人正在暴力破解,所以我就去查看后台的登录失败日志,命令如下: sudo lastb Screen clipping taken: 4/19/2018 3:04 PM 尼玛,整的是一对的暴力破解信息啊。第一列:表示尝试的登录用户,看图中可以发现有root, support,scanner….等等一些常见的用户。第二列:表示通过什么方式来登录,可以看得出来,是ssh...原创 2018-04-19 15:30:03 · 2901 阅读 · 0 评论 -
spark本地开发环境搭建(maven + scala + java)
开发工具和软件版本信息 IDEA 2019.2 JAVA 1.8 Scala 2.11.12 Spark 2.4.3 Hadoop 2.7.7 Windows ...原创 2019-06-23 13:11:18 · 1515 阅读 · 1 评论