- 博客(8)
- 收藏
- 关注
原创 FinalShell远程连接不上解决办法
hosts文件正确,Linux文件IP和名字正确,且遇到如下情况。hosts文件没有任何后缀,删除文件的后缀即可!
2024-02-21 11:26:50
250
原创 MapReduce总结
1)什么是序列化序列化就是把内存中的对象,转换成字节序列(或其他数据传输协议)以便于存储到磁盘(持久化)和网络传输。反序列化就是将收到字节序列(或其他数据传输协议)或者是磁盘的持久化数据,转换成内存中的对象。2)为什么要序列化一般来说,“活的”对象只生存在内存里,关机断电就没有了。而且“活的”对象只能由本地的进程使用,不能被发送到网络上的另外一台计算机。然而序列化可以存储“活的”对象,可以将“活的”对象发送到远程计算机。3)为什么不用Java的序列化。
2024-02-14 11:46:02
1041
1
原创 HDFS笔记
它是一个文件系统,用于存储文件,通过目录树来定位文件;其次,它是分布式的,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色。HDFS的使用场景:适合一次写入,多次读出的场景。一个文件经过创建、写入和关闭之后就不需要改变。
2024-02-13 13:37:49
917
1
原创 hadoop学习总结
大数据(Big Data):指无法在一定时间范围内常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长和多样化的信息资产。大数据主要解决海量数据的采集、存储和分析计算问题。数据存储单位:bit 、Byte 、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB。大数据特点(4V):volume(大量)、velocity(高速)、variety(多样)、value(低价值密度)
2024-02-11 13:22:36
761
1
原创 ERROR: Cannot set priority of namenode process 79367“通常表示无法设置NameNode进程优先级的问题
1、删除Hadoop目录下的data 和 logs 目录 可能这个文件和以前的data、logs里面的端口冲突。3、重新启动 namenode。
2023-12-17 22:55:34
1941
原创 Exception in thread “main“ java.lang.RuntimeException: java.io.FileNotFoundException: Hadoop bin dir
此问题就去配置自己的hadoop的环境变量就行。
2023-11-22 16:45:47
257
1
原创 Exception in thread “main“ 0: No such file or directory
刷新后再次运行程序看是否解决问题,不行的话再次把bin目录下的hadoop.dll复制到system32下。遇到这个问题先去刷新一下自己的hadoop安装目录下的bin中。再次JAVA运行程序就可以 了。
2023-11-22 16:43:21
188
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人