- 博客(4)
- 收藏
- 关注
RSS订阅原创 Windows下搭建大数据开发环境ERROR Shell: Failed to locate the winutils binary in the hadoop binary path解决方法
在 https://github.com/steveloughran/winutils 找到自己对应的 Hadoop 版本，下载解压在用户变量中添加 HADOOP_HOME ，值为解压的路径配置系统变量中的 Path ，添加 $HADOOP_HOME\bin需要重启 IDEA ，即可正常运行。...
2020-04-29 11:29:34
358
原创 Hadoop archive归档命令的使用
archive 命令有什么用archive 可以用来解决 Hadoop 中的小文件问题，当存在大量小文件时，会产生如下影响：HDFS 中，小文件过多会占用大量内存，NameNode 内存容量最终会成为限制集群扩展的瓶颈。HDFS 读写小文件更加耗时，因为每次都需要从 NameNode 获取元信息，并与对应的 DataNode 建立连接。小文件过多会开很多 map，一个 map 启动一个 ...
2020-04-28 17:28:02
577
原创 git commit 时提示please tell me who you are解决方法
先是按照git的提示git config --global user.email “you@example.com”git config --global user.name “Your Name”进行设置，结果发现还是报错，最后找到解决方案如下：git initgit config user.name “Your Name”git config user.email “you@exa...
2020-04-27 11:40:09
742
转载 详解TCP/IP协议栈
之前对网络各层作用的了解一直都比较模糊，对各个协议的作用也不甚清楚，最近看到了一篇对TCP/IP协议栈讲解比较清晰的博文，特地转载过来。什么是TCP/IP协议栈TCP/IP 协议栈是一系列网络协议的总和，是构成网络通信的核心骨架，它定义了电子设备如何连入因特网，以及数据如何在它们之间进行传输。TCP/IP 协议采用4层结构，分别是应用层、传输层、网络层和链路层，每一层都呼叫它的下一层所提供的协...
2020-04-04 21:04:38
354
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人