- 博客(12)
- 收藏
- 关注
RSS订阅转载 BigData(九)：HDFS的原理和Hdfs的操作已经CentOS7的防火墙
原理：https://www.cnblogs.com/xuanku/p/hdfs.html?Hdfs操作： https://www.cnblogs.com/gaopeng527/p/4314215.html。时间有限，直接看吧！
2024-05-07 18:02:02
190
1
翻译 Jvm虚拟机相关知识和调优
最近工作会有所变动，稳定之后还是得找机会学习巩固大数据的相关知识的！既然还没打算转行大数据，那么面试Java这个环节始终还是得走一遍的！面试Java中老生常谈的几个问题：集合，缓存，Jvm调优，高并发，多线程。借着公司交接拖拉下周是最后一周，我把这些东西，总结一遍以备后面使用！《Jvm运行时数据区域》：1>. 程序计数器： 较小的一块内存空间，可以看作是当前线程所执行的字节码的...
2024-05-07 18:00:27
60
原创 BigData（八）：HDFS
Hadoop的官网：http://hadoop.apache.org/ 简单介绍一哈子Hadoop的模块（部分）：Hadoop common: 公共包，是支持其他Hadoop模块的常用工具！ HDFS:分布式的文件系统！它可以是集群部署哦，多台服务器一个盘的效果，可提供对应用程序数据的高吞吐量访问。 Yarn: 作业调度和集群资源管理的框架。MapReduce: 并发处理大型数...
2024-05-07 17:59:44
1414
1
原创 BigData（七）：编译Hadoop -v2 上次部分软件
我在公司下午5点40开始编译，到现在，我到家，7点半了，还在编译，中途出现了下载不动的情况，我选择了ctrl+c 退出下载，然后重新输入命令，继续下载了！ 这里还是给一下资源吧，在我的csdn，我把之前说的文件传上来，毕竟等待的时候没事做！...
2024-05-07 17:59:38
270
1
原创 BigData（六）：编译Hadoop
说明： 原本打算说一哈，Nginx和Zookeeper的，但是发现，Nginx放到Hadoop的图形化界面来记录吧，而Zookeeper属于Storm这个东西，才用得上，所以就单独出来吧！前提：为什么要编译这个东西哈，因为Hadoop依赖C环境，即本地环境，你下载的hadoop版本，肯定是有问题的，因为，我用的是Linux的CentOS7的环境！下载：hadoop 版本的...
2024-05-07 17:59:28
496
1
原创 BigData（五）：安装Jdk和Maven
1.> Linux安装Jdk和Maven，我使用了压缩包的方式！到官网下载jdk1.7和maven3.3.9 后面在hadoop上，我选择的是2.6.4版本，它不兼容jdk8，maven版本不多说！ 下载的时候选择linux版本，在Oracle官方，已经不提供免费jdk7的下载了，它需要你注册一哈子，我当时选择网友，发现不行，最后注册了，很麻烦！ 2.> 安装jdk 这里，...
2024-05-07 17:59:20
517
1
原创 BigData（四）：常见的一些Linux命令
这里还是有必要说一哈，部分的Linux的命令的，其实很多人对命令可以网上找，但是对于 命令的选项还是不是很清楚，包括我自己，我都记不来，网上搜是最好的。 这篇文章就累加吧，遇到什么命令，就增加！(http://man.linuxde.net/ 这个网站有你想要的更多的命令,太多了，建议还是不要看了，需要的时候，再去看吧)pwd cd 这两个，我就不说了！ll 显示当前文件夹下面的...
2024-05-07 17:59:11
275
原创 BigData（三）：网络设置NAT，修改hosts文件，配置免密登录！
在之前，输入: ip addr 发现本机并没有Ip ,这个就很崩溃了！第一步，在win7上面，将你的本地连接设置为共享： 第二步，修改文件 输入：/etc/sysconfig/network-scripts 在这个文件夹里面，有很多文件，输入ll 查看，类似 iffcfg-ens 的，我这个是ifcfg-ens32,好像别人的版本，后面的数字是什么0或者1的，反正，进入这个文件里...
2024-05-07 17:58:59
1269
1
原创 BigData（二）：Shell基础和复制虚拟机
上完厕所了，继续第二篇！ 1.复制虚拟机（我的所有命令都是针对CentOS7） Linux（CentOS7）安装完毕之后重启，进入界面，选择第一个启动，最终界面： 输入：hostname 我这里输入的是localhostname.localdomain 显然不是我想要的，我这里修改一哈：hostnamectl s...
2024-05-07 17:58:32
216
1
原创 BigData（一）：准备工作CentOS7
前言：CentOS选择 最近使用了Hadoop，感觉还好，但是避免忘却，所以删除了我的3台虚拟机程序，重头开始，也希望这次能记录所有的过程！ 首先：准备您的硬件，我当时使用了笔记本，想装一台虚拟机，是4G内存的，但是Vm这个软件装成功之后，我装系统直接崩溃，我最后选择了16G的电脑（特意买的，但是我的台式机是8G），我的预期打算：3台虚拟机，每台机器4G，我看到有人是用...
2024-05-07 17:57:40
2040
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人