- 博客(5)
- 收藏
- 关注
RSS订阅原创 centos伪分布式hadoop、spark、scala 超详细搭建流程
安装命令如下，将安装包解压到/usr/local/src 目录下，将安装包放在了root目录下。将/root/下的hadoop-2.7.7.tar.gz压缩包解压到/opt目录下。能够正常显示 Java 版本则说明 JDK 安装并配置成功。，进入页面可以查看NameNode和DataNode 信息。并将解压文件改名为hadoop。检查 JAVA 是否可用。在浏览器的地址栏输入。
2024-04-28 20:09:03
718
原创 如何搭建hive数据库
hive.server2.logging.operation.log.location/usr/local/src/hive/tmp
2024-04-08 16:08:52
1914
1
原创 Linux—如何设置临时IP、永久IP
192.168.1.10是IP地址，24是子网掩码，192.168.1.2是网关地址，114.114.114.114和8.8.8.8是DNS服务器地址。临时IP地址配置是指在CentOS服务器上设置一个暂时的IP地址，该地址只在本次启动期间有效，并在重启后失效。永久IP地址配置是指在CentOS服务器上设置一个固定的IP地址，该地址在重启后仍然有效。其中，192.168.1.10是IP地址，/24是子网掩码，ens33是网卡名称。其中，ens33是网卡名称（有些虚拟机的网卡为ens32，可通过。
2024-03-20 00:22:27
3165
原创 初入云上大数据2
Hadoop生态圈是由一系列基于Hadoop开发的相关工具、库、应用程序、平台和服务组成的生态系统。它们都是用于大数据处理、分析和存储的技术，旨在解决大规模数据处理问题。MapReduce是一个分布式计算框架，主要由两部分组成：编程模型和运行时环境。其中，编程模型为用户提供了非常易用的编程接口，用户只需要像编写串行程序一样实现几个简单的函数即可实现一个分布式程序，而其他比较复杂的工作，如节点间的通信、节点失效、数据切分等，全部由MapReduce运行时环境完成。Spark。
2024-03-10 00:14:09
1685
原创 初入云上大数据
结构化数据是指按照固定格式和规则组织的数据，例如表格、数据库等。非结构化数据则是指没有固定格式和规则的数据，例如文本、音频和视频等。
2024-03-02 16:25:25
725
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人