- 博客(8)
- 收藏
- 关注
原创 Presto安装及使用教程
Presto是由Facebook开发的一款开源的分布式 SQL 查询引擎基于内存运算,速度很快,实时性高,数据量支持GB到PB字节,主要用来处理秒级查询的场景,能够连接多个数据源,实现跨数据源的连表查询。
2025-07-28 13:53:55
1203
原创 数据湖:下一代大数据存储与分析的革命性架构
数据湖,英文名叫做Data Lake,是一个大型数据存储和处理系统。是一种未整合的,非面向主题的数据集合,可以存放来源不同的任何类型的数据。
2025-06-16 11:45:28
872
原创 Hive的本地模式安装
- 该参数主要指定Hive的临时文件存储目录 -->-- 该参数主要指定Hive的数据存储目录 -->-- 以下两个不需要修改,只需要了解即可 -->--配置MySql的连接字符串-->--配置MySql的连接驱动-->--配置登录MySql的用户-->--配置登录MySql的密码-->
2025-05-22 07:56:38
896
原创 HDFS的安装保姆级教程
先在opt下创建一个文件夹modules专门用来存放软件的压缩安装包,并cd /opt/scripts来到这个文件夹下,点击空白处右键有。验证hadoop命令是否可以识别 hadoop version。刷新配置文件 source /etc/profile。,选中电脑中存放的安装包,或者直接把安装包。
2025-05-12 23:03:14
449
原创 shell中怎么运算浮点数?
问题引入:shell中运算符计算的都是整数,计算浮点数会出现什么效果呢?怎么解决计算浮点数的问题?答案:两种方式 bc 和awk一 bcBash shell内置了对整数运算的支持,但是并不支持浮点运算,而 linux bc (basic calculator)命令可以很方便的进行浮点运算. bc命令是Linux简单的。安装bc。
2025-05-09 11:47:52
451
1
原创 Linux系统中inode和block详解
问题引入:下图中出现的数字是什么意思?补充:图中场景为创建文件详细内容时出现,硬链接类似复制,原理是通过进行连接,多个文件名可以指向索引节点,并且与原始文件共享相同的inode 和数据块。理解inode先从文件存储说起,文件存储在硬盘上,硬盘的最小存储单位叫做扇区,每个扇区存储为512个字节(0.5kb),操作系统读取硬盘时,不会一个一个扇区扇区的读取,这样效率太低,而是一次性连续读取多个扇区,即一次性读取一个这种由多个扇区组成的块是文件储存的最小单位。二 块--block。
2025-05-08 23:05:17
417
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅