- 博客(6)
- 收藏
- 关注
RSS订阅原创 Redis
Redis:RemoteDictionaryServer，即远程字典服务，是一个开源的使用C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value的Nosql类型的数据库，并提供多种语言的API，是当前最热门的Nosql数据库之一。redis是一个key-value存储系统。它支持存储的value类型包括string(字符串)、list(链表)、set(集合)、zset(sortedset--有序集合)和hash（哈希类型）。这些数据类型都支持push/pop、add/remove及取交集并集
2021-11-05 16:18:28
289
转载 kafka的安装及配置
kafka基本概念：Broker：Kafka集群包含一个或多个服务器，这种服务器被称为broker。 Topic：每条发布到Kafka集群的消息都有一个主题名称，这个主题名称就被称为Topic。 Partition：Partition是物理上的概念，每个Topic包含一个或多个Partition。 Producer：消息生产者，负责发布消息到Kafka broker。 Consumer：消息消费者，向Kafka broker读取消息的客户端。 Consumer Group：每个Consu
2021-10-29 20:01:24
441
转载 Zookeeper的角色有什么，区别是什么
Zookeeper的三种角色也就是Zookeeper服务器的三种节点类型（需要区分这里的“节点”和名字空间中的“节点”）：群首（leader），追随者（follower），观察者（observer）。领导者（leader）Leader服务器为客户端提供读服务和写服务。Leader作为整个ZooKeeper集群的主节点，负责响应所有对ZooKeeper状态变更的请求。它会将每个状态更新请求进行排序和编号，以便保证整个集群内部消息处理的FIFO。这里补充一下ZooKeeper的请求类型。对于exists，
2021-10-22 16:59:34
2205
转载 数据仓库与数据库（OLAP与OLTP）
数据仓库是一个面向主题的，集成的，时变的，非易失的数据集合，支持管理者的决策过程，决策支持系统（DSS）和联机分析应用数据源的结构化数据环境，数据仓库研究和解决从数据仓库中获得信息的问题。数据仓库存在的意义在于对企业的所有数据进行汇总，为企业各个部门提供统一的，规范的数据出口。面向主题：数据仓库中的数据按照一定的主题进行组织，每一个主题对应一个宏观的分析领域，数据仓库排除对于决策无用的数据，提供特定主题的简明视图。集成的：企业内不同业务部门数据的完整集成，对于企业内所有数据的集成要注意一致性。稳
2021-10-15 17:01:41
596
转载 Hive的内部表，外部表
在使用hive搭建数据仓库的时候，可以建立两种表格。一种是Managed Table 内部表，另一种是External Table 外部表。Managed Table ：这种表也被称作Internal Table.这是Hive中的默认的类型。如果你在创建表的时候没有指明Managed或者External，那么默认就会给你创建Managed Table.Managed Table的数据，会存放在HDFS特定的位置中，通常是/user/uduser/hive/warhouse.当然，也不一定，看你的Hive
2021-09-28 16:27:53
862
转载 实现文件完整性校验
所谓文件完整性校验就是对文件“验明正身”。就是说检查文件的是否完整。那么文件是怎么被破坏了完整性呢？ 第一种是感染病毒，你所下载的软件安装包或者某个执行程序感染了病毒那么你的这个文件完整性就被破坏了，还有就是被别有用心的人植入木马或病毒，还有就是传输故障。 文件完整性检验最常用的方法是使用基于“散列函数”校验算法，也叫哈希算法，一种计算机算法，英文叫Hash，散列算法就是可以把任意尺寸的数据，转变为一个固定尺寸的小数据。在散列函数中，如果两个不同文件...
2021-09-18 15:06:15
3618
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人