大数据
文章平均质量分 89
桂亭亭
英雄豪杰,贩夫走卒皆可为友,愿吾与君之共进退。
展开
-
雪花算法生成id分析与实践
witter的雪花算法(Snowflake Algorithm)。雪花ID是一种分布式唯一ID生成算法,旨在解决分布式系统中生成唯一ID的需求。原创 2023-09-03 16:07:29 · 869 阅读 · 0 评论 -
精通ES+ES大数据查询常见的疑难杂症的解决与实现
BoolQueryBuilder是该客户端库中的一个查询构建器,用于构建布尔查询(bool query)。布尔查询是一种复合查询,可以将多个查询条件组合在一起。BoolQueryBuilder提供了几种方法来构建布尔查询:1. must(QueryBuilders): 添加一个“必须匹配”(must)的查询条件。这意味着文档必须满足该查询条件才能被返回。相当于sql中的and2. mustNot(QueryBuilders): 添加一个“不能匹配”(must not)的查询条件。原创 2023-07-03 17:18:08 · 3451 阅读 · 0 评论 -
Linux安装Zookeeper、Hadoop、Hive、Hbase全家桶系列
记录一下zookeeper的路径然后。使用vim进入zoo.cfg。按照提示杀死进程2089。额,这好像是成功了哈哈!这里提供清华大学的镜像站。创建日志/数据文件夹。创建文件夹加文件下载。查看habse源文件。原创 2023-05-25 11:35:58 · 1130 阅读 · 1 评论 -
Hadoop/HbBase/Hive/HDFS/MapReduce都是什么?
hadoop是hive和hbase的基础,hive依赖hadoop,而hbase仅依赖hadoop的hdfs模块。hive适用于离线数据的分析,操作的是通用格式的(如通用的日志文件)、被hadoop管理的数据文件,它支持类sql,比编写MapReduce的java代码来的更加方便,它的定位是数据仓库,存储和分析历史数据。hbase适用于实时计算,采用列式结构的nosql,操作的是自己生成的特殊格式的HFile、被hadoop管理的数据文件,它的定位是数据库,或者叫DBMS。原创 2023-05-24 15:48:45 · 960 阅读 · 0 评论 -
ZooKeeper快速入门学习+在springboot中的应用+监听机制的业务使用
在很多时候,我们都可以在各种框架应用中看到ZooKeeper的身影,比如Kafka中间件,Dubbo框架,Hadoop等等。为什么到处都看到ZooKeeper?原创 2023-05-24 15:11:30 · 2188 阅读 · 1 评论 -
Elasticsearch 学习+SpringBoot实战教程(三)
经过了前面2课的学习我们已经大致明白了ES怎么使用,包括原生语句,javaapi等等,现在我们要在业务中使用了,所以我们选择spring-data作为我们的ORM框架,快速开发代码。同时需要给规范化操作。原创 2023-03-26 19:43:19 · 2762 阅读 · 2 评论 -
Elasticsearch 学习+SpringBoot实战教程(二)
Elasticsearch 学习+SpringBoot实战教程(一)keyword是要求精确匹配,自然就是大小写敏感的。原创 2023-03-26 16:20:15 · 1998 阅读 · 0 评论 -
Elasticsearch 学习+SpringBoot实战教程(一)
Elasticsearch 学习+SpringBoot实战教程(一)Elasticsearch 是一个实时的分布式存储、搜索、分析的引擎。原创 2023-03-26 01:12:28 · 2686 阅读 · 2 评论