![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 73
从开始入门大数据
宇哥哦
这个作者很懒,什么都没留下…
展开
-
Hadoop支持LZO
Hadoop支持LZO0. 环境准备maven(下载安装,配置环境变量,修改sitting.xml加阿里云镜像)gcc-c++zlib-develautoconfautomakelibtool通过yum安装即可,yum -y install gcc-c++ lzo-devel zlib-devel autoconf automake libtool1. 下载、安装并编译LZOwget http://www.oberhumer.com/opensource/lzo/download/原创 2021-01-07 19:35:17 · 80 阅读 · 0 评论 -
maxwell详细介绍
一、介绍Maxwell 是一个读取 MySQL binlogs 并将修改行字段的更新写入 Kafka, Kinesis, RabbitMQ, Google Cloud Pub/Sub 或 Redis (Pub/Sub or LPUSH) 以作为 JSON 的应用程序。Maxwell的操作开销很低,只需要mysql和一个写入位置即可。它的常见用例包括ETL,缓存建立/过期,指标收集,搜索索引和服务间通信。Maxwell为您提供了事件来源的一些好处,而不必重新构建整个平台。Maxwell 拥有可原创 2021-01-05 10:00:22 · 7346 阅读 · 0 评论 -
canal安装最详细教程
一、简介canal [kə'næl],译意为水道/管道/沟渠,主要用途是基于 MySQL 数据库增量日志解析,提供增量数据订阅和消费早期阿里巴巴因为杭州和美国双机房部署,存在跨机房同步的业务需求,实现方式主要是基于业务 trigger 获取增量变更。从 2010 年开始,业务逐步尝试数据库日志解析获取增量变更进行同步,由此衍生出了大量的数据库增量订阅和消费业务。基于日志增量订阅和消费的业务包括数据库镜像 数据库实时备份 索引构建和实时维护(拆分异构索引、倒排索引等) 业务 ...原创 2021-01-04 11:22:36 · 4676 阅读 · 1 评论 -
springboot 2.3.7.RELEASE集成elasticsearch7.6.2
0、准备1、es准备:https://www.elastic.co/cn/downloads/past-releases#elasticsearch下载对应的7.6.2版本。下载后自己安装,测试的话,主要就是配置vim ./config/elasticsearch.ymlnohup ./bin/elasticsearch &PS:有问题小伙伴,可以查看最后FAQ,所有博主遇见的问题都已经详细写出,保证可以启动。????启动es成功2、kibana准备下载ki原创 2020-12-30 10:36:34 · 2524 阅读 · 0 评论