Dorr_G
码龄6年
关注
提问 私信
  • 博客:2,117
    2,117
    总访问量
  • 6
    原创
  • 2,273,579
    排名
  • 0
    粉丝
  • 0
    铁粉

个人简介:先民谁不死,知命复谁忧?

IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:广东省
  • 加入CSDN时间: 2018-11-05
博客简介:

weixin_43612968的博客

查看详细资料
个人成就
  • 获得0次点赞
  • 内容获得0次评论
  • 获得1次收藏
创作历程
  • 2篇
    2021年
  • 4篇
    2020年
成就勋章
TA的专栏
  • 算法
  • nosql
    2篇
兴趣领域 设置
  • 大数据
    hadoophivesparketl
创作活动更多

超级创作者激励计划

万元现金补贴,高额收益分成,专属VIP内容创作者流量扶持,等你加入!

去参加
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

Flink consume Kafka

Kafka 6 brokers 挂了两个, 导致flink commit kafka offset 失败, metrics 中kafka lag增加,除了状况发生时的rebalance,消费无影响According to the description of the official flink document:The Flink Kafka Consumer allows configuring the behaviour of how offsets are committed bac
原创
发布博客 2021.05.18 ·
128 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

LCS 问题动态规划实现方案

LCS问题具有最优子结构令 X=<x1,x2,...,xm>X=<x1,x2,...,xm> 和 Y=<y1,y2,...,yn>Y=<y1,y2,...,yn> 为两个序列,Z=<z1,z2,z3,...,zk>Z=<z1,z2,z3,...,zk>为XX和YY的任意LCS。则如果xm=ynxm=yn,则zk=xm=ynzk=xm=yn且Zk−1Zk−1是Xm−1Xm−1和Yn−1Yn−1的一个LCS。如果xm≠ynxm≠yn,
原创
发布博客 2021.05.18 ·
301 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

es 脚本重新平衡的问题

es 脚本重新分片脚本指定分区分片 移动后command = "curl -H \"Content-Type: application/json\" -XPOST \"" + url + ":9200/_cluster/reroute\" -d '{\"commands\" : [{\"move\" : {\"index\" : \"" + index + "\",\"shard\" : "...
原创
发布博客 2020.04.13 ·
726 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

redis 哨兵模式的配置和使用

哨兵模式的原理下线的判断 :主观下线 : 指的是当前的哨兵 sentinel 对redis 的服务器做出的下线的判断客观下线 :指的是多个哨兵得到redis服务器得到下线的结论, 指的是多个 Sentinel 实例在对Master Server做出 SDOWN 判断,并且通过 SENTINEL is-master-down-by-addr 命令互相交流之后,得出的Master Serve...
原创
发布博客 2020.02.04 ·
287 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hivesequencefile和 自定义hive

sequence File 的文件存储格式SequenceFile文件是Hadoop用来存储二进制形式的key-value对而设计的一种平面文件(Flat File)。目前,也有不少人在该文件的基础之上提出了一些HDFS中小文件存储的解决方案,他们的基本思路就是将小文件进行合并成一个大文件,同时对这些小文件的位置信息构建索引。不过,这类解决方案还涉及到Hadoop的另一种文件格式——MapF...
原创
发布博客 2020.02.02 ·
274 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hive文件存储格式

hive文件存储格式文件存储格式列式存储之parquet列式存储之orc格式snappy 压缩文件存储格式hive支持的文件存储格式主要textFile , sequenceFile ,orc , parquet file ,text file 和 sequencefile 都是基于行式存储的 。orc 和 parquet file 是列式存储存储的 , 可以针对性的设计更好的压缩算法。...
原创
发布博客 2020.02.02 ·
399 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏