鸡康-CSDN博客

文章作者: 小王是个弟弟文章链接: https://kpretty.tech/archives/kafka-problem-2版权声明: 本站所有文章均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来自小王是个弟弟结构Callback.javaimport java.util.Map;/** * 模仿 kafka 的这个接口用于接收回调信息 */public interface Callback { void onCompletion(Map<String

2022-04-05 15:40:44 199

转载 Kafka消费者不断消费同一段区间内的消息

转载于文章作者: 小王是个弟弟文章链接: https://kpretty.tech/archives/kafka-problem-1版权声明: 本站所有文章均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来自小王是个弟弟一、问题描述首先说一下背景，项目的基本逻辑是今天计划数据会提前一到两天发过来(创建类型报文)，kafka 接收到创建类型的报文消息后会在数据库创建对应记录；之后时间来到今日会实时推送更新报文用来不断更新数据；今天有业务部门反应数据不对疑似今日数据没有更新，收到通知后

2022-04-04 08:57:20 917

原创 OCI runtime exec failed: exec failed: container_linux.go:380: starting container process caused: exe

参考https://www.1024sou.com/article/219175.html进入正在运行的tomcat容器报错解决成功

2022-03-19 20:53:07 1744

原创 dockerfile构建镜像报错

报错内容Error: Failed to download metadata for repo 'appstream': Cannot prepare internal mirrorlist: No URLs in mirrorlist解决参考https://stackoverflow.com/questions/70963985/error-failed-to-download-metadata-for-repo-appstream-cannot-prepare-internal修改Dock

2022-03-18 20:57:53 969

原创重写equals方法同时需要重写hashcode方法

HashMap以自定义的类作为键import java.util.HashMap;import java.util.Map;class Key { String title; public Key(String title) { this.title = title; }}public class HashMapLeakDemo { public static void main(String[] args) { Map<

2022-03-09 16:58:59 300

转载 ZooKeeper分布式锁的实现原理(转载于掘金)

转载于作者：石杉的架构笔记链接：https://juejin.cn/post/6844903729406148622来源：稀土掘金著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。ZooKeeper分布式锁机制为什么需要分布式锁？看我之前写的一个文章https://blog.csdn.net/qq_45451226/article/details/123040922看上面的图，如果现在有两个客户端一起要争抢zk上的一把分布式锁，会是个什么场景？zk里有一把锁，这个锁就是z

2022-02-25 16:51:11 118

原创 (拼拼凑凑出来的)Kafka注意点(已注明出处)

裁缝怪，拼凑一些好文章到自己这里记录一下

2022-02-23 21:59:27 1714

原创利用Zookeeper的结点实现分布式锁解决高并发访问

项目结构(pay是一个springboot项目)描述：模拟高并发下单数据不安全的场景并用zk的结点解决application.yaml、数据库、pom.xml准备server: port: 9999 servlet: context-path: /payspring: datasource: driver-class-name: com.mysql.jdbc.Driver username: root password: chickenkang.

2022-02-21 10:39:47 1287

原创 SQL88 最差是第几名(二)

原题链接https://www.nowcoder.com/practice/165d88474d434597bcd2af8bf72b24f1?tpId=82&tqId=37926&rp=1&ru=/ta/sql&qru=/ta/sql&difficulty=&judgeStatus=&tags=/question-ranking思路参考https://blog.nowcoder.net/n/caaa953ea61049fdab7cd6a303a6

2022-02-16 12:13:38 168 2

原创 fastjson的简单使用

<dependency> <groupId>org.json</groupId> <artifactId>json</artifactId> <version>20090211</version> </dependency> <dependency> <groupId&

2022-01-23 15:43:52 139

原创 scala自定义spark的二次排序

import org.apache.spark.SparkConfimport org.apache.spark.SparkContextclass SortKey(val clickCount: Int, val orderCount: Int, val payCount: Int) extends Ordered[SortKey] with Serializable { def compare(that: SortKey): Int = { if(clickCount - tha

2022-01-22 21:46:48 94

原创 spark自定义累加器

import com.ibeifeng.sparkproject.constant.Constantsimport com.ibeifeng.sparkproject.util.StringUtilsimport org.apache.spark.AccumulatorParamimport org.apache.spark.SparkConfimport org.apache.spark.SparkContext/** * Scala中，自定义Accumulator * 使用objec

2022-01-22 17:11:54 196

转载 spark的Java API实现二次排序

原文链接https://www.cnblogs.com/sunrise88/p/7251483.html自定义二次排序的Key类import java.io.Serializable; import scala.math.Ordered; public class SecondSortKey implements Serializable, Ordered<SecondSortKey> { /** * serialVersionUID */ pr

2022-01-22 17:07:29 155

原创 JDBC应用单例模式构造简单连接池

import java.sql.Connection;import java.sql.DriverManager;import java.util.LinkedList;public class JDBC { // 数据库连接池 private LinkedList<Connection> datasource = new LinkedList<Connection>(); private static JDBC instance = null;

2022-01-21 09:11:03 451

原创 Centos6报错Error: Cannot find a valid baseurl for repo: base

解决方案https://www.jianshu.com/p/70e9dcf61ef9

2022-01-16 23:21:03 639

原创虚拟机里的Kafka不能被window下的程序访问

原文链接https://blog.csdn.net/weixin_44033210/article/details/121732684我的需求利用一段Java程序将Kafka的两个topic的数据进行连通，数据流向 topic1 --> kafka服务 -->topic2问题所有组件、服务都运行正常，但是数据就是没有从topic1流向topic2解决参考本文的第一个标题对应的链接,我本人使用的是kafka的0.10版本，写下这个博客只为记录一下踩的坑和解决：图来自原博客

2022-01-13 20:37:16 822

原创 Windows磁盘共享文件夹映射到Linux

原文网址https://www.cnblogs.com/LiuYanYGZ/p/12043952.html安装sambayum install samba设置开机自启动服务systemctl enable smb.servicesystemctl enable nmb.service启动服务systemctl start smb.service nmb.service安装samba客户端yum -y install samba-client samba-common cifs-ut

2022-01-12 21:31:28 2071

原创 flink检测一个目录下的txt文件变化

import org.apache.flink.api.common.io.FilePathFilter;import org.apache.flink.api.java.io.TextInputFormat;import org.apache.flink.core.fs.Path;import org.apache.flink.streaming.api.datastream.DataStream;import org.apache.flink.streaming.api.environment.

2021-12-23 22:57:05 1932 2

空空如也

空空如也