一名极客-CSDN博客

原创数据增量同步工具 Zero 支持Redis、Redis-Cluster、ES、Kafka、Mongodb、Postgresql、TiDB、数据审计超高性能 Golang

开源地址https://github.com/gitstliu/MysqlToAllMysqlToAll将mysql数据以指定的格式同步到redis、redis-cluster、kafka、es、本地文件系统的工具高性能配置方法canalconfigsxxx.toml canal配置文件xxx.pos binlog解析位置文件configconfig.toml 输出源配置文件...

2019-07-05 11:56:21 1725

原创生成不重复的ID

基于GO语言开源snowflake算法实现提供HTTP接口GITHUB地址: https://github.com/gitstliu/idservice按照一下步骤运行第一步在配置文件中设置 ServicePort, WorkerId, DatacenterId第二步运行Main方法第三步用POST方法访问 http://{your_address}:{Port}/ids...

2019-02-22 10:22:03 1314

原创 GO 语言常用工具类-通用方法集合

GO 语言常用工具类-通用方法集合github: https://github.com/gitstliu/go-commonfunctions1. PanicHandler通用Panic处理器2. InterfacesToStrings将Interface数组转换为String数组3. GetFilesWithFolder获得文件夹下所有文件4. ObjectToJson将对象转...

2018-09-18 11:28:58 4398

原创一个基于PYTHON的Log框架类

一个基于PYTHON的Log框架类Github连接: https://github.com/gitstliu/py-loggerimport logging.handlersclass Logger: logger = None log_level = logging.DEBUG log_file = "sa.log" log_max_byte =...

2018-09-05 17:24:41 17686 1

原创一个基于golang的redis cluster 客户端

用法引入并创建集群import "github.com/gitstliu/go-redis-cluster"cluster, err := redis.NewCluster( &amp;redis.Options{ StartNodes: []string{"127.0.0.1:7000", "127.0.0.1:7001", "127

2018-09-04 13:19:54 23991 2

原创 golang实现基于snowflake算法的ID生成器

golang实现基于snowflake算法的ID生成器github链接: https://github.com/gitstliu/go-id-workerSnowflake算法Snowflake 算法是Twitter的分布式ID自增算法,用于生成可以跨数据中心的全局唯一ID(不连续)。 SnowFlake算法生成id的结果是一个64bit大小的整数。bit说明1位...

2018-08-28 10:25:00 27450

原创基于深度学习的分词模块对新闻的分词准确率高达96%以上

基于深度学习的分词模块对新闻的分词准确率高达96%以上Github 代码链接: https://github.com/gitstliu/Segment已经训练好的模型,提供http接口服务。如果你不想管原理，只是想使用分词功能，直接下载代码运行就好。基于word2vec和双向RNNS算法,在新闻预料库上进行训练得到模型(训练时间较长,所以如果你没有一块好的GPU,请直接使用)...

2018-08-28 09:54:12 24423 10

原创基于已有模型的情感分析系统

基于已有模型的情感分析系统代码连接 https://github.com/gitstliu/SentimentAnalysis基于word2vec算法使用外卖评价数据和酒店评价数据训练出来的情感分析模型使用前需要对语言先分词,分词结果作为系统的输入参数,简单研发即可实现服务接口.如果本身有分好词的数据集也可以联系作者帮忙训练对应的模型.创建一个WEB服务# enc...

2018-08-17 18:01:53 25030

在白板上作画