IT小神
码龄10年
关注
提问 私信
  • 博客:214,722
    社区:72
    214,794
    总访问量
  • 132
    原创
  • 1,702,306
    排名
  • 128
    粉丝
  • 0
    铁粉

个人简介:虽然不能成为技术大神,但也要与时俱进保持对于IT新技术的学习追求,一点点积累与自我总结,即使再小的帆也能远航 itxiaoshen博客

IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:广东省
  • 加入CSDN时间: 2014-09-17
博客简介:

itxiaoshen博客

博客描述:
虽然不能成为技术大神,但也要与时俱进保持对于IT新技术的学习追求,一点点积累和自我总结,即使再小的帆也能远航
查看详细资料
个人成就
  • 获得59次点赞
  • 内容获得42次评论
  • 获得455次收藏
  • 代码片获得879次分享
创作历程
  • 26篇
    2023年
  • 73篇
    2022年
  • 33篇
    2021年
成就勋章
TA的专栏
  • 数据仓库
    18篇
  • 大数据
    44篇
  • 数据库
    15篇
  • Go
    6篇
  • 云原生
    26篇
  • 数据治理
    8篇
  • Java
    53篇
  • 高并发
    5篇
  • 分布式
    35篇
  • 微服务
    20篇
  • 运维
    22篇
  • 经验分享
    38篇
  • 大厂面试
    12篇
  • ka
  • 软件架构和设计
    4篇
  • 数据安全
    4篇
  • 低代码
    1篇
  • 人工智能
    1篇
兴趣领域 设置
  • 大数据
    flink
  • 云原生
    云原生微服务serverless
  • 运维
    docker
创作活动更多

超级创作者激励计划

万元现金补贴,高额收益分成,专属VIP内容创作者流量扶持,等你加入!

去参加
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

新一代开源流数据湖平台Apache Paimon入门实操-下

上一篇对Apache Paimon有了基础了解,本身则主要通过实操方式进一步加深理解,具备沉淀后续投入使用的基础知识;进行数据插入和更新操作,基于批和流式多种查询方式如时间旅行和增量查询,并了解相关系统表的查看,最后MySQL和基于Kafka(通过Canal对MySQL数据库实现变更捕获)的CDC集成完整示例演示收尾。
原创
发布博客 2023.08.07 ·
1452 阅读 ·
0 点赞 ·
0 评论 ·
3 收藏

新一代开源流数据湖平台Apache Paimon入门实操-上

本篇介绍一个强大的流数据湖平台,Flink官方开创,发展速度迅速,先了解其基本定义、适用场景和原理,然后基于yarn方式部署和测试,最后通过Catalog管理、创建表和修改多个示例了解基本使用
原创
发布博客 2023.08.03 ·
3241 阅读 ·
0 点赞 ·
0 评论 ·
12 收藏

国产开源流批统一的数据同步工具Chunjun入门实战

前面我们学习过SeaTunnel这个优秀数据集成平台,今天再来研究一个与之相似开源产品ChunJun,原名为FlinkX其比SeaTunnel开源更早,本篇从了解其概况和特性;然后通过源码编译的方式部署,暂时先通过简单的Local和Standalone两种提交任务方式,通过几个示例一步步演示如何通过Json和SQL两种配置方式实现批流模式,如从MySQL数据源Sink写入HDFS、从Kafka数据源并通过关联ClickHouse表数据转换并最后Sink写入MySQL的使用。
原创
发布博客 2023.07.04 ·
2335 阅读 ·
2 点赞 ·
0 评论 ·
6 收藏

一文解开主流开源变更数据捕获技术之Flink CDC的入门使用

相比前面介绍maxwell,实时数据采集中最主流技术非Flink CDC莫属,其直接省去中间的消息中间件如kafka,且支持增量采集也支持全量采集;本篇先介绍CDC的技术和分类,进一步了解其特性和支持丰富数据源,最后通过FLink DataStream和SQL两种编程示例解开入门。
原创
发布博客 2023.06.27 ·
1623 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

云原生时代崛起的编程语言Go远程调用gRPC实战

云原生时代分布式和微服务RPC是一项常见技术,本篇先了解grpc基本定义和特点,搭建gRPC Go开发环境,并了解proto文件基本使用和gRPC go语言代码生成,然后通过Go语言代码示例从使用场景演示一元RPC、服务器流式RPC(文件上传)、客户端流式RPC(文件下载)、双向流式RPC(聊天),从而具备gRPC 开发的入门理解。
原创
发布博客 2023.06.14 ·
1706 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

云原生时代Go最受欢迎Web开源框架Gin原理与实战

在Go的Web开发世界中,Gin以其简单、高性能一举成为使用最广泛的框架;本篇先了解定位和特性,然后在进行常见使用功能如参数获取和绑定、路由组、中间件、静态资源使用、内容渲染、Cookie和Session等多个代码示例演示,最后通过分析源码中的核心流程和数据结构加深对其整体理解。
原创
发布博客 2023.06.08 ·
1751 阅读 ·
1 点赞 ·
0 评论 ·
5 收藏

数据治理核心保障数据质量监控开源项目Apache Griffin分享

数据开发和数据应用创造价值离不开数据的质量,数据质量管理是数据治理重要保障途径,Apache Griffin就是为解决数据质量监控而设计,本篇先了解Apache Griffin定义、特性和架构,然后通过官方提供docker-compose一键部署和体验,通过官网提供批处理和流处理演示操作,最后通过其提供UI管理页面实操一个批处理的数据质量监控示例。
原创
发布博客 2023.06.01 ·
2970 阅读 ·
1 点赞 ·
8 评论 ·
4 收藏

盘点数据仓库建设需要知道的那些事

数据管理知识体系之数据仓库为企业数据中台的关键部分,本篇先从数据建设规范入手,接着介绍数仓分层、主题域划分原则,表处理规范和命名规范,最后分析指标定义、指标构成和指标分类
原创
发布博客 2023.05.17 ·
1004 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

Go开源世界主流成熟ORM框架gorm实践分享

在GoLang世界中有很多优秀的ORM库,今天就介绍主流之一的GORM三方库,了解其核心功能,然后从其支撑数据类型模型和约定开始巩固其基础,接着以安装gorm库及其mysql驱动为基础编写常见CRUD代码示例,进入了解其事务、转换、分片等知识,最后演示其Json序列化示例。
原创
发布博客 2023.05.13 ·
676 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

数据治理之关键环节元数据管理开源项目datahub探索

元数据管理在数据治理中非常关键的部分,本篇分享一个现代化元数据管理开源项目datahub,了解其核心功能和概念,进一步理解器其架构和组件,然后从0到1的搭建和使用官方的数据样例演示,最后通过摄取MySQL和ClickHouse的示例打开其探索之门。
原创
发布博客 2023.05.11 ·
3688 阅读 ·
2 点赞 ·
1 评论 ·
18 收藏

云原生时代崛起的编程语言Go常用标准库实战

通过前两篇文章对Go编程的理解,本篇从重点实战使用角度介绍Go常见基础标准库的使用,较大部分业务场景直接使用标准库提供的丰富功能就可实现快速开发,结合精简代码示例演示了字符串、IO、编码、网络、数据库、单元测试等十几个标准包的使用。
原创
发布博客 2023.05.05 ·
1488 阅读 ·
0 点赞 ·
2 评论 ·
0 收藏

云原生时代崛起的编程语言Go并发编程实战

Go语言是天然并发利器,通过通信来实现内存共享而不是通过共享内存来通信,本篇从了解Go的并发哲学、理论及并发原语开始,之后用一个个Go代码示例认识Go的协程、通道、定时器、互斥锁、池化、原生操作等十几个并发编程示例,进一步加深对其并发编程使用场景理解和原理的初步认识。
原创
发布博客 2023.05.04 ·
754 阅读 ·
0 点赞 ·
0 评论 ·
3 收藏

云原生时代崛起的编程语言Go基础实战

Go语言由于来自全球技术大厂谷歌创造及推动,其生态发展极其迅速,有可能成为未来十年内最有统治力的开发语言。本篇主要介绍Go目前发力的使用场景、开发环境、基础命令、命名规范,进一步了解其原生标准库的强大,最后通过多个Go代码示例演示了基础语法的使用,从而具备初级编程能力。
原创
发布博客 2023.04.29 ·
1925 阅读 ·
0 点赞 ·
3 评论 ·
0 收藏

下一代大数据分布式存储技术Apache Ozone初步研究

如果还在为HDFS上存储海量的小文件而烦恼,不烦多留意号称下一代分布式存储技术Apache Ozone,其诞生初衷就是解决HDFS面临棘手问题,本篇从了解其特性和总体架构,基于开发测试需求通过docker和docker-compose方式启动Ozone本地集群,最后通过命令行接口和兼容hadoop命令Ofs操作卷、桶、键、存储读写文件数据。
原创
发布博客 2023.04.25 ·
2413 阅读 ·
1 点赞 ·
1 评论 ·
5 收藏

一个基于Java线程池管理的开源框架Hippo4j实践

如果还在为线程池而烦恼,不烦试试这个开源的线程池管理框架Hippo4j;先了解其功能和总体架构,然后分别使用docker和二进制安装hippo4j-server,接着对其支持两种运行模式hippo4j-server和以Nacos为示例hippo4j-config进行代码示例和实践,并以RocketMQ为示例体验了三方框架的线程池适配功能。
原创
发布博客 2023.04.17 ·
1368 阅读 ·
0 点赞 ·
0 评论 ·
4 收藏

实时分布式低延迟OLAP数据库Apache Pinot探索实操

一个适合工业物联网实时采集传感器数据实时分析工业设备的数据实现更好的预测性感知的分布式NoSQL数据库Apache Pinot,先了解其特性和使用场景,然后通过Local和Docker两种方式部署Apache Pinot和验证环境,最后通过实操其批和流式导入数据和利用其控制台端点查询数据。
原创
发布博客 2023.04.15 ·
518 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

基于列存储的开源分布式NoSQL数据库Apache Cassandra入门分享

通过Hbase与Cassandra对比,层次展开了解Apache Cassandra特性和使用场景,通过部署但实力和多实例集群进一步理解其运作,最后通过CQL及其客户端命令工具理解其数据模型和数据类型,通过对键空间、表、索引、数据操作熟悉常见CQL语法和使用。
原创
发布博客 2023.03.29 ·
973 阅读 ·
0 点赞 ·
0 评论 ·
2 收藏

云原生K8S精选的分布式可靠的键值存储etcd原理和实践

今天再下一个Go语言编写分布式键值存储的云原生组件ectd,了解其定义理、应用场景和特性,熟悉其整体架构和常用术语,进一步研究其读写和日志复制的原理,最后完整部署单示例和多实例集群和介绍一些常见命令。
原创
发布博客 2023.03.22 ·
311 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

云原生API网关全生命周期管理Apache APISIX探究实操

了解传统Nginx网关和基于Open Resty的Kong网关的痛点,抛出本篇主角一个云原生网关Apache APISIX,先了解其定义、特性、架构,并进一步理解其使用场景,再通过三种安装方式一步步部署和验证,也涉及到对部分Admin API的使用,最后通过apisix-dashboard可视化页面配置路由示例、整合Nacos服务发现示例和开启skywalking插件实现链路追踪示例。
原创
发布博客 2023.03.16 ·
2291 阅读 ·
2 点赞 ·
0 评论 ·
6 收藏

云原生时代顶流消息中间件Apache Pulsar部署实操之Pulsar IO与Pulsar SQL

本篇重点了解Pulsar IO的基础,通过两个示例演示如何一步步实操安装Cassandra和JDBC PostgreSQL的年连接器,进而配置和创建Pulsar Sink 并验证结果,也进一步熟悉一些常见pulsar-admin命令,最后还演示Pulsar SQL简单使用。
原创
发布博客 2023.03.08 ·
1529 阅读 ·
2 点赞 ·
5 评论 ·
4 收藏
加载更多