大数据
文章平均质量分 79
大数据
ZWZhangYu
这个作者很懒,什么都没留下…
展开
-
《华为数据之道》读书笔记
基于统一的数据管理规则,确保数据源头质量以及数据入湖,形成清洁、完整、一致的数据湖。业务与数据双驱动,加强数据联接建设,并能够以数据服务方式,灵活满足业务自助式的数据消费诉求。针对汇聚的海量内外部数据,能够确保数据安全合规。不断完善业务对象、过程与规则数字化,提升数据自动采集能力,减少人工录入。数据源:业务数字化是数据工作的前提,通过业务对象、规则与过程数字化,不断提升数据质量,建立清洁、可靠的数据源.......原创 2022-06-08 19:17:50 · 3423 阅读 · 1 评论 -
kettle启动 carte服务部署
文章目录(1)介绍(2)相关配置文件(3)启动carte(1)介绍以下为Kettle中包含的多个程序:Spoon:集成开发环境,一般情况下开发Job和转换都用这个。Kitchen:作业的命令行运行程序。Pan:转换的命令行运行程序。Carte:轻量级的HTTP服务器(基于Jetty),后台运行,监听HTTP请求来运行一个作业。其也用于分布式和协调跨机器执行作业,也就是Kettle的集群。(2)相关配置文件jdbc.properties保存在simple-jndi目录下,这个文件用来存储JN原创 2021-04-08 14:07:38 · 9368 阅读 · 18 评论 -
Kettle配置资源库
文章目录(1)配置环境变量(2)配置资源数据库信息(3)测试使用(1)配置环境变量在构建资源库方式保存转换信息的时候,如果没有配置环境变量的话,那么数据库配置的信息会默认保存在系统用户目录下,但是这个对于迁移是不行的,要么手动将.kettle下的repositories.xml文件放在data-integration根目录下,要么配置环境变量,这里是通过配置环境变量的方式,如果是后面通过Docker的话,要注意需要增加配置环境变量的命令(2)配置资源数据库信息资源库是用来保存转换任务的,用户通过原创 2021-04-07 16:29:24 · 4126 阅读 · 0 评论 -
快速构建 TiDB 集群
(1)安装MySQL1.下载并安装MySQL官方的Yum Repositorywget -i -chttp://dev.mysq1.com/get/mysq157-community-release-e17-10.noarch.rpm2. yum安装yum -y install mysq157-community-release-e17-10.noarch.rpm3.安装MySQL服务器。yum -y install mysq1-community-server4.启动MySQLsys原创 2020-08-23 15:37:33 · 1801 阅读 · 0 评论