![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
离线数仓
文章平均质量分 93
数据法师
8年的开发经验 6年数据开发经验 担任过 java开发、数据开发、研发经理、数据架构、项目经理、解决方案架构等多个职位
展开
-
初识大数据(三)旅游大数据
这是初识大数据的最后一篇文章,也是距离生活中的实例,让大家了解大数据在我们生活中可以做哪些事情,此篇更偏向业务一、背景我们想去做一个东西的同时,肯定会去了解这个东西产生的前因后果,功能和需求也是一样的。随着我国的生活水平的提高,旅游业也迎来了发展的黄金时期,但是我国的旅游业信息化水平相对较低,因供需关系的提升,就迫使旅游业信息化水平的提高1.旅游业的信息来源旅游业的大数据源...原创 2020-03-25 21:09:25 · 2632 阅读 · 0 评论 -
初识大数据(二)医疗大数据
此篇文章主要跟大家介绍一下大数据在医疗行业内的应用与和落地,给我们的日常生活带和医疗行业带来什么样的变化、适合初入者了解大数据在行业内的应用落地,增加大数据从业人员的业务能力主要内容为大数据在医疗行业中应用价值、医疗大数据平台、医疗大数据的应用(本篇文中所选用的图片、PPT摘选自北京理工大学计算机学院的孙新老师的智能医疗大数据课件,感谢孙老师)一、大数据在医疗行业中的应用价值大数据......原创 2020-03-22 17:00:42 · 5543 阅读 · 2 评论 -
初识大数据(一)什么是大数据
此篇文章主要介绍什么是大数据、大数据有什么用、大数据学习很难吗、大数据发展的趋势等几个观点来阐述,如果你是大数据行业的小白,建议看一下,如果您是大神,请略过,本人文笔不是很好,如有描述不清楚的地方,欢迎大家留言批评指正,谢谢一、什么是大数据相信有很多小白跟我刚入行的时候一样,虽然对大数据一词并不陌生,但是你说具体到什么是大数据,则变得哑口无言,我在刚开始学习的时候也在想,什么是大数据,大数......原创 2020-03-10 15:35:42 · 3066 阅读 · 5 评论 -
大数据阿里云工具之DataWorks(二)
本文主要介绍dataworks的运维中心、智能监控一.运维中心运维中心在是dataworks当中的任务调度模块,我们书写好业务流程后,会把业务流程进行提交,提交后的业务流程就会在运维中心进行显示,会按照你设置节点的调度周期开始调度任务。ps:如果是双环境任务的话,运维中心也会有两个,可在DAG图里面查看当前环境是开发还是生产。运维大屏显示 的是已有的任务调度情况,包括新增的任务......原创 2020-03-01 17:14:19 · 2403 阅读 · 0 评论 -
大数据阿里云工具之DataWorks(一)
本文主要介绍dataworks的数据集成、数据质量、数据地图与数据开发一、简介DataWorks(数据工场,原大数据开发套件)是阿里云重要的PaaS平台产品,提供数据集成、数据开发、数据地图、数据质量和数据服务等全方位的产品服务,一站式开发管理的界面,帮助企业专注于数据价值的挖掘和探索。DataWorks支持多种计算和存储引擎服务,包括离线计算MaxCompute、开源大数据引擎E-Map......原创 2020-02-24 16:02:47 · 11283 阅读 · 1 评论 -
阿里云服务搭建离线数据仓库(一)
使用到的阿里云服务:DTS:数据同步,可以做数据增量与全量同步,增量同步是监控MySql的binlog日志做的增量。DataWorks:集调度运维一体化平台,可以调度已创建好的任务,有自己的调度中心和运维中心、数据中心。MaxCompute:离线数据计算引擎,类似于spark、flink,只不过MaxCompute(简称:MC)是阿里云自己开发的计算引擎,目前MC服务已覆盖全球16个国......原创 2020-02-09 16:32:47 · 3800 阅读 · 2 评论