a958014226的博客

近年来，国际形势的风云变幻，中美双边关系的恶化，自2013年“棱镜门”事件之后，又一次警示国人，对于科技领域，只有自己掌握核心关键技术，实现自主可控，才能摆脱越来越频繁的“卡脖子事件”，保证企业和国家信息安全。俗话说“基础不牢，地动山摇“。大数据基础平台什么？是打地基的，是重中之重，地基扎得越深、打得越牢，上面的建筑才能越稳定。可以说，数字化转型的“万丈高楼”起于基础平台，具备自主可控的平台建设能力，是真正意义上一切的前提。袋鼠云今年7月最新推出自研大数据基础平台EasyMR，该产品提供Hadoop、H

最近，我们袋鼠云的UED部⻔小伙伴们，不声不响地⼲了⼀件⼤事——升级了全新设计语言「数栈UI5.0」。众所周知，用户在使用产品时，是一个动态的过程，用户和产品之间进行交互的可用性，能否让用户愉悦、快速地在产品内达成目的，直接影响用户使用产品的体验。在设计中，有一个广泛的经验法则被称为「尼尔森十大可用性原则」，1995年由著名的人机交互学博士尼尔森发表。它是产品设计和⽤户体验设计的重要参考标准，这⼗⼤原则在设计过程和落地中能都能很好的帮助设计师去提升产品交互体验。针对数栈现有产品存在的⼀些问题，⽐如同质

本篇是「标签画像系列」的第四篇，此前我们已经介绍过了标签画像体系建设方法论、标签体系设计与加工、标签加工与落库，这次我们来介绍一下「标签评分」。标签评分是标签治理的一个重要措施，通过给标签打分，可清晰直观的从各个维度评估标签，掌握标签真实使用情况，进行标签持续优化，助力业务运营。同时，也能帮助数据团队判断哪些标签更应该投入计算与存储资源，合理规划集群资源。一、为何要使用标签评分？经过前期标签体系设计、标签加工，标签终于可以上线，让业务人员使用，发挥价值了！随着标签上线一段时间后，我们开始关心每天占用

随着整体行业的数字化转型不断深入以及技术能力的不断提高，传统的 T+1 式（隔日）的离线大数据模式越来越无法满足新兴业务的发展需求，开展实时化的大数据业务，是企业深入挖掘数据价值的一条必经之路。面对数字化转型下的数据快速产生、“小步快跑”的精细化运营及实时化和自动化的决策需求，如何提高实时数据处理能力将成为企业提升竞争力的一大因素。 而企业在建设实时数据应用时，又往往面临诸多困难：实...

一、离线数仓建设背景离线数据是相对实时数据而言的数据产出，不同于实时数据，离线数据一般是T+1天处理，也就是说昨天产生的数据至少要今天才能看到计算结果。离线数据一般应用于对数据时效要求不高，需要基于一段时间的历史数据计算才能得到结果的场景，我们大致可以分为离线数据分析及数据应用两类，离线数据计算具备：数据准确度高、吞吐量大、计算成本低等特点。...

6月8日晚19点，b站&视频号直播，我们不见不散

一、指标管理背景介绍大数据时代数字化转型背景下，企业所需要的往往不单单是数据，而是数据背后映射的业务洞察，相比较数据我们更加关心的是其体现的业务价值以及覆盖的业务场景。庞大的数据只有和业务相结合转化为信息，经过处理呈现才能真正体现他们的价值。指标作为数据计算的结果，是直接反映衡量业务效果的依据，应用在企业的方方面面，如数据报表、分析平台及日常取数等。数据指标作为数据计算的结果，是企业数据价值的直观体现，在业务扩张、指标计算需求的暴增背景下，随之而来的指标管理问题也越来越多，例如指

一、课程介绍数据指标是企业数据化管理的重要内容之一，相信从事数据工作的同学很多都经历过以下这些场景：场景一：领导驾驶舱的“应收账款”和表单里的“应收账款”为什么不一样？这明明是一个数据！场景二：我盯着产品部门给出来的AppMAU指标数据看半天了，实在没明白到底是什么意思。场景三：开发同事任务重，把指标“寄件金额”的口径简述成了“寄件运单金额”，结果同一个指标我算出来的结果跟他那个简直天差地别。以上这些对话都说明，在各大企业普遍开始数字化转型的当下，如何构建企业的统一数据视

“精准营销是以客户为中心，运用各种可利用的方式，在恰当的时间，以恰当的价格，通过恰当的渠道，向恰当的顾客提供恰当的产品。”这是学者许瑾在科特勒精准营销理论的基础上，从实践的角度对精准营销下过的定义。作者：阿晗编辑：向山在这个金融科技快速发展，资管行业载体与社交媒体、电子商务的融合越来越紧密的时代，华夏基金的实践为行业内外展现了一个数字化转型与精准营销的标杆案例。2021年4月，华夏基金与袋鼠云达成合作，构建一站式标签体系，搭建画像分析系统，沉淀企业标签资产。由此，华夏基金运用袋鼠云数

近年来，银行业的数据规模呈指数级增长趋势，以大数据为驱动，探索多元化业务新增长模式，深入推进业务模式数字化转型，已成为银行业的共识。以袋鼠云在助力金融行业数字化转型的过程中，所接触到的某银行客户A为例，该企业在数字化建设方面做了很多积极探索。自建的大数据平台使用弊端暴露早在2014年的时候，客户行内就成立了数据部门搭建了一套功能较为齐全，流程运转良好的数据平台体系。客户A采用GaussDB和Oracle作为存储和计算引擎，自研了数据同步工具和资产管理平台，使用开源的ETL工具进行数据开发和任务调..

《数智洞见》数字化浪潮席卷而来，颠覆性创新正在加速。企业面临着前所未有的挑战和机遇，数字化转型成为其生存与领先发展的关键突破口。据研究数据显示，数字化转型程度高的企业获得快速增长的几率是程度低的企业四倍之多。如何进行数字化转型、如何通过利用大数据，找到新的机遇和价值增长点成为越来越多企业关注的话题。袋鼠云数栈赋能20+行业，服务3000+客户，是研究数字化转型解决方案的先行者，产品融合了大数据行业云原生、信创、湖仓一体、批流一体、多引擎兼容、跨云能力等多项前沿技术，在金融、政府、教育、军工等众多行业

前言随着近些年来实时技术的不断成熟，越来越多的企业投身到实时业务场景的开发和使用当中，其中证券、保险、银行等金融行业使用的尤为甚之。以证券行业的场景为例，核心的业务场景是围绕业务交易展开。本文将向大家展开证券行业内实时开发的业务场景以及「定时启停」一个简单却又实用的功能介绍，欢迎共同交流探讨。01实时能做什么？对于实时开发，很多人会有这样的疑问： 指标还是那个指标，实时开发只是提高了指标结果产出的速度，有什么意义嘛？ 除了提高数据计算的速度，实时开发还能做哪些场景呢？.

又到躁动的双十一了准备好买买买了吗算出省钱小妙招了吗优惠券有没有用起来呢平常购物中，“双11”、“618”购物节、外卖的满减、商家会员等都会给消费者发放优惠券。当消费者有优惠券可用时，购买东西的冲动会增大很多。许多商家基于用户这种心理，会发放优惠券来进行促销。那商家的优惠券的发放机制是怎样的呢？有的是普惠性质，到达一定金额后可用；有的优惠券靠抢；还有的是定向发放。最后一种方式一般来说既可以节省成本，也可以达到比较好的促销效果，提升用户活跃度。今天我们来看下基于算法怎么

小夏：最近买的医疗行业基金老跌=-=小南：我中秋节前买了白酒哎，最近涨了好多，就知道节假日白酒依旧会涨。小木：是嘛，你是怎么知道什么时机合适买入的，好的基金怎么选呀小南：我的理财平台上给我择时推荐的，之前还给我推了好几支不错的基金呢近几年，基金市场火热，相关话题频上微博热搜，相信基金选购话题也经常出现在大家的聊天话题里。基金相对股票来说低风险，且交易频次易控制，已成为新手理财或稳健理财的头号选择，我们作为购买者，会比较基金的短期、长期收益率、单位净值、基金经理的经验等来选择投资。同时，基金公

一、写在前面2016年，数栈开始正式投入研发，发展至今，已经拥有了：实时开发、离线开发、算法开发这些开发平台；数据资产、数据质量这些资产平台；以及数据服务、智能标签这些服务平台，这些不同类型的产品，见证了我们产品体系逐步走向多样性、完整性的过程。从开始到现在，积极的迭代新功能，推出新产品，完善整体的产品体系架构，满足越来越多的客户需求场景，一直是我们不变的目标。今天我们为大家带来数栈产品的重磅预告，没错，数栈的新产品，指标管理平台EasyIndex就要来了！小伙伴们速速敲锣打鼓，奔走相告啦～

信创产业是国家数据安全、网络安全的基础，也是“新基建”的重要内容，它将成为拉动经济发展的重要抓手之一。随着国际竞争形势发生新的变化，力争掌握核心科技的”自主可控”意识，在中国正被前所未有地唤醒，并迅速转化为产业实践。在新基建战略指引下，信创产业向高端、高新、高价值发展，筑起了自主技术地基，为中国科技经济提供了基础竞争力和安全保障，并将逐步达成底层核心技术的自主可控，开启属于中国的科技新篇章。在这个背景下，信创产业迎来发展的黄金机遇期，自主信息产业快速发展，信创产业相关厂商正积极展开兼容适配工作，构建信创

使用袋鼠云数栈的某教育行业客户，在之前的信息化过程中建设了多个系统，已经意识到自身数据孤立的现状，面对TB级的数据量，需要更高效的方式进行数据治理和分析，为业务方提供高质量数据。其实，数据治理不仅仅是教育行业用户的痛点，同样也是其他行业进行大数据平台建设和数据应用，最亟需解决的难题。针对这一问题，袋鼠云数栈基于十年实践经验沉淀的多种校验规则，打造了完整的全流程数据质量闭环管理机制，同时支持数据迁移&逻辑变更的双表逐行校验场景。类似以下问题，袋鼠云数栈都能统统搞定！Q1：有很多

一、前言在做企业服务类(ToB)的产品时，我们经常会遇到如下场景：每个客户拿着他们的需求清单，来咨询我们的产品是否可满足他们的诉求。如图所示：每个客户的需求有重叠的内容，也有不一样的内容，而这些需求，在某一领域均具有较强的通用性。如何满足这些客户需求的同时又能使各个需求沉淀为标准功能，而不仅仅是为了交付项目？这成为ToB类产品经理思考最多的问题。为支撑客户诉求，基本的做法是抽象各个需求，落地为标准功能，将各个功能拼装成一个产品。但是一段时间后大家就会发现功能越堆越多、产品越做越庞大，

数栈是云原生—站式数据中台PaaS，我们在github和gitee上有一个有趣的开源项目：FlinkX，FlinkX是一个基于Flink的批流统一的数据同步工具，既可以采集静态的数据，也可以采集实时变化的数据，是全域、异构、批流一体的数据同步引擎。大家喜欢的话请给我们点个star！star！star！github开源项目：https://github.com/DTStack/flinkxgitee开源项目：https://gitee.com/dtstack_dev_0/flinkx如果把企.

一、前言随着技术不断的成熟及市场需求的日益旺盛，实时开发已经成为当前大数据开发不可或缺的一部分。在整个实时开发的链路中，数据采集需要写入到Kafka，数据处理也需要使用到Kafka。今天我们就针对Kafka这个时下主流的消息中间件进行简单的介绍。二、消息队列：数据流的归宿在实时开发的场景中，来源于各类行为、事件的数据是随着发生时间源源不断如同河流一般进入实时任务并不断产出结果的。传统的异构数据源，数据以结构化的形式存储在对应的库表内。那么除了数据本身包含的业务时间属性，要如何找到一个稳...