自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(22)
  • 收藏
  • 关注

原创 衷心祝愿 达之云衷心祝愿您,中秋国庆双节快乐

我们期待着达之云CDP客户数据平台在未来能够继续发挥其重要作用,帮助更多的企业实现客户价值最大化,共同迈向更加美好的未来!专为中小企业打造,让每一位客户的声音都被听见,每一次的互动都被珍视。双节来临之际,达之云发布全新产品——达之云CDP客户数据平台(Dazdata CDP),致力于为中小企业提供互联网营销解决方案,针对全域粉丝潜客进行管理,集成统一客户身份、行为采集、微信个性内容推送等,通过大数据和AI技术使中小企业互联网数字化营销快速落地。达之云衷心祝愿您,中秋国庆双节快乐,阖家幸福!

2023-09-28 17:19:33 71

原创 喜报:项目验收季之陕西融通军民服务社会议室大屏系统项目建设顺利通过竣工验收

喜报:项目验收季之陕西融通军民服务社会议室大屏系统项目建设顺利通过竣工验收

2023-09-20 17:58:09 76

原创 达之云BI平台助力中国融通集团陕西军民服务社有限公司实现数字化运营

继续深耕大型商业综合体行业,力求通过先进的方案和完善的服务全方位助力零售企业打造起符合行业发展与时代诉求的大数据应用效果,推动零售企业数智化变革的进程,协助客户实现价值增长,助推国内零售业全面数智能化进程。中国融通集团陕西军民服务社是一家大型综合类零售购物中心,公司目前管理系统运行了10年左右,面临系统新零售支持发展严重滞后,行业主流应用落地困难,如线上业务、到家业务、全渠道营销、电子发票、自助收银、扫码购、无感停车、未来营区保障涉及的自助售货机、无人超市、伴随式野战超市等业务现都无法直接实现。

2023-09-07 16:40:02 81 1

原创 达之云牵手杭州数梦联合启动智慧矿业大数据服务项目

达之云公司通过Redash中文商业版BI产品,以数梦工厂的数据中台为数据驱动,将为客户搭建10个符合煤矿需求的可视化大屏,利用大数据治理手段、数据标准、数据建模、指标建立等手段实现前端效果展现。将煤矿生产、安全、监控、运检、调度、运营等业务板块进行指标建立,通过BI功能展现到前端,达到综合监测、主动感知、提前预防、主动参谋的目的。为煤矿提供跨专业关联分析和数据可视化应用,将煤矿生产、安全、监控、运检、调度、运营实时数据、分析数据、成果数据上屏,达到综合监测、主动感知、提前预防、主动参谋的目的。

2023-05-15 19:12:50 72

转载 基于dbt的机器学习:流畅的过程衔接

接力棒随着时间的推移而发展,需求分析和叙事是数据分析工程师和ML工程师引以为豪的容易达成共识的事情,但机器学习输出工作流的维护和验证是我们并不引以为豪的事情。对于简单的机器学习问题(例如,线性回归,分类),在ML工程师的建议和审查下,数据分析工程师会更容易理解甚至拥有完整的管道。DBT 继承了我们在 SQL 上的工作,在数据工程师、数据分析工程师和任何数据角色之间构建了一个优雅、通用的、操作友好的环境。数据分析工程师和ML工程师将在整个工作流程的同一个dbt项目中工作,而不仅仅是其中的一部分。

2023-04-07 11:57:34 51

转载 发挥现代数据栈MDS的更大价值

根据团队的结构方式,用户获取和营销团队可以直接使用决策智能平台,或者为数据团队提供支持,使其成为与他们合作的业务团队的可信顾问。在许多情况下,模型将是探索的基础。通过简化BI和DI步骤,您不仅可以了解数据中发生的情况,还可以快速了解其发生的原因,以便您可以快速采取行动并发展业务。像Kausa这样的决策智能平台,测试数百万个因素和因素组合,这些因素和因素组合可能推动指标的变化,并将注意力指向最重要的因素,以便您可以将注意力引导到最重要的领域。从原始数据到有价值的、可操作的见解的过程是漫长的,不适合胆小的人。

2023-04-06 18:58:56 40

转载 通过 DVT 和 dbt 测试监控Airbyte数据管道

BigQueryC​ONNBigQuery−−project−id为数据复制或数据迁移构建 ELT 数据管道的一个重要部分是能够在出现错误时进行监视并获得通知。如果您不知道错误,您的数据将包含不一致之处,并且您的报告将不准确。由于使用的工具数量众多,大多数管道的复杂性使得设置监视和警报系统更具挑战性。在本文中,我将分享为什么为 ELT 数据管道设置监视和警报系统很重要。我解释了要监视的关键指标,以及设置监视和警报系统时将遇到的常见挑战。

2023-04-04 16:08:10 165

转载 你想知道的关于现代数据栈MDS的所有内容

如今,每个人都在谈论现代数据堆栈(MDS)。我是一个数据系统人员。我在大数据时代就开始构建核心数据库系统,见证了云计算在过去十年中的诞生和繁荣。但是当我第一次遇到“现代数据堆栈”这个词时,我感到困惑 - 它只是云服务供应商为吸引人们眼球而创造的另一个流行语吗?网上的文章很多,但大多数都相当市场化和销售。在运行了一家在现代数据堆栈领域构建核心系统的初创公司一段时间后,我想分享我的想法。在本文中,我将用简单的术语向您解释“现代数据堆栈”,并讨论为什么现代数据堆栈在公司中真的很重要。什么是现代数据堆栈?对现代

2023-04-03 15:28:14 31

转载 ETL 与 ELT的关键区别

相同的转换可能发生在 ETL 和 ELT 工作流中,主要区别在于何时(在主 ETL 工作流内部或外部)以及转换数据的位置(ETL 平台/BI 工具/数据仓库)。这不仅仅是语义,转换发生的时间和地点的顺序在数据团队如何存储、治理、标准化、建模和测试数据方面起着至关重要的作用。数据团队角色 ELT 工作流使了解 SQL 的数据团队成员能够创建自己的提取和加载管道及转换 ETL 工作流通常需要具有更高技术技能的团队来创建和维护管道。这代表了以前处理数据的方式的根本转变,当时ETL是大多数公司实施的数据工作流。

2023-03-31 12:49:40 172 1

转载 DBT构建和部署机器学习模型预测订单退货

在这篇博文中,我们将引导您了解如何使用 fal 和 dbt 来训练和存储逻辑回归 ML 模型,对新数据进行预测,并将这些预测存储在 dbt 模型中。接下来,我们将模型权重保存到本地存储。在我们的例子中,逻辑回归模型的输出将是给定客户的年龄和订单总价格的订单被退回的概率。这个新的dbt模型将首先选择最佳的逻辑回归模型,使用它来预测订单是否会被退回,最后将其预测存储在我们的数据仓库中。如您所见,我们正在计算两个 dbt 模型,并且 .顾名思义,一个数据集包含标记的数据,而另一个数据集包含未标记的“新鲜”数据。

2023-03-30 17:30:04 121

转载 数据工程:ELT 工作流中的 6 个步骤

因此,一个好的数据转换过程既严格又灵活 - 该过程允许足够的护栏,使分析工作有价值和有条理,有足够的空间来有趣、具有挑战性和针对您的业务进行定制。在实际的转换步骤中,已加载到数据仓库中的原始数据,您熟悉该数据的结构,并且您有一个关于如何处理它的大致计划 - 它终于准备好开始您的建模过程了!如果您对原始数据的准确性和完整性有很高的信心,那么与质疑数据的完整性相比,此步骤可能会变得不那么费力(如果您是数据从业者,这可能是您的自然倾向😉)。在提取过程中,从与您的业务相关的多个数据源中提取数据。

2023-03-29 20:12:42 44

转载 Airbyte是如何避免ELT中数据提取加载错误

在单个连接器(例如亚马逊广告)的文档上,您会发现对上述许多问题的详细讨论,例如如何提供连接器将适当传递给 API 的凭据,以及哪些终端节点包含跨行业最普遍有用的信息。通常,API 查询的结果可能是大量记录。这些步骤中的每一个都可能带来许多不同的挑战,这些挑战可能会使数据团队花费宝贵的时间来编写样板代码,或者危及结果的准确性和完整性。了解这种复杂性说明了像Airbyte这样的数据集成工具如何通过减少认知负担,加快开发时间,降低未来错误和中断的风险,并让他们专注于组织特定的问题来减轻数据团队的负担。

2023-03-29 20:08:38 44

转载 自助式分析是数据组织的一种状态

例如,在我认识的一家消费者软件公司中,该公司报告结构中的许多人都精通SQL,因此他们能够通过面向SQL的BI工具,精心策划的数据仓库和一两个可视化工具的组合来解决自助服务问题。然后你的公司成长起来,创建了向不同领导者报告的部门,每个部门都雇佣了自己的分析师,现在你在公司的各个部门都有一群分析师,都在编写查询或调整Excel电子表格,只是试图跟上你的公司向他们提出的业务要求。“我们非常高兴,”他告诉我们,“产品团队和营销团队都有自己的仪表板,一旦我们设置了所有内容,我们从这两个团队收到的请求数量就会下降。

2023-03-27 13:43:28 38

转载 现代数据栈MDS应用落地介绍—MozartData数据驱动从未如此简单

莫扎特数据的现代数据堆栈可以由那些几乎没有技术专长的人建立,并且成本只是其他选项的一小部分,这要归功于Snowflake和Fivetran的合作伙伴折扣。MozartData提供了一个开箱即用的现代数据平台,该平台具有内置的技术集成和工具,可实现可观测性、可靠性和编目,因此组织中的任何人都可以查找和使用完整、准确和最新的信息。将数据可观测性作为数据平台服务,利益干系人可以查看整个数据管道中的数据沿袭,包括源表、这些表的数据转换、生成的表、版本历史记录以及依赖项的快速概览视图。其中最重要的是数据可观测性。

2023-03-24 14:50:35 29

转载 现代数据栈MDS应用落地介绍—Vero营销自动化平台

如果 你有一个像Dribbble这样的数据仓库设置,这意味着 支付两次费用以存储相同的数据:一次在您自己的数据中 仓库,并再次在您的电子邮件服务提供商的云中。这是运球的场景 发现自己在。现代数据栈MDS的出现使得中小企业低成本获得大数据处理能力成为可能,技术的进步使得各种基于MDS的大数据应用如雨后春笋般涌现,不同于国内的数据中台更多强调数据处理技术,MDS注重落地和最后一公里的大数据应用。在原始成本之上 重复数据存储,运行中涉及的维护 数据管道的拼凑使所有内容保持同步,增加了 巨大的维护成本。

2023-03-23 17:26:28 28

转载 现代数据栈MDS应用落地介绍—Bloom AI数据交付平台,实时AI驱动业务

现代数据栈MDS的出现使得中小企业低成本获得大数据处理能力成为可能,技术的进步使得各种基于MDS的大数据应用如雨后春笋般涌现,不同于国内的数据中台更多强调数据处理技术,MDS注重落地和最后一公里的大数据应用。客户在 Salesforce 中捕获客户/潜在客户的互动,而 Bloom AI 平台为客户团队提供了主题分析、视觉洞察和智能警报。Bloom AI 能够实现端到端实施,从原始数据的摄取到见解的分发,并将分析整合到一个平台中,而无需任何技术工具集/基础设施作为先决条件。

2023-03-22 12:37:42 34

转载 现代数据栈MDS应用落地介绍—ActionIQ智能营销系统

现代数据栈MDS的出现使得中小企业低成本获得大数据处理能力成为可能,技术的进步使得各种基于MDS的大数据应用如雨后春笋般涌现,不同于国内的数据中台概念,MDS注重落地和最后一公里的大数据应用。随着客户隐私和数据保护的增加,作为营销人员和组织,我们如何使我们的业务面向未来,并考虑正确的技术堆栈,以帮助我们保护面临风险的收入,更重要的是,开始考虑如何创造更无缝的客户体验来推动增长?在遵守隐私法规的情况下,跨您选择的第一、第二和第三方来源管理和解析匿名和已知客户的身份。跨任何系统或渠道自动执行更新、导出和配置。

2023-03-21 12:32:39 36

原创 Dazdata MDS

现代数据栈MDS的出现使得中小企业低成本获得大数据处理能力成为可能,技术的进步使得各种基于MDS的大数据应用如雨后春笋般涌现,最后一公里的大数据应用在企业的普及,反过来也促使MDS技术平台快速发展。额外的表单字段通常意味着更少的合格潜在客户。获取公司关心的每家公司和联系人的更全面背景信息,以推动大规模洞察、转化和制胜。一致的上下文可让您实时评分和路由潜在客户,以便您可以告别不适合、错误路由的潜在客户和手动排序。使用您的 CRM 数据、网站数据和 100+ 公司、技术和员工属性,通过精确的受众推动更多管道。

2023-03-20 19:40:17 114

原创 现代数据栈MDS的6个趋势

他说,在IT运营管理领域,这涉及分析数据,包括指标,事件,日志,拓扑,事件和更改,并且需要开放的平台,并且可以集成来自无数工具和技术的数据,并补充说,堆栈还需要支持混合客户来自本地数据中心基础设施和应用程序以及多个云资产的数据。“人们,普通商业用户,使用AI / ML做非凡事情的方式,将改变未来企业的运营方式,”他说,并补充说谷歌正在寻找进一步民主化人工智能和机器学习的方法,以便那些没有数据背景的人可以通过简单的电子表格访问它。我们在谷歌有备份,在微软有其他备份,这种互连正在变得正常,“齐马说。

2023-03-17 13:16:57 86

原创 udp应用之广播

udp套接字应用 --》广播一点发送多点接收目标地址: 广播地址 x.x.x.255服务端from socket import *#设置套接字s=socket(AF_INET,SOCK_DGRAM)#设置广播地址dest=('<broadcast>',9999)#设置能发送广播s.setsockopt(SOL_SOCKET,SO_BROADCAST,1)...

2018-08-13 19:15:41 162

原创 tcp沾包原因,udp服务端编程

tcp沾包产生的原因: 1.tcp传输以字节流的方式发送消息,消息之间没有边界 2.发送比接收速度快影响:对每次发送的内容是一个单独的意思需要单独识别如何处理: 1.每次发送后加一个结尾 2.发送一个数据结构 3.每次发送有一个间隔(不适合大规模发送)udp基于udp的服务端编程1.创建套接字 sockfd=scok...

2018-08-13 19:09:49 539

原创 网络编程的基本概念

网络编程网络目的:数据传输OSI七层模型:网络通信的标准化流程 应用层: 提供用户服务,具体的内容由特定的程序规定 表示层: 提供数据的加密和压缩优化 会话层: 确定建立应用连接,选择传输服务 传输层: 提供数据传输服务,进行流量的控制 网络层: 路由选择,网络互联 链路层: 提供链路交互,具体消息的发送 物理层: 物理硬件,接口,网卡规定五层...

2018-08-13 19:01:29 145

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除