- 博客(53)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 Hologres V2.1版本发布，新增计算组实例构建高可用实时数仓
Hologres 是阿里云自研一站式实时数仓，统一数据平台架构，将OLAP查询、即席分析、在线服务、向量计算多个数据应用构建在统一存储之上，实现一份数据，多种计算场景。
2024-01-18 11:23:49
986
原创 Flink X Hologres构建企业级Streaming Warehouse
Flink X Hologres构建企业级Streaming Warehouse，本文整理自阿里云资深技术专家，阿里云Hologres负责人姜伟华，在FFA实时湖仓专场的分享。
2023-02-15 09:54:19
517
原创 阿里妈妈Dolphin智能计算引擎基于Flink+Hologres实践
本文将会介绍阿里妈妈Dolphin智能计算引擎基于Flink+Hologres实践
2023-01-11 10:25:19
496
原创 阿里CCO：基于Hologres的亿级明细BI探索分析实践
通过对数据产品的不断迭代，我们采用Hologres+FBI支撑CCO体验小二所有数据探索需求，月均50亿+明细数据聚合查询秒级返回，支持100+业务小二大促、日常的体验运营洞察分析，助力业务小二单次洞察分析提效10倍以上，解放业务同学的生产力。在文本中，我们也将会介绍CCO数据洞察产品基于Hologres在BI查询场景的最佳实践。
2023-01-05 15:28:50
537
1
原创 升级JSONB列式存储，Hologres助力淘宝搜索2022双11降本增效！
升级JSONB列式存储，Hologres助力淘宝搜索2022双11降本增效！通过本文我们将会详细介绍Hologres JSONB在阿里搜索推荐团队的实践，以帮助更多企业通过技术手段助力业务快速增长。
2022-12-16 14:31:38
365
原创 阿里云 ODPS-Hologres刷新世界纪录，领先第二名23%
2022年云栖大会上，阿里巴巴集团副总裁、阿里云计算平台事业部负责人贾扬清宣布阿里云一体化大数据平台ODPS全面升级。
2022-11-08 09:50:03
171
原创 诺亚财富 X Hologres ： 统一OLAP分析引擎，全面打造金融数字化分析平台
本文将会介绍诺亚财富从自建CDH迁移上阿里云，统一OLAP分析引擎，打造金融数字化分析平台的最佳实践
2022-10-21 14:55:34
630
原创 阿里云云原生实时数仓升级发布，助力企业快速构建一站式实时数仓
9月14日，阿里云云原生实时数仓升级发布。阿里云计算平台的产品专家分享了实时计算Flink版和Hologres构建企业级一站式实时数仓的核心能力升级及新功能解读。
2022-09-23 16:28:15
392
原创 淘菜菜 （一）：基于Flink和Hologres的实时数仓架构升级之路
阿里淘菜菜（简称TCC）主营社区团购，其在阿里至少历经6年时间，为了更好支持业务发展，淘菜菜也在不断演进其技术架构。
2022-09-23 16:28:00
9770
2
原创 阿里云 Flink+Hologres：构建企业级一站式实时数仓
随着大数据的迅猛发展，企业越来越重视数据的价值，这就意味着需要数据尽快到达企业分析决策人员，以最大化发挥数据价值。企业最常见的做法就是通过构建实时数仓来满足对数据的快速探索。
2022-09-23 16:23:51
690
原创 替换Kudu，Hologres助力好未来网校实时数仓降本增效
好未来（NYSE：TAL）是一家以智慧教育和开放平台为主体，在全球范围内服务公办教育，助力民办教育，探索未来教育新模式的科技教育公司。好未来的前身学而思成立于 2003年，2010年在美国纽交所正式挂牌交易。好未来以“爱和科技让教育更美好”为使命，致力成为受尊敬的教育机构。
2022-09-23 16:18:13
190
原创 10亿+/秒！看阿里如何搞定实时数仓高吞吐实时写入与更新
在本文中，我们将会介绍数据实时入仓所面临的挑战，以及Hologres为了应对这些挑战在技术原理上的创新和演进，支撑实时数仓的高吞吐实时写入与更新，加速业务数据探索
2022-09-23 16:14:38
308
原创 DataFunTalk：阿里建设一站式实时数仓的经验分享
大数据计算正从规模化走向实时化，实时大数据建设过程中开始面临很多的痛点和问题。本文内容整理于阿里资深技术专家姜伟华在DataFunTalk上的演讲，为大家介绍阿里巴巴基于一站式实时数仓Hologres建设实时数仓的经验和解决方案。
2022-09-23 16:02:08
253
原创 湖仓一体，Hologres加速云数据湖DLF原理解析
本期我们将带来Hologres高性能分析引擎加速查询云数据湖DLF的技术原理解析。随着云服务被接受的程度不断提升，云用户日益愿意将其收集的数据存储在低成本的对象存储里，比如OSS，S3等。与此同时，基于云的数据管理方式也得到相应的推广，元数据也不断存储在阿里云DLF（Data Lake Formation）上。OSS和DLF的结合成就了一种新的数据湖搭建方式。这种基于云存储的数据湖集累的数据规模也不断增长，相应的湖仓一体的需求也孕育而生。湖仓一体架构基于开放格式的外部存储，以及高性能的查询引擎，让数据架构
2022-04-26 14:41:03
426
原创 新东方基于Hologres实时离线一体化数仓建设实践
业务介绍新东方教育科技集团定位于以学生全面成长为核心，以科技为驱动力的综合性教育集团。集团由1993年成立的北京新东方学校发展壮大而来，拥有短期培训系统、基础教育系统、文化传播系统等业务。在互联网大潮中，新东方在IT技术上也不断重构，持续投入大数据建设，研发大数据的相关技术和应用，从而快速而精准地响应业务需求，并用数据为集团各级领导提供决策依据。新东方的大数据应用主要包括两部分：企业应用端的业务场景（B端）：包括交易，教学，人员等数据，数据规模为TB级。数据会被按照不同的条件和学校层级等，形成营
2022-02-17 15:11:38
1744
原创 年度报告｜Hologres重点功能年终大盘点
1月7日，由阿里云实时数仓Hologres和开发者社区共同举行了实时数仓年度发布会。在发布会上，来自阿里云的资深技术专家果贝从阿里的核心场景出发，深度解读了实时数仓技术发展的新趋势：一站式、在线化、敏捷化。在发布会上，Hologres产品负责人合一针对当前数仓的新趋势，重磅发布了Hologres年度重点能力，助力企业更好的建设一站式实时数仓。本文将会从多个角度总结Hologres的重点功能，以帮助用户更加了解和使用Hologres。源于业务创新，持续业务演进Hologres从诞生至今已经走过6年的
2022-01-20 11:19:47
2830
原创 从阿里核心场景看实时数仓的发展趋势
作者：果贝，阿里云资深技术专家 ，实时数仓Hologres负责人2022年1月7日，阿里云实时数仓Hologres举行了年度发布会，在发布会上，来自阿里的资深技术专家从阿里的核心场景出发，为大家解读了实时数仓的新发展趋势“在线化、敏捷化、一站式”。通过本文，我们将会深入解读实时数仓发展所面临的问题，以及核心发展趋势，以帮助大家更好的做产品选型和数仓规划。实时数仓是现在大数据领域非常热门的一个概念（和它同热度的大概就是湖仓一体了）。经过十多年的发展，大数据已经成为每家公司的标配。传统上，离线数仓（
2022-01-11 20:07:56
1123
原创 阿里云实时数仓Hologres通过中国信通院分布式分析型数据库性能评测，8192个节点刷新现有参评记录
2021年11月23日至12月3日，中国信息通信研究院（以下简称“中国信通院”）对第13批分布式分析型数据库共计27款产品进行了大数据产品能力评测。阿里云实时数仓Hologres（原阿里云交互式分析）在报表任务、交互式查询、压力测试、稳定性等方面通过了中国信通院分布式分析型数据库性能评测（大规模），并以8192个节点刷新了通过该评测现有参评的规模记录。在本次评测中，Hologres是目前通过中国信通院大数据产品分布式分析型数据库大规模性能评测的规模最大的MPP数据仓库产品。通过该评测，证明了阿里云实时数仓
2021-12-31 18:27:22
1575
原创 实时数仓Hologres首次走进阿里淘特双11
2021年11月11日23:59:59，阿里巴巴淘特（淘宝特价版）的第二个双11完美落下帷幕。在双11大促期间，淘特历经多个大促爆发高峰，丰富的权限玩法，各类高性价比货品，大促期间累计超上千万人在淘特买到质美价廉的商品。本次双11大促中，淘特无论是流量、买家还是订单数都创下新的记录，交出了完美答卷，这也意味着，阿里巴巴在下沉市场开始斩露头角。业务简介与面临的问题淘特(原淘宝特价版)定位为消费者带来低价且有质量的源头好货，目前仍然处于用户快速增长的阶段，其中三方线上广告投放具有规模效应大，行业成熟度高等特
2021-12-17 11:53:30
145
原创 从双11看实时数仓Hologres高可用设计与实践
2021年阿里巴巴双11完美落下为帷幕，对消费者来说是一场购物盛宴，对背后的业务支撑技术人来说，更是一场年度大考。在这场大考中，一站式实时数仓Hologres以每秒11.2亿条的高速写入，和每秒1.1亿次的查询峰值（包含点查和OLAP查询），交出了满意的答卷，稳定高效地支撑了阿里巴巴双11核心应用场景。这是一站式实时数仓Hologres诞生的第5年，也是支撑阿里巴巴双11核心场景的第4年。这也证明实时数仓技术已经开始从幕后走到台前，支撑起更多的在线生产系统，并在性能、稳定性、高可用性等方面经受住了严苛的考
2021-12-17 11:45:48
230
原创 双11实时物流订单实践
随着双11的开启，物流业也迎来了年度大考。2021年双11期间，递四方作为物流仓储服务方，布局仓库和分拣点超40+个，50w+平米作业场地，单日订单峰值达千万级别，海量购物订单由递四方配送到家，消费者由尾款人秒变收货人。业务介绍递四方成立于2004年，创业在深圳，是国内最早的国际物流和全球仓储服务物流供应链服务商，主要为从事跨境电商的客户、平台以及普通用户提供仓储物流服务，以GPN(直发订单)和GFN(海外仓储)两张网络为客户提供更好的全球跨境电商优质生态环境，致力于帮助中国企业走向全球，目前在全球超过
2021-11-30 19:40:25
288
原创 钱大妈数据中台建设最佳实践
公司简介钱大妈是在社区生鲜连锁中，以"不卖隔夜肉"作为品牌理念的的行业开拓者。在成立之初即从新鲜角度重新梳理传统生鲜行业的标准，对肉菜市场进行新的定义。通过尝试和验证"日清"模式，以及"定时打折"清货机制，坚定落实不隔夜销售。截至2021年5月，钱大妈已全国布局近30座城市，门店总数突破3000家+，服务家庭超1000万+，经营蔬菜、水产、水果、猪肉类、肉类（非猪肉）、蛋奶、加工食品、综合标品八大生鲜品类，逾500种优质产品。 而"不卖隔夜肉"的理念，回归最朴素的目的：让消费者能买到新鲜的食物。践行这一
2021-09-26 11:46:19
1191
1
原创 从零开始，带你玩转一站式实时数仓Hologres
在大数据领域，Hologres一直以其超牛的功能、超高的性能，低成本的运维等优势广受好评，但是随着越来越多的企业开始使用Hologres，大家对Hologres的期待也越来越多：Hologres的功能那么多，应该从哪里开始快速入门？文档介绍太详细，功能使用的最佳实践究竟是什么？怎么跟大数据生态产品相结合，发挥出最优的能力？使用注意事项有哪些？怎么避免误入“坑”？…于是，这个夏天，为了让大家更加了解并精通Hologres，由阿里云Hologres专业团队打造的《玩转一站式实时数仓Hologre
2021-07-16 17:13:44
374
2
原创 首次揭秘云原生Hologres存储引擎
概要：刚刚结束的2020天猫双11中，MaxCompute交互式分析（Hologres）+实时计算 Flink搭建的云原生实时数仓首次在核心数据场景落地，为大数据平台创下一项新纪录。借此 之际，我们将陆续推出云原生实时数仓双11实战系列内容。本文将会首次对外公开介绍 Hologres的存储引擎，深度剖析其实现原理和核心技术优势。一、背景介绍MaxCompute 交互式分析（Hologres）是阿里云自研开发的HSAP（Hybrid Serving/ Analytical Processing）服务/分析
2021-06-16 20:25:24
313
原创 Flink+Hologres助力伊的家电商平台建设新一代实时数仓
作者：刘松森 ，伊的家CTO，高级工程师，副教授职称，国内多所高校客座教授广州伊的家网络科技有限公司是一家专注于服务女性的B2B2C电商平台，业务范围包括护肤、彩妆、营养美容食品、私人定制服装、跨境电商等领域。自2008年孵化项目，2011年5月上线天猫商城，全国8大配送中心，妍诗美、妍膳等品牌陆续成立，并于2013年上线了伊的家自主电商平台，2020年全面启动品牌升级。伊的家以互联网主动式服务营销，打造护肤老师与客户强连接关系，从上到下严格贯彻以品质及专业为基础，以社交信任做连接，以服务获得认可的经营思
2021-06-08 17:11:11
524
原创 Hologres揭秘:深度解析高效率分布式查询引擎
Hologres（中文名交互式分析）是阿里云自研的一站式实时数仓，这个云原生系统融合了实时服务和分析大数据的场景，全面兼容PostgreSQL协议并与大数据生态无缝打通，能用同一套数据架构同时支持实时写入实时查询以及实时离线联邦分析。它的出现简化了业务的架构，与此同时为业务提供实时决策的能力，让大数据发挥出更大的商业价值。从阿里集团诞生到云上商业化，随着业务的发展和技术的演进，Hologres也在持续不断优化核心技术竞争力，为了让大家更加了解Hologres，我们计划持续推出Hologers底层技术原理揭秘
2021-06-07 17:35:47
621
原创 来电科技：基于Flink+Hologres的实时数仓演进之路
本文将会讲述共享充电宝开创企业来电科技如何基于Flink+Hologres构建统一数据服务加速的实时数仓作者：陈健新，来电科技数据仓库开发工程师，目前专注于负责来电科技大数据平台离线和实时架构的整合。深圳来电科技有限公司（以下简称“来电科技”）是共享充电宝行业开创企业，主要业务覆盖充电宝自助租赁、定制商场导航机开发、广告展示设备及广告传播等服务。来电科技拥有业内立体化产品线，大中小机柜以及桌面型，目前全国超过90%的城市实现业务服务落地，注册用户超2亿人，实现全场景用户需求。一、大数据平台介绍（
2021-06-01 21:12:44
483
3
原创 Flink+Hologres亿级用户实时UV精确去重最佳实践
UV、PV计算，因为业务需求不同，通常会分为两种场景：离线计算场景：以T+1为主，计算历史数据实时计算场景：实时计算日常新增的数据，对用户标签去重针对离线计算场景，Hologres基于RoaringBitmap，提供超高基数的UV计算，只需进行一次最细粒度的预聚合计算，也只生成一份最细粒度的预聚合结果表，就能达到亚秒级查询。具体详情可以参见往期文章>>Hologres如何支持超高基数UV计算(基于RoaringBitmap实现)对于实时计算场景，可以使用Flink+Hologres方
2021-05-28 20:19:53
355
原创 Hologres如何支持超高基数UV计算(基于roaringbitmap实现)
RoaringBitmap是一种压缩位图索引，RoaringBitmap自身的数据压缩和去重特性十分适合对于大数据下uv计算。其主要原理如下：对于32bit数, RoaringBitmap会构造2^16个桶，对应32位数的高16位；32位数的低16位则映射到对应桶的一个bit上。单个桶的容量由桶中的已有的最大数值决定 bitmap把32位数用1位表示，可以大大地压缩数据大小。 bitmap位运算为去重提供了手段。主体思想（T+1）：把上一天的所有数据根据最大的查询维度聚合出的uid结果放入Roar
2021-05-26 17:56:10
336
原创 Hologres如何支持亿级用户UV计算
背景介绍在用户行为分析和圈人场景中，经常需要从亿级甚至十亿级用户中快速筛选出符合特定标签的用户统计，很多企业会使用Apache Kylin（下文简写为Kylin）来支持这样的场景。但是Apache Kylin的核心是预计算，当遇上设计不合理的Cube，或者需求维度多的场景时，会遇到维度爆炸，Cube构建时间长，SQL函数不支持等问题。本文将介绍阿里云Hologres如何基于RoaringBitmap进行UV等高复杂度计算的方案，实现亿级用户万级标签亚秒级分析，帮助用户从Kylin平滑迁移到Hologre
2021-05-24 20:28:53
330
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人