✨ StarRocks 11 月社区动态

已于 2022-12-16 18:27:30 修改
阅读量115 收藏
点赞数
分类专栏： 社区动态 文章标签： 数据分析 大数据 数据库
于 2022-12-08 15:16:23 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/StarRocks/article/details/128237435
版权

大家好👋 这里是 《StarRocks 11 月社区动态》，一篇文章帮你了解过去一个月社区重要的那些人和事！

转眼间一年将尽，新的一年就在眼前。在 2022 年即将结束之际，StarRocks 社区诚挚地邀请各路抓虫达人一起加入我们的年终抓虫派对！我们准备了多个红包🧧好礼作为奖励，祝大家全年无 BUG！活动详情 & 报名见下文！

🆕 技术动态

🔧 版本发布

🗒️ 文档动态

中文文档

  • 文档补充

    • SQL命令：USE db， SHOW AUTHENTICATION，SHOW PROC

    • 函数：date

  • 文档优化

    • 整改“参数配置”文档，修正描述错误，补充细节。

    • 重构原有的“导出概览”文档，改为使用 Broker 导出数据。

    • 优化 stream load, broker load 相关 SQL 命令。

    • 优化函数排序。

    • 优化「管理手册」中备份与恢复文档和相关 SQL。

  • 社区合作：“All eyes on doc”活动结束，共解决 100 个 issue，合入 300 个 pr。感谢所有参与这次活动的同学：https://forum.mirrorship.cn/t/topic/3473

📚 推荐阅读

技术干货

StarRocks Join Reorder 源码解析

StarRocks 技术内幕 | Join 查询优化

StarRocks 统计信息和 Cost 估算

技术内幕 | StarRocks 支持 Apache Hudi 原理解析

StarRocks 技术内幕 | 多表物化视图的设计与实现

StarRocks 如何添加一个优化规则

StarRocks 如何添加一个 Operator？

用户案例

中纺集团×StarRocks：构建企业级数据资产管理的实践

TCL 基于 StarRocks 构建统一的数据分析平台

跨越速运如何构建实时统一的运单分析

StarRocks Summit Asia 2022 峰会实录

峰会实录 | StarRocks PMC Chair 赵纯：数据分析的极速统一3.0 时代

峰会实录 | 基于 StarRocks 和腾讯云 EMR 构建云上 Lakehouse

峰会实录 | StarRocks 存储引擎近期进展与实时分析实践

峰会实录 | 镜舟科技 CEO 孙文现：基于 StarRocks 打造企业级极速统一数据分析产品

论坛精选帖

Prometheus+Grafana 部署及监控模板配置

任务提交后流程 V1

用户共创内容

用户共创内容栏目设置的目的是希望能透过社区的力量一起共享知识，让大家在学习和使用 StarRocks 上事半功倍！我们热烈欢迎大家的投稿，在文末留下你的文章/视频链接就有机会被收录到 StarRocks 社区每月动态中！还能获得社区大礼包作为谢礼喔～🎁

StarRocks SSD 磁盘配置使用 by 柠檬味的鱼°

CDH Parcel 包 StarRocks 集成 Cloudera Manager by 柠檬味的鱼°

StarRocks systemctl 管理脚本启停服务 by 柠檬味的鱼°

Hive to StarRocks by 夏天的精灵

✨ 社区活动

正在进行中

✨不让 Bug 陪你过年，StarRocks 社区重金邀你来参加 2022 年终抓虫派对！✨ 欢迎大家一起来参加这场年末抓虫派对，呼朋引伴来参加还可以获得额外的奖励！

我们将送出价值上万的京东购物卡、社区周边等多项好礼作为报答。详细的活动说明请见下方链接。👇🏻

活动时间：2022/12/5-2023/1/5

活动详情：https://forum.mirrorship.cn/t/topic/4796

报名活动：https://github.com/StarRocks/starrocks/issues/14564

📺 活动视频回顾

Apache Hudi 中文社区技术交流会第六弹-StarRocks 与 Apache Hudi 共同创造湖仓融合新范式

Pulsar Summit Asia 2022——腾讯天穹 StarRocks 原生支持 Pulsar 数据源的原理和实践

Flink Forward 2022：Flink + StarRocks 实时数据分析新范式

🤗 参与社区｜Be A Rock Star！

🏆 StarRocks GitHub Monthly Contributors

感谢这些小伙伴为 StarRocks 添砖加瓦，StarRocks 因你而伟大！🧑🚀❤️

@abc982627271 @2ABingHuang @kobebryantlin0 @amber-create @buggithubs @decster @chaoyli @chen9t @chenyjsr @imay @DorianZheng @evelynzhaojie @huangfeng1993 @smartlxh @ucasfl @GavinMar @gengjun-git @guangxuCheng @HangyuanLiu @hellolilyliuyi @herocc19 @hongli-my @QingdongZeng3 @wanpengfei-git @fulghum @tracymacding @jiacheng-celonis @Johnsonginati @kangkaisen @caneGuy @kateshaowanjou @kevincai @leoyy0316 @jaogoy @mchades @tomscut @liuyehcf @meegoo @miomiocat @LiShuMing @motto1314 @mofeiatwork @Linkerist @nshangyiming @packy92 @padmejin @banmoy @Pslydhh @rickif @sduzh @Seaven @shan-01 @shileifu @shineyearpf @shshenhua @femiiii @silver--bullet @Smith-Cruise @srlch @ss892714028 @starrocks-xupeng @stdpain @stephen-shelby @dulong41 @syyfffy @waittting @wanghuan2054 @wangruin @wangshisan @wanweiqiangintel @wmtbnbo @tueeyu @xlfjcg @Astralidea @xyz @wyb @yangrong688 @zaorangyang @Youngwb @sevev @dirtysalt @zhenxiao @fzhedu @ZiheLiu @zombee0 @Wumenglong @EsoragotoSpirit

新晋 Contributors 👏🏻 👏🏻

@wangshisan @zaorangyang @wanweiqiangintel @zhenxiao @shineyearpf @syyfffy @shan-01 @GavinMar @guangxuCheng @fulghum @tracymacding @yangrong688 @kobebryantlin0 @ wmtbnbo

想加入 StarRocks 贡献者行列吗？请这里收下社区通关秘籍！

感谢你的阅读，有任何的问题欢迎在论坛下方与我们交流！

StarRocks_labs
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
博客
Data Lakehouse：你的下一个数据仓库
05-29 756
Lakehouse 兼具数据仓库与数据湖的优势，是下一代数据分析架构的演进趋势；StarRocks 是构建 Lakehouse 的最佳选择，已在微信、小红书、携程、平安银行等数十个大型企业落地实践，帮助企业实现 One data、all analytics 的业务价值。更多交流，联系我们：https://wx.focussend.com/weComLink/mobileQrCodeLink/33412/8da64。
博客
优化数据查询性能：StarRocks 与 Apache Iceberg 的强强联合
05-23 612
Apache Iceberg 是一种开源的表格格式，专为在数据湖中存储大规模分析数据而设计。它与多种大数据生态系统组件高度兼容，相较于传统的 Hive 表格格式，Iceberg 在设计上提供了更高的性能和更好的可扩展性。它支持 ACID 事务、Schema 演化、数据版本化、隐式分区和跨引擎兼容性等功能，使其特别适合处理数据密集型的大数据分析任务。然而，Iceberg 的使用也伴随着一些挑战，如较高的上手难度、后台维护需求、性能优化和治理策略等。
博客
AI 写 SQL 真的靠谱吗？腾讯游戏在 AI+ 湖仓一体的实践
05-15 969
作者：腾讯游戏数据技术负责人 刘岩腾讯游戏是全球领先的游戏开发和运营商，其数据团队拥有十余年、700+ 款大型游戏的数据工作沉淀。复杂的业务环境下，腾讯游戏数据团队每年需要处理超过 3 万个数据提取需求，SQL 编写需要耗费大量时间和精力，如何提升效率成为了一个关键问题。本文介绍了腾讯游戏数据团队如何通过最新的大语言模型技术，基于StarRocks构建一个高效的湖仓一体 +AI 数据管理新范式，解决游戏业务数据提取需求上痛点的实践经验。
博客
StarRocks （江）湖英雄召集令！
05-09 669
We want you！英雄们，一起建设湖仓生态吧！
博客
StarRocks 跨集群数据迁移，SDM 帮你一键搞定！
05-09 1006
告别复杂，迎接效率
博客
StarRocks x Paimon 构建极速实时湖仓分析架构实践
04-26 1348
当前 StarRocks x Paimon 的能力主要包括：支持各类存储系统，包括 HDFS 以及对象存储 S3/OSS/OSS-HDFS支持 HMS 以及阿里云 DLF 元数据管理系统支持 Paimon 的 Primary Key 和 Append Only 表类型查询支持 Paimon 系统表的查询，常见例如 Read Optimized 表，snapshots 表等支持 Paimon 表和其他类型数据湖格式的关联查询支持 Paimon 表和 StarRocks 内表的关联查询。
博客
StarRocks 实战指南：100+ 大型企业背后的最佳实践经验
04-23 704
编者荐语：本文由镜舟科技的 DBA 团队负责人景丹撰写。在过去三年中，他服务了上百家 StarRocks 大型企业用户，并总结了最佳使用方法。文章涵盖了部署、建模、导入、查询和监控五个模块。以下文章来源于小景说 ，作者镜舟科技 DBA。
博客
升级啦！探索全新 StarRocks 中文社区与高效使用秘籍！
04-17 240
眼尖的朋友可能已经注意到，StarRocks 中文社区最近换上了全新的皮肤。是的，我们 StarRocks 的聚集地升级了！🎉自成立两年半以来，StarRocks 中文社区不断壮大，现已发展成为一个拥有数万名成员的活跃社区。为了帮助大家更便捷地获取最新资讯、降低参与社区的门槛，我们对中文社区进行了一次重要的升级。
博客
StarRocks 物化视图：指标平台性能提升的新引擎
04-12 1057
在这样的背景下，StarRocks 以其卓越的性能和灵活的物化视图功能，成为了构建指标平台的理想选择。平台的复杂性增加，涉及更多指标维度和衍生方法，以及更广泛的业务服务，这使得 Kylin 构建 Cube 时的性能问题逐渐显现，特别是在 Cube 构建过程中的性能开销较大。指标平台通过简化这一流程，使得分析工程师 （analytic engineer）能够统一数据工程和数据分析的角色，从业务视角出发定义一致的指标，并通过平台自动生成相应的 SQL 查询和 BI 报表，从而提高效率和准确性。
博客
基于 StarRocks 的风控实时特征探索和实践
04-12 923
编者荐语：金融风控特征在实时业务中至关重要，是评估和管理风险的核心指标。经过评估，滴滴最终选择了 StarRocks 作为验证选项的落地方案。通过 StarRocks 实现流批一体，成功解决了风控实时特征流批分离的难题，缩短了开发周期，实现了更快的需求交付。
博客
StarRocks 助力小红书离线数仓提效，提升百倍回刷性能！
03-26 1066
OLAP 引擎在实时数仓建设方面已经得到了广泛的应用。我们的实践证明，结合业务特点，在处理中小规模数据量时，使用 StarRocks 等分布式 OLAP 引擎替换 Spark ，承担更多的离线处理任务，可以显著提高数据仓库产出的速度和效率，达到降本增效的目的。展望未来，我们计划进一步探索 StarRocks 在湖仓一体和存算分离的应用场景，以构建更加高效、灵活的数据生产链路和自助分析产品。我们期待通过这些创新实践，能够为公司带来更强大的数据处理能力，支持业务的持续增长和决策的精准性。作者简介。
博客
StarRocks 助力金融营销数字化进化之路
03-21 1011
作者：平安银行 数据资产中心数据及 AI 平台团队负责人 廖晓格平安银行五位一体，做零售金融的领先银行，五位一体是由开放银行、AI 银行、远程银行、线下银行、综合化银行协同构建的数据化、智能化的零售客户经营模式，这套模式以数据为基础，AI 为内核，通过画像识别，基于场景数据分析，通过高效组织内部资源，为客户提供精准服务，实现零售转型业务增长的第二曲线。通过颠覆传统“以产品为中心”模式，真正实现以客户为中心、以 AI 、大数据为驱动，以 KYC/KYP/KYATO 方法论打造技术架构及业务模块。
博客
腾讯天穹 StarRocks 一站式湖仓融合平台架构揭秘
03-15 897
作者：腾讯大数据 高级工程师 陈九天小编导读： 腾讯天穹是协同腾讯内各 BG 大数据能力而生的 Oteam，作为腾讯大数据领域的代名词，旨在拉通大数据各个技术组件，打造一个具有统一技术栈的公司级大数据平台体系。从底层数据接入、数据存储、资源管理、计算引擎、作业调度，到上层数据治理及数据应用等多个环节，支持腾讯内部近 EB 级数据的存储和计算，为业务提供海量、高效、稳定的大数据平台支撑和决策支持。
博客
StarRocks 易用性全面提升：数据导入可以如此简单
03-13 1124
一般情况下，建议直接使用 **date_trunc() 函数来指定分区方式**（也即[「时间函数表达式分区」](https://docs.starrocks.io/zh/docs/table_design/expression_partitioning/#%E6%97%B6%E9%97%B4%E5%87%BD%E6%95%B0%E8%A1%A8%E8%BE%BE%E5%BC%8F%E5%88%86%E5%8C%BA)）。并且，后续还会融入 Routine Load 的功能，将流式数据的导入也统一进来。
博客
QPS 提升 10 倍！滴滴借助 StarRocks 物化视图实现低成本精确去重
03-01 1113
同步和异步物化视图都支持透明的查询改写，依照这样的构建逻辑，用户基于原始明细表查询时，会遵循异步物化视图->同步物化视图->原始明细表的优先级来进行查询加速，从而保证了查询整体的实效性。对于可累加维度，只需创建一个基于该维度的异步物化视图，不需要为每个不同的可累加维度组合创建单独的视图，因为结果是可以复用的。由于看板查询都是基于平台配置的，自动生成的查询 SQL，因此通过分析历史查询记录，提取高频查询，进行物化视图的自动创建，可以减少人工参与，从而更有利于实现技术的更大规模应用和推广。
博客
vivo 基于 StarRocks 构建实时大数据分析平台，为业务搭建数据桥梁
02-21 1068
随着业务规模向全球发展，vivo 的分销代理系统覆盖用户量级飞速增长，营销、计价、订单、库存等业务系统均需要实时数据来保证销售业务精准稳定运营，这使得原有数仓架构的访问量持续增长，同时，随着各种大数据分析相关新业务的上线， Trino 负载越来越高，逐渐无法满足访问量持续增长带来的查询压力。而随着公司数字化服务的演进，业务诉求和技术架构有了新的调整，已有的基于 Trino 的架构面临着数据时效、查询性能、并发能力、复杂运维等方面的瓶颈，为此 vivo 大数据团队进行了一系列技术架构的探索和实践。
博客
8分钟带你体验 Flink CDC 3.0 实现 MySQL 与 StarRocks 实时数据同步
02-18 1249
2023年12月， Flink Forward Asia 发布了新一代的端到端数据集成框架 Flink CDC 3.0，该版本采用了以 Flink 为基础的端到端流式 ELT 数据集成框架，支持将数据先导入到下游系统，然后在下游系统中进行加工。在该版本中，社区已支持实时同步 MySQL 数据至 StarRocks 的链路，用户可以利用 StarRocks 强大的预计算能力和物化视图等功能在 StarRocks 中完成高效的加工，大大简化数据同步链路。提供全量和增量的实时数据同步能力。
博客
StarRocks 1 月社区动态（2024）
02-05 1448
当前，证券行业对数据的时效性、多样性和灵活性提出了更高的要求，为了解决实时数仓的挑战，申万宏源于 2023 年引入 StarRocks 对实时数仓整体架构进行了新的设计，目前基于 StarRocks 构建的实时数仓已经在申万宏源的财富管理类、投资研究类和风险管理类等多个场景中得到应用。新的一年，也请大家查收最新一月的社区动态。凭借所有社区参与者的支持，StarRocks 在2023年不断进化，锤炼核心功能，打磨全新特性，成功实现了从全场景OLAP到云原生湖仓的全面升级，成为湖仓新范式的造浪者；
博客
京东物流基于 StarRocks 的数据分析平台建设
02-02 1406
最下层左侧是生产系统数据区；报表生成之后，有时需要互相传阅，在 Excel 非常多的情况下，大家互相传输，有时会用到一些线下的传输工具，导致数据来源不明晰，由于传输过程中有很多人工参与，协同比较困难，数据的时效性、安全性都得不到保障，并且存在大量重复性工作，性能体验非常差。在我们的业务场景中，当一个订单从商城域进入物流域后，会经过很多环节，从仓储到分拣，再到配送、拓投，链条非常长，中间系统特别多，数据也比较多，各个系统产生的数据被存储到各种各样的异构存储里，一线运营人员在找数据时存在一定困难。
博客
湖仓新范式的造浪者 | StarRocks 2023 年度总结（文末福利）
01-26 443
最后，欢迎来 StarRocks 论坛写下你对社区 2024 年的期望，我们还有好礼相赠。大胆的留下你的想法，万一实现了呢！StarRocks 峰会纪念T恤 *10 （花样可 4 选择 1，因为要定制，年后才会开始寄送！社区的进步离不开大家的支持，新的一年我们也期望能与更多的小伙伴们大步前行、共同成长。你希望社区提供什么活动？你最希望社区推出什么 feature？你最希望社区跟哪个大数据生态组件结合？StarRocks 鼠标垫 *5。你最希望社区提供怎样的内容？B站季度大会员 *5。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值