PieCloudDB Database | 拓数派
文章平均质量分 84
云原生虚拟数仓 PieCloudDB Database 技术博文
OpenPie|拓数派
拓数派「OpenPie」是立足于国内,基础数据计算领域的高科技创新驱动机构。拓数派大模型数据计算系统(PieDataCS)首款数据计算引擎 PieCloudDB 是以对行业顶级数据库的抽象思考和设计原则复用为技术路线,可将物理数仓整合到云原生数据计算平台,根据数据授权动态创建虚拟数仓,按需灵活计算,打破数据孤岛,支撑更大模型所需的数据和计算。在云上,数据计算资源按需扩缩容,实现数量级增加可计算数据空间的同时,数量级降低数仓成本,打开无限数据计算空间,为企业构建高安全,高可靠,高在线「坚如磐石」的云原生虚拟数仓,更好地赋能业务发展并走向绿色,成为新一代AI数据计算基础设施的一个典范。
展开
-
“地表最强”文生视频模型?Sora 背后有何秘密?
AI 的进化速度远超预期,我们可以轻易预见到,现有的产业格局,包括短视频、游戏、影视、广告等将在不久的将来迎来重塑。Sora 的出现补齐了内容创作的最后一块拼图,爆火的它,背后到底有什么秘密?原创 2024-04-29 17:19:24 · 634 阅读 · 2 评论 -
2024 美国 Postgres Conference 大会丨一文详解拓数派干货演讲精华内容
4月17日,Postgres Conference 2024 在美国 San Jose 隆重举行,本届大会邀请了来自谷歌、AWS、EDB、Yugabyte、DBeaver 等企业的资深讲师出席大会。拓数派凭借其强大的国际技术社区影响力,受邀作为会议赞助商参与本次盛会,并发表技术演讲。原创 2024-04-26 10:03:06 · 472 阅读 · 0 评论 -
云原生虚拟数仓 PieCloudDB Database 4月更新盘点
云原生虚拟数仓 PieCloudDB 4月动态,增强本地缓存文件生命周期、新增 Interconnect Proxy 多进程支持、全链路 ARM 支持、Flink Connector 组件支持、云上云版订阅服务等多种功能优化。原创 2024-04-19 09:57:01 · 745 阅读 · 1 评论 -
从“执行SQL”到“返回结果”,数据库到底发生了什么?
由于其简单易学、完整安全、灵活且具备高可扩展性,SQL 如今已经成为标准的关系型数据库管理语言。那你知道 SQL 语句在数据库中是如何执行的吗?让我们用一条简单的查询语句,一起在 PieCloudDB 数据库中进行一次旅行!原创 2024-04-10 10:04:56 · 353 阅读 · 0 评论 -
拓数派向量计算引擎PieCloudVector助力东吴证券AIGC应用升级
拓数派向量计算引擎 PieCloudVector 实现大模型和私域数据的无缝结合,提供垂直领域的个性化解决方案。原创 2024-04-02 11:07:52 · 854 阅读 · 0 评论 -
新朋友+1!拓数派 PieCloudDB Database 与 OpenCloudOS、TencentOS Server 完成产品兼容互认证
近日,拓数派云原生虚拟数仓 PieCloudDB 与开源操作系统 OpenCloudOS 以及腾讯云旗下操作系统 TencentOS Server 完成了产品兼容性互认证。原创 2024-03-29 10:09:04 · 271 阅读 · 0 评论 -
PieCloudDB Database 3.0 正式发布丨数仓虚拟化流转数据要素
PieCloudDB 内核技术持续突破,进行再一次升级,正式发布 3.0 版本。在这一新版本中,PieCloudDB 在存储、元数据、执行器等各个模块均进行了大量升级。原创 2024-03-20 10:43:50 · 568 阅读 · 0 评论 -
PieCloudDB Database 3.0 正式发布丨数仓虚拟化技术为数据要素流转注入创新动能
3月14日,拓数派2024年度战略暨新产品发布会在上海国际会议中心圆满落幕。本次大会以「数仓虚拟化 流转数据要素」为主题,众多业内资深专家、合作伙伴济济一堂,共同探讨数据要素流转和数字技术创新等热点话题。 拓数派创始人兼CEO冯雷(Ray Von)携产品团队重磅发布云原生虚拟数仓PieCloudDB 3.0版本,并分享了数仓虚拟化技术的最新成果与其在数据要素产业的最佳实践。原创 2024-03-15 14:24:00 · 670 阅读 · 0 评论 -
官宣正式成为 PostgreSQL Contributor,Richard 有何秘诀?
PostgreSQL 国际社区于3月3日正式公布了新加入的 PostgreSQL Contributor 名单,以认可为 PostgreSQL 开源项目做出实质性、长期贡献的人员。拓数派技术专家 Richard Guo 本次荣获 PostgreSQL 官方认可,正式成为一名 PostgreSQL Contributor。原创 2024-03-11 10:39:32 · 876 阅读 · 0 评论 -
PieCloudDB Database 3月产品动态丨功能再度升级,安全机制更加完善
PieCloudDB 实现元数据 MetaCache 缓存服务,大幅度提升了获取快照操作的性能;LocalCache 功能升级,粒度更加精细化;云上云版新增 mTLS 安全机制,有效提高安全性。原创 2024-03-08 10:24:50 · 873 阅读 · 0 评论 -
拓数派联手开源联盟 PG 分会,走进北京大学研究生公选课
为促进基础软件在中国高校的传播,进一步提高在校研究生对基础软件的学习和开发实践能力,培养数据库研发人才,拓数派联手开源联盟 PG 分会,走进北京大学,进行了研究生公选课的打造与授课。原创 2024-02-28 10:12:45 · 202 阅读 · 0 评论 -
足不出户闹元宵,挑战 IT 人专属灯谜!
又是一年元宵时,火树银花人团圆。PieCloudDB 社区准备了几道特别的灯谜,听说只有“IT人”才能答对全部哦~快带上你的小伙伴来挑战一下吧!原创 2024-02-24 13:30:45 · 99 阅读 · 0 评论 -
2023 龙蜥操作系统大会演讲实录:《兼容龙蜥的云原生大模型数据计算系统——πDataCS》
本文整理自 2023 龙蜥操作系统大会的演讲内容,主要介绍拓数派大模型数据计算系统 πDataCS 的整体架构、核心优势、技术突破以及产品生态。原创 2024-02-22 14:45:55 · 676 阅读 · 0 评论 -
PostgreSQL 90% 的新代码仅由 50 人完成,拓数派荣占一席
拓数派长期以来一直以强大的技术能力,用高质量、高数量的代码贡献力参与到 PostgreSQL 社区的产品和生态建设中。在 2023 年 PostgreSQL 代码主要贡献数据统计中,拓数派以强大的技术实力再次上榜!原创 2024-02-05 17:32:05 · 426 阅读 · 0 评论 -
CPU vs GPU:不仅仅是一字之差
在计算机科学领域,CPU 和 GPU 作为计算机的核心组件,虽然名字只有“一字之差”,但其结构和功能却大不相同。本文将介绍 CPU&GPU 的基本概念、主要区别、适用场景以及 GPU 加速在大模型与向量数据库领域的应用。原创 2024-02-02 10:19:52 · 938 阅读 · 0 评论 -
一站式获取 PieCloudDB Database 产品、社区及数据库行业全动态
快速了解 PieCloudDB 产品最新动态与数据库行业热点。PieCloudDB 新增元数据跟踪日志及缓存功能;增加配置参数;新增 COMPACTION 功能;云上云版平台界面全面升级。原创 2024-01-19 11:07:16 · 947 阅读 · 0 评论 -
PieCloudDB 多种压缩手段:降低数据库存储成本
PieCloudDB 在数据压缩上做了许多优化,打造自适应压缩方案,显著减少存储空间的需求,从而降低硬件成本。本文将主要介绍 PieCloudDB 是如何在保证性能的前提下,采用多种自适应压缩与编码技术,为企业降本增效。原创 2024-01-18 15:38:09 · 824 阅读 · 0 评论 -
国产化软硬件升级之路:πDataCS 赋能工业软件创新与实践
12月22日,ITPUB 携手各领域专家,举办「国产化软硬件升级替换之路」系列线上主题沙龙,与大家共同探讨国产化软硬件替换的关键问题和解决方案。拓数派作为国产云原生数据库领域的佼佼者,也受邀参与了本次活动,拓数派产品社区总监吴疆于活动中发表了演讲《πDataCS 赋能工业软件创新与实践》。原创 2023-12-28 17:04:52 · 437 阅读 · 0 评论 -
打造完备数据生态,「开放互信、合作共赢」: 拓数派亮相2023龙蜥操作系统大会
拓数派始终持「开放互信,合作共赢」的理念,致力于打造活跃的社区,构筑完备的数据生态体系。2023年12月17-18日,由开放原子开源基金会指导,龙蜥社区主办的2023 龙蜥操作系统大会于北京嘉瑞文化中心隆重召开。受生态合作伙伴龙蜥社区的邀请,拓数派也受邀参与本次大会并发表演讲。原创 2023-12-28 14:12:16 · 380 阅读 · 0 评论 -
新玩法!如何在 PieCloudDB Database 中“种”一棵圣诞树?
随着圣诞节的到来,很多城市也都张灯结彩,处处充满了节日气息。 圣诞节当然离不开圣诞树啦!今天,我们将教你在 PieCloudDB 中“种”下今年的圣诞树!原创 2023-12-25 10:48:33 · 365 阅读 · 0 评论 -
「校园Pie」第二站赴上海科技大学:共同探讨大模型如何助力企业智能决策
12月16日,受上海科技大学创业与管理学院张瑞洁教授邀请,「校园 Pie」第二场活动来到张教授的「决策理论与方法」课堂。在本次活动中,缪思好作为拓数派 Data Science Lab 负责人,与上科大的同学们分享了《大模型时代下大数据智能决策》主题演讲。原创 2023-12-20 10:09:22 · 378 阅读 · 0 评论 -
云原生向量计算引擎 PieCloudVector:为大模型提供独特记忆
作为 πDataCS 支持的第二款计算引擎,云原生向量计算引擎 PieCloudVector 支持海量向量数据存储、向量数据高效查询,是大模型时代的分析型数据库升维,目标是助力多模态大模型 AI 应用。原创 2023-12-15 13:20:40 · 1401 阅读 · 0 评论 -
PieCloudDB Database 自研全新向量化执行器,带来性能的数量级提升
PieCloudDB 为了助力企业建立以数据资产为核心的竞争壁垒,为客户提供卓越性能和高效的数据处理能力,颠覆原有执行器设计,自研了高效的全新向量化执行器。向量化计算技术的引入使得 PieCloudDB 能够充分利用现代处理器的并行计算能力,实现数据的快速并行处理。原创 2023-12-06 13:56:51 · 886 阅读 · 0 评论 -
简墨的进化之路:打造大模型数据计算系统的云存储底座
最底层的是简墨的存储访问抽象层,简墨利用抽象 API 与任何类型的存储进行交互,包括云对象存储(例如 S3)、HDFS 等。通过这种方式,简墨确保了所有存储引擎的兼容性。此外,简墨对文件系统进行了包装,以进一步优化存储功能,例如提供监控和各种读写策略等。简墨会在这一层支持多种文件格式,并具备统一的访问接口来简化对数据的访问操作,从而让用户的数据可自由的选择不同的文件格式来存储,用户数据。原创 2023-11-22 20:22:15 · 669 阅读 · 0 评论 -
PieCloudDB Database 自研内存管理器 ASanAlloc:为产品质量保驾护航
有效的内存管理可以确保系统的稳定性和安全性,提高系统运行效率,帮助我们最大限度地利用有效的内存资源,合理分配和回收内存,预防各类内存错误。为了保持对 PieCloudDB 软件质量的严格控制,PieCloudDB 打造了全新的内存管理器 ASanAlloc。原创 2023-11-15 10:51:34 · 74 阅读 · 0 评论 -
上新啦!请查收云原生虚拟数仓 PieCloudDB 十月动态
一文带你快速了解 PieCloudDB & 拓数派的近期动态与行业热点。PieCloudDB Database 压缩效率得到升级;费用中心、权限管理升级优化;新增审计日志功能原创 2023-10-20 09:56:27 · 1005 阅读 · 0 评论 -
大模型与数据库:AI 时代的双向助推力
随着 AIGC 的时代到来,以 GPT 为首的大型语言模型(Large Language Model,LLM)已经成为当今人工智能领域最热门的话题之一。这些强大的模型不仅在内容创意生成、语言翻译和代码辅助等任务中表现出色,还对数据库的发展带来了革命性的影响。原创 2023-09-15 11:22:49 · 350 阅读 · 0 评论 -
DTCC 2023丨云原生环境下,需要什么样的 ETL 方案?
无论 ETL 还是 CDC 都是把数据复制作为目标的,因此不可避免的会造成一定程度的数据冗余,也存在造成数据不一致的风险;PieCloudDB Formatter 会先对 Foreign Table 中获得的原始数据进行解析,根据数据的格式(如 CSV,JSON,XML 等),将原始数据分解成可操作的数据单元(字段、行、列等)。在步骤 3 中,会对步骤 2 中解析出的列执行数据转换操作,以确保数据的准确性和一致性,使数据能够顺利插入 PieCloudDB 表中,为后续的分析和应用提供可靠的数据基础。原创 2023-09-08 15:11:45 · 1215 阅读 · 5 评论 -
云上 Index:看「简墨」如何为云原生打造全新索引
为了更好地适应云原生和分析型场景的要求,PieCloudDB 必须使用合理的存储架构及技术,打造一款全新的存储引擎,并实现高效的云上索引技术,满足用户查询需求。PieCloudDB 全新存储引擎「简墨」是一款专为云原生和分析型场景设计的高效存储引擎,旨在提供优异的查询性能和灵活的索引技术,以满足用户在云上的数据查询需求。其命名源自「竹简墨书」。因此,PieCloudDB 在 update/delete 删除时,会生成新的文件,在新文件中将包含未修改的数据和新增的修改后的数据,并将保留旧的数据文件。原创 2023-08-02 13:37:44 · 1224 阅读 · 0 评论 -
云时代已至,新一代数据分析平台是如何实现的?
PieCloudDB 于 2022 年 10 月正式问世。它是一款云原生分布式数据仓库,提供完备的 SQL 语言支持,高效的分布式计算能力和完备的事务支持。同时又实现了单一数据集的多集群,秒级的弹性和只为必要的计算和存储付费的能力。原创 2023-06-30 16:07:08 · 470 阅读 · 0 评论 -
PieCloudDB Database:云原生分布式虚拟数仓的诞生之旅
PieCloudDB通过多种创新性技术将物理数仓整合到云原生数据计算平台。PieCloudDB 可以动态创建虚拟数仓,按需灵活计算,从而打破数据孤岛,支撑更大模型所需的数据和计算。原创 2023-06-15 14:32:15 · 396 阅读 · 0 评论 -
『Newsletter 丨第一期』PieCloudDB 新增自动启停、预聚集、试用规则优化、费用中心等多项功能模块
📢 资讯速递:『Newsletter丨第一期』发布啦!一起了解拓数派的近期动态与行业热点。原创 2023-06-09 13:41:30 · 557 阅读 · 0 评论 -
PieCloudDB Database 与多家基础架构软件厂商完成产品兼容性认证
拓数派(OpenPie)致力于持续完善生态伙伴网络,与各领域的厂商进行交流和合作,共同推进数据库技术的发展,构建开放、共享、可持续的数据库生态。原创 2023-05-15 11:41:23 · 377 阅读 · 0 评论 -
解锁云原生虚拟数仓 PieCloudDB Database 『第一期』
拓数派旗下旗舰产品 PieCloudDB ,采用领先的数仓虚拟化技术,为企业构建高安全,高可靠,高在线「坚如磐石」的云原生虚拟数仓。本系列文章将为大家介绍 PieCloudDB Database 最新动态和全新功能。原创 2023-04-21 13:44:52 · 136 阅读 · 0 评论 -
快速开始 PieCloudDB Database:数据实例演示
新一代云原生虚拟数仓 PieCloudDB「云上云」版(Cloud on Cloud)已于 2023 年 3 月14日重磅发布。原创 2023-04-18 14:18:47 · 167 阅读 · 0 评论 -
PieCloudDB Database 新一代优化器「达奇」:专为云原生和分布式场景而打造
拓数派技术专家郭峰受邀出席PostgreSQL 中国技术大会并发表主题演讲。原创 2023-03-24 15:51:36 · 116 阅读 · 0 评论 -
拓数派发布新一代云原生虚拟数仓PieCloudDB
3 月 14 日,2023 拓数派「Infinite Possibilities」战略暨新产品发布会在上海圆满落幕,拓数派创始人兼 CEO 冯雷(Ray Von)重磅发布基于新一代云原生数仓虚拟化打造的全新 PieCloudDB「云上云」版。原创 2023-03-15 17:31:54 · 187 阅读 · 0 评论 -
『坚如磐石的 PieCloudDB』:透明加密模块的设计与实现
作为一款存算分离的云原生数据库产品,PieCloudDB 做到了三大区域的安全特性设计,全链路地保证用户数据安全。原创 2023-03-01 11:43:54 · 133 阅读 · 0 评论 -
OpenPie 和 ChatGPT 聊聊云上数据计算的那些事儿
要说时下科技圈最火的新技术话题,那就非 ChatGPT 莫属了。由它引发的各类 “人工智能(AI)能否取代人工” 的讨论狂飙不停,抛开法律和道德层面的争议,ChatGPT 确实可以准确地回答用户大部分的通用知识问题。那么大家是否会好奇,ChatGPT 是依靠什么获得了这样“无所不知”的超能力呢?原创 2023-02-20 16:15:41 · 3217 阅读 · 0 评论 -
『Postgres.Live 技术沙龙回顾』揭秘 PieCloudDB Database eMPP 架构设计
2 月 1 日,拓数派参与了由开源软件联盟 PostgreSQL 分会组织的 Postgres.Live 线上系列沙龙活动。原创 2023-02-10 17:00:58 · 135 阅读 · 0 评论