数据库
文章平均质量分 73
数据库技术解析、云数据库、分布式数据库解析与应用套索
Cloud云卷云舒
专注互联网,数据库,云计算,行业云
展开
-
云卷云舒:论超级数据库
笔者大胆提出一种“超级数据库”的概念设想。算力网络时代已经来临,超大算力芯片和网络已然布局,越来越多的“智算中心”不断投产,我们需要更加加速构建上层算网应用生态,除了关注传统的“物理机、虚拟机”算力,需要更多去关注能够产生更加广阔价值的paas算网应用,比如“超级数据库、算网数据库但是在如今,时不我待,大胆创新突破,正当数字经济时代的“弄潮儿”,我们需要基于成熟的技术和算网生态体系,打造“超级数据库、算网数据库原创 2024-02-09 11:31:04 · 1274 阅读 · 4 评论 -
云卷云舒:谈云数据库的备份容灾
备份和容灾是云数据库的标配,是实现数据恢复、保护的关键。原创 2024-02-08 18:07:29 · 357 阅读 · 0 评论 -
转载:如何提高数据库的降本增效?知乎
容器化具有快速部署和启动、资源隔离等优势,可以更高效地利用物理服务器的资源,同时降低了部署和管理的复杂性。数据库上云的趋势不可挡,当前容器化技术的成熟,基于k8s的容器的编排技术的广泛应用,基于Operator的自助化管理能力,可以实现数据库资源的有效共享,提高使用效率和降低成本。(5)弹性扩展和按需付费:云计算平台提供了弹性扩展和按需付费的特性,可以根据实际需求自动调整数据库资源,随时提供更多的计算和存储资源,同时按照使用量付费,降低了成本和资源浪费。转载 2024-02-08 17:46:17 · 117 阅读 · 0 评论 -
云卷云舒:如何持续降低云数据库的成本?
数据库在云计算领域内是一个利润空间较大的产品体系,但是如果成本控制策略控制、市场推广不达预期,很有可能出现“负效益”,本文就谈谈个人看法,从云计算服务提供商的角度。(2)建设周期压缩:主要大规模产品加大建设周期,快速投产;3)新开资源池:严控,加大评审力度,必有有一个原则,比如对该新资源池的市场机会必须够大可持续;(1)专项开展存量资源的统筹,如建设需求合并、低效益负效益产品的下架;(2)借助全网性资源迁移工程,来完成全网资源池的梳理、释放;主要是(1)存量治理、(2)新增管控。一、首先是技术手段方面。原创 2024-02-08 17:05:50 · 431 阅读 · 0 评论 -
云卷云舒:安可测评数据库名单
附表一、中央处理器(CPU)附表三、集中式数据库。原创 2024-02-04 12:16:29 · 1189 阅读 · 1 评论 -
云卷云舒:PostgreSQL的事儿你听说了吗?
我想不管是哪一种情况,我们对于数据库技术发展的投入、生态价值发挥都远远还不够,都可以说是处理初级阶段,高级别的数据库自主革命还在继续,哪怕数据库已经出现了20几年了。,在我们的领先领域加大创新投入,以确保领先地位;3、国外创新力度加大,来自快速发展国家的压力,很多国外专家的危机意识也势必上升,因为不仅仅是我们有危机意识,人家也有的,所以可能短时间内我们的贡献度就被埋没了;这不是个好的现象,作为技术人不断突破创新是本职,能站在前人的肩膀上继续搞高级创新会更容易写,那么如果一直这样,谁愿意去做底层的创新呢?原创 2024-01-25 02:02:32 · 850 阅读 · 1 评论 -
云卷云舒:2024数据库发展趋势预测-长图版
云计算和大数据时代对数据库提出了更高的要求,需要支持大规模数据存储和处理。新型数据库技术如NewSQL和分布式数据库成为云计算和大数据时代的趋势。数据库需要具备分布式和并行计算能力,以满足高性能和可扩展性的需求。注:本文为chatGPT配合生成,如有涉及侵权,请留言联系我处置。原创 2024-01-16 19:39:51 · 1026 阅读 · 0 评论 -
云卷云舒:2023年,我眼中的十大数据库
我眼中的十大数据库,openGauss、Oceanbase、Tidb、He3DB、虚谷、Milvus、doris、GoldenDB、AntDB、PorlaDB原创 2024-01-15 19:42:31 · 451 阅读 · 1 评论 -
云卷云舒:数据库2023年度盘点
3 月 25 日,OceanBase 推出 4.1 版本,据称,4.1 版本实现了事务处理(TP)性能提升 40%,数据分析(AP)性能提升 15%,全面兼容开源数据库 MySQL8.0 及相关系统函数、窗口函数等。4 月 4 日,TiDB 7.0 正式发布。1 月 10 日,KaiwuDB(原:开务数据库) 发布了 KaiwuDB 1.0 时序数据库,其运用到实时就地运算等核心专利技术,专为工业物联网、数字能源、交通车联网、智慧产业等场景设计。7 月 4 日,腾讯云发布 AI 原生向量数据库。原创 2024-01-14 16:47:48 · 389 阅读 · 0 评论 -
云卷云舒:独立式向量数据库?数据库向量式插件?
在传统的关系型数据库中,数据是以表格的形式存储的,而在向量数据库中,数据则是以向量的形式存储的。这种新型的数据库技术,能够更有效地处理和分析大数据,因此在大数据时代中受到了广泛的关注和应用。随着AI 应用的大规模落地普及,数据量得到了暴涨,数据复杂度也大幅提升,数据库需要提高对向量分析和 AI 应用的支持能力。所以向量数据库也是人工智能与数据库结合发展的一个趋势。多模能力(包括向量检索)让应用可以把结构化数据和非结构化数据统一处理,所以说向量数据库也是“数据库一体化”发展的一个体现。原创 2024-01-13 06:38:28 · 1815 阅读 · 7 评论 -
云卷云舒:AI for DB、DB for AI
1、"AI for DB",即将AI应用于数据库,AI 技术加持智能数据库打造,提升数据库对应对数据分析、智能搜索和精准推荐等能力表现。AI 技术的出现,使得数据库利用规则、匹配数据的能力进一步提升,换句话说,数据库更加理解和处理存在里面的数据了,那么客户使用数据库查询和检索将更快速和准确,满足客户的需求。目前,几乎所有的数据库都在向 AI 靠拢,比如在数据库中添加向量索引实现向量高维存储,那就是向量数据库诞生的起源了。随着数据库和AI技术的分支同向演进,AI 和数据库间的关联越发紧密了。原创 2024-01-12 17:23:19 · 692 阅读 · 0 评论 -
云卷云舒:数据库可以运行在容器里面吗?云可以,因为云不等于容器
数据库到底能不能跑在容器里,如果不能,那么那么多的云服务商的云数据库产品不都跑在容器里面吗?数据库一般是有状态的,对于容器的快速扩展十分不利,除非存储服务单独提供,同样对于产品的设计难度要求更高。主要是担心容器被rm掉时,容器里的数据会丢失,即使使用数据卷挂载存储数据,由于容器数据卷对Union FS 镜像的持久存储依赖,数据安全缺乏保证,同时如果容器崩溃时,若数据库未正常关闭,可能会损坏数据。数据库一般对IO要求较高,一台物理机上的多个数据库容器将提升对服务器的IO压力。原创 2024-01-11 18:56:54 · 1697 阅读 · 0 评论 -
云卷云舒:数据库的serverless演进趋势
随着阿里云、华为云的PolarDB、guessDB都在大力演进serverless版本的发布,部分特性已经发布公测,国内的另外两家云服务商移动云、天翼云也相继推出serverless版本,并计划近期公测,可以看出。数据库的系统架构相对稳定,内核层面尤其是在资源调度部分相对成熟,自成体系,面对这serverless的演进,挑战不言而喻。了,所以进行serverless的改造成本,相比传统数据库来说,小多了,是可以实现的,但是这个改造的深度就要看各大云服务商的投入了,我还是那句话,原创 2024-01-10 11:43:25 · 635 阅读 · 0 评论 -
云卷云舒:【实战篇】DB2迁移
IBM DB2 Database是美国IBM公司开发的一套关系型数据库管理系统(RDBMS),它主要的运行环境为UNIX(包括IBM的AIX)、Linux、IBM i(旧称OS/400)、z/OS,以及Windows Server。DB2主要应用于大型应用系统,具有较好的可伸缩性,可支持从大型机集群到单用户环境。DB2提供了较高级别的数据可用性、完整性、安全性、可恢复性,以及小规模到大规模应用程序的处理能力。原创 2024-01-08 09:26:37 · 493 阅读 · 0 评论 -
云卷云舒:【实战篇】ElasticSearch迁移
Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java语言开发的,并作为Apache许可条款下的开放源码发布,是一种流行的企业级搜索引擎。Elasticsearch用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。官方客户端在Java、.NET(C#)、PHP、Python、Apache Groovy、Ruby和许多其他语言中都是可用的。原创 2024-01-06 21:26:57 · 643 阅读 · 0 评论 -
云卷云舒:【实战篇】Redis迁移
Remote Dictionary Server(Redis)是一个由Salvatore Sanfilippo写的key-value存储系统,是一个开源的使用ANSIC语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。原创 2024-01-05 17:53:01 · 524 阅读 · 0 评论 -
云卷云舒:立贴为证,明天写总结
4、人设进一步树立,坚决、结果导向,敢于批评与自我批评。1、技术领域事业打开,打开一半,另一半要谨慎。3、攻坚克难打开,打开一半,关系管理要加强。2、管理思路打开,打开一半,另一半靠落实。原创 2023-12-31 19:13:01 · 377 阅读 · 0 评论 -
云卷云舒:基于业务逻辑关联度实现数据预加载
在实现一个具有复杂业务逻辑的应用系统时,大多数情况下,编码过程中必定会包含着较多的数据访问方法(java中称之为方法)或函数(c中称之为方法),同样也就意味着多次的数据库连接。一方面复杂的逻辑会将程序的响应时间拖延过长,另一方面多次的数据库连接势必会给数据库带来过多的访问压力。原创 2024-01-03 13:16:16 · 1455 阅读 · 0 评论 -
云卷云舒:浅析云数据库架构的分层设计
1、大中型企业第一个需求就是,云数据库需要适配企业的管理架构,不同部门之间的数据传递、共享一般都有独立的平台部门维护,同时每个部门又有定制部分,整个企业内部最关键的是要维护企业数据模型的稳定一致。该层是根本解决数据库扩展性的一层,事务层的扩展能力决定了数据存储的上限,因为CAP理论之下,不可能无限的舍弃其中任意一环,实现租户级别的单独扩展能力,则需要依赖内存块级别的节点资源占用调度。2、私有云数据库系统:成本节约的同时,保证了系统和数据逻辑独占的需求,提升了自主和安全感等级,是大中型企业客户的选择。原创 2024-01-01 15:44:04 · 566 阅读 · 0 评论 -
云卷云舒:数据库还能发展多少年
云计算和数据库的下半场才刚开始,网络和数据库之间的缘分还没开启呢原创 2023-12-30 21:30:01 · 1119 阅读 · 0 评论 -
云卷云舒:云原生应用
云原生已经成为企业数字化转型、业务创新升级的首选,我们正在迈入构建以应用为中心的云原生基础设施的Cloud Native2.0时代。“云原生定义未来架构”--Cloud Native Define Futrue Architectrue 云原生是一种新的模式,基于云丰富的能力与产品,可以组合形成非常多形态的SaaS产品。传统的云原生定义是“微服务、容器化和DevOps”,但是现在转变为“底层技术、编排及管理技术、安全技术、监测分析技术以及场景化应用”等众多分支。运维模式:分为开发部+运维部,交钥匙的方式。原创 2023-12-28 20:03:43 · 1119 阅读 · 0 评论 -
云卷云舒:如何选择正确的数据库
但是有一点不得不说,企业也需要有一定的人员投入,一方面充分理解云服务产品的最佳使用方法,一方面也要知悉云产品带来成本效益的同时,需要配合分享该防范,当然这一部分也可以通过云服务配套解决,但是企业需要改变观念去投入,去解决,不能完全依靠云服务商,毕竟云服务商提供的还是标准化的产品服务,用的好与不好直接决定上云业务的质量。2,产品新版发布,建议技术创新角度使用新型数据库,如云原生数据库、数据仓库,对于生产需求不匹配带来的需求,建议选型不变,过渡期间完成选择,云数据库是首选。发展态势,是否公司主流业务。原创 2023-12-27 20:47:52 · 1122 阅读 · 0 评论 -
云卷云舒:算力网络+云原生(中):探索构建算力网络数据库
这里的资源包括传统的IDC资源、服务器和硬件资源、各类数据库产品和生态工具,以及丰富可控、可智能编排的网络(云内、云间、核心传输等),这里面运营商有着巨大的优势,未来会有更多的数据库迁移到国有的云运营商上。笔者也大胆预测一条,数据库的边界与存储将进一步模糊,具有智能和管控的存储也将是数据库领域未来必将考虑的一条路,但是同时带来的产品非标的情况将进一步劣化,需要做好数据库平台化的管控方能解决这个问题。算网数据库是一个双向赋能的产物,会催生更多新型形态的数据库产品,数据库服务于算力网络、也受益于算力网络。原创 2023-12-21 17:36:15 · 4490 阅读 · 0 评论 -
云卷云舒:【实战篇】如何提升云数据库的稳定性
2、监控区分为对外和对内,监控系统自动设置开关,合理屏蔽常规变更对于监控的影响,避免误报。1、支持全局配置管理,对全部资源池、全部版本、全部升级动作有视图,支持追溯。1、云架构的能力支撑,合理使用云基础设施,按照不同模块按需选型。4、高可用机制:最起码的容灾机制,主备切换逻辑,数据安全性审计。3、支持针对客户级别的变更,自动利用客户侧的变更完成数据库变更。2、支持灰度发布、蓝绿发布,其余的平滑过渡保障。1、排班机制,一二三线运转高效,评价绩效机制。4、容错机制、限流机制、服务降级。2、核心技术组件的选型。原创 2023-12-20 09:59:44 · 267 阅读 · 0 评论 -
云卷云舒:云原生数据库和普通数据库的区别
而普通数据库则需要通过传统的数据库软件客户端进行重新安装部署、插件增量部署,部署一次的代价相对较大,无法做到完全不停服,所以没法支持业务敏捷迭代。,而普通数据库在二者之间的权衡则需要付出巨大的代价,额外插件的引入也会使得架构变得相对复杂,一般来说高并发业务下,数据一致性往往被适当的舍弃,对于业务的影响大多无法避免。而普通的数据库则可以直接运行在本地硬件、虚拟机上,也可以基于简单的对云的应用构建基础的云数据库,但是仅限于基础调度能力上了云,内核和设计理念仍然为传统的架构。相比托管型的数据库如MySQL等,原创 2023-12-19 09:55:21 · 652 阅读 · 0 评论 -
云卷云舒:云数据库使用攻略
很多上了云的业务运维团队依然在抱怨,已经花了大价钱使用了云数据库,为什么还要那么操心,每周的故障也不少,甚至比以前更多了?一、很多业务的运维团队都有这样的困扰?我相信很多运维的团队都有这样的感受,明明使用上了最先进的云数据库,但是还是在受着持续的困扰和煎熬,貌似对于云服务商的投诉也看不到效果。我这里想谈几点我自己的感想,本人做过企业开发工程师,也做过云服务商的产品架构师,其实大家对于上云一直都有或多或少的误解。原创 2023-12-18 17:28:34 · 1037 阅读 · 0 评论 -
云卷云舒:算力网络+云原生(下):云数据库发展的新篇章
云原生化、平台化、一体化和智能化另外基于云原生构建多模数据库可是一个趋势,再次本文简单预测云数据库发展的新篇章,必然是“算力网络+云原生”的高层及结合。原创 2023-12-17 21:37:01 · 4048 阅读 · 2 评论 -
云卷云舒:【实战篇】MySQL迁移
MYSQL数据库的迁移原理,以及具体两种方法介绍。原创 2023-12-15 14:42:27 · 433 阅读 · 0 评论 -
云卷云舒:软件架构设计的经验总结
围绕架构设计的通用思想,从可用性、扩展性、高性能、一致性四个方面重点强调了架构设计的基本方法理论,具有较强的通用性和指导性。原创 2023-12-14 11:08:13 · 306 阅读 · 1 评论 -
云卷云舒::云原生数据库系列-分布式KV事务数据库TiKV
TiKV 是一个开源的分布式事务 Key-Value 数据库,支持跨行 ACID 事务,同时实现了自动水平伸缩、数据强一致性、跨数据中心高可用和云原生等重要特性。作为一个基础组件,TiKV 可作为构建其它系统的基石。目前最主要的chang,TiKV 已用于支持分布式 HTAP 数据库—— TiDB 中,负责存储数据,并已被多个行业的领先企业应用在实际生产环境。原创 2023-12-14 09:39:49 · 153 阅读 · 1 评论 -
云卷云舒:云原生数据库系列-Vitness
Vitess是一个用于部署、扩展和管理大型mysql实例集群的数据库解决方案。它的架构是在公共或私有云架构中高效运行,就像在专用硬件上一样。它结合并扩展了许多重要的mysql特性和nosql数据库的可伸缩性。原创 2023-12-13 13:09:31 · 174 阅读 · 0 评论