八点概览数据库技术发展的路径复盘及展望


bobo
等离子电视机 2023-04-28 14:43:19 50325
分类专栏: 资讯
报告的核心观点是:

1.数据库的过去技术架构演进的背后是四股创新⼒量 1)数据模型的变迁 2)分析型需求的兴起 3)分布式架构的演进 4)开源思潮的流⾏。

2.数据库的未来技术栈收敛与新兴技术潮流下的分化发展。 部署多套系统带来⼀致性与运维⽅⾯的挑战,出现技术栈收敛的趋势;数据库和新兴的 IT 技术结合以进⼀步提升性能, 对应原⽣分布式、云数据库、智能⾃治、结合新硬件等⽅向。

观点摘录:

1.关系型数据库有两⼤核⼼优势,⼀⽅⾯符合事务ACID,使其能够应⽤在核⼼业务场景中;另⼀⽅⾯,⽀持SQL能够降低使⽤⼈员的学习成本,快速⽅便查询,并且容易形成⾏业统⼀的语⾔和接⼝标准.

1

2.Google Spanner 、 F1 两套论 ⽂ 是 NewSQL 的开⼭⿐祖。NewSQL ⼀ 词是最早由 451 Group 的分析师Matthew Aslett在研究论⽂中提出的。2012 ~ 2013年 Google 相继发表了 Spanner和 F1 两套系统的论⽂,让业界第⼀次看到了关系模型和NoSQL的扩展性在⼀个⼤规模⽣产系统上融合的可能性,这是绝⼤多数NewSQL数据库架构灵感来源。

3.从技术⻆度来看,分布式架构实现路径有⼆,⼀为借助中间件,⼆为原⽣分布式。从技术先进性上⽐较,原⽣分布式数据库系统在服务器利⽤率、管理复杂性、分布式事务实现等⽅⾯均明显优于中间件⽅案,但其开发难度⼤、发展历史较短、技术成熟度较低。综合考虑理论先进性、⼯程化实现和产品能⼒输出等,⽬前两种技术栈共存,各有适⽤场景图片2

4.分布式数据库核⼼需要解决 “ 数据如何有效分散存储 ” 和 “ 在分散存储中如何保证强⼀致性”两个问题,分别对应分⽚/分库/分表和分布式事务两⼤核⼼技术:

aaaaa

5.早期OLAP基本均采⽤MPP架构,适合中等规模的结构化数据分析。MPP每个节点都有独⽴的磁盘存储、内存和计算系统,业务数据按照数据模型和应⽤需要划分到各个节点上,每台数据节点通过⽹络互相连接、并⾏计算,作为整体提供数据库服务。MPP的优点主要为扩展性,在分布式的同时保障较⾼的⼀致性、 ⽀持事务ACID和SQL兼容,常⽤于关系型OLAP。3

 

6.新兴技术潮流下原⽣分布式演进⽅向。分布式是⼤势所趋,原⽣分布式开发难度⼤但优势明显。中间件解决⽅案虽然较为成熟、整体能⼒接近单机数据库,但存在可拓展性差、对业务侵⼊性强、中间件负担过重、运维管理复杂等问题,⽽原⽣分布式数据库的整体架构设计逻辑天然⾯向分布式数据管理需求,⽀持⾃动分⽚、迁移、复制,更容易实现分布式事务。我们认为,虽然原⽣分布式技术实现难度更⼤,但是下⼀代数据库产品的颠覆式创新⽅向之⼀,且和云计算天然契合。

图片4

7.智能⾃治是数据库重要的演进方向。⼈⼯智能延伸DBA的能⼒半径,优化数据库性能。数据库技术栈⽇益丰富,但⼤多优化任务仍需要DBA进⾏⼿动调优,⼈⼯能⼒逐渐跟不上数据库的发展,⽽AI技术的成熟可以弥补该不⾜,解决资源调度、索引设计和优化、查询优化、负载均衡设计、缓存 失效等问题。AI通过优化算法,对任务进⾏预测、分析和⾃动化,能够减少⼈⼯成本并提⾼数据库的性能,将⼈⼯智能新技术与数据库运维管理相结合是各供应商需要⾯对的重要课题。

图片5

8.客户选择数据库产品的评定体系:决定性要素是产品技术和企业需求的适配程度, 同时考虑品牌、资质、⽣态、价格、服务等。不同的企业业务场景对数据库的要求不同,⼀般会从性能、 可扩展性、⼀致性等⽅⾯进⾏考量,需求适配是选型的第⼀要义,⽽可靠、可⽤、稳定性则是不同企业场景下都要满⾜的基本要求。

6

数据库的性能指标聚焦于6个方面:吞吐量、负载均衡、读写速度、分区分片、并发性和可用性,通过核心方向上的攻关发展,国产数据库正在加速发展,走上担当大任的道路。

网站声明:如果转载,请联系本站管理员。否则一切后果自行承担。

本文链接:https://www.xckfsq.com/news/show.html?id=20765
赞同 0
评论 0 条
等离子电视机L0
粉丝 0 发表 45 + 关注 私信
上周热门
如何使用 StarRocks 管理和优化数据湖中的数据?  2951
【软件正版化】软件正版化工作要点  2872
统信UOS试玩黑神话:悟空  2833
信刻光盘安全隔离与信息交换系统  2728
镜舟科技与中启乘数科技达成战略合作,共筑数据服务新生态  1261
grub引导程序无法找到指定设备和分区  1226
华为全联接大会2024丨软通动力分论坛精彩议程抢先看!  165
2024海洋能源产业融合发展论坛暨博览会同期活动-海洋能源与数字化智能化论坛成功举办  163
点击报名 | 京东2025校招进校行程预告  163
华为纯血鸿蒙正式版9月底见!但Mate 70的内情还得接着挖...  159
本周热议
我的信创开放社区兼职赚钱历程 40
今天你签到了吗? 27
如何玩转信创开放社区—从小白进阶到专家 15
信创开放社区邀请他人注册的具体步骤如下 15
方德桌面操作系统 14
用抖音玩法闯信创开放社区——用平台宣传企业产品服务 13
我有15积分有什么用? 13
如何让你先人一步获得悬赏问题信息?(创作者必看) 12
2024中国信创产业发展大会暨中国信息科技创新与应用博览会 9
中央国家机关政府采购中心:应当将CPU、操作系统符合安全可靠测评要求纳入采购需求 8

加入交流群

请使用微信扫一扫!