近日,在ITPUB举办的“国产化软硬件升级替换之道”第七期线上沙龙上,达梦数据技术(江苏)有限公司总经理付新作了《达梦分布式NOSQL数据库架构探索与实践》主题报告,结合达梦公司多款分布式NOSOL数据库架构的实践经历,介绍了达梦在NOSOL数据库领域的分布式架构演变路径与主要创新点,并对产品后续发展方向进行展望。
付新表示,达梦分布式NOSQL数据库最初采用的是典型分布式数据库架构,该架构采用计算/存储分离,计算节点无状态,存储节点数据分片,多副本,无单点故障,负载均衡,整个存储系统可以组成超大型KV系统,并采用LSM树支持顺序写。
但是,在后续的应用过程中,典型分布式架构出现了各种业务问题:如,存算分离架构在部分场景通信代价大;分布式数据库不适应单机/双机场景;数据存储成本高;数据分布方式不灵活;数据分片方式不灵活;数据迁移代价大;整个存储集群形成一个大KV系统对用户资源控制不便;分布式数据库的LSM树写放大突出等。
针对上述问题,达梦分布式NOSQL数据库架构正在不断演进及完善,实现了存算分离/存算一体自适应;单机分布式一体化;并灵活定义了副本数、数据分布节点和数据分片方式;通过建库时预估数据规模,实现了高速扩缩容和数据迁移;通过租户与database关联实现了多租户资源控制。
展望未来,付新在分享中谈到了分布式NOSQL的三个发展方向。首先,是与云计算深度融合。云计算为分布式数据库提供了可扩展的存储和计算资源,新的分布式数据库应该充分利用云计算高可靠、高可扩展的分布式存储能力,实现更高效的数据处理、更低的成本和更好的可扩展性。
其次,充分利用AI技术。AI技术在数据库的应用包括DB4AI和AIDB4,达梦在AIDB4方面的探索包括利用AI进行智能调优(针对业务场景,快速给出最优配置参数,降低运维成本)和智能查询(利用人工智能技术,提高查询的效率,降低查询成本)。在DB4AI方面,达梦也在探索向量数据存储和相似性查询。
最后,数据库一体机融合优化。达梦目前已经推出了纯国产的软硬件一体化解决方案,并在金融核心领域得到应用。除关系型数据库外,达梦其它产品如新云缓存数据库、图数据库等,也正在与达梦一体机进行深度适配优化,未来将朝着“分布式存储+行业一体机+数据库专用硬件”方向发展。
网站声明:如果转载,请联系本站管理员。否则一切后果自行承担。
加入交流群
请使用微信扫一扫!