在刚刚结束的2023鲲鹏应用创新大赛中,云河恩墨凭借出色的表现,成功夺得全国总决赛一体机专题金奖。不到半年的时间,云和恩墨就成功完成了zData X数据库一体机对鲲鹏架构的支持,展示了其在技术创新和产品研发方面的雄厚实力。
借此机会,51CTO采访了云河恩墨数据库一体机产品总经理刘宇。他也是云鹤恩魔参赛队的队长。刘宇表示,云和恩墨与华为有着多年的合作关系。在国家自主创新的大环境下,行业数字化快速发展,云和恩墨也在产品规划上率先支持鲲鹏生态。 “我们希望通过参加这次比赛来验证我们产品的能力,并通过这个平台向其他优秀参赛团队学习。”
云和恩墨数据库一体机产品总经理刘宇(右二)上台领奖
国产数据库百花齐放,自主创新面临诸多挑战
当前,数据库行业面临着诸多挑战。首先,国内数据库市场百花齐放。据摩天伦社区统计,国内数据库类别总数已达到近300个,如此之多的类别,给客户在选择时遇到了很大的挑战。
其次,随着数字化转型的快速发展和政策的推动,对自主创新能力的需求日益凸显。但国产软硬件适配过程复杂,管理成本高,且经常出现问题,导致企业用户“想用却不敢轻易尝试”。
第三,过去本地化数据库通常只部署在边缘业务上,很少能直接在核心业务系统中使用。如今,国产数据库需要满足核心业务需求,直接承载更多任务。这对数据库提出了更高的要求,其托管环境也需要满足高性能和高可靠性的要求。
数据库一体机通过一体化解决方案将硬件、软件、存储和管理融为一体,大大降低了数据存储和管理的复杂性。同时还具有高集成、高性能、高可靠性、高安全性、使用简单等优势,可满足各种业务场景的需求,成为众多行业核心系统数据库替代的最佳解决方案。
本届鲲鹏应用创新大赛首次设立“鲲鹏一体化解决方案创新赛道”,旨在广泛征集运营商、金融、泛政务等国计民生行业的应用场景。基于行业应用软件与鲲鹏服务器深度融合的其他国计民生行业应用场景。综合配送工作。云鹤恩魔参赛队伍由刘宇带队。他们带来了zData X数据库一体机参赛,并在比赛中表现出色,获得一体机赛道金牌。
解决方案:zData X全栈软硬件数据库一体机
zData的核心优势是高性能和多样化。
刘宇强调,数据库最关键的是性能,而zData最大的优势是
zData还支持NVMe-oF和RoCE协议。在高速协议的加持下,数据传输和访问性能提升2倍。
为了实现如此高性能,云河恩墨团队采用了完全自研的分布式架构,并针对数据库场景进行了专门的设计和优化。与支持多种协议的传统架构相比,我们对软件进行了瘦身。整个代码的协议栈进行了精简,从而提高了数据库一体机的整体性能。
此外,为了充分发挥鲲鹏硬件的潜力,云河恩墨还对调度框架进行了优化。为了避免CPU资源分配不均对整体性能的影响,云河恩墨开发了自己的调度算法,通过局部优化和多次迭代逼近最优平衡。同时采用自动化护理方式。当资源平衡性能偏差超过3%时,将自动触发用例重新运行并进行问题分析,确保实施效果正确。
我们一直专注于多维数据库的开发。 zData这个产品真正支持多种数据库。云和恩墨在各个数据库的兼容性和优化上投入了大量的资源和研发精力。通过全面的自动化用例设计和充分测试,确保兼容性问题的顺利解决。此外,云和恩墨拥有多名数据库专家,利用专家的力量解决多维数据库的盲点问题,进一步优化多维数据库。
在众多优化方法和技术的支持下,zData X的存储性能超过传统Ceph架构9倍,超过业界同类产品2倍以上。它可以以更低的延迟提供更高的IOPS性能,满足数据库各种严格的负载要求。
鲲鹏助力提升开发效率和性能
云和恩魔其实很早就和鲲鹏有过深入的合作。 2020年发布了基于企业级开源数据库的商业发布数据库MogDB,已被金融、政府、制造等行业用户广泛使用。同时,云和恩墨也是社区第一届董事会成员。基于鲲鹏在硬件市场的出色表现,2023年初,云和恩墨推出了基于鲲鹏硬件平台的zData X全栈国产数据库一体机。
刘宇分享了他们开发zData X数据库一体机的一些经验。通过鲲鹏应用使能套件,我们针对数据库的特定场景进行优化,实现性能提升。例如,我们利用MySQL并行查询优化技术来优化订单数量统计业务场景。该场景统计一个大表(单表)1亿行订单。大小约23GB),优化后统计效率提升30%。与此同时,其他重要数据库场景的性能提升均超过25%。
然而,从原有架构移植到鲲鹏硬件平台并不容易。刘宇提到,这个过程会遇到很多挑战,而且由于架构不同,也会带来编译问题。原有架构的外部依赖需要被识别并解决,才能在鲲鹏设备上运行。为此,鲲鹏开发套件应运而生,作为涵盖代码迁移、开发调试、编译、测试、性能调优等各个环节的开发使能工具集,方便开发者快速开发鲲鹏友好的高性能软件。同时,鲲鹏帮助开发者加速应用迁移和算力升级,提高应用迁移和调优效率,加速整个研发流程的原生开发。云和恩墨团队使用鲲鹏代码迁移工具。几个千兆字节的软件包花了不到一个小时就完成了对原始架构依赖关系的分析。如果没有鲲鹏工具的帮助,可能需要好几天才能完成。鲲鹏代码迁移工具大大提高了迁移效率。同时,通过鲲鹏原生开发插件,可以一次性生成两种架构的代码包,大大提高了开发效率。
目前的zData X全栈国产数据库一体机在实际交付过程中也得到了各行业用户的良好反馈。在某卫健委,zData,匹配客户业务发展的性能需求,帮助客户完成高性能国产数据库资源池的建设。
另外,某医院使用了zData后,医院信息系统(HIS系统)的性能得到了显着的提升。以典型场景为例,zData反映实时信息后,为提高医院管理效率带来很大帮助。 zData X也因其高性能、高可靠性和灵活性满足了智慧医院的建设要求。
数据库一体机推动数据库行业创新发展
数字时代,随着数据量的爆发式增长和业务需求的多样化,数据库管理面临着前所未有的挑战。如何高效、安全、可靠地存储和管理海量数据已成为业界亟待解决的问题。数据库一体机作为一款专门针对高性能数据库管理而设计的设备,在业界逐渐展现出其巨大的价值。
数据库一体机市场的一大趋势是开放性和多样性。这种趋势不仅体现在对多种数据库类型的支持上,还体现在对不同硬件架构的兼容上。云和恩墨zData X一体数据库机不仅支持多种数据库产品,还可以根据用户需求进行搭配,提供个性化解决方案。这种开放、多样化的特点使得一体机数据库机更具市场竞争力,更容易满足用户需求。
其次,云河恩墨一体数据库机实现了全栈国产化,基于鲲鹏+欧拉,满足自主创新需求。这种全栈自主创新模式提升了产品性能和可靠性,让云和恩墨在市场上占据更有利的地位。
第三,数据库一体机的核心要求是高性能和高可靠性。 zData X数据库一体机采用先进的存储技术和优化算法,快速处理和分析海量数据,提高数据处理效率。同时,它还具有高可靠性,能够在不同的应用场景下稳定运行,保证数据的安全可靠。
云和恩墨与鲲鹏生态的深度合作,构建了由软硬件组成的强大生态系统。在该系统中,充分发挥了鲲鹏硬件的计算能力,为数据库一体机的优异性能提供了坚实的基础。云和恩墨的软件和服务进一步提高了系统的稳定性和可靠性,保障了用户数据的安全和业务的高效运行。
这种基于框架的推广合作模式,不仅推动云和恩墨与鲲鹏生态共同推动国内数据库行业的发展,也让用户享受到更加全面、高效、可靠的数据存储和管理服务。未来,云和恩墨将继续深化与鲲鹏生态的合作,推动数据库技术的创新发展,为用户创造更多价值。
未来发展
随着数字时代的到来,数据规模爆炸式增长,数据库市场前景广阔。在此背景下,云和恩墨积极布局数据库一体机市场,通过横向和纵向的产品演进,不断推动数据库一体机技术的发展。横向方面,将支持更多的数据库协议,为客户提供更丰富的选择;垂直方面,云和恩墨将推出一体式数据库机,通过数据库与存储的联动,实现1+1>2。影响。
数字时代,数据库作为核心的数据存储和管理工具,其性能和可靠性对于各行业的业务连续性和发展至关重要。云鹤恩墨很清楚这一点。刘宇表示,未来云河恩墨将充分发挥在数据库行业的优势,发挥鲲鹏硬件的算力,帮助鲲鹏生态捕捉数据库行业高价值,助力国产数据库行业通过自己的贡献
鱼云提供全球范围的云服务器和物理服务器租赁服务,具备强大的DDoS防御功能,确保您业务安全稳定运行,同时提供灵活定制和专业支持以满足多样化需求。