月4日,2023可信数据库发展大会(以下称“大会”)在北京国际会议中心成功召开。会上,中国通信标准化协会互联网与应用技术工作委员会主席何宝宏代表中国通信标准化协会正式发布《数据库发展研究报告(2023年)》,对数据库及相关领域的产业规模生态、行业应用实践以及未来发展趋势等方面进行了详实和多维度的阐述。
库瀚科技作为报告的主要编写单位、信通院数据库应用创新实验室的一员,从底层存储和网络角度,与信通院一同对数据库底层基础设施的创新实践及未来趋势进行了阐述。
随着数字化转型深入推进和数据量的爆炸式增长,我国已经迈入数据库产业第一梯队。报告显示,2022年全球数据库市场规模为833亿美元,中国数据库市场规模为59.7亿美元(约合403.6亿元人民币),占全球7.2%。预计到2027年,中国数据库市场总规模将达到1286.8亿元,市场年复合增长率(CAGR)为26.1%。2022年,公有云数据库市场规模为219.15亿元占市场总体的54.3%,较2021年增速51.6%,我国公有云数据库市场规模首次过半。
此外,产业方面,报告从产业主体、研发模式、产品分布、推广策略等方面,分析我国数据库产业的主体特点、市场格局、发展态势等;技术方面,报告梳理了数据库技术发展在助力用户降本增效、护航数据要素安全流通以及赋能新兴业务场景三个方面的细分12个演进趋势;应用方面,报告以金融、电信和制造业为代表,研究当前应用现状、问题以及发展前景。
库瀚参编核心观点
库瀚基于数据库底层存储&通信基础设施方案能力,重点参与了数据库软硬协同异构加速、Serverless、存算分离架构、存算分离、多模态数据处理、数据湖仓一体、向量数据库、数据要素安全流通等方面内容的编写,助力数据库合作伙伴应对数据库的底层存储、网络瓶颈问题,推动产业合力共进。
报告篇幅精简,库瀚借此对部分内容作进一步解读、分享:
建议关注面向高性能NVMe介质设计的存储引擎:
库瀚认为数据库核心成本来源于底层存储的采购,而存储引擎作为数据库中管理利用底层存储资源的关键部分,发展较为滞后,成为数据库自身性能、成本的瓶颈。随着存储介质、数据库架构、场景(云场景)等带来新的需求,存储引擎也随之演进、优化。库瀚从IO线程模型的演进、随机读写转顺序读写、云原生的存算分离-架构等方面提出创新思路,基于NVMe SSD、异构处理器、软硬融合设计等技术为数据库实现降本增效。
建议关注软硬融合降本增效机会:
随着摩尔定律的终结,通过半导体工艺的提升来降本增效的技术路线也面临完结。通过优化硬件架构来解决特定领域问题的DSA(Domain Specific Architecture场景专用架构)思路成为新的潮流。目前这个趋势也影响到了数据库领域,如1、以DRAM+电容+NAND Flash作为log设备,减少WAL/redo/undo log的写放大的同时,降低写入的时延2、解压缩/消重的卸载3、可检索压缩4、SQL算子的异构计算等等。
建议关注数据存储机制创新:
以内存数据库为例,存储介质完全采用内存实现超低延时的同时,也带来巨大的成本和极为有限的容量扩展性,难以满足大规模使用、云原生等需求。库瀚尝试从数据存储引擎入手提出解决方案,包括冷热分层、读写分离等思路,实现以内存+SSD的混合方案来实现优秀时延性能,并大幅提升扩展性和数据库容量,满足在部分场景下内存数据库的使用需求。库瀚认为相关方向有可能为内存数据库的普及发展带来新的可能性。
库瀚科技祝贺信通院2023可信数据库大会圆满召开,库瀚将从底层存储&网络基础设施方案出发,持续与信通院及国内外优秀的数据库、数据平台厂商合作,携手推动数据产业发展,促进数据市场要素化加速落地。