Page 131 - 《软件学报》2025年第12期
P. 131

软件学报 ISSN 1000-9825, CODEN RUXUEW                                        E-mail: jos@iscas.ac.cn
                 2025,36(12):5512−5536 [doi: 10.13328/j.cnki.jos.007405] [CSTR: 32375.14.jos.007405]  http://www.jos.org.cn
                 ©中国科学院软件研究所版权所有.                                                          Tel: +86-10-62562563



                                                                                 *
                 多目标深度强化学习驱动的数据库系统参数优化技术

                 荣垂田  1 ,    田浩辉  1 ,    杜    方  2


                 1
                  (天津工业大学 计算机科学与技术学院, 天津 300387)
                 2
                  (宁夏大学 信息工程学院, 宁夏 银川 750021)
                 通信作者: 荣垂田, E-mail: chuitian@tiangong.edu.cn

                 摘 要: 数据库系统的参数配置直接影响其性能和系统资源的利用率. 主流的关系数据库管理系统有数百个参数
                 可供调整以获得最佳的性能和服务能力. 数据库系统性能的优化通常由经验丰富的数据库管理员                                  (DBA) 手动进
                 行, 但是由于数据库系统配置参数众多、异构且参数之间存在复杂的相关性, 传统的人工进行参数调优的工作方
                 法效率低、成本高、可复用性差. 为了提高数据库系统性能优化的工作效率, 数据库系统的自动化参数调优技术
                 成为数据库领域的研究热点. 由于强化学习具有与系统运行环境交互、反馈并逐步优化的能力, 被广泛应用于复
                 杂系统的优化过程. 相关的研究工作将强化学习及其改进方法应用于数据库系统的参数优化, 但是都采用单目标
                 优化的方法.实际上, 数据库系统的参数优化属于多目标优化任务, 且调优工作常在资源受限的情况下进行, 因此现
                 有的工作存在一些缺陷: (1) 将数据库系统优化任务的多个目标通过简单线性转换为单目标优化问题具有一定的
                 盲目性, 需要反复迭代尝试优化, 实现成本高; (2) 无法应对数据库系统需求的动态变化, 适用性差; (3) 相关工作使
                 用的强化学习方法本身是属于单目标优化算法, 将其应用于多目标任务时, 导致难以有效对齐偏好                               (当前的各个目
                 标的权重系数) 和相应的最优策略, 可能产生次优解; (4) 现有数据库系统参数优化的目标通常仅考虑吞吐量和延
                 迟, 未考虑内存等资源的利用率. 针对以上问题, 设计一种基于多目标深度确定性策略梯度的强化学习算法
                 (MODDPG). 该方法是原生多目标的强化学习方法, 不需要将数据库系统优化的多目标任务转换为单目标任务, 可
                 以高效适应数据库系统需求的动态变化. 通过改进强化学习算法的奖励机制可以快速实现偏好与最优策略的对齐,
                 有效避免次优解的产生, 提高数据库系统参数优化的效率. 为了更进一步验证所提方法的普遍适用性, 将提出的多
                 目标优化的方法进行扩展, 实现了提升数据库的性能和资源利用率的多目标协同优化. 实验部分在主流关系数据
                 库系统上使用     TPC-C 和  SYSBench  测试基准对所提参数优化方法的有效性和实用性进行了验证. 实验结果表明,
                 所提方法在模型的训练效率和数据库参数优化的作用方面具有明显优势, 并且易于根据优化需求扩展到更多目标.
                 关键词: 参数优化; 数据库系统; 深度强化学习; 多目标优化; 性能优化
                 中图法分类号: TP311

                 中文引用格式: 荣垂田, 田浩辉, 杜方. 多目标深度强化学习驱动的数据库系统参数优化技术. 软件学报, 2025, 36(12): 5512–5536.
                 http://www.jos.org.cn/1000-9825/7405.htm
                 英文引用格式: Rong  CT,  Tian  HH,  Du  F.  Technique  for  Database  System  Parameter  Optimization  Using  Multi-objective  Deep
                 Reinforcement Learning. Ruan Jian Xue Bao/Journal of Software, 2025, 36(12): 5512–5536 (in Chinese). http://www.jos.org.cn/1000-
                 9825/7405.htm

                 Technique for Database System Parameter Optimization Using Multi-objective Deep
                 Reinforcement Learning
                                          1
                              1
                 RONG Chui-Tian , TIAN Hao-Hui , DU Fang 2


                 *    基金项目: 国家自然科学基金  (62062058)
                  收稿时间: 2024-06-07; 修改时间: 2024-09-22, 2025-01-02; 采用时间: 2025-02-11; jos 在线出版时间: 2025-07-17
                  CNKI 网络首发时间: 2025-07-18
   126   127   128   129   130   131   132   133   134   135   136