软件缺陷预测模型间的比较实验: 问题、进展与挑战
作者:
作者单位:

作者简介:

刘旭同(1997-),女,博士生,主要研究领域为软件分析与测试;郭肇强(1994-),男,博士生,主要研究领域为软件分析与测试;刘释然(1990-),男,博士生,主要研究领域为软件分析与测试;张鹏(1996-),男,博士生,主要研究领域为软件分析与测试;卢红敏(1976-),女,博士,高级工程师,CCF专业会员,主要研究领域为软件分析与测试;周毓明(1974-),男,博士,教授,博士生导师,CCF专业会员,主要研究领域为软件分析与测试

通讯作者:

周毓明,zhouyuming@nju.edu.cn

中图分类号:

基金项目:

国家自然科学基金(62172205);江苏省研究生科研与实践创新计划(KYCX22_0153)


Comparing Software Defect Prediction Models: Research Problem, Progress, and Challenges
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    近年来,研究者提出了大量的软件缺陷预测模型,新模型往往通过与过往模型进行比较实验来表明其有效性.然而,研究者在设计新旧模型间的比较实验时并没有达成共识,不同的工作往往采用不完全一致的比较实验设置,这可能致使在对比模型时得到误导性结论,最终错失提升缺陷预测能力的机会.对近年来国内外学者所做的缺陷预测模型间的比较实验进行系统性的总结:首先,阐述缺陷预测模型间的比较实验的研究问题;然后,分别从缺陷数据集、数据集划分、基线模型、性能指标、分类阈值这5个方面对现有的比较实验进行总结;最后,指出目前在进行缺陷预测模型间比较实验时面临的挑战,并给出建议的研究方向.

    Abstract:

    In recent years, a large number of software defect prediction models have been proposed. Once a new defect prediction model is proposed, it is often compared with previous defect prediction models to evaluate its effectiveness. However, there is no consensus on how to compare the newly proposed defect prediction model with previous defect prediction models. Different studies often adopt different settings for comparison, which may lead to misleading conclusions in the comparisons of prediction models, and consequently lead to missing the opportunity to improve the effectiveness of defect prediction. This study systematically reviews the comparative experiments of software defect prediction models conducted by worldwide scholars in recent years. First, the comparisons of defect prediction models are introduced. Then, the research progress is summarized from the perspectives of defect dataset, dataset split, baseline models, performance indicators, and classification thresholds, respectively, in the comparisons. Finally, the opportunities and challenges are summarized in comparative experiments of defect prediction models and the research directions in the future are outlined.

    参考文献
    相似文献
    引证文献
引用本文

刘旭同,郭肇强,刘释然,张鹏,卢红敏,周毓明.软件缺陷预测模型间的比较实验: 问题、进展与挑战.软件学报,2023,34(2):582-624

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2021-09-16
  • 最后修改日期:2022-03-11
  • 录用日期:
  • 在线发布日期: 2022-07-22
  • 出版日期:
您是第位访问者
版权所有:中国科学院软件研究所 京ICP备05046678号-3
地址:北京市海淀区中关村南四街4号,邮政编码:100190
电话:010-62562563 传真:010-62562533 Email:jos@iscas.ac.cn
技术支持:北京勤云科技发展有限公司

京公网安备 11040202500063号