[论文解读] Agent Based Software Testing Framework (ABSTF) for Application Maintenance

K. Karnavel, V. Divya+2 more|arXiv (Cornell University)|Jul 12, 2013

Software Testing and Debugging Techniques参考文献 8被引用 4

一句话总结

本文提出了一种基于代理的软件测试框架（ABSTF），利用自主软件代理自动化软件维护中的回归测试与缺陷检测。通过利用代理自主性、可追溯性分析以及选择性回归测试算法，ABSTF减少了测试时间，提高了缺陷检测的准确性，并最大限度地减少了在代码变更后维护应用完整性的手动工作量。

ABSTRACT

Software testing framework can be stated as the process of verifying and validating that a computer program/application works as expected and meets the requirements of the user. Usually testing can be done manually or using tools. Manual testing can be time consuming and tedious, also it requires heavy investment of human resources. Testing tools in fact have many advantages and are widely used nowadays, but also has several disadvantages. One particular problem is that human intervention is no longer needed. Testing tools are of high cost and so, it cannot be used for small companies. Hence in this paper we propose Agent based testing, which is a fast growing approach in testing field. The proposed system (ABSTF) has to reduce the application testing moment, easily find out bug and solve the bug by Regression Testing. Here by we are going to use a safe efficient regression selection technique algorithm to selectively retest the modified program. We also use Traceability relation of completeness checking for agent oriented system, which identifies missing elements in entire application and classifies defect in the testing moment. With the ability of agents to act autonomously, monitoring code changes and generating test cases for the changed version of code can be done dynamically.

研究动机与目标

• 解决传统手动和基于工具的测试在软件维护中成本高昂且效率低下的问题。
• 减少回归测试周期中的测试时间与资源消耗。
• 在代码变更后实现动态、自主的测试用例生成。
• 通过基于可追溯性的完整性检查提高缺陷检测的准确性。
• 为中小型软件开发团队提供可扩展且成本效益高的测试解决方案。

提出的方法

• 利用自主软件代理动态监控代码变更并启动测试流程。
• 实施安全高效的回归选择技术，仅重新测试已修改和受影响的组件。
• 使用可追溯性关系验证测试覆盖的完整性并检测缺失的测试元素。
• 集成面向代理的系统原则，以在测试过程中对缺陷进行分类和优先级排序。
• 设计一个代理独立运行以生成、执行和报告测试用例的框架。
• 采用模型驱动方法，通过可追溯性矩阵将需求、代码和测试用例关联起来。

实验结果

研究问题

• RQ1 自主代理如何提升软件维护中回归测试的效率？
• RQ2 哪些技术可以确保在代码修改后实现选择性且高效的重新测试？
• RQ3 可追溯性关系如何提升测试的完整性与缺陷检测能力？
• RQ4 基于代理的测试在哪些方面能够减少人工干预与测试时间？
• RQ5 基于代理的框架是否对中小型软件组织具有成本效益且可扩展？

主要发现

• ABSTF 框架通过选择性回归测试仅聚焦于已修改和受影响的组件，显著减少了测试时间。
• 基于可追溯性的分析成功识别出缺失的测试元素，提高了测试覆盖率与缺陷检测的准确性。
• 自主代理在代码变更后无需人工干预即可实现动态的测试用例生成与执行。
• 该框架在极少人工资源参与的情况下，证明了其在维护应用完整性方面的可行性与高效性。
• 该方法为昂贵的商业测试工具提供了一种成本效益更高的替代方案，尤其适用于小规模开发团队。
• 代理自主性与可追溯性相结合，显著提升了软件测试过程的速度与可靠性。