本发明公开了一种自动化测试案例的质量评估方法及装置，方法包括：执行测试案例集合中所有的测试案例；获得分布式系统中所有节点服务的代码覆盖度数据；基于所述代码覆盖度数据确定所述测试案例集合的测试质量。上述方案通过采集分布式微服务运行期数据的方式得到一种可以体现自动化测试案例和软件质量的指标数据，针对自动化测试案例的效果进行评估，有助于提升测试质量以及软件研发流程中的测试效率，实现通过同等案例或者更少的自动化测试案例数量完成软件版本质量评估以及测试流程的效果。