本公开实施例提出了一种自动化测试软件的方法及装置、计算机设备及计算机可读存储介质，应用于软件测试技术领域，方法包括：获取待测试软件项目中包含的各软件工程的工程名称，以形成工程名称集合；遍历所述工程名称集合，根据遍历到的每个工程名称获取其对应的软件工程的工程配置信息；判断所述各软件工程之间是否存在关联关系，得到判断结果；根据所述判断结果和所述工程配置信息执行自动化测试。本公开实施例可以有效地实现测试环境部署的自动化以及测试用例运行的自动化，节约人力成本，提升测试效率和准确性，缩短软件测试周期。