本申请提供了测试的执行方法、装置、设备及存储介质，该执行方法包括：确定目标产品的第一方案和第二方案的差异特征；根据第二差异特征对用户个性行为的影响，确定针对第一方案和第二方案的用户行为特征分布信息；根据第一差异特征对用户共性行为的影响、受测用户的数量以及第一方案和第二方案的重要程度，确定第一用户数量和第二用户数量；根据用户行为特征分布信息、第一用户数量和第二用户数量，分别确定用于测试第一方案的第一受测用户组和用于测试第二方案的第二受测用户组。这样，本申请在不限制受测方案的制定以及受测方案需要投放相同数量受测用户的基础上，可以准确地得到可信的测试结果，减少受测方案的制定成本，提高测试的灵活程度。