本申请提供了一种面向建筑数字孪生的视频检测方法及系统，该方法包括：对连续视频图像帧中的每一帧待检测图像进行实体对象检测，确定每一帧待检测图像中包括的实体对象类别；当检测到任意一帧待检测图像中出现第一实体对象时，则从该帧待检测图像中，获取第一实体对象所在的图像连通区域；将该图像连通区域输入直线检测模型中，得到该图像连通区域的直线检测结果；从直线检测结果中，确定平行于第一直角边方向的第一平行线和平行于第二直角边方向的第二平行线；根据第一平行线与第二平行线在该图像连通区域内形成的交点，确定第一实体对象的图像位置。这样，本申请在对具备拼接结构的实体对象进行视频检测时，可以提高实体位置定位精度。