本发明公开了一种可回溯的交互式白板系统及其回溯方法，其中回溯方法包括以下步骤：服务器获取并存储绘制端发送的回溯文件和回溯录音；回溯文件携带有白板绘制数据结构内容和序列号以及时间戳，回溯文件以文件流的形式上传至服务器；服务器生成回溯接口，服务器将回溯接口发送至绘制端；服务器获取回溯端的回溯请求，将回溯文件发送至回溯端，以供回溯端再现白板的绘制过程。本发明，通过服务器获取携带有白板绘制数据结构内容、序列号和时间戳的回溯文件，并将回溯文件在回溯端再现，实现了白板绘制过程的回溯，大大降低了交互过程中的带宽占用、流量消耗以及内存占用情况，同时回溯过程的清晰度不受视频清晰度限制，提高了用户的使用体验。