本发明实施例公开了一种基于视频采集的远程主机控制方法及系统，涉及计算机远程控制领域，能够在对画面质量要求较高，网络带宽有限的应用场景下，实现高效实时的控制远端主机。本发明包括：本地主机中配置视频采集卡，视频采集卡通过线缆与远程主机的视频接口连接，并用于采集远程主机输出的视频信号；本地主机连接输出显示设备，输出显示设备用于显示视频采集卡所采集到的远程主机输出的视频信号；与本地主机连接的HID输入设备所发出的控制信号通过hid gadget设备的信号输出接口向远程主机的信号输入接口传输，并由远程主机中所枚举的HID输入设备接收。本发明适用于在对画面质量要求较高，网络带宽有限的应用场景下，能够实现高效实时的控制远端主机。