本发明属于纸质文档图像处理技术领域，公开了一种用于去除文档图像颜色及手写笔迹的方法及装置，获取待处理的文档图像，待处理的文档图像包括从本地存储器加载文档图像，或者从图像采集设备直接获取文档图像，输入图像通常同时包含打印文字区域与手写笔迹区域；使用图像分割模型对输入图像进行分割，获得像素级的打印文字区域与手写笔迹区域；基于获取的区域分割结果，对图像进行去色和去手写笔迹处理。本发明的方法有效去除纸张褶皱、拍照阴影的影响，获得高质量的清晰的文档图像；同时智能去除图像上各种颜色的手写笔迹；当配合高质量打印机时，使用本发明的方法能够直接打印出干净清晰的文档内容。