本申请提出一种基于人工智能的网络爬虫方法、装置、电子设备及存储介质，基于人工智能的网络爬虫方法包括：基于智能搜索引擎配置爬虫参数，所述爬虫参数包括需要被抓取的目标网址和网页中的目标字段；基于所述爬虫参数和预设的爬虫模板生成第一爬虫程序；依据机器学习算法优化所述第一爬虫程序以生成第二爬虫程序；依据预设的爬虫指标确定所述第二爬虫程序的爬取深度以获取第三爬虫程序；基于所述第三爬虫程序进行数据爬取以获取爬虫日志。本申请可以在保证爬虫数据准确性的情况下确定爬虫程序的爬取深度，从而提高数据的爬取效率。