文章浏览阅读1.7k次。很多同学都不知道怎么测试爬虫，我是小白，刚接触爬虫测试。通过对爬虫的分析，总结了爬虫的测试方法，其他建议欢迎补充。——测试阶段请点击输入图片描述（最多18字）你可能很熟悉调用第三方平台(比如魔蝎)进行数据采集的流程。第三方页面授权后，第三方会帮助我们完成数据采集的任务。我们只需要等待结果被召回。但是如果你想自己做爬虫，流程是什么？其实爬虫和其他业务一样，也有一个过程。一般先触发创建任务，爬虫模块采集数据，采集完成后再对数据进行分析并入库。对于授权爬虫，有SDK页面的也可以通过页面直接请求_爬虫测试