特牛生活网

kreepy:转换为Markdown的简单Node.js网络爬虫资源-CSDN文库

网友收藏
资源浏览查阅159次。kreepy:转换为Markdown的简单Node.js网络爬虫,令人毛骨悚然一个简单的Node.js网络爬虫,可将下载的文件转换为Markdown。为什么是另一个爬虫?我只是想要一些简单的方法将我的PmWiki转换为一组Markdown文件。我希望能够将我在wiki中建立的特殊语义转移到基于文件的系统。Kreepy允许您做类似的事情,并且使用简洁的代码库很容易理解和扩展。请注意,这是一个非常小的实现,并且没有处理很多边缘情况。入门使用Kreepy,您将抓取逻辑放入app.js,覆盖engine.jsEngine类提供的功能。提供的app.js以爬取我的PmWikiapp.js演示了如何执行此操作。令人毛骨悚然的逻辑这里有一个关于Kreepy如何运行的小说明。1.加载网址通过engine.start()启动Kreepy,它将第一个URL添加到它继续处理的队列中。如果config.c更多下载资源、学习资料请访问CSDN文库频道