面向lsp编程,我写了一个轻量级爬虫框架nspider
对爬虫比较有兴趣(狗头)爬了大大小小各种不可描述的网站后,我发现套路基本差不多,因此为了锻炼技术,同时学习多进程编程就趁着有空写了一个轻量级多进程爬虫框架。详情看 github 吧,文档还不全,主要是没啥动力写。如果大家能支持一下我就尽快完成文档,没人的话我就自己用了。。。
框架名 NymphSpider 简称 nspider。主要面向类似图片站、论坛、贴吧这种,专门爬取资源用的。设计理论上是随用随停的,不会丢失进度。
目前文档只写了最简单的调用方法。
Github: https://github.com/Nymphxyz/nspider
有没人来支持下,单机真没动力,也希望有大佬能指导指导我的代码。
声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。