English | 简体中文

------------------------------------------------------------------------------------------

简介

CrawlManga 包含多个漫画爬虫，以及将下载的漫画上传到远端服务器

近期更新

• 添加针对maofly漫画网站的爬虫maoflyManga (https://www.maofly.com/)
• 添加针对xingqiu漫画网站的爬虫xingqiuManga (http://m.mhxqiu1.com/)
• 添加将本地文件上传到服务器的代码(https://github.com/ficherfisher/CrawlManga/blob/master/uploadServer/uploadServer.md)
• More

特性

• 全自动更新漫画网站
• 支持断点续爬网站
  • 包括断点重传文件
• 可运行于Linux、Windows等多种系统

效果展示

上图是通用模型效果展示，更多效果图请见效果展示页面。

快速体验

• fisher漫画网站

漫画列表（更新中）

漫画	更新时间	最新话	是否更新	下次更新时间	网址
传武漫画	2022-08-15	306	×	2022-09-01	最新话306
从前有座灵剑山漫画	2022-08-21 17:43:08	806	×	2022-09-18	最新话806
斗罗大陆漫画	2022-08-22 17:31:54	505	×	2022-09-19	最新话505
斗破苍穹漫画	2022-08-21 17:42:56	532	×	2022-09-01	最新话532
一人之下漫画	2022-08-12	618	×	2022-09-01	最新话618
ONE PIECE航海王	2022-08-06	1057	×	2022-09-01	最新话1057
国王排名	2022-08-09	104	×	2022-09-01	最新话104
间谍过家家	2022-08-09	77	×	2022-09-01	最新话77
一拳超人	2022-08-21	234	×	2022-09-18	最新话234
咒术回战	2022-08-21	195	×	2022-09-01	最新话195
重生之都市修仙漫画	2022-08-21	815	×	2022-09-01	最新话815
三月的狮子	2021-11-15	185	×	2022-09-01	最新话185
镇魂街	2022-07-15	375	×	2022-09-01	最新话375

更多漫画可以联系作者([email protected])

文档教程

• 运行环境准备
• 快速开始
• 漫画网址爬虫
  • xingqiuManga爬虫)
    • scrapy
  • maoflyManga爬虫)
    • scrapy
• 上传文件服务器
  • uploadServer
    • 上传文件
    • 断点重传
• 联系作者

漫画爬虫Pipeline

[1] 漫画爬虫(xingqiuManga, maoflyManga)是一个实用的简单scrapy框架爬虫，主要由start_url,middleware,解析器,download下载器四部分组成，用户只需要提供该网站(两个网站对应所需要爬取的漫画某一章节url)即可下载，同时支持断点下载。

[2] uploadServer器，一个简单的上传文件框架，支持断点续传。