86
Distributed web crawler admin platform for spiders management regardless of languages and frameworks.
Go
接近3年前
324379 zhangyingwei 1578919975
84
又一个 java 爬虫
Java
5年前
7550760 boris code 1642990644
82
feapder是一款支持分布式、批次采集、任务防丢、报警丰富的python爬虫框架
Python
13天前
79
一个基于dotnetspider的爬取大姐姐的爬虫
C#
7年多前
4870333 golddata 1578976096
78
1、规则简洁灵活易读易写 2、可反复采集数据而不产生重复 3、可同时将数据及数据关系采集融合 4、支持ajax 5、文档和培训视频齐全 。其核心代码从GoldData平台分离而来
Groovy
5年多前
7359180 algebra fun 1595919905
76
扫描“微信读书”已购图书并下载本地PDF的爬虫
Python
12个月前
428059 sdc2012 1578923507
74
Spring Boot项目框架,结合多种开源技术,知乎信息中转持久化的数据流平台,并提供HTML+JSON和RabbitMQ等消息接口,从而使有兴趣的伙伴开发并使用其熟悉的语言环境,实现信息爬取,从而持久化到此项目中来,完成最开始的开发目标。
Java
7年前
1676521 kanasimi 1578957498
72
小说漫画下载工具:腾讯漫画 大角虫漫画 有妖气 知音漫客 咪咕 SF漫画 哦漫画 看漫画 漫画柜 漫画160 汗汗酷漫 動漫伊甸園 网易漫画 快看漫画 微博动漫 733动漫网 大古漫画网 漫画DB 動漫狂 卡推漫画 动漫之家 动漫屋 土豪漫画 古风漫画网 36漫画网 亲亲漫画网 360漫画 乙女漫画 comico webtoons 咚漫 OVERLAP MAGCOMI ComicWalker ヤングエースUP モアイ pixivコミック サイコミ;アルファポリス カクヨム ハーメルン 小説家になろう ...
JavaScript
3天前
350412 henrylee2cn 1642264915
70
surfer [high level concurrency downloader] 是一款Go语言编写的高并发爬虫下载器,拥有surf与phantom两种下载内核,支持固定UserAgent自动保存cookie与随机大量UserAgent禁用cookie两种模式,高度模拟浏览器行为,可实现模拟登录等功能。
Go
接近5年前
10962 mz 1578914739
67
简单、易用、灵活的网络类,spider/network for PHP , too simple .
PHP
4年前
1155976 slkb 1578989907
67
一个轻量级网络多线程爬虫框架
Java
5年多前
1646371 tyoui 1578956781
63
最新代码链接:码云上不在更新
Java
5年多前
62
分布式敏捷的爬虫框架
Java
6年多前
61
绅士站爬虫 镜像自 https://github.com/fffonion/xeHentai
Python
接近3年前
673473 1967988842 1609901731
61
使用JCEF(chromium内核)开发的抓取数据浏览器,可以用来制作浏览器,也可以用来制作爬虫。
Java
4年多前

搜索帮助

23e8dbc6 1850385 7e0993f3 1850385