全部标签
目录标签

#spider

公开记录中带有此标签的全部仓库——标签来自其 GitHub 主题或软件包注册表发布的关键词。健康度量遵循与记录其余部分相同的版本化方法论。

17 条记录
标签为“spider”按健康指数排序
PyPI
94卓越健康指数
akfamily/akshare
AKShare is an elegant and simple financial data interface library for Python, built for human beings! 开源财经数据接口库
Python · JavaScript★ 21.8K2026年8月5日
MIT2026年8月5日 · 指标 2.10.0
PyPI
87优秀健康指数
DedSecInside/TorBot
Dark Web OSINT Tool
Python★ 4,7262026年8月28日
自定义许可证2026年8月28日 · 指标 2.10.0
crates.io
87优秀健康指数
spider-rs/spider
Get web data for AI agents and LLMs
Rust★ 2,669↓ 42K/月2026年8月22日
MIT2026年8月22日 · 指标 2.10.0
Packagist
80优秀健康指数
JayBizzle/Crawler-Detect
🕷 CrawlerDetect is a PHP class for detecting bots/crawlers/spiders via the user agent
PHP★ 2,401↓ 2.6M/月2026年8月27日
MIT2026年8月27日 · 指标 2.10.0
Maven
78良好健康指数
Norconex/crawler
Norconex Crawlers (or spiders) are flexible web and filesystem crawlers for collecting, parsing, and manipulating data from the web or filesystem to various data repositories such as search engines.
Java★ 2042026年9月5日
Apache-2.02026年9月5日 · 指标 2.10.0
Go
67良好健康指数
gosom/scrapemate
Golang Crawling and scraping framework
Go★ 2072026年8月2日
MIT2026年8月2日 · 指标 2.10.0
RubyGems
63中等健康指数
loadkpi/crawler_detect
Ruby gem to detect bots and crawlers via the user agent
Ruby★ 1482026年9月6日
MIT2026年9月6日 · 指标 2.10.0
npm · crates.io · Go +1
63中等健康指数
spider-rs/spider-clients
Python, Javascript, and Rust libraries for the Spider Cloud API.
Rust · Python · Go★ 26↓ 16.3K/月2026年7月16日
MIT2026年7月16日 · 指标 2.10.0
NuGet
62中等健康指数
zzzprojects/html-agility-pack
Html Agility Pack (HAP) is a free and open-source HTML parser written in C# to read/write DOM and supports plain XPATH or XSLT. It is a .NET code library that allows you to parse "out of the web" HTML files.
C# · HTML★ 2,8462026年8月22日
MIT2026年8月22日 · 指标 2.10.0
PyPI
60中等健康指数
moskrc/crawlerdetect
🕷CrawlerDetect is a Python library designed to identify bots, crawlers, and spiders by analyzing their user agents.
Python★ 442026年7月29日
MIT2026年7月29日 · 指标 2.10.0
Packagist
57中等健康指数
JayBizzle/Laravel-Crawler-Detect
A Laravel wrapper for CrawlerDetect - the web crawler detection library
PHP★ 324↓ 61.2K/月2026年7月28日
MIT2026年7月28日 · 指标 2.10.0
Go
56中等健康指数
x-way/crawlerdetect
Golang module to detect bots and crawlers via the user agent
Go★ 702026年7月17日
MIT2026年7月17日 · 指标 2.10.0
48薄弱健康指数
Senparc/Senparc.CO2NET
Base Common Library, support for.NET Framework &.NET Core
C#★ 3652026年7月18日
Apache-2.02026年7月18日 · 指标 2.10.0
Packagist
41薄弱健康指数
zorlan/skycaiji
蓝天采集器是一款开源免费的爬虫系统,仅需点选编辑规则即可采集数据,可运行在本地、虚拟主机或云服务器中,几乎能采集所有类型的网页,无缝对接各类CMS建站程序,免登录实时发布数据,全自动无需人工干预!是网页大数据采集软件中完全跨平台的云端爬虫系统
PHP★ 2,0782026年7月27日
自定义许可证2026年7月27日 · 指标 2.10.0
NuGet
35薄弱健康指数
SoftCircuits/HtmlMonkey
Lightweight HTML/XML parser written in C#.
C#★ 622026年7月31日
自定义许可证2026年7月31日 · 指标 2.10.0
Maven
23存在风险健康指数
ssssssss-team/spider-flow
新一代爬虫平台,以图形化方式定义爬虫流程,不写代码即可完成爬虫。
Java★ 11.4K2026年8月27日
MIT2026年8月27日 · 指标 2.10.0
PyPI
22存在风险健康指数
0-EternalJunior-0/GraphCrawler
Python бібліотека для сканування веб-сайтів та побудови графу їх структури.
Python · HTML★ 1↓ 4,246/月2026年8月1日
MIT2026年8月1日 · 指标 2.10.0