Усі теги
Тег каталогу

#crawler

Усі репозиторії публічного реєстру з цим тегом — із тем GitHub або ключових слів, які публікують їхні реєстри пакетів. Здоров'я вимірюється за тією ж версіонованою методологією, що й решта реєстру.

42 записи
З тегом «crawler»Упорядковано за індексом здоров'я
npm
54Помірнийіндекс здоров'я
codepurse/SEOCORE
Enterprise-grade, multi-threaded SEO Crawler, Rule Engine, and Link Graph Analyzer. Built in TypeScript for speed, compliance, and deep site health audits.
TypeScript★ 10917 лип. 2026 р.
MIT17 лип. 2026 р. · метрики 1.13.0
crates.io
51Помірнийіндекс здоров'я
spider-rs/spider_firewall
Firewall for Rust
Rust★ 1↓ 2 668/міс16 лип. 2026 р.
MIT16 лип. 2026 р. · метрики 1.13.0
npm
51Помірнийіндекс здоров'я
webscraping-ai/webscraping-ai-mcp-server
A Model Context Protocol (MCP) server implementation that integrates with WebScraping.AI for web data extraction capabilities.
JavaScript★ 44↓ 560/міс22 лип. 2026 р.
Без ліцензії22 лип. 2026 р. · метрики 1.13.0
npm
49У зоні ризикуіндекс здоров'я
NeuraLegion/bright-cli
Command Line Interface (CLI) tool for BrightSec's solutions.
TypeScript★ 22↓ 3 745/міс20 лип. 2026 р.
MIT20 лип. 2026 р. · метрики 1.13.0
Go
49У зоні ризикуіндекс здоров'я
mjc-gh/virgo
Convert a webpage into plaintext or markdown using the Chrome DevTool Protocol
Go · JavaScript★ 117 лип. 2026 р.
BSD-3-Clause17 лип. 2026 р. · метрики 1.13.0
Maven
48У зоні ризикуіндекс здоров'я
code4craft/webmagic
A scalable web crawler framework for Java.
Java · HTML★ 11.7K20 лип. 2026 р.
Apache-2.020 лип. 2026 р. · метрики 1.13.0
Packagist
46У зоні ризикуіндекс здоров'я
crawlbase/crawlbase-php
A lightweight, dependency free PHP class that acts as wrapper for Crawlbase API
PHP★ 16↓ 2 779/міс15 лип. 2026 р.
Apache-2.015 лип. 2026 р. · метрики 1.13.0
crates.io
44У зоні ризикуіндекс здоров'я
zekroTJA/r34-crawler
A simple CLI tool to fetch and download images from rule34.xxx
Rust★ 422 лип. 2026 р.
MIT22 лип. 2026 р. · метрики 1.13.0
npm
35У зоні ризикуіндекс здоров'я
crawlbase/crawlbase-node
Fast dependency free library for Crawlbase API
JavaScript★ 919 лип. 2026 р.
Apache-2.019 лип. 2026 р. · метрики 1.13.0
Packagist
34У зоні ризикуіндекс здоров'я
JayBizzle/Crawler-Detect
🕷 CrawlerDetect is a PHP class for detecting bots/crawlers/spiders via the user agent
PHP★ 2 374↓ 2.3M/міс20 лип. 2026 р.
MIT20 лип. 2026 р. · метрики 1.13.0
PyPI
34У зоні ризикуіндекс здоров'я
rushter/selectolax
Python binding to Modest and Lexbor engines. Fast HTML5 parser with CSS selectors for Python.
Cython · Python★ 1 65620 лип. 2026 р.
MIT20 лип. 2026 р. · метрики 1.13.0
Maven
25Критичнийіндекс здоров'я
ssssssss-team/spider-flow
新一代爬虫平台，以图形化方式定义爬虫流程，不写代码即可完成爬虫。
Java★ 11.3K21 лип. 2026 р.
MIT21 лип. 2026 р. · метрики 1.13.0