Todas las etiquetas
Etiqueta del catálogo

#crawler

Todos los repositorios del registro público que llevan esta etiqueta, procedente de sus topics de GitHub o de las palabras clave que publican sus registros de paquetes. La salud se mide con la misma metodología versionada que el resto del registro.

42 registros
Con la etiqueta «crawler»Ordenado por índice de salud
npm
54Moderadoíndice de salud
codepurse/SEOCORE
Enterprise-grade, multi-threaded SEO Crawler, Rule Engine, and Link Graph Analyzer. Built in TypeScript for speed, compliance, and deep site health audits.
TypeScript★ 10917 jul 2026
MIT17 jul 2026 · métricas 1.13.0
crates.io
51Moderadoíndice de salud
spider-rs/spider_firewall
Firewall for Rust
Rust★ 1↓ 2668/mes16 jul 2026
MIT16 jul 2026 · métricas 1.13.0
npm
51Moderadoíndice de salud
webscraping-ai/webscraping-ai-mcp-server
A Model Context Protocol (MCP) server implementation that integrates with WebScraping.AI for web data extraction capabilities.
JavaScript★ 44↓ 560/mes22 jul 2026
Sin licencia22 jul 2026 · métricas 1.13.0
npm
49En riesgoíndice de salud
NeuraLegion/bright-cli
Command Line Interface (CLI) tool for BrightSec's solutions.
TypeScript★ 22↓ 3745/mes20 jul 2026
MIT20 jul 2026 · métricas 1.13.0
Go
49En riesgoíndice de salud
mjc-gh/virgo
Convert a webpage into plaintext or markdown using the Chrome DevTool Protocol
Go · JavaScript★ 117 jul 2026
BSD-3-Clause17 jul 2026 · métricas 1.13.0
Maven
48En riesgoíndice de salud
code4craft/webmagic
A scalable web crawler framework for Java.
Java · HTML★ 11.7K20 jul 2026
Apache-2.020 jul 2026 · métricas 1.13.0
Packagist
46En riesgoíndice de salud
crawlbase/crawlbase-php
A lightweight, dependency free PHP class that acts as wrapper for Crawlbase API
PHP★ 16↓ 2779/mes15 jul 2026
Apache-2.015 jul 2026 · métricas 1.13.0
crates.io
44En riesgoíndice de salud
zekroTJA/r34-crawler
A simple CLI tool to fetch and download images from rule34.xxx
Rust★ 422 jul 2026
MIT22 jul 2026 · métricas 1.13.0
npm
35En riesgoíndice de salud
crawlbase/crawlbase-node
Fast dependency free library for Crawlbase API
JavaScript★ 919 jul 2026
Apache-2.019 jul 2026 · métricas 1.13.0
Packagist
34En riesgoíndice de salud
JayBizzle/Crawler-Detect
🕷 CrawlerDetect is a PHP class for detecting bots/crawlers/spiders via the user agent
PHP★ 2374↓ 2.3M/mes20 jul 2026
MIT20 jul 2026 · métricas 1.13.0
PyPI
34En riesgoíndice de salud
rushter/selectolax
Python binding to Modest and Lexbor engines. Fast HTML5 parser with CSS selectors for Python.
Cython · Python★ 165620 jul 2026
MIT20 jul 2026 · métricas 1.13.0
Maven
25Críticoíndice de salud
ssssssss-team/spider-flow
新一代爬虫平台，以图形化方式定义爬虫流程，不写代码即可完成爬虫。
Java★ 11.3K21 jul 2026
MIT21 jul 2026 · métricas 1.13.0