Todas las etiquetas
Etiqueta del catálogo

#robots-txt

Todos los repositorios del registro público que llevan esta etiqueta, procedente de sus topics de GitHub o de las palabras clave que publican sus registros de paquetes. La salud se mide con la misma metodología versionada que el resto del registro.

10 registros
Con la etiqueta «robots-txt»Ordenado por índice de salud
npm
91Excelenteíndice de salud
nuxt-modules/robots
Tame the robots crawling and indexing your Nuxt site.
TypeScript★ 526↓ 847.9K/mes13 sept 2026
MIT13 sept 2026 · métricas 2.10.0
PyPI
86Excelenteíndice de salud
scrapy/protego
A pure-Python robots.txt parser with support for modern conventions.
DIGITAL Command Language★ 95↓ 6.3M/mes17 sept 2026
BSD-3-Clause17 sept 2026 · métricas 2.10.0
npm
71Buenoíndice de salud
CyberCraftBD/power-seo
Power-SEO: AI-powered, enterprise-grade SEO toolkit for React - A modern & best alternative to Yoast, RankMath & AIOSEO for SPA and SSR applications.
TypeScript★ 16↓ 5250/mes19 oct 2026
MIT19 oct 2026 · métricas 2.10.0
PyPI
69Buenoíndice de salud
pip-install-python/dash-improve-my-llms
Automate page creation for an llms.txt, page.json and architecture.txt. Allow llms the ability to read and understand your dash applications pages.
Python★ 8↓ 1085/mes19 oct 2026
MIT19 oct 2026 · métricas 2.10.0
Packagist
69Buenoíndice de salud
spatie/robots-txt
Determine if a page may be crawled from robots.txt, robots meta tags and robot headers
PHP★ 258↓ 945.6K/mes16 sept 2026
MIT16 sept 2026 · métricas 2.10.0
npm
60Moderadoíndice de salud
aryasaatvik/pagegraph
Route-declared SEO graph and audit toolkit for TanStack Start: sitemap/robots, React head, JSON-LD, Vite coverage gate, live audit, and Jev-backed link decisions.
TypeScript★ 1↓ 3892/mes5 oct 2026
MIT5 oct 2026 · métricas 2.10.0
NuGet
53Moderadoíndice de salud
k3ldar/.NetCorePluginManager
.Net Core Plugin Manager, extend web applications using plugin technology enabling true SOLID and DRY principles when developing applications
C#★ 3115 sept 2026
GPL-3.015 sept 2026 · métricas 2.10.0
Go
35Débilíndice de salud
11lunaric11/securitychecker
Recon tool for pentesters & bug bounty hunters: check robots.txt, security.txt (RFC 9116) and /.well-known/ across many targets. CLI + web UI, single static Go binary.
Go · HTML★ 210 sept 2026
MIT10 sept 2026 · métricas 2.10.0
npm
30En riesgoíndice de salud
trybyte-app/robotstxt-ts-port
Google's robots.txt parser ported to TypeScript - RFC 9309 compliant
TypeScript★ 2↓ 14.9K/mes11 oct 2026
Apache-2.011 oct 2026 · métricas 2.10.0
Packagist
12Críticoíndice de salud
mguinea/laravel-robots
Laravel package to manage robots
PHP★ 15↓ 2094/mes18 sept 2026
MIT18 sept 2026 · métricas 2.10.0