Усі теги
Тег каталогу

#robots-txt

Усі репозиторії публічного реєстру з цим тегом — із тем GitHub або ключових слів, які публікують їхні реєстри пакетів. Здоров'я вимірюється за тією ж версіонованою методологією, що й решта реєстру.

7 записів
З тегом «robots-txt»Упорядковано за індексом здоров'я
npm
91Відміннийіндекс здоров'я
nuxt-modules/robots
Tame the robots crawling and indexing your Nuxt site.
TypeScript★ 520↓ 763.2K/міс25 лип. 2026 р.
MIT25 лип. 2026 р. · метрики 2.10.0
PyPI
78Добрийіндекс здоров'я
scrapy/protego
A pure-Python robots.txt parser with support for modern conventions.
DIGITAL Command Language★ 91↓ 22.3M/міс8 серп. 2026 р.
BSD-3-Clause8 серп. 2026 р. · метрики 2.10.0
Packagist
77Добрийіндекс здоров'я
spatie/robots-txt
Determine if a page may be crawled from robots.txt, robots meta tags and robot headers
PHP★ 258↓ 785.7K/міс4 серп. 2026 р.
MIT4 серп. 2026 р. · метрики 2.10.0
npm
75Добрийіндекс здоров'я
CyberCraftBD/power-seo
Power-SEO: AI-powered, enterprise-grade SEO toolkit for React - A modern & best alternative to Yoast, RankMath & AIOSEO for SPA and SSR applications.
TypeScript★ 11↓ 10.7K/міс20 серп. 2026 р.
MIT20 серп. 2026 р. · метрики 2.10.0
PyPI
73Добрийіндекс здоров'я
pip-install-python/dash-improve-my-llms
Automate page creation for an llms.txt, page.json and architecture.txt. Allow llms the ability to read and understand your dash applications pages.
Python★ 8↓ 2 907/міс20 серп. 2026 р.
MIT20 серп. 2026 р. · метрики 2.10.0
Go
38Слабкийіндекс здоров'я
11lunaric11/securitychecker
Recon tool for pentesters & bug bounty hunters: check robots.txt, security.txt (RFC 9116) and /.well-known/ across many targets. CLI + web UI, single static Go binary.
Go · HTML★ 218 лип. 2026 р.
MIT18 лип. 2026 р. · метрики 2.10.0
Packagist
30У зоні ризикуіндекс здоров'я
mguinea/laravel-robots
Laravel package to manage robots
PHP★ 15↓ 1 302/міс13 серп. 2026 р.
MIT13 серп. 2026 р. · метрики 2.10.0