全部标签
目录标签

#robots-txt

公开记录中带有此标签的全部仓库——标签来自其 GitHub 主题或软件包注册表发布的关键词。健康度量遵循与记录其余部分相同的版本化方法论。

7 条记录
标签为“robots-txt”按健康指数排序
npm
91优秀健康指数
nuxt-modules/robots
Tame the robots crawling and indexing your Nuxt site.
TypeScript★ 520↓ 763.2K/月2026年7月25日
MIT2026年7月25日 · 指标 2.10.0
PyPI
78良好健康指数
scrapy/protego
A pure-Python robots.txt parser with support for modern conventions.
DIGITAL Command Language★ 91↓ 22.3M/月2026年8月8日
BSD-3-Clause2026年8月8日 · 指标 2.10.0
Packagist
77良好健康指数
spatie/robots-txt
Determine if a page may be crawled from robots.txt, robots meta tags and robot headers
PHP★ 258↓ 785.7K/月2026年8月4日
MIT2026年8月4日 · 指标 2.10.0
npm
75良好健康指数
CyberCraftBD/power-seo
Power-SEO: AI-powered, enterprise-grade SEO toolkit for React - A modern & best alternative to Yoast, RankMath & AIOSEO for SPA and SSR applications.
TypeScript★ 11↓ 10.7K/月2026年8月20日
MIT2026年8月20日 · 指标 2.10.0
PyPI
73良好健康指数
pip-install-python/dash-improve-my-llms
Automate page creation for an llms.txt, page.json and architecture.txt. Allow llms the ability to read and understand your dash applications pages.
Python★ 8↓ 2,907/月2026年8月20日
MIT2026年8月20日 · 指标 2.10.0
Go
38薄弱健康指数
11lunaric11/securitychecker
Recon tool for pentesters & bug bounty hunters: check robots.txt, security.txt (RFC 9116) and /.well-known/ across many targets. CLI + web UI, single static Go binary.
Go · HTML★ 22026年7月18日
MIT2026年7月18日 · 指标 2.10.0
Packagist
30存在风险健康指数
mguinea/laravel-robots
Laravel package to manage robots
PHP★ 15↓ 1,302/月2026年8月13日
MIT2026年8月13日 · 指标 2.10.0