全部标签
目录标签

#crawl

公开记录中带有此标签的全部仓库——标签来自其 GitHub 主题或软件包注册表发布的关键词。健康度量遵循与记录其余部分相同的版本化方法论。

11 条记录
标签为“crawl”按健康指数排序
npm · PyPI · crates.io
87优秀健康指数
us/crw
Fast, lightweight Firecrawl/Tavily alternative in Rust. Web scraper, crawler & search API with MCP server for AI agents. Drop-in Firecrawl-compatible API (/scrape, /crawl, /search). 2.3x faster than Tavily, 1.5x faster than Firecrawl in 1K-URL benchmarks. 6 MB RAM, single binary. Self-host or use managed cloud.
Rust★ 518↓ 9,070/月2026年8月3日
AGPL-3.02026年8月3日 · 指标 2.10.0
PyPI
78良好健康指数
tavily-ai/tavily-python
The Tavily Python SDK allows for easy interaction with the Tavily API, offering the full range of our search, extract, crawl, map, and research functionalities directly from your Python programs. Easily integrate smart search, content extraction, and research capabilities into your applications, harnessing Tavily's powerful features.
Python★ 1,375↓ 8.5M/月2026年8月27日
MIT2026年8月27日 · 指标 2.10.0
PyPI
75良好健康指数
ScrapingBee/scrapingbee-cli
该仓库未发布描述。
Python★ 1072026年8月2日
MIT2026年8月2日 · 指标 2.10.0
NuGet
75良好健康指数
soenneker/soenneker.playwrights.crawler
A configurable Playwright crawler with rich stealth and control options.
C#★ 02026年8月31日
MIT2026年8月31日 · 指标 2.10.0
npm
67良好健康指数
superagents-lab/search1api-mcp
Official Search1API MCP server for web search, news, crawling, sitemaps, and trends—hosted with OAuth 2.1 or local via npm.
TypeScript · JavaScript★ 173↓ 2,722/月2026年8月24日
MIT2026年8月24日 · 指标 2.10.0
npm
63中等健康指数
mysleekdesigns/crawlforge-mcp
28 MCP tools that give Claude, Cursor and any MCP client the live web — scrape, crawl, search, real Google rank, change tracking, document parsing, plus an autonomous agent that researches from a plain-English prompt with no URLs. Clean Markdown and schema-validated JSON, not raw HTML. Local-Ollama extraction by default. MIT, 1,000 free credits.
JavaScript★ 2↓ 5,179/月2026年9月5日
MIT2026年9月5日 · 指标 2.10.0
npm
63中等健康指数
tavily-ai/tavily-n8n-node
A node for n8n that integrates the Tavily API, enabling powerful web search and content extraction within your no-code automation workflows.
TypeScript★ 20↓ 82.8K/月2026年9月4日
MIT2026年9月4日 · 指标 2.10.0
npm
60中等健康指数
tavily-ai/ai-sdk
AI SDK tools for Tavily, built for Vercel's AI SDK v5.
TypeScript★ 5↓ 69.5K/月2026年9月4日
MIT2026年9月4日 · 指标 2.10.0
npm
59中等健康指数
brandonkramer/pi-scraper
Pi extension for fast page scraping, recursive crawling, URL/site mapping, brand extraction, content diffing, PDF text extraction, and deterministic vertical extraction.
TypeScript · HTML★ 7↓ 607/月2026年8月28日
MIT2026年8月28日 · 指标 2.10.0
Go
51中等健康指数
0xMassi/webclaw-go
Official Go SDK for the Webclaw web extraction API
Go★ 12026年7月24日
MIT2026年7月24日 · 指标 2.10.0
npm
31存在风险健康指数
ddoojoang/ttj-skills-playwright
该仓库未发布描述。
TypeScript · JavaScript★ 1↓ 3,696/月2026年7月29日
无许可证2026年7月29日 · 指标 2.10.0