crawl — здоров'я програмного забезпечення з відкритим кодом

npm · PyPI · crates.io

87Відміннийіндекс здоров'я

Fast, lightweight Firecrawl/Tavily alternative in Rust. Web scraper, crawler & search API with MCP server for AI agents. Drop-in Firecrawl-compatible API (/scrape, /crawl, /search). 2.3x faster than Tavily, 1.5x faster than Firecrawl in 1K-URL benchmarks. 6 MB RAM, single binary. Self-host or use managed cloud.

Rust★ 518↓ 9 070/міс3 серп. 2026 р.

AGPL-3.03 серп. 2026 р. · метрики 2.10.0

PyPI

78Добрийіндекс здоров'я

tavily-ai/tavily-python

The Tavily Python SDK allows for easy interaction with the Tavily API, offering the full range of our search, extract, crawl, map, and research functionalities directly from your Python programs. Easily integrate smart search, content extraction, and research capabilities into your applications, harnessing Tavily's powerful features.

Python★ 1 375↓ 8.5M/міс27 серп. 2026 р.

MIT27 серп. 2026 р. · метрики 2.10.0

PyPI

75Добрийіндекс здоров'я

ScrapingBee/scrapingbee-cli

Опис репозиторію не опубліковано.

Python★ 1072 серп. 2026 р.

MIT2 серп. 2026 р. · метрики 2.10.0

NuGet

75Добрийіндекс здоров'я

soenneker/soenneker.playwrights.crawler

A configurable Playwright crawler with rich stealth and control options.

C#★ 031 серп. 2026 р.

MIT31 серп. 2026 р. · метрики 2.10.0

npm

67Добрийіндекс здоров'я

superagents-lab/search1api-mcp

Official Search1API MCP server for web search, news, crawling, sitemaps, and trends—hosted with OAuth 2.1 or local via npm.

TypeScript · JavaScript★ 173↓ 2 722/міс24 серп. 2026 р.

MIT24 серп. 2026 р. · метрики 2.10.0

npm

63Помірнийіндекс здоров'я

mysleekdesigns/crawlforge-mcp

28 MCP tools that give Claude, Cursor and any MCP client the live web — scrape, crawl, search, real Google rank, change tracking, document parsing, plus an autonomous agent that researches from a plain-English prompt with no URLs. Clean Markdown and schema-validated JSON, not raw HTML. Local-Ollama extraction by default. MIT, 1,000 free credits.

JavaScript★ 2↓ 5 179/міс5 вер. 2026 р.

MIT5 вер. 2026 р. · метрики 2.10.0

npm

63Помірнийіндекс здоров'я

tavily-ai/tavily-n8n-node

A node for n8n that integrates the Tavily API, enabling powerful web search and content extraction within your no-code automation workflows.

TypeScript★ 20↓ 82.8K/міс4 вер. 2026 р.

MIT4 вер. 2026 р. · метрики 2.10.0

npm

60Помірнийіндекс здоров'я

tavily-ai/ai-sdk

AI SDK tools for Tavily, built for Vercel's AI SDK v5.

TypeScript★ 5↓ 69.5K/міс4 вер. 2026 р.

MIT4 вер. 2026 р. · метрики 2.10.0

npm

59Помірнийіндекс здоров'я

brandonkramer/pi-scraper

Pi extension for fast page scraping, recursive crawling, URL/site mapping, brand extraction, content diffing, PDF text extraction, and deterministic vertical extraction.

TypeScript · HTML★ 7↓ 607/міс28 серп. 2026 р.

MIT28 серп. 2026 р. · метрики 2.10.0

51Помірнийіндекс здоров'я

0xMassi/webclaw-go

Official Go SDK for the Webclaw web extraction API

Go★ 124 лип. 2026 р.

MIT24 лип. 2026 р. · метрики 2.10.0

npm

31У зоні ризикуіндекс здоров'я

ddoojoang/ttj-skills-playwright

Опис репозиторію не опубліковано.

TypeScript · JavaScript★ 1↓ 3 696/міс29 лип. 2026 р.

Без ліцензії29 лип. 2026 р. · метрики 2.10.0

#crawl