全部标签
目录标签

#web-scraping

公开记录中带有此标签的全部仓库——标签来自其 GitHub 主题或软件包注册表发布的关键词。健康度量遵循与记录其余部分相同的版本化方法论。

158 条记录
标签为“web-scraping”按健康指数排序
PyPI
69良好健康指数
vlymar1/vinted-api-kit
Lightweight asynchronous Python client library for accessing Vinted API and scraping item data
Python★ 23↓ 3,725/月2026年10月21日
自定义许可证2026年10月21日 · 指标 2.10.0
PyPI
67良好健康指数
Kaliiiiiiiiii-Vinyzu/patchright-python
Undetected Python version of the Playwright testing and automation library.
Python · Shell★ 1,516↓ 3.9M/月2026年9月12日
Apache-2.02026年9月12日 · 指标 2.10.0
PyPI · crates.io
67良好健康指数
awolverp/markupever
The fast, most optimal, and correct HTML & XML parsing library for Python written in Rust.
Rust · Python★ 37↓ 2,604/月2026年10月3日
MIT2026年10月3日 · 指标 2.10.0
Go
67良好健康指数
tamnd/x-cli
Read X (Twitter) tweets, profiles, timelines, threads, and search results into JSONL, no API key needed
Go★ 152026年9月19日
AGPL-3.02026年9月19日 · 指标 2.10.0
Go
65良好健康指数
ChristopherDavenport/unblink
Pure-Go browser for AI: fetch pages, optionally render JS (no Chromium), get clean token-budgeted Markdown over MCP
Go★ 72026年9月12日
MIT2026年9月12日 · 指标 2.10.0
npm
65良好健康指数
F4RAN/cuimp-ts
A Node.js wrapper for curl-impersonate that allows you to make HTTP requests that mimic real browser behavior, bypassing many anti-bot protections.
TypeScript★ 87↓ 12K/月2026年9月15日
无许可证2026年9月15日 · 指标 2.10.0
PyPI · Go
65良好健康指数
appautomaton/markmaton
Lightweight HTML-to-Markdown parser for AI agent workflows — Python CLI and API around a fast Go engine, available on PyPI.
Go · Python★ 5↓ 112/月2026年9月15日
MIT2026年9月15日 · 指标 2.10.0
npm
65良好健康指数
ashaychangwani/imprint
Record a browser workflow once, get a deterministic MCP tool your AI agent can call. Zero tokens at runtime. Postman for AI agents.
TypeScript★ 21↓ 233/月2026年9月13日
MIT2026年9月13日 · 指标 2.10.0
PyPI
65良好健康指数
clearcotelabs/clearcote-browser
Open-source stealth Chromium with engine-level fingerprint spoofing - de-Googled, drop-in Playwright, fully buildable and verifiable from source.
Python · TypeScript · C#★ 139↓ 28/月2026年9月10日
BSD-3-Clause2026年9月10日 · 指标 2.10.0
Go
65良好健康指数
danieljustus/symaira-fetch
AI-native web fetch engine for LLM agents — browser impersonation, semantic DOM pipeline, MCP server. CGO-free Go.
Go★ 1↓ 0/月2026年7月14日
自定义许可证2026年7月14日 · 指标 2.10.0
PyPI
65良好健康指数
feder-cr/invisible_core
Seed to browser fingerprint to Firefox prefs. The config core behind an undetected, anti-detect Firefox. Pure Python, zero Playwright.
Python★ 12↓ 25.3K/月2026年9月15日
MIT2026年9月15日 · 指标 2.10.0
PyPI
65良好健康指数
stayukasabov/capcat
v2.0.38 | Ethical content preservation from the command line: 12 built-in sources to Markdown + self-contained HTML. YAML frontmatter, optional PDF downloads, user-editable sources and bundles, add any RSS feed, interactive TUI, batch automation.
Python★ 2↓ 990/月2026年10月20日
自定义许可证2026年10月20日 · 指标 2.10.0
PyPI
63中等健康指数
seleniumbase/seleniumbase-mcp
SeleniumBase MCP Servers. Browser automation that bypasses anti-bot systems and handles web-scraping.
Python★ 9↓ 2,490/月2026年10月2日
MIT2026年10月2日 · 指标 2.10.0
PyPI
62中等健康指数
Vinyzu/cursory
Generate 100% human-realistic Mouse Trajectories with Timings.
Python★ 169↓ 4,962/月2026年10月17日
LGPL-3.02026年10月17日 · 指标 2.10.0
crates.io · RubyGems · NuGet +1
62中等健康指数
nchapman/trafilatura-rs
Extract readable content, comments, and metadata from web pages
HTML★ 8↓ 7,986/月2026年10月19日
Apache-2.02026年10月19日 · 指标 2.10.0
RubyGems
62中等健康指数
serpapi/nokolexbor
High-performance HTML5 parser for Ruby based on Lexbor, with support for both CSS selectors and XPath.
C · HTML★ 4142026年9月13日
无许可证2026年9月13日 · 指标 2.10.0
PyPI · npm · crates.io +1
62中等健康指数
spider-rs/spider-clients
Python, Javascript, and Rust libraries for the Spider Cloud API.
Rust · Python · Go★ 26↓ 365K/月2026年9月9日
MIT2026年9月9日 · 指标 2.10.0
npm · PyPI
60中等健康指数
Bin-Huang/camoufox-cli
Anti-detect browser automation CLI & Skills for AI agents — Camoufox-powered fingerprint spoofing, no bot-detectable Playwright leaks
Python · TypeScript★ 342↓ 376/月2026年9月14日
MIT2026年9月14日 · 指标 2.10.0
NuGet
60中等健康指数
CapMonsterCloud/capmonster-dotnet-captcha-solver
CapMonster Cloud .NET (C#) SDK — AI captcha solver for reCAPTCHA v2/v3, Cloudflare Turnstile & DataDome. Bypass captchas in your C#, WPF, and ASP.NET automation projects.
C#★ 242026年10月15日
MIT2026年10月15日 · 指标 2.10.0
Go
60中等健康指数
tamnd/github-cli
Read github.com as data: every repo, user, org, issue, pull request, commit, release and file as a typed record with a github:// URI and a knowledge graph of the edges between them, with no API token
Go★ 02026年9月18日
Apache-2.02026年9月18日 · 指标 2.10.0
npm
59中等健康指数
browserbase/integrations
Browserbase's Integrations
TypeScript★ 18↓ 8,972/月2026年10月7日
MIT2026年10月7日 · 指标 2.10.0
npm
59中等健康指数
cherchyk/MCPBrowser
该仓库未发布描述。
JavaScript★ 8↓ 1,732/月2026年9月8日
MIT2026年9月8日 · 指标 2.10.0
npm
59中等健康指数
olostep-api/olostep-js
nodejs SDK of the Olostep API
TypeScript★ 6↓ 10.3K/月2026年9月15日
无许可证2026年9月15日 · 指标 2.10.0
Go
59中等健康指数
tamnd/facebook-cli
Facebook as structured data: Pages, posts, comments, media, groups and events into records, a claim graph and RDF. No API token.
Go★ 102026年9月19日
Apache-2.02026年9月19日 · 指标 2.10.0
Go
57中等健康指数
Dhairya3391/kari
Kari just a tui for getting media from providers and playing it in your media player with nice to have features.
Go★ 612026年10月22日
MIT2026年10月22日 · 指标 2.10.0
PyPI
57中等健康指数
EchterAlsFake/eaf_base_api
a base networking component for EchterAlsFake's Porn APIs
Python★ 9↓ 6,052/月2026年10月17日
自定义许可证2026年10月17日 · 指标 2.10.0
PyPI
57中等健康指数
Fuyuki0/unlimitedpipe
Pipe the public internet: Unix commands that turn feeds, APIs and web pages into events, detect what changed, and publish free hosted feeds. Yahoo Pipes, rebuilt for the terminal.
Python★ 0↓ 10.7K/月2026年10月4日
Apache-2.02026年10月4日 · 指标 2.10.0
PyPI
57中等健康指数
Ge0rg3/requests-ip-rotator
A Python library to utilize AWS API Gateway's large IP pool as a proxy to generate pseudo-infinite IPs for web scraping and brute forcing.
Python★ 1,678↓ 13.9K/月2026年9月16日
GPL-3.02026年9月16日 · 指标 2.10.0
npm
57中等健康指数
NovadaLabs/Novada-mcp
One MCP server for all web data — search, scrape, crawl, proxy, and AI research in a single npx install. Works with Claude, Cursor, and any MCP client.
TypeScript · HTML · JavaScript★ 3↓ 953/月2026年9月9日
无许可证2026年9月9日 · 指标 2.10.0
npm
57中等健康指数
brandonkramer/pi-scraper
Pi extension for fast page scraping, recursive crawling, URL/site mapping, brand extraction, content diffing, PDF text extraction, and deterministic vertical extraction.
TypeScript · HTML★ 7↓ 367/月2026年10月20日
MIT2026年10月20日 · 指标 2.10.0