PyPI
akfamily/akshare
AKShare is an elegant and simple financial data interface library for Python, built for human beings! 开源财经数据接口库
MIT5 серп. 2026 р. · метрики 2.10.0
Усі теги
Тег каталогу
#spider
Усі репозиторії публічного реєстру з цим тегом — із тем GitHub або ключових слів, які публікують їхні реєстри пакетів. Здоров'я вимірюється за тією ж версіонованою методологією, що й решта реєстру.
17 записів
PyPI
DedSecInside/TorBot
Dark Web OSINT Tool
Власна ліцензія28 серп. 2026 р. · метрики 2.10.0
crates.io
spider-rs/spider
Get web data for AI agents and LLMs
MIT22 серп. 2026 р. · метрики 2.10.0
Packagist
JayBizzle/Crawler-Detect
🕷 CrawlerDetect is a PHP class for detecting bots/crawlers/spiders via the user agent
MIT27 серп. 2026 р. · метрики 2.10.0
Maven
Norconex/crawler
Norconex Crawlers (or spiders) are flexible web and filesystem crawlers for collecting, parsing, and manipulating data from the web or filesystem to various data repositories such as search engines.
Apache-2.05 вер. 2026 р. · метрики 2.10.0
Go
gosom/scrapemate
Golang Crawling and scraping framework
MIT2 серп. 2026 р. · метрики 2.10.0
RubyGems
loadkpi/crawler_detect
Ruby gem to detect bots and crawlers via the user agent
MIT6 вер. 2026 р. · метрики 2.10.0
npm · crates.io · Go +1
spider-rs/spider-clients
Python, Javascript, and Rust libraries for the Spider Cloud API.
MIT16 лип. 2026 р. · метрики 2.10.0
NuGet
zzzprojects/html-agility-pack
Html Agility Pack (HAP) is a free and open-source HTML parser written in C# to read/write DOM and supports plain XPATH or XSLT. It is a .NET code library that allows you to parse "out of the web" HTML files.
MIT22 серп. 2026 р. · метрики 2.10.0
PyPI
moskrc/crawlerdetect
🕷CrawlerDetect is a Python library designed to identify bots, crawlers, and spiders by analyzing their user agents.
MIT29 лип. 2026 р. · метрики 2.10.0
Packagist
JayBizzle/Laravel-Crawler-Detect
A Laravel wrapper for CrawlerDetect - the web crawler detection library
MIT28 лип. 2026 р. · метрики 2.10.0
Go
x-way/crawlerdetect
Golang module to detect bots and crawlers via the user agent
MIT17 лип. 2026 р. · метрики 2.10.0
—
Senparc/Senparc.CO2NET
Base Common Library, support for.NET Framework &.NET Core
Apache-2.018 лип. 2026 р. · метрики 2.10.0
Packagist
zorlan/skycaiji
蓝天采集器是一款开源免费的爬虫系统，仅需点选编辑规则即可采集数据，可运行在本地、虚拟主机或云服务器中，几乎能采集所有类型的网页，无缝对接各类CMS建站程序，免登录实时发布数据，全自动无需人工干预！是网页大数据采集软件中完全跨平台的云端爬虫系统
Власна ліцензія27 лип. 2026 р. · метрики 2.10.0
NuGet
SoftCircuits/HtmlMonkey
Lightweight HTML/XML parser written in C#.
Власна ліцензія31 лип. 2026 р. · метрики 2.10.0
Maven
ssssssss-team/spider-flow
新一代爬虫平台，以图形化方式定义爬虫流程，不写代码即可完成爬虫。
MIT27 серп. 2026 р. · метрики 2.10.0
PyPI
0-EternalJunior-0/GraphCrawler
Python бібліотека для сканування веб-сайтів та побудови графу їх структури.
MIT1 серп. 2026 р. · метрики 2.10.0