全部标签
目录标签

#deduplication

公开记录中带有此标签的全部仓库——标签来自其 GitHub 主题或软件包注册表发布的关键词。健康度量遵循与记录其余部分相同的版本化方法论。

24 条记录
标签为“deduplication”按健康指数排序
Go · npm
98卓越健康指数
prometheus/alertmanager
Prometheus Alertmanager
Go · Elm★ 8,5972026年8月28日
Apache-2.02026年8月28日 · 指标 2.10.0
PyPI
97卓越健康指数
borgbackup/borg
Deduplicating archiver with compression and authenticated encryption.
Python★ 13.7K↓ 70.8K/月2026年8月27日
自定义许可证2026年8月27日 · 指标 2.10.0
PyPI
96卓越健康指数
moj-analytical-services/splink
Fast, accurate and scalable probabilistic data linkage with support for multiple SQL backends
Python · JavaScript★ 2,3362026年8月13日
MIT2026年8月13日 · 指标 2.10.0
Go
94卓越健康指数
PlakarKorp/plakar
plakar is a backup solution powered by Kloset and ptar
Go★ 2,0302026年8月22日
ISC2026年8月22日 · 指标 2.10.0
PyPI · crates.io
94卓越健康指数
huggingface/xet-core
xet client tech, used in huggingface_hub
Rust★ 548↓ 257M/月2026年8月4日
Apache-2.02026年8月4日 · 指标 2.10.0
PyPI
93卓越健康指数
opensanctions/nomenklatura
Framework and command-line tools for integrating FollowTheMoney data streams from multiple sources
Python★ 260↓ 34.7K/月2026年8月19日
MIT2026年8月19日 · 指标 2.10.0
crates.io
89优秀健康指数
rustic-rs/rustic_core
rustic_core - library for fast, encrypted, deduplicated backups that powers rustic-rs
Rust★ 85↓ 16.4K/月2026年8月18日
Apache-2.02026年8月18日 · 指标 2.10.0
npm · PyPI
88优秀健康指数
benseverndev-oss/goldenmatch
Zero-config entity resolution feeding a durable identity layer: messy records from any source become stable golden entities, a Customer 360 with provenance, merge/split and audit. Fellegi-Sunter beats hand-tuned Splink. Arrow-native/Rust, 250M rows in 11.2 min. Python + edge TypeScript (WASM), SQL-native in Postgres & DuckDB, 97 MCP tools + REST.
Python · TypeScript★ 1312026年9月6日
MIT2026年9月6日 · 指标 2.10.0
PyPI
84优秀健康指数
sebastienrousseau/bankstatementparser
Parse bank statements — CAMT/ISO 20022, PAIN.001, CSV (EN/DE/FR/ES), OFX/QFX, MT940, PDFs (digital + scanned) — into unified Transactions. Deterministic parsers, LLM/vision fallback, Golden Rule + multi-currency + continuity verification, page provenance, dedupe, review, accuracy evals, CLI + REST API. 100% test coverage.
Python★ 382026年7月31日
Apache-2.02026年7月31日 · 指标 2.10.0
Go
81优秀健康指数
cplieger/docker-fclones-scheduler
Find and deduplicate files on a schedule — reclaim wasted disk space automatically
Go★ 02026年9月5日
Apache-2.02026年9月5日 · 指标 2.10.0
npm
80优秀健康指数
git-stunts/git-cas
Git, freebased: pure CAS that’ll knock your SHAs off. LFS hates this repo!
JavaScript★ 0↓ 2,858/月2026年7月25日
Apache-2.02026年7月25日 · 指标 2.10.0
Go
78良好健康指数
franchoy/coldkeep
Coldkeep is a correctness-first, content-addressed cold-storage engine with deterministic restore, staged integrity verification, safe garbage collection, deduplication, transform-aware packed storage, stable storage semantics, and a reusable engine/catalog core. v1.x is complete; v2.x focuses on local-first productization.
Go★ 02026年8月16日
Apache-2.02026年8月16日 · 指标 2.10.0
npm
73良好健康指数
mikkelscheike/email-provider-links
Email Provider Links automatically detects which email service (Gmail, Outlook, Yahoo, etc.) someone uses and provides a direct link to their login page, making password reset flows and email-related UX seamless.
TypeScript★ 3↓ 19K/月2026年7月19日
MIT2026年7月19日 · 指标 2.10.0
—
71良好健康指数
mhx/dwarfs
A fast high-compression read-only file system for Linux, FreeBSD, macOS and Windows
C++ · C★ 2,5822026年7月17日
自定义许可证2026年7月17日 · 指标 2.10.0
crates.io
71良好健康指数
nlfiedler/fastcdc-rs
FastCDC implementation in Rust
Rust★ 202↓ 312K/月2026年8月28日
MIT2026年8月28日 · 指标 2.10.0
Go · npm
60中等健康指数
alexander-kolodka/crestic
Crestic simplifies working with restic. Restic is fast and secure, but managing multiple folders and backup destinations via its CLI can get repetitive. Crestic lets you define repositories and jobs in a single YAML config and run them with simple commands — no magic, just a cleaner way to use restic.
Go★ 22026年7月18日
MIT2026年7月18日 · 指标 2.10.0
PyPI
59中等健康指数
beshu-tech/deltaglider
Store 4TB in 5GB: S3-compatible storage with 99.9% compression for versioned files
Python★ 33↓ 99/月2026年8月17日
MIT2026年8月17日 · 指标 2.10.0
crates.io
59中等健康指数
revidiumhq/biblib
Parse, manage, and deduplicate academic citations
Rust★ 8↓ 25.6K/月2026年7月21日
Apache-2.02026年7月21日 · 指标 2.10.0
Go
57中等健康指数
samekind/codexfold
Local-first deduplication and transparent storage for Codex sessions
Go★ 02026年8月19日
Apache-2.02026年8月19日 · 指标 2.10.0
PyPI
53中等健康指数
Fallen-Breath/pyfastcdc
A high-performance FastCDC 2020 implementation written in Python + Cython
Python · Cython★ 2↓ 6,109/月2026年9月5日
MIT2026年9月5日 · 指标 2.10.0
PyPI
44薄弱健康指数
mr3od/bgate-unix
High-performance, hardware-aware Layer 0 deduplication engine. Uses 4-tier short-circuit logic (Size → Fringe → Full Hash) with xxHash128 to eliminate exact duplicates before they enter your processing pipeline. Python 3.11+, uv, SQLite.
Python★ 1↓ 32/月2026年8月14日
MIT2026年8月14日 · 指标 2.10.0
npm
41薄弱健康指数
electrovir/fuzzy-vir
该仓库未发布描述。
TypeScript★ 0↓ 3,678/月2026年9月6日
CC0-1.02026年9月6日 · 指标 2.10.0
PyPI
25存在风险健康指数
elemental-lf/benji
Benji Backup: A block based deduplicating backup software for Ceph RBD images, iSCSI targets, image files and block devices
Python★ 1502026年8月14日
自定义许可证2026年8月14日 · 指标 2.10.0