Усі теги
Тег каталогу

#data-engineering

Усі репозиторії публічного реєстру з цим тегом — із тем GitHub або ключових слів, які публікують їхні реєстри пакетів. Здоров'я вимірюється за тією ж версіонованою методологією, що й решта реєстру.

36 записів
З тегом «data-engineering»Упорядковано за індексом здоров'я
npm · PyPI
97Відміннийіндекс здоров'я
apache/superset
Apache Superset is a Data Visualization and Data Exploration Platform
TypeScript · Python · Jupyter Notebook★ 73.8K↓ 1.1M/міс15 лип. 2026 р.
Apache-2.015 лип. 2026 р. · метрики 1.13.0
PyPI · npm · Go +1
93Відміннийіндекс здоров'я
apache/airflow
Apache Airflow - A platform to programmatically author, schedule, and monitor workflows
Python★ 46.2K↓ 28.9M/міс21 лип. 2026 р.
Apache-2.021 лип. 2026 р. · метрики 1.13.0
PyPI · npm
91Відміннийіндекс здоров'я
PrefectHQ/prefect
Prefect is a workflow orchestration framework for building resilient data pipelines in Python.
Python · TypeScript★ 23.4K↓ 392.6K/міс21 лип. 2026 р.
Apache-2.021 лип. 2026 р. · метрики 1.13.0
PyPI · crates.io
88Відміннийіндекс здоров'я
eventual-inc/daft
High-performance data engine for AI and multimodal workloads. Process images, audio, video, and structured data at any scale
Rust · Python · Jupyter Notebook★ 5 635↓ 916.1K/міс17 лип. 2026 р.
Apache-2.017 лип. 2026 р. · метрики 1.13.0
PyPI · npm · Go +1
87Відміннийіндекс здоров'я
feast-dev/feast
The Open Source Feature Store for AI/ML
Python · Go★ 7 137↓ 615K/міс18 лип. 2026 р.
Apache-2.018 лип. 2026 р. · метрики 1.13.0
Maven · npm
87Відміннийіндекс здоров'я
kestra-io/kestra
Event Driven Orchestration & Scheduling Platform for Mission Critical Applications
Java · TypeScript · Vue★ 27.4K18 лип. 2026 р.
Apache-2.018 лип. 2026 р. · метрики 1.13.0
Go
87Відміннийіндекс здоров'я
rudderlabs/rudder-server
Privacy and Security focused Segment-alternative, in Golang and React
Go★ 4 45918 лип. 2026 р.
Власна ліцензія18 лип. 2026 р. · метрики 1.13.0
PyPI
86Відміннийіндекс здоров'я
great-expectations/great_expectations
Always know what to expect from your data.
Python★ 11.6K16 лип. 2026 р.
Apache-2.016 лип. 2026 р. · метрики 1.13.0
PyPI · npm
84Добрийіндекс здоров'я
DataRecce/recce
The data-validation toolkit for enhanced dbt (data build tool) PR review
TypeScript · Python★ 463↓ 0/міс14 лип. 2026 р.
Apache-2.014 лип. 2026 р. · метрики 1.13.0
PyPI · npm
83Добрийіндекс здоров'я
dagster-io/dagster
An orchestration platform for the development, production, and observation of data assets.
Python · TypeScript★ 15.9K↓ 8.6M/міс21 лип. 2026 р.
Apache-2.021 лип. 2026 р. · метрики 1.13.0
PyPI
83Добрийіндекс здоров'я
snowflakedb/snowpark-python
Snowflake Snowpark Python API
Python★ 339↓ 98.6M/міс21 лип. 2026 р.
Apache-2.021 лип. 2026 р. · метрики 1.13.0
Go
80Добрийіндекс здоров'я
redpanda-data/connect
Fancy stream processing made operationally mundane
Go★ 8 71123 лип. 2026 р.
Власна ліцензія23 лип. 2026 р. · метрики 1.13.0
PyPI · npm
79Добрийіндекс здоров'я
dbt-labs/dbt-mcp
A MCP (Model Context Protocol) server for interacting with dbt.
Python★ 594↓ 98.4K/міс17 лип. 2026 р.
Apache-2.017 лип. 2026 р. · метрики 1.13.0
Go
78Добрийіндекс здоров'я
cloudquery/cloudquery
Data pipelines for cloud config and security data. Build cloud asset inventory, CSPM, FinOps, and vulnerability management solutions. Extract from AWS, Azure, GCP, and 70+ cloud and SaaS sources.
Go★ 6 458↓ 0/міс13 лип. 2026 р.
MPL-2.013 лип. 2026 р. · метрики 1.13.0
RubyGems · npm
78Добрийіндекс здоров'я
multiwoven/multiwoven
🔥🔥🔥 Open source Reverse ETL - alternative to hightouch and census.
Ruby · TypeScript★ 1 66317 лип. 2026 р.
AGPL-3.017 лип. 2026 р. · метрики 1.13.0
Go
76Добрийіндекс здоров'я
ConduitIO/conduit
Conduit streams data between data stores. Kafka Connect replacement. No JVM required.
Go★ 60417 лип. 2026 р.
Apache-2.017 лип. 2026 р. · метрики 1.13.0
Go · crates.io · npm +1
74Добрийіндекс здоров'я
estuary/flow
🌊 Continuously synchronize the systems where your data lives, to the systems where you _want_ it to live, by managing your data flows with Estuary. 🌊
Rust · C++★ 94817 лип. 2026 р.
Власна ліцензія17 лип. 2026 р. · метрики 1.13.0
PyPI
72Добрийіндекс здоров'я
SuperCowPowers/workbench
Workbench: An easy to use Python API for creating and deploying AWS SageMaker Models
Python★ 51↓ 10.1K/міс18 лип. 2026 р.
MIT18 лип. 2026 р. · метрики 1.13.0
npm · PyPI
72Добрийіндекс здоров'я
benseverndev-oss/goldenmatch
Zero-config entity resolution & record linkage. The zero-tuning Fellegi-Sunter path beats hand-tuned Splink head-to-head and scales from a CSV to a verified 100M-row dedupe in 9.2 min. Fuzzy/exact/probabilistic + PPRL + LLM + identity graph. Python + edge-safe TypeScript (WASM), SQL-native in Postgres & DuckDB, MCP/REST + dbt/Airflow.
Python · TypeScript★ 12215 лип. 2026 р.
MIT15 лип. 2026 р. · метрики 1.13.0
npm · PyPI
69Помірнийіндекс здоров'я
AltimateAI/altimate-code
Open-source agentic data engineering harness for dbt, SQL, and cloud warehouses. 100+ tools, 10 warehouses, AI-powered.
TypeScript★ 75118 лип. 2026 р.
MIT18 лип. 2026 р. · метрики 1.13.0
Go · npm
69Помірнийіндекс здоров'я
datazip-inc/olake-ui
Frontend & BFF (Backend for frontend) for Olake. This includes the UI code and backend code for storing the configuration of sync and orchestrating it.
TypeScript · Go★ 3217 лип. 2026 р.
Apache-2.017 лип. 2026 р. · метрики 1.13.0
PyPI · crates.io
64Помірнийіндекс здоров'я
BirchKwok/ApexBase
A High-performance HTAP embedded database. A reliable work partner.
Rust · Python★ 3↓ 5 330/міс17 лип. 2026 р.
Apache-2.017 лип. 2026 р. · метрики 1.13.0
—
63Помірнийіндекс здоров'я
exmergo/dex
Dex is the agent-native analytics engineering toolkit. Point it at your warehouse and your dbt project. It learns the landscape, authors your transformations, and tells you exactly what to fix when the schema drifts. Built for analytics engineers and data engineers who want more out of their coding agent.
Python★ 1218 лип. 2026 р.
Apache-2.018 лип. 2026 р. · метрики 1.13.0
PyPI
63Помірнийіндекс здоров'я
russalo/file-observer
Deterministic file observation for pipelines — one read-only pass over a directory emits a reproducible JSON manifest of every file's type, metadata, structure, and provenance.
Python★ 217 лип. 2026 р.
Власна ліцензія17 лип. 2026 р. · метрики 1.13.0
PyPI
62Помірнийіндекс здоров'я
PaulKov/dpone
Declarative ETL framework for YAML-driven data pipelines
Python★ 2↓ 25.1K/міс22 лип. 2026 р.
Apache-2.022 лип. 2026 р. · метрики 1.13.0
PyPI
61Помірнийіндекс здоров'я
PFund-Software-Ltd/pfeed
Data Engine for AI/Algo Trading: Download/Stream -> Clean -> Store. Supports Data Lakehouse Architecture. Clean Once and Forget.
Python★ 35↓ 1 064/міс20 лип. 2026 р.
Apache-2.020 лип. 2026 р. · метрики 1.13.0
crates.io · PyPI
57Помірнийіндекс здоров'я
pmgraham/datagrunt
Datagrunt is a Python library designed to simplify the way you work with CSV, Excel, and PDF files. It provides a streamlined approach to reading, processing, and transforming your data into various formats, making data manipulation efficient and intuitive.
Python★ 12↓ 20.3K/міс13 лип. 2026 р.
MIT13 лип. 2026 р. · метрики 1.13.0
PyPI
56Помірнийіндекс здоров'я
Query-farm/vgi-lint-check
Lint the documentation & metadata quality of VGI (Vector Gateway Interface) data workers — descriptions, column comments, tags, and example queries — with a quality score, per-version baselines, and agent-friendly output.
Python★ 0↓ 11.8K/міс19 лип. 2026 р.
Власна ліцензія19 лип. 2026 р. · метрики 1.13.0
crates.io · PyPI
56Помірнийіндекс здоров'я
mag1cfrog/delta-funnel
Fast, lightweight Delta Lake to SQL Server loads without Spark or ODBC.
Rust★ 016 лип. 2026 р.
Apache-2.016 лип. 2026 р. · метрики 1.13.0