An open benchmarking platform for medical artificial intelligence using Federated Evaluation.
mlcommons/medperf має індекс здоров’я 65 зі 100, що відповідає смузі «Добрий». Найвищий показник — Sustainability & Governance (80/100), найнижчий — Security (36/100). Останнє оновлення було 68 днів тому. Більшість нещодавньої роботи виконують 2 учасники.
Метрики згруповано у зважені категорії на шкалі 1–100. Загальна оцінка починається як їхнє зважене середнє, відкаліброване за розподілом публічного реєстру, тож діапазони мають перцентильний зміст; коли публічні дані активують Політику юрисдикцій високого ризику, рейтинг коригується й отримує верхню межу 34 («У зоні ризику»).
Кожна вісь — окрема категорія. Форма важить більше, ніж середнє: здоровий об'єкт заповнює всю фігуру, тоді як профіль із піками та провалами означає, що сила в одному вимірі маскує ризик в іншому.
Зважений загальний бал 60 калібровано до 65 за шкалою опублікованого індексу (калібрування реєстру 2026-08-02).
За цим репозиторієм стоїть організація — спільна, підзвітна опіка, здатна пережити будь-якого окремого мейнтейнера.
Чи живий проєкт — чи пишеться код і чи виходять релізи?
| 18/36 | Свіжість push — останній push 68 дн. тому |
| 9/36 | Ритм комітів — 13/52 тижнів із комітами |
| 12.4/18 | Обсяг комітів — 23 комітів за останній рік |
| 0/10 | OpenSSF Scorecard: Maintained — немає даних |
| commits_last_year | 23 |
| human_commit_share | 1 |
| days_since_last_push | 68 |
| active_weeks_last_year | 13 |
| 27/27 | Випускає релізи — опубліковано 1 релізів |
| 0/36 | Свіжість релізів — останній реліз 1 312 дн. тому |
| 12.6/27 | Ритм релізів — ритм невідомий (єдиний реліз) |
| 0/10 | OpenSSF Scorecard: Signed-Releases — немає даних |
| releases_count | 1 |
| latest_release_tag | v0.1.0 |
| releases_from_tags | ні |
| days_since_latest_release | 1 312 |
| mean_days_between_releases | — |
Чи має проєкт користувачів, завантаження, увагу та влаштовані умови для контриб’юторів?
| 36.2/60 | Зірки — 172 зірок |
| 12.9/25 | Форки — 36 форків |
| 5.8/15 | Спостерігачі — 12 спостерігачів |
| forks | 36 |
| stars | 172 |
| watchers | 12 |
| growth_state | unverified |
| growth_factor_pct | 100 |
| growth_unverified_reason | no_history |
| 22.5/22.5 | README |
| 22.5/22.5 | Ліцензія — визнана ліцензія (Apache-2.0) |
| 18/18 | Настанови CONTRIBUTING |
| 0/13.5 | Кодекс поведінки |
| 0/7.2 | Шаблон issue |
| 0/6.3 | Шаблон PR |
| has_readme | так |
| has_license | так |
| readme_badges | 0 |
| has_contributing | так |
| has_issue_template | ні |
| has_code_of_conduct | ні |
| readme_badge_services | — |
| has_pull_request_template | ні |
Чи переживе проєкт своїх людей — бас-фактор, реактивність, хто за ним стоїть і як супроводжуються пакети?
| 25.2/54 | Бас-фактор — на 2 контриб’ютор(ів) припадає половина всіх комітів |
| 13.7/22.5 | Розподіл комітів — головний контриб’ютор — автор 39% комітів |
| 13.5/13.5 | Широта контриб’юторів — 16 контриб’юторів |
| 0/10 | OpenSSF Scorecard: Contributors — немає даних |
| bus_factor | 2 |
| contributors_sampled | 16 |
| top_contributor_share | 0,39 |
| 39.7/42 | Вирішення issue — закрито 95% issue |
| 23.7/30 | Прийняття PR — злито 296/375 вирішених PR |
| 0/13 | Newcomer PR acceptance — за 30 дн. не вирішено жодного PR від новачка |
| 0/15 | OpenSSF Scorecard: Code-Review — немає даних |
| merged_prs | 296 |
| open_issues | 16 |
| closed_issues | 282 |
| prs_merged_7d | 0 |
| prs_decided_7d | 0 |
| prs_merged_30d | 0 |
| prs_decided_30d | 0 |
| issue_closed_ratio | 0,946 |
| closed_unmerged_prs | 79 |
| first_time_authors_30d | 0 |
| first_time_prs_merged_30d | 0 |
| first_time_prs_decided_30d | 0 |
| 30/30 | Підтримка власника — у власності організації |
| 20/20 | Верифікований домен |
| 22.8/25 | Охоплення власника — 1 498 підписників у mlcommons |
| 25/25 | Послужний список — 139 публічних репозиторіїв, вік облікового запису ~6 р. |
| followers | 1 498 |
| owner_type | Organization |
| is_verified | так |
| owner_login | mlcommons |
| public_repos | 139 |
| account_age_days | 2 299 |
Чи наявні базові інженерні практики та документація?
| 24/24 | Процеси CI — 10 процес(ів) CI |
| 24/24 | Наявні тести |
| 0/16 | Конфігурація лінтера |
| 0/9.6 | Pre-commit-хуки |
| 0/6.4 | .editorconfig |
| 0/20 | OpenSSF Scorecard: CI-Tests — немає даних |
| has_ci | так |
| has_tests | так |
| has_editorconfig | ні |
| has_linter_config | ні |
| has_precommit_config | ні |
| 30/30 | README |
| 25/25 | Каталог документації |
| 15/15 | Сайт документації / домашня сторінка — https://www.medperf.org |
| 10/10 | Опис репозиторію |
| 0/10 | Теми |
| 10/10 | Wiki |
| topics | — |
| has_wiki | так |
| homepage | https://www.medperf.org |
| docs_site | https://www.medperf.org |
| has_readme | так |
| has_docs_dir | так |
| has_description | так |
Чи міцні видимі практики безпеки й ланцюга постачання, без непослабленої пов’язаності з юрисдикціями високого ризику?
| 0/30 | Політика безпеки (SECURITY.md) |
| 0/25 | Конфігурація Dependabot |
| 0/25 | Файли фіксації залежностей |
| 20/20 | Процес CodeQL |
| source | file_signals |
| lockfiles | — |
| manifests | cli/requirements.txt, cli/setup.py, docs/requirements.txt, flca/setup.py, server/requirements.txt |
| has_codeql_workflow | так |
| has_security_policy | ні |
| has_dependabot_config | ні |
| 35/35 | Прямі залежності без відомих сповіщень — жодна пряма залежність не має відомих сповіщень |
| 0/25 | Непрямі залежності без відомих сповіщень — транзитивний набір не відокремлюється від залежностей розробки й тестування в цьому обсязі |
| 0/40 | Немає задавнених сповіщень — жодне сповіщення не має дати публікації |
| source | osv |
| advisories | 290 |
| affected_packages | 19 |
| assessed_packages | 94 |
| unassessed_packages | 24 |
| affected_by_severity | critical 7, moderate 5, low 2, unknown 5 |
| direct_affected_packages | 0 |
Наскільки репозиторій оснащений для розробки та супроводу за участі ШІ-агентів? Має свідомо малу вагу (4%): агентний інструментарій — реальний сигнал супроводу, але репозиторій без нього все одно може отримати 100/100.
| 0/45 | Інструкції для агентів — немає CLAUDE.md / AGENTS.md / правил редактора |
| 0/15 | Машиночитана документація (llms.txt) |
| 40/40 | Читабельна історія комітів — намір зазначено у 96 з 100 людських комітів (структурований заголовок або пояснювальний текст) |
| has_llms_txt | ні |
| llms_txt_url | — |
| legible_history_share | 0,96 |
| agent_instruction_files | — |
| agent_instruction_max_bytes | — |
| 0/18 | Розгортання однією командою |
| 22/22 | Автоматизовані тести |
| 0/11 | Конфігурація лінтера / форматера |
| 0/11 | Статична перевірка типів |
| 10/10 | Відтворюване середовище — devcontainer, Dockerfile |
| 0/10 | Підтверджена практика роботи з агентами — серед останніх 100 комітів немає створених агентом |
| 0/8 | Автоматизоване супроводження — автоматичних оновлень залежностей не виявлено |
| 0/10 | OpenSSF Scorecard: Pinned-Dependencies — немає даних |
| has_nix | ні |
| has_tests | так |
| lockfiles | — |
| has_dockerfile | так |
| typed_language | ні |
| bootstrap_files | — |
| has_devcontainer | так |
| has_linter_config | ні |
| typecheck_configs | — |
| agent_commit_share | 0 |
| toolchain_manifests | — |
| dependency_bot_commit_share | 0 |
| 0/45 | Типізований код — Python без конфігурації перевірки типів |
| 55/55 | Керовані розміри файлів — 0/812 файлів вихідного коду понад 60 КБ |
| primary_language | Python |
| largest_source_bytes | 47 038 |
| source_files_sampled | 812 |
| oversized_source_files | 0 |
| 0/40 | Схема API (OpenAPI/GraphQL/proto) — не застосовно до цього типу програмного забезпечення |
| 0/20 | Сервер MCP — не застосовно до цього типу програмного забезпечення |
| 40/40 | Придатні до запуску приклади — examples, notebooks |
| example_dirs | examples, notebooks |
| has_mcp_signal | ні |
| api_schema_files | — |
| interfaces_expected_of | — |
Коли додано кожну зірку й форк — зібрано з GitHub і згруповано за днями. Кумулятивне зростання розміщено просто над денними додаваннями, з яких воно складається, тож їх видно одне проти одного: рівномірне органічне накопичення виглядає зовсім інакше, ніж різкий короткочасний сплеск. Там, де цю різницю можна виміряти, її подано як автентичність росту.
Кожна точка охоплює 4 днів.
Повний розв'язаний набір залежностей із графа залежностей GitHub: 0 прямих і 118 непрямих (транзитивних) пакетів. Транзитивне замикання є повним, коли в репозиторії закомічено lockfile.
| Реєстр | Пакет | Версія | Зв'язок |
|---|---|---|---|
| PyPI | argparse | — | непряма |
| PyPI | auth0-python | 4.3.0 | непряма |
| PyPI | click | 8.1.8 | непряма |
| PyPI | cnb-tools | 0.3.2 | непряма |
| PyPI | colorama | 0.4.4 | непряма |
| PyPI | cookiecutter | 2.1.1 | непряма |
| PyPI | cryptography | — | непряма |
| PyPI | cryptography | 46.0.3 | непряма |
| PyPI | curlify | — | непряма |
| PyPI | dash | 2.16 | непряма |
| PyPI | dash-bootstrap-components | 1.5 | непряма |
| PyPI | dicom | — | непряма |
| PyPI | django | 4.2.26 | непряма |
| PyPI | django-cors-headers | 4.3.1 | непряма |
| PyPI | django-environ | 0.11.2 | непряма |
| PyPI | django-extensions | 3.2.3 | непряма |
| PyPI | django-filter | 24.3 | непряма |
| PyPI | django-storages | 1.14.2 | непряма |
| PyPI | djangorestframework | 3.14.0 | непряма |
| PyPI | djangorestframework-simplejwt | 5.3.1 | непряма |
| PyPI | docker | 7.1.0 | непряма |
| PyPI | drf-spectacular | 0.27.1 | непряма |
| PyPI | drf-spectacular-sidecar | 2024.3.4 | непряма |
| PyPI | email-validator | 2.0.0 | непряма |
| PyPI | fastapi | 0.111.1 | непряма |
| PyPI | fastapi-login | 1.10.2 | непряма |
| PyPI | gitpython | 3.1.41 | непряма |
| PyPI | google-api-python-client | 2.192.0 | непряма |
| PyPI | google-auth | — | непряма |
| PyPI | google-auth | 2.49.1 | непряма |
| PyPI | google-cloud-compute | 1.46.0 | непряма |
| PyPI | google-cloud-iam | 2.21.0 | непряма |
| PyPI | google-cloud-kms | — | непряма |
| PyPI | google-cloud-kms | 3.11.0 | непряма |
| PyPI | google-cloud-secret-manager | 2.19.0 | непряма |
| PyPI | google-cloud-storage | — | непряма |
| PyPI | google-cloud-storage | 3.9.0 | непряма |
| PyPI | griffe | 0.32.3 | непряма |
| PyPI | gunicorn | 23.0.0 | непряма |
| PyPI | medpy | — | непряма |
| PyPI | merge-args | 0.1.5 | непряма |
| PyPI | mkdocs | 1.4.3 | непряма |
| PyPI | mkdocs-autorefs | 0.4.1 | непряма |
| PyPI | mkdocs-gen-files | 0.5.0 | непряма |
| PyPI | mkdocs-literate-nav | 0.6.0 | непряма |
| PyPI | mkdocs-macros-plugin | 1.0.2 | непряма |
| PyPI | mkdocs-material | 9.1.18 | непряма |
| PyPI | mkdocs-material-extensions | 1.1.1 | непряма |
| PyPI | mkdocstrings | 0.22.0 | непряма |
| PyPI | mkdocstrings-python | 1.2.0 | непряма |
| PyPI | nibabel | — | непряма |
| PyPI | numpy | — | непряма |
| PyPI | numpy | 1.24.3 | непряма |
| PyPI | numpy | 1.26.0 | непряма |
| PyPI | numpy | 1.26.4 | непряма |
| PyPI | numpy | 2.4.3 | непряма |
| PyPI | onnx | 1.13.0 | непряма |
| PyPI | onnx | 1.16.2 | непряма |
| PyPI | pandas | — | непряма |
| PyPI | pandas | 2.1.0 | непряма |
| PyPI | pandas | 2.2.1 | непряма |
| PyPI | parameterized | 0.9.0 | непряма |
| PyPI | pexpect | 4.8.0 | непряма |
| PyPI | pillow | — | непряма |
| PyPI | pillow | 10.2.0 | непряма |
| PyPI | pillow | 9.5.0 | непряма |
| PyPI | plotly | 5.20 | непряма |
| PyPI | psutil | 5.9.8 | непряма |
| PyPI | psycopg2-binary | 2.9.9 | непряма |
| PyPI | pydantic | 1.10.13 | непряма |
| PyPI | pyfakefs | 5.8.0 | непряма |
| PyPI | pygments | 2.18 | непряма |
| PyPI | pyopenssl | 25.3.0 | непряма |
| PyPI | pyperclip | 1.8.2 | непряма |
| PyPI | pytest-dependency | 0.6.0 | непряма |
| PyPI | pytest-mock | 3.14.0 | непряма |
| PyPI | pyyaml | — | непряма |
| PyPI | pyyaml | 6.0 | непряма |
| PyPI | pyyaml | 6.0.1 | непряма |
| PyPI | pyyaml | 6.0.3 | непряма |
| PyPI | requests | — | непряма |
| PyPI | rich | — | непряма |
| PyPI | schema | 0.7.5 | непряма |
| PyPI | scikit-learn | — | непряма |
| PyPI | scikit-learn | 0.24.2 | непряма |
| PyPI | scikit-learn | 1.2.2 | непряма |
| PyPI | scikit-learn | 1.8.0 | непряма |
| PyPI | scipy | — | непряма |
| PyPI | selenium | 4.23.1 | непряма |
| PyPI | semver | 3.0.4 | непряма |
| PyPI | simpleitk | — | непряма |
| PyPI | synapseclient | 4.1.1 | непряма |
| PyPI | tabulate | 0.9.0 | непряма |
| PyPI | tblib | 3.0.0 | непряма |
| PyPI | tensorflow | 2.12.0 | непряма |
| PyPI | textual | 0.46.0 | непряма |
| PyPI | time-machine | 2.4.0 | непряма |
| PyPI | torch | — | непряма |
| PyPI | torch | 2.0.1 | непряма |
| PyPI | torch | 2.8.0 | непряма |
| PyPI | torchvision | — | непряма |
| PyPI | torchvision | 0.15.2 | непряма |
| PyPI | torchxrayvision | — | непряма |
| PyPI | torchxrayvision | 0.0.39 | непряма |
| PyPI | tqdm | — | непряма |
| PyPI | tqdm | 4.65.0 | непряма |
| PyPI | tqdm | 4.67.3 | непряма |
| PyPI | typer | — | непряма |
| PyPI | typer | 0.20.1 | непряма |
| PyPI | typer | 0.9.0 | непряма |
| PyPI | typing-extensions | — | непряма |
| PyPI | uvicorn | 0.30.1 | непряма |
| PyPI | validators | 0.18.2 | непряма |
| PyPI | watchdog | 3.0.0 | непряма |
| PyPI | webdriver-manager | 4.0.2 | непряма |
| PyPI | werkzeug | 3.0.6 | непряма |
| PyPI | whitenoise | 6.6.0 | непряма |
| PyPI | yaspin | 2.1.0 | непряма |
Цей репозиторій не публікує пакета, який розпізнає індекс, тож оцінено його власний граф залежностей — 94 пакетів, серед яких є й піниї розробки та тестування, що ніколи не постачаються: 19 мають відомі сповіщення, з них 0 прямі. 24 не вдалося оцінити — немає резолвленої версії, непідтримувана екосистема або поза наведеним переліком пакетів.
| Пакет | Версія | Зв'язок | Критичність | Сповіщень | Виправлено в |
|---|---|---|---|---|---|
| cryptography | 46.0.3 | непряма | критична | 13 | 50.0.0 |
| django | 4.2.26 | непряма | критична | 40 | 6.1.1 |
| gitpython | 3.1.41 | непряма | критична | 59 | 3.1.62 |
| onnx | 1.13.0 | непряма | критична | 24 | 1.22.0 |
| onnx | 1.16.2 | непряма | критична | 18 | 1.22.0 |
| pillow | 10.2.0 | непряма | критична | 30 | 12.3.0 |
| pillow | 9.5.0 | непряма | критична | 37 | 12.3.0 |
| djangorestframework | 3.14.0 | непряма | помірна | 6 | 3.17.2 |
| mkdocs-material | 9.1.18 | непряма | помірна | 2 | 9.7.7 |
| scikit-learn | 0.24.2 | непряма | помірна | 3 | 1.5.0 |
| scikit-learn | 1.2.2 | непряма | помірна | 2 | 1.5.0 |
| werkzeug | 3.0.6 | непряма | помірна | 8 | 3.1.9 |
| djangorestframework-simplejwt | 5.3.1 | непряма | низька | 2 | 5.5.1 |
| pygments | 2.18 | непряма | низька | 2 | 2.20.0 |
| pyopenssl | 25.3.0 | непряма | невідома | 4 | — |
| tensorflow | 2.12.0 | непряма | невідома | 2 | — |
| torch | 2.0.1 | непряма | невідома | 28 | — |
| torch | 2.8.0 | непряма | невідома | 8 | — |
| tqdm | 4.65.0 | непряма | невідома | 2 | — |
Сповіщення означає, що версія, записана в графі залежностей, потрапляє в уражений діапазон. Досяжність не аналізується, а граф містить піниї розробки й тестування — знахідка може стосуватися інструментів, а не поставленого коду.
Помітили щось хибне у цьому звіті або маєте чим поділитися? Неправильні вимірювання, непомічені інструменти, ідеї, запитання — усе доречно. Кожне повідомлення читається й отримує відповідь.
Оцінки — це сигнали, а не гарантії. Вони відображають публічно видимі практики на GitHub — це не аудит коду й не гарантія безпеки.
Відсутні дані виключаються, а ваги перенормовуються — нуль за відсутність ніколи не ставиться. Методологія версіонована й відкрита: метрики v2.10.0, схема v0.34.0 — повна методологія · вікі метрик.
Як окремий результат виглядає на тлі всього реєстру: сукупна статистика.