Публічний реєстр
Звіт про здоров'я програмного забезпеченнясхема 0.34.0 · метрики 2.10.0 · 2026-09-14 17:34 UTC

robocurve / worldevals

A curated catalog of VLA / physical-AI benchmarks, each runnable on real robots or sims via Inspect Robots. (The Inspect Evals for robotics.)

PythonMIT★ 7 зірок⑂ 5 форківз черв. 2026 р.Переглянути на GitHub ↗
ТипІнструмент командного рядкаБібліотекаяк це визначено
#benchmarks#evaluation#robolens#robotics#vla

robocurve/worldevals має індекс здоров’я 67 зі 100, що відповідає смузі «Добрий». Найвищий показник — Engineering Quality (96/100), найнижчий — Security (39/100). Останнє оновлення було 3 дні тому. Більшість нещодавньої роботи виконує один учасник.

67
загалом / 100
Добрий

Індекс здоров'я програмного забезпечення

Метрики згруповано у зважені категорії на шкалі 1–100. Загальна оцінка починається як їхнє зважене середнє, відкаліброване за розподілом публічного реєстру, тож діапазони мають перцентильний зміст; коли публічні дані активують Політику юрисдикцій високого ризику, рейтинг коригується й отримує верхню межу 34 («У зоні ризику»).

67
Винятковий93-100Верхній щабель реєстру (≈ топ-5%); відповідає практично всім перевіреним критеріям
Відмінний80-92Сильний за всіма напрямами; незначні прогалини
Добрий65-79Здоровий; прогалини обмежені та керовані
Помірний50-64Прийнятний, але з помітними прогалинами; рекомендовано перевірку
Слабкий35-49Суттєві недоліки в кількох сферах
У зоні ризику20-34Суттєві слабкі місця; впровадження потребує обережності
Критичний1-19Серйозні проблеми (покинутий, єдиний мейнтейнер, без базової гігієни)
ЖиттєздатністьСпільнота тавпровадженняСталість таврядуванняІнженернаякістьБезпекаГотовність доШІ

Профіль оцінок

Кожна вісь — окрема категорія. Форма важить більше, ніж середнє: здоровий об'єкт заповнює всю фігуру, тоді як профіль із піками та провалами означає, що сила в одному вимірі маскує ризик в іншому.

Зважений загальний бал 61 калібровано до 67 за шкалою опублікованого індексу (калібрування реєстру 2026-08-02).

Власність

robocurveОрганізація
79 підписників14 публічних репозиторіївз черв. 2026 р.

За цим репозиторієм стоїть організація — спільна, підзвітна опіка, здатна пережити будь-якого окремого мейнтейнера.

Пакетні екосистеми

РеєстрПакетВерсіяЗавантажень / місВерсіїОстання публікаціяТеги
PyPIworldevals0.3.2-348 днів томуbenchmarkscatalogevaluationphysical-airoboticsvla

Метрики за категоріями

Життєздатність

Чи живий проєкт — чи пишеться код і чи виходять релізи?

74Добрий · 21% загального індексу

Активність розробки

56Помірний
Як обчислюється оцінка
36/36Свіжість push — останній push 3 дн. тому
4.2/36Ритм комітів — 6/52 тижнів із комітами
15.5/18Обсяг комітів — 52 комітів за останній рік
0/10OpenSSF Scorecard: Maintained — project was created within the last 90 days. Please review its contents carefully
Використані вхідні дані
commits_last_year52
human_commit_share0,981
days_since_last_push3
active_weeks_last_year6

Дисципліна релізів

100Винятковий
Як обчислюється оцінка
27/27Випускає релізи — опубліковано 3 релізів
36/36Свіжість релізів — останній реліз 48 дн. тому
27/27Ритм релізів — реліз кожні ~10,4 дн.
0/10OpenSSF Scorecard: Signed-Releases — немає даних
Використані вхідні дані
releases_count3
latest_release_tagv0.3.2
releases_from_tagsні
days_since_latest_release48
mean_days_between_releases10,4
Виключено з оцінювання (немає даних або не застосовно): OpenSSF Scorecard: Signed-Releases. Залишкові ваги перенормовано.

Спільнота та впровадження

Чи має проєкт користувачів, завантаження, увагу та влаштовані умови для контриб’юторів?

42Слабкий · 17% загального індексу

Популярність і впровадження

18Критичний
Як обчислюється оцінка
12.6/60Зірки — 7 зірок
5/25Форки — 5 форків
0/15Спостерігачі — 2 спостерігачів
Використані вхідні дані
forks5
stars7
watchers2
growth_stateunverified
growth_factor_pct100
growth_unverified_reasonno_history

Здоров'я спільноти

70Добрий
Як обчислюється оцінка
22.5/22.5README
22.5/22.5Ліцензія — визнана ліцензія (MIT)
18/18Настанови CONTRIBUTING
0/13.5Кодекс поведінки
0/7.2Шаблон issue
0/6.3Шаблон PR
Використані вхідні дані
has_readmeтак
has_licenseтак
readme_badges6
has_contributingтак
has_issue_templateні
has_code_of_conductні
readme_badge_servicesgithub.com, shields.io
has_pull_request_templateні

Сталість та врядування

Чи переживе проєкт своїх людей — бас-фактор, реактивність, хто за ним стоїть і як супроводжуються пакети?

49Слабкий · 23% загального індексу

Стійкість мейнтейнерів (бас-фактор)

12Критичний
Як обчислюється оцінка
9/54Бас-фактор — на 1 контриб’ютор(ів) припадає половина всіх комітів
0.5/22.5Розподіл комітів — головний контриб’ютор — автор 98% комітів
2.7/13.5Широта контриб’юторів — 2 контриб’юторів
0/10OpenSSF Scorecard: Contributors — project has 0 contributing companies or organizations -- score normalized to 0
Використані вхідні дані
bus_factor1
contributors_sampled2
top_contributor_share0,98

Реактивність на issue та PR

56Помірний
Як обчислюється оцінка
21/42Вирішення issue — закрито 50% issue
27.7/30Прийняття PR — злито 24/26 вирішених PR
0/13Newcomer PR acceptance — за 30 дн. не вирішено жодного PR від новачка
0/15OpenSSF Scorecard: Code-Review — Found 1/19 approved changesets -- score normalized to 0
Використані вхідні дані
merged_prs24
open_issues1
closed_issues1
prs_merged_7d1
prs_decided_7d1
prs_merged_30d1
prs_decided_30d1
issue_closed_ratio0,5
closed_unmerged_prs2
first_time_authors_30d0
first_time_prs_merged_30d0
first_time_prs_decided_30d0
Виключено з оцінювання (немає даних або не застосовно): Newcomer PR acceptance. Залишкові ваги перенормовано.

Власність та опіка

53Помірний
Як обчислюється оцінка
30/30Підтримка власника — у власності організації
0/20Верифікований домен
13.7/25Охоплення власника — 79 підписників у robocurve
9/25Послужний список — 14 публічних репозиторіїв, вік облікового запису ~0 р.
Використані вхідні дані
followers79
owner_typeOrganization
is_verifiedні
owner_loginrobocurve
public_repos14
account_age_days80

Супровід пакетів

92Відмінний
Як обчислюється оцінка
25/25Опубліковано й доступно — 1 пакет(ів) у pypi
35/35Свіжість публікацій — остання публікація 48 дн. тому
12/20Історія версій — 3 опублікованих версій
20/20Не застарілий — активний, не deprecated і не yanked
Використані вхідні дані
packagesworldevals
ecosystemspypi
any_deprecatedні
min_days_since_publish48

Інженерна якість

Чи наявні базові інженерні практики та документація?

96Винятковий · 19% загального індексу

Інженерні практики

94Винятковий
Як обчислюється оцінка
24/24Процеси CI — 4 процес(ів) CI
24/24Наявні тести
16/16Конфігурація лінтера — pyproject.toml ([tool.ruff])
9.6/9.6Pre-commit-хуки
0/6.4.editorconfig
20/20OpenSSF Scorecard: CI-Tests — 20 out of 20 merged PRs checked by a CI test -- score normalized to 10
Використані вхідні дані
has_ciтак
has_testsтак
has_editorconfigні
has_linter_configтак
has_precommit_configтак

Документація

100Винятковий
Як обчислюється оцінка
30/30README
25/25Каталог документації
15/15Сайт документації / домашня сторінка — https://worldevals.org/
10/10Опис репозиторію
10/10Теми — 5 тем
10/10Wiki
Використані вхідні дані
topicsbenchmarks, evaluation, robolens, robotics, vla
has_wikiтак
homepage—
docs_sitehttps://worldevals.org/
has_readmeтак
has_docs_dirтак
has_descriptionтак

Безпека

Чи міцні видимі практики безпеки й ланцюга постачання, без непослабленої пов’язаності з юрисдикціями високого ризику?

39Слабкий · 16% загального індексу

Стан безпеки

39Слабкий
Як обчислюється оцінка
7.5/7.5Binary-Artifacts — no binaries found in the repo
3/7.5Branch-Protection — branch protection is not maximal on development and all release branches
2.5/2.5CI-Tests — 20 out of 20 merged PRs checked by a CI test -- score normalized to 10
0/2.5CII-Best-Practices — no effort to earn an OpenSSF best practices badge detected
0/7.5Code-Review — Found 1/19 approved changesets -- score normalized to 0
0/2.5Contributors — project has 0 contributing companies or organizations -- score normalized to 0
10/10Dangerous-Workflow — no dangerous workflow patterns detected
0/7.5Dependency-Update-Tool — no update tool detected
0/5Fuzzing — project is not fuzzed
2.5/2.5Ліцензія — license file detected
0/7.5Maintained — project was created within the last 90 days. Please review its contents carefully
5/5Packaging — packaging workflow detected
0/5Pinned-Dependencies — dependency not pinned by hash detected -- score normalized to 0
0.5/5SAST — SAST tool is not run on all commits -- score normalized to 1
0/5Security-Policy — security policy file not detected
0/7.5Signed-Releases — немає даних
0/7.5Token-Permissions — detected GitHub workflow tokens with excessive permissions
6.8/7.5Vulnerabilities — 1 existing vulnerabilities detected
Використані вхідні дані
sourceopenssf_scorecard
checks_evaluated17
scorecard_versionv5.5.0
checks_inconclusive1
scorecard_aggregate3,9
Виключено з оцінювання (немає даних або не застосовно): Signed-Releases. Залишкові ваги перенормовано.

Готовність до ШІ

Наскільки репозиторій оснащений для розробки та супроводу за участі ШІ-агентів? Має свідомо малу вагу (4%): агентний інструментарій — реальний сигнал супроводу, але репозиторій без нього все одно може отримати 100/100.

75Добрий · 4% загального індексу

Контекст і настанови для агентів

85Відмінний
Як обчислюється оцінка
45/45Інструкції для агентів — CLAUDE.md
0/15Машиночитана документація (llms.txt)
40/40Читабельна історія комітів — намір зазначено у 44 з 51 людських комітів (структурований заголовок або пояснювальний текст)
Використані вхідні дані
has_llms_txtні
llms_txt_url—
legible_history_share0,863
agent_instruction_filesCLAUDE.md
agent_instruction_max_bytes6 410

Цикл верифікації (збірка / тести / перевірка типів)

64Помірний
Як обчислюється оцінка
0/18Розгортання однією командою
22/22Автоматизовані тести
11/11Конфігурація лінтера / форматера — pyproject.toml ([tool.ruff])
11/11Статична перевірка типів — src/worldevals/py.typed
10/10Відтворюване середовище — lockfile
10/10Підтверджена практика роботи з агентами — 37 з останніх 52 комітів створено агентом або з його зазначенням
0/8Автоматизоване супроводження — автоматичних оновлень залежностей не виявлено
0/10OpenSSF Scorecard: Pinned-Dependencies — dependency not pinned by hash detected -- score normalized to 0
Використані вхідні дані
has_nixні
has_testsтак
lockfilesuv.lock
has_dockerfileні
typed_languageні
bootstrap_files—
has_devcontainerні
has_linter_configтак
typecheck_configssrc/worldevals/py.typed
agent_commit_share0,712
toolchain_manifests—
dependency_bot_commit_share0

Читабельність коду для моделей

82Відмінний
Як обчислюється оцінка
27/45Типізований код — Python з конфігурацією перевірки типів (src/worldevals/py.typed)
55/55Керовані розміри файлів — 0/6 файлів вихідного коду понад 60 КБ
Використані вхідні дані
primary_languagePython
largest_source_bytes4 760
source_files_sampled6
oversized_source_files0

Ключові факти

7зірок GitHub
2контриб'юторів
52комітів за останні 12 місяців
3днів від останнього пушу
3релізів
1бас-фактор
1відкритих issue
PyPIпакетних екосистем

Попередження щодо збору даних

  • Star history unavailable: GitHub GraphQL error: Resource not accessible by personal access token
  • pypi download statistics for 'worldevals' unavailable this scan (stats endpoint failed after retries); adoption may be under-evidenced
  • OSV advisory lookup failed: [Errno 101] Network is unreachable

Докладніше

Історія зірок і форків 0 ★ / 5 ⇿
0Зірки
5Форки
1Релізи

Коли додано кожну зірку й форк — зібрано з GitHub і згруповано за днями. Кумулятивне зростання розміщено просто над денними додаваннями, з яких воно складається, тож їх видно одне проти одного: рівномірне органічне накопичення виглядає зовсім інакше, ніж різкий короткочасний сплеск. Там, де цю різницю можна виміряти, її подано як автентичність росту.

12345512026-072026-082026-09
Мажорні 0Мінорні 0Патчі 1
OpenSSF Scorecard 3.9 / 10
3.9сукупно

Незалежна, не прив'язана до інструментів оцінка безпеки від відкритого проєкту OpenSSF Scorecard. Кожна перевірка винагороджує практику безпеки, а не інструмент конкретного постачальника. Перевірки, які Scorecard не зміг визначити, позначено н/д і виключено з оцінки безпеки (вони ніколи не зараховуються як нуль).Scorecard v5.5.0 · 2026-09-14 17:34 UTC

10Binary-Artifactsno binaries found in the repo
4Branch-Protectionbranch protection is not maximal on development and all release branches
10CI-Tests20 out of 20 merged PRs checked by a CI test -- score normalized to 10
0CII-Best-Practicesno effort to earn an OpenSSF best practices badge detected
0Code-ReviewFound 1/19 approved changesets -- score normalized to 0
0Contributorsproject has 0 contributing companies or organizations -- score normalized to 0
10Dangerous-Workflowno dangerous workflow patterns detected
0Dependency-Update-Toolno update tool detected
0Fuzzingproject is not fuzzed
10Licenselicense file detected
0Maintainedproject was created within the last 90 days. Please review its contents carefully
10Packagingpackaging workflow detected
0Pinned-Dependenciesdependency not pinned by hash detected -- score normalized to 0
1SASTSAST tool is not run on all commits -- score normalized to 1
0Security-Policysecurity policy file not detected
н/дSigned-Releasesno releases found
0Token-Permissionsdetected GitHub workflow tokens with excessive permissions
9Vulnerabilities1 existing vulnerabilities detected
Прямі залежності 1
РеєстрПакетОбмеження версіїМаніфест
PyPIinspect-robots>=0.3pyproject.toml
Усі залежності 68

Повний розв'язаний набір залежностей із графа залежностей GitHub: 1 прямих і 67 непрямих (транзитивних) пакетів. Транзитивне замикання є повним, коли в репозиторії закомічено lockfile.

РеєстрПакетВерсіяЗв'язок
PyPIinspect-robots0.3.1пряма
PyPIast-serialize0.6.0непряма
PyPIbabel2.18.0непряма
PyPIbackrefs7.0непряма
PyPIbeautifulsoup44.15.0непряма
PyPIcertifi2026.6.17непряма
PyPIcfgv3.5.0непряма
PyPIcharset-normalizer3.4.7непряма
PyPIclick8.4.2непряма
PyPIcolorama0.4.6непряма
PyPIcoverage7.15.0непряма
PyPIdistlib0.4.3непряма
PyPIexceptiongroup1.3.1непряма
PyPIfilelock3.29.4непряма
PyPIghp-import2.1.0непряма
PyPIgriffelib2.1.0непряма
PyPIidentify2.6.19непряма
PyPIidna3.18непряма
PyPIiniconfig2.3.0непряма
PyPIjinja23.1.6непряма
PyPIlibrt0.12.0непряма
PyPImarkdown3.10.2непряма
PyPImarkdown-it-py3.0.0непряма
PyPImarkdownify1.2.3непряма
PyPImarkupsafe3.0.3непряма
PyPImdformat0.7.22непряма
PyPImdformat-tables1.0.0непряма
PyPImdurl0.1.2непряма
PyPImergedeep1.3.4непряма
PyPImkdocs1.6.1непряма
PyPImkdocs-autorefs1.4.4непряма
PyPImkdocs-gen-files0.6.0непряма
PyPImkdocs-get-deps0.2.2непряма
PyPImkdocs-llmstxt0.5.0непряма
PyPImkdocs-material9.7.6непряма
PyPImkdocs-material-extensions1.3.1непряма
PyPImkdocstrings1.0.4непряма
PyPImkdocstrings-python2.0.5непряма
PyPImypy2.1.0непряма
PyPImypy-extensions1.1.0непряма
PyPInodeenv1.10.0непряма
PyPInumpy2.2.6непряма
PyPInumpy2.4.6непряма
PyPInumpy2.5.0непряма
PyPIpackaging26.2непряма
PyPIpaginate0.5.7непряма
PyPIpathspec1.1.1непряма
PyPIplatformdirs4.10.0непряма
PyPIpluggy1.6.0непряма
PyPIpre-commit4.6.0непряма
PyPIpygments2.20.0непряма
PyPIpymdown-extensions11.0.1непряма
PyPIpytest9.1.1непряма
PyPIpytest-cov7.1.0непряма
PyPIpython-dateutil2.9.0.post0непряма
PyPIpython-discovery1.4.2непряма
PyPIpyyaml6.0.3непряма
PyPIpyyaml-env-tag1.1непряма
PyPIrequests2.34.2непряма
PyPIruff0.15.20непряма
PyPIsix1.17.0непряма
PyPIsoupsieve2.8.4непряма
PyPItomli2.4.1непряма
PyPItyping-extensions4.16.0непряма
PyPIurllib32.7.0непряма
PyPIvirtualenv21.5.1непряма
PyPIwatchdog6.0.0непряма
PyPIwcwidth0.8.2непряма
Сповіщення про залежності не оцінено

Звірка сповіщень не відбулася для цього звіту: OSV advisory lookup failed: [Errno 101] Network is unreachable

Звіт у форматі JSON машиночитний

Зворотний зв’язок

Помітили щось хибне у цьому звіті або маєте чим поділитися? Неправильні вимірювання, непомічені інструменти, ідеї, запитання — усе доречно. Кожне повідомлення читається й отримує відповідь.

Повідомлення збережеться під час входу.

Пов’язані записи

Перевірені репозиторії, що мають спільні каталожні теги або екосистеми з robocurve/worldevals. Читати поруч →

86robocurve/inspect-robotsOpen source evals for physical AI. Run any LLM/VLA on any arm/humanoid against any real/sim benchmark.Відмінний95NVIDIA-NeMo/GymEvaluate and improve models and agents using environmentsВинятковий86MichaelGrupp/evoPython package for the evaluation of odometry and SLAMВідмінний78provael/provaelProvael — red-team open Vision-Language-Action (VLA) robot policies in simulation and report an Attack Success Rate (ASR). Prove it. Prevail.Добрий75OpenAdaptAI/openadapt-evalsWindows Agent Arena and GUI-agent evaluation for OpenAdapt. Live support surface. Install the product with pip install openadapt; this repo is the eval harness, including WAA.Добрий95copper-project/copper-rsCopper is an operating system for robots - build, run, and replay your entire robot deterministically.Винятковий

Оцінки — це сигнали, а не гарантії. Вони відображають публічно видимі практики на GitHub — це не аудит коду й не гарантія безпеки.

Відсутні дані виключаються, а ваги перенормовуються — нуль за відсутність ніколи не ставиться. Методологія версіонована й відкрита: метрики v2.10.0, схема v0.34.0 — повна методологія · вікі метрик.

Як окремий результат виглядає на тлі всього реєстру: сукупна статистика — PyPI.