GitNova

Сейсмограф GitHub — находки и рост интереса

YuyaoGe/doc2harness

Языковые моделиPython#agent#benchmark#harness#llm#llm-agents
Всего звёзд
111
Сегодня · UTC
+1с 00:23 UTC
Открыть на GitHub Мои находки →
Другие действия

Official Code for the paper "Doc2Harness: Benchmarking LLMs on Long-Horizon Harness Engineering of Coding Agents "

Сохрани в «Мои находки», чтобы следить за релизами и ростом звёзд. Сохраняется в этом браузере.

О проекте

Официальный бенчмарк для оценки LLM по сборке harness кодинг-агентов: на этапе 1 модель по документу и скелету интерфейса реализует harness, на этапе 2 он проверяется в изолированном контейнере против scripted mock-модели на 94 сценариях.

Чем пригодится
  • Оценить существующий agent harness на 94 сценариях через mock-шлюз.
  • Собрать новый harness кодинг-агента по документу через Stage 1 pipeline.
  • Сравнить frontier-модели по pass rate на сценариях лидерборда.

Пересказ README моделью DeepSeek V4.1 Flash. Может ошибаться в деталях. Оригинал README →

0,7 Ровно Магнитуда из 10 — скорость роста интереса, а не оценка качества.

Рост звёзд выглядит естественно. Данные на 18 октября 2026, 11:14 UTC.

Оценка роста звёзд не подтверждает безопасность запуска.

Звёзды по дням

0255011 октября 202618 октября 2026

Столбики — звёзды за день UTC; линия — скользящее среднее доступной истории. Пропуски означают отсутствие данных, а не нулевой рост. Сегодняшний столбик неполный. Красным — дни всплесков.

Почему он в тренде

  • По замерам счётчика за 2026-10-18 (UTC), 00:23–11:12: 110 → 111 звёзд (+1). Это прирост за указанный интервал.
  • Расчётный прогноз на конец суток: около +2 звёзд; учитывает наблюдаемый прирост и предыдущий день.
  • Репозиторию 7 дней, а у него уже 111 звёзд. Истории меньше двух недель, так что обычного темпа, с которым можно сравнить всплеск, у него ещё нет.

Замеры роста: последние 7 полных дней

Новые звёзды за 7 дней: 111.

Замеры по дням · UTC
11 октября 2026
0
12 октября 2026
0
13 октября 2026
0
14 октября 2026
32
15 октября 2026
28
16 октября 2026
49
17 октября 2026
2

Максимальный измеренный день за последние 30 дней: 49 · 16 октября 2026. Дней с данными: 7.

Полные дни — из истории звёзд GitHub; сегодня и прогнозы исключены из сравнения. История проверена: 18 октября 2026, 11:14 UTC. Источники и ограничения замеров →

Три GitHub-находки в каждом выпуске

Что делают, почему набирают интерес и что проверить перед использованием.

Выпуски в 10:00, 16:00, 22:00 МСК.

Поделиться в X Telegram

Цифры

Всего звёзд
111
Сегодня
+1 звезда по замерам 2026-10-18, 00:23–11:12 UTC, к вечеру ≈ 2
Форков
1
Issues и pull requests
1
Наблюдателей
0
Язык
Python
Создан
11 октября 2026
Последний коммит
16 октября 2026

Доверие к звёздам

Рост выглядит естественно: форков и обсуждений столько, сколько бывает у живых проектов, а звёзды приходят неровно, как от людей.

Это эвристики, а не приговор: судим по поведению репозитория, а не по списку звездивших.

Где замечен
Бейдж для README

Вставьте в README — бейдж сам показывает свежую магнитуду и ведёт на эту страницу.

GitNova: 0,7
[![GitNova](https://gitnova.dev/badge/YuyaoGe/doc2harness.svg)](https://gitnova.dev/r/YuyaoGe/doc2harness)