GitNova

Сейсмограф GitHub — находки и рост интереса

facebookresearch/swe-sweep

Языковые моделиPython#ai#ai-agents#benchmark#benchmarking#harbor
Всего звёзд
57
Сегодня · UTC
+0с 00:20 UTC
Открыть на GitHub Мои находки →
Другие действия

How many bugs can LMs find & fix in large codebases?

Сохрани в «Мои находки», чтобы следить за релизами и ростом звёзд. Сохраняется в этом браузере.

О проекте

Бенчмарк для оценки LLM-агентов на реальных репозиториях: агент должен сам найти и исправить как можно больше багов, без подсказок об их типе и расположении. Обёртка над Harbor с подсчётом итогового счёта.

Чем пригодится
  • Прогнать агента на задаче из tasks/ и получить оценку исправленных багов
  • Сравнить патчи разных моделей через sweep info с флагом --per-task
  • Проверить окружение и зависимости командой sweep infra doctor

Пересказ README моделью DeepSeek V4.1 Flash. Может ошибаться в деталях.

0,8 Ровно Магнитуда из 10 — скорость роста интереса, а не оценка качества.

Рост звёзд выглядит естественно. Данные на 7 октября 2026, 03:17 UTC.

Оценка роста звёзд не подтверждает безопасность запуска.

Звёзды по дням

0122527 сентября 20267 октября 2026

Столбики — звёзды за день; линия — скользящее среднее доступной истории. При короткой истории оно ещё не задаёт надёжный обычный темп. Красным — дни всплесков.

Почему он в тренде

  • По замерам счётчика за 2026-10-07 (UTC), 00:20–03:14: 57 → 57 звёзд (+0). Это прирост за указанный интервал.
  • Репозиторию 6 дней, а у него уже 57 звёзд. Истории меньше двух недель, так что обычного темпа, с которым можно сравнить всплеск, у него ещё нет.
  • Hacker News: «Show HN: Benchmark: AI doesn't find bugs unless you tell it what's wrong» — 5 очков, 5 дней назад.
  • Среди свежих форков — заметные разработчики: @mbrukman (394 подп.).

Три GitHub-находки в каждом выпуске

Что делают, почему набирают интерес и что проверить перед использованием.

Выпуски в 10:00, 16:00, 22:00 МСК.

Поделиться в X Telegram

Цифры

Всего звёзд
57
Сегодня
+0 звёзд по замерам 2026-10-07, 00:20–03:14 UTC, к вечеру ≈ 1
Форков
5
Issues и pull requests
2
Наблюдателей
0
Язык
Python
Лицензия
MIT
Создан
1 октября 2026
Последний коммит
1 октября 2026

Доверие к звёздам

Рост выглядит естественно: форков и обсуждений столько, сколько бывает у живых проектов, а звёзды приходят неровно, как от людей.

Это эвристики, а не приговор: судим по поведению репозитория, а не по списку звездивших.

Обсуждения на Hacker News
Где замечен
Бейдж для README

Вставьте в README — бейдж сам показывает свежую магнитуду и ведёт на эту страницу.

GitNova: 0,8
[![GitNova](https://gitnova.dev/badge/facebookresearch/swe-sweep.svg)](https://gitnova.dev/r/facebookresearch/swe-sweep)