API-данные требуют обновления · OpenRouter: 20.10.2026, 11:43 МСКПоследняя проверка была более 48 часов назад. Уточните тариф у поставщика.Источники и даты
EPOCH AI · ОТКРЫТЫЕ РЕЗУЛЬТАТЫ

SWE-bench Verified · Epoch

Исправление задач в репозиториях в окружении Epoch AI / Inspect.

Методика источника
33результатов / конфигураций
%доля решённых заданий
±1 SEошибка среднего, если известна
11.10.2026проверка выгрузки · устарела
Что учитывает этот рейтинг

Результат относится к модели вместе с окружением запуска. Не смешивается с таблицами других агентов и настроек SWE-bench. Обновление выгрузки не меняет дату старого теста. Места рассчитаны по всей таблице теста; поиск и сортировка их не меняют. Одинаковый результат означает одинаковое место. Оценки разных таблиц не усредняются.

33 результатаCSVСравнить модели
#Модель / разработчикГде использовать
1claude-opus-4-7_maxAnthropic
—
—
2gpt-5.5-pre-release_xhighOpenAI
—
—
3gemini-3.5-flash_highGoogle DeepMind
4claude-opus-4-6Anthropic
5glm-5.2_maxZ.ai (Zhipu AI)
Локально
6deepseek-v4-pro_maxDeepSeek
—
—
7qwen3.7-maxAlibaba
—
—
8gpt-5.4-2026-03-05_highOpenAI
—
—
9claude-opus-4-5-20251101Anthropic
9kimi-k2.6Moonshot
Локально
9qwen3.6-max-previewAlibaba
—
—
12gemini-3.1-pro-preview-customtoolsGoogle DeepMind
—
—
13gemini-3-flash-previewGoogle DeepMind
—
—
14claude-sonnet-4-6Anthropic
15gpt-5.3-codex_highOpenAI
—
—
16glm-5.1Z.ai (Zhipu AI)
—
—
17gpt-5.2-2025-12-11_highOpenAI
—
—
17kimi-k2.5Moonshot
—
—
19gpt-5-2025-08-07_highOpenAI
—
—
20claude-opus-4-1-20250805Anthropic
—
—
21gemini-3-pro-previewGoogle DeepMind
—
—
22glm-5Z.ai (Zhipu AI)
—
Локально
23gpt-5-2025-08-07_mediumOpenAI
—
—
24claude-sonnet-4-5-20250929Anthropic
25claude-opus-4-20250514Anthropic
—
—
Место 7
Результат
Популярность
Нет данных

Где использовать

—
Результат
Популярность
Нет данных

Где использовать

—
glm-5.1Z.ai (Zhipu AI)
Место 16
Результат
Популярность
Нет данных

Где использовать

—
kimi-k2.5Moonshot
Место 17
Результат
Популярность
Нет данных

Где использовать

—
gemini-3-pro-previewGoogle DeepMind
Место 21
Результат
Популярность
Нет данных

Где использовать

—

Наличие точной версии и режима в сервисе зависит от тарифа. Ссылки ведут к условиям продукта.

Как использовать этот рейтинг

Сначала найдите нужную версию и режим. Сравнивайте результаты в рамках одного теста и учитывайте дату. Небольшая разница в баллах при заметной ошибке среднего не доказывает превосходство модели.

Для Epoch выбран последний датированный запуск для каждого точного идентификатора, если источник содержит несколько записей. Средний результат переведён в проценты. Поле «лучший результат» не подставляется вместо среднего. Для Aider показана доля решённых задач после двух попыток на наборе из 225 заданий; версии оболочки и форматы правок доступны в подсказке к результату.

Подробнее о выборе по рейтингам

Источник: Epoch AI · CC BY 4.0. Изменения LLMXP: отбор записей, перевод подписей и единиц, сортировка. Задания и ответы моделей не публикуются.