Бенчмарки

Тот же результат, до 24,1× меньше токенов.

С Delta MCP задачи из нескольких шагов тратят гораздо меньше токенов, стоят дешевле и выполняются так же быстро или быстрее, а итоговый результат тот же: его проверяют в самом сервисе. Сценариев: 8, каждый запускался с Delta MCP и без него, в Claude Code с Sonnet 5.5.

Последний прогон: 5 октября 2026 г.Delta MCP на GitHub

3,3–24,1×

меньше оплаченных токенов на задачах из нескольких шагов

1,4–8,1×

дешевле на задачах из нескольких шагов, даже в самом строгом случае работы кэша

до 4,4×

быстрее на задачах из нескольких шагов, и ни один сценарий не медленнее

152 / 152

инструментов по-прежнему объявлены и доступны для вызова через Delta MCP

Оплаченные токены на одну и ту же задачу Прямые вызовы MCPЧерез Delta MCP
  • Исправить релиз, в виде текстаCerberus, инструментов: 152
    24,1× меньше
  • Добавить тесты, в виде текстаCerberus, инструментов: 152
    15,8× меньше
  • Исправить релиз, в виде кодаCerberus, инструментов: 152
    13,4× меньше
  • Разобрать 20 просроченных тикетовМенеджер тикетов
    4,8× меньше
  • Войти, добавить 3 контакта и вывести их спискомMicrosoft Playwright MCP
    3,9× меньше
  • Внести 6 изменений в список задачtaskqueue-mcp
    3,3× меньше
  • Вопрос по документацииContext7
    1,2× меньше
  • Вопрос в один шагPlaywright, books.toscrape.com
    1,25× больше

Все сценарии, все цифры

От исправления релиза, на которое без Delta MCP уходит 26 обращений к модели, до одного вопроса. Средние значения по 2⁠–⁠3 прогонам на вариант, итоговый результат в каждом сценарии одинаковый. «Взвешенная стоимость» — стоимость, которую Claude Code сообщает по каждой модели, в эквиваленте входных токенов, в самом строгом случае работы кэша. «В виде кода» — режим по умолчанию для любого сервера; «в виде текста» использует адаптер Cerberus.

Задача Сервер Токены Взвешенная стоимость Обращения к модели Время Дата замера
Исправить релиз, в виде текста Cerberus, инструментов: 152 24,1× меньше 8,1× меньше 26 → 4,5 1,2× быстрее 2 октября
Добавить тесты, в виде текста Cerberus, инструментов: 152 15,8× меньше 5,8× меньше 16,6 → 4 2,0× быстрее 2 октября
Исправить релиз, в виде кода Cerberus, инструментов: 152 13,4× меньше 6,1× меньше 26 → 6,5 так же быстро 5 октября*
Разобрать 20 просроченных тикетов Менеджер тикетов 4,8× меньше 4,0× меньше 5 → 2 4,4× быстрее 2 октября
Войти, добавить 3 контакта и вывести их списком Microsoft Playwright MCP 3,9× меньше 1,8× меньше 12,6 → 4 2,1× быстрее 2 октября
Внести 6 изменений в список задач taskqueue-mcp 3,3× меньше 1,5× меньше 5,6 → 2 2,1× быстрее 2 октября
Вопрос по документации Context7 1,2× меньше 1,11× больше 4 → 3 так же быстро 5 октября
Вопрос в один шаг Playwright, books.toscrape.com 1,25× больше 2,5× больше 4 → 3 1,1× быстрее 5 октября

* Замер Delta MCP: 5 октября; прямых вызовов: 2 октября.

Результат выдерживает проверку

3,7–4,1×

Работает и на незнакомых задачах

Задания, написанные уже после настройки и ни разу не использованные для неё, потребовали в 3,7–4,1 раза меньше токенов.

26 / 27

То же качество, проверенное прогон за прогоном

В финальном раунде 26 прогонов из 27 прошли безупречно, а в 27-м не было ни слова неправды. Все 103 прогона прочитали вручную, один за другим: точные тексты, ни одного случайно затронутого поля, верный ответ пользователю. Аудит нашёл и два дефекта, которые пропустили автоматические проверки; теперь они исправлены.

Как мы измеряем

Один метод для каждой цифры на этой странице, и каждую можно проследить до сырых прогонов.

  • Оплаченные токены, включая токены на размышление, — так, как их считает провайдер.
  • Прогон засчитывается, только если его действительно выполнила запрошенная модель.
  • Обращения к модели — это отдельные сообщения от модели, а не вызовы инструментов.
  • Успех — это итоговое состояние, проверенное в сервисе, и ответ пользователю.
  • Стоимость — в самом строгом случае работы кэша; каждый выигрыш округляется вниз.
  • У каждой опубликованной цифры есть запись в реестре утверждений; её значение пересчитывается по сырым прогонам.
Появится к запуску

Дальше: самые большие MCP-серверы

Мы проверим Delta MCP на самых больших MCP-серверах и опубликуем результаты, когда приложение выйдет. Узнайте о них первыми.

Сообщите, когда выйдет

Читайте дальше

Измерьте на своих задачах

Бесплатно, на вашем компьютере. Delta MCP ведёт счёт токенам, которые он вам экономит.

Бесплатно · Без аккаунта · Чип Apple или Intel

Бесплатно · Без аккаунта

Бесплатно · Без аккаунта

Следить за запуском

Для Mac, Windows и Linux. Аккаунт не нужен.

Скоро

Delta MCP совсем скоро

Бесплатное приложение для Mac, Windows и Linux скоро выйдет. Оставьте почту, и вы узнаете о выходе в ту же минуту. Аккаунт не нужен.

Адрес нужен лишь для одного письма о выходе Delta MCP. Без рассылок. Конфиденциальность