Hasil sama, hingga 24,1× lebih sedikit token.
Dengan Delta MCP, tugas dengan banyak langkah memakai jauh lebih sedikit token, lebih murah, dan selesai sama cepat atau lebih cepat, dengan hasil akhir yang sama, diperiksa langsung di layanannya. 8 skenario, masing-masing dijalankan dengan dan tanpa Delta MCP, di Claude Code dengan Sonnet 5.5.
lebih sedikit token yang ditagih pada tugas dengan banyak langkah
biaya lebih rendah pada tugas dengan banyak langkah, bahkan pada kasus cache yang paling ketat
lebih cepat pada tugas dengan banyak langkah, dan tidak ada skenario yang lebih lambat
tool yang masih dideklarasikan dan bisa dipanggil lewat Delta MCP
Setiap skenario, setiap angka
Mulai dari perbaikan rilis yang butuh 26 panggilan ke model tanpa Delta MCP, sampai satu pertanyaan saja. Rata-rata dari 2 sampai 3 percobaan per varian, dengan hasil akhir yang sama di setiap skenario. “Biaya terbobot” adalah biaya yang dilaporkan Claude Code per model, dalam setara token input, pada kasus cache yang paling ketat. “Sebagai kode” adalah default untuk setiap server; “sebagai teks” memakai adapter Cerberus.
| Tugas | Server | Token | Biaya terbobot | Panggilan ke model | Waktu | Diukur |
|---|---|---|---|---|---|---|
| Memperbaiki sebuah rilis, sebagai teks | Cerberus, 152 tool | 24,1× lebih sedikit | 8,1× lebih sedikit | 26 → 4,5 | 1,2× lebih cepat | 2 Okt |
| Menambahkan tes, sebagai teks | Cerberus, 152 tool | 15,8× lebih sedikit | 5,8× lebih sedikit | 16,6 → 4 | 2,0× lebih cepat | 2 Okt |
| Memperbaiki sebuah rilis, sebagai kode | Cerberus, 152 tool | 13,4× lebih sedikit | 6,1× lebih sedikit | 26 → 6,5 | sama cepat | 5 Okt* |
| Merapikan 20 tiket yang terlambat | Pengelola tiket | 4,8× lebih sedikit | 4,0× lebih sedikit | 5 → 2 | 4,4× lebih cepat | 2 Okt |
| Login, menambahkan 3 kontak, lalu menampilkan daftarnya | Microsoft Playwright MCP | 3,9× lebih sedikit | 1,8× lebih sedikit | 12,6 → 4 | 2,1× lebih cepat | 2 Okt |
| Membuat 6 perubahan pada daftar tugas | taskqueue-mcp | 3,3× lebih sedikit | 1,5× lebih sedikit | 5,6 → 2 | 2,1× lebih cepat | 2 Okt |
| Pertanyaan tentang dokumentasi | Context7 | 1,2× lebih sedikit | 1,11× lebih banyak | 4 → 3 | sama cepat | 5 Okt |
| Pertanyaan satu langkah | Playwright, books.toscrape.com | 1,25× lebih banyak | 2,5× lebih banyak | 4 → 3 | 1,1× lebih cepat | 5 Okt |
* Delta MCP diukur pada 5 Oktober, panggilan langsung pada 2 Oktober.
Hasilnya bertahan
Bertahan pada tugas yang belum pernah dilihatnya
Misi yang ditulis setelah penyetelan, dan tidak pernah dipakai untuk menyetelnya, memakai 3,7 sampai 4,1 kali lebih sedikit token.
Kualitas yang sama, diperiksa percobaan demi percobaan
Pada putaran terakhir, 26 dari 27 percobaan tanpa cela, dan yang ke-27 tidak berisi satu pun yang salah. Ke-103 percobaan dibaca satu per satu: teks yang persis, tidak ada kolom yang tersentuh secara keliru, jawaban yang benar untuk pengguna. Audit ini juga menemukan dua cacat yang terlewat oleh pemeriksaan otomatis, dan keduanya sudah diperbaiki.
Cara kami mengukur
Satu metode untuk setiap angka di halaman ini, dan setiap angka dapat ditelusuri ke percobaan mentahnya.
- Token yang ditagih, termasuk thinking, sebagaimana dihitung oleh penyedia.
- Percobaan hanya dihitung jika model yang diminta benar-benar yang melayaninya.
- Panggilan ke model adalah pesan-pesan terpisah dari model, bukan panggilan tool.
- Keberhasilan adalah keadaan akhir yang diperiksa di layanan, dan jawaban kepada pengguna.
- Biaya pada kasus cache yang paling ketat; setiap penghematan dibulatkan ke bawah.
- Setiap angka yang dipublikasikan punya entri di daftar klaim, dihitung ulang dari percobaan mentah.
Berikutnya: server MCP terbesar
Delta MCP akan diuji pada server MCP terbesar, dan hasilnya akan dipublikasikan saat Delta MCP dirilis. Jadilah yang pertama melihatnya.
Lanjut membaca
-
Cara mengurangi penggunaan token MCP, dan kenapa MCP boros
Cara mengurangi penggunaan token MCP: ukur dengan /context, lihat dua biayanya (daftar tool dan bolak-balik), dan bandingkan tiap solusi, termasuk Tool Search.
-
MCP vs CLI untuk agen AI: dari mana tagihan token berasal
MCP atau CLI untuk agen AI Anda? Biaya token masing-masing, hasil pengukuran, kapan CLI menang, kapan MCP menang, dan di mana kode mengalahkan keduanya.
-
Limit penggunaan Claude Code tercapai? Biaya server MCP Anda
Arti “You've hit your limit” di Claude Code (sesi, mingguan, Opus, pengeluaran), cara /usage menunjukkan biaya server MCP Anda, dan apa yang dipangkas dulu.
Ukur sendiri pada tugas Anda
Gratis, di komputer Anda. Delta MCP menghitung token yang berhasil dihemat untuk Anda.
Gratis · Tanpa akun · Chip Apple atau Intel
Gratis · Tanpa akun
Gratis · Tanpa akun
Untuk Mac, Windows, dan Linux. Tidak perlu akun.