media r/LocalLLaMA · 1 jam lalu · open_models

Pembaruan DeepSeek V4 Flash dengan skor Terminal Bench dan Toolathlon yang lebih baik

Diterjemahkan dari English → Bahasa Indonesia

DeepSeek telah memperbarui model V4 Flash-nya, merilis versi baru pada 2026-07-31 yang menunjukkan peningkatan kinerja signifikan dibandingkan pratinjau sebelumnya. Pembaruan ini memperkenalkan hasil untuk beberapa benchmark baru sambil meningkatkan skor pada yang sudah ada.

Skor Terminal Bench meningkat dari 56,9 menjadi 82,7 (catatan: benchmark berubah dari v2.0 ke v2.1).
Skor Toolathlon naik dari 51,8 menjadi 70,3.
Hasil benchmark baru mencakup NL2Repo (54,2), Cybergym (76,7), DeepSWE (54,4), Agent Last Exam (25,2), Automation Bench (25,1), DSBench-FullStack (68,7), dan DSBench-Hard (59,6).
Dibandingkan dengan GPT-5.6 Terra, V4 Flash unggul di Terminal Bench (+4,3) dan Toolathlon (+17,2), sementara Terra unggul di DeepSWE (+15,2) dan Agents' Last Exam (+25,2).

Pembaruan ini menyediakan versi model yang lebih mampu untuk tugas terkait agen, meskipun kinerja relatif terhadap pesaing seperti GPT-5.6 Terra tetap bervariasi tergantung pada benchmark spesifik.

Kepentingan 3/3 Mengungguli benchmark lab papan atas r/LocalLLaMA DeepSeek AI agents Benchmark results

Baca aslinya

DeepSeek V4-Flash mencapai 50 pada Indeks ArtificialAnalysis

Model DeepSeek V4-Flash baru telah meraih skor 50 pada Indeks ArtificialAnalysis. Hasil ini menempatkannya hanya satu poin di bawah GLM-5.2 dan GPT-5.6 Luna.

media r/LocalLLaMA · 1 jam lalu Langsung

DeepSeek-V4-Flash-0731 mengalahkan GLM 5.2 dengan biaya yang sama

Model DeepSeek-V4-Flash-0731 mengungguli GLM 5.2 sambil mempertahankan harga yang sama dengan pendahulunya.

media Don't Worry About the Vase · 2 hari lalu

Anthropic merilis Claude Opus 5 sebagai alternatif hemat biaya untuk Fable

Anthropic telah merilis Claude Opus 5, sebuah model yang dirancang untuk mencocokkan kinerja Claude Fable 5 dengan sekitar setengah harga per token sambil menawarkan klasifikator konten yang lebih permisif. Ini berfungsi sebagai model default baru di Claude Max dan opsi terkuat untuk pengguna Claude Pro.

media MarkTechPost · 3 hari lalu · 1 tayangan

Microsoft merilis MAI-Cyber-1-Flash, mendorong MDASH mencapai 95.95% pada CyberGym

Microsoft AI telah merilis MAI-Cyber-1-Flash, sebuah model yang mengkhususkan diri dalam keamanan siber dan berjalan di dalam kerangka kerja pemindaian agentic MDASH untuk meningkatkan deteksi kerentanan. Model ini adalah transformer Sparse Mixture-of-Experts dengan total 137B parameter dan 5B parameter aktif, yang diturunkan dari garis keturunan MAI-Code-1-Flash.

media MarkTechPost · 5 hari lalu · 2 tayangan

Sakana AI merilis titik akhir orkestrasi Fugu-Cyber dengan 86.9% pada CyberGym

Sakana AI telah merilis Fugu-Cyber, sebuah titik akhir yang dikhususkan untuk keamanan siber bagi keluarga orkestrator Fugu-nya, melaporkan tingkat keberhasilan 86.9% pada benchmark CyberGym dan 72.1% pada CTI-REALM.