Seorang pengguna Reddit melakukan putaran kedua "Döner Bench" untuk membandingkan bagaimana tingkat kuantisasi yang berbeda mempengaruhi kemampuan generasi kode model Qwen 3.6 dan Gemma 4.

  • Ujiannya melibatkan pembuatan file HTML dengan animasi canvas tusuk kebab berputar menggunakan prompt identik untuk setiap varian model.
  • Hasil dikumpulkan dengan menjalankan setiap kombinasi model dan kuantisasi sebanyak sembilan kali, memilih hasil subjektif terbaik sambil membuang loop atau timeout.
  • Qwen 3.6 27B IQ2 M menghasilkan beberapa hasil terbaik meskipun fidelitasnya lebih rendah, sementara Gemma 4 31B menunjukkan stabilitas bahkan pada kuantisasi IQ2 yang rendah.
  • Bitrate yang lebih tinggi seperti Q8 K XL umumnya mempertahankan lebih banyak "kehalusan" dalam animasi, sedangkan bit yang lebih rendah seperti IQ2 menyebabkan artefak visual atau ketidakstabilan.

Perbandingan ini menyoroti bagaimana kuantisasi mempengaruhi kualitas kode yang dihasilkan dan rendering untuk LLM lokal.