Para penulis mengusulkan ProgramTab, sebuah kerangka kerja yang membimbing model bahasa besar untuk melakukan pra-pemrosesan data tabel menggunakan kode Python untuk pembelajaran in-context.

  • Pendekatan ini mengatasi degradasi kinerja pada tabel besar yang disebabkan oleh kesulitan pemodelan teks panjang dan batas panjang input.
  • Ini mengatasi inkonsistensi struktural dari tabel web yang membuat kueri SQL tidak cocok untuk operasi logika matematika.
  • ProgramTab menggabungkan ekstraksi baris dan kolom dengan generasi SQL untuk mengekstrak konten penting dari data tabel.
  • Eksperimen pada dataset penalaran tabel menunjukkan bahwa ia mengungguli semua baseline berbasis LLM.

Kerangka kerja ini secara efektif menangani tugas penalaran berbasis tabel dengan memanfaatkan paradigma pemrograman alih-alih hanya mengandalkan konversi teks-SQL langsung.