arxiv arXiv cs.CL · baru saja · sumber: 1 hari lalu · research

R3Con menerapkan prinsip realisasi relevansi untuk meningkatkan penalaran skala besar

Diterjemahkan dari English → Bahasa Indonesia

Peneliti mengusulkan R3Con, sebuah harness yang mengoperasionalkan prinsip-prinsip teori kognitif untuk membangun representasi efektif dari konteks yang sangat besar. Sistem ini mengatasi tantangan merakit informasi saling bergantung yang tersebar di sumber-sumber luas melampaui batas konteks model standar.

Dievaluasi terhadap sembilan baseline pada dua benchmark untuk penalaran atas korpus dokumen besar.
Mengungguli baseline terkuat masing-masing sebesar 20 dan 8,4 poin persentase.
Memungkinkan model yang lebih kecil mengungguli yang lebih besar: R3Con dengan model 4B dan 9B mengalahkan semua baseline 35B yang dievaluasi.
R3Con dengan model 35B-A3B mengungguli Claude Code dengan Claude-Sonnet-5 pada biaya 3,7 kali lebih rendah.

Hasilnya menunjukkan bahwa representasi konteks yang mengikuti pendekatan berbasis prinsip ini dapat mengurangi ketergantungan pada skala model, mengarah pada kinerja tingkat depan yang didukung oleh model yang lebih kecil.

Kepentingan 2/3 Kerangka evaluasi baru dengan pembeda arXiv cs.CL Research paper Retrieval & RAG

Baca aslinya

Inversi ontologis: memori vektor lintas-model untuk pengarahan dan pengambilan

Sebuah prapublikasi oleh peneliti independen Jason Van Pham mengusulkan penerjemahan representasi kontinu antar model beku untuk memungkinkan pengarahan, pengambilan, dan penalaran tanpa pengeditan bobot. Karya ini memperkenalkan metode di mana konsep dikompilasi ke dalam arah residual di ruang satu model dan dipetakan melalui transformasi affine ke lapisan tersembunyi model lain.

arxiv arXiv cs.CL · 70 hari lalu · 22 tayangan

Kerangka kerja hibrida Apaf menganalisis wacana dalam kebijakan tata kelola bencana

Para penulis menyajikan Apaf, sebuah pipa LLM-simbolik hibrida yang mengoperasionalkan analisis wacana kritis sebagai kerangka argumentasi bipolar kuantitatif atas teks kebijakan. Argumen diklasifikasikan ke dalam bingkai deliberatif atau manajerial, dan empat subtipe hubungan yang dimediasi bingkai dihasilkan oleh aturan deterministik pada fitur yang diekstrak oleh LLM.

arxiv arXiv cs.CL · 70 hari lalu · 24 tayangan

Autoformalisasi Tingkat Teori: Dari Pernyataan Terisolasi ke Basis Pengetahuan Formal yang Terpadu

Makalah posisi ini berargumen untuk autoformalisasi tingkat teori, yang melibatkan formalisasi teori lengkap sebagai pustaka terstruktur daripada berfokus pada pernyataan individu.

arxiv arXiv cs.CL · 70 hari lalu · 17 tayangan

Penyetelan halus adaptif-korpus meningkatkan recall pengambilan skema SQL

Para penulis mengubah lima dataset teks-ke-SQL (Spider, BIRD, BEAVER, dan dua varian LiveSQLBench) menjadi tugas pengambilan tabel dan kolom untuk mengevaluasi pengaitan skema. Mereka mengusulkan penyetelan halus adaptif-korpus untuk embedder 305M-parameter, yang meningkatkan recall@10 rata-rata dari 60,4 menjadi 75,6.

arxiv arXiv cs.CL · 70 hari lalu · 24 tayangan

Tingkat POS mengurangi setengah data yang diperlukan untuk glossing interlinear otomatis Irabu Ryukyuan

Para peneliti mengimplementasikan pipeline anotasi neural untuk Irabu Ryukyuan guna mengotomatisasi pembuatan teks interlinear, mengatasi biaya tinggi dokumentasi manual. Studi ini mengevaluasi segmentasi morfem, penandaan POS, dan glossing menggunakan model BiLSTM-CRF kecil di bawah batasan ketat sekitar satu jam wacana yang dianotasi.