arxiv arXiv cs.AI · baru saja · research

APEx mendistilasi pengalaman prosedural agen untuk penelitian mendalam yang adaptif

Diterjemahkan dari English → Bahasa Indonesia

Peneliti mengusulkan APEx, sebuah kerangka pemanfaatan pengalaman hierarkis yang mengorganisir riwayat interaksi menjadi memori trajektori tingkat instance dan keterampilan prosedural tingkat kategori untuk meningkatkan agen penelitian mendalam.

Sistem menggabungkan memori-memori ini melalui arsitektur loop tertutup yang terdiri dari modul Executor, Distiller, dan Planner.
Modul-modul ini dioptimalkan melalui paradigma pelatihan GRPO bergantian tiga tahap untuk distilasi keterampilan yang dipandu oleh reward.
Pada saat pengujian, keterampilan yang telah didistilasi berfungsi sebagai prior prosedural untuk adaptasi Planner online menggunakan pembelajaran penguatan saat pengujian yang dipandu oleh keterampilan.
Eksperimen pada 7 benchmark menunjukkan bahwa APEx melampaui GPT-5.4 sebesar 14,7 poin dan baseline penguat memori terkuat sebesar 3,0 poin.

APEx memungkinkan peningkatan diri tanpa ground-truth dengan regularisasi keselarasan keterampilan untuk mencegah drift kebijakan, mencapai kinerja terbaik pada pertanyaan kompleks.

Kepentingan 2/3 arXiv cs.AI AI agents Research paper

Artikel terkait

arxiv arXiv cs.CL · 2 jam lalu

APEx mendistilasi pengalaman prosedural agen untuk penelitian mendalam yang adaptif

Peneliti mengusulkan APEx, sebuah kerangka pemanfaatan pengalaman hierarkis yang dirancang untuk meningkatkan agen penelitian mendalam yang menjawab pertanyaan kompleks menggunakan alat eksternal. Sistem mengorganisir riwayat interaksi menjadi memori trajektori tingkat instans dan keterampilan prosedural tingkat kategori, menggabungkannya melalui arsitektur Executor, Distiller, dan Planner.

arxiv arXiv cs.LG · 21 jam lalu · 3 tayangan

CANOPY memungkinkan Qwen3-14B meraih puncak AppWorld dengan RL berbasis hasil akhir

Makalah ini memperkenalkan CANOPY (Coverage-ANchored On-PolicY RL), sebuah protokol yang mengatasi kelaparan sinyal dan pergeseran kebijakan dalam pembelajaran penguatan jangka panjang untuk model terbuka berukuran kecil. Dengan melakukan skalasi eksplorasi pada tugas yang sama dan menjaga pembaruan tetap terikat KL, metode ini memungkinkan agen belajar secara efektif hanya dari verifikasi di akhir tugas.

arxiv arXiv cs.CL · 2 hari lalu · 4 tayangan

WebWorld menggunakan browser sebagai model dunia untuk meningkatkan diri dalam kode web

Para penulis menyajikan WebWorld, sebuah antarmuka yang memungkinkan Model Visual-Bahasa (VLM) berinteraksi secara otonom dengan browser sebagai model dunia deterministik untuk kode web. Pendekatan ini mengatasi cacat struktural dalam peningkatan diri berbasis VLM di mana model menilai perbaikannya sendiri dengan memperkenalkan pihak lawan yang tidak dapat dibohongi.

media MarkTechPost · 3 hari lalu · 6 tayangan

Google merilis EnvHarness untuk mengadaptasi lingkungan agen statis guna pelatihan

Tim dari Google Cloud AI Research, Washington University di St. Louis, dan UNC Chapel Hill telah merilis EnvHarness, lapisan yang dapat diprogram yang mengubah benchmark agen statis menjadi dunia pelatihan adaptif. Sistem ini membungkus lingkungan yang ada menggunakan komponen plug-in yang beroperasi secara ketat melalui antarmuka reset() dan step() standar, memungkinkan lingkungan beradaptasi dengan pelatihan kebijakan tanpa mengubah simulator dasar atau verifier buatan manusia.

arxiv arXiv cs.CL · 7 hari lalu · 10 tayangan

JIT-Agent memungkinkan evolusi harness secara langsung untuk meningkatkan kinerja LLM agentic

Para penulis menyajikan JIT-Agent, sebuah model kecerdasan harness yang dilatih untuk mensintesis harness agen yang adaptif terhadap tugas untuk berbagai LLM agentic siap pakai. Pendekatan ini memformalkan harness agen sebagai artefak komposabel yang diatur oleh protokol empat modul tetap, memungkinkan sistem menyesuaikan dan memperbaiki harness secara langsung.