ServiceNow CoreAI memperkenalkan AutoSynthData, sebuah pipeline yang menghasilkan dan memvalidasi tugas pelatihan sintetis untuk agen perusahaan dengan memanfaatkan kegagalan model target dan keberhasilan guru yang lebih kuat. Sistem ini mengidentifikasi kesenjangan kemampuan melalui evaluasi diagnostik dan membuat tugas yang dapat dieksekusi dengan verifier untuk mengatasi kelemahan spesifik.
- Tugas didefinisikan oleh spesifikasi sistem, prompt pengguna, dan verifier yang memastikan kelayakan, realisme, dan kesulitan.
- Fase "target" menghasilkan sampel inti sementara fase "multiply" memperluasnya menjadi varian baru.
- Kontrol kualitas termasuk verifikasi positif/negatif dan perbaikan berbasis kritik untuk kandidat individu.
- Tinjauan tingkat batch memantau cakupan dan keragaman untuk mencegah representasi berlebihan dari keluarga tugas mudah.
Pendekatan ini memperlakukan generasi data sintetis sebagai pencarian di dekat batas kemampuan model, memungkinkan kurikulum bergeser menuju kesulitan yang tersisa seiring agen meningkat.