Peneliti mengatasi diskontinuitas temporal dalam relighting video jangka panjang dengan membingkai ulang tugas sebagai terjemahan domain laten bersyarat temporal. Kerangka kerja ini menegakkan kontinuitas antar-chunk dengan menyebarkan latens domain target melintasi batas dan menggunakan self-conditioning domain target termask untuk membuat perilaku ini dapat dipelajari.

  • Menyebarkan latens domain target melintasi batas chunk untuk menjaga konsistensi temporal.
  • Menggunakan self-conditioning domain target termask, melatih model untuk melanjutkan dari konteks yang disebarkan dengan mask temporal.
  • Memperkenalkan prompting warm-start dengan jangkar prompt relight untuk menetapkan keadaan awal domain target.
  • Menyediakan antarmuka umum untuk relighting berbasis prompt menggunakan model generatif yang dapat dikontrol.

Eksperimen pada video jangka panjang di dunia nyata menunjukkan konsistensi temporal yang jauh lebih baik, dengan artefak batas chunk berkurang secara signifikan dan perubahan penampilan yang tidak diinginkan antar chunk sangat ditekan.