Sebuah proyek yang menggunakan Arsif Online Their Finest Hour Online Archive dari Universitas Oxford mengevaluasi tiga pendekatan Pemrosesan Bahasa Alamiah (NLP)—Pengenalan Entitas Bernama, Ekstraksi Kata Kunci, dan Pemodelan Topik—untuk mengotomatisasi ekstraksi kata kunci secara skala besar. Studi ini menguji metode-metode tersebut di berbagai teknik, mulai dari model statistik tradisional hingga jaringan saraf AI generatif modern.
- Temuan kuantitatif dan kualitatif menunjukkan bahwa NLP menawarkan potensi nyata untuk penskalaan ekstraksi kata kunci dalam koleksi crowdsourced.
- Tidak ada satu metode pun yang memberikan solusi lengkap, dan pilihan model secara signifikan membentuk hasil.
- Model ekstrakif berbobot terbuka diidentifikasi sebagai yang paling cocok untuk penempatan yang bertanggung jawab.
- AI generatif memperkenalkan risiko akuntabilitas karena sifat abstraknya.
Para penulis berargumen bahwa ekstraksi kata kunci otomatis dalam koleksi crowdsourced menimbulkan tanggung jawab stewardship yang berbeda mengenai metadata yang dihasilkan oleh kontributor yang masih hidup.