研究者は、伊良部琉球語の対訳テキストの自動作成を目的としたニューラル注釈パイプラインを実装し、手動ドキュメンテーションの高いコストに対処した。本研究は、約1時間の注釈済み談話という厳格な制約下で、小規模なBiLSTM-CRFモデルを用いて形態素分割、品詞タグ付け、および注釈の評価を行った。
- 正解の品詞タグは、5つのシード全体で平均して文法的注釈の精度を4.4ポイント向上させた。
- 品詞タグの恩恵は訓練データが減少するにつれて大きくなり、データ量を4分の1にした場合、11.6ポイントの向上をもたらした。
- 品詞階層により、特定の精度閾値に達するために必要な注釈済みデータの量が半減した。
- 完全自動化されたパイプラインでは、タグ付け器のエラーが現在これらの恩恵の実現を妨げているが、より高いタグ付け器の精度で回復が見込まれる。
著者は、危機に瀕した言語の自動ドキュメンテーションワークフローの効率を最大化するために、四重線注釈（テキスト、品詞、注釈、翻訳）を行うことを推奨している。