あるRedditユーザーは、PDFをJSONに変換する試行錯誤を3ヶ月間行った末、解析にはDoclingを採用したが、その後のデータマッピング段階でPersistentな問題に直面していると報告している。このユーザーは、Doclingのマークダウン出力を特定のJSON形式に変換するために、ローカルのQwen 3.5-9Bモデルを使用している。

  • 主な失敗モードは、数値や金額の誤ったラベリング、および変更すべきでない値の置換が含まれる。
  • プロンプトエンジニアリングの試みは失敗に終わった。調整が新たな問題を生むだけで、汎用的な解決策にはならなかったためである。
  • ユーザーは、この問題はワークフロー自体の欠陥ではなく、ローカルLLMの能力における本質的な制限に起因すると推測している。

この投稿は、外部APIに依存せずにローカルモデルのみを使用してPDFから信頼性の高い構造化データ抽出を実現することの難しさを浮き彫りにしている。