放射線報告書生成(RRG)は臨床的に正確なレポートを作成するために十分な医学知識が必要である。本論文では、各サンプル内に潜在的な知識を探求し、それをモデルに取り込むことに焦点を当てている。シーングラフはオブジェクトとそれらの関連属性との接続を確立し、豊富なコンテキスト知識と高レベルの視覚パターンを提供する。提案されたSGRRGフレームワークは、自動生成されたシーングラフをトランスフォーマーモデルと組み合わせて各サンプル内の貴重な知識を抽出し蒸留する。SGRRGは、グローバルおよびローカル情報から利益を得るために慎重に設計されたアーキテクチャを使用して柔軟性のある構造を形成する。
他の言語に翻訳
原文コンテンツから
arxiv.org
深掘り質問