レポート作成装置
【課題】医用画像のリンクを簡便且つ短時間で作成することができるレポート作成装置を提供する。
【解決手段】文章に含まれる各文字列が識別された読影レポートをレポート表示画面に表示し、医用画像を画像表示画面に表示しておき、ドラッグされた医用画像がドロップされると、そのドロップされた位置と文章中の各文字列の識別とに基づき、リンク付けする文字列の範囲を特定する。そして、特定された文字列範囲にドロップされた医用画像をリンク付けする。
【解決手段】文章に含まれる各文字列が識別された読影レポートをレポート表示画面に表示し、医用画像を画像表示画面に表示しておき、ドラッグされた医用画像がドロップされると、そのドロップされた位置と文章中の各文字列の識別とに基づき、リンク付けする文字列の範囲を特定する。そして、特定された文字列範囲にドロップされた医用画像をリンク付けする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、操作に対応して読影レポートを作成するとともに、医用画像をこの読影レポートにリンク付けするレポート作成装置に関する。
【背景技術】
【０００２】
Ｘ線ＣＴ装置、ＭＲＩ装置、超音波診断装置、及び核医学診断装置等の医用画像診断装置で発生した医用画像データは、画像を管理する画像サーバで管理されてネットワーク内の端末で閲覧できるようになっている。
【０００３】
一方で、医療行為は、専門分野が細分化されているため、これら画像診断装置で撮影した医用画像の読影は、専門医に依頼することが広く行われる。専門医たる読影医は、依頼された読影対象の医用画像を画像サーバから取得し、モニタに表示させて読影し、その読影結果を読影レポートにまとめる。
【０００４】
近年の電子化により読影レポートも電子化されており、読影レポートを電子データとして作成するレポート作成装置も提供されている。読影レポートの作成を支援するレポート作成装置では、画像サーバから医用画像を受信してモニタに表示する。読影医は、表示された医用画像を読影して、レポート作成装置に備えられたキーボードを用いて読影結果を記述する文字データを入力し、当該文字データをレポートに記録させる。
【０００５】
レポート作成装置では、医用画像を読影レポートにリンク付けする場合もある。レポート作成装置は、読影対象等の医用画像がマウスやキーボードを用いて指定されると、指定された医用画像を同じく指定した文字データにリンク付けする。リンク付けとは、具体的には、医用画像の保管先を示すパスを生成し、そのパスを指定された文字データに関連づけて記録する処理をいう（例えば、「特許文献１」参照。）。
【０００６】
このリンク付けの操作について図１１に基づき説明する。尚、一般的に、レポート作成装置には、読影レポートを表示する画面を有するモニタと医用画像を表示する画面を有するモニタが接続されている。リンク付けの操作についての説明は、２台のモニタを用いて読影及びレポートの作成をしている場合を例に説明するが、以下の医用画像及び読影レポート中の文字列との間のカーソル及び視点の移動は、１台のモニタを用いている場合であっても同様である。
【０００７】
図１１に示すように、読影医は、まず医用画像の表示画面に視点を移し（Ｓ１０１）、この医用画像の表示画面からリンク付けしようとする画像を選び出す（Ｓ１０２）。
【０００８】
次に、読影医は、マウスを操作してカーソルと視点とをレポート表示画面に移す（Ｓ１０３）。そして、レポート表示画面に用意されているリンク付け処理を開始させるボタンを押下して、リンク付けしようとする文字列の範囲をレポート表示画面から指定する（Ｓ１０４）。具体的には、リンク付けしようとする文字列の範囲をマウスのボタンを押下したままなぞる。
【０００９】
文字列の範囲を指定すると、読影医は、マウスを操作してカーソルと視点とを医用画像の表示画面に移す（Ｓ１０５）。そして、リンク付けしようとする医用画像をドラッグしつつ（Ｓ１０６）、マウスを操作してカーソルと視点とをレポート表示画面に移す（Ｓ１０７）。ドラッグとは、カーソルが所望する医用画像に重なった状態でマウスのボタンを押し、ボタンを押したままマウスを移動させる操作であり、マウス操作によって医用画像の移動を行う操作である。尚、ドロップとは、ドラッグした状態から別の場所でマウスのボタンを離す操作であり、医用画像の移動位置を確定する操作である。
【００１０】
選択した文字列の範囲にカーソルが移動すると、読影医は、マウスを操作して、ドラッグしていた医用画像をドロップする（Ｓ１０８）。
【００１１】
このように、リンク付けの操作における読影医の視点及びカーソルは、画像表示画面からレポート表示画面に移り、レポート表示画面から画像表示画面に戻り、再びレポート表示画面へ移る。即ち、リンク付けの操作における読影医の視点及びカーソルは、レポート表示画面と画像表示画面とを１．５往復しなければならない。従って、従来のリンク付け処理では、リンク作成の操作に忙殺されてしまい、読影作業に対する集中力を奪われてしまうおそれがある。
【先行技術文献】
【特許文献】
【００１２】
【特許文献１】特開２００５−３０１４５３号公報
【発明の概要】
【発明が解決しようとする課題】
【００１３】
本発明は、上記事情に鑑みてなされたものであり、その目的とするところは、医用画像のリンクを簡便且つ短時間で作成することができるレポート作成装置を提供することにある。
【課題を解決するための手段】
【００１４】
上記課題を解決するために、請求項１記載の発明は、操作手段を有し、この操作手段を用いた操作に応じて読影レポートに文字を記録するレポート作成装置であって、文章に含まれる各文字列が記述単位で識別された前記読影レポートを表示するレポート表示画面と医用画像を表示する画像表示画面とを有する表示手段と、前記操作手段を用いてドラッグされた前記医用画像がドロップされると、そのドロップされた位置と前記各文字列の前記識別とに基づき、リンク付けすべき文字列の範囲を特定する範囲指定手段と、前記範囲指定手段で特定された前記範囲に前記ドロップされた医用画像をリンク付けするリンク作成手段と、を備えること、を特徴とする。
【００１５】
前記読影レポートを前記レポート表示画面及び前記画像表示画面に表示させるレポート表示制御手段を更に備えるようにしてもよい（請求項２記載の発明に相当）。
【００１６】
前記範囲指定手段は、前記画像表示画面上に表示された前記所見エリアに前記ドロップがされると、そのドロップされた位置と前記各文字列の前記識別とに基づき、リンク付けする文字列の範囲を特定するようにしてもよい（請求項３記載の発明に相当）。
【００１７】
前記読影レポートを解析して前記文章に含まれる各文字列の前記記述単位での前記識別を行う構造解析手段を更に備えるようにしてもよい（請求項４記載の発明に相当）。
【００１８】
前前記範囲指定手段は、部位又は所見を示す前記記述単位毎に識別された文字列の各範囲のうち何れかを、前記リンク付けする文字列の範囲として特定するようにしてもよい（請求項５記載の発明に相当）。
【００１９】
前記各文字列の前記識別に基づき、リンク付けする文字列範囲の候補を前記表示手段に強調表示させる候補表示制御手段を更に備えるようにしてもよい（請求項６記載の発明に相当）。
【００２０】
前記候補表示手制御段は、前記操作手段を用いたドラッグの位置と前記各文字列の前記識別とに基づき特定される前記ドラッグの位置に表示された前記文字列範囲の候補を更に他の候補と識別して表示させるようにしてもよい（請求項７記載の発明に相当）。
【発明の効果】
【００２１】
本発明によれば、リンク付けしようとする文字列の範囲の指定操作を省くことができ、リンク付けのための操作におけるカーソル及び視点の移動は、画像表示画面からレポート表示画面への０．５往復で完了する。従って、１．５往復のカーソル及び視点の移動が必要だった従来と比べて、医用画像のリンク付けを簡便且つ短時間で行うことができ、リンク作成の操作に忙殺されることもなく、それによる読影作業に対する集中力の低下を防止することができる。
【００２２】
また、画像表示画面にも読影レポートが表示される所見エリアを配し、その所見エリアに医用画像をドラッグしてもリンク付けの処理が行われるようにすることで、リンク付けの操作における０．５往復のカーソル及び視点の移動距離も短縮され、リンク付けが更に簡便且つ短時間で行うことができる。
【図面の簡単な説明】
【００２３】
【図１】レポート作成装置が接続されたネットワークを示すブロック図である。
【図２】レポート作成装置の詳細な構成を示すブロック図である。
【図３】レポート作成装置の動作を示すフローチャートである。
【図４】レポート作成装置の動作を示すフローチャートである。
【図５】レポート作成装置の動作を示すフローチャートである。
【図６】読影レポートの所見欄を示す模式図である。
【図７】構造化データを示す模式図である。
【図８】表示部に表示される画面を示す模式図である。
【図９】表示部に表示される画面の一部分を拡大した模式図である。
【図１０】レポート作成装置のリンク付け処理を示す模式図である。
【図１１】従来のレポート作成装置のリンク付け処理を示すフローチャートである。
【発明を実施するための形態】
【００２４】
以下、本発明に係るレポート作成装置の好適な各実施形態について、図面を参照しながら詳細に説明する。
【００２５】
図１に示すように、レポート作成装置１は、ネットワークＮを介して画像サーバ２と接続されている。ネットワークＮには、更に画像診断装置３が接続されている。
【００２６】
レポート作成装置１及び画像サーバ２は、いわゆるコンピュータであり、それぞれ内部に演算制御部（ＣＰＵ：Central Processing Unit）、主記憶部（ＲＡＭ：Random Access Memory）、外部記憶部（ＨＤＤ：Hard Disk Drive）、通信コントローラを備え、共通線で接続して相互にデータ入出力可能としている。
【００２７】
更に、レポート作成装置１は、操作部１２と表示部１１ａ及び１１ｂを接続して構成されている。操作部１２は、コンピュータにキーボードやマウス等の操作手段である。表示部１１ａ及び１１ｂは、ＣＲＴディスプレイや液晶ディスプレイ等の２台のモニタからなる表示手段である。
【００２８】
それぞれの外部記憶部には、ＯＳ（オペレーティングシステム）及び各自のプログラムが記憶されている。通信コントローラは、ネットワークＮの接続線と接続され、例えばＷＷＷ（ワールド・ワイド・ウェブ）やＤＩＣＯＭ（Digital Imaging and COmmunications in Medicine）通信プロトコル、ＴＣＰ／ＩＰプロトコル等のデータ通信制御によりネットワークＮを介して行なうデータ通信を制御する。
【００２９】
画像診断装置３は、例えば、Ｘ線ＣＴ装置、ＭＲＩ装置、超音波診断装置、及び核医学診断装置等の所謂モダリティである。
【００３０】
このレポート作成装置１は、読影医に対して医用画像４の読影環境及び読影レポート５の作成環境を提供する。
【００３１】
医用画像４は、患者の体内画像である。医用画像４は、画像データと、そのヘッダに付帯した付帯情報とから構成されている。付帯情報には、この医用画像４に対するスタディインスタンスＵＩＤ、シリーズＵＩＤ、画像ＵＩＤ、患者ＵＩＤ等が記録されている。
【００３２】
画像データは、画像を構成する各画素の画素値で表わしたラスターデータや画像の領域内に配置される線や図形を関数で表わしたベクトルデータ、又はこれらを圧縮したデータである。スタディインスタンスＵＩＤは、医用画像４を撮影した診断毎に付与されて、当該診断を識別するＩＤである。シリーズＵＩＤは、医用画像４を撮影した１診断内で行われたスキャン毎に付与されて、当該スキャンを識別するＩＤである。画像ＵＩＤは、医用画像４を識別するＩＤである。患者ＵＩＤは、医用画像４を撮影した患者のＩＤである。
【００３３】
レポート作成装置１は、この医用画像４を保管先から取得して表示する。読影医が医用画像４を読影するためである。
【００３４】
医用画像４の保管先は、画像サーバ２である。医用画像４は、画像診断装置３で作成される。画像診断装置３は、患者を撮影して、その撮影結果を反映した医用画像４を作成する。画像診断装置３は、作成した医用画像４を画像サーバ２に送信する。画像サーバ２は、医用画像４を画像データベースに登録して保管しておく。
【００３５】
読影医は、医用画像４の読影を依頼されると、レポート作成装置１を操作して、画像サーバ２から医用画像４を取得させる。レポート作成装置１は、操作に従って読影対象の医用画像４の保管先にアクセスし、その保管先に存在する医用画像４を取得して表示する。
【００３６】
読影レポート５は、医用画像４を読影した結果が記述されたデータである。即ち、この読影レポート５は、診断情報と所見欄のデータとを含んで構成されている。診断情報は、読影レポート５に記述された所見の対象となる診断を示す情報であり、スタディインスタンスＵＩＤ、シリーズＵＩＤ、患者ＵＩＤ等が含まれる。所見欄のデータは、医用画像４を読影した結果が文字列として記録されたデータであり、そのフォーマットは、文字列を所定の単語単位に分割せずに直接連ねたテキストデータや、ＨＴＭＬデータやＸＭＬデータ等のマークアップ言語のデータである。
【００３７】
読影医が操作部１２を用いて文字を入力すると、レポート作成装置１は、その文字を読影レポート５に順に記録していく。また、読影医が操作部１２を用いて文字列にその意味内容を付与する操作を行うと、その文字列に意味内容を示す情報が関連づけられる。ＸＭＬデータの場合には、指定された文字列を囲んで要素タグ６１（図７参照）とその終端タグが記録される。
【００３８】
図２は、このレポート作成装置１の詳細な構成を示すブロック図である。
【００３９】
図２に示すように、表示部１１ａは、レポート表示画面１１０を表示する一方のモニタである。表示部１１ｂは、画像表示画面を表示する他方のモニタである。レポート表示画面１１０は、読影レポート５を表示する画面であり、読影レポート５に記録されたデータが反映される。画像表示画面は、医用画像４を表示する画面である。
【００４０】
また、レポート作成装置１は、画像取得部１３と記憶部１４とレポート作成部１５とを有している。画像取得部１３は、主に演算制御部と通信インターフェースにより構成される。記憶部１４は、主に主記憶部及び外部記憶部により構成される。レポート作成部１５は、主に演算制御部により構成される。
【００４１】
画像取得部１３は、読影を依頼された診断に対するスタディインスタンスＵＩＤを含んだ画像取得コマンドを画像サーバ２に送信し、画像サーバ２から送られてきた医用画像４を受信する。
【００４２】
画像取得コマンドは、例えばクエリー／リトリーブ等のコマンドである。読影を依頼された診断に対するスタディインスタンスＵＩＤは、予めレポート作成装置１や画像サーバ２に診断情報に含められて記憶されている。診断情報は、スタディインスタンスＵＩＤの他、患者氏名や診断日時や依頼医等の選択するための情報を含んでいる。
【００４３】
例えば、レポート作成装置１を起動させたとき、表示部１１ａは、読影を依頼されている診断に対する診断情報の一覧を表示する。画像取得部１３は、この一覧から操作部１２を用いて選択された診断情報に含まれるスタディインスタンスＵＩＤを画像取得コマンドに含める。
【００４４】
画像サーバ２は、スタディインスタンスＵＩＤと画像ＵＩＤとを関連づけたデータベースを記憶している。画像サーバ２は、レポート作成装置１から送信されてきたスタディインスタンスＵＩＤに関連づけられた画像ＵＩＤに対応する医用画像４を規定された保管先から取得する。医用画像４の保管先は、予めそのパスが規則に従って定められている。例えば、医用画像４は、￥￥画像サーバ２／画像フォルダ／患者ＵＩＤを冠するフォルダ／スタディインスタンスＵＩＤを冠するフォルダ／画像ＵＩＤ４２３というように、予め規則に定められた階層中に保管されている。
【００４５】
記憶部１４は、画像取得部１３が取得した医用画像４や読影レポート５や構造化データ６（図７参照）等の各種データを記憶する。
【００４６】
レポート作成部１５は、押下された文字キーに対応する入力信号をキーボードから受け取り、この入力信号に対応づけられた文字を読影レポート５の所見欄に記録していく。
【００４７】
また、このレポート作成装置１は、構造解析部１６と範囲指定部１７とリンク作成部１８と表示制御部１９とを有する。構造解析部１６と範囲指定部１７とリンク作成部１８と表示制御部１９は、主に演算制御部により構成され、外部記憶部に記憶されたプログラムを演算制御部が実行することで機能する。
【００４８】
構造解析部１６は、読影レポート５の所見欄に記述された文章を解析することで、その文章を構造化し、文章に含まれている各文字列を識別する。構造解析部１６は、構造化の結果として、図７に示す構造化データ６を作成する。構造解析部１６は、構造化の結果である構造化データ６を記憶部１４に記憶させる。
【００４９】
構造解析には、いわゆるテキストマイニング技術（山岸宏匡ら”テキストマイニング技術を用いた読影レポートの記述単位による構造化”、日本医用画像工学会（ＪＡＭＩＴ）誌、ＭＥＤＩＣＡＬ ＩＭＡＧＩＮＧ ＴＥＣＨＮＯＬＯＧＹ Ｖｏｌ．２３ Ｎｏ．５ Ｎｏｖｅｍｂｅｒ ２００５、３２８頁乃至３３２ページ参照）を利用する。
【００５０】
即ち、構造解析部１６による各文字列の識別は、文章を記述単位の文字列に分割し、各記述単位の文字列に意味内容に基づく種別を付与する処理である。記述単位の文字列に分割する処理は、文章を形態素解析することにより最小の単語単位に分割し、各単語の係り具合を解析して記述単位の文字列に統合する処理を含む。
【００５１】
意味内容に基づく種別は、部位を表わす部位単語、部位単語を修飾する部位修飾単語、部位に対する所見と診断を表わす所見単語、所見単語を修飾する所見修飾単語である。さらに、１センテンス毎に断定度を付与する。部位単語と部位修飾単語は、纏めて一つの記述単位としてもよく、所見単語と所見修飾単語も纏めて一つの記述単位としてもよい。
【００５２】
この意味内容に基づく種別としては、例えば、図７に示すように、その記述単位の意味内容を示す要素タグ６１である。構造解析部１６は、記述単位の文字列を構造化データ６に列記して、その列記した各記述単位の文字列を囲むように、その意味内容を表わす要素タグ６１を追記する。即ち、識別の実体は、例えば各文字列を囲む要素タグ６１である。
【００５３】
この構造解析部１６は、予め部位単語、部位修飾単語、所見単語、所見修飾単語となる単語をその種別毎に記録した辞書データを有する。構造解析部１６は、文章の先頭から所定長の文字列を文字数を増加させながら取得していき、辞書データに存在する各単語とマッチングする。文字列が辞書データに存在すると、その該当の文字列を一つの単語として分割する。文字列を分割すると、その文字列の次の文字から、文字列の取得とマッチングと単語分割を繰り返していく。
【００５４】
尚、上述のように、構造化データ６は、例えばＸＭＬデータ等の文字列を意味内容で識別したマークアップ言語のデータである。読影レポート５に記述された各文字列が部位単語、部位修飾単語、所見単語、及び所見修飾単語の何れかを表わす要素タグ６１で識別されている場合には、この構造解析は行わない。
【００５５】
また、構造解析部１６は、各記述単位の文字列が出現する読影レポート５内での始まりと長さをカウントし、図７に示す位置情報６２として構造化データ６に更に記録していく。この位置情報６２の記録は、読影レポート５が文字列を意味内容で識別したマークアップ言語で記述されていても行われる。
【００５６】
範囲指定部１７は、構造解析部１６が作成した構造化データ６又は文字列を意味内容で識別したマークアップ言語で記述された読影レポート５を用いて、医用画像４をリンク付けする範囲を特定する。特定する範囲は、医用画像４をドロップしたときのカーソルの座標を含む領域に表示されている文字列である。その文字列の範囲は、記述単位であり、構造化データ６又は読影レポート５の要素タグ６１で識別された範囲である。
【００５７】
この範囲指定部１７は、読影レポート５の表示位置と、各記述単位の文字列に関連づけられた位置情報６２、即ち各記述単位の出現開始位置と長さとから、各記述単位の文字列が表示される座標範囲を計算しておく。ドラッグ中は、カーソルの座標を含んでいる座標範囲に表示される記述単位の文字列の探索を行い、医用画像４がドロップされたときに、その探索された記述単位の文字列をリンク付けする範囲として特定する。
【００５８】
尚、各記述単位の文字列が表示される座標範囲の計算の一環として、範囲指定部１７が位置情報６２を作成するようにしてもよい。
【００５９】
リンク作成部１８は、ドロップされた医用画像４を範囲指定部１７が指定した範囲の文字列にリンク付けする。リンク付けは、医用画像４の保管先を示すＵＲＬ等のパスを文字列に関連づけるものである。
【００６０】
医用画像４の保管先を示すパスは、規則に従って生成する。即ち、例えば「ｈｔｔｐ：／／画像サーバ２／画像フォルダ」以下に、／リンク付けする医用画像４の付帯情報に付帯した患者ＵＩＤ／リンク付けする医用画像４の付帯情報に付帯したスタディインスタンスＵＩＤ／リンク付けする医用画像４の付帯情報に付帯した画像ＵＩＤを結合することでパスを生成する。そして、ハイパーリンク要素のタグで文字列を囲み、このタグに医用画像４のＵＲＬ属性を追加する。
【００６１】
リンク付けの態様としては、その他、リンク付けされた医用画像４のパスと、リンク付けされた文字列の位置情報６２とを記録したデータを読影レポート５に関連づけて別途生成するようにしてもよい。
【００６２】
表示制御部１９は、画像取得部１３が取得した医用画像４を表示部１１ｂに表示させる。また、表示制御部１９は、読影レポート５をレポート表示画面１１０に配置して表示部１１ａに表示させるとともに、このレポート表示画面１１０に表示されている読影レポート５を、表示部１１ｂの画像表示画面にも表示させるレポート表示制御手段ともなる（図８参照）。
【００６３】
レポート表示画面１１０のフォーマットは、予め記憶部１４に記憶されている。表示制御部１９は、このフォーマットに読影レポート５や診断情報をレイアウトすることで、レポート表示画面１１０が作成され、表示部１１ａに表示される。
【００６４】
また、表示制御部１９は、リンク付けされる文字列範囲の候補を強調表示させる候補表示制御手段ともなる（図９参照）。この候補は、構造化データ６又は文字列を意味内容で識別したマークアップ言語の読影レポート５で識別される記述単位の文字列である。
【００６５】
また、表示制御部１９は、ドラッグ中にカーソルが何れかの記述単位の文字列にマウスオーバされると、その記述単位の文字列を更に異なる態様で強調表示させる。
【００６６】
強調表示は、例えば、その文字列を枠で囲む、又はその文字列の色を変更する等である。文字列範囲の候補としての強調表示が文字列のハイライト表示であれば、マウスオーバを契機とする強調表示は文字列を枠で囲む態様とする。表示部１１ｂに表示される読影レポート５に対しても、文字キーの押下の反映を行い、さらにリンク付けされる文字列範囲の候補を強調表示させる。マウスオーバを契機とする強調表示は、範囲指定部１７によるカーソルの座標を含んでいる座標範囲に表示される記述単位の文字列の探索結果を用いる。
【００６７】
このようなレポート作成装置１の動作を説明する。図３〜図５は、このレポート作成装置１の動作を示すフローチャートである。
【００６８】
図３に示すように、まず、読影医が操作部１２を用いて、読影を依頼された診断に対する診断情報の一覧から一つを選択すると（Ｓ０１）、画像取得部１３は、この選択された診断情報に含まれるスタディインスタンスＵＩＤとともに検索コマンドを画像サーバ２に送信する（Ｓ０２）。
【００６９】
画像サーバ２は、データベースを参照してスタディインスタンスＵＩＤに関連づけられている画像ＵＩＤを探索し、この画像ＵＩＤが付与された医用画像４を取得する。そして、画像サーバ２は、取得した医用画像４をレポート作成装置１に送信する。
【００７０】
画像取得部１３は、レポート作成装置１にネットワークＮを介して送られた医用画像４を取得する（Ｓ０３）。
【００７１】
表示制御部１９は、受信した医用画像４を記憶部１４から読み出して、表示部１１ｂに表示させる（Ｓ０４）。また、表示制御部１９は、表示部１１ａに表示される読影レポート５を表示部１１ｂにも表示させる（Ｓ０５）。
【００７２】
その後、読影医が操作部１２を用いて文字のキー入力を行うと（Ｓ０６，Ｙｅｓ）、図４に示すように、レポート作成部１５は、そのキー入力を反映した文字を読影レポート５に記録し（Ｓ０７）、表示制御部１９は、その読影レポート５を表示部１１ａ及び１１ｂに表示させる（Ｓ０８）。
【００７３】
構造解析部１６は、文字のキー入力が行われると、テキストマイニング技術を用いた読影レポート５の構造解析を行うことで、読影レポート５の構造化データ６を作成していく（Ｓ０９）。この構造解析部１６による構造解析は、文字のキー入力が行われる度に、キー入力により新たに記述された文字を含むセンテンスについてやり直すようにしてもよい。尚、読影レポート５が文字列を意味内容で識別したマークアップ言語で表わされる場合には、このＳ０９の処理は省略される。
【００７４】
表示制御部１９は、表示部１１ａ及び１１ｂに読影レポート５を表示させる際、構造化データ６又は文字列を意味内容で識別したマークアップ言語で表わされた読影レポート５で要素タグ６１等により識別されている各文字列を強調表示させる（Ｓ１０）。
【００７５】
更に、構造解析部１６は、構造化データ６又は読影レポート５に記述された各記述単位の文字列の文章中の出現開始位置及び長さをカウントして位置情報６２を作成し（Ｓ１１）、範囲指定部１７は、カウントした出現開始位置及び長さで示される位置情報６２と読影レポート５の表示位置とから各記述単位の文字列の座標範囲を計算しておく（Ｓ１２）。
【００７６】
読影医が操作部１２を用いて医用画像４を選択し、表示部１１ａ又は１１ｂに表示されている読影レポート５の文章中にドラッグすると（Ｓ１３，Ｙｅｓ）、図５に示すように、範囲指定部１７は、カーソルの座標を取得する（Ｓ１４）。そして、範囲指定部１７は、各記述単位の文字列の座標範囲から、取得した座標を含むものを検索する（Ｓ１５）。表示制御部１９は、該当する座標範囲に対応する文字列を強調表示させる（Ｓ１６）。
【００７７】
読影医が操作部１２を用いて医用画像４をドロップすると（Ｓ１７，Ｙｅｓ）、リンク作成部１８は、ドロップされた医用画像４に付帯する付帯情報を用いて当該医用画像４の保管先を示すパスを生成し（Ｓ１８）、Ｓ１５の検索により該当した座標範囲に対応する文字列に関連づける（Ｓ１９）。
【００７８】
このＳ０６〜Ｓ１９は、操作部１２を用いて終了の処理に対応するボタンを押下するまで繰り返される（Ｓ２０，Ｎｏ）。尚、終了の処理に対応するボタンが押下されると、レポート作成装置１は、Ｓ０１〜Ｓ２０のレポート作成処理を終了させる。
【００７９】
このようなレポート作成装置１の作用を説明する。まず、図６は、読影レポート５の所見欄を示す模式図である。図７は、構造化データを示す模式図である。
【００８０】
図６に示すように、読影レポート５には、「右Ｓ４胸膜下にも淡い１ｃｍ程度のＧＧＯ。左下葉に古い炎症後の策状影あり、前回と変化なし。」との記述がテキストデータとして存在するものとする。構造解析部１６の辞書データには、部位単語として「右Ｓ４胸膜下」、「左下葉」、所見単語として「ＧＧＯ」、「策状影」等が登録されているものとする。
【００８１】
構造解析部１６は、この文章を単語単位で分解していくことで、第１文は「右Ｓ４胸膜下」、「にも」、「淡い」、「１ｃｍ程」、「の」、「ＧＧＯ」、及び「。（句点）」の各単語を取得する。第２文については、「左下葉」、「にも」、「古い」、「炎症後」、「の」、「策状影」、「あり」、及び「。（句点）」の各単語を取得する。
【００８２】
単語単位で分解すると、構造解析部１６は、更に構造解析を進めることで、この第１文を「右Ｓ４胸膜下」、「にも」、「淡い１ｃｍ程のＧＧＯ」の記述単位に構造化する。第２文については、「左下葉」、「に」、「古い炎症後の策状影あり」の記述単位に構造化する。
【００８３】
図７に示すように、構造解析が終了すると、構造解析部１６は、第１文については、辞書データに部位単語として登録されている「胸膜下」を含む「右Ｓ４胸膜下」に部位単語を示す情報である要素タグ６１を関連づけ、辞書データに所見単語として登録されている「ＧＧＯ」を含む「淡い１ｃｍ程のＧＧＯ」に所見単語を示す情報である要素タグ６１を関連づけて、構造化データ６に記録しておく。また、第２文については、辞書データに部位単語として登録されている「左下葉」に部位単語を示す要素タグ６１を関連づけ、辞書データに所見単語として登録されている「策状影」を含む「古い炎症後の策状影あり」に所見単語を示すタグ要素６１を関連づけ、構造化データ６に記録しておく。
【００８４】
更に、構造解析部１６は、構造解析部１６に記録した各記述単位の読影レポート５における開始位置及び長さをカウントし、これらを示す位置情報６２を対応する記述単位の記録に関連づけておく。図７に示すように、例えば、「右Ｓ４胸膜下」なる記述単位の文字列には、開始位置が１番目であることを示す「Ｓｔａｒｔ＝１」、長さが６文字であることを示す「ｌｅｎｇｔｈ＝６」なる位置情報６２を関連づける。
【００８５】
この作成した構造化データ６は、記憶部１４に記憶させておく。読影レポート５が既に文字列を意味内容で識別したマークアップ言語で記述されている等により構造化されている場合には、位置情報６２の算出のみを行い、位置情報６２のみを記憶部１４に記憶させておく。
【００８６】
図８は、表示部１１ａ及び表示部１１ｂに表示される画面を示す模式図である。また、図９は、表示部１１ｂに表示される画面の一部分を拡大した模式図である。
【００８７】
図８に示すように、レポート表示画面１１０は、診断情報を記載する診断情報フィールド１１１と所見欄を記載する所見エリア１１２で区切られている。診断情報フィールド１１１には、医用画像４の取得のために一覧から選択された診断情報が配置される。所見エリア１１２には、読影レポート５の所見欄に記述された文章が配置される。
【００８８】
また、表示部１１ｂには、記憶部１４に記憶された医用画像４が並べて表示される。読影レポート５の所見欄は、表示部１１ｂの画面上にもオーバーレイ表示される。
【００８９】
図９に示すように、読影レポート５の記述のうち、リンク付けの文字列範囲の候補は、ハイライト表示５１で飾られる。第１文に含まれる文字列範囲の候補と第２文に含まれる文字列範囲の候補とは、異なる色のハイライト表示５１で飾られる（図中では斜線と太線で区別）。
【００９０】
この文字列範囲の候補は、表示制御部１９により、記憶部１４から読み出された構造化データ６に記述された各記述単位の文字列に相当する箇所である。ハイライト表示５１は、表示制御部１９による強調表示である。
【００９１】
表示制御部１９による各記述単位の文字列に相当する箇所は、構造化データ６に記述された各記述単位の文字列で読影レポート５を走査させることで探索してもよいし、位置情報６２で示される範囲としてもよい。
【００９２】
図１０は、このレポート作成装置１のリンク付け処理を示す模式図である。
【００９３】
図１０に示すように、操作部１２を用いてリンク付けしようとする医用画像４をクリックし（図中Ａ）、表示部１１ｂにも表示された読影レポート５中の文字列にドラッグすると、文字列範囲の候補のうち、カーソルが入っているものが更に枠で囲まれることにより、強調表示される。この状態で操作部１２を用いて医用画像４をドロップすると、ドロップされたときにカーソルが入っていた文字列範囲が範囲指定され、この範囲に記述された文字列に医用画像４がリンク付けされる（図中Ｂ）。
【００９４】
枠で囲む強調表示は、範囲指定部１７が、構造化データ６に記述された各記述単位の文字列の領域のうちのカーソルの座標を含むものを探索した結果である。リンク付けする文字列範囲の指定も同様に、範囲指定部１７が、構造化データ６に記述された各記述単位の文字列の領域のうちのカーソルの座標を含むものを探索した結果である。
【００９５】
このように、このレポート作成装置１のリンク付け処理によると、リンク付けしようとする文字列の範囲の指定操作を省くことができ、リンク付けのための操作におけるカーソル及び視点の移動は、画像表示画面からレポート表示画面１１０への０．５往復で完了する。従って、１．５往復のカーソル及び視点の移動が必要だった従来と比べて、医用画像４のリンク付けを簡便且つ短時間で行うことができ、リンク作成の操作に忙殺されることもなく、それによる読影作業に対する集中力の低下を防止することができる。
【００９６】
また、このレポート作成装置１では、画像表示画面にも読影レポート５が表示される所見エリア１１２を描画し、その所見エリア１１２に医用画像４をドラッグしてもリンク付けの処理が行われるようにしたため、リンク付けの操作における０．５往復のカーソル及び視点の移動距離も短縮され、リンク付けが更に簡便且つ短時間で行うことができる。
【００９７】
尚、上述の実施形態では、各画面をそれぞれの表示部１１ａ及び１１ｂに表示する場合を説明したが、１つの表示部を用いて各画面を表示する場合にも適用される。
【符号の説明】
【００９８】
１ レポート作成装置
２ 画像サーバ
３ 画像診断装置
４ 医用画像
５ 読影レポート
６ 構造化データ
６１ 要素タグ
６２ 位置情報
１１ａ 表示部
１１ｂ 表示部
１１０ レポート表示画面
１１１ 診断情報フィールド
１１２ 所見エリア
１２ 操作部
１３ 画像取得部
１４ 記憶部
１５ レポート作成部
１６ 構造解析部
１７ 範囲指定部
１８ リンク作成部
１９ 表示制御部
Ｎ ネットワーク
【技術分野】
【０００１】
本発明は、操作に対応して読影レポートを作成するとともに、医用画像をこの読影レポートにリンク付けするレポート作成装置に関する。
【背景技術】
【０００２】
Ｘ線ＣＴ装置、ＭＲＩ装置、超音波診断装置、及び核医学診断装置等の医用画像診断装置で発生した医用画像データは、画像を管理する画像サーバで管理されてネットワーク内の端末で閲覧できるようになっている。
【０００３】
一方で、医療行為は、専門分野が細分化されているため、これら画像診断装置で撮影した医用画像の読影は、専門医に依頼することが広く行われる。専門医たる読影医は、依頼された読影対象の医用画像を画像サーバから取得し、モニタに表示させて読影し、その読影結果を読影レポートにまとめる。
【０００４】
近年の電子化により読影レポートも電子化されており、読影レポートを電子データとして作成するレポート作成装置も提供されている。読影レポートの作成を支援するレポート作成装置では、画像サーバから医用画像を受信してモニタに表示する。読影医は、表示された医用画像を読影して、レポート作成装置に備えられたキーボードを用いて読影結果を記述する文字データを入力し、当該文字データをレポートに記録させる。
【０００５】
レポート作成装置では、医用画像を読影レポートにリンク付けする場合もある。レポート作成装置は、読影対象等の医用画像がマウスやキーボードを用いて指定されると、指定された医用画像を同じく指定した文字データにリンク付けする。リンク付けとは、具体的には、医用画像の保管先を示すパスを生成し、そのパスを指定された文字データに関連づけて記録する処理をいう（例えば、「特許文献１」参照。）。
【０００６】
このリンク付けの操作について図１１に基づき説明する。尚、一般的に、レポート作成装置には、読影レポートを表示する画面を有するモニタと医用画像を表示する画面を有するモニタが接続されている。リンク付けの操作についての説明は、２台のモニタを用いて読影及びレポートの作成をしている場合を例に説明するが、以下の医用画像及び読影レポート中の文字列との間のカーソル及び視点の移動は、１台のモニタを用いている場合であっても同様である。
【０００７】
図１１に示すように、読影医は、まず医用画像の表示画面に視点を移し（Ｓ１０１）、この医用画像の表示画面からリンク付けしようとする画像を選び出す（Ｓ１０２）。
【０００８】
次に、読影医は、マウスを操作してカーソルと視点とをレポート表示画面に移す（Ｓ１０３）。そして、レポート表示画面に用意されているリンク付け処理を開始させるボタンを押下して、リンク付けしようとする文字列の範囲をレポート表示画面から指定する（Ｓ１０４）。具体的には、リンク付けしようとする文字列の範囲をマウスのボタンを押下したままなぞる。
【０００９】
文字列の範囲を指定すると、読影医は、マウスを操作してカーソルと視点とを医用画像の表示画面に移す（Ｓ１０５）。そして、リンク付けしようとする医用画像をドラッグしつつ（Ｓ１０６）、マウスを操作してカーソルと視点とをレポート表示画面に移す（Ｓ１０７）。ドラッグとは、カーソルが所望する医用画像に重なった状態でマウスのボタンを押し、ボタンを押したままマウスを移動させる操作であり、マウス操作によって医用画像の移動を行う操作である。尚、ドロップとは、ドラッグした状態から別の場所でマウスのボタンを離す操作であり、医用画像の移動位置を確定する操作である。
【００１０】
選択した文字列の範囲にカーソルが移動すると、読影医は、マウスを操作して、ドラッグしていた医用画像をドロップする（Ｓ１０８）。
【００１１】
このように、リンク付けの操作における読影医の視点及びカーソルは、画像表示画面からレポート表示画面に移り、レポート表示画面から画像表示画面に戻り、再びレポート表示画面へ移る。即ち、リンク付けの操作における読影医の視点及びカーソルは、レポート表示画面と画像表示画面とを１．５往復しなければならない。従って、従来のリンク付け処理では、リンク作成の操作に忙殺されてしまい、読影作業に対する集中力を奪われてしまうおそれがある。
【先行技術文献】
【特許文献】
【００１２】
【特許文献１】特開２００５−３０１４５３号公報
【発明の概要】
【発明が解決しようとする課題】
【００１３】
本発明は、上記事情に鑑みてなされたものであり、その目的とするところは、医用画像のリンクを簡便且つ短時間で作成することができるレポート作成装置を提供することにある。
【課題を解決するための手段】
【００１４】
上記課題を解決するために、請求項１記載の発明は、操作手段を有し、この操作手段を用いた操作に応じて読影レポートに文字を記録するレポート作成装置であって、文章に含まれる各文字列が記述単位で識別された前記読影レポートを表示するレポート表示画面と医用画像を表示する画像表示画面とを有する表示手段と、前記操作手段を用いてドラッグされた前記医用画像がドロップされると、そのドロップされた位置と前記各文字列の前記識別とに基づき、リンク付けすべき文字列の範囲を特定する範囲指定手段と、前記範囲指定手段で特定された前記範囲に前記ドロップされた医用画像をリンク付けするリンク作成手段と、を備えること、を特徴とする。
【００１５】
前記読影レポートを前記レポート表示画面及び前記画像表示画面に表示させるレポート表示制御手段を更に備えるようにしてもよい（請求項２記載の発明に相当）。
【００１６】
前記範囲指定手段は、前記画像表示画面上に表示された前記所見エリアに前記ドロップがされると、そのドロップされた位置と前記各文字列の前記識別とに基づき、リンク付けする文字列の範囲を特定するようにしてもよい（請求項３記載の発明に相当）。
【００１７】
前記読影レポートを解析して前記文章に含まれる各文字列の前記記述単位での前記識別を行う構造解析手段を更に備えるようにしてもよい（請求項４記載の発明に相当）。
【００１８】
前前記範囲指定手段は、部位又は所見を示す前記記述単位毎に識別された文字列の各範囲のうち何れかを、前記リンク付けする文字列の範囲として特定するようにしてもよい（請求項５記載の発明に相当）。
【００１９】
前記各文字列の前記識別に基づき、リンク付けする文字列範囲の候補を前記表示手段に強調表示させる候補表示制御手段を更に備えるようにしてもよい（請求項６記載の発明に相当）。
【００２０】
前記候補表示手制御段は、前記操作手段を用いたドラッグの位置と前記各文字列の前記識別とに基づき特定される前記ドラッグの位置に表示された前記文字列範囲の候補を更に他の候補と識別して表示させるようにしてもよい（請求項７記載の発明に相当）。
【発明の効果】
【００２１】
本発明によれば、リンク付けしようとする文字列の範囲の指定操作を省くことができ、リンク付けのための操作におけるカーソル及び視点の移動は、画像表示画面からレポート表示画面への０．５往復で完了する。従って、１．５往復のカーソル及び視点の移動が必要だった従来と比べて、医用画像のリンク付けを簡便且つ短時間で行うことができ、リンク作成の操作に忙殺されることもなく、それによる読影作業に対する集中力の低下を防止することができる。
【００２２】
また、画像表示画面にも読影レポートが表示される所見エリアを配し、その所見エリアに医用画像をドラッグしてもリンク付けの処理が行われるようにすることで、リンク付けの操作における０．５往復のカーソル及び視点の移動距離も短縮され、リンク付けが更に簡便且つ短時間で行うことができる。
【図面の簡単な説明】
【００２３】
【図１】レポート作成装置が接続されたネットワークを示すブロック図である。
【図２】レポート作成装置の詳細な構成を示すブロック図である。
【図３】レポート作成装置の動作を示すフローチャートである。
【図４】レポート作成装置の動作を示すフローチャートである。
【図５】レポート作成装置の動作を示すフローチャートである。
【図６】読影レポートの所見欄を示す模式図である。
【図７】構造化データを示す模式図である。
【図８】表示部に表示される画面を示す模式図である。
【図９】表示部に表示される画面の一部分を拡大した模式図である。
【図１０】レポート作成装置のリンク付け処理を示す模式図である。
【図１１】従来のレポート作成装置のリンク付け処理を示すフローチャートである。
【発明を実施するための形態】
【００２４】
以下、本発明に係るレポート作成装置の好適な各実施形態について、図面を参照しながら詳細に説明する。
【００２５】
図１に示すように、レポート作成装置１は、ネットワークＮを介して画像サーバ２と接続されている。ネットワークＮには、更に画像診断装置３が接続されている。
【００２６】
レポート作成装置１及び画像サーバ２は、いわゆるコンピュータであり、それぞれ内部に演算制御部（ＣＰＵ：Central Processing Unit）、主記憶部（ＲＡＭ：Random Access Memory）、外部記憶部（ＨＤＤ：Hard Disk Drive）、通信コントローラを備え、共通線で接続して相互にデータ入出力可能としている。
【００２７】
更に、レポート作成装置１は、操作部１２と表示部１１ａ及び１１ｂを接続して構成されている。操作部１２は、コンピュータにキーボードやマウス等の操作手段である。表示部１１ａ及び１１ｂは、ＣＲＴディスプレイや液晶ディスプレイ等の２台のモニタからなる表示手段である。
【００２８】
それぞれの外部記憶部には、ＯＳ（オペレーティングシステム）及び各自のプログラムが記憶されている。通信コントローラは、ネットワークＮの接続線と接続され、例えばＷＷＷ（ワールド・ワイド・ウェブ）やＤＩＣＯＭ（Digital Imaging and COmmunications in Medicine）通信プロトコル、ＴＣＰ／ＩＰプロトコル等のデータ通信制御によりネットワークＮを介して行なうデータ通信を制御する。
【００２９】
画像診断装置３は、例えば、Ｘ線ＣＴ装置、ＭＲＩ装置、超音波診断装置、及び核医学診断装置等の所謂モダリティである。
【００３０】
このレポート作成装置１は、読影医に対して医用画像４の読影環境及び読影レポート５の作成環境を提供する。
【００３１】
医用画像４は、患者の体内画像である。医用画像４は、画像データと、そのヘッダに付帯した付帯情報とから構成されている。付帯情報には、この医用画像４に対するスタディインスタンスＵＩＤ、シリーズＵＩＤ、画像ＵＩＤ、患者ＵＩＤ等が記録されている。
【００３２】
画像データは、画像を構成する各画素の画素値で表わしたラスターデータや画像の領域内に配置される線や図形を関数で表わしたベクトルデータ、又はこれらを圧縮したデータである。スタディインスタンスＵＩＤは、医用画像４を撮影した診断毎に付与されて、当該診断を識別するＩＤである。シリーズＵＩＤは、医用画像４を撮影した１診断内で行われたスキャン毎に付与されて、当該スキャンを識別するＩＤである。画像ＵＩＤは、医用画像４を識別するＩＤである。患者ＵＩＤは、医用画像４を撮影した患者のＩＤである。
【００３３】
レポート作成装置１は、この医用画像４を保管先から取得して表示する。読影医が医用画像４を読影するためである。
【００３４】
医用画像４の保管先は、画像サーバ２である。医用画像４は、画像診断装置３で作成される。画像診断装置３は、患者を撮影して、その撮影結果を反映した医用画像４を作成する。画像診断装置３は、作成した医用画像４を画像サーバ２に送信する。画像サーバ２は、医用画像４を画像データベースに登録して保管しておく。
【００３５】
読影医は、医用画像４の読影を依頼されると、レポート作成装置１を操作して、画像サーバ２から医用画像４を取得させる。レポート作成装置１は、操作に従って読影対象の医用画像４の保管先にアクセスし、その保管先に存在する医用画像４を取得して表示する。
【００３６】
読影レポート５は、医用画像４を読影した結果が記述されたデータである。即ち、この読影レポート５は、診断情報と所見欄のデータとを含んで構成されている。診断情報は、読影レポート５に記述された所見の対象となる診断を示す情報であり、スタディインスタンスＵＩＤ、シリーズＵＩＤ、患者ＵＩＤ等が含まれる。所見欄のデータは、医用画像４を読影した結果が文字列として記録されたデータであり、そのフォーマットは、文字列を所定の単語単位に分割せずに直接連ねたテキストデータや、ＨＴＭＬデータやＸＭＬデータ等のマークアップ言語のデータである。
【００３７】
読影医が操作部１２を用いて文字を入力すると、レポート作成装置１は、その文字を読影レポート５に順に記録していく。また、読影医が操作部１２を用いて文字列にその意味内容を付与する操作を行うと、その文字列に意味内容を示す情報が関連づけられる。ＸＭＬデータの場合には、指定された文字列を囲んで要素タグ６１（図７参照）とその終端タグが記録される。
【００３８】
図２は、このレポート作成装置１の詳細な構成を示すブロック図である。
【００３９】
図２に示すように、表示部１１ａは、レポート表示画面１１０を表示する一方のモニタである。表示部１１ｂは、画像表示画面を表示する他方のモニタである。レポート表示画面１１０は、読影レポート５を表示する画面であり、読影レポート５に記録されたデータが反映される。画像表示画面は、医用画像４を表示する画面である。
【００４０】
また、レポート作成装置１は、画像取得部１３と記憶部１４とレポート作成部１５とを有している。画像取得部１３は、主に演算制御部と通信インターフェースにより構成される。記憶部１４は、主に主記憶部及び外部記憶部により構成される。レポート作成部１５は、主に演算制御部により構成される。
【００４１】
画像取得部１３は、読影を依頼された診断に対するスタディインスタンスＵＩＤを含んだ画像取得コマンドを画像サーバ２に送信し、画像サーバ２から送られてきた医用画像４を受信する。
【００４２】
画像取得コマンドは、例えばクエリー／リトリーブ等のコマンドである。読影を依頼された診断に対するスタディインスタンスＵＩＤは、予めレポート作成装置１や画像サーバ２に診断情報に含められて記憶されている。診断情報は、スタディインスタンスＵＩＤの他、患者氏名や診断日時や依頼医等の選択するための情報を含んでいる。
【００４３】
例えば、レポート作成装置１を起動させたとき、表示部１１ａは、読影を依頼されている診断に対する診断情報の一覧を表示する。画像取得部１３は、この一覧から操作部１２を用いて選択された診断情報に含まれるスタディインスタンスＵＩＤを画像取得コマンドに含める。
【００４４】
画像サーバ２は、スタディインスタンスＵＩＤと画像ＵＩＤとを関連づけたデータベースを記憶している。画像サーバ２は、レポート作成装置１から送信されてきたスタディインスタンスＵＩＤに関連づけられた画像ＵＩＤに対応する医用画像４を規定された保管先から取得する。医用画像４の保管先は、予めそのパスが規則に従って定められている。例えば、医用画像４は、￥￥画像サーバ２／画像フォルダ／患者ＵＩＤを冠するフォルダ／スタディインスタンスＵＩＤを冠するフォルダ／画像ＵＩＤ４２３というように、予め規則に定められた階層中に保管されている。
【００４５】
記憶部１４は、画像取得部１３が取得した医用画像４や読影レポート５や構造化データ６（図７参照）等の各種データを記憶する。
【００４６】
レポート作成部１５は、押下された文字キーに対応する入力信号をキーボードから受け取り、この入力信号に対応づけられた文字を読影レポート５の所見欄に記録していく。
【００４７】
また、このレポート作成装置１は、構造解析部１６と範囲指定部１７とリンク作成部１８と表示制御部１９とを有する。構造解析部１６と範囲指定部１７とリンク作成部１８と表示制御部１９は、主に演算制御部により構成され、外部記憶部に記憶されたプログラムを演算制御部が実行することで機能する。
【００４８】
構造解析部１６は、読影レポート５の所見欄に記述された文章を解析することで、その文章を構造化し、文章に含まれている各文字列を識別する。構造解析部１６は、構造化の結果として、図７に示す構造化データ６を作成する。構造解析部１６は、構造化の結果である構造化データ６を記憶部１４に記憶させる。
【００４９】
構造解析には、いわゆるテキストマイニング技術（山岸宏匡ら”テキストマイニング技術を用いた読影レポートの記述単位による構造化”、日本医用画像工学会（ＪＡＭＩＴ）誌、ＭＥＤＩＣＡＬ ＩＭＡＧＩＮＧ ＴＥＣＨＮＯＬＯＧＹ Ｖｏｌ．２３ Ｎｏ．５ Ｎｏｖｅｍｂｅｒ ２００５、３２８頁乃至３３２ページ参照）を利用する。
【００５０】
即ち、構造解析部１６による各文字列の識別は、文章を記述単位の文字列に分割し、各記述単位の文字列に意味内容に基づく種別を付与する処理である。記述単位の文字列に分割する処理は、文章を形態素解析することにより最小の単語単位に分割し、各単語の係り具合を解析して記述単位の文字列に統合する処理を含む。
【００５１】
意味内容に基づく種別は、部位を表わす部位単語、部位単語を修飾する部位修飾単語、部位に対する所見と診断を表わす所見単語、所見単語を修飾する所見修飾単語である。さらに、１センテンス毎に断定度を付与する。部位単語と部位修飾単語は、纏めて一つの記述単位としてもよく、所見単語と所見修飾単語も纏めて一つの記述単位としてもよい。
【００５２】
この意味内容に基づく種別としては、例えば、図７に示すように、その記述単位の意味内容を示す要素タグ６１である。構造解析部１６は、記述単位の文字列を構造化データ６に列記して、その列記した各記述単位の文字列を囲むように、その意味内容を表わす要素タグ６１を追記する。即ち、識別の実体は、例えば各文字列を囲む要素タグ６１である。
【００５３】
この構造解析部１６は、予め部位単語、部位修飾単語、所見単語、所見修飾単語となる単語をその種別毎に記録した辞書データを有する。構造解析部１６は、文章の先頭から所定長の文字列を文字数を増加させながら取得していき、辞書データに存在する各単語とマッチングする。文字列が辞書データに存在すると、その該当の文字列を一つの単語として分割する。文字列を分割すると、その文字列の次の文字から、文字列の取得とマッチングと単語分割を繰り返していく。
【００５４】
尚、上述のように、構造化データ６は、例えばＸＭＬデータ等の文字列を意味内容で識別したマークアップ言語のデータである。読影レポート５に記述された各文字列が部位単語、部位修飾単語、所見単語、及び所見修飾単語の何れかを表わす要素タグ６１で識別されている場合には、この構造解析は行わない。
【００５５】
また、構造解析部１６は、各記述単位の文字列が出現する読影レポート５内での始まりと長さをカウントし、図７に示す位置情報６２として構造化データ６に更に記録していく。この位置情報６２の記録は、読影レポート５が文字列を意味内容で識別したマークアップ言語で記述されていても行われる。
【００５６】
範囲指定部１７は、構造解析部１６が作成した構造化データ６又は文字列を意味内容で識別したマークアップ言語で記述された読影レポート５を用いて、医用画像４をリンク付けする範囲を特定する。特定する範囲は、医用画像４をドロップしたときのカーソルの座標を含む領域に表示されている文字列である。その文字列の範囲は、記述単位であり、構造化データ６又は読影レポート５の要素タグ６１で識別された範囲である。
【００５７】
この範囲指定部１７は、読影レポート５の表示位置と、各記述単位の文字列に関連づけられた位置情報６２、即ち各記述単位の出現開始位置と長さとから、各記述単位の文字列が表示される座標範囲を計算しておく。ドラッグ中は、カーソルの座標を含んでいる座標範囲に表示される記述単位の文字列の探索を行い、医用画像４がドロップされたときに、その探索された記述単位の文字列をリンク付けする範囲として特定する。
【００５８】
尚、各記述単位の文字列が表示される座標範囲の計算の一環として、範囲指定部１７が位置情報６２を作成するようにしてもよい。
【００５９】
リンク作成部１８は、ドロップされた医用画像４を範囲指定部１７が指定した範囲の文字列にリンク付けする。リンク付けは、医用画像４の保管先を示すＵＲＬ等のパスを文字列に関連づけるものである。
【００６０】
医用画像４の保管先を示すパスは、規則に従って生成する。即ち、例えば「ｈｔｔｐ：／／画像サーバ２／画像フォルダ」以下に、／リンク付けする医用画像４の付帯情報に付帯した患者ＵＩＤ／リンク付けする医用画像４の付帯情報に付帯したスタディインスタンスＵＩＤ／リンク付けする医用画像４の付帯情報に付帯した画像ＵＩＤを結合することでパスを生成する。そして、ハイパーリンク要素のタグで文字列を囲み、このタグに医用画像４のＵＲＬ属性を追加する。
【００６１】
リンク付けの態様としては、その他、リンク付けされた医用画像４のパスと、リンク付けされた文字列の位置情報６２とを記録したデータを読影レポート５に関連づけて別途生成するようにしてもよい。
【００６２】
表示制御部１９は、画像取得部１３が取得した医用画像４を表示部１１ｂに表示させる。また、表示制御部１９は、読影レポート５をレポート表示画面１１０に配置して表示部１１ａに表示させるとともに、このレポート表示画面１１０に表示されている読影レポート５を、表示部１１ｂの画像表示画面にも表示させるレポート表示制御手段ともなる（図８参照）。
【００６３】
レポート表示画面１１０のフォーマットは、予め記憶部１４に記憶されている。表示制御部１９は、このフォーマットに読影レポート５や診断情報をレイアウトすることで、レポート表示画面１１０が作成され、表示部１１ａに表示される。
【００６４】
また、表示制御部１９は、リンク付けされる文字列範囲の候補を強調表示させる候補表示制御手段ともなる（図９参照）。この候補は、構造化データ６又は文字列を意味内容で識別したマークアップ言語の読影レポート５で識別される記述単位の文字列である。
【００６５】
また、表示制御部１９は、ドラッグ中にカーソルが何れかの記述単位の文字列にマウスオーバされると、その記述単位の文字列を更に異なる態様で強調表示させる。
【００６６】
強調表示は、例えば、その文字列を枠で囲む、又はその文字列の色を変更する等である。文字列範囲の候補としての強調表示が文字列のハイライト表示であれば、マウスオーバを契機とする強調表示は文字列を枠で囲む態様とする。表示部１１ｂに表示される読影レポート５に対しても、文字キーの押下の反映を行い、さらにリンク付けされる文字列範囲の候補を強調表示させる。マウスオーバを契機とする強調表示は、範囲指定部１７によるカーソルの座標を含んでいる座標範囲に表示される記述単位の文字列の探索結果を用いる。
【００６７】
このようなレポート作成装置１の動作を説明する。図３〜図５は、このレポート作成装置１の動作を示すフローチャートである。
【００６８】
図３に示すように、まず、読影医が操作部１２を用いて、読影を依頼された診断に対する診断情報の一覧から一つを選択すると（Ｓ０１）、画像取得部１３は、この選択された診断情報に含まれるスタディインスタンスＵＩＤとともに検索コマンドを画像サーバ２に送信する（Ｓ０２）。
【００６９】
画像サーバ２は、データベースを参照してスタディインスタンスＵＩＤに関連づけられている画像ＵＩＤを探索し、この画像ＵＩＤが付与された医用画像４を取得する。そして、画像サーバ２は、取得した医用画像４をレポート作成装置１に送信する。
【００７０】
画像取得部１３は、レポート作成装置１にネットワークＮを介して送られた医用画像４を取得する（Ｓ０３）。
【００７１】
表示制御部１９は、受信した医用画像４を記憶部１４から読み出して、表示部１１ｂに表示させる（Ｓ０４）。また、表示制御部１９は、表示部１１ａに表示される読影レポート５を表示部１１ｂにも表示させる（Ｓ０５）。
【００７２】
その後、読影医が操作部１２を用いて文字のキー入力を行うと（Ｓ０６，Ｙｅｓ）、図４に示すように、レポート作成部１５は、そのキー入力を反映した文字を読影レポート５に記録し（Ｓ０７）、表示制御部１９は、その読影レポート５を表示部１１ａ及び１１ｂに表示させる（Ｓ０８）。
【００７３】
構造解析部１６は、文字のキー入力が行われると、テキストマイニング技術を用いた読影レポート５の構造解析を行うことで、読影レポート５の構造化データ６を作成していく（Ｓ０９）。この構造解析部１６による構造解析は、文字のキー入力が行われる度に、キー入力により新たに記述された文字を含むセンテンスについてやり直すようにしてもよい。尚、読影レポート５が文字列を意味内容で識別したマークアップ言語で表わされる場合には、このＳ０９の処理は省略される。
【００７４】
表示制御部１９は、表示部１１ａ及び１１ｂに読影レポート５を表示させる際、構造化データ６又は文字列を意味内容で識別したマークアップ言語で表わされた読影レポート５で要素タグ６１等により識別されている各文字列を強調表示させる（Ｓ１０）。
【００７５】
更に、構造解析部１６は、構造化データ６又は読影レポート５に記述された各記述単位の文字列の文章中の出現開始位置及び長さをカウントして位置情報６２を作成し（Ｓ１１）、範囲指定部１７は、カウントした出現開始位置及び長さで示される位置情報６２と読影レポート５の表示位置とから各記述単位の文字列の座標範囲を計算しておく（Ｓ１２）。
【００７６】
読影医が操作部１２を用いて医用画像４を選択し、表示部１１ａ又は１１ｂに表示されている読影レポート５の文章中にドラッグすると（Ｓ１３，Ｙｅｓ）、図５に示すように、範囲指定部１７は、カーソルの座標を取得する（Ｓ１４）。そして、範囲指定部１７は、各記述単位の文字列の座標範囲から、取得した座標を含むものを検索する（Ｓ１５）。表示制御部１９は、該当する座標範囲に対応する文字列を強調表示させる（Ｓ１６）。
【００７７】
読影医が操作部１２を用いて医用画像４をドロップすると（Ｓ１７，Ｙｅｓ）、リンク作成部１８は、ドロップされた医用画像４に付帯する付帯情報を用いて当該医用画像４の保管先を示すパスを生成し（Ｓ１８）、Ｓ１５の検索により該当した座標範囲に対応する文字列に関連づける（Ｓ１９）。
【００７８】
このＳ０６〜Ｓ１９は、操作部１２を用いて終了の処理に対応するボタンを押下するまで繰り返される（Ｓ２０，Ｎｏ）。尚、終了の処理に対応するボタンが押下されると、レポート作成装置１は、Ｓ０１〜Ｓ２０のレポート作成処理を終了させる。
【００７９】
このようなレポート作成装置１の作用を説明する。まず、図６は、読影レポート５の所見欄を示す模式図である。図７は、構造化データを示す模式図である。
【００８０】
図６に示すように、読影レポート５には、「右Ｓ４胸膜下にも淡い１ｃｍ程度のＧＧＯ。左下葉に古い炎症後の策状影あり、前回と変化なし。」との記述がテキストデータとして存在するものとする。構造解析部１６の辞書データには、部位単語として「右Ｓ４胸膜下」、「左下葉」、所見単語として「ＧＧＯ」、「策状影」等が登録されているものとする。
【００８１】
構造解析部１６は、この文章を単語単位で分解していくことで、第１文は「右Ｓ４胸膜下」、「にも」、「淡い」、「１ｃｍ程」、「の」、「ＧＧＯ」、及び「。（句点）」の各単語を取得する。第２文については、「左下葉」、「にも」、「古い」、「炎症後」、「の」、「策状影」、「あり」、及び「。（句点）」の各単語を取得する。
【００８２】
単語単位で分解すると、構造解析部１６は、更に構造解析を進めることで、この第１文を「右Ｓ４胸膜下」、「にも」、「淡い１ｃｍ程のＧＧＯ」の記述単位に構造化する。第２文については、「左下葉」、「に」、「古い炎症後の策状影あり」の記述単位に構造化する。
【００８３】
図７に示すように、構造解析が終了すると、構造解析部１６は、第１文については、辞書データに部位単語として登録されている「胸膜下」を含む「右Ｓ４胸膜下」に部位単語を示す情報である要素タグ６１を関連づけ、辞書データに所見単語として登録されている「ＧＧＯ」を含む「淡い１ｃｍ程のＧＧＯ」に所見単語を示す情報である要素タグ６１を関連づけて、構造化データ６に記録しておく。また、第２文については、辞書データに部位単語として登録されている「左下葉」に部位単語を示す要素タグ６１を関連づけ、辞書データに所見単語として登録されている「策状影」を含む「古い炎症後の策状影あり」に所見単語を示すタグ要素６１を関連づけ、構造化データ６に記録しておく。
【００８４】
更に、構造解析部１６は、構造解析部１６に記録した各記述単位の読影レポート５における開始位置及び長さをカウントし、これらを示す位置情報６２を対応する記述単位の記録に関連づけておく。図７に示すように、例えば、「右Ｓ４胸膜下」なる記述単位の文字列には、開始位置が１番目であることを示す「Ｓｔａｒｔ＝１」、長さが６文字であることを示す「ｌｅｎｇｔｈ＝６」なる位置情報６２を関連づける。
【００８５】
この作成した構造化データ６は、記憶部１４に記憶させておく。読影レポート５が既に文字列を意味内容で識別したマークアップ言語で記述されている等により構造化されている場合には、位置情報６２の算出のみを行い、位置情報６２のみを記憶部１４に記憶させておく。
【００８６】
図８は、表示部１１ａ及び表示部１１ｂに表示される画面を示す模式図である。また、図９は、表示部１１ｂに表示される画面の一部分を拡大した模式図である。
【００８７】
図８に示すように、レポート表示画面１１０は、診断情報を記載する診断情報フィールド１１１と所見欄を記載する所見エリア１１２で区切られている。診断情報フィールド１１１には、医用画像４の取得のために一覧から選択された診断情報が配置される。所見エリア１１２には、読影レポート５の所見欄に記述された文章が配置される。
【００８８】
また、表示部１１ｂには、記憶部１４に記憶された医用画像４が並べて表示される。読影レポート５の所見欄は、表示部１１ｂの画面上にもオーバーレイ表示される。
【００８９】
図９に示すように、読影レポート５の記述のうち、リンク付けの文字列範囲の候補は、ハイライト表示５１で飾られる。第１文に含まれる文字列範囲の候補と第２文に含まれる文字列範囲の候補とは、異なる色のハイライト表示５１で飾られる（図中では斜線と太線で区別）。
【００９０】
この文字列範囲の候補は、表示制御部１９により、記憶部１４から読み出された構造化データ６に記述された各記述単位の文字列に相当する箇所である。ハイライト表示５１は、表示制御部１９による強調表示である。
【００９１】
表示制御部１９による各記述単位の文字列に相当する箇所は、構造化データ６に記述された各記述単位の文字列で読影レポート５を走査させることで探索してもよいし、位置情報６２で示される範囲としてもよい。
【００９２】
図１０は、このレポート作成装置１のリンク付け処理を示す模式図である。
【００９３】
図１０に示すように、操作部１２を用いてリンク付けしようとする医用画像４をクリックし（図中Ａ）、表示部１１ｂにも表示された読影レポート５中の文字列にドラッグすると、文字列範囲の候補のうち、カーソルが入っているものが更に枠で囲まれることにより、強調表示される。この状態で操作部１２を用いて医用画像４をドロップすると、ドロップされたときにカーソルが入っていた文字列範囲が範囲指定され、この範囲に記述された文字列に医用画像４がリンク付けされる（図中Ｂ）。
【００９４】
枠で囲む強調表示は、範囲指定部１７が、構造化データ６に記述された各記述単位の文字列の領域のうちのカーソルの座標を含むものを探索した結果である。リンク付けする文字列範囲の指定も同様に、範囲指定部１７が、構造化データ６に記述された各記述単位の文字列の領域のうちのカーソルの座標を含むものを探索した結果である。
【００９５】
このように、このレポート作成装置１のリンク付け処理によると、リンク付けしようとする文字列の範囲の指定操作を省くことができ、リンク付けのための操作におけるカーソル及び視点の移動は、画像表示画面からレポート表示画面１１０への０．５往復で完了する。従って、１．５往復のカーソル及び視点の移動が必要だった従来と比べて、医用画像４のリンク付けを簡便且つ短時間で行うことができ、リンク作成の操作に忙殺されることもなく、それによる読影作業に対する集中力の低下を防止することができる。
【００９６】
また、このレポート作成装置１では、画像表示画面にも読影レポート５が表示される所見エリア１１２を描画し、その所見エリア１１２に医用画像４をドラッグしてもリンク付けの処理が行われるようにしたため、リンク付けの操作における０．５往復のカーソル及び視点の移動距離も短縮され、リンク付けが更に簡便且つ短時間で行うことができる。
【００９７】
尚、上述の実施形態では、各画面をそれぞれの表示部１１ａ及び１１ｂに表示する場合を説明したが、１つの表示部を用いて各画面を表示する場合にも適用される。
【符号の説明】
【００９８】
１ レポート作成装置
２ 画像サーバ
３ 画像診断装置
４ 医用画像
５ 読影レポート
６ 構造化データ
６１ 要素タグ
６２ 位置情報
１１ａ 表示部
１１ｂ 表示部
１１０ レポート表示画面
１１１ 診断情報フィールド
１１２ 所見エリア
１２ 操作部
１３ 画像取得部
１４ 記憶部
１５ レポート作成部
１６ 構造解析部
１７ 範囲指定部
１８ リンク作成部
１９ 表示制御部
Ｎ ネットワーク
【特許請求の範囲】
【請求項１】
操作手段を有し、この操作手段を用いた操作に応じて読影レポートに文字を記録するレポート作成装置であって、
文章に含まれる各文字列が記述単位で識別された前記読影レポートを表示するレポート表示画面と医用画像を表示する画像表示画面とを有する表示手段と、
前記操作手段を用いてドラッグされた前記医用画像がドロップされると、そのドロップされた位置と前記各文字列の前記識別とに基づき、リンク付けすべき文字列の範囲を特定する範囲指定手段と、
前記範囲指定手段で特定された前記範囲に前記ドロップされた医用画像をリンク付けするリンク作成手段と、
を備えること、
を特徴とするレポート作成装置。
【請求項２】
前記読影レポートを前記レポート表示画面及び前記画像表示画面に表示させるレポート表示制御手段を更に備えること、
を特徴とする請求項１記載のレポート作成装置。
【請求項３】
前記範囲指定手段は、
前記画像表示画面上に表示された前記所見エリアに前記ドロップがされると、そのドロップされた位置と前記各文字列の前記識別とに基づき、リンク付けする文字列の範囲を特定すること、
を特徴とする請求項２記載のレポート作成装置。
【請求項４】
前記読影レポートを解析して前記文章に含まれる各文字列の前記記述単位での前記識別を行う構造解析手段を更に備えること、
を特徴とする請求項１乃至３の何れかに記載のレポート作成装置。
【請求項５】
前記範囲指定手段は、
部位又は所見を示す前記記述単位毎に識別された文字列の各範囲のうち何れかを、前記リンク付けする文字列の範囲として特定すること、
を特徴とする請求項１乃至４のいずれかに記載のレポート作成装置。
【請求項６】
前記各文字列の前記識別に基づき、リンク付けする文字列範囲の候補を前記表示手段に強調表示させる候補表示制御手段を更に備えること、
を特徴とする請求項１乃至５のいずれかに記載のレポート作成装置。
【請求項７】
前記候補表示手制御段は、
前記操作手段を用いたドラッグの位置と前記各文字列の前記識別とに基づき特定される前記ドラッグの位置に表示された前記文字列範囲の候補を更に他の候補と識別して表示させること、
を特徴とする請求項６記載のレポート作成装置。
【請求項１】
操作手段を有し、この操作手段を用いた操作に応じて読影レポートに文字を記録するレポート作成装置であって、
文章に含まれる各文字列が記述単位で識別された前記読影レポートを表示するレポート表示画面と医用画像を表示する画像表示画面とを有する表示手段と、
前記操作手段を用いてドラッグされた前記医用画像がドロップされると、そのドロップされた位置と前記各文字列の前記識別とに基づき、リンク付けすべき文字列の範囲を特定する範囲指定手段と、
前記範囲指定手段で特定された前記範囲に前記ドロップされた医用画像をリンク付けするリンク作成手段と、
を備えること、
を特徴とするレポート作成装置。
【請求項２】
前記読影レポートを前記レポート表示画面及び前記画像表示画面に表示させるレポート表示制御手段を更に備えること、
を特徴とする請求項１記載のレポート作成装置。
【請求項３】
前記範囲指定手段は、
前記画像表示画面上に表示された前記所見エリアに前記ドロップがされると、そのドロップされた位置と前記各文字列の前記識別とに基づき、リンク付けする文字列の範囲を特定すること、
を特徴とする請求項２記載のレポート作成装置。
【請求項４】
前記読影レポートを解析して前記文章に含まれる各文字列の前記記述単位での前記識別を行う構造解析手段を更に備えること、
を特徴とする請求項１乃至３の何れかに記載のレポート作成装置。
【請求項５】
前記範囲指定手段は、
部位又は所見を示す前記記述単位毎に識別された文字列の各範囲のうち何れかを、前記リンク付けする文字列の範囲として特定すること、
を特徴とする請求項１乃至４のいずれかに記載のレポート作成装置。
【請求項６】
前記各文字列の前記識別に基づき、リンク付けする文字列範囲の候補を前記表示手段に強調表示させる候補表示制御手段を更に備えること、
を特徴とする請求項１乃至５のいずれかに記載のレポート作成装置。
【請求項７】
前記候補表示手制御段は、
前記操作手段を用いたドラッグの位置と前記各文字列の前記識別とに基づき特定される前記ドラッグの位置に表示された前記文字列範囲の候補を更に他の候補と識別して表示させること、
を特徴とする請求項６記載のレポート作成装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図１１】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図１１】
【図８】
【図９】
【図１０】
【公開番号】特開２０１０−１７６６１７（Ｐ２０１０−１７６６１７Ａ）
【公開日】平成２２年８月１２日（２０１０．８．１２）
【国際特許分類】
【出願番号】特願２００９−２１４４３（Ｐ２００９−２１４４３）
【出願日】平成２１年２月２日（２００９．２．２）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【出願人】（５９４１６４５４２）東芝メディカルシステムズ株式会社 (4,066)
【出願人】（５９４１６４５３１）東芝医用システムエンジニアリング株式会社 (892)
【Ｆターム（参考）】
【公開日】平成２２年８月１２日（２０１０．８．１２）
【国際特許分類】
【出願日】平成２１年２月２日（２００９．２．２）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【出願人】（５９４１６４５４２）東芝メディカルシステムズ株式会社 (4,066)
【出願人】（５９４１６４５３１）東芝医用システムエンジニアリング株式会社 (892)
【Ｆターム（参考）】
[ Back to top ]