画像表示装置、その制御方法及びコンピュータプログラム
【課題】１次読影と２次読影とで異なるモダリティを使用する場合であっても、一次の所見に基づき、異なるモダリティでの取得画像における該当箇所を特定し、ユーザに医用画像を提示する技術を提供する。
【解決手段】被験者を第１の撮影方式によ撮影して得られた第１の種類の画像に設定された一部領域の画像を利用し、第１の撮影方式とは異なる第２の撮影方式により第２の撮影装置で被験者を撮影して得られた第２の種類の複数の画像において、一部領域の画像と最も相関が高くなる領域を有する画像を特定する画像特定手段と、特定された第２の種類の画像を表示部に表示させる表示制御手段とを備え、画像特定手段は、第１の種類の画像が有する第１の撮像面が、第２の種類の画像が有する第２の撮像面と異なる場合に、第２の種類の複数の画像を再構成して第１の撮像面に対応する複数の再構成画像を生成し、複数の再構成画像のそれぞれについて、一部領域の画像との相関値を算出して、相関値が最大となる再構成画像を選択する。
【解決手段】被験者を第１の撮影方式によ撮影して得られた第１の種類の画像に設定された一部領域の画像を利用し、第１の撮影方式とは異なる第２の撮影方式により第２の撮影装置で被験者を撮影して得られた第２の種類の複数の画像において、一部領域の画像と最も相関が高くなる領域を有する画像を特定する画像特定手段と、特定された第２の種類の画像を表示部に表示させる表示制御手段とを備え、画像特定手段は、第１の種類の画像が有する第１の撮像面が、第２の種類の画像が有する第２の撮像面と異なる場合に、第２の種類の複数の画像を再構成して第１の撮像面に対応する複数の再構成画像を生成し、複数の再構成画像のそれぞれについて、一部領域の画像との相関値を算出して、相関値が最大となる再構成画像を選択する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示装置、その制御方法及びコンピュータプログラムに関する。
【背景技術】
【０００２】
集団検診などにおいて、１次読影では病変候補の検出、２次読影では病変候補の詳細検査が行われる。この時、１次読影で胸部Ｘ線画像、２次読影でＣＴの大量画像を用いて検査することがある。２次読影では、１次読影の結果（所見位置情報）を知った上で読影すると、あらかじめ病変候補の位置等がわかるため、診断効率が上がる。
【０００３】
そこで、複数方式での撮影（放射線画像、超音波画像）が可能な単一（複合型）モダリティ（医用画像撮影装置）を用いて、画像取得の際に位置情報を取得（生成）し、双方の画像を紐付けていた。このようにして得られた画像及び位置情報を用いて、撮影方法の異なる画像間で位置合わせを行うことで、比較表示が可能となる（特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開2009-82402号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら上述の装置では、単一（複合型）モダリティにおいて複数の異なる方法での撮影を可能にする必要がある。よって、当該装置に組み込まれた特定の方法で撮影された画像間でのみ紐付けが可能となっており、搭載されていない方法で撮影された画像は比較表示が困難となっていた。また、上述の装置では、１次読影の結果（所見位置情報）に関しては、２次読影に引き継げていなかった。
【０００６】
そこで、本発明は、１次読影と２次読影とで異なるモダリティを使用する場合であっても、一次の所見に基づき、異なるモダリティでの取得画像における該当箇所を特定し、ユーザに医用画像を提示する技術を提供する。
【０００７】
そこで、本発明は、１次読影と２次読影とで異なるモダリティを使用する場合であっても、一次の所見に基づき、異なるモダリティでの取得画像における該当箇所を特定し、ユーザに医用画像を提示する技術を提供する。
【課題を解決するための手段】
【０００８】
上記課題を解決するための本発明は、画像表示装置であって、
被験者を第１の撮影方式により第１の撮影装置で撮影して得られた第１の種類の画像に設定された一部領域の画像を利用し、前記第１の撮影方式とは異なる第２の撮影方式により第２の撮影装置で前記被験者を撮影して得られた第２の種類の複数の画像において、前記一部領域の画像と最も相関が高くなる領域を有する画像を特定する画像特定手段と、
前記特定手段により特定された前記第２の種類の画像を表示部に表示させる表示制御手段とを備え、
前記画像特定手段は、
前記第１の種類の画像が有する第１の撮像面が、前記第２の種類の画像が有する第２の撮像面と異なる場合に、前記第２の種類の複数の画像を再構成して前記第１の撮像面に対応する複数の再構成画像を生成する再構成手段と、
前記複数の再構成画像のそれぞれについて、前記一部領域の画像との相関値を算出して、前記相関値が最大となる再構成画像を選択する相関算出手段と
を備え、
前記第２の種類の複数の画像のうち、前記相関算出手段が選択した前記再構成画像における前記一部領域に対応する位置の画像を特定する。
【発明の効果】
【０００９】
本発明によれば、１次読影と２次読影とで異なるモダリティを使用する場合であっても、一次の所見に基づき、異なるモダリティでの取得画像における該当箇所を特定し、ユーザに医用画像を提示することができる。
【図面の簡単な説明】
【００１０】
【図１】発明の実施形態に対応するシステム構成例を示す図。
【図２】発明の実施形態に対応する所見入力操作の説明図。
【図３】発明の実施形態に対応する所見位置情報のデータ構成の一例を示す図。
【図４】発明の実施形態に対応する所見位置情報抽出部１０５による所見位置を特定した結果例の説明図。
【図５】発明の実施形態１に対応する画像特定部１０６の内部構成例を示す図。
【図６】発明の実施形態に対応する撮像面の説明図。
【図７】発明の実施形態に対応する医用画像の表示例を示す図。
【図８】発明の実施形態に対応する再構成画像と２次画像との対応関係の説明図。
【図９】発明の実施形態に対応する２次画像の表示例を示す図。
【図１０】発明の実施形態に対応する処理のフローチャート。
【図１１】発明の実施形態２に対応する画像特定部１０６の内部構成例を示す図。
【発明を実施するための形態】
【００１１】
以下、図面を参照しながら発明を実施するための形態について説明する。
【００１２】
［実施形態１］
本実施形態では、１次読影用の１次画像と２次読影用の２次画像とで異なる医用画像を用いるが、患者あるいは被験者を撮影して医用画像を生成する方法には、複数の異なる撮影方式が存在する。これらには、たとえば、ＣＲ（Computed Radiography）、ＣＴ（Computed Tomography）、ＭＲ（Magnetic Resonance）、ＮＭ（Nuclear Medicine）、ＵＳ（Ultrasound）、ＢＩ（Biomagnetic imaging）等がある。
【００１３】
本実施形態では、まず、第１の撮影方式としてＣＲを採用し、第１の種類の画像として胸部Ｘ線画像を第１の撮影装置で撮影し１次読影を行う。次に、第２の撮影方式としてＣＴを採用し、第２の種類の画像としてＣＴ画像を第２の撮影装置で撮影して２次読影を行うこととする。なお、第１の撮影装置と第２の撮影装置とは、別個独立に存在するものである。すなわち、１次読影では１次画像として胸部Ｘ線画像を用いて病変候補を検出し、２次読影では１次読影における検出部位につき、２次画像としてＣＴ画像を用いて病変候補の詳細検査を行うものである。しかしながら、１次読影と２次読影における医用画像の組み合わせはこれに限定されるものではなく、任意の組み合わせに対して本発明を適用することが可能である。
【００１４】
図１は、発明の実施形態におけるシステム構成の一例を示す図である。当該システムは、本実施形態の画像表示装置（あるいは「画像処理装置」、以下同様）１０１、所見入力部１０３、表示部１０８及びサーバ１０９で構成される。画像表示装置１０１は、通信制御部１０２、メモリ１０４、所見位置情報抽出部１０５、画像特定部１０６、表示制御部１０７を含む。なお、所見入力部１０３や表示部１０８を画像表示装置１０１内に組み込んでもよい。
【００１５】
なお、画像表示装置１０１は、汎用のパーソナルコンピュータなどにより構成することができる。画像表示装置１０１の各機能ブロックは、ＣＰＵがＲＯＭ、ＲＡＭ、あるいはハードディスクなどに記憶されたプログラムを実行することにより実現可能である。また、通信制御部１０２はコンピュータが備える通信インタフェースにより実現することができる。表示制御部１０７は、ＣＰＵとグラフィックボードとの組み合わせにおいて実現することが可能である。
【００１６】
以下、図１０のフローチャートを参照しつつ、発明の実施形態に対応するシステムの動作を説明する。当該フローチャートに対応する処理は、画像表示装置内の処理プログラムを、ＣＰＵにより実行することによって実現が可能である。
【００１７】
まず、通信制御部１０２は、サーバ１０９と通信を行い、サーバ１０９を介してＸ線撮影装置で撮影されたＸ線画像（本実施形態では、特に胸部Ｘ線画像）や、ＣＴスキャナで撮影されたＣＴ画像を取得する。まず１次読影では、Ｓ１００１にて通信制御部１０２が表示制御部１０７からの指示を受け、１次読影で使用する胸部Ｘ線画像をサーバ１０９から取得して、表示制御部１０７に出力する。表示制御部１０７は、受信した胸部Ｘ線画像を表示部１０８に表示する。表示部１０８は、液晶ディスプレイ等の汎用のディスプレイ装置であればよい。胸部Ｘ線画像の表示例は図２に示すとおりである。
【００１８】
図２のような表示状態において、Ｓ１００２で所見入力部１０３がユーザ（１次の読影医）からの所見の入力を受け付けると、Ｓ１００３で通信制御部１０２が入力情報をサーバ１０９に転送する。サーバ１０９は、当該入力情報を通信制御部１０２に提供した胸部Ｘ線画像と関連づけて格納することにより、所見情報を生成する。
【００１９】
所見入力部１０３は、キーボードおよびマウスといったユーザインタフェースにより構成される。図２では、画面２００上に胸部Ｘ線画像２０１と、カーソル２０２が表示されている。カーソル２０２の表示位置は、所見入力部１０３のマウス２０３の操作に対応する。ユーザは、所定のカーソル位置でマウスクリックをすることで位置を指定することができる。位置の指定は、Ｘ線画像２０１における座標情報に変換される。なお、位置の指定はマウスクリックに基づくポイント指定に限られず、マウスのドラッグ操作に基づき矩形領域が指定されてもよい。また、読影の診断結果をキーボードを利用して、テキスト情報として入力することができる。
【００２０】
このようにして生成された所見情報の一例は、図３に示す通りである。図３において、所見情報３００には、画像ＩＤ３０１、氏名３０２、検査結果３０３、所見位置３０４の少なくとも４つの情報が含まれる。画像ＩＤ３０１は、所見情報の入力対象となった画像を識別するための情報であって、画像の撮影時に付与される。氏名３０２は、当該画像の被写体となった患者あるいは被験者の氏名であり、同様に画像の撮影時に付与される。検査結果３０３には、所見入力部１０３により入力されたテキスト情報が登録される。所見位置３０４には、上述のカーソル位置の座標情報が登録される。なお、位置の指定がマウスクリックに基づくポイントである場合には、当該ポイントの座標値が所見位置３０４に登録される。一方、矩形領域として指定された場合には、矩形領域を特定するための座標値が所見位置３０４に登録される。なお、所見情報には、他の情報として、撮影日時、撮影場所（病院名）、撮影者、担当医師名等の情報が含まれてもよい。このようにして胸部Ｘ線画像について所見情報３００が更新されると、１次読影が終了する。
【００２１】
次に、２次読影では、通信制御部１０２が表示制御部１０７からの指示を受け、Ｓ１００４でサーバ１０９から１次読影の結果である所見情報および胸部Ｘ線画像と、２次読影で使用するＣＴ画像とを取得する。メモリ１０４は、通信制御部１０２から所見情報と各画像とを受信して一時的に保存する。メモリに一次保存された所見情報と胸部Ｘ線画像は、所見位置情報抽出部１０５に出力される。
【００２２】
続くＳ１００５で所見位置情報抽出部１０５は、受信した所見情報に含まれる所見位置３０４の情報に基づいて、胸部Ｘ線画像における所見位置を特定する。図４は、所見位置情報抽出部１０５による所見位置を特定した結果例を説明するための図である。図４（ａ）では、画像４００において、点４０１が特定されている。当該特定部位の座標は（１００、２０）であって、図３における画像ＩＤが「２」の画像に対応している。所見位置情報抽出部１０５は、特定された部位に基づいて、所定の大きさを有する矩形形状の一部領域を部位の周囲に設定する。図４（ｂ）では、特定部位に矩形領域４０２が形成されている。当該矩形領域のサイズは、たとえば特定部位を中心に５０×５０画素、あるいは、１００×１００画素で構成できる。なお、本実施形態ではこのような１次画像に対して設定された一部領域のことを「テンプレート」と呼ぶことにするが、そのサイズは重要ではなく、特に限定すべきものではない。なお、所見情報３００において、所見位置３０４が「点」ではなく、「矩形領域」を示す座標として登録されていた場合、所見位置情報抽出部１０５は、当該矩形領域をそのまま用いてもよいし、あるいは、上記所定のサイズの矩形領域に整形してもよい。
【００２３】
所見位置情報抽出部１０５は、当該テンプレートに含まれる部分画像を胸部Ｘ線画像４００から切り出して「画像所見情報」として画像特定部１０６へ出力する。画像特定部１０６では、当該画像所見情報に基づいて、２次画像であるＣＴ画像の絞り込みを行う。
【００２４】
画像特定部１０６の内部構成の一例は図５に示す通りである。画像特定部１０６は、画像再構成部５０１と相関算出処理部５０２とを有する。画像特定部１０６の処理を説明するに際し、被検体に互いに直交する３つの撮像面について図６を参照して説明する。図６に示すように、被検体の体軸を横断するアキシャル面（axialplane）、この体軸に沿って前後に縦断するサジタル面（sagittal plane）、左右に縦断するコロナル面（coronal plane）という。一般に、モダリティにより撮影される画像は、この３つの撮像面のいずれかに沿って撮影される。そして、１次画像について生成された所見情報における位置の情報を２次画像においても活用しようとする場合、この撮像面の共通性が重要となる。そこで、本実施形態では、１次画像と２次画像の撮像面が異なる場合に、画像再構成部５０１により１次画像の撮像面と同一となる画像を２次画像から再構成する。なお、撮像面が同一の場合には、再構成は行わずに、そのまま２次画像を相関算出処理部５０２に出力する。
【００２５】
画像再構成部５０１は、メモリ１０４から１次画像としての胸部Ｘ線画像と２次画像としてのＣＴ画像群とを取得する。Ｓ１００６で画像再構成部５０１は、１次画像と２次画像の撮像面が同一か否かを判定する。具体的に、１次画像であるＸ線画像の第１の撮像面はコロナル面である一方、２次画像のＣＴ画像の第２の撮像面はアキシャル面である。よって、撮像面が異なると判定できる（Ｓ１００６で「ＮＯ」）。この場合、再構成を行うこととしてＳ１００７で画像再構成部５０１はＣＴ画像群を再構成して、コロナル面の画像群を再構成する。ここでの画像再構成の方法としては、例えば、断層画像からＭＰＲ（Multi Planar Reconstruction）画像を作成する技術等を転用することができる。このような再構成方法は、公知技術を用いればよいのでこれ以上の詳細な説明は省略する。一方、撮像面が同一の場合（Ｓ１００６で「ＹＥＳ」）、再構成は行わないので、Ｓ１００８に移行する。
【００２６】
なお、各画像の撮像面の判定方法は、ＤＩＣＯＭ（Digital Imaging and Communication in Medicine）が定める画像データのヘッダ情報を利用することができる。ＤＩＣＯＭとは、米国放射線学会（ＡＣＲ）と北米電子機器工業会（ＮＥＭＡ）により策定された標準規格であって、ＣＴ、ＭＲＩ、ＣＲ等で撮影した医用画像のフォーマットとそれらの画像を扱う医用画像機器間の通信プロトコルを定義する。具体的に、Ｘ線画像については、ヘッダの以下の３つの特性に基づいて判定可能である。
１．一般シリーズモジュール属性：モダリティ
２．一般シリーズモジュール属性：検査部位
３．ＣＲシリーズモジュール属性：視野位置
【００２７】
実際に胸部Ｘ線画像の場合、各特性は以下のようになる。
１．一般シリーズモジュール属性：モダリティ＝ＣＲ
２．一般シリーズモジュール属性：検査部位＝ＣＨＥＳＴ
３．ＣＲシリーズモジュール属性：視野位置＝ＡＰ（前後方向）またはＰＡ（後前方向）
【００２８】
このような特性の組み合わせについては、「胸部Ｘ線画像、かつ、コロナル面の画像」と判定する。なお、「ＣＲシリーズモジュール属性：視野位置」が「ＰＡ（後前方向）」であった場合、画像を回転させる。但し、画像が胸部Ｘ線画像かつコロナル面の画像であることの判別方法はこれに限るものではない。また、「ＣＲシリーズモジュール属性の視野位置」が取得できない場合は、「一般シリーズモジュール属性：視野位置」から撮像面を判断してもよい。
【００２９】
画像再構成部５０１は、各種モダリティで取得された画像について、画像の種類および撮像面とを、特性の組み合わせ及び各特性値と関連づけて管理しておく。そして、入力された１次画像と２次画像の特性に基づいて、画像の種類と撮像面を判定する。その上で、再構成の有無や方法を決定することができる。
【００３０】
たとえば、一般シリーズモジュールには、「モダリティ」、「シリーズインスタンスＵＩＤ」、「シリーズ番号」、「側性Laterality」、「シリーズ日付」、「シリーズ時刻」、「検査部位」、「患者位置」などがある。また、「モダリティ」の特性値には、ＣＲ（Computed Radiography）、ＣＴ（Computed Tomography）、ＭＲ（Magnetic Resonance）、ＮＭ（Nuclear Medicine）、ＵＳ（Ultrasound）、ＢＩ（Biomagnetic imaging）等がある。「検査部位」には、SKULL,CSPINE, TSPINE, LSPINE, SSPINE, COCCYX,CHEST, CLAVICLE, BREAST, ABDOMEN,PELVIS, HIP, SHOULDER, ELBOW, KNEE,ANKLE, HAND, FOOT, EXTREMITY, HEAD,HEART, NECK, LEG, ARM, JAW等がある。
【００３１】
ＣＲシリーズモジュール属性は、モダリティ特有モジュールの１つであって、特にＣＲグラフィシリーズを記述する属性を規定している。ＣＲシリーズモジュール属性には視野位置のほか、検査部位、フィルタタイプ、コリメータ／グリッド名などが含まれる。なお、モダリティ特有モジュールには、ＣＴモジュールや、ＭＲ画像モジュールなどがある。
【００３２】
Ｓ１００７では、画像再構成部５０１が生成した再構成画像の画像群を相関算出処理部５０２に出力する。再構成が行われなかった場合、２次画像の画像群を相関算出処理部５０２に出力する。続くＳ１００８では、相関算出処理部５０２が相関算出処理を以下のようにして実行する。
【００３３】
相関算出処理部５０２は、所見位置情報抽出部１０５からの画像所見情報と、画像再構成部５０１からの再構成画像としてのコロナル面の画像とを取得する。相関算出処理部５０２は、たとえば輝度分布相関法を用いて、再構成された画像群から最も相関の高い領域を持つ画像を決定する。その際に、画像群との比較対象となるのは、所見位置情報抽出部１０５からの画像所見情報である。輝度分布相関法では、画像群の各画像について、テンプレートである画像所見情報を回転や平行移動させて、各位置における相関値を求め、相関値が最大となる画像を選択する。相関値としては、たとえば特開２００２−３２４２３８号公報に記載の正規化相互相関値を用いてもよい。なお、相関に基づき画像を選択する方法自体は、当該公報のほか、特開平７−３７０７４号公報、特開２００１−３２５５８４号公報に記載される通り公知であるので、ここでのより詳細な説明は省略する。
【００３４】
なお、１次読影で使用した画像と再構成された画像の解像度が異なる場合、テンプレートのサイズを、１次読影で使用した画像と再構成された画像の比率に応じて拡大縮小する。このような拡大縮小されたテンプレートは、予め所見位置情報抽出部１０５で生成しておいてもよいし、あるいは、画像再構成部５０１が生成してもよい。
【００３５】
また、輝度分布相関法を用いて相関の高い領域を決定する際に、処理精度を上げるための前処理を行ってもよい。前処理の１つとして、たとえば１次読影で使用した画像と再構成された画像間で階調を合わせる処理を行うことができる。このような階調合わせ技術は公知技術を用いればよいが、特開平１１−０９６３５２号公報はそのうちの１つを記載する。ここではまず、基準画像のヒストグラムを作成し、当該ヒストグラムを平坦化するための階調変換テーブルと、当該階調変換の逆変換を行う逆変換テーブルとを作成する。次に、処理対象画像のヒストグラムを作成し、当該ヒストグラムを平坦化した後、逆変換テーブルを適用して基準画像と同等の階調を得る。そのほかにも、特開平１１−２８８４６２号公報や特開２００１−２４３４６４にも階調合わせ技術が記載されているがここでの詳細な説明は省略する。
【００３６】
また別の前処理として、１次読影の結果である所見情報における位置情報を用いて、相関の高い領域を決定する際の探索範囲を絞り込んでもよい。ここでは１次読影で使用した画像と再構成された画像との比率に応じて、１次読影で使用した画像及び矩形選択範囲（所見位置情報抽出部１０５で作成した矩形の範囲）を拡大縮小する。この状態から、矩形選択範囲をＸ、Ｙ両方向に任意のサイズ分大きくする。この矩形選択範囲に対応する再構成された画像であるコロナル面の画像の範囲を探索範囲とする。これらは前処理の一例として説明したものであって、適用可能な前処理はこれらに限定されるものではない。
【００３７】
相関算出処理部５０２は、相関が最も高い領域を有する再構成画像を決定すると、当該再構成画像を識別する識別情報と、当該再構成画像において画像所見情報との相関がもっとも高くなる位置の情報とを画像再構成部５０１に出力する。なお、識別情報は、再構成画像に付与された番号やファイル名を用いることができる。また、位置情報は、再構成画像における、画像所見情報に対応する矩形領域の座標情報とすることができる。
【００３８】
なお、画像再構成部５０１が再構成画像を生成しなかった場合も、Ｓ１００８では２次画像を対象として上記と同様に相関算出処理を行い、相関が最も高い２次画像を画像群の中から特定することができる。
【００３９】
画像再構成部５０１は、続くＳ１００９において識別情報と当該位置情報に基づいて、所見位置に該当するＣＴ画像を選択する。選択されたＣＴ画像は、２次画像の画像群の各画像に付与された画像ＩＤにより特定され、表示制御部１０７に出力される。なお、図８に示すように、所見位置に該当するＣＴ画像が複数存在する場合もあるが、その場合にも各ＣＴ画像に付与された画像ＩＤにより、当該複数のＣＴ画像が特定される。また、画像再構成部５０１は、上述の識別情報に対応する相関が最も高くなる再構成画像を、画像ＩＤと共に表示制御部１０７に出力する。なお、ＣＴ画像の選択や、画像ＩＤおよび再構成画像の出力は、相関算出処理部５０２側で行ってもよい。また、相関算出処理が２次画像について行われた場合は、相関算出処理部５０２により特定された２次画像の画像ＩＤが画像再構成部５０１より出力される。
【００４０】
表示制御部１０７は、１次読影及び２次読影の両方のタイミングで使用される。いずれの場合も、表示制御部１０７は、ユーザによる読影開始をトリガに処理を開始する。表示制御部１０７は、通信制御部１０２を制御して「１次読影で使用する画像」、「１次読影で使用した画像」、「所見情報」、「２次読影で使用する画像群」をサーバ１０９から任意のタイミングで取得することができる。
【００４１】
また、表示制御部１０７は、表示部１０８に表示すべき画像をメモリ１０４から取得し、表示部１０８に出力する。特に、画像特定部１０６から画像ＩＤを取得した場合には、Ｓ１０１０で当該画像ＩＤに相当する２次画像としてのＣＴ画像をメモリ１０４から取得し、表示部１０８に出力する。また、画像特定部１０６から再構成画像を取得した場合には、当該再構成画像を表示部１０８に出力する。なお、再構成画像だけでなく、１次読影で用いた対応する１次画像を合わせてメモリ１０４から取得して表示部１０８に出力してもよい。図７（ａ）は、画像特定部１０６から取得した再構成画像７００を表示部１０８が表示した場合を示す図である。また、図７（ｂ）は、１次読影で使用した胸部Ｘ線画像４００と並べて表示した例を示す。さらに図７（ｃ）に示すように画像の上に所見位置情報７０１を重畳して表示しても良い。
【００４２】
さらに、画像特定部１０６から取得した画像ＩＤに基づきアキシャル面のＣＴ画像を表示する場合は、図９に示すようになる。この時、図８に示すように再構成画像の所見位置情報７０１に対応するＣＴ画像が複数枚存在する場合は、画像ＩＤが最小のものから順に表示してもよい。表示順や先頭画像の決定方法は任意であって、特に限定されるものではない。
【００４３】
なお、上記実施形態では、１次読影と２次読影で使用する画像表示装置１０１が同一装置である場合を説明したが、１次読影と２次読影とで異なる医用画像表示装置を利用してもよい。その場合は、サーバ１０９に１次画像、２次画像、並びに所見情報が管理され、１次読影のための医用画像表示装置では、所見位置情報抽出部１０５と画像特定部１０６を除く構成が備わっていればよい。２次読影のための画像表示装置では、図１に示す画像表示装置１０１の構成を備えることが望ましい。
【００４４】
以上の本実施形態によれば、１次読影と２次読影で使用する画像のモダリティが異なり、かつ、撮像面が異なる場合でも、１次読影における所見位置情報(注目した箇所)を２次読影においてユーザに提示可能になる。よって、２次読影における診断効率が向上する。
【００４５】
［実施形態２］
次に、発明のさらなる実施形態について説明する。本実施形態における医用画像表示装置の構成は図１と同様である。以下では主に、実施形態１との相違部分について説明する。
【００４６】
まず、本実施形態では、１次読影にてＭＲ画像、２次読影にてＣＴ画像を用いる例を説明する。この場合画像特定部１０６及び表示制御部１０７の構成、動作が実施形態１とは異なる。まず画像特定部１０６は、図１１に示すように、画像再構成部５０１と相関算出処理部５０２に加え、濃淡反転部１１０１を有する。この濃淡反転部１１０１は、画像再構成部５０１や相関算出処理部５０２に組み込まれてもよいし、独立して設けられてもよい。
【００４７】
画像再構成部５０１は、１次画像と２次画像の撮像面に基づき再構成を行う必要があるか否かを、ＤＩＣＯＭヘッダの所定の特性に基づいて判定する。当該判定は、図１０のＳ１００８より前に実行することができる。
【００４８】
まず、各画像の種類を判定する。１次読影で使用するＭＲ画像のＤＩＣＯＭヘッダの「一般シリーズモジュール属性のモダリティ」は「ＭＲ」である。また、２次読影で使用するＣＴ画像の「一般シリーズモジュール属性のモダリティ」は「ＣＴ」である。画像再構成部５０１は次に、撮像面が同じであるか否かをさらに判定する。ＣＴ画像及びＭＲ画像の撮像面は、ＤＩＣＯＭヘッダの「一般シリーズモジュール属性：患者位置」から判定することができる。具体的には、「一般シリーズモジュール属性：患者位置」の値がＭＲ画像とＣＴ画像とで同じ場合は、撮像面が同じであると判定できる。但し、判定手法はこれに限るものではない。なお、本実施形態のように１次読影と２次読影とで使用する画像の撮像面が同一の場合、画像再構成部５０１では、画像の再構成を行わない。
【００４９】
そこで画像再構成部５０１は、メモリ１０４から取得した２次画像の画像群を濃淡反転部１１０１に出力する。濃淡反転部１１０１では、１次読影で使用した画像から得られた画像所見情報と、２次読影で使用する画像群に対し、相関算出処理部５０２へ画像を受け渡す前の前処理として画像処理を施す。まず、１次画像及び２次画像それぞれにつき、ＤＩＣＯＭヘッダの「画像画素モジュールの属性の光度測定解釈」を解析する。その結果、ＣＴ画像が「ＭＯＮＯＣＨＲＯＭＥ１」でＭＲ画像が「ＭＯＮＯＣＨＲＯＭＥ２」であれば、各画像の画素値の最小値が「白」と「黒」とで逆転した、濃淡の逆転した画像であると判断できる。なお、ＭＯＮＯＣＨＲＯＭＥ１の最小値が白であり、ＭＯＮＯＣＨＲＯＭＥ２の最小値が黒である。そこで、濃淡反転部１１０１は、１次読影で使用した画像の濃淡を、２次読影で使用する画像の濃淡に合わせる処理を施す。なお、濃淡を逆転する画像は１次画像と２次画像のいずれであってもよい。
【００５０】
相関算出処理部５０２は、実施形態１において説明したのと同様、画像所見情報と２次画像の画像群とを比較して、相関の最も大きくなる画像を選択し、当該画像の画像ＩＤを表示制御部１０７に出力する。
【００５１】
表示制御部１０７では、画像特定部１０６から取得した画像ＩＤに基づいて、メモリ１０４から２次画像を選択し、表示部１０８に表示する。その際、本実施形態では、１次画像のＭＲ画像と、２次画像のＣＴ画像との濃淡が逆転しているため、図７（ｂ）のような対比表示を行う場合、一方の濃淡を逆転して表示してもよい。なお、２次画像の濃淡を反転した画像は、表示制御部１０７で生成しても、濃淡反転部１１０１で生成された画像を相関算出処理部５０２を経由して取得してもよい。
【００５２】
なお、本実施形態では、１次画像と２次画像の撮像面が同一の場合を説明したが、撮像面が異なる場合であっても、濃淡が異なる場合には濃淡反転部１１０１により、濃淡を反転した上で、相関演算処理を行えばよい。
【００５３】
以上の本実施形態によれば、１次読影と２次読影で使用する画像のモダリティが異なり、かつ、撮像面が同一で、画像の濃淡などが異なる場合でも、１次読影における所見位置情報(注目した箇所)を２次読影においてユーザに提示可能になる。よって、２次読影における診断効率が向上する。
【００５４】
（その他の実施例）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【技術分野】
【０００１】
本発明は、画像表示装置、その制御方法及びコンピュータプログラムに関する。
【背景技術】
【０００２】
集団検診などにおいて、１次読影では病変候補の検出、２次読影では病変候補の詳細検査が行われる。この時、１次読影で胸部Ｘ線画像、２次読影でＣＴの大量画像を用いて検査することがある。２次読影では、１次読影の結果（所見位置情報）を知った上で読影すると、あらかじめ病変候補の位置等がわかるため、診断効率が上がる。
【０００３】
そこで、複数方式での撮影（放射線画像、超音波画像）が可能な単一（複合型）モダリティ（医用画像撮影装置）を用いて、画像取得の際に位置情報を取得（生成）し、双方の画像を紐付けていた。このようにして得られた画像及び位置情報を用いて、撮影方法の異なる画像間で位置合わせを行うことで、比較表示が可能となる（特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開2009-82402号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら上述の装置では、単一（複合型）モダリティにおいて複数の異なる方法での撮影を可能にする必要がある。よって、当該装置に組み込まれた特定の方法で撮影された画像間でのみ紐付けが可能となっており、搭載されていない方法で撮影された画像は比較表示が困難となっていた。また、上述の装置では、１次読影の結果（所見位置情報）に関しては、２次読影に引き継げていなかった。
【０００６】
そこで、本発明は、１次読影と２次読影とで異なるモダリティを使用する場合であっても、一次の所見に基づき、異なるモダリティでの取得画像における該当箇所を特定し、ユーザに医用画像を提示する技術を提供する。
【０００７】
そこで、本発明は、１次読影と２次読影とで異なるモダリティを使用する場合であっても、一次の所見に基づき、異なるモダリティでの取得画像における該当箇所を特定し、ユーザに医用画像を提示する技術を提供する。
【課題を解決するための手段】
【０００８】
上記課題を解決するための本発明は、画像表示装置であって、
被験者を第１の撮影方式により第１の撮影装置で撮影して得られた第１の種類の画像に設定された一部領域の画像を利用し、前記第１の撮影方式とは異なる第２の撮影方式により第２の撮影装置で前記被験者を撮影して得られた第２の種類の複数の画像において、前記一部領域の画像と最も相関が高くなる領域を有する画像を特定する画像特定手段と、
前記特定手段により特定された前記第２の種類の画像を表示部に表示させる表示制御手段とを備え、
前記画像特定手段は、
前記第１の種類の画像が有する第１の撮像面が、前記第２の種類の画像が有する第２の撮像面と異なる場合に、前記第２の種類の複数の画像を再構成して前記第１の撮像面に対応する複数の再構成画像を生成する再構成手段と、
前記複数の再構成画像のそれぞれについて、前記一部領域の画像との相関値を算出して、前記相関値が最大となる再構成画像を選択する相関算出手段と
を備え、
前記第２の種類の複数の画像のうち、前記相関算出手段が選択した前記再構成画像における前記一部領域に対応する位置の画像を特定する。
【発明の効果】
【０００９】
本発明によれば、１次読影と２次読影とで異なるモダリティを使用する場合であっても、一次の所見に基づき、異なるモダリティでの取得画像における該当箇所を特定し、ユーザに医用画像を提示することができる。
【図面の簡単な説明】
【００１０】
【図１】発明の実施形態に対応するシステム構成例を示す図。
【図２】発明の実施形態に対応する所見入力操作の説明図。
【図３】発明の実施形態に対応する所見位置情報のデータ構成の一例を示す図。
【図４】発明の実施形態に対応する所見位置情報抽出部１０５による所見位置を特定した結果例の説明図。
【図５】発明の実施形態１に対応する画像特定部１０６の内部構成例を示す図。
【図６】発明の実施形態に対応する撮像面の説明図。
【図７】発明の実施形態に対応する医用画像の表示例を示す図。
【図８】発明の実施形態に対応する再構成画像と２次画像との対応関係の説明図。
【図９】発明の実施形態に対応する２次画像の表示例を示す図。
【図１０】発明の実施形態に対応する処理のフローチャート。
【図１１】発明の実施形態２に対応する画像特定部１０６の内部構成例を示す図。
【発明を実施するための形態】
【００１１】
以下、図面を参照しながら発明を実施するための形態について説明する。
【００１２】
［実施形態１］
本実施形態では、１次読影用の１次画像と２次読影用の２次画像とで異なる医用画像を用いるが、患者あるいは被験者を撮影して医用画像を生成する方法には、複数の異なる撮影方式が存在する。これらには、たとえば、ＣＲ（Computed Radiography）、ＣＴ（Computed Tomography）、ＭＲ（Magnetic Resonance）、ＮＭ（Nuclear Medicine）、ＵＳ（Ultrasound）、ＢＩ（Biomagnetic imaging）等がある。
【００１３】
本実施形態では、まず、第１の撮影方式としてＣＲを採用し、第１の種類の画像として胸部Ｘ線画像を第１の撮影装置で撮影し１次読影を行う。次に、第２の撮影方式としてＣＴを採用し、第２の種類の画像としてＣＴ画像を第２の撮影装置で撮影して２次読影を行うこととする。なお、第１の撮影装置と第２の撮影装置とは、別個独立に存在するものである。すなわち、１次読影では１次画像として胸部Ｘ線画像を用いて病変候補を検出し、２次読影では１次読影における検出部位につき、２次画像としてＣＴ画像を用いて病変候補の詳細検査を行うものである。しかしながら、１次読影と２次読影における医用画像の組み合わせはこれに限定されるものではなく、任意の組み合わせに対して本発明を適用することが可能である。
【００１４】
図１は、発明の実施形態におけるシステム構成の一例を示す図である。当該システムは、本実施形態の画像表示装置（あるいは「画像処理装置」、以下同様）１０１、所見入力部１０３、表示部１０８及びサーバ１０９で構成される。画像表示装置１０１は、通信制御部１０２、メモリ１０４、所見位置情報抽出部１０５、画像特定部１０６、表示制御部１０７を含む。なお、所見入力部１０３や表示部１０８を画像表示装置１０１内に組み込んでもよい。
【００１５】
なお、画像表示装置１０１は、汎用のパーソナルコンピュータなどにより構成することができる。画像表示装置１０１の各機能ブロックは、ＣＰＵがＲＯＭ、ＲＡＭ、あるいはハードディスクなどに記憶されたプログラムを実行することにより実現可能である。また、通信制御部１０２はコンピュータが備える通信インタフェースにより実現することができる。表示制御部１０７は、ＣＰＵとグラフィックボードとの組み合わせにおいて実現することが可能である。
【００１６】
以下、図１０のフローチャートを参照しつつ、発明の実施形態に対応するシステムの動作を説明する。当該フローチャートに対応する処理は、画像表示装置内の処理プログラムを、ＣＰＵにより実行することによって実現が可能である。
【００１７】
まず、通信制御部１０２は、サーバ１０９と通信を行い、サーバ１０９を介してＸ線撮影装置で撮影されたＸ線画像（本実施形態では、特に胸部Ｘ線画像）や、ＣＴスキャナで撮影されたＣＴ画像を取得する。まず１次読影では、Ｓ１００１にて通信制御部１０２が表示制御部１０７からの指示を受け、１次読影で使用する胸部Ｘ線画像をサーバ１０９から取得して、表示制御部１０７に出力する。表示制御部１０７は、受信した胸部Ｘ線画像を表示部１０８に表示する。表示部１０８は、液晶ディスプレイ等の汎用のディスプレイ装置であればよい。胸部Ｘ線画像の表示例は図２に示すとおりである。
【００１８】
図２のような表示状態において、Ｓ１００２で所見入力部１０３がユーザ（１次の読影医）からの所見の入力を受け付けると、Ｓ１００３で通信制御部１０２が入力情報をサーバ１０９に転送する。サーバ１０９は、当該入力情報を通信制御部１０２に提供した胸部Ｘ線画像と関連づけて格納することにより、所見情報を生成する。
【００１９】
所見入力部１０３は、キーボードおよびマウスといったユーザインタフェースにより構成される。図２では、画面２００上に胸部Ｘ線画像２０１と、カーソル２０２が表示されている。カーソル２０２の表示位置は、所見入力部１０３のマウス２０３の操作に対応する。ユーザは、所定のカーソル位置でマウスクリックをすることで位置を指定することができる。位置の指定は、Ｘ線画像２０１における座標情報に変換される。なお、位置の指定はマウスクリックに基づくポイント指定に限られず、マウスのドラッグ操作に基づき矩形領域が指定されてもよい。また、読影の診断結果をキーボードを利用して、テキスト情報として入力することができる。
【００２０】
このようにして生成された所見情報の一例は、図３に示す通りである。図３において、所見情報３００には、画像ＩＤ３０１、氏名３０２、検査結果３０３、所見位置３０４の少なくとも４つの情報が含まれる。画像ＩＤ３０１は、所見情報の入力対象となった画像を識別するための情報であって、画像の撮影時に付与される。氏名３０２は、当該画像の被写体となった患者あるいは被験者の氏名であり、同様に画像の撮影時に付与される。検査結果３０３には、所見入力部１０３により入力されたテキスト情報が登録される。所見位置３０４には、上述のカーソル位置の座標情報が登録される。なお、位置の指定がマウスクリックに基づくポイントである場合には、当該ポイントの座標値が所見位置３０４に登録される。一方、矩形領域として指定された場合には、矩形領域を特定するための座標値が所見位置３０４に登録される。なお、所見情報には、他の情報として、撮影日時、撮影場所（病院名）、撮影者、担当医師名等の情報が含まれてもよい。このようにして胸部Ｘ線画像について所見情報３００が更新されると、１次読影が終了する。
【００２１】
次に、２次読影では、通信制御部１０２が表示制御部１０７からの指示を受け、Ｓ１００４でサーバ１０９から１次読影の結果である所見情報および胸部Ｘ線画像と、２次読影で使用するＣＴ画像とを取得する。メモリ１０４は、通信制御部１０２から所見情報と各画像とを受信して一時的に保存する。メモリに一次保存された所見情報と胸部Ｘ線画像は、所見位置情報抽出部１０５に出力される。
【００２２】
続くＳ１００５で所見位置情報抽出部１０５は、受信した所見情報に含まれる所見位置３０４の情報に基づいて、胸部Ｘ線画像における所見位置を特定する。図４は、所見位置情報抽出部１０５による所見位置を特定した結果例を説明するための図である。図４（ａ）では、画像４００において、点４０１が特定されている。当該特定部位の座標は（１００、２０）であって、図３における画像ＩＤが「２」の画像に対応している。所見位置情報抽出部１０５は、特定された部位に基づいて、所定の大きさを有する矩形形状の一部領域を部位の周囲に設定する。図４（ｂ）では、特定部位に矩形領域４０２が形成されている。当該矩形領域のサイズは、たとえば特定部位を中心に５０×５０画素、あるいは、１００×１００画素で構成できる。なお、本実施形態ではこのような１次画像に対して設定された一部領域のことを「テンプレート」と呼ぶことにするが、そのサイズは重要ではなく、特に限定すべきものではない。なお、所見情報３００において、所見位置３０４が「点」ではなく、「矩形領域」を示す座標として登録されていた場合、所見位置情報抽出部１０５は、当該矩形領域をそのまま用いてもよいし、あるいは、上記所定のサイズの矩形領域に整形してもよい。
【００２３】
所見位置情報抽出部１０５は、当該テンプレートに含まれる部分画像を胸部Ｘ線画像４００から切り出して「画像所見情報」として画像特定部１０６へ出力する。画像特定部１０６では、当該画像所見情報に基づいて、２次画像であるＣＴ画像の絞り込みを行う。
【００２４】
画像特定部１０６の内部構成の一例は図５に示す通りである。画像特定部１０６は、画像再構成部５０１と相関算出処理部５０２とを有する。画像特定部１０６の処理を説明するに際し、被検体に互いに直交する３つの撮像面について図６を参照して説明する。図６に示すように、被検体の体軸を横断するアキシャル面（axialplane）、この体軸に沿って前後に縦断するサジタル面（sagittal plane）、左右に縦断するコロナル面（coronal plane）という。一般に、モダリティにより撮影される画像は、この３つの撮像面のいずれかに沿って撮影される。そして、１次画像について生成された所見情報における位置の情報を２次画像においても活用しようとする場合、この撮像面の共通性が重要となる。そこで、本実施形態では、１次画像と２次画像の撮像面が異なる場合に、画像再構成部５０１により１次画像の撮像面と同一となる画像を２次画像から再構成する。なお、撮像面が同一の場合には、再構成は行わずに、そのまま２次画像を相関算出処理部５０２に出力する。
【００２５】
画像再構成部５０１は、メモリ１０４から１次画像としての胸部Ｘ線画像と２次画像としてのＣＴ画像群とを取得する。Ｓ１００６で画像再構成部５０１は、１次画像と２次画像の撮像面が同一か否かを判定する。具体的に、１次画像であるＸ線画像の第１の撮像面はコロナル面である一方、２次画像のＣＴ画像の第２の撮像面はアキシャル面である。よって、撮像面が異なると判定できる（Ｓ１００６で「ＮＯ」）。この場合、再構成を行うこととしてＳ１００７で画像再構成部５０１はＣＴ画像群を再構成して、コロナル面の画像群を再構成する。ここでの画像再構成の方法としては、例えば、断層画像からＭＰＲ（Multi Planar Reconstruction）画像を作成する技術等を転用することができる。このような再構成方法は、公知技術を用いればよいのでこれ以上の詳細な説明は省略する。一方、撮像面が同一の場合（Ｓ１００６で「ＹＥＳ」）、再構成は行わないので、Ｓ１００８に移行する。
【００２６】
なお、各画像の撮像面の判定方法は、ＤＩＣＯＭ（Digital Imaging and Communication in Medicine）が定める画像データのヘッダ情報を利用することができる。ＤＩＣＯＭとは、米国放射線学会（ＡＣＲ）と北米電子機器工業会（ＮＥＭＡ）により策定された標準規格であって、ＣＴ、ＭＲＩ、ＣＲ等で撮影した医用画像のフォーマットとそれらの画像を扱う医用画像機器間の通信プロトコルを定義する。具体的に、Ｘ線画像については、ヘッダの以下の３つの特性に基づいて判定可能である。
１．一般シリーズモジュール属性：モダリティ
２．一般シリーズモジュール属性：検査部位
３．ＣＲシリーズモジュール属性：視野位置
【００２７】
実際に胸部Ｘ線画像の場合、各特性は以下のようになる。
１．一般シリーズモジュール属性：モダリティ＝ＣＲ
２．一般シリーズモジュール属性：検査部位＝ＣＨＥＳＴ
３．ＣＲシリーズモジュール属性：視野位置＝ＡＰ（前後方向）またはＰＡ（後前方向）
【００２８】
このような特性の組み合わせについては、「胸部Ｘ線画像、かつ、コロナル面の画像」と判定する。なお、「ＣＲシリーズモジュール属性：視野位置」が「ＰＡ（後前方向）」であった場合、画像を回転させる。但し、画像が胸部Ｘ線画像かつコロナル面の画像であることの判別方法はこれに限るものではない。また、「ＣＲシリーズモジュール属性の視野位置」が取得できない場合は、「一般シリーズモジュール属性：視野位置」から撮像面を判断してもよい。
【００２９】
画像再構成部５０１は、各種モダリティで取得された画像について、画像の種類および撮像面とを、特性の組み合わせ及び各特性値と関連づけて管理しておく。そして、入力された１次画像と２次画像の特性に基づいて、画像の種類と撮像面を判定する。その上で、再構成の有無や方法を決定することができる。
【００３０】
たとえば、一般シリーズモジュールには、「モダリティ」、「シリーズインスタンスＵＩＤ」、「シリーズ番号」、「側性Laterality」、「シリーズ日付」、「シリーズ時刻」、「検査部位」、「患者位置」などがある。また、「モダリティ」の特性値には、ＣＲ（Computed Radiography）、ＣＴ（Computed Tomography）、ＭＲ（Magnetic Resonance）、ＮＭ（Nuclear Medicine）、ＵＳ（Ultrasound）、ＢＩ（Biomagnetic imaging）等がある。「検査部位」には、SKULL,CSPINE, TSPINE, LSPINE, SSPINE, COCCYX,CHEST, CLAVICLE, BREAST, ABDOMEN,PELVIS, HIP, SHOULDER, ELBOW, KNEE,ANKLE, HAND, FOOT, EXTREMITY, HEAD,HEART, NECK, LEG, ARM, JAW等がある。
【００３１】
ＣＲシリーズモジュール属性は、モダリティ特有モジュールの１つであって、特にＣＲグラフィシリーズを記述する属性を規定している。ＣＲシリーズモジュール属性には視野位置のほか、検査部位、フィルタタイプ、コリメータ／グリッド名などが含まれる。なお、モダリティ特有モジュールには、ＣＴモジュールや、ＭＲ画像モジュールなどがある。
【００３２】
Ｓ１００７では、画像再構成部５０１が生成した再構成画像の画像群を相関算出処理部５０２に出力する。再構成が行われなかった場合、２次画像の画像群を相関算出処理部５０２に出力する。続くＳ１００８では、相関算出処理部５０２が相関算出処理を以下のようにして実行する。
【００３３】
相関算出処理部５０２は、所見位置情報抽出部１０５からの画像所見情報と、画像再構成部５０１からの再構成画像としてのコロナル面の画像とを取得する。相関算出処理部５０２は、たとえば輝度分布相関法を用いて、再構成された画像群から最も相関の高い領域を持つ画像を決定する。その際に、画像群との比較対象となるのは、所見位置情報抽出部１０５からの画像所見情報である。輝度分布相関法では、画像群の各画像について、テンプレートである画像所見情報を回転や平行移動させて、各位置における相関値を求め、相関値が最大となる画像を選択する。相関値としては、たとえば特開２００２−３２４２３８号公報に記載の正規化相互相関値を用いてもよい。なお、相関に基づき画像を選択する方法自体は、当該公報のほか、特開平７−３７０７４号公報、特開２００１−３２５５８４号公報に記載される通り公知であるので、ここでのより詳細な説明は省略する。
【００３４】
なお、１次読影で使用した画像と再構成された画像の解像度が異なる場合、テンプレートのサイズを、１次読影で使用した画像と再構成された画像の比率に応じて拡大縮小する。このような拡大縮小されたテンプレートは、予め所見位置情報抽出部１０５で生成しておいてもよいし、あるいは、画像再構成部５０１が生成してもよい。
【００３５】
また、輝度分布相関法を用いて相関の高い領域を決定する際に、処理精度を上げるための前処理を行ってもよい。前処理の１つとして、たとえば１次読影で使用した画像と再構成された画像間で階調を合わせる処理を行うことができる。このような階調合わせ技術は公知技術を用いればよいが、特開平１１−０９６３５２号公報はそのうちの１つを記載する。ここではまず、基準画像のヒストグラムを作成し、当該ヒストグラムを平坦化するための階調変換テーブルと、当該階調変換の逆変換を行う逆変換テーブルとを作成する。次に、処理対象画像のヒストグラムを作成し、当該ヒストグラムを平坦化した後、逆変換テーブルを適用して基準画像と同等の階調を得る。そのほかにも、特開平１１−２８８４６２号公報や特開２００１−２４３４６４にも階調合わせ技術が記載されているがここでの詳細な説明は省略する。
【００３６】
また別の前処理として、１次読影の結果である所見情報における位置情報を用いて、相関の高い領域を決定する際の探索範囲を絞り込んでもよい。ここでは１次読影で使用した画像と再構成された画像との比率に応じて、１次読影で使用した画像及び矩形選択範囲（所見位置情報抽出部１０５で作成した矩形の範囲）を拡大縮小する。この状態から、矩形選択範囲をＸ、Ｙ両方向に任意のサイズ分大きくする。この矩形選択範囲に対応する再構成された画像であるコロナル面の画像の範囲を探索範囲とする。これらは前処理の一例として説明したものであって、適用可能な前処理はこれらに限定されるものではない。
【００３７】
相関算出処理部５０２は、相関が最も高い領域を有する再構成画像を決定すると、当該再構成画像を識別する識別情報と、当該再構成画像において画像所見情報との相関がもっとも高くなる位置の情報とを画像再構成部５０１に出力する。なお、識別情報は、再構成画像に付与された番号やファイル名を用いることができる。また、位置情報は、再構成画像における、画像所見情報に対応する矩形領域の座標情報とすることができる。
【００３８】
なお、画像再構成部５０１が再構成画像を生成しなかった場合も、Ｓ１００８では２次画像を対象として上記と同様に相関算出処理を行い、相関が最も高い２次画像を画像群の中から特定することができる。
【００３９】
画像再構成部５０１は、続くＳ１００９において識別情報と当該位置情報に基づいて、所見位置に該当するＣＴ画像を選択する。選択されたＣＴ画像は、２次画像の画像群の各画像に付与された画像ＩＤにより特定され、表示制御部１０７に出力される。なお、図８に示すように、所見位置に該当するＣＴ画像が複数存在する場合もあるが、その場合にも各ＣＴ画像に付与された画像ＩＤにより、当該複数のＣＴ画像が特定される。また、画像再構成部５０１は、上述の識別情報に対応する相関が最も高くなる再構成画像を、画像ＩＤと共に表示制御部１０７に出力する。なお、ＣＴ画像の選択や、画像ＩＤおよび再構成画像の出力は、相関算出処理部５０２側で行ってもよい。また、相関算出処理が２次画像について行われた場合は、相関算出処理部５０２により特定された２次画像の画像ＩＤが画像再構成部５０１より出力される。
【００４０】
表示制御部１０７は、１次読影及び２次読影の両方のタイミングで使用される。いずれの場合も、表示制御部１０７は、ユーザによる読影開始をトリガに処理を開始する。表示制御部１０７は、通信制御部１０２を制御して「１次読影で使用する画像」、「１次読影で使用した画像」、「所見情報」、「２次読影で使用する画像群」をサーバ１０９から任意のタイミングで取得することができる。
【００４１】
また、表示制御部１０７は、表示部１０８に表示すべき画像をメモリ１０４から取得し、表示部１０８に出力する。特に、画像特定部１０６から画像ＩＤを取得した場合には、Ｓ１０１０で当該画像ＩＤに相当する２次画像としてのＣＴ画像をメモリ１０４から取得し、表示部１０８に出力する。また、画像特定部１０６から再構成画像を取得した場合には、当該再構成画像を表示部１０８に出力する。なお、再構成画像だけでなく、１次読影で用いた対応する１次画像を合わせてメモリ１０４から取得して表示部１０８に出力してもよい。図７（ａ）は、画像特定部１０６から取得した再構成画像７００を表示部１０８が表示した場合を示す図である。また、図７（ｂ）は、１次読影で使用した胸部Ｘ線画像４００と並べて表示した例を示す。さらに図７（ｃ）に示すように画像の上に所見位置情報７０１を重畳して表示しても良い。
【００４２】
さらに、画像特定部１０６から取得した画像ＩＤに基づきアキシャル面のＣＴ画像を表示する場合は、図９に示すようになる。この時、図８に示すように再構成画像の所見位置情報７０１に対応するＣＴ画像が複数枚存在する場合は、画像ＩＤが最小のものから順に表示してもよい。表示順や先頭画像の決定方法は任意であって、特に限定されるものではない。
【００４３】
なお、上記実施形態では、１次読影と２次読影で使用する画像表示装置１０１が同一装置である場合を説明したが、１次読影と２次読影とで異なる医用画像表示装置を利用してもよい。その場合は、サーバ１０９に１次画像、２次画像、並びに所見情報が管理され、１次読影のための医用画像表示装置では、所見位置情報抽出部１０５と画像特定部１０６を除く構成が備わっていればよい。２次読影のための画像表示装置では、図１に示す画像表示装置１０１の構成を備えることが望ましい。
【００４４】
以上の本実施形態によれば、１次読影と２次読影で使用する画像のモダリティが異なり、かつ、撮像面が異なる場合でも、１次読影における所見位置情報(注目した箇所)を２次読影においてユーザに提示可能になる。よって、２次読影における診断効率が向上する。
【００４５】
［実施形態２］
次に、発明のさらなる実施形態について説明する。本実施形態における医用画像表示装置の構成は図１と同様である。以下では主に、実施形態１との相違部分について説明する。
【００４６】
まず、本実施形態では、１次読影にてＭＲ画像、２次読影にてＣＴ画像を用いる例を説明する。この場合画像特定部１０６及び表示制御部１０７の構成、動作が実施形態１とは異なる。まず画像特定部１０６は、図１１に示すように、画像再構成部５０１と相関算出処理部５０２に加え、濃淡反転部１１０１を有する。この濃淡反転部１１０１は、画像再構成部５０１や相関算出処理部５０２に組み込まれてもよいし、独立して設けられてもよい。
【００４７】
画像再構成部５０１は、１次画像と２次画像の撮像面に基づき再構成を行う必要があるか否かを、ＤＩＣＯＭヘッダの所定の特性に基づいて判定する。当該判定は、図１０のＳ１００８より前に実行することができる。
【００４８】
まず、各画像の種類を判定する。１次読影で使用するＭＲ画像のＤＩＣＯＭヘッダの「一般シリーズモジュール属性のモダリティ」は「ＭＲ」である。また、２次読影で使用するＣＴ画像の「一般シリーズモジュール属性のモダリティ」は「ＣＴ」である。画像再構成部５０１は次に、撮像面が同じであるか否かをさらに判定する。ＣＴ画像及びＭＲ画像の撮像面は、ＤＩＣＯＭヘッダの「一般シリーズモジュール属性：患者位置」から判定することができる。具体的には、「一般シリーズモジュール属性：患者位置」の値がＭＲ画像とＣＴ画像とで同じ場合は、撮像面が同じであると判定できる。但し、判定手法はこれに限るものではない。なお、本実施形態のように１次読影と２次読影とで使用する画像の撮像面が同一の場合、画像再構成部５０１では、画像の再構成を行わない。
【００４９】
そこで画像再構成部５０１は、メモリ１０４から取得した２次画像の画像群を濃淡反転部１１０１に出力する。濃淡反転部１１０１では、１次読影で使用した画像から得られた画像所見情報と、２次読影で使用する画像群に対し、相関算出処理部５０２へ画像を受け渡す前の前処理として画像処理を施す。まず、１次画像及び２次画像それぞれにつき、ＤＩＣＯＭヘッダの「画像画素モジュールの属性の光度測定解釈」を解析する。その結果、ＣＴ画像が「ＭＯＮＯＣＨＲＯＭＥ１」でＭＲ画像が「ＭＯＮＯＣＨＲＯＭＥ２」であれば、各画像の画素値の最小値が「白」と「黒」とで逆転した、濃淡の逆転した画像であると判断できる。なお、ＭＯＮＯＣＨＲＯＭＥ１の最小値が白であり、ＭＯＮＯＣＨＲＯＭＥ２の最小値が黒である。そこで、濃淡反転部１１０１は、１次読影で使用した画像の濃淡を、２次読影で使用する画像の濃淡に合わせる処理を施す。なお、濃淡を逆転する画像は１次画像と２次画像のいずれであってもよい。
【００５０】
相関算出処理部５０２は、実施形態１において説明したのと同様、画像所見情報と２次画像の画像群とを比較して、相関の最も大きくなる画像を選択し、当該画像の画像ＩＤを表示制御部１０７に出力する。
【００５１】
表示制御部１０７では、画像特定部１０６から取得した画像ＩＤに基づいて、メモリ１０４から２次画像を選択し、表示部１０８に表示する。その際、本実施形態では、１次画像のＭＲ画像と、２次画像のＣＴ画像との濃淡が逆転しているため、図７（ｂ）のような対比表示を行う場合、一方の濃淡を逆転して表示してもよい。なお、２次画像の濃淡を反転した画像は、表示制御部１０７で生成しても、濃淡反転部１１０１で生成された画像を相関算出処理部５０２を経由して取得してもよい。
【００５２】
なお、本実施形態では、１次画像と２次画像の撮像面が同一の場合を説明したが、撮像面が異なる場合であっても、濃淡が異なる場合には濃淡反転部１１０１により、濃淡を反転した上で、相関演算処理を行えばよい。
【００５３】
以上の本実施形態によれば、１次読影と２次読影で使用する画像のモダリティが異なり、かつ、撮像面が同一で、画像の濃淡などが異なる場合でも、１次読影における所見位置情報(注目した箇所)を２次読影においてユーザに提示可能になる。よって、２次読影における診断効率が向上する。
【００５４】
（その他の実施例）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【特許請求の範囲】
【請求項１】
被験者を第１の撮影方式により第１の撮影装置で撮影して得られた第１の種類の画像に設定された一部領域の画像を利用し、前記第１の撮影方式とは異なる第２の撮影方式により第２の撮影装置で前記被験者を撮影して得られた第２の種類の複数の画像において、前記一部領域の画像と最も相関が高くなる領域を有する画像を特定する画像特定手段と、
前記特定手段により特定された前記第２の種類の画像を表示部に表示させる表示制御手段と
を備え、
前記画像特定手段は、
前記第１の種類の画像が有する第１の撮像面が、前記第２の種類の画像が有する第２の撮像面と異なる場合に、前記第２の種類の複数の画像を再構成して前記第１の撮像面に対応する複数の再構成画像を生成する再構成手段と、
前記複数の再構成画像のそれぞれについて、前記一部領域の画像との相関値を算出して、前記相関値が最大となる再構成画像を選択する相関算出手段と
を備え、
前記第２の種類の複数の画像のうち、前記相関算出手段が選択した前記再構成画像における前記一部領域に対応する位置の画像を特定する
ことを特徴とする画像表示装置。
【請求項２】
前記表示制御手段は、前記相関算出手段が選択した再構成画像を前記表示部にさらに表示させることを特徴とする請求項１に記載の画像表示装置。
【請求項３】
前記画像特定手段は、
前記第１の種類の画像の濃淡と、前記第２の種類の画像の濃淡とが逆転している場合に、前記一部領域の画像と前記第２の種類の画像のいずれか一方の濃淡を反転させる反転手段をさらに備え、
前記相関算出手段は、前記濃淡が反転された画像を用いて前記相関値を算出する
ことを特徴とする請求項１または２に記載の画像表示装置。
【請求項４】
表示部に画像を表示させる画像表示装置の制御方法であって、
画像特定手段が、被験者を第１の撮影方式により第１の撮影装置で撮影して得られた第１の種類の画像に設定された一部領域の画像を利用し、前記第１の撮影方式とは異なる第２の撮影方式により第２の撮影装置で前記被験者を撮影して得られた第２の種類の複数の画像において、前記一部領域の画像と最も相関が高くなる領域を有する画像を特定する画像特定工程と、
表示制御手段が、前記特定工程において特定された前記第２の種類の画像を前記表示部に表示させる表示制御工程と
を備え、
前記画像特定工程は、
再構成手段が、前記第１の種類の画像が有する第１の撮像面が、前記第２の種類の画像が有する第２の撮像面と異なる場合に、前記第２の種類の複数の画像を再構成して前記第１の撮像面に対応する複数の再構成画像を生成する再構成工程と、
相関算出手段が、前記複数の再構成画像のそれぞれについて、前記一部領域の画像との相関値を算出して、前記相関値が最大となる再構成画像を選択する相関算出工程と
を備え、
前記第２の種類の複数の画像のうち、前記相関算出手段が選択した前記再構成画像における前記一部領域に対応する位置の画像が特定される
ことを特徴とする画像表示装置の制御方法。
【請求項５】
コンピュータを請求項１乃至３のいずれか１項に記載の画像表示装置の各手段として機能させるためのプログラム。
【請求項１】
被験者を第１の撮影方式により第１の撮影装置で撮影して得られた第１の種類の画像に設定された一部領域の画像を利用し、前記第１の撮影方式とは異なる第２の撮影方式により第２の撮影装置で前記被験者を撮影して得られた第２の種類の複数の画像において、前記一部領域の画像と最も相関が高くなる領域を有する画像を特定する画像特定手段と、
前記特定手段により特定された前記第２の種類の画像を表示部に表示させる表示制御手段と
を備え、
前記画像特定手段は、
前記第１の種類の画像が有する第１の撮像面が、前記第２の種類の画像が有する第２の撮像面と異なる場合に、前記第２の種類の複数の画像を再構成して前記第１の撮像面に対応する複数の再構成画像を生成する再構成手段と、
前記複数の再構成画像のそれぞれについて、前記一部領域の画像との相関値を算出して、前記相関値が最大となる再構成画像を選択する相関算出手段と
を備え、
前記第２の種類の複数の画像のうち、前記相関算出手段が選択した前記再構成画像における前記一部領域に対応する位置の画像を特定する
ことを特徴とする画像表示装置。
【請求項２】
前記表示制御手段は、前記相関算出手段が選択した再構成画像を前記表示部にさらに表示させることを特徴とする請求項１に記載の画像表示装置。
【請求項３】
前記画像特定手段は、
前記第１の種類の画像の濃淡と、前記第２の種類の画像の濃淡とが逆転している場合に、前記一部領域の画像と前記第２の種類の画像のいずれか一方の濃淡を反転させる反転手段をさらに備え、
前記相関算出手段は、前記濃淡が反転された画像を用いて前記相関値を算出する
ことを特徴とする請求項１または２に記載の画像表示装置。
【請求項４】
表示部に画像を表示させる画像表示装置の制御方法であって、
画像特定手段が、被験者を第１の撮影方式により第１の撮影装置で撮影して得られた第１の種類の画像に設定された一部領域の画像を利用し、前記第１の撮影方式とは異なる第２の撮影方式により第２の撮影装置で前記被験者を撮影して得られた第２の種類の複数の画像において、前記一部領域の画像と最も相関が高くなる領域を有する画像を特定する画像特定工程と、
表示制御手段が、前記特定工程において特定された前記第２の種類の画像を前記表示部に表示させる表示制御工程と
を備え、
前記画像特定工程は、
再構成手段が、前記第１の種類の画像が有する第１の撮像面が、前記第２の種類の画像が有する第２の撮像面と異なる場合に、前記第２の種類の複数の画像を再構成して前記第１の撮像面に対応する複数の再構成画像を生成する再構成工程と、
相関算出手段が、前記複数の再構成画像のそれぞれについて、前記一部領域の画像との相関値を算出して、前記相関値が最大となる再構成画像を選択する相関算出工程と
を備え、
前記第２の種類の複数の画像のうち、前記相関算出手段が選択した前記再構成画像における前記一部領域に対応する位置の画像が特定される
ことを特徴とする画像表示装置の制御方法。
【請求項５】
コンピュータを請求項１乃至３のいずれか１項に記載の画像表示装置の各手段として機能させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−１４７９０１（Ｐ２０１２−１４７９０１Ａ）
【公開日】平成２４年８月９日（２０１２．８．９）
【国際特許分類】
【出願番号】特願２０１１−８１７１（Ｐ２０１１−８１７１）
【出願日】平成２３年１月１８日（２０１１．１．１８）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２４年８月９日（２０１２．８．９）
【国際特許分類】
【出願日】平成２３年１月１８日（２０１１．１．１８）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]