画像処理システム、装置、方法及び医用画像診断装置
【課題】時相の異なる複数の画像を重畳させた際にも、容易に観察することができる画像処理システム、装置及び方法を提供すること。
【解決手段】実施形態に係る画像処理装置は、抽出部は、時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する。そして、位置決定部は、抽出部によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する。そして、表示制御部は、抽出部によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、位置決定部により決定された位置にて重畳させた重畳画像を表示させる。
【解決手段】実施形態に係る画像処理装置は、抽出部は、時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する。そして、位置決定部は、抽出部によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する。そして、表示制御部は、抽出部によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、位置決定部により決定された位置にて重畳させた重畳画像を表示させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、画像処理システム、装置、方法及び医用画像診断装置に関する。
【背景技術】
【０００２】
従来、立体視用メガネ等の専用機器を用いて、２つの視点から撮影された２視差画像を立体視可能なモニタが実用化されている。また、近年、レンチキュラーレンズ等の光線制御子を用いて、複数の視点から撮影された多視差画像（例えば、９視差画像）を裸眼にて立体視可能なモニタが実用化されている。なお、立体視可能なモニタにて表示される２視差画像や９視差画像は、１視点から撮影された画像の奥行き情報を推定し、推定した情報を用いた画像処理により生成される場合もある。
【０００３】
一方、Ｘ線ＣＴ（Computed Tomography）装置やＭＲＩ（Magnetic Resonance Imaging）装置、超音波診断装置等の医用画像診断装置では、３次元の医用画像データ（以下、ボリュームデータ）を生成可能な装置が実用化されている。従来、かかる医用画像診断装置により生成されたボリュームデータは、種々の画像処理により２次元画像とされ、汎用モニタ上にて２次元表示される。例えば、医用画像診断装置により生成されたボリュームデータは、ボリュームレンダリング処理により３次元の情報を反映した２次元画像とされ、汎用モニタ上にて２次元表示される。しかしながら、従来技術では、時相の異なる複数の画像を重畳させた際に、観察し難くなる場合があった。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−８６４１４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明が解決しようとする課題は、時相の異なる複数の画像を重畳させた際にも、容易に観察することができる画像処理システム、装置、方法及び医用画像診断装置を提供することである。
【課題を解決するための手段】
【０００６】
実施形態の画像処理システムは、抽出手段と、位置決定手段と、表示制御手段とを備える。抽出手段は、時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する。位置決定手段は、前記抽出手段によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する。表示制御手段は、前記抽出手段によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、前記位置決定手段により決定された位置にて重畳させた重畳画像を表示させる。
【図面の簡単な説明】
【０００７】
【図１】図１は、第１の実施形態に係る画像処理システムの構成例を説明するための図である。
【図２Ａ】図２Ａは、２視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。
【図２Ｂ】図２Ｂは、２視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。
【図３】図３は、９視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。
【図４】図４は、第１の実施形態に係るワークステーションの構成例を説明するための図である。
【図５】図５は、図４に示すレンダリング処理部の構成例を説明するための図である。
【図６】図６は、第１の実施形態に係るボリュームレンダリング処理の一例を説明するための図である。
【図７】図７は、第１の実施形態に係る制御部の構成例を説明するための図である。
【図８】図８は、第１の実施形態に係る抽出部による処理の一例を説明するための図である。
【図９】図９は、第１の実施形態に係る位置決定部による処理の一例を説明するための図である。
【図１０】図１０は、第１の実施形態に係る表示制御部による処理の一例を説明するための図である。
【図１１】図１１は、第１の実施形態に係るワークステーションによる処理の手順を示すフローチャートである。
【図１２】図１２は、第２の実施形態に係る３つ以上の時相の３次元画像データの例を示す図である。
【図１３】図１３は、第２の実施形態に係る表示制御部による処理の第１の例を説明するための図である。
【図１４】図１４は、第２の実施形態に係る表示制御部による処理の第２の例を説明するための図である。
【図１５】図１５は、第３の実施形態に係る抽出部による処理の一例を説明するための図である。
【発明を実施するための形態】
【０００８】
以下、添付図面を参照して、画像処理システム、装置、方法及び医用画像診断装置の実施形態を詳細に説明する。なお、以下では、画像処理装置としての機能を有するワークステーションを含む画像処理システムを実施形態として説明する。ここで、以下の実施形態で用いる用語について説明すると、「視差画像群」とは、ボリュームデータに対して、所定の視差角ずつ視点位置を移動させてボリュームレンダリング処理を行なうことで生成された画像群のことである。すなわち、「視差画像群」は、「視点位置」が異なる複数の「視差画像」から構成される。また、「視差角」とは、「視差画像群」を生成するために設定された各視点位置のうち隣接する視点位置とボリュームデータによって表される空間内の所定位置（例えば、空間の中心）とにより定まる角度のことである。また、「視差数」とは、立体表示モニタにて立体視されるために必要となる「視差画像」の数のことである。また、以下で記載する「９視差画像」とは、９つの「視差画像」から構成される「視差画像群」のことである。また、以下で記載する「２視差画像」とは、２つの「視差画像」から構成される「視差画像群」のことである。
【０００９】
（第１の実施形態）
まず、第１の実施形態に係る画像処理システムの構成例について説明する。図１は、第１の実施形態に係る画像処理システムの構成例を説明するための図である。
【００１０】
図１に示すように、第１の実施形態に係る画像処理システム１は、医用画像診断装置１１０と、画像保管装置１２０と、ワークステーション１３０と、端末装置１４０とを有する。図１に例示する各装置は、例えば、病院内に設置された院内ＬＡＮ（Local Area Network）２により、直接的、又は間接的に相互に通信可能な状態となっている。例えば、画像処理システム１にＰＡＣＳ（Picture Archiving and Communication System）が導入されている場合、各装置は、ＤＩＣＯＭ（Digital Imaging and Communications in Medicine）規格に則って、医用画像等を相互に送受信する。
【００１１】
かかる画像処理システム１は、医用画像診断装置１１０により生成された３次元の医用画像データであるボリュームデータから視差画像群を生成し、この視差画像群を立体視可能なモニタに表示することで、病院内に勤務する医師や検査技師に立体視可能な医用画像を提供する。具体的には、第１の実施形態においては、ワークステーション１３０が、ボリュームデータに対して種々の画像処理を行ない、視差画像群を生成する。また、ワークステーション１３０及び端末装置１４０が、立体視可能なモニタを有し、ワークステーション１３０にて生成された視差画像群をこのモニタに表示する。また、画像保管装置１２０は、医用画像診断装置１１０にて生成されたボリュームデータや、ワークステーション１３０にて生成された視差画像群を保管する。すなわち、ワークステーション１３０や端末装置１４０は、この画像保管装置１２０からボリュームデータや視差画像群を取得し、これを処理したり、モニタに表示したりする。以下、各装置を順に説明する。
【００１２】
医用画像診断装置１１０は、Ｘ線診断装置、Ｘ線ＣＴ（Computed Tomography）装置、ＭＲＩ（Magnetic Resonance Imaging）装置、超音波診断装置、ＳＰＥＣＴ（Single Photon Emission Computed Tomography）装置、ＰＥＴ（Positron Emission computed Tomography）装置、ＳＰＥＣＴ装置とＸ線ＣＴ装置とが一体化されたＳＰＥＣＴ−ＣＴ装置、ＰＥＴ装置とＸ線ＣＴ装置とが一体化されたＰＥＴ−ＣＴ装置、又はこれらの装置群等である。また、第１の実施形態に係る医用画像診断装置１１０は、３次元の医用画像データ（ボリュームデータ）を生成可能である。
【００１３】
具体的には、第１の実施形態に係る医用画像診断装置１１０は、被検体を撮影することによりボリュームデータを生成する。例えば、医用画像診断装置１１０は、被検体を撮影することにより投影データやＭＲ信号等のデータを収集し、収集したデータから、被検体の体軸方向に沿った複数のアキシャル面の医用画像データを再構成することで、ボリュームデータを生成する。例えば、医用画像診断装置１１０は、５００枚のアキシャル面の医用画像データを再構成する。この５００枚のアキシャル面の医用画像データ群が、ボリュームデータである。なお、医用画像診断装置１１０により撮影された被検体の投影データやＭＲ信号等自体をボリュームデータとしても良い。
【００１４】
また、第１の実施形態に係る医用画像診断装置１１０は、生成したボリュームデータを画像保管装置１２０に送信する。なお、医用画像診断装置１１０は、ボリュームデータを画像保管装置１２０に送信する際に、付帯情報として、例えば、患者を識別する患者ＩＤ、検査を識別する検査ＩＤ、医用画像診断装置１１０を識別する装置ＩＤ、医用画像診断装置１１０による１回の撮影を識別するシリーズＩＤ等を送信する。
【００１５】
画像保管装置１２０は、医用画像を保管するデータベースである。具体的には、第１の実施形態に係る画像保管装置１２０は、医用画像診断装置１１０から送信されたボリュームデータを記憶部に格納し、これを保管する。また、第１の実施形態においては、ワークステーション１３０が、ボリュームデータから視差画像群を生成し、生成した視差画像群を画像保管装置１２０に送信する。このため、画像保管装置１２０は、ワークステーション１３０から送信された視差画像群を記憶部に格納し、これを保管する。なお、本実施形態は、大容量の画像を保管可能なワークステーション１３０を用いることで、図１に例示するワークステーション１３０と画像保管装置１２０とが統合される場合であっても良い。すなわち、本実施形態は、ワークステーション１３０そのものにボリュームデータもしくは視差画像群を記憶させる場合であっても良い。
【００１６】
なお、第１の実施形態において、画像保管装置１２０に保管されたボリュームデータや視差画像群は、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等と対応付けて保管される。このため、ワークステーション１３０や端末装置１４０は、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等を用いた検索を行なうことで、必要なボリュームデータや視差画像群を画像保管装置１２０から取得する。
【００１７】
ワークステーション１３０は、医用画像に対して画像処理を行なう画像処理装置である。具体的には、第１の実施形態に係るワークステーション１３０は、画像保管装置１２０から取得したボリュームデータに対して種々のレンダリング処理を行ない、視差画像群を生成する。視差画像群とは、複数の視点から撮影された複数の視差画像のことであり、例えば、９視差画像を裸眼にて立体視可能なモニタにて表示される視差画像群とは、視点位置が異なる９つの視差画像のことである。
【００１８】
また、第１の実施形態に係るワークステーション１３０は、表示部として、立体視可能なモニタ（以下、立体表示モニタ）を有する。ワークステーション１３０は、視差画像群を生成し、生成した視差画像群を立体表示モニタに表示する。この結果、ワークステーション１３０の操作者は、立体表示モニタに表示された立体視可能な医用画像を確認しながら、視差画像群生成のための操作を行なうことができる。
【００１９】
また、ワークステーション１３０は、生成した視差画像群を画像保管装置１２０に送信する。なお、ワークステーション１３０は、視差画像群を画像保管装置１２０に送信する際に、付帯情報として、例えば、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等を送信する。また、視差画像群を画像保管装置１２０に送信する際に送信される付帯情報としては、視差画像群に関する付帯情報も挙げられる。視差画像群に関する付帯情報としては、視差画像の枚数（例えば、「９」）や、視差画像の解像度（例えば、「４６６×３５０画素」）等がある。
【００２０】
端末装置１４０は、病院内に勤務する医師や検査技師に医用画像を閲覧させるための装置である。例えば、端末装置１４０は、病院内に勤務する医師や検査技師により操作されるＰＣ（Personal Computer）やタブレット式ＰＣ、ＰＤＡ（Personal Digital Assistant）、携帯電話等である。具体的には、第１の実施形態に係る端末装置１４０は、表示部として立体表示モニタを有する。また、端末装置１４０は、画像保管装置１２０から視差画像群を取得し、取得した視差画像群を立体表示モニタに表示する。この結果、観察者である医師や検査技師は、立体視可能な医用画像を閲覧することができる。
【００２１】
ここで、ワークステーション１３０や端末装置１４０が有する立体表示モニタについて説明する。現在最も普及している一般的な汎用モニタは、２次元画像を２次元で表示するものであり、２次元画像を立体表示することができない。仮に、観察者が汎用モニタにて立体視を要望する場合、汎用モニタに対して画像を出力する装置は、平行法や交差法により観察者が立体視可能な２視差画像を並列表示させる必要がある。又は、汎用モニタに対して画像を出力する装置は、例えば、左目用の部分に赤色のセロハンが取り付けられ、右目用の部分に青色のセロハンが取り付けられたメガネを用いて余色法により観察者が立体視可能な画像を表示する必要がある。
【００２２】
一方、立体表示モニタとしては、立体視用メガネ等の専用機器を用いることで、２視差画像（両眼視差画像とも称する）を立体視可能とするものがある。
【００２３】
図２Ａ及び図２Ｂは、２視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。図２Ａ及び図２Ｂに示す一例は、シャッター方式により立体表示を行なう立体表示モニタであり、モニタを観察する観察者が装着する立体視用メガネとしてシャッターメガネが用いられる。かかる立体表示モニタは、モニタにて２視差画像を交互に出射する。例えば、図２Ａに示すモニタは、左目用の画像と右目用の画像を、１２０Ｈｚにて交互に出射する。ここで、モニタには、図２Ａに示すように、赤外線出射部が設置され、赤外線出射部は、画像が切り替わるタイミングに合わせて赤外線の出射を制御する。
【００２４】
また、赤外線出射部から出射された赤外線は、図２Ａに示すシャッターメガネの赤外線受光部により受光される。シャッターメガネの左右それぞれの枠には、シャッターが取り付けられており、シャッターメガネは、赤外線受光部が赤外線を受光したタイミングに合わせて左右のシャッターそれぞれの透過状態及び遮光状態を交互に切り替える。以下、シャッターにおける透過状態及び遮光状態の切り替え処理について説明する。
【００２５】
各シャッターは、図２Ｂに示すように、入射側の偏光板と出射側の偏光板とを有し、更に、入射側の偏光板と出射側の偏光板との間に液晶層を有する。また、入射側の偏光板と出射側の偏光板とは、図２Ｂに示すように、互いに直交している。ここで、図２Ｂに示すように、電圧が印加されていない「ＯＦＦ」の状態では、入射側の偏光板を通った光は、液晶層の作用により９０度回転し、出射側の偏光板を透過する。すなわち、電圧が印加されていないシャッターは、透過状態となる。
【００２６】
一方、図２Ｂに示すように、電圧が印加された「ＯＮ」の状態では、液晶層の液晶分子による偏光回転作用が消失するため、入射側の偏光板を通った光は、出射側の偏光板で遮られてしまう。すなわち、電圧が印加されたシャッターは、遮光状態となる。
【００２７】
そこで、例えば、赤外線出射部は、モニタ上に左目用の画像が表示されている期間、赤外線を出射する。そして、赤外線受光部は、赤外線を受光している期間、左目のシャッターに電圧を印加せず、右目のシャッターに電圧を印加させる。これにより、図２Ａに示すように、右目のシャッターが遮光状態となり、左目のシャッターが透過状態となるため、観察者の左目に左目用の画像が入射する。一方、赤外線出射部は、モニタ上に右目用の画像が表示されている期間、赤外線の出射を停止する。そして、赤外線受光部は、赤外線が受光されない期間、右目のシャッターに電圧を印加せず、左目のシャッターに電圧を印加させる。これにより、左目のシャッターが遮光状態となり、右目のシャッターが透過状態であるため、観察者の右目に右目用の画像が入射する。このように、図２Ａ及び図２Ｂに示す立体表示モニタは、モニタに表示される画像とシャッターの状態を連動させて切り替えることで、観察者が立体視可能な画像を表示させる。なお、２視差画像を立体視可能な立体表示モニタとしては、上記のシャッター方式以外にも、偏光メガネ方式を採用したモニタも知られている。
【００２８】
更に、近年実用化された立体表示モニタとしては、レンチキュラーレンズ等の光線制御子を用いることで、例えば、９視差画像等の多視差画像を観察者が裸眼にて立体視可能とするものがある。かかる立体表示モニタは、両眼視差による立体視を可能とし、更に、観察者の視点移動に合わせて観察される映像も変化する運動視差による立体視も可能とする。
【００２９】
図３は、９視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。図３に示す立体表示モニタには、液晶パネル等の平面状の表示面２００の前面に、光線制御子が配置される。例えば、図３に示す立体表示モニタには、光線制御子として、光学開口が垂直方向に延びる垂直レンチキュラーシート２０１が表示面２００の前面に貼り付けられている。
【００３０】
表示面２００には、図３に示すように、縦横比が３：１であり、縦方向にサブ画素である赤（Ｒ）、緑（Ｇ）、青（Ｂ）の３つが配置された画素２０２がマトリクス状に配置される。図３に示す立体表示モニタは、９つの画像により構成される９視差画像を、所定フォーマット（例えば格子状）に配置した中間画像に変換したうえで、表示面２００に出力する。すなわち、図３に示す立体表示モニタは、９視差画像にて同一位置にある９つの画素それぞれを、９列の画素２０２に割り振って出力させる。９列の画素２０２は、視点位置の異なる９つの画像を同時に表示する単位画素群２０３となる。
【００３１】
表示面２００において単位画素群２０３として同時に出力された９視差画像は、例えば、ＬＥＤ（Light Emitting Diode）バックライトにより平行光として放射され、更に、垂直レンチキュラーシート２０１により、多方向に放射される。９視差画像の各画素の光が多方向に放射されることにより、観察者の右目及び左目に入射する光は、観察者の位置（視点の位置）に連動して変化する。すなわち、観察者の見る角度により、右目に入射する視差画像と左目に入射する視差画像とは、視差角が異なる。これにより、観察者は、例えば、図３に示す９つの位置それぞれにおいて、撮影対象を立体的に視認できる。また、観察者は、例えば、図３に示す「５」の位置において、撮影対象に対して正対した状態で立体的に視認できるとともに、図３に示す「５」以外それぞれの位置において、撮影対象の向きを変化させた状態で立体的に視認できる。なお、図３に示す立体表示モニタは、あくまでも一例である。９視差画像を表示する立体表示モニタは、図３に示すように、「ＲＲＲ・・・、ＧＧＧ・・・、ＢＢＢ・・・」の横ストライプ液晶である場合であっても良いし、「ＲＧＢＲＧＢ・・・」の縦ストライプ液晶である場合であっても良い。また、図３に示す立体表示モニタは、図３に示すように、レンチキュラーシートが垂直となる縦レンズ方式である場合であっても良いし、レンチキュラーシートが斜めとなる斜めレンズ方式である場合であっても良い。
【００３２】
ここまで、第１の実施形態に係る画像処理システム１の構成例について簡単に説明した。なお、上述した画像処理システム１は、ＰＡＣＳが導入されている場合にその適用が限られるものではない。例えば、画像処理システム１は、医用画像が添付された電子カルテを管理する電子カルテシステムが導入されている場合にも、同様に適用される。この場合、画像保管装置１２０は、電子カルテを保管するデータベースである。また、例えば、画像処理システム１は、ＨＩＳ（Hospital Information System）、ＲＩＳ（Radiology Information System）が導入されている場合にも、同様に適用される。また、画像処理システム１は、上述した構成例に限られるものではない。各装置が有する機能やその分担は、運用の形態に応じて適宜変更されてよい。
【００３３】
次に、第１の実施形態に係るワークステーションの構成例について図４を用いて説明する。図４は、第１の実施形態に係るワークステーションの構成例を説明するための図である。なお、以下において、「視差画像群」とは、ボリュームデータに対してボリュームレンダリング処理を行なうことで生成された立体視用の画像群のことである。また、「視差画像」とは、「視差画像群」を構成する個々の画像のことである。すなわち、「視差画像群」は、視点位置が異なる複数の「視差画像」から構成される。
【００３４】
第１の実施形態に係るワークステーション１３０は、画像処理等に適した高性能なコンピュータであり、図４に示すように、入力部１３１と、表示部１３２と、通信部１３３と、記憶部１３４と、制御部１３５と、レンダリング処理部１３６とを有する。なお、以下では、ワークステーション１３０が画像処理等に適した高性能なコンピュータである場合を用いて説明するが、これに限定されるものではなく、任意の情報処理装置であって良い。例えば、任意のパーソナルコンピュータであっても良い。
【００３５】
入力部１３１は、マウス、キーボード、トラックボール等であり、ワークステーション１３０に対する各種操作の入力を操作者から受け付ける。具体的には、第１の実施形態に係る入力部１３１は、レンダリング処理の対象となるボリュームデータを画像保管装置１２０から取得するための情報の入力を受け付ける。例えば、入力部１３１は、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等の入力を受け付ける。また、第１の実施形態に係る入力部１３１は、レンダリング処理に関する条件（以下、レンダリング条件）の入力を受け付ける。
【００３６】
表示部１３２は、立体表示モニタとしての液晶パネル等であり、各種情報を表示する。具体的には、第１の実施形態に係る表示部１３２は、操作者から各種操作を受け付けるためのＧＵＩ（Graphical User Interface）や、視差画像群等を表示する。通信部１３３は、ＮＩＣ（Network Interface Card）等であり、他の装置との間で通信を行う。
【００３７】
記憶部１３４は、ハードディスク、半導体メモリ素子等であり、各種情報を記憶する。具体的には、第１の実施形態に係る記憶部１３４は、通信部１３３を介して画像保管装置１２０から取得したボリュームデータを記憶する。また、第１の実施形態に係る記憶部１３４は、レンダリング処理中のボリュームデータや、レンダリング処理により生成された視差画像群、及び、２次元表示用の画像等を記憶する。
【００３８】
制御部１３５は、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等の電子回路、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路であり、ワークステーション１３０の全体制御を行なう。
【００３９】
例えば、第１の実施形態に係る制御部１３５は、表示部１３２に対するＧＵＩの表示や視差画像群の表示を制御する。また、例えば、制御部１３５は、画像保管装置１２０との間で通信部１３３を介して行なわれるボリュームデータや視差画像群の送受信を制御する。また、例えば、制御部１３５は、レンダリング処理部１３６によるレンダリング処理を制御する。また、例えば、制御部１３５は、ボリュームデータの記憶部１３４からの読み込みや、視差画像群の記憶部１３４への格納を制御する。
【００４０】
レンダリング処理部１３６は、制御部１３５による制御の下、画像保管装置１２０から取得したボリュームデータに対して種々のレンダリング処理を行ない、視差画像群を生成する。なお、レンダリング処理部１３６の処理については、後に詳述する。
【００４１】
レンダリング処理部１３６は、制御部１３５による制御の下、画像保管装置１２０から取得したボリュームデータに対して種々のレンダリング処理を行ない、視差画像群を生成する。具体的には、第１の実施形態に係るレンダリング処理部１３６は、記憶部１３４からボリュームデータを読み込み、このボリュームデータに対して、まず前処理を行なう。次に、レンダリング処理部１３６は、前処理後のボリュームデータに対してボリュームレンダリング処理を行ない、視差画像群を生成する。続いて、レンダリング処理部１３６は、各種情報（目盛り、患者名、検査項目等）が描出された２次元画像を生成し、これを視差画像群それぞれに対して重畳することで、出力用の２次元画像を生成する。そして、レンダリング処理部１３６は、生成した視差画像群や出力用の２次元画像を記憶部１３４に格納する。なお、第１の実施形態において、レンダリング処理とは、ボリュームデータに対して行なう画像処理全体のことであり、ボリュームレンダリング処理とは、レンダリング処理の内、３次元の情報を反映した２次元画像を生成する処理のことである。レンダリング処理により生成される医用画像とは、例えば、視差画像が該当する。
【００４２】
図５は、図４に示すレンダリング処理部の構成例を説明するための図である。図５に示すように、レンダリング処理部１３６は、前処理部１３６１と、３次元画像処理部１３６２と、２次元画像処理部１３６３とを有する。前処理部１３６１が、ボリュームデータに対する前処理を行い、３次元画像処理部１３６２が、前処理後のボリュームデータから視差画像群を生成し、２次元画像処理部１３６３が、視差画像群に各種情報が重畳された出力用の２次元画像を生成する。以下、各部を順に説明する。
【００４３】
前処理部１３６１は、ボリュームデータに対してレンダリング処理を行なう際に、種々の前処理を行なう処理部であり、画像補正処理部１３６１ａと、３次元物体フュージョン部１３６１ｅと、３次元物体表示領域設定部１３６１ｆとを有する。
【００４４】
画像補正処理部１３６１ａは、２種類のボリュームデータを１つのボリュームデータとして処理する際に画像補正処理を行なう処理部であり、図５に示すように、歪み補正処理部１３６１ｂ、体動補正処理部１３６１ｃ及び画像間位置合わせ処理部１３６１ｄを有する。例えば、画像補正処理部１３６１ａは、ＰＥＴ−ＣＴ装置により生成されたＰＥＴ画像のボリュームデータとＸ線ＣＴ画像のボリュームデータとを１つのボリュームデータとして処理する際に画像補正処理を行なう。或いは、画像補正処理部１３６１ａは、ＭＲＩ装置により生成されたＴ１強調画像のボリュームデータとＴ２強調画像のボリュームデータとを１つのボリュームデータとして処理する際に画像補正処理を行なう。
【００４５】
また、歪み補正処理部１３６１ｂは、個々のボリュームデータにおいて、医用画像診断装置１１０によるデータ収集時の収集条件に起因するデータの歪みを補正する。また、体動補正処理部１３６１ｃは、個々のボリュームデータを生成するために用いられたデータの収集時期における被検体の体動に起因する移動を補正する。また、画像間位置合わせ処理部１３６１ｄは、歪み補正処理部１３６１ｂ及び体動補正処理部１３６１ｃによる補正処理が行なわれた２つのボリュームデータ間で、例えば、相互相関法等を用いた位置合わせ（Registration）を行なう。
【００４６】
３次元物体フュージョン部１３６１ｅは、画像間位置合わせ処理部１３６１ｄにより位置合わせが行なわれた複数のボリュームデータをフュージョンさせる。なお、画像補正処理部１３６１ａ及び３次元物体フュージョン部１３６１ｅの処理は、単一のボリュームデータに対してレンダリング処理を行なう場合、省略される。
【００４７】
３次元物体表示領域設定部１３６１ｆは、操作者により指定された表示対象臓器に対応する表示領域を設定する処理部であり、セグメンテーション処理部１３６１ｇを有する。セグメンテーション処理部１３６１ｇは、操作者により指定された心臓、肺、血管等の臓器を、例えば、ボリュームデータの画素値（ボクセル値）に基づく領域拡張法により抽出する処理部である。
【００４８】
なお、セグメンテーション処理部１３６１ｇは、操作者により表示対象臓器が指定されなかった場合、セグメンテーション処理を行なわない。また、セグメンテーション処理部１３６１ｇは、操作者により表示対象臓器が複数指定された場合、該当する複数の臓器を抽出する。また、セグメンテーション処理部１３６１ｇの処理は、レンダリング画像を参照した操作者の微調整要求により再度実行される場合もある。
【００４９】
３次元画像処理部１３６２は、前処理部１３６１が処理を行なった前処理後のボリュームデータに対してボリュームレンダリング処理を行なう。ボリュームレンダリング処理を行なう処理部として、３次元画像処理部１３６２は、投影方法設定部１３６２ａと、３次元幾何変換処理部１３６２ｂと、３次元物体アピアランス処理部１３６２ｆと、３次元仮想空間レンダリング部１３６２ｋとを有する。
【００５０】
投影方法設定部１３６２ａは、視差画像群を生成するための投影方法を決定する。例えば、投影方法設定部１３６２ａは、ボリュームレンダリング処理を平行投影法により実行するか、透視投影法により実行するかを決定する。
【００５１】
３次元幾何変換処理部１３６２ｂは、ボリュームレンダリング処理が実行されるボリュームデータを３次元幾何学的に変換するための情報を決定する処理部であり、平行移動処理部１３６２ｃ、回転処理部１３６２ｄ及び拡大縮小処理部１３６２ｅを有する。平行移動処理部１３６２ｃは、ボリュームレンダリング処理を行なう際の視点位置が平行移動された場合に、ボリュームデータを平行移動させる移動量を決定する処理部であり、回転処理部１３６２ｄは、ボリュームレンダリング処理を行なう際の視点位置が回転移動された場合に、ボリュームデータを回転移動させる移動量を決定する処理部である。また、拡大縮小処理部１３６２ｅは、視差画像群の拡大や縮小が要求された場合に、ボリュームデータの拡大率や縮小率を決定する処理部である。
【００５２】
３次元物体アピアランス処理部１３６２ｆは、３次元物体色彩処理部１３６２ｇ、３次元物体不透明度処理部１３６２ｈ、３次元物体材質処理部１３６２ｉ及び３次元仮想空間光源処理部１３６２ｊを有する。３次元物体アピアランス処理部１３６２ｆは、これらの処理部により、例えば、操作者の要求に応じて、表示される視差画像群の表示状態を決定する処理を行なう。
【００５３】
３次元物体色彩処理部１３６２ｇは、ボリュームデータにてセグメンテーションされた各領域に対して着色される色彩を決定する処理部である。３次元物体不透明度処理部１３６２ｈは、ボリュームデータにてセグメンテーションされた各領域を構成する各ボクセルの不透過度（Opacity）を決定する処理部である。なお、ボリュームデータにおいて不透過度が「１００％」とされた領域の後方の領域は、視差画像群において描出されないこととなる。また、ボリュームデータにおいて不透過度が「０％」とされた領域は、視差画像群において描出されないこととなる。
【００５４】
３次元物体材質処理部１３６２ｉは、ボリュームデータにてセグメンテーションされた各領域の材質を決定することで、この領域が描出される際の質感を調整する処理部である。３次元仮想空間光源処理部１３６２ｊは、ボリュームデータに対してボリュームレンダリング処理を行なう際に、３次元仮想空間に設置する仮想光源の位置や、仮想光源の種類を決定する処理部である。仮想光源の種類としては、無限遠から平行な光線を照射する光源や、視点から放射状の光線を照射する光源等が挙げられる。
【００５５】
３次元仮想空間レンダリング部１３６２ｋは、ボリュームデータに対してボリュームレンダリング処理を行ない、視差画像群を生成する。また、３次元仮想空間レンダリング部１３６２ｋは、ボリュームレンダリング処理を行なう際、必要に応じて、投影方法設定部１３６２ａ、３次元幾何変換処理部１３６２ｂ、３次元物体アピアランス処理部１３６２ｆにより決定された各種情報を用いる。
【００５６】
ここで、３次元仮想空間レンダリング部１３６２ｋによるボリュームレンダリング処理は、レンダリング条件に従って行なわれることになる。例えば、レンダリング条件は、「平行投影法」又は「透視投影法」である。また、例えば、レンダリング条件は、「基準の視点位置及び視差角」である。また、例えば、レンダリング条件は、「視点位置の平行移動」、「視点位置の回転移動」、「視差画像群の拡大」、「視差画像群の縮小」である。また、例えば、レンダリング条件は、「着色される色彩」、「透過度」、「質感」、「仮想光源の位置」、「仮想光源の種類」である。このようなレンダリング条件は、入力部１３１を介して操作者から受け付ける場合や、初期設定される場合が考えられる。いずれの場合も、３次元仮想空間レンダリング部１３６２ｋは、制御部１３５からレンダリング条件を受け付け、このレンダリング条件に従って、ボリュームデータに対するボリュームレンダリング処理を行なう。また、このとき、上述した投影方法設定部１３６２ａ、３次元幾何変換処理部１３６２ｂ、３次元物体アピアランス処理部１３６２ｆが、このレンダリング条件に従って必要な各種情報を決定するので、３次元仮想空間レンダリング部１３６２ｋは、決定されたこれらの各種情報を用いて視差画像群を生成する。
【００５７】
図６は、第１の実施形態に係るボリュームレンダリング処理の一例を説明するための図である。例えば、３次元仮想空間レンダリング部１３６２ｋが、図６の「９視差画像生成方式（１）」に示すように、レンダリング条件として、平行投影法を受け付け、更に、基準の視点位置（５）と視差角「１度」とを受け付けたとする。かかる場合、３次元仮想空間レンダリング部１３６２ｋは、視差角が「１度」おきとなるように、視点の位置を（１）〜（９）に平行移動して、平行投影法により視差角（視線方向間の角度）が１度ずつ異なる９つの視差画像を生成する。なお、平行投影法を行なう場合、３次元仮想空間レンダリング部１３６２ｋは、視線方向に沿って無限遠から平行な光線を照射する光源を設定する。
【００５８】
或いは、３次元仮想空間レンダリング部１３６２ｋが、図６の「９視差画像生成方式（２）」に示すように、レンダリング条件として、透視投影法を受け付け、更に、基準の視点位置（５）と視差角「１度」とを受け付けたとする。かかる場合、３次元仮想空間レンダリング部１３６２ｋは、ボリュームデータの中心（重心）を中心に視差角が「１度」おきとなるように、視点の位置を（１）〜（９）に回転移動して、透視投影法により視差角が１度ずつ異なる９つの視差画像を生成する。なお、透視投影法を行なう場合、３次元仮想空間レンダリング部１３６２ｋは、視線方向を中心に光を３次元的に放射状に照射する点光源や面光源を各視点にて設定する。また、透視投影法を行なう場合、レンダリング条件によっては、視点（１）〜（９）は、平行移動される場合であってもよい。
【００５９】
なお、３次元仮想空間レンダリング部１３６２ｋは、表示されるボリュームレンダリング画像の縦方向に対しては、視線方向を中心に光を２次元的に放射状に照射し、表示されるボリュームレンダリング画像の横方向に対しては、視線方向に沿って無限遠から平行な光線を照射する光源を設定することで、平行投影法と透視投影法とを併用したボリュームレンダリング処理を行なってもよい。
【００６０】
このようにして生成された９つの視差画像が、視差画像群である。第１の実施形態において、９つの視差画像は、例えば制御部１３５により所定フォーマット（例えば格子状）に配置した中間画像に変換され、立体表示モニタとしての表示部１３２に出力される。すると、ワークステーション１３０の操作者は、立体表示モニタに表示された立体視可能な医用画像を確認しながら、視差画像群生成のための操作を行なうことができる。
【００６１】
なお、図６の例では、レンダリング条件として、投影方法、基準の視点位置及び視差角を受け付けた場合を説明したが、レンダリング条件として、他の条件を受け付けた場合も同様に、３次元仮想空間レンダリング部１３６２ｋは、それぞれのレンダリング条件を反映しつつ、視差画像群を生成する。
【００６２】
また、３次元仮想空間レンダリング部１３６２ｋは、ボリュームレンダリングだけでなく、任意の平面（例えば、アキシャル面、サジタル面、コロナル面など）の平面画像を再構成する。例えば、３次元仮想空間レンダリング部１３６２ｋは、断面再構成法（ＭＰＲ：Multi Planer Reconstruction）を行なってボリュームデータからＭＰＲ画像を再構成する。なお、３次元仮想空間レンダリング部１３６２ｋは、「Curved MPR」を行なう機能や、「Intensity Projection」を行なう機能も有する。
【００６３】
続いて、３次元画像処理部１３６２がボリュームデータから生成した視差画像群は、アンダーレイ（Underlay）とされる。そして、各種情報（目盛り、患者名、検査項目等）が描出されたオーバーレイ（Overlay）がアンダーレイに対して重畳されることで、出力用の２次元画像とされる。２次元画像処理部１３６３は、オーバーレイ及びアンダーレイに対して画像処理を行なうことで、出力用の２次元画像を生成する処理部であり、図５に示すように、２次元物体描画部１３６３ａ、２次元幾何変換処理部１３６３ｂ及び輝度調整部１３６３ｃを有する。例えば、２次元画像処理部１３６３は、出力用の２次元画像の生成処理に要する負荷を軽減するために、９枚の視差画像（アンダーレイ）のそれぞれに対して１枚のオーバーレイを重畳することで、出力用の２次元画像を９枚、生成する。
【００６４】
２次元物体描画部１３６３ａは、オーバーレイに描出される各種情報を描画する処理部であり、２次元幾何変換処理部１３６３ｂは、オーバーレイに描出される各種情報の位置を平行移動処理又は回転移動処理したり、オーバーレイに描出される各種情報の拡大処理又は縮小処理したりする処理部である。
【００６５】
また、輝度調整部１３６３ｃは、輝度変換処理を行なう処理部であり、例えば、出力先の立体表示モニタの諧調や、ウィンドウ幅（ＷＷ：Window Width）、ウィンドウレベル（ＷＬ：Window Level）等の画像処理用のパラメータに応じて、オーバーレイ及びアンダーレイの輝度を調整する処理部である。
【００６６】
このようにして生成された出力用の２次元画像は、例えば制御部１３５により一旦記憶部１３４に格納され、その後、通信部１３３を介して画像保管装置１２０に送信される。例えば、端末装置１４０が、画像保管装置１２０からこの出力用の２次元画像を取得し、所定フォーマット（例えば格子状）に配置した中間画像に変換した上で立体表示モニタに表示すると、観察者である医師や検査技師は、各種情報（目盛り、患者名、検査項目等）が描出された状態で、立体視可能な医用画像を閲覧することができる。
【００６７】
以上、第１の実施形態に係る画像処理システム１及びワークステーション１３０の構成について説明した。かかる構成のもと、第１の実施形態に係るワークステーション１３０は、以下、詳細に説明する制御部１３５の処理により、時相の異なる複数の画像を重畳させた際にも、容易に観察することを可能とするように構成されている。具体的には、第１の実施形態に係るワークステーション１３０は、時相の異なる複数の３次元画像それぞれに含まれる関心領域を、それぞれ異なる表示形式にて表示させる。
【００６８】
ここで、時相が異なる複数の３次元画像を重畳させ、観察する際の問題点について説明する。例えば、立体視可能なモニタにて３次元画像を表示させた場合、関心部位をより詳細に観察することができ、診断精度の向上などが期待される。一例を挙げると、抗がん剤や放射線治療による腫瘍の治療効果を判定する場合においても、腫瘍を立体的に観察して治療効果を判定することができる。しかしながら、治療前後の３次元画像を別々に表示しても腫瘍の縮小具合などは把握し難い。そこで、治療前後の３次元画像を重畳させて腫瘍の大きさや形態などの変化を観察しようとした場合に、単に重畳させただけでは、腫瘍が重なるだけで、腫瘍の大きさや形態などの変化を観察することは困難である。第１の実施形態に係るワークステーション１３０は、このような場合であっても、腫瘍の大きさや形態などの変化を容易に観察することを可能にする。
【００６９】
図７は、第１の実施形態に係る制御部１３５の構成例を説明するための図である。図７に示すように、制御部１３５は、抽出部１３５１と、位置決定部１３５２と、表示制御部１３５３とを有する。抽出部１３５１は、時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する。具体的には、抽出部１３５１は、記憶部１３４によって記憶された時相の異なる複数のボリュームデータから、腫瘍などの関心領域をそれぞれ抽出する。例えば、抽出部１３５１は、領域拡張法や、閾値法や、ＣＡＤ（Computer Assisted Diagnosis）などを用いて関心領域を抽出する。
【００７０】
図８は、第１の実施形態に係る抽出部１３５１による処理の一例を説明するための図である。図８においては、Ｘ線ＣＴ装置により撮像された肝臓癌の治療前及び治療後のボリュームデータからそれぞれ関心領域を抽出する場合について示す。また、図８においては、関心領域を模式的（球）に示しているが、実際には、関心領域それぞれが固有の形態を有している。例えば、抽出部１３５１は、ＣＴ値を用いた領域拡張法により、図８の（Ａ）の＜治療前＞のボリュームデータの領域３００内に位置する病変部位を関心領域として抽出する。すなわち、抽出部１３５１は、図８の（Ｂ）に示すように、領域３００内に示すＲＯＩ（Region Of Interest）１を抽出する。
【００７１】
同様に、抽出部１３５１は、ＣＴ値を用いた領域拡張法などにより、図８の（Ａ）の＜治療後＞のボリュームデータの領域３０１内に位置する病変部位を関心領域として抽出する。すなわち、抽出部１３５１は、図８の（Ｂ）に示すように、領域３０１内に示すＲＯＩ２を抽出する。なお、上記した例では、領域拡張法を用いた関心領域の抽出を説明したが、これはあくまでも一例であり、閾値法や、ＣＡＤ、或いは、解析用のアプリケーションを用いることで関心領域を抽出してもよい。また、上記した例では、Ｘ線ＣＴ装置によって撮像された３次元画像データを用いる場合について説明したが、これはあくまでも一例であり、他のモダリティによって撮像された３次元画像データを用いる場合であってもよい。かかる場合には、モダリティごとに異なる抽出方法を利用することも可能である。
【００７２】
ここで、操作者は、抽出部１３５１によって自動で抽出された関心領域を自由に修正させることが可能である。例えば、図８に示すように、抽出部１３５１によってＲＯＩ１及びＲＯＩ２が抽出された後、操作者は、治療前及び治療後それぞれの画像上でカーソルを操作し、所望する領域をＲＯＩとして設定しなおすことが可能である。或いは、仮に、抽出部１３５１によってＲＯＩが抽出されなかった場合に、操作者がＲＯＩを設定することも可能である。上述した操作者によるＲＯＩの設定は、抽出部１３５１によって抽出されたＲＯＩ全体を設定しなおすことも可能であるし、抽出部１３５１によって抽出されたＲＯＩを部分的に修正することも可能である。
【００７３】
図７に戻って、位置決定部１３５２は、抽出部１３５１によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する。具体的には、位置決定部１３５２は、ボリュームデータに含まれる特徴点を３次元的に位置合わせすることで、関心領域を重畳させるための位置を決定する。
【００７４】
図９は、第１の実施形態に係る位置決定部１３５２による処理の一例を説明するための図である。図９においては、図８に示す肝臓癌の治療前及び治療後のボリュームデータの位置合わせを実行する場合ついて示す。例えば、位置決定部１３５２は、非線形のワーピング（warping）処理により、＜治療前＞のボリュームデータと＜治療後＞のボリュームデータとの位置合わせを実行する。
【００７５】
一例を挙げると、位置決定部１３５２は、図９の＜治療前＞及び＜治療後＞に示すように、各ボリュームデータに３軸（ｘ軸、ｙ軸、ｚ軸）からなる直交座標を設定する。そして、位置決定部１３５２は、各ボリュームデータを任意の小領域に分割し、分割した小領域ごとに非線形の位置合わせを実行する。ここで、位置決定部１３５２によって実行される非線形のワーピング処理による位置合わせは、＜治療前＞のボリュームデータを、＜治療後＞のボリュームデータに合わせるように変形させる場合であってもよいし、逆に、＜治療後＞のボリュームデータを、＜治療前＞のボリュームデータに合わせるように変形させる場合であってもよい。
【００７６】
また、位置決定部１３５２は、上述した非線形のワーピング処理に加えて、平行移動や回転などの線形の位置合わせを実行することも可能である。例えば、位置決定部１３５２は、＜治療前＞及び＜治療後＞のボリュームデータに描出された脊椎や、肋骨などを抽出し、抽出した脊椎や、肋骨などを３次元的に重ね合わせることで、＜治療前＞及び＜治療後＞のボリュームデータの位置を合わせる。
【００７７】
第１の実施形態に係るワークステーション１３０は、上述した位置決定部１３５２の処理により、撮影時の呼吸量や、撮影体位などによる２つのボリュームデータ間の位置ずれを補正することで、＜治療前＞及び＜治療後＞のボリュームデータそれぞれに含まれる関心領域を正確に重畳させる。なお、上記した例では、ボリュームデータ全体を用いる場合について説明したが、これはあくまでも一例であり、ボリュームデータの一部分を用いて位置を合わせる場合であってもよい。また、第１の実施形態に係るワークステーション１３０は、線形の位置合わせと非線形ワーピングによる位置合わせを、適宜、組み合わせて実行することが可能である。
【００７８】
図７に戻って、表示制御部１３５３は、抽出部１３５１によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、位置決定部１３５２により決定された位置にて重畳させた重畳画像を表示させる。具体的には、表示制御部１３５３は、まず、レンダリング処理部１３６に、位置決定部１３５２によって位置が合わせられたボリュームデータそれぞれに対して、関心領域を含むように、かつ、同一の視線方向からレンダリング処理を実行させることで、時相ごとの視差画像群を生成させる。そして、表示制御部１３５３は、関心領域の色や、表示形態を視差画像群の間で異なるように変更する。その後、表示制御部１３５３は、視差画像群をそれぞれ異なるレイヤーにて表示させる。
【００７９】
図１０は、第１の実施形態に係る表示制御部１３５３による処理の一例を説明するための図である。図１０においては、図８に示す肝臓癌の＜治療前＞及び＜治療後＞のボリュームデータから生成された視差画像群を重畳させた場合について示す。例えば、表示制御部１３５３は、図１０に示すように、位置決定部１３５２によって位置が合わせられた＜治療後＞のボリュームデータから全体を描出した視差画像群を生成させる。そして、表示制御部１３５３は、位置決定部１３５２によって位置が合わせられた＜治療前＞のボリュームデータから領域３０１に相当する領域の視差画像群を生成させ、ＲＯＩ１及びＲＯＩ２を異なる色で表現した画像を表示させる。
【００８０】
一例を挙げると、表示制御部１３５３は、＜治療後＞のボリュームデータに含まれるＲＯＩ２を「赤」とし、＜治療前＞のボリュームデータに含まれるＲＯＩ１の色を「青」として表示させる。ここで、表示制御部１３５３は、複数の３次元画像データの関心領域それぞれについて、所定の領域のみを表示させる。例えば、表示制御部１３５３は、図１０に示すように、重畳させた際に、外側になるＲＯＩ１の一部を表示しないようにすることで、内側のＲＯＩ２を露出させた画像を表示させる。なお、図１０においては、ＲＯＩ１の１／８の領域を表示させないようにしているが、この領域は任意に設定することができ、例えば、ＲＯＩ１の１／４を表示させないようにしてもよい。また、表示させない部分は、操作者が任意に変更することができる。例えば、操作者が、画像上でカーソルを操作することで、表示させない部分を任意に変更することができる。換言すると、操作者は、ＲＯＩ２の任意の位置を露出させることが可能である。また、表示制御部１３５３は、色に加えて、ＲＯＩの不透過度をそれぞれ変更させることも可能である。
【００８１】
さらに、表示制御部１３５３は、各時相のボリュームデータの体積を比較して、体積の変化量に基づいて色や立体量を変化させたＲＯＩを表示させることも可能である。例えば、表示制御部１３５３は、＜治療後＞のボリュームデータに含まれるＲＯＩ２の体積が、＜治療前＞のボリュームデータに含まれるＲＯＩ１の体積から「２０％」以上減少していた場合にはＲＯＩ１の色を「黄色」で、「４０％」以上減少していた場合には、「緑」で表現した画像を表示させる。また、表示制御部１３５３は、＜治療後＞のボリュームデータに含まれるＲＯＩ２の体積が、＜治療前＞のボリュームデータに含まれるＲＯＩ１の体積よりも「２０％」以上増加していた場合にはＲＯＩ２の色を「青」で、「４０％」以上増加していた場合には、「紫」で表現した画像を表示させる。すなわち、表示制御部１３５３は、＜治療前＞と＜治療後＞でＲＯＩがどの程度変化しているかが一目でわかるような画像を表示する。また、表示制御部１３５３は、例えば，腫瘍が縮小していたら奥に，拡大していたら手前に表示するように立体量を変化させて表示することが可能である。なお、ＲＯＩの体積が同一（或いは、その差が所定の閾値以内）であった場合には、表示制御部１３５３は、色つけないＲＯＩを表示させる。
【００８２】
表示制御部１３５３は、上述した表示を任意に組み合わせて表示させることが可能である。従って、第１の実施形態に係るワークステーション１３０は、ＲＯＩの変化を一目で認識させることができ、抗がん剤や放射線治療の治療効果の判定を容易に行わせることを可能にする。
【００８３】
なお、色の設定は、操作者により任意に決定することができる。例えば、ＲＯＩの色を時系列の順に予め設定しておくこともできる。また、表示制御部１３５３によって表示部１３２に表示されたＲＯＩの色は、入力部１３１を介して自由に変更することも可能である。例えば、表示部１３２に表示された関心領域の重なり具合が不明瞭な場合、色を自由に変更することができる。また、表示制御部１３５３は、色の濃淡、コントラスト、明度なども変更するように設定することが可能である。
【００８４】
次に、図１１を用いて、第１の実施形態に係るワークステーション１３０の処理について説明する。図１１は、第１の実施形態に係るワークステーション１３０による処理の手順を示すフローチャートである。図１１に示すように、第１の実施形態に係るワークステーション１３０においては、時相の異なる複数の画像を重畳して表示するためのコマンドが実行されると、抽出部１３５１は、時相の異なる複数の３次元画像データから関心領域を抽出する（ステップＳ１０１）。
【００８５】
そして、位置決定部１３５２は、抽出部１３５１によって抽出された関心領域を重畳させるための位置をボリュームデータに含まれる特徴点に基づいて決定する（ステップＳ１０２）。その後、表示制御部１３５３は、関心領域の色を画像ごとに変更して（ステップＳ１０３）、画像を異なるレイヤーにて表示させることで重畳させた重畳画像を表示部１３２に表示させる（ステップＳ１０４）。
【００８６】
上述したように、第１の実施形態によれば、抽出部１３５１は、時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する。そして、位置決定部１３５２は、抽出部１３５１によって抽出された複数の３次元画像データそれぞれの関心領域を略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する。そして、表示制御部１３５３は、抽出部１３５１によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、位置決定部１３５２により決定された位置にて重畳させた重畳画像を表示させる。従って、第１の実施形態に係るワークステーション１３０は、異なる時相で撮像された３次元画像データに含まれる関心領域それぞれを同一画面上で識別可能に表示することができ、時相の異なる複数の画像を重畳させた際にも、容易に観察することを可能にする。
【００８７】
また、第１の実施形態によれば、表示制御部１３５３は、複数の３次元画像データの関心領域それぞれについて、所定の領域のみを表示させる。従って、第１の実施形態に係るワークステーション１３０は、内側に位置する関心領域を確実に視認させることができ、時相の異なる複数の画像を重畳させた際にも、より容易に観察することを可能にする。
【００８８】
（第２の実施形態）
上記した第１の実施形態では、２つの時相の３次元画像データを重畳する場合について説明した。第２の実施形態では、３つ以上の時相の３次元画像データを重畳する場合について説明する。なお、第２の実施形態では、図７に示す第１の実施形態に係る制御部１３５と同一の構成を有する。そこで、第２の実施形態においては、３つ以上の時相の３次元画像データを重畳して表示させる制御部を表示制御部１３５３ａとして説明する。すなわち、表示制御部１３５３ａは、図７に示す表示制御部１３５３に新たな処理が追加されたものである。
【００８９】
表示制御部１３５３ａは、３つ以上の時相の３次元画像データに含まれる関心領域をそれぞれ異なる表示形式で表示させる。具体的には、表示制御部１３５３ａは、３つ以上の時相のボリュームデータから抽出部１３５１によって抽出された関心領域をそれぞれ異なる色で表示させる。図１２は、第２の実施形態に係る３つ以上の時相の３次元画像データの例を示す図である。図１２においては、時相の異なる肝臓のパーフュージョン（Perfusion）画像を示している。また、図１２においては、Ｘ線ＣＴ装置及びＭＲＩ装置によって撮像されたパーフュージョンを示す。
【００９０】
例えば、第２の実施形態に係る制御部１３５は、図１２に示すように、Ｔ１、Ｔ２、Ｔ３及びＴ４の４つの時相を含む３次元画像データを以下に記すように表示させる。まず、抽出部１３５１は、Ｔ１、Ｔ２、Ｔ３及びＴ４のボリュームデータから関心領域をそれぞれ抽出する。例えば、抽出部１３５１は、Ｔ１のボリュームデータからＲＯＩ３を抽出し、Ｔ２のボリュームデータからＲＯＩ４を抽出し、Ｔ３のボリュームデータからＲＯＩ５を抽出し、Ｔ４のボリュームデータからＲＯＩ６を抽出する。
【００９１】
そして、位置決定部１３５２は、Ｔ１、Ｔ２、Ｔ３及びＴ４のボリュームデータそれぞれに含まれる特徴点に基づいて、非線形のワーピング処理を実行することで、ボリュームデータの位置合わせを実行する。例えば、位置決定部１３５２は、Ｔ４のボリュームデータに合わせるように、Ｔ１、Ｔ２及びＴ３のボリュームデータそれぞれを変形させる。
【００９２】
その後、表示制御部１３５３ａは、位置決定部１３５２によって位置合わせが実行されたボリュームデータそれぞれに対して、関心領域を含むように、かつ、同一の視線方向からレンダリング処理を実行した視差画像群を生成させる。そして、表示制御部１３５３ａは、関心領域の色が視差画像群間で異なるように変更する。その後、表示制御部１３５３ａは、視差画像群をそれぞれ異なるレイヤーにて表示させる。
【００９３】
図１３は、第２の実施形態に係る表示制御部１３５３ａによる処理の第１の例を説明するための図である。図１３においては、図１２に示すＴ１、Ｔ２、Ｔ３及びＴ４のボリュームデータから生成された視差画像群を重畳させた場合について示す。例えば、表示制御部１３５３ａは、Ｔ１、Ｔ２、Ｔ３及びＴ４のボリュームデータに含まれるＲＯＩ３〜６を時系列の順に設定された色で表示し、体積が大きくなるにつれて表示させない領域が大きくなるように表示させる。
【００９４】
図１３を用いて説明すると、例えば、表示制御部１３５３ａは、ＲＯＩ３を「紫」で表示させ、ＲＯＩ５を「青」で表示させ、ＲＯＩ４を「橙」で表示させ、ＲＯＩ６を「赤」で表示させる。ここで、表示制御部１３５３ａは、図１３に示すように、すべてのＲＯＩについて、その一部が露出するように各ＲＯＩの一部を表示させないようにした画像を表示させる。その結果、表示制御部１３５３ａによって表示されるＲＯＩ３〜６は、図１３に示すように、すべての時相におけるＲＯＩの変化を容易に把握することができるように表示部１３２に表示されることとなる。
【００９５】
また、表示制御部１３５３ａは、３つ以上の時相の３次元画像データに含まれる関心領域の中から、体積の差が最大となる２つの関心領域のみを表示させることも可能である。図１４は、第２の実施形態に係る表示制御部１３５３ａによる処理の第２の例を説明するための図である。例えば、表示制御部１３５３ａは、図１４に示すように、ＲＯＩ３〜６のなかから体積の差が最大となるＲＯＩ３とＲＯＩ６とを抽出し、抽出した２つのＲＯＩの色を変化させ、ＲＯＩ３の一部を表示させないようにした重畳画像を表示部１３２に表示させる。
【００９６】
上記した第２の実施形態によれば、表示制御部１３５３ａは、３つ以上の時相の３次元画像データに含まれる関心領域をそれぞれ識別可能に表示させる。従って、第２の実施形態に係るワークステーション１３０は、系時的に連続するデータを用いた関心領域を容易に観察することを可能にする。例えば、４Ｄデータを用いて腫瘍の移動量を観察することで腫瘍の癒着具合を判定することも可能となる。
【００９７】
（第３の実施形態）
上記した第１及び第２の実施形態では、Ｘ線ＣＴ画像におけるＣＴ値に基づいた領域拡張法により関心領域を抽出する場合について説明した。第３の実施形態では、機能画像により得られる情報から関心領域を抽出する場合について説明する。なお、第３の実施形態では、図７に示す第１の実施形態に係る制御部１３５と同一の構成を有する。そこで、第３の実施形態においては、機能画像により得られる情報から関心領域を抽出する制御部を抽出部１３５１ａとして説明する。すなわち、抽出部１３５１ａは、図７に示す抽出部１３５１に新たな処理が追加されたものである。
【００９８】
抽出部１３５１ａは、機能画像と形態画像とから得られる情報に基づいて関心領域を抽出する。以下では、ＰＥＴ画像とＣＴ画像とを用いて関心領域を抽出する場合について説明する。図１５は、第３の実施形態に係る抽出部１３５１ａによる処理の一例を説明するための図である。図１５においては、ＰＥＴ−ＣＴ装置により撮像された３次元画像データ（ＣＴ画像、ＰＥＴ画像）を用いて関心領域を抽出する場合について示す。
【００９９】
例えば、抽出部１３５１ａは、図１５に示すように、記憶部１３４によって記憶されたある１時相における３次元のＣＴ画像及び３次元のＰＥＴ画像からフュージョン（fusion）画像を生成させる。そして、抽出部１３５１ａは、生成させたフュージョン画像から３次元のＣＴ画像における腫瘍の位置を抽出する。同様に、抽出部１３５１ａは、異なる時相の３次元画像データに関してもＰＥＴ画像とＣＴ画像とをフュージョンさせることにより、３次元のＣＴ画像における腫瘍の位置を抽出する。
【０１００】
上記したような、ＰＥＴ画像を用いた関心領域の抽出は、時相の異なる３次元のＣＴ画像を重畳させる場合だけでなく、時相が異なる３次元のフュージョン画像を重畳させる場合にも実行させることができる。時相が異なる３次元のフュージョン画像を重畳させた場合には、腫瘍が悪性であるか否かが判定できるだけでなく、悪性腫瘍の転移の様子を空間的に把握することを可能にする。
【０１０１】
なお、上述した例では、ＰＥＴ画像を用いる場合について説明したが、実施形態はこれに限定されるものではなく、例えば、ＭＲ画像や、パーフュージョン画像を用いる場合であってもよい。
【０１０２】
上記した第３の実施形態によれば、抽出部１３５１ａは、３次元のＰＥＴ画像を用いて関心領域を抽出する。従って、第３の実施形態に係るワークステーション１３０は、関心領域を正確に抽出することを可能にする。
【０１０３】
（第４の実施形態）
さて、これまで第１、第２及び第３の実施形態について説明したが、上述した第１、第２及び第３の実施形態以外にも、種々の異なる形態にて実施されてよいものである。
【０１０４】
上述した実施形態では、関心領域が１つである場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、関心領域を複数設定する場合であってもよい。
【０１０５】
上述した実施形態においては、腫瘍（肝臓癌）を関心部位とする場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、造影剤により信号が特異的に増加する領域などを関心部位として用いる場合であってもよい。
【０１０６】
上述した実施形態においては、位置を合わせるための特徴点として、脊椎や肋骨を用いる場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、抽出部１３５１によって抽出された関心領域の重心を特徴点として用いる場合であってもよい。かかる場合には、抽出部１３５１によって抽出された関心領域の重心同士を重ね合わせることで、関心領域を重畳させる。例えば、抽出部１３５１によって抽出された関心領域の体積の差が大きい場合に、関心領域の重心を用いて位置合わせすることで、処理を高速化させることが可能となる。
【０１０７】
上記実施形態においては、ＲＯＩを異なる色で表現して、重畳させた画像を表示する場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、ＲＯＩごとに不透過度を変化させる場合であってもよい。
【０１０８】
例えば、表示制御部１３５３は、体積が大きい関心領域の不透過度を「５０％」、色を「赤」とし、体積が小さい関心領域の不透過度を「１００％」、色を「青」として表示させる。図１０を用いて説明すると、表示制御部１３５３は、治療前のボリュームデータに含まれるＲＯＩ１の体積「Ｔ1」と、治療後のボリュームデータに含まれるＲＯＩ２の体積「Ｔ2」とを比較して、「Ｔ1−Ｔ2＞０」であることから、ＲＯＩ１を「不透過度：５０％」、「色：赤」で表示させ、ＲＯＩ２を「不透過度：１００％」、「色：青」で表示させる。
【０１０９】
上述したように画像の不透過度を関心領域ごとに変更させて表示することで、第１の実施形態に係るワークステーション１３０は、関心領域の全体像を把握させることができ、時相の異なる複数の画像を重畳させた際にも、より容易に観察することを可能にする。
【０１１０】
上述した実施形態においては、治療前の画像と治療後の画像それぞれに腫瘍が描出されている場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、現時点の画像に腫瘍が描出された場合に、過去の画像と比較する場合であってもよい。例えば、操作者が、現時点の画像及び過去の画像に関心領域を設定し、重畳した画像を表示させることで、腫瘍の転移状況などを表示させることが可能となる。
【０１１１】
上記した実施形態では、関心領域を含む領域のみを重畳させる場合ついて説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、画像全体を重畳させる場合であってもよい。
【０１１２】
上述した実施形態においては、固有の形態を有する関心領域をそのまま重畳させる場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、関心領域の形態を変形させて重畳させる場合であってもよい。例えば、固有の形態を有する関心領域それぞれを標準の形態に変形させた後に重畳させてもよい。ここで、標準の形態としては、例えば、球や、立方体、直方体などである。一例を挙げると、表示制御部１３５３は、抽出部１３５１によって抽出された時相の異なる複数の関心領域それぞれを、各関心領域の体積に相当する大きさの球や、立方体、直方体などに変形させた後、重畳させて表示する。
【０１１３】
これにより、腫瘍の内部が壊死することで腫瘍全体の体積が縮小しているが、変化量が直感的に分かりにくい場合などに、関心部位を体積に応じた大きさの球や、立法体、直方体などに変形させて重畳させることで、変化量をより直感的に把握することを可能にする。
【０１１４】
上記実施形態においては、ワークステーション１３０が、３次元画像を重畳して表示する場合について説明した。しかしながら、実施形態がこれに限定されるものではなく、例えば、医用画像診断装置１１０が３次元画像を重畳して表示する場合であってもよい。また、医用画像診断装置１１０又はワークステーション１３０が３次元画像を重畳して、端末装置１４０が、画像を表示する場合であってもよい。
【０１１５】
また、上記実施形態においては、端末装置１４０は、画像保管装置１２０から取得した医用画像等を表示等するものとして説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、端末装置１４０は、医用画像診断装置１１０又はワークステーション１３０に直接接続される場合であってもよい。
【０１１６】
また、上記実施形態においては、ワークステーション１３０は、画像保管装置１２０からボリュームデータを取得し、このボリュームデータから３次元画像を重畳して表示する場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、ワークステーション１３０は、医用画像診断装置１１０からボリュームデータを取得し、このボリュームデータから３次元画像を重畳して表示する場合であってもよい。
【０１１７】
上述した実施形態においては、端末装置１４０が、画像保管装置１２０から画像を取得して表示する場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、端末装置１４０が、医用画像診断装置１１０から画像を取得して表示する場合であってもよい。
【０１１８】
以上説明したとおり、実施形態によれば、本実施形態の画像処理システム、装置、方法及び医用画像診断装置は、時相の異なる複数の画像を重畳させた際にも、容易に観察することを可能にする。
【０１１９】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【符号の説明】
【０１２０】
１１０ 医用画像診断装置
１２０ 画像保管装置
１３０ ワークステーション
１３５ 制御部
１３５１、１３５１ａ 抽出部
１３５２ 位置決定部
１３５３、１３５３ａ 表示制御部
１４０ 端末装置
【技術分野】
【０００１】
本発明の実施形態は、画像処理システム、装置、方法及び医用画像診断装置に関する。
【背景技術】
【０００２】
従来、立体視用メガネ等の専用機器を用いて、２つの視点から撮影された２視差画像を立体視可能なモニタが実用化されている。また、近年、レンチキュラーレンズ等の光線制御子を用いて、複数の視点から撮影された多視差画像（例えば、９視差画像）を裸眼にて立体視可能なモニタが実用化されている。なお、立体視可能なモニタにて表示される２視差画像や９視差画像は、１視点から撮影された画像の奥行き情報を推定し、推定した情報を用いた画像処理により生成される場合もある。
【０００３】
一方、Ｘ線ＣＴ（Computed Tomography）装置やＭＲＩ（Magnetic Resonance Imaging）装置、超音波診断装置等の医用画像診断装置では、３次元の医用画像データ（以下、ボリュームデータ）を生成可能な装置が実用化されている。従来、かかる医用画像診断装置により生成されたボリュームデータは、種々の画像処理により２次元画像とされ、汎用モニタ上にて２次元表示される。例えば、医用画像診断装置により生成されたボリュームデータは、ボリュームレンダリング処理により３次元の情報を反映した２次元画像とされ、汎用モニタ上にて２次元表示される。しかしながら、従来技術では、時相の異なる複数の画像を重畳させた際に、観察し難くなる場合があった。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−８６４１４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明が解決しようとする課題は、時相の異なる複数の画像を重畳させた際にも、容易に観察することができる画像処理システム、装置、方法及び医用画像診断装置を提供することである。
【課題を解決するための手段】
【０００６】
実施形態の画像処理システムは、抽出手段と、位置決定手段と、表示制御手段とを備える。抽出手段は、時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する。位置決定手段は、前記抽出手段によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する。表示制御手段は、前記抽出手段によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、前記位置決定手段により決定された位置にて重畳させた重畳画像を表示させる。
【図面の簡単な説明】
【０００７】
【図１】図１は、第１の実施形態に係る画像処理システムの構成例を説明するための図である。
【図２Ａ】図２Ａは、２視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。
【図２Ｂ】図２Ｂは、２視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。
【図３】図３は、９視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。
【図４】図４は、第１の実施形態に係るワークステーションの構成例を説明するための図である。
【図５】図５は、図４に示すレンダリング処理部の構成例を説明するための図である。
【図６】図６は、第１の実施形態に係るボリュームレンダリング処理の一例を説明するための図である。
【図７】図７は、第１の実施形態に係る制御部の構成例を説明するための図である。
【図８】図８は、第１の実施形態に係る抽出部による処理の一例を説明するための図である。
【図９】図９は、第１の実施形態に係る位置決定部による処理の一例を説明するための図である。
【図１０】図１０は、第１の実施形態に係る表示制御部による処理の一例を説明するための図である。
【図１１】図１１は、第１の実施形態に係るワークステーションによる処理の手順を示すフローチャートである。
【図１２】図１２は、第２の実施形態に係る３つ以上の時相の３次元画像データの例を示す図である。
【図１３】図１３は、第２の実施形態に係る表示制御部による処理の第１の例を説明するための図である。
【図１４】図１４は、第２の実施形態に係る表示制御部による処理の第２の例を説明するための図である。
【図１５】図１５は、第３の実施形態に係る抽出部による処理の一例を説明するための図である。
【発明を実施するための形態】
【０００８】
以下、添付図面を参照して、画像処理システム、装置、方法及び医用画像診断装置の実施形態を詳細に説明する。なお、以下では、画像処理装置としての機能を有するワークステーションを含む画像処理システムを実施形態として説明する。ここで、以下の実施形態で用いる用語について説明すると、「視差画像群」とは、ボリュームデータに対して、所定の視差角ずつ視点位置を移動させてボリュームレンダリング処理を行なうことで生成された画像群のことである。すなわち、「視差画像群」は、「視点位置」が異なる複数の「視差画像」から構成される。また、「視差角」とは、「視差画像群」を生成するために設定された各視点位置のうち隣接する視点位置とボリュームデータによって表される空間内の所定位置（例えば、空間の中心）とにより定まる角度のことである。また、「視差数」とは、立体表示モニタにて立体視されるために必要となる「視差画像」の数のことである。また、以下で記載する「９視差画像」とは、９つの「視差画像」から構成される「視差画像群」のことである。また、以下で記載する「２視差画像」とは、２つの「視差画像」から構成される「視差画像群」のことである。
【０００９】
（第１の実施形態）
まず、第１の実施形態に係る画像処理システムの構成例について説明する。図１は、第１の実施形態に係る画像処理システムの構成例を説明するための図である。
【００１０】
図１に示すように、第１の実施形態に係る画像処理システム１は、医用画像診断装置１１０と、画像保管装置１２０と、ワークステーション１３０と、端末装置１４０とを有する。図１に例示する各装置は、例えば、病院内に設置された院内ＬＡＮ（Local Area Network）２により、直接的、又は間接的に相互に通信可能な状態となっている。例えば、画像処理システム１にＰＡＣＳ（Picture Archiving and Communication System）が導入されている場合、各装置は、ＤＩＣＯＭ（Digital Imaging and Communications in Medicine）規格に則って、医用画像等を相互に送受信する。
【００１１】
かかる画像処理システム１は、医用画像診断装置１１０により生成された３次元の医用画像データであるボリュームデータから視差画像群を生成し、この視差画像群を立体視可能なモニタに表示することで、病院内に勤務する医師や検査技師に立体視可能な医用画像を提供する。具体的には、第１の実施形態においては、ワークステーション１３０が、ボリュームデータに対して種々の画像処理を行ない、視差画像群を生成する。また、ワークステーション１３０及び端末装置１４０が、立体視可能なモニタを有し、ワークステーション１３０にて生成された視差画像群をこのモニタに表示する。また、画像保管装置１２０は、医用画像診断装置１１０にて生成されたボリュームデータや、ワークステーション１３０にて生成された視差画像群を保管する。すなわち、ワークステーション１３０や端末装置１４０は、この画像保管装置１２０からボリュームデータや視差画像群を取得し、これを処理したり、モニタに表示したりする。以下、各装置を順に説明する。
【００１２】
医用画像診断装置１１０は、Ｘ線診断装置、Ｘ線ＣＴ（Computed Tomography）装置、ＭＲＩ（Magnetic Resonance Imaging）装置、超音波診断装置、ＳＰＥＣＴ（Single Photon Emission Computed Tomography）装置、ＰＥＴ（Positron Emission computed Tomography）装置、ＳＰＥＣＴ装置とＸ線ＣＴ装置とが一体化されたＳＰＥＣＴ−ＣＴ装置、ＰＥＴ装置とＸ線ＣＴ装置とが一体化されたＰＥＴ−ＣＴ装置、又はこれらの装置群等である。また、第１の実施形態に係る医用画像診断装置１１０は、３次元の医用画像データ（ボリュームデータ）を生成可能である。
【００１３】
具体的には、第１の実施形態に係る医用画像診断装置１１０は、被検体を撮影することによりボリュームデータを生成する。例えば、医用画像診断装置１１０は、被検体を撮影することにより投影データやＭＲ信号等のデータを収集し、収集したデータから、被検体の体軸方向に沿った複数のアキシャル面の医用画像データを再構成することで、ボリュームデータを生成する。例えば、医用画像診断装置１１０は、５００枚のアキシャル面の医用画像データを再構成する。この５００枚のアキシャル面の医用画像データ群が、ボリュームデータである。なお、医用画像診断装置１１０により撮影された被検体の投影データやＭＲ信号等自体をボリュームデータとしても良い。
【００１４】
また、第１の実施形態に係る医用画像診断装置１１０は、生成したボリュームデータを画像保管装置１２０に送信する。なお、医用画像診断装置１１０は、ボリュームデータを画像保管装置１２０に送信する際に、付帯情報として、例えば、患者を識別する患者ＩＤ、検査を識別する検査ＩＤ、医用画像診断装置１１０を識別する装置ＩＤ、医用画像診断装置１１０による１回の撮影を識別するシリーズＩＤ等を送信する。
【００１５】
画像保管装置１２０は、医用画像を保管するデータベースである。具体的には、第１の実施形態に係る画像保管装置１２０は、医用画像診断装置１１０から送信されたボリュームデータを記憶部に格納し、これを保管する。また、第１の実施形態においては、ワークステーション１３０が、ボリュームデータから視差画像群を生成し、生成した視差画像群を画像保管装置１２０に送信する。このため、画像保管装置１２０は、ワークステーション１３０から送信された視差画像群を記憶部に格納し、これを保管する。なお、本実施形態は、大容量の画像を保管可能なワークステーション１３０を用いることで、図１に例示するワークステーション１３０と画像保管装置１２０とが統合される場合であっても良い。すなわち、本実施形態は、ワークステーション１３０そのものにボリュームデータもしくは視差画像群を記憶させる場合であっても良い。
【００１６】
なお、第１の実施形態において、画像保管装置１２０に保管されたボリュームデータや視差画像群は、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等と対応付けて保管される。このため、ワークステーション１３０や端末装置１４０は、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等を用いた検索を行なうことで、必要なボリュームデータや視差画像群を画像保管装置１２０から取得する。
【００１７】
ワークステーション１３０は、医用画像に対して画像処理を行なう画像処理装置である。具体的には、第１の実施形態に係るワークステーション１３０は、画像保管装置１２０から取得したボリュームデータに対して種々のレンダリング処理を行ない、視差画像群を生成する。視差画像群とは、複数の視点から撮影された複数の視差画像のことであり、例えば、９視差画像を裸眼にて立体視可能なモニタにて表示される視差画像群とは、視点位置が異なる９つの視差画像のことである。
【００１８】
また、第１の実施形態に係るワークステーション１３０は、表示部として、立体視可能なモニタ（以下、立体表示モニタ）を有する。ワークステーション１３０は、視差画像群を生成し、生成した視差画像群を立体表示モニタに表示する。この結果、ワークステーション１３０の操作者は、立体表示モニタに表示された立体視可能な医用画像を確認しながら、視差画像群生成のための操作を行なうことができる。
【００１９】
また、ワークステーション１３０は、生成した視差画像群を画像保管装置１２０に送信する。なお、ワークステーション１３０は、視差画像群を画像保管装置１２０に送信する際に、付帯情報として、例えば、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等を送信する。また、視差画像群を画像保管装置１２０に送信する際に送信される付帯情報としては、視差画像群に関する付帯情報も挙げられる。視差画像群に関する付帯情報としては、視差画像の枚数（例えば、「９」）や、視差画像の解像度（例えば、「４６６×３５０画素」）等がある。
【００２０】
端末装置１４０は、病院内に勤務する医師や検査技師に医用画像を閲覧させるための装置である。例えば、端末装置１４０は、病院内に勤務する医師や検査技師により操作されるＰＣ（Personal Computer）やタブレット式ＰＣ、ＰＤＡ（Personal Digital Assistant）、携帯電話等である。具体的には、第１の実施形態に係る端末装置１４０は、表示部として立体表示モニタを有する。また、端末装置１４０は、画像保管装置１２０から視差画像群を取得し、取得した視差画像群を立体表示モニタに表示する。この結果、観察者である医師や検査技師は、立体視可能な医用画像を閲覧することができる。
【００２１】
ここで、ワークステーション１３０や端末装置１４０が有する立体表示モニタについて説明する。現在最も普及している一般的な汎用モニタは、２次元画像を２次元で表示するものであり、２次元画像を立体表示することができない。仮に、観察者が汎用モニタにて立体視を要望する場合、汎用モニタに対して画像を出力する装置は、平行法や交差法により観察者が立体視可能な２視差画像を並列表示させる必要がある。又は、汎用モニタに対して画像を出力する装置は、例えば、左目用の部分に赤色のセロハンが取り付けられ、右目用の部分に青色のセロハンが取り付けられたメガネを用いて余色法により観察者が立体視可能な画像を表示する必要がある。
【００２２】
一方、立体表示モニタとしては、立体視用メガネ等の専用機器を用いることで、２視差画像（両眼視差画像とも称する）を立体視可能とするものがある。
【００２３】
図２Ａ及び図２Ｂは、２視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。図２Ａ及び図２Ｂに示す一例は、シャッター方式により立体表示を行なう立体表示モニタであり、モニタを観察する観察者が装着する立体視用メガネとしてシャッターメガネが用いられる。かかる立体表示モニタは、モニタにて２視差画像を交互に出射する。例えば、図２Ａに示すモニタは、左目用の画像と右目用の画像を、１２０Ｈｚにて交互に出射する。ここで、モニタには、図２Ａに示すように、赤外線出射部が設置され、赤外線出射部は、画像が切り替わるタイミングに合わせて赤外線の出射を制御する。
【００２４】
また、赤外線出射部から出射された赤外線は、図２Ａに示すシャッターメガネの赤外線受光部により受光される。シャッターメガネの左右それぞれの枠には、シャッターが取り付けられており、シャッターメガネは、赤外線受光部が赤外線を受光したタイミングに合わせて左右のシャッターそれぞれの透過状態及び遮光状態を交互に切り替える。以下、シャッターにおける透過状態及び遮光状態の切り替え処理について説明する。
【００２５】
各シャッターは、図２Ｂに示すように、入射側の偏光板と出射側の偏光板とを有し、更に、入射側の偏光板と出射側の偏光板との間に液晶層を有する。また、入射側の偏光板と出射側の偏光板とは、図２Ｂに示すように、互いに直交している。ここで、図２Ｂに示すように、電圧が印加されていない「ＯＦＦ」の状態では、入射側の偏光板を通った光は、液晶層の作用により９０度回転し、出射側の偏光板を透過する。すなわち、電圧が印加されていないシャッターは、透過状態となる。
【００２６】
一方、図２Ｂに示すように、電圧が印加された「ＯＮ」の状態では、液晶層の液晶分子による偏光回転作用が消失するため、入射側の偏光板を通った光は、出射側の偏光板で遮られてしまう。すなわち、電圧が印加されたシャッターは、遮光状態となる。
【００２７】
そこで、例えば、赤外線出射部は、モニタ上に左目用の画像が表示されている期間、赤外線を出射する。そして、赤外線受光部は、赤外線を受光している期間、左目のシャッターに電圧を印加せず、右目のシャッターに電圧を印加させる。これにより、図２Ａに示すように、右目のシャッターが遮光状態となり、左目のシャッターが透過状態となるため、観察者の左目に左目用の画像が入射する。一方、赤外線出射部は、モニタ上に右目用の画像が表示されている期間、赤外線の出射を停止する。そして、赤外線受光部は、赤外線が受光されない期間、右目のシャッターに電圧を印加せず、左目のシャッターに電圧を印加させる。これにより、左目のシャッターが遮光状態となり、右目のシャッターが透過状態であるため、観察者の右目に右目用の画像が入射する。このように、図２Ａ及び図２Ｂに示す立体表示モニタは、モニタに表示される画像とシャッターの状態を連動させて切り替えることで、観察者が立体視可能な画像を表示させる。なお、２視差画像を立体視可能な立体表示モニタとしては、上記のシャッター方式以外にも、偏光メガネ方式を採用したモニタも知られている。
【００２８】
更に、近年実用化された立体表示モニタとしては、レンチキュラーレンズ等の光線制御子を用いることで、例えば、９視差画像等の多視差画像を観察者が裸眼にて立体視可能とするものがある。かかる立体表示モニタは、両眼視差による立体視を可能とし、更に、観察者の視点移動に合わせて観察される映像も変化する運動視差による立体視も可能とする。
【００２９】
図３は、９視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。図３に示す立体表示モニタには、液晶パネル等の平面状の表示面２００の前面に、光線制御子が配置される。例えば、図３に示す立体表示モニタには、光線制御子として、光学開口が垂直方向に延びる垂直レンチキュラーシート２０１が表示面２００の前面に貼り付けられている。
【００３０】
表示面２００には、図３に示すように、縦横比が３：１であり、縦方向にサブ画素である赤（Ｒ）、緑（Ｇ）、青（Ｂ）の３つが配置された画素２０２がマトリクス状に配置される。図３に示す立体表示モニタは、９つの画像により構成される９視差画像を、所定フォーマット（例えば格子状）に配置した中間画像に変換したうえで、表示面２００に出力する。すなわち、図３に示す立体表示モニタは、９視差画像にて同一位置にある９つの画素それぞれを、９列の画素２０２に割り振って出力させる。９列の画素２０２は、視点位置の異なる９つの画像を同時に表示する単位画素群２０３となる。
【００３１】
表示面２００において単位画素群２０３として同時に出力された９視差画像は、例えば、ＬＥＤ（Light Emitting Diode）バックライトにより平行光として放射され、更に、垂直レンチキュラーシート２０１により、多方向に放射される。９視差画像の各画素の光が多方向に放射されることにより、観察者の右目及び左目に入射する光は、観察者の位置（視点の位置）に連動して変化する。すなわち、観察者の見る角度により、右目に入射する視差画像と左目に入射する視差画像とは、視差角が異なる。これにより、観察者は、例えば、図３に示す９つの位置それぞれにおいて、撮影対象を立体的に視認できる。また、観察者は、例えば、図３に示す「５」の位置において、撮影対象に対して正対した状態で立体的に視認できるとともに、図３に示す「５」以外それぞれの位置において、撮影対象の向きを変化させた状態で立体的に視認できる。なお、図３に示す立体表示モニタは、あくまでも一例である。９視差画像を表示する立体表示モニタは、図３に示すように、「ＲＲＲ・・・、ＧＧＧ・・・、ＢＢＢ・・・」の横ストライプ液晶である場合であっても良いし、「ＲＧＢＲＧＢ・・・」の縦ストライプ液晶である場合であっても良い。また、図３に示す立体表示モニタは、図３に示すように、レンチキュラーシートが垂直となる縦レンズ方式である場合であっても良いし、レンチキュラーシートが斜めとなる斜めレンズ方式である場合であっても良い。
【００３２】
ここまで、第１の実施形態に係る画像処理システム１の構成例について簡単に説明した。なお、上述した画像処理システム１は、ＰＡＣＳが導入されている場合にその適用が限られるものではない。例えば、画像処理システム１は、医用画像が添付された電子カルテを管理する電子カルテシステムが導入されている場合にも、同様に適用される。この場合、画像保管装置１２０は、電子カルテを保管するデータベースである。また、例えば、画像処理システム１は、ＨＩＳ（Hospital Information System）、ＲＩＳ（Radiology Information System）が導入されている場合にも、同様に適用される。また、画像処理システム１は、上述した構成例に限られるものではない。各装置が有する機能やその分担は、運用の形態に応じて適宜変更されてよい。
【００３３】
次に、第１の実施形態に係るワークステーションの構成例について図４を用いて説明する。図４は、第１の実施形態に係るワークステーションの構成例を説明するための図である。なお、以下において、「視差画像群」とは、ボリュームデータに対してボリュームレンダリング処理を行なうことで生成された立体視用の画像群のことである。また、「視差画像」とは、「視差画像群」を構成する個々の画像のことである。すなわち、「視差画像群」は、視点位置が異なる複数の「視差画像」から構成される。
【００３４】
第１の実施形態に係るワークステーション１３０は、画像処理等に適した高性能なコンピュータであり、図４に示すように、入力部１３１と、表示部１３２と、通信部１３３と、記憶部１３４と、制御部１３５と、レンダリング処理部１３６とを有する。なお、以下では、ワークステーション１３０が画像処理等に適した高性能なコンピュータである場合を用いて説明するが、これに限定されるものではなく、任意の情報処理装置であって良い。例えば、任意のパーソナルコンピュータであっても良い。
【００３５】
入力部１３１は、マウス、キーボード、トラックボール等であり、ワークステーション１３０に対する各種操作の入力を操作者から受け付ける。具体的には、第１の実施形態に係る入力部１３１は、レンダリング処理の対象となるボリュームデータを画像保管装置１２０から取得するための情報の入力を受け付ける。例えば、入力部１３１は、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等の入力を受け付ける。また、第１の実施形態に係る入力部１３１は、レンダリング処理に関する条件（以下、レンダリング条件）の入力を受け付ける。
【００３６】
表示部１３２は、立体表示モニタとしての液晶パネル等であり、各種情報を表示する。具体的には、第１の実施形態に係る表示部１３２は、操作者から各種操作を受け付けるためのＧＵＩ（Graphical User Interface）や、視差画像群等を表示する。通信部１３３は、ＮＩＣ（Network Interface Card）等であり、他の装置との間で通信を行う。
【００３７】
記憶部１３４は、ハードディスク、半導体メモリ素子等であり、各種情報を記憶する。具体的には、第１の実施形態に係る記憶部１３４は、通信部１３３を介して画像保管装置１２０から取得したボリュームデータを記憶する。また、第１の実施形態に係る記憶部１３４は、レンダリング処理中のボリュームデータや、レンダリング処理により生成された視差画像群、及び、２次元表示用の画像等を記憶する。
【００３８】
制御部１３５は、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等の電子回路、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路であり、ワークステーション１３０の全体制御を行なう。
【００３９】
例えば、第１の実施形態に係る制御部１３５は、表示部１３２に対するＧＵＩの表示や視差画像群の表示を制御する。また、例えば、制御部１３５は、画像保管装置１２０との間で通信部１３３を介して行なわれるボリュームデータや視差画像群の送受信を制御する。また、例えば、制御部１３５は、レンダリング処理部１３６によるレンダリング処理を制御する。また、例えば、制御部１３５は、ボリュームデータの記憶部１３４からの読み込みや、視差画像群の記憶部１３４への格納を制御する。
【００４０】
レンダリング処理部１３６は、制御部１３５による制御の下、画像保管装置１２０から取得したボリュームデータに対して種々のレンダリング処理を行ない、視差画像群を生成する。なお、レンダリング処理部１３６の処理については、後に詳述する。
【００４１】
レンダリング処理部１３６は、制御部１３５による制御の下、画像保管装置１２０から取得したボリュームデータに対して種々のレンダリング処理を行ない、視差画像群を生成する。具体的には、第１の実施形態に係るレンダリング処理部１３６は、記憶部１３４からボリュームデータを読み込み、このボリュームデータに対して、まず前処理を行なう。次に、レンダリング処理部１３６は、前処理後のボリュームデータに対してボリュームレンダリング処理を行ない、視差画像群を生成する。続いて、レンダリング処理部１３６は、各種情報（目盛り、患者名、検査項目等）が描出された２次元画像を生成し、これを視差画像群それぞれに対して重畳することで、出力用の２次元画像を生成する。そして、レンダリング処理部１３６は、生成した視差画像群や出力用の２次元画像を記憶部１３４に格納する。なお、第１の実施形態において、レンダリング処理とは、ボリュームデータに対して行なう画像処理全体のことであり、ボリュームレンダリング処理とは、レンダリング処理の内、３次元の情報を反映した２次元画像を生成する処理のことである。レンダリング処理により生成される医用画像とは、例えば、視差画像が該当する。
【００４２】
図５は、図４に示すレンダリング処理部の構成例を説明するための図である。図５に示すように、レンダリング処理部１３６は、前処理部１３６１と、３次元画像処理部１３６２と、２次元画像処理部１３６３とを有する。前処理部１３６１が、ボリュームデータに対する前処理を行い、３次元画像処理部１３６２が、前処理後のボリュームデータから視差画像群を生成し、２次元画像処理部１３６３が、視差画像群に各種情報が重畳された出力用の２次元画像を生成する。以下、各部を順に説明する。
【００４３】
前処理部１３６１は、ボリュームデータに対してレンダリング処理を行なう際に、種々の前処理を行なう処理部であり、画像補正処理部１３６１ａと、３次元物体フュージョン部１３６１ｅと、３次元物体表示領域設定部１３６１ｆとを有する。
【００４４】
画像補正処理部１３６１ａは、２種類のボリュームデータを１つのボリュームデータとして処理する際に画像補正処理を行なう処理部であり、図５に示すように、歪み補正処理部１３６１ｂ、体動補正処理部１３６１ｃ及び画像間位置合わせ処理部１３６１ｄを有する。例えば、画像補正処理部１３６１ａは、ＰＥＴ−ＣＴ装置により生成されたＰＥＴ画像のボリュームデータとＸ線ＣＴ画像のボリュームデータとを１つのボリュームデータとして処理する際に画像補正処理を行なう。或いは、画像補正処理部１３６１ａは、ＭＲＩ装置により生成されたＴ１強調画像のボリュームデータとＴ２強調画像のボリュームデータとを１つのボリュームデータとして処理する際に画像補正処理を行なう。
【００４５】
また、歪み補正処理部１３６１ｂは、個々のボリュームデータにおいて、医用画像診断装置１１０によるデータ収集時の収集条件に起因するデータの歪みを補正する。また、体動補正処理部１３６１ｃは、個々のボリュームデータを生成するために用いられたデータの収集時期における被検体の体動に起因する移動を補正する。また、画像間位置合わせ処理部１３６１ｄは、歪み補正処理部１３６１ｂ及び体動補正処理部１３６１ｃによる補正処理が行なわれた２つのボリュームデータ間で、例えば、相互相関法等を用いた位置合わせ（Registration）を行なう。
【００４６】
３次元物体フュージョン部１３６１ｅは、画像間位置合わせ処理部１３６１ｄにより位置合わせが行なわれた複数のボリュームデータをフュージョンさせる。なお、画像補正処理部１３６１ａ及び３次元物体フュージョン部１３６１ｅの処理は、単一のボリュームデータに対してレンダリング処理を行なう場合、省略される。
【００４７】
３次元物体表示領域設定部１３６１ｆは、操作者により指定された表示対象臓器に対応する表示領域を設定する処理部であり、セグメンテーション処理部１３６１ｇを有する。セグメンテーション処理部１３６１ｇは、操作者により指定された心臓、肺、血管等の臓器を、例えば、ボリュームデータの画素値（ボクセル値）に基づく領域拡張法により抽出する処理部である。
【００４８】
なお、セグメンテーション処理部１３６１ｇは、操作者により表示対象臓器が指定されなかった場合、セグメンテーション処理を行なわない。また、セグメンテーション処理部１３６１ｇは、操作者により表示対象臓器が複数指定された場合、該当する複数の臓器を抽出する。また、セグメンテーション処理部１３６１ｇの処理は、レンダリング画像を参照した操作者の微調整要求により再度実行される場合もある。
【００４９】
３次元画像処理部１３６２は、前処理部１３６１が処理を行なった前処理後のボリュームデータに対してボリュームレンダリング処理を行なう。ボリュームレンダリング処理を行なう処理部として、３次元画像処理部１３６２は、投影方法設定部１３６２ａと、３次元幾何変換処理部１３６２ｂと、３次元物体アピアランス処理部１３６２ｆと、３次元仮想空間レンダリング部１３６２ｋとを有する。
【００５０】
投影方法設定部１３６２ａは、視差画像群を生成するための投影方法を決定する。例えば、投影方法設定部１３６２ａは、ボリュームレンダリング処理を平行投影法により実行するか、透視投影法により実行するかを決定する。
【００５１】
３次元幾何変換処理部１３６２ｂは、ボリュームレンダリング処理が実行されるボリュームデータを３次元幾何学的に変換するための情報を決定する処理部であり、平行移動処理部１３６２ｃ、回転処理部１３６２ｄ及び拡大縮小処理部１３６２ｅを有する。平行移動処理部１３６２ｃは、ボリュームレンダリング処理を行なう際の視点位置が平行移動された場合に、ボリュームデータを平行移動させる移動量を決定する処理部であり、回転処理部１３６２ｄは、ボリュームレンダリング処理を行なう際の視点位置が回転移動された場合に、ボリュームデータを回転移動させる移動量を決定する処理部である。また、拡大縮小処理部１３６２ｅは、視差画像群の拡大や縮小が要求された場合に、ボリュームデータの拡大率や縮小率を決定する処理部である。
【００５２】
３次元物体アピアランス処理部１３６２ｆは、３次元物体色彩処理部１３６２ｇ、３次元物体不透明度処理部１３６２ｈ、３次元物体材質処理部１３６２ｉ及び３次元仮想空間光源処理部１３６２ｊを有する。３次元物体アピアランス処理部１３６２ｆは、これらの処理部により、例えば、操作者の要求に応じて、表示される視差画像群の表示状態を決定する処理を行なう。
【００５３】
３次元物体色彩処理部１３６２ｇは、ボリュームデータにてセグメンテーションされた各領域に対して着色される色彩を決定する処理部である。３次元物体不透明度処理部１３６２ｈは、ボリュームデータにてセグメンテーションされた各領域を構成する各ボクセルの不透過度（Opacity）を決定する処理部である。なお、ボリュームデータにおいて不透過度が「１００％」とされた領域の後方の領域は、視差画像群において描出されないこととなる。また、ボリュームデータにおいて不透過度が「０％」とされた領域は、視差画像群において描出されないこととなる。
【００５４】
３次元物体材質処理部１３６２ｉは、ボリュームデータにてセグメンテーションされた各領域の材質を決定することで、この領域が描出される際の質感を調整する処理部である。３次元仮想空間光源処理部１３６２ｊは、ボリュームデータに対してボリュームレンダリング処理を行なう際に、３次元仮想空間に設置する仮想光源の位置や、仮想光源の種類を決定する処理部である。仮想光源の種類としては、無限遠から平行な光線を照射する光源や、視点から放射状の光線を照射する光源等が挙げられる。
【００５５】
３次元仮想空間レンダリング部１３６２ｋは、ボリュームデータに対してボリュームレンダリング処理を行ない、視差画像群を生成する。また、３次元仮想空間レンダリング部１３６２ｋは、ボリュームレンダリング処理を行なう際、必要に応じて、投影方法設定部１３６２ａ、３次元幾何変換処理部１３６２ｂ、３次元物体アピアランス処理部１３６２ｆにより決定された各種情報を用いる。
【００５６】
ここで、３次元仮想空間レンダリング部１３６２ｋによるボリュームレンダリング処理は、レンダリング条件に従って行なわれることになる。例えば、レンダリング条件は、「平行投影法」又は「透視投影法」である。また、例えば、レンダリング条件は、「基準の視点位置及び視差角」である。また、例えば、レンダリング条件は、「視点位置の平行移動」、「視点位置の回転移動」、「視差画像群の拡大」、「視差画像群の縮小」である。また、例えば、レンダリング条件は、「着色される色彩」、「透過度」、「質感」、「仮想光源の位置」、「仮想光源の種類」である。このようなレンダリング条件は、入力部１３１を介して操作者から受け付ける場合や、初期設定される場合が考えられる。いずれの場合も、３次元仮想空間レンダリング部１３６２ｋは、制御部１３５からレンダリング条件を受け付け、このレンダリング条件に従って、ボリュームデータに対するボリュームレンダリング処理を行なう。また、このとき、上述した投影方法設定部１３６２ａ、３次元幾何変換処理部１３６２ｂ、３次元物体アピアランス処理部１３６２ｆが、このレンダリング条件に従って必要な各種情報を決定するので、３次元仮想空間レンダリング部１３６２ｋは、決定されたこれらの各種情報を用いて視差画像群を生成する。
【００５７】
図６は、第１の実施形態に係るボリュームレンダリング処理の一例を説明するための図である。例えば、３次元仮想空間レンダリング部１３６２ｋが、図６の「９視差画像生成方式（１）」に示すように、レンダリング条件として、平行投影法を受け付け、更に、基準の視点位置（５）と視差角「１度」とを受け付けたとする。かかる場合、３次元仮想空間レンダリング部１３６２ｋは、視差角が「１度」おきとなるように、視点の位置を（１）〜（９）に平行移動して、平行投影法により視差角（視線方向間の角度）が１度ずつ異なる９つの視差画像を生成する。なお、平行投影法を行なう場合、３次元仮想空間レンダリング部１３６２ｋは、視線方向に沿って無限遠から平行な光線を照射する光源を設定する。
【００５８】
或いは、３次元仮想空間レンダリング部１３６２ｋが、図６の「９視差画像生成方式（２）」に示すように、レンダリング条件として、透視投影法を受け付け、更に、基準の視点位置（５）と視差角「１度」とを受け付けたとする。かかる場合、３次元仮想空間レンダリング部１３６２ｋは、ボリュームデータの中心（重心）を中心に視差角が「１度」おきとなるように、視点の位置を（１）〜（９）に回転移動して、透視投影法により視差角が１度ずつ異なる９つの視差画像を生成する。なお、透視投影法を行なう場合、３次元仮想空間レンダリング部１３６２ｋは、視線方向を中心に光を３次元的に放射状に照射する点光源や面光源を各視点にて設定する。また、透視投影法を行なう場合、レンダリング条件によっては、視点（１）〜（９）は、平行移動される場合であってもよい。
【００５９】
なお、３次元仮想空間レンダリング部１３６２ｋは、表示されるボリュームレンダリング画像の縦方向に対しては、視線方向を中心に光を２次元的に放射状に照射し、表示されるボリュームレンダリング画像の横方向に対しては、視線方向に沿って無限遠から平行な光線を照射する光源を設定することで、平行投影法と透視投影法とを併用したボリュームレンダリング処理を行なってもよい。
【００６０】
このようにして生成された９つの視差画像が、視差画像群である。第１の実施形態において、９つの視差画像は、例えば制御部１３５により所定フォーマット（例えば格子状）に配置した中間画像に変換され、立体表示モニタとしての表示部１３２に出力される。すると、ワークステーション１３０の操作者は、立体表示モニタに表示された立体視可能な医用画像を確認しながら、視差画像群生成のための操作を行なうことができる。
【００６１】
なお、図６の例では、レンダリング条件として、投影方法、基準の視点位置及び視差角を受け付けた場合を説明したが、レンダリング条件として、他の条件を受け付けた場合も同様に、３次元仮想空間レンダリング部１３６２ｋは、それぞれのレンダリング条件を反映しつつ、視差画像群を生成する。
【００６２】
また、３次元仮想空間レンダリング部１３６２ｋは、ボリュームレンダリングだけでなく、任意の平面（例えば、アキシャル面、サジタル面、コロナル面など）の平面画像を再構成する。例えば、３次元仮想空間レンダリング部１３６２ｋは、断面再構成法（ＭＰＲ：Multi Planer Reconstruction）を行なってボリュームデータからＭＰＲ画像を再構成する。なお、３次元仮想空間レンダリング部１３６２ｋは、「Curved MPR」を行なう機能や、「Intensity Projection」を行なう機能も有する。
【００６３】
続いて、３次元画像処理部１３６２がボリュームデータから生成した視差画像群は、アンダーレイ（Underlay）とされる。そして、各種情報（目盛り、患者名、検査項目等）が描出されたオーバーレイ（Overlay）がアンダーレイに対して重畳されることで、出力用の２次元画像とされる。２次元画像処理部１３６３は、オーバーレイ及びアンダーレイに対して画像処理を行なうことで、出力用の２次元画像を生成する処理部であり、図５に示すように、２次元物体描画部１３６３ａ、２次元幾何変換処理部１３６３ｂ及び輝度調整部１３６３ｃを有する。例えば、２次元画像処理部１３６３は、出力用の２次元画像の生成処理に要する負荷を軽減するために、９枚の視差画像（アンダーレイ）のそれぞれに対して１枚のオーバーレイを重畳することで、出力用の２次元画像を９枚、生成する。
【００６４】
２次元物体描画部１３６３ａは、オーバーレイに描出される各種情報を描画する処理部であり、２次元幾何変換処理部１３６３ｂは、オーバーレイに描出される各種情報の位置を平行移動処理又は回転移動処理したり、オーバーレイに描出される各種情報の拡大処理又は縮小処理したりする処理部である。
【００６５】
また、輝度調整部１３６３ｃは、輝度変換処理を行なう処理部であり、例えば、出力先の立体表示モニタの諧調や、ウィンドウ幅（ＷＷ：Window Width）、ウィンドウレベル（ＷＬ：Window Level）等の画像処理用のパラメータに応じて、オーバーレイ及びアンダーレイの輝度を調整する処理部である。
【００６６】
このようにして生成された出力用の２次元画像は、例えば制御部１３５により一旦記憶部１３４に格納され、その後、通信部１３３を介して画像保管装置１２０に送信される。例えば、端末装置１４０が、画像保管装置１２０からこの出力用の２次元画像を取得し、所定フォーマット（例えば格子状）に配置した中間画像に変換した上で立体表示モニタに表示すると、観察者である医師や検査技師は、各種情報（目盛り、患者名、検査項目等）が描出された状態で、立体視可能な医用画像を閲覧することができる。
【００６７】
以上、第１の実施形態に係る画像処理システム１及びワークステーション１３０の構成について説明した。かかる構成のもと、第１の実施形態に係るワークステーション１３０は、以下、詳細に説明する制御部１３５の処理により、時相の異なる複数の画像を重畳させた際にも、容易に観察することを可能とするように構成されている。具体的には、第１の実施形態に係るワークステーション１３０は、時相の異なる複数の３次元画像それぞれに含まれる関心領域を、それぞれ異なる表示形式にて表示させる。
【００６８】
ここで、時相が異なる複数の３次元画像を重畳させ、観察する際の問題点について説明する。例えば、立体視可能なモニタにて３次元画像を表示させた場合、関心部位をより詳細に観察することができ、診断精度の向上などが期待される。一例を挙げると、抗がん剤や放射線治療による腫瘍の治療効果を判定する場合においても、腫瘍を立体的に観察して治療効果を判定することができる。しかしながら、治療前後の３次元画像を別々に表示しても腫瘍の縮小具合などは把握し難い。そこで、治療前後の３次元画像を重畳させて腫瘍の大きさや形態などの変化を観察しようとした場合に、単に重畳させただけでは、腫瘍が重なるだけで、腫瘍の大きさや形態などの変化を観察することは困難である。第１の実施形態に係るワークステーション１３０は、このような場合であっても、腫瘍の大きさや形態などの変化を容易に観察することを可能にする。
【００６９】
図７は、第１の実施形態に係る制御部１３５の構成例を説明するための図である。図７に示すように、制御部１３５は、抽出部１３５１と、位置決定部１３５２と、表示制御部１３５３とを有する。抽出部１３５１は、時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する。具体的には、抽出部１３５１は、記憶部１３４によって記憶された時相の異なる複数のボリュームデータから、腫瘍などの関心領域をそれぞれ抽出する。例えば、抽出部１３５１は、領域拡張法や、閾値法や、ＣＡＤ（Computer Assisted Diagnosis）などを用いて関心領域を抽出する。
【００７０】
図８は、第１の実施形態に係る抽出部１３５１による処理の一例を説明するための図である。図８においては、Ｘ線ＣＴ装置により撮像された肝臓癌の治療前及び治療後のボリュームデータからそれぞれ関心領域を抽出する場合について示す。また、図８においては、関心領域を模式的（球）に示しているが、実際には、関心領域それぞれが固有の形態を有している。例えば、抽出部１３５１は、ＣＴ値を用いた領域拡張法により、図８の（Ａ）の＜治療前＞のボリュームデータの領域３００内に位置する病変部位を関心領域として抽出する。すなわち、抽出部１３５１は、図８の（Ｂ）に示すように、領域３００内に示すＲＯＩ（Region Of Interest）１を抽出する。
【００７１】
同様に、抽出部１３５１は、ＣＴ値を用いた領域拡張法などにより、図８の（Ａ）の＜治療後＞のボリュームデータの領域３０１内に位置する病変部位を関心領域として抽出する。すなわち、抽出部１３５１は、図８の（Ｂ）に示すように、領域３０１内に示すＲＯＩ２を抽出する。なお、上記した例では、領域拡張法を用いた関心領域の抽出を説明したが、これはあくまでも一例であり、閾値法や、ＣＡＤ、或いは、解析用のアプリケーションを用いることで関心領域を抽出してもよい。また、上記した例では、Ｘ線ＣＴ装置によって撮像された３次元画像データを用いる場合について説明したが、これはあくまでも一例であり、他のモダリティによって撮像された３次元画像データを用いる場合であってもよい。かかる場合には、モダリティごとに異なる抽出方法を利用することも可能である。
【００７２】
ここで、操作者は、抽出部１３５１によって自動で抽出された関心領域を自由に修正させることが可能である。例えば、図８に示すように、抽出部１３５１によってＲＯＩ１及びＲＯＩ２が抽出された後、操作者は、治療前及び治療後それぞれの画像上でカーソルを操作し、所望する領域をＲＯＩとして設定しなおすことが可能である。或いは、仮に、抽出部１３５１によってＲＯＩが抽出されなかった場合に、操作者がＲＯＩを設定することも可能である。上述した操作者によるＲＯＩの設定は、抽出部１３５１によって抽出されたＲＯＩ全体を設定しなおすことも可能であるし、抽出部１３５１によって抽出されたＲＯＩを部分的に修正することも可能である。
【００７３】
図７に戻って、位置決定部１３５２は、抽出部１３５１によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する。具体的には、位置決定部１３５２は、ボリュームデータに含まれる特徴点を３次元的に位置合わせすることで、関心領域を重畳させるための位置を決定する。
【００７４】
図９は、第１の実施形態に係る位置決定部１３５２による処理の一例を説明するための図である。図９においては、図８に示す肝臓癌の治療前及び治療後のボリュームデータの位置合わせを実行する場合ついて示す。例えば、位置決定部１３５２は、非線形のワーピング（warping）処理により、＜治療前＞のボリュームデータと＜治療後＞のボリュームデータとの位置合わせを実行する。
【００７５】
一例を挙げると、位置決定部１３５２は、図９の＜治療前＞及び＜治療後＞に示すように、各ボリュームデータに３軸（ｘ軸、ｙ軸、ｚ軸）からなる直交座標を設定する。そして、位置決定部１３５２は、各ボリュームデータを任意の小領域に分割し、分割した小領域ごとに非線形の位置合わせを実行する。ここで、位置決定部１３５２によって実行される非線形のワーピング処理による位置合わせは、＜治療前＞のボリュームデータを、＜治療後＞のボリュームデータに合わせるように変形させる場合であってもよいし、逆に、＜治療後＞のボリュームデータを、＜治療前＞のボリュームデータに合わせるように変形させる場合であってもよい。
【００７６】
また、位置決定部１３５２は、上述した非線形のワーピング処理に加えて、平行移動や回転などの線形の位置合わせを実行することも可能である。例えば、位置決定部１３５２は、＜治療前＞及び＜治療後＞のボリュームデータに描出された脊椎や、肋骨などを抽出し、抽出した脊椎や、肋骨などを３次元的に重ね合わせることで、＜治療前＞及び＜治療後＞のボリュームデータの位置を合わせる。
【００７７】
第１の実施形態に係るワークステーション１３０は、上述した位置決定部１３５２の処理により、撮影時の呼吸量や、撮影体位などによる２つのボリュームデータ間の位置ずれを補正することで、＜治療前＞及び＜治療後＞のボリュームデータそれぞれに含まれる関心領域を正確に重畳させる。なお、上記した例では、ボリュームデータ全体を用いる場合について説明したが、これはあくまでも一例であり、ボリュームデータの一部分を用いて位置を合わせる場合であってもよい。また、第１の実施形態に係るワークステーション１３０は、線形の位置合わせと非線形ワーピングによる位置合わせを、適宜、組み合わせて実行することが可能である。
【００７８】
図７に戻って、表示制御部１３５３は、抽出部１３５１によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、位置決定部１３５２により決定された位置にて重畳させた重畳画像を表示させる。具体的には、表示制御部１３５３は、まず、レンダリング処理部１３６に、位置決定部１３５２によって位置が合わせられたボリュームデータそれぞれに対して、関心領域を含むように、かつ、同一の視線方向からレンダリング処理を実行させることで、時相ごとの視差画像群を生成させる。そして、表示制御部１３５３は、関心領域の色や、表示形態を視差画像群の間で異なるように変更する。その後、表示制御部１３５３は、視差画像群をそれぞれ異なるレイヤーにて表示させる。
【００７９】
図１０は、第１の実施形態に係る表示制御部１３５３による処理の一例を説明するための図である。図１０においては、図８に示す肝臓癌の＜治療前＞及び＜治療後＞のボリュームデータから生成された視差画像群を重畳させた場合について示す。例えば、表示制御部１３５３は、図１０に示すように、位置決定部１３５２によって位置が合わせられた＜治療後＞のボリュームデータから全体を描出した視差画像群を生成させる。そして、表示制御部１３５３は、位置決定部１３５２によって位置が合わせられた＜治療前＞のボリュームデータから領域３０１に相当する領域の視差画像群を生成させ、ＲＯＩ１及びＲＯＩ２を異なる色で表現した画像を表示させる。
【００８０】
一例を挙げると、表示制御部１３５３は、＜治療後＞のボリュームデータに含まれるＲＯＩ２を「赤」とし、＜治療前＞のボリュームデータに含まれるＲＯＩ１の色を「青」として表示させる。ここで、表示制御部１３５３は、複数の３次元画像データの関心領域それぞれについて、所定の領域のみを表示させる。例えば、表示制御部１３５３は、図１０に示すように、重畳させた際に、外側になるＲＯＩ１の一部を表示しないようにすることで、内側のＲＯＩ２を露出させた画像を表示させる。なお、図１０においては、ＲＯＩ１の１／８の領域を表示させないようにしているが、この領域は任意に設定することができ、例えば、ＲＯＩ１の１／４を表示させないようにしてもよい。また、表示させない部分は、操作者が任意に変更することができる。例えば、操作者が、画像上でカーソルを操作することで、表示させない部分を任意に変更することができる。換言すると、操作者は、ＲＯＩ２の任意の位置を露出させることが可能である。また、表示制御部１３５３は、色に加えて、ＲＯＩの不透過度をそれぞれ変更させることも可能である。
【００８１】
さらに、表示制御部１３５３は、各時相のボリュームデータの体積を比較して、体積の変化量に基づいて色や立体量を変化させたＲＯＩを表示させることも可能である。例えば、表示制御部１３５３は、＜治療後＞のボリュームデータに含まれるＲＯＩ２の体積が、＜治療前＞のボリュームデータに含まれるＲＯＩ１の体積から「２０％」以上減少していた場合にはＲＯＩ１の色を「黄色」で、「４０％」以上減少していた場合には、「緑」で表現した画像を表示させる。また、表示制御部１３５３は、＜治療後＞のボリュームデータに含まれるＲＯＩ２の体積が、＜治療前＞のボリュームデータに含まれるＲＯＩ１の体積よりも「２０％」以上増加していた場合にはＲＯＩ２の色を「青」で、「４０％」以上増加していた場合には、「紫」で表現した画像を表示させる。すなわち、表示制御部１３５３は、＜治療前＞と＜治療後＞でＲＯＩがどの程度変化しているかが一目でわかるような画像を表示する。また、表示制御部１３５３は、例えば，腫瘍が縮小していたら奥に，拡大していたら手前に表示するように立体量を変化させて表示することが可能である。なお、ＲＯＩの体積が同一（或いは、その差が所定の閾値以内）であった場合には、表示制御部１３５３は、色つけないＲＯＩを表示させる。
【００８２】
表示制御部１３５３は、上述した表示を任意に組み合わせて表示させることが可能である。従って、第１の実施形態に係るワークステーション１３０は、ＲＯＩの変化を一目で認識させることができ、抗がん剤や放射線治療の治療効果の判定を容易に行わせることを可能にする。
【００８３】
なお、色の設定は、操作者により任意に決定することができる。例えば、ＲＯＩの色を時系列の順に予め設定しておくこともできる。また、表示制御部１３５３によって表示部１３２に表示されたＲＯＩの色は、入力部１３１を介して自由に変更することも可能である。例えば、表示部１３２に表示された関心領域の重なり具合が不明瞭な場合、色を自由に変更することができる。また、表示制御部１３５３は、色の濃淡、コントラスト、明度なども変更するように設定することが可能である。
【００８４】
次に、図１１を用いて、第１の実施形態に係るワークステーション１３０の処理について説明する。図１１は、第１の実施形態に係るワークステーション１３０による処理の手順を示すフローチャートである。図１１に示すように、第１の実施形態に係るワークステーション１３０においては、時相の異なる複数の画像を重畳して表示するためのコマンドが実行されると、抽出部１３５１は、時相の異なる複数の３次元画像データから関心領域を抽出する（ステップＳ１０１）。
【００８５】
そして、位置決定部１３５２は、抽出部１３５１によって抽出された関心領域を重畳させるための位置をボリュームデータに含まれる特徴点に基づいて決定する（ステップＳ１０２）。その後、表示制御部１３５３は、関心領域の色を画像ごとに変更して（ステップＳ１０３）、画像を異なるレイヤーにて表示させることで重畳させた重畳画像を表示部１３２に表示させる（ステップＳ１０４）。
【００８６】
上述したように、第１の実施形態によれば、抽出部１３５１は、時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する。そして、位置決定部１３５２は、抽出部１３５１によって抽出された複数の３次元画像データそれぞれの関心領域を略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する。そして、表示制御部１３５３は、抽出部１３５１によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、位置決定部１３５２により決定された位置にて重畳させた重畳画像を表示させる。従って、第１の実施形態に係るワークステーション１３０は、異なる時相で撮像された３次元画像データに含まれる関心領域それぞれを同一画面上で識別可能に表示することができ、時相の異なる複数の画像を重畳させた際にも、容易に観察することを可能にする。
【００８７】
また、第１の実施形態によれば、表示制御部１３５３は、複数の３次元画像データの関心領域それぞれについて、所定の領域のみを表示させる。従って、第１の実施形態に係るワークステーション１３０は、内側に位置する関心領域を確実に視認させることができ、時相の異なる複数の画像を重畳させた際にも、より容易に観察することを可能にする。
【００８８】
（第２の実施形態）
上記した第１の実施形態では、２つの時相の３次元画像データを重畳する場合について説明した。第２の実施形態では、３つ以上の時相の３次元画像データを重畳する場合について説明する。なお、第２の実施形態では、図７に示す第１の実施形態に係る制御部１３５と同一の構成を有する。そこで、第２の実施形態においては、３つ以上の時相の３次元画像データを重畳して表示させる制御部を表示制御部１３５３ａとして説明する。すなわち、表示制御部１３５３ａは、図７に示す表示制御部１３５３に新たな処理が追加されたものである。
【００８９】
表示制御部１３５３ａは、３つ以上の時相の３次元画像データに含まれる関心領域をそれぞれ異なる表示形式で表示させる。具体的には、表示制御部１３５３ａは、３つ以上の時相のボリュームデータから抽出部１３５１によって抽出された関心領域をそれぞれ異なる色で表示させる。図１２は、第２の実施形態に係る３つ以上の時相の３次元画像データの例を示す図である。図１２においては、時相の異なる肝臓のパーフュージョン（Perfusion）画像を示している。また、図１２においては、Ｘ線ＣＴ装置及びＭＲＩ装置によって撮像されたパーフュージョンを示す。
【００９０】
例えば、第２の実施形態に係る制御部１３５は、図１２に示すように、Ｔ１、Ｔ２、Ｔ３及びＴ４の４つの時相を含む３次元画像データを以下に記すように表示させる。まず、抽出部１３５１は、Ｔ１、Ｔ２、Ｔ３及びＴ４のボリュームデータから関心領域をそれぞれ抽出する。例えば、抽出部１３５１は、Ｔ１のボリュームデータからＲＯＩ３を抽出し、Ｔ２のボリュームデータからＲＯＩ４を抽出し、Ｔ３のボリュームデータからＲＯＩ５を抽出し、Ｔ４のボリュームデータからＲＯＩ６を抽出する。
【００９１】
そして、位置決定部１３５２は、Ｔ１、Ｔ２、Ｔ３及びＴ４のボリュームデータそれぞれに含まれる特徴点に基づいて、非線形のワーピング処理を実行することで、ボリュームデータの位置合わせを実行する。例えば、位置決定部１３５２は、Ｔ４のボリュームデータに合わせるように、Ｔ１、Ｔ２及びＴ３のボリュームデータそれぞれを変形させる。
【００９２】
その後、表示制御部１３５３ａは、位置決定部１３５２によって位置合わせが実行されたボリュームデータそれぞれに対して、関心領域を含むように、かつ、同一の視線方向からレンダリング処理を実行した視差画像群を生成させる。そして、表示制御部１３５３ａは、関心領域の色が視差画像群間で異なるように変更する。その後、表示制御部１３５３ａは、視差画像群をそれぞれ異なるレイヤーにて表示させる。
【００９３】
図１３は、第２の実施形態に係る表示制御部１３５３ａによる処理の第１の例を説明するための図である。図１３においては、図１２に示すＴ１、Ｔ２、Ｔ３及びＴ４のボリュームデータから生成された視差画像群を重畳させた場合について示す。例えば、表示制御部１３５３ａは、Ｔ１、Ｔ２、Ｔ３及びＴ４のボリュームデータに含まれるＲＯＩ３〜６を時系列の順に設定された色で表示し、体積が大きくなるにつれて表示させない領域が大きくなるように表示させる。
【００９４】
図１３を用いて説明すると、例えば、表示制御部１３５３ａは、ＲＯＩ３を「紫」で表示させ、ＲＯＩ５を「青」で表示させ、ＲＯＩ４を「橙」で表示させ、ＲＯＩ６を「赤」で表示させる。ここで、表示制御部１３５３ａは、図１３に示すように、すべてのＲＯＩについて、その一部が露出するように各ＲＯＩの一部を表示させないようにした画像を表示させる。その結果、表示制御部１３５３ａによって表示されるＲＯＩ３〜６は、図１３に示すように、すべての時相におけるＲＯＩの変化を容易に把握することができるように表示部１３２に表示されることとなる。
【００９５】
また、表示制御部１３５３ａは、３つ以上の時相の３次元画像データに含まれる関心領域の中から、体積の差が最大となる２つの関心領域のみを表示させることも可能である。図１４は、第２の実施形態に係る表示制御部１３５３ａによる処理の第２の例を説明するための図である。例えば、表示制御部１３５３ａは、図１４に示すように、ＲＯＩ３〜６のなかから体積の差が最大となるＲＯＩ３とＲＯＩ６とを抽出し、抽出した２つのＲＯＩの色を変化させ、ＲＯＩ３の一部を表示させないようにした重畳画像を表示部１３２に表示させる。
【００９６】
上記した第２の実施形態によれば、表示制御部１３５３ａは、３つ以上の時相の３次元画像データに含まれる関心領域をそれぞれ識別可能に表示させる。従って、第２の実施形態に係るワークステーション１３０は、系時的に連続するデータを用いた関心領域を容易に観察することを可能にする。例えば、４Ｄデータを用いて腫瘍の移動量を観察することで腫瘍の癒着具合を判定することも可能となる。
【００９７】
（第３の実施形態）
上記した第１及び第２の実施形態では、Ｘ線ＣＴ画像におけるＣＴ値に基づいた領域拡張法により関心領域を抽出する場合について説明した。第３の実施形態では、機能画像により得られる情報から関心領域を抽出する場合について説明する。なお、第３の実施形態では、図７に示す第１の実施形態に係る制御部１３５と同一の構成を有する。そこで、第３の実施形態においては、機能画像により得られる情報から関心領域を抽出する制御部を抽出部１３５１ａとして説明する。すなわち、抽出部１３５１ａは、図７に示す抽出部１３５１に新たな処理が追加されたものである。
【００９８】
抽出部１３５１ａは、機能画像と形態画像とから得られる情報に基づいて関心領域を抽出する。以下では、ＰＥＴ画像とＣＴ画像とを用いて関心領域を抽出する場合について説明する。図１５は、第３の実施形態に係る抽出部１３５１ａによる処理の一例を説明するための図である。図１５においては、ＰＥＴ−ＣＴ装置により撮像された３次元画像データ（ＣＴ画像、ＰＥＴ画像）を用いて関心領域を抽出する場合について示す。
【００９９】
例えば、抽出部１３５１ａは、図１５に示すように、記憶部１３４によって記憶されたある１時相における３次元のＣＴ画像及び３次元のＰＥＴ画像からフュージョン（fusion）画像を生成させる。そして、抽出部１３５１ａは、生成させたフュージョン画像から３次元のＣＴ画像における腫瘍の位置を抽出する。同様に、抽出部１３５１ａは、異なる時相の３次元画像データに関してもＰＥＴ画像とＣＴ画像とをフュージョンさせることにより、３次元のＣＴ画像における腫瘍の位置を抽出する。
【０１００】
上記したような、ＰＥＴ画像を用いた関心領域の抽出は、時相の異なる３次元のＣＴ画像を重畳させる場合だけでなく、時相が異なる３次元のフュージョン画像を重畳させる場合にも実行させることができる。時相が異なる３次元のフュージョン画像を重畳させた場合には、腫瘍が悪性であるか否かが判定できるだけでなく、悪性腫瘍の転移の様子を空間的に把握することを可能にする。
【０１０１】
なお、上述した例では、ＰＥＴ画像を用いる場合について説明したが、実施形態はこれに限定されるものではなく、例えば、ＭＲ画像や、パーフュージョン画像を用いる場合であってもよい。
【０１０２】
上記した第３の実施形態によれば、抽出部１３５１ａは、３次元のＰＥＴ画像を用いて関心領域を抽出する。従って、第３の実施形態に係るワークステーション１３０は、関心領域を正確に抽出することを可能にする。
【０１０３】
（第４の実施形態）
さて、これまで第１、第２及び第３の実施形態について説明したが、上述した第１、第２及び第３の実施形態以外にも、種々の異なる形態にて実施されてよいものである。
【０１０４】
上述した実施形態では、関心領域が１つである場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、関心領域を複数設定する場合であってもよい。
【０１０５】
上述した実施形態においては、腫瘍（肝臓癌）を関心部位とする場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、造影剤により信号が特異的に増加する領域などを関心部位として用いる場合であってもよい。
【０１０６】
上述した実施形態においては、位置を合わせるための特徴点として、脊椎や肋骨を用いる場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、抽出部１３５１によって抽出された関心領域の重心を特徴点として用いる場合であってもよい。かかる場合には、抽出部１３５１によって抽出された関心領域の重心同士を重ね合わせることで、関心領域を重畳させる。例えば、抽出部１３５１によって抽出された関心領域の体積の差が大きい場合に、関心領域の重心を用いて位置合わせすることで、処理を高速化させることが可能となる。
【０１０７】
上記実施形態においては、ＲＯＩを異なる色で表現して、重畳させた画像を表示する場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、ＲＯＩごとに不透過度を変化させる場合であってもよい。
【０１０８】
例えば、表示制御部１３５３は、体積が大きい関心領域の不透過度を「５０％」、色を「赤」とし、体積が小さい関心領域の不透過度を「１００％」、色を「青」として表示させる。図１０を用いて説明すると、表示制御部１３５３は、治療前のボリュームデータに含まれるＲＯＩ１の体積「Ｔ1」と、治療後のボリュームデータに含まれるＲＯＩ２の体積「Ｔ2」とを比較して、「Ｔ1−Ｔ2＞０」であることから、ＲＯＩ１を「不透過度：５０％」、「色：赤」で表示させ、ＲＯＩ２を「不透過度：１００％」、「色：青」で表示させる。
【０１０９】
上述したように画像の不透過度を関心領域ごとに変更させて表示することで、第１の実施形態に係るワークステーション１３０は、関心領域の全体像を把握させることができ、時相の異なる複数の画像を重畳させた際にも、より容易に観察することを可能にする。
【０１１０】
上述した実施形態においては、治療前の画像と治療後の画像それぞれに腫瘍が描出されている場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、現時点の画像に腫瘍が描出された場合に、過去の画像と比較する場合であってもよい。例えば、操作者が、現時点の画像及び過去の画像に関心領域を設定し、重畳した画像を表示させることで、腫瘍の転移状況などを表示させることが可能となる。
【０１１１】
上記した実施形態では、関心領域を含む領域のみを重畳させる場合ついて説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、画像全体を重畳させる場合であってもよい。
【０１１２】
上述した実施形態においては、固有の形態を有する関心領域をそのまま重畳させる場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、関心領域の形態を変形させて重畳させる場合であってもよい。例えば、固有の形態を有する関心領域それぞれを標準の形態に変形させた後に重畳させてもよい。ここで、標準の形態としては、例えば、球や、立方体、直方体などである。一例を挙げると、表示制御部１３５３は、抽出部１３５１によって抽出された時相の異なる複数の関心領域それぞれを、各関心領域の体積に相当する大きさの球や、立方体、直方体などに変形させた後、重畳させて表示する。
【０１１３】
これにより、腫瘍の内部が壊死することで腫瘍全体の体積が縮小しているが、変化量が直感的に分かりにくい場合などに、関心部位を体積に応じた大きさの球や、立法体、直方体などに変形させて重畳させることで、変化量をより直感的に把握することを可能にする。
【０１１４】
上記実施形態においては、ワークステーション１３０が、３次元画像を重畳して表示する場合について説明した。しかしながら、実施形態がこれに限定されるものではなく、例えば、医用画像診断装置１１０が３次元画像を重畳して表示する場合であってもよい。また、医用画像診断装置１１０又はワークステーション１３０が３次元画像を重畳して、端末装置１４０が、画像を表示する場合であってもよい。
【０１１５】
また、上記実施形態においては、端末装置１４０は、画像保管装置１２０から取得した医用画像等を表示等するものとして説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、端末装置１４０は、医用画像診断装置１１０又はワークステーション１３０に直接接続される場合であってもよい。
【０１１６】
また、上記実施形態においては、ワークステーション１３０は、画像保管装置１２０からボリュームデータを取得し、このボリュームデータから３次元画像を重畳して表示する場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、ワークステーション１３０は、医用画像診断装置１１０からボリュームデータを取得し、このボリュームデータから３次元画像を重畳して表示する場合であってもよい。
【０１１７】
上述した実施形態においては、端末装置１４０が、画像保管装置１２０から画像を取得して表示する場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、端末装置１４０が、医用画像診断装置１１０から画像を取得して表示する場合であってもよい。
【０１１８】
以上説明したとおり、実施形態によれば、本実施形態の画像処理システム、装置、方法及び医用画像診断装置は、時相の異なる複数の画像を重畳させた際にも、容易に観察することを可能にする。
【０１１９】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【符号の説明】
【０１２０】
１１０ 医用画像診断装置
１２０ 画像保管装置
１３０ ワークステーション
１３５ 制御部
１３５１、１３５１ａ 抽出部
１３５２ 位置決定部
１３５３、１３５３ａ 表示制御部
１４０ 端末装置
【特許請求の範囲】
【請求項１】
時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する抽出手段と、
前記抽出手段によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する位置決定手段と、
前記抽出手段によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、前記位置決定手段により決定された位置にて重畳させた重畳画像を表示させる表示制御手段と、
を備えたことを特徴とする画像処理システム。
【請求項２】
前記表示制御手段は、前記複数の３次元画像データの関心領域それぞれについて、所定の領域のみを表示させることを特徴とする請求項１に記載の画像処理システム。
【請求項３】
前記表示制御手段は、前記複数の３次元画像データの関心領域それぞれの不透過度を変更することを特徴とする請求項１に記載の画像処理システム。
【請求項４】
前記位置決定手段は、前記抽出手段によって抽出された複数の３次元画像データそれぞれの関心領域における重心を前記特徴点として用いることを特徴とする請求項１又は２に記載の画像処理システム。
【請求項５】
時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する抽出手段と、
前記抽出手段によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する位置決定手段と、
前記抽出手段によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、前記位置決定手段により決定された位置にて重畳させた重畳画像を表示させる表示制御手段と、
を備えたことを特徴とする画像処理装置。
【請求項６】
時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する抽出工程と、
前記抽出工程によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する位置決定工程と、
前記抽出工程によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、前記位置決定工程により決定された位置にて重畳させた重畳画像を表示させる表示制御工程と、
を含んだことを特徴とする画像処理方法。
【請求項７】
時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する抽出手段と、
前記抽出手段によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する位置決定手段と、
前記抽出手段によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、前記位置決定手段により決定された位置にて重畳させた重畳画像を表示させる表示制御手段と、
を備えたことを特徴とする医用画像診断装置。
【請求項１】
時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する抽出手段と、
前記抽出手段によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する位置決定手段と、
前記抽出手段によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、前記位置決定手段により決定された位置にて重畳させた重畳画像を表示させる表示制御手段と、
を備えたことを特徴とする画像処理システム。
【請求項２】
前記表示制御手段は、前記複数の３次元画像データの関心領域それぞれについて、所定の領域のみを表示させることを特徴とする請求項１に記載の画像処理システム。
【請求項３】
前記表示制御手段は、前記複数の３次元画像データの関心領域それぞれの不透過度を変更することを特徴とする請求項１に記載の画像処理システム。
【請求項４】
前記位置決定手段は、前記抽出手段によって抽出された複数の３次元画像データそれぞれの関心領域における重心を前記特徴点として用いることを特徴とする請求項１又は２に記載の画像処理システム。
【請求項５】
時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する抽出手段と、
前記抽出手段によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する位置決定手段と、
前記抽出手段によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、前記位置決定手段により決定された位置にて重畳させた重畳画像を表示させる表示制御手段と、
を備えたことを特徴とする画像処理装置。
【請求項６】
時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する抽出工程と、
前記抽出工程によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する位置決定工程と、
前記抽出工程によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、前記位置決定工程により決定された位置にて重畳させた重畳画像を表示させる表示制御工程と、
を含んだことを特徴とする画像処理方法。
【請求項７】
時相の異なる複数の３次元画像データそれぞれに含まれる同一の関心領域を抽出する抽出手段と、
前記抽出手段によって抽出された複数の３次元画像データそれぞれの関心領域を被検体における略同一位置にて重畳させるための位置を、当該３次元画像データに含まれる特徴点に基づいて決定する位置決定手段と、
前記抽出手段によって抽出された複数の３次元画像データの関心領域それぞれを、異なる表示形式に変更し、前記位置決定手段により決定された位置にて重畳させた重畳画像を表示させる表示制御手段と、
を備えたことを特徴とする医用画像診断装置。
【図１】
【図２Ａ】
【図２Ｂ】
【図３】
【図４】
【図５】
【図６】
【図７】
【図１１】
【図１５】
【図８】
【図９】
【図１０】
【図１２】
【図１３】
【図１４】
【図２Ａ】
【図２Ｂ】
【図３】
【図４】
【図５】
【図６】
【図７】
【図１１】
【図１５】
【図８】
【図９】
【図１０】
【図１２】
【図１３】
【図１４】
【公開番号】特開２０１３−３９３６０（Ｐ２０１３−３９３６０Ａ）
【公開日】平成２５年２月２８日（２０１３．２．２８）
【国際特許分類】
【出願番号】特願２０１２−１６１５１２（Ｐ２０１２−１６１５１２）
【出願日】平成２４年７月２０日（２０１２．７．２０）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【出願人】（５９４１６４５４２）東芝メディカルシステムズ株式会社 (4,066)
【Ｆターム（参考）】
【公開日】平成２５年２月２８日（２０１３．２．２８）
【国際特許分類】
【出願日】平成２４年７月２０日（２０１２．７．２０）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【出願人】（５９４１６４５４２）東芝メディカルシステムズ株式会社 (4,066)
【Ｆターム（参考）】
[ Back to top ]