説明

画像処理システム及び方法

【課題】医用画像を適切に表示することができる画像処理システム及び方法を提供すること。
【解決手段】実施形態に係る画像処理システムは、第1画像生成部と、第2画像生成部とを備える。前記第1画像生成部は、3次元の医用画像データであるボリュームデータに対してレンダリング処理を行うことで、第1画像を生成する。前記第2画像生成部は、前記ボリュームデータに対してレンダリング処理を行うことで、前記第1画像と立体感の異なる第2画像を生成する。

【発明の詳細な説明】
【技術分野】
【0001】
本発明の実施形態は、画像処理システム及び方法に関する。
【背景技術】
【0002】
従来、立体視用メガネ等の専用機器を用いて、2つの視点から撮影された2視差画像を立体視可能なモニタが実用化されている。また、近年、レンチキュラーレンズ等の光線制御子を用いて、複数の視点から撮影された多視差画像(例えば、9視差画像)を裸眼にて立体視可能なモニタが実用化されている。なお、立体視可能なモニタにて表示される2視差画像や9視差画像は、1視点から撮影された画像の奥行き情報を推定し、推定した情報を用いた画像処理により生成される場合もある。
【0003】
一方、X線CT(Computed Tomography)装置やMRI(Magnetic Resonance Imaging)装置、超音波診断装置等の医用画像診断装置では、3次元の医用画像データ(以下、ボリュームデータ)を生成可能な装置が実用化されている。従来、かかる医用画像診断装置により生成されたボリュームデータは、種々の画像処理により2次元画像とされ、汎用モニタ上にて2次元表示される。例えば、医用画像診断装置により生成されたボリュームデータは、ボリュームレンダリング処理により3次元の情報を反映した2次元画像とされ、汎用モニタ上にて2次元表示される。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開2005−86414号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
本発明が解決しようとする課題は、医用画像を適切に表示することができる画像処理システム及び方法を提供することである。
【課題を解決するための手段】
【0006】
実施形態に係る画像処理システムは、第1画像生成部と、第2画像生成部とを備える。前記第1画像生成部は、3次元の医用画像データであるボリュームデータに対してレンダリング処理を行うことで、第1画像を生成する。前記第2画像生成部は、前記ボリュームデータに対してレンダリング処理を行うことで、前記第1画像と立体感の異なる第2画像を生成する。
【図面の簡単な説明】
【0007】
【図1】図1は、第1の実施形態に係る画像処理システムの構成例を説明するための図である。
【図2】図2は、2視差画像により立体表示を行う立体表示モニタの一例を説明するための図である。
【図3】図3は、9視差画像により立体表示を行う立体表示モニタの一例を説明するための図である。
【図4】図4は、第1の実施形態に係るワークステーションの構成例を説明するための図である。
【図5】図5は、図4に示すレンダリング処理部の構成例を説明するための図である。
【図6】図6は、第1の実施形態に係るボリュームレンダリング処理の一例を説明するための図である。
【図7】図7は、第1の実施形態に係る表示例を説明するための図である。
【図8】図8は、第1の実施形態に係る表示例を説明するための図である。
【図9】図9は、第1の実施形態に係る制御部の構成例を説明するための図である。
【図10】図10は、第1の実施形態に係る立体視画像生成処理を説明するための図である。
【図11】図11は、第1の実施形態に係る立体視画像生成処理を説明するための図である。
【図12】図12は、第1の実施形態に係る立体視画像生成処理を説明するための図である。
【図13】図13は、第1の実施形態に係る平面画像生成処理を説明するための図である。
【図14】図14は、第1の実施形態に係る表示制御処理を説明するための図である。
【図15】図15は、第1の実施形態に係る処理手順を示すフローチャートである。
【図16】図16は、第1の実施形態に係る変形例を説明するための図である。
【図17】図17は、第2の実施形態に係る表示例を説明するための図である。
【図18】図18は、第2の実施形態に係る表示例を説明するための図である。
【図19】図19は、第2の実施形態に係る表示例を説明するための図である。
【図20】図20は、第2の実施形態に係る制御部の構成例を説明するための図である。
【図21】図21は、第3の実施形態に係る制御部の構成例を説明するための図である。
【図22】図22は、第3の実施形態に係る処理手順を示すフローチャートである。
【図23】図23は、第3の実施形態に係る変形例に係る表示例を説明するための図である。
【図24】図24は、第4の実施形態に係るアイコン立体視画像を説明するための図である。
【図25】図25は、第4の実施形態に係る変形例の表示例を説明するための図である。
【図26】図26は、その他の実施形態に係る表示例を説明するための図である。
【図27】図27は、その他の実施形態に係る立体視画像生成処理を説明するための図である。
【発明を実施するための形態】
【0008】
以下、添付図面を参照して、画像処理システム及び画像処理方法の実施形態を詳細に説明する。ここで、以下の実施形態で用いる用語について説明すると、「視差画像群」とは、ボリュームデータに対して、所定の視差角ずつ視点位置を移動させてボリュームレンダリング処理を行うことで生成された画像群のことである。すなわち、「視差画像群」は、「視点位置」が異なる複数の「視差画像」から構成される。また、「視差角」とは、「視差画像群」を生成するために設定された各視点位置のうち、隣接する視点位置とボリュームデータによって表される空間内の所定位置(例えば、空間の中心)とにより定まる角度のことである。また、「視差数」とは、立体視可能なモニタにて立体視されるために必要となる「視差画像」の数のことである。また、以下で記載する「9視差画像」とは、9つの「視差画像」から構成される「視差画像群」のことである。また、以下で記載する「2視差画像」とは、2つの「視差画像」から構成される「視差画像群」のことである。
【0009】
(第1の実施形態)
まず、第1の実施形態に係る画像処理システムの構成例について説明する。図1は、第1の実施形態に係る画像処理システムの構成例を説明するための図である。
【0010】
図1に示すように、第1の実施形態に係る画像処理システム1は、医用画像診断装置110と、画像保管装置120と、ワークステーション130と、端末装置140とを有する。図1に例示する各装置は、例えば、病院内に設置された院内LAN(Local Area Network)2により、直接的、又は間接的に相互に通信可能な状態となっている。例えば、画像処理システム1にPACS(Picture Archiving and Communication System)が導入されている場合、各装置は、DICOM(Digital Imaging and Communications in Medicine)規格に則って、医用画像等を相互に送受信する。
【0011】
かかる画像処理システム1は、医用画像診断装置110により生成された3次元の医用画像データであるボリュームデータから視差画像群を生成し、この視差画像群を立体視可能なモニタに表示することで、病院内に勤務する医師や検査技師に立体視可能な医用画像を提供する。具体的には、第1の実施形態においては、ワークステーション130が、ボリュームデータに対して種々の画像処理を行い、視差画像群を生成する。また、ワークステーション130及び端末装置140が、立体視可能なモニタを有し、ワークステーション130にて生成された視差画像群をこのモニタに表示する。また、画像保管装置120は、医用画像診断装置110にて生成されたボリュームデータや、ワークステーション130にて生成された視差画像群を保管する。すなわち、ワークステーション130や端末装置140は、この画像保管装置120からボリュームデータや視差画像群を取得し、これを処理したり、モニタに表示したりする。以下、各装置を順に説明する。
【0012】
医用画像診断装置110は、X線診断装置、X線CT(Computed Tomography)装置、MRI(Magnetic Resonance Imaging)装置、超音波診断装置、SPECT(Single Photon Emission Computed Tomography)装置、PET(Positron Emission computed Tomography)装置、SPECT装置とX線CT装置とが一体化されたSPECT−CT装置、PET装置とX線CT装置とが一体化されたPET−CT装置、又はこれらの装置群等である。また、第1の実施形態に係る医用画像診断装置110は、3次元の医用画像データ(ボリュームデータ)を生成可能である。
【0013】
具体的には、第1の実施形態に係る医用画像診断装置110は、被検体を撮影することによりボリュームデータを生成する。例えば、医用画像診断装置110は、被検体を撮影することにより投影データやMR信号等のデータを収集し、収集したデータから、被検体の体軸方向に沿った複数のアキシャル面の医用画像データを再構成することで、ボリュームデータを生成する。例えば、医用画像診断装置110は、500枚のアキシャル面の医用画像データを再構成する。この500枚のアキシャル面の医用画像データ群が、ボリュームデータである。なお、医用画像診断装置110により撮影された被検体の投影データやMR信号等自体をボリュームデータとしてもよい。
【0014】
また、第1の実施形態に係る医用画像診断装置110は、生成したボリュームデータを画像保管装置120に送信する。なお、医用画像診断装置110は、ボリュームデータを画像保管装置120に送信する際に、付帯情報として、例えば、患者を識別する患者ID、検査を識別する検査ID、医用画像診断装置110を識別する装置ID、医用画像診断装置110による1回の撮影を識別するシリーズID等を送信する。
【0015】
画像保管装置120は、医用画像を保管するデータベースである。具体的には、第1の実施形態に係る画像保管装置120は、医用画像診断装置110から送信されたボリュームデータを記憶部に格納し、これを保管する。また、第1の実施形態においては、ワークステーション130が、ボリュームデータから視差画像群を生成し、生成した視差画像群を画像保管装置120に送信する。このため、画像保管装置120は、ワークステーション130から送信された視差画像群を記憶部に格納し、これを保管する。なお、第1の実施形態は、大容量の画像を保管可能なワークステーション130を用いることで、図1に例示するワークステーション130と画像保管装置120とが統合される場合であってもよい。すなわち、第1の実施形態は、ワークステーション130そのものにボリュームデータや視差画像群を記憶させる場合であってもよい。
【0016】
なお、第1の実施形態において、画像保管装置120に保管されたボリュームデータや視差画像群は、患者ID、検査ID、装置ID、シリーズID等と対応付けて保管される。このため、ワークステーション130や端末装置140は、患者ID、検査ID、装置ID、シリーズID等を用いた検索を行うことで、必要なボリュームデータや視差画像群を画像保管装置120から取得する。
【0017】
ワークステーション130は、医用画像に対して画像処理を行う画像処理装置である。具体的には、第1の実施形態に係るワークステーション130は、画像保管装置120から取得したボリュームデータに対して種々のレンダリング処理を行い、視差画像群を生成する。
【0018】
また、第1の実施形態に係るワークステーション130は、表示部として、立体視可能なモニタ(以下、立体表示モニタ)を有する。ワークステーション130は、視差画像群を生成し、生成した視差画像群を立体表示モニタに表示する。この結果、ワークステーション130の操作者は、立体表示モニタに表示された立体視可能な医用画像を確認しながら、視差画像群生成のための操作を行うことができる。
【0019】
また、ワークステーション130は、生成した視差画像群を画像保管装置120に送信する。なお、ワークステーション130は、視差画像群を画像保管装置120に送信する際に、付帯情報として、例えば、患者ID、検査ID、装置ID、シリーズID等を送信する。また、視差画像群を画像保管装置120に送信する際に送信される付帯情報としては、視差画像群に関する付帯情報も挙げられる。視差画像群に関する付帯情報としては、視差画像の枚数(例えば、「9」)や、視差画像の解像度(例えば、「466×350画素」)等がある。
【0020】
端末装置140は、病院内に勤務する医師や検査技師に医用画像を閲覧させるための装置である。例えば、端末装置140は、病院内に勤務する医師や検査技師により操作されるPC(Personal Computer)やタブレット式PC、PDA(Personal Digital Assistant)、携帯電話等である。具体的には、第1の実施形態に係る端末装置140は、表示部として立体表示モニタを有する。また、端末装置140は、画像保管装置120から視差画像群を取得し、取得した視差画像群を立体表示モニタに表示する。この結果、観察者である医師や検査技師は、立体視可能な医用画像を閲覧することができる。
【0021】
ここで、ワークステーション130や端末装置140が有する立体表示モニタについて説明する。現在最も普及している一般的な汎用モニタは、2次元画像を2次元で表示するものであり、2次元画像を立体表示することができない。仮に、観察者が汎用モニタにて立体視を要望する場合、汎用モニタに対して画像を出力する装置は、平行法や交差法により観察者が立体視可能な2視差画像を並列表示させる必要がある。又は、汎用モニタに対して画像を出力する装置は、例えば、左目用の部分に赤色のセロハンが取り付けられ、右目用の部分に青色のセロハンが取り付けられたメガネを用いて余色法により観察者が立体視可能な画像を表示する必要がある。
【0022】
一方、立体表示モニタとしては、立体視用メガネ等の専用機器を用いることで、2視差画像(両眼視差画像とも称する)を立体視可能とするものがある。
【0023】
図2は、2視差画像により立体表示を行う立体表示モニタの一例を説明するための図である。図2に示す一例は、シャッター方式により立体表示を行う立体表示モニタであり、モニタを観察する観察者が装着する立体視用メガネとしてシャッターメガネが用いられる。かかる立体表示モニタは、モニタにて2視差画像を交互に出射する。例えば、図2の(A)に示すモニタは、左目用の画像と右目用の画像を、120Hzにて交互に出射する。ここで、モニタには、図2の(A)に示すように、赤外線出射部が設置され、赤外線出射部は、画像が切り替わるタイミングに合わせて赤外線の出射を制御する。
【0024】
また、赤外線出射部から出射された赤外線は、図2の(A)に示すシャッターメガネの赤外線受光部により受光される。シャッターメガネの左右それぞれの枠には、シャッターが取り付けられており、シャッターメガネは、赤外線受光部が赤外線を受光したタイミングに合わせて左右のシャッターそれぞれの透過状態及び遮光状態を交互に切り替える。以下、シャッターにおける透過状態及び遮光状態の切り替え処理について説明する。
【0025】
各シャッターは、図2の(B)に示すように、入射側の偏光板と出射側の偏光板とを有し、更に、入射側の偏光板と出射側の偏光板との間に液晶相を有する。また、入射側の偏光板と出射側の偏光板とは、図2の(B)に示すように、互いに直交している。ここで、図2の(B)に示すように、電圧が印加されていない「OFF」の状態では、入射側の偏光板を通った光は、液晶層の作用により90度回転し、出射側の偏光板を透過する。すなわち、電圧が印加されていないシャッターは、透過状態となる。
【0026】
一方、図2の(B)に示すように、電圧が印加された「ON」の状態では、液晶層の液晶分子による偏光回転作用が消失するため、入射側の偏光板を通った光は、出射側の偏光板で遮られてしまう。すなわち、電圧が印加されたシャッターは、遮光状態となる。
【0027】
そこで、例えば、赤外線出射部は、モニタ上に左目用の画像が表示されている期間、赤外線を出射する。そして、赤外線受光部は、赤外線を受光している期間、左目のシャッターに電圧を印加せず、右目のシャッターに電圧を印加させる。これにより、図2の(A)に示すように、右目のシャッターが遮光状態となり、左目のシャッターが透過状態となるため、観察者の左目に左目用の画像が入射する。一方、赤外線出射部は、モニタ上に右目用の画像が表示されている期間、赤外線の出射を停止する。そして、赤外線受光部は、赤外線が受光されない期間、右目のシャッターに電圧を印加せず、左目のシャッターに電圧を印加させる。これにより、左目のシャッターが遮光状態となり、右目のシャッターが透過状態であるため、観察者の右目に右目用の画像が入射する。このように、図2に示す立体表示モニタは、モニタに表示される画像とシャッターの状態を連動させて切り替えることで、観察者が立体視可能な画像を表示させる。なお、2視差画像を立体視可能な立体表示モニタとしては、上記のシャッター方式以外にも、偏光メガネ方式を採用したモニタも知られている。
【0028】
更に、近年実用化された立体表示モニタとしては、レンチキュラーレンズ等の光線制御子を用いることで、例えば、9視差画像等の多視差画像を観察者が裸眼にて立体視可能とするものがある。かかる立体表示モニタは、両眼視差による立体視を可能とし、更に、観察者の視点移動に合わせて観察される映像も変化する運動視差による立体視も可能とする。
【0029】
図3は、9視差画像により立体表示を行う立体表示モニタの一例を説明するための図である。図3に示す立体表示モニタには、液晶パネル等の平面状の表示面200の前面に、光線制御子が配置される。例えば、図3に示す立体表示モニタには、光線制御子として、光学開口が垂直方向に延びる垂直レンチキュラーシート201が表示面200の前面に貼り付けられている。なお、図3に示す一例では、垂直レンチキュラーシート201の凸部が前面となるように貼り付けられているが、垂直レンチキュラーシート201の凸部が表示面200に対向するように貼り付けられる場合であっても良い。
【0030】
表示面200には、図3に示すように、縦横比が3:1であり、縦方向にサブ画素である赤(R)、緑(G)、青(B)の3つが配置された画素202がマトリクス状に配置される。図3に示す立体表示モニタは、9つの画像により構成される9視差画像を、所定フォーマット(例えば格子状)に配置した中間画像に変換したうえで、表示面200に出力する。すなわち、図3に示す立体表示モニタは、9視差画像にて同一位置にある9つの画素それぞれを、9列の画素202に割り振って出力させる。9列の画素202は、視点位置の異なる9つの画像を同時に表示する単位画素群203となる。
【0031】
表示面200において単位画素群203として同時に出力された9視差画像は、例えば、LED(Light Emitting Diode)バックライトにより平行光として放射され、更に、垂直レンチキュラーシート201により、多方向に放射される。9視差画像の各画素の光が多方向に放射されることにより、観察者の右目及び左目に入射する光は、観察者の位置(視点の位置)に連動して変化する。すなわち、観察者の見る角度により、右目に入射する視差画像と左目に入射する視差画像とは、視差角が異なる。これにより、観察者は、例えば、図3に示す9つの位置それぞれにおいて、撮影対象を立体的に視認できる。また、観察者は、例えば、図3に示す「5」の位置において、撮影対象に対して正対した状態で立体的に視認できるとともに、図3に示す「5」以外それぞれの位置において、撮影対象の向きを変化させた状態で立体的に視認できる。なお、図3に示す立体表示モニタは、あくまでも一例である。9視差画像を表示する立体表示モニタは、図3に示すように、「RRR・・・、GGG・・・、BBB・・・」の横ストライプ液晶である場合であっても良いし、「RGBRGB・・・」の縦ストライプ液晶である場合であっても良い。また、図3に示す立体表示モニタは、図3に示すように、レンチキュラーシートが垂直となる縦レンズ方式である場合であっても良いし、レンチキュラーシートが斜めとなる斜めレンズ方式である場合であっても良い。
【0032】
ここまで、第1の実施形態に係る画像処理システム1の構成例について簡単に説明した。なお、上述した画像処理システム1は、PACSが導入されている場合にその適用が限られるものではない。例えば、画像処理システム1は、医用画像が添付された電子カルテを管理する電子カルテシステムが導入されている場合にも、同様に適用される。この場合、画像保管装置120は、電子カルテを保管するデータベースである。また、例えば、画像処理システム1は、HIS(Hospital Information System)、RIS(Radiology Information System)が導入されている場合にも、同様に適用される。また、画像処理システム1は、上述した構成例に限られるものではない。各装置が有する機能やその分担は、運用の形態に応じて適宜変更されてよい。
【0033】
次に、第1の実施形態に係るワークステーションの構成例について図4を用いて説明する。図4は、第1の実施形態に係るワークステーションの構成例を説明するための図である。
【0034】
第1の実施形態に係るワークステーション130は、画像処理等に適した高性能なコンピュータであり、図4に示すように、入力部131と、表示部132と、通信部133と、記憶部134と、制御部135と、レンダリング処理部136とを有する。なお、以下では、ワークステーション130が画像処理等に適した高性能なコンピュータである場合を用いて説明するが、これに限定されるものではなく、任意の情報処理装置であって良い。例えば、任意のパーソナルコンピュータであっても良い。
【0035】
入力部131は、マウス、キーボード、トラックボール等であり、ワークステーション130に対する各種操作の入力を操作者から受け付ける。例えば、第1の実施形態に係る入力部131は、レンダリング処理の対象となるボリュームデータを画像保管装置120から取得するための情報の入力を受け付ける。例えば、入力部131は、患者ID、検査ID、装置ID、シリーズID等の入力を受け付ける。また、例えば、第1の実施形態に係る入力部131は、レンダリング処理に関する条件(以下、レンダリング条件)の入力を受け付ける。
【0036】
表示部132は、立体表示モニタとしての液晶パネル等であり、各種情報を表示する。例えば、第1の実施形態に係る表示部132は、操作者から各種操作を受け付けるためのGUI(Graphical User Interface)や、視差画像群等を表示する。通信部133は、NIC(Network Interface Card)等であり、他の装置との間で通信を行う。
【0037】
記憶部134は、ハードディスク、半導体メモリ素子等であり、各種情報を記憶する。例えば、第1の実施形態に係る記憶部134は、通信部133を介して画像保管装置120から取得したボリュームデータを記憶する。また、第1の実施形態に係る記憶部134は、レンダリング処理中のボリュームデータや、レンダリング処理により生成された視差画像群等を記憶する。
【0038】
制御部135は、CPU(Central Processing Unit)やMPU(Micro Processing Unit)等の電子回路、ASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等の集積回路であり、ワークステーション130の全体制御を行う。
【0039】
例えば、第1の実施形態に係る制御部135は、表示部132に対するGUIの表示や視差画像群の表示を制御する。また、例えば、制御部135は、画像保管装置120との間で通信部133を介して行われるボリュームデータや視差画像群等の送受信を制御する。また、例えば、制御部135は、レンダリング処理部136によるレンダリング処理を制御する。また、例えば、制御部135は、ボリュームデータの記憶部134からの読み込みや、視差画像群等の記憶部134への格納を制御する。
【0040】
レンダリング処理部136は、制御部135による制御の下、画像保管装置120から取得したボリュームデータに対して種々のレンダリング処理を行い、視差画像群を生成する。具体的には、第1の実施形態に係るレンダリング処理部136は、記憶部134からボリュームデータを読み込み、このボリュームデータに対して、まず前処理を行う。次に、レンダリング処理部136は、前処理後のボリュームデータに対してボリュームレンダリング処理を行い、視差画像群を生成する。続いて、レンダリング処理部136は、各種情報(目盛り、患者名、検査項目等)が描出された2次元画像を生成し、これを視差画像群それぞれに対して重畳することで、出力用の2次元画像を生成する。そして、レンダリング処理部136は、生成した視差画像群や出力用の2次元画像を記憶部134に格納する。なお、第1の実施形態において、レンダリング処理とは、ボリュームデータに対して行う画像処理全体のことであり、ボリュームレンダリング処理とは、レンダリング処理の内、3次元の情報を反映した2次元画像を生成する処理のことである。なお、レンダリング処理には、ボリュームレンダリング処理の他に、サーフェスレンダリング(surface rendering)処理がある。ボリュームレンダリング処理は、ボリュームデータから直接、3次元の情報を反映した2次元画像を生成する手法である。これに対し、サーフェスレンダリング処理は、ボリュームデータから対象となるデータを抽出してモデルを構築し、構築したモデルに基づいて、3次元の情報を反映した2次元画像を生成する手法である。第1の実施形態においては、ボリュームレンダリング処理の手法を用いる例を説明するが、実施形態はこれに限られるものではなく、サーフェスレンダリング処理の手法を用いてもよい。
【0041】
図5は、図4に示すレンダリング処理部の構成例を説明するための図である。図5に示すように、レンダリング処理部136は、前処理部1361と、3次元画像処理部1362と、2次元画像処理部1363とを有する。前処理部1361が、ボリュームデータに対する前処理を行い、3次元画像処理部1362が、前処理後のボリュームデータから視差画像群を生成し、2次元画像処理部1363が、視差画像群に各種情報が重畳された出力用の2次元画像を生成する。以下、各部を順に説明する。
【0042】
前処理部1361は、ボリュームデータに対してレンダリング処理を行う際に、種々の前処理を行う処理部であり、画像補正処理部1361aと、3次元物体フュージョン部1361eと、3次元物体表示領域設定部1361fとを有する。
【0043】
画像補正処理部1361aは、2種類のボリュームデータを1つのボリュームデータとして処理する際に画像補正処理を行う処理部であり、図5に示すように、歪み補正処理部1361b、体動補正処理部1361c及び画像間位置合わせ処理部1361dを有する。例えば、画像補正処理部1361aは、PET−CT装置により生成されたPET画像のボリュームデータとX線CT画像のボリュームデータとを1つのボリュームデータとして処理する際に画像補正処理を行う。或いは、画像補正処理部1361aは、MRI装置により生成されたT1強調画像のボリュームデータとT2強調画像のボリュームデータとを1つのボリュームデータとして処理する際に画像補正処理を行う。
【0044】
また、歪み補正処理部1361bは、個々のボリュームデータにおいて、医用画像診断装置110によるデータ収集時の収集条件に起因するデータの歪みを補正する。また、体動補正処理部1361cは、個々のボリュームデータを生成するために用いられたデータの収集時期における被検体の体動に起因する移動を補正する。また、画像間位置合わせ処理部1361dは、歪み補正処理部1361b及び体動補正処理部1361cによる補正処理が行われた2つのボリュームデータ間で、例えば、相互相関法等を用いた位置合わせ(Registration)を行う。
【0045】
3次元物体フュージョン部1361eは、画像間位置合わせ処理部1361dにより位置合わせが行われた複数のボリュームデータをフュージョンさせる。なお、画像補正処理部1361a及び3次元物体フュージョン部1361eの処理は、単一のボリュームデータに対してレンダリング処理を行う場合、省略される。
【0046】
3次元物体表示領域設定部1361fは、操作者により指定された表示対象臓器に対応する表示領域を設定する処理部であり、セグメンテーション処理部1361gを有する。セグメンテーション処理部1361gは、操作者により指定された心臓、肺、血管等の臓器を、例えば、ボリュームデータの画素値(ボクセル値)に基づく領域拡張法により抽出する処理部である。
【0047】
なお、セグメンテーション処理部1361gは、操作者により表示対象臓器が指定されなかった場合、セグメンテーション処理を行わない。また、セグメンテーション処理部1361gは、操作者により表示対象臓器が複数指定された場合、該当する複数の臓器を抽出する。また、セグメンテーション処理部1361gの処理は、レンダリング画像を参照した操作者の微調整要求により再度実行される場合もある。
【0048】
3次元画像処理部1362は、前処理部1361が処理を行った前処理後のボリュームデータに対してボリュームレンダリング処理を行う。ボリュームレンダリング処理を行う処理部として、3次元画像処理部1362は、投影方法設定部1362aと、3次元幾何変換処理部1362bと、3次元物体アピアランス処理部1362fと、3次元仮想空間レンダリング部1362kとを有する。
【0049】
投影方法設定部1362aは、視差画像群を生成するための投影方法を決定する。例えば、投影方法設定部1362aは、ボリュームレンダリング処理を平行投影法により実行するか、透視投影法により実行するかを決定する。
【0050】
3次元幾何変換処理部1362bは、ボリュームレンダリング処理が実行されるボリュームデータを3次元幾何学的に変換するための情報を決定する処理部であり、平行移動処理部1362c、回転処理部1362d及び拡大縮小処理部1362eを有する。平行移動処理部1362cは、ボリュームレンダリング処理を行う際の視点位置が平行移動された場合に、ボリュームデータを平行移動させる移動量を決定する処理部であり、回転処理部1362dは、ボリュームレンダリング処理を行う際の視点位置が回転移動された場合に、ボリュームデータを回転移動させる移動量を決定する処理部である。また、拡大縮小処理部1362eは、視差画像群の拡大や縮小が要求された場合に、ボリュームデータの拡大率や縮小率を決定する処理部である。
【0051】
3次元物体アピアランス処理部1362fは、3次元物体色彩処理部1362g、3次元物体不透明度処理部1362h、3次元物体材質処理部1362i及び3次元仮想空間光源処理部1362jを有する。3次元物体アピアランス処理部1362fは、これらの処理部により、例えば、操作者の要求に応じて、表示される視差画像群の表示状態を決定する処理を行う。
【0052】
3次元物体色彩処理部1362gは、ボリュームデータにてセグメンテーションされた各領域に対して着色される色彩を決定する処理部である。3次元物体不透明度処理部1362hは、ボリュームデータにてセグメンテーションされた各領域を構成する各ボクセルの不透過度(Opacity)を決定する処理部である。なお、ボリュームデータにおいて不透過度が「100%」とされた領域の後方の領域は、視差画像群において描出されないこととなる。また、ボリュームデータにおいて不透過度が「0%」とされた領域は、視差画像群において描出されないこととなる。
【0053】
3次元物体材質処理部1362iは、ボリュームデータにてセグメンテーションされた各領域の材質を決定することで、この領域が描出される際の質感を調整する処理部である。3次元仮想空間光源処理部1362jは、ボリュームデータに対してボリュームレンダリング処理を行う際に、3次元仮想空間に設置する仮想光源の位置や、仮想光源の種類を決定する処理部である。仮想光源の種類としては、無限遠から平行な光線を照射する光源や、視点から放射状の光線を照射する光源等が挙げられる。
【0054】
3次元仮想空間レンダリング部1362kは、ボリュームデータに対してボリュームレンダリング処理を行い、視差画像群を生成する。また、3次元仮想空間レンダリング部1362kは、ボリュームレンダリング処理を行う際、必要に応じて、投影方法設定部1362a、3次元幾何変換処理部1362b、3次元物体アピアランス処理部1362fにより決定された各種情報を用いる。
【0055】
ここで、3次元仮想空間レンダリング部1362kによるボリュームレンダリング処理は、レンダリング条件に従って行われることになる。例えば、レンダリング条件は、「平行投影法」又は「透視投影法」である。また、例えば、レンダリング条件は、「基準の視点位置及び視差角」である。また、例えば、レンダリング条件は、「視点位置の平行移動」、「視点位置の回転移動」、「視差画像群の拡大」、「視差画像群の縮小」である。また、例えば、レンダリング条件は、「着色される色彩」、「透過度」、「質感」、「仮想光源の位置」、「仮想光源の種類」である。このようなレンダリング条件は、入力部131を介して操作者から受け付ける場合や、初期設定される場合が考えられる。いずれの場合も、3次元仮想空間レンダリング部1362kは、制御部135からレンダリング条件を受け付け、このレンダリング条件に従って、ボリュームデータに対するボリュームレンダリング処理を行う。また、このとき、上述した投影方法設定部1362a、3次元幾何変換処理部1362b、3次元物体アピアランス処理部1362fが、このレンダリング条件に従って必要な各種情報を決定するので、3次元仮想空間レンダリング部1362kは、決定されたこれらの各種情報を用いて視差画像群を生成する。
【0056】
図6は、第1の実施形態に係るボリュームレンダリング処理の一例を説明するための図である。例えば、3次元仮想空間レンダリング部1362kが、図6の「9視差画像生成方式(1)」に示すように、レンダリング条件として、平行投影法を受け付け、更に、基準の視点位置(5)と視差角「1度」とを受け付けたとする。かかる場合、3次元仮想空間レンダリング部1362kは、視差角が「1度」おきとなるように、視点の位置を(1)〜(9)に平行移動して、平行投影法により視差角(視線方向間の角度)が1度ずつ異なる9つの視差画像を生成する。なお、平行投影法を行う場合、3次元仮想空間レンダリング部1362kは、視線方向に沿って無限遠から平行な光線を照射する光源を設定する。
【0057】
或いは、3次元仮想空間レンダリング部1362kが、図6の「9視差画像生成方式(2)」に示すように、レンダリング条件として、透視投影法を受け付け、更に、基準の視点位置(5)と視差角「1度」とを受け付けたとする。かかる場合、3次元仮想空間レンダリング部1362kは、ボリュームデータの中心(重心)を中心に視差角が「1度」おきとなるように、視点の位置を(1)〜(9)に回転移動して、透視投影法により視差角が1度ずつ異なる9つの視差画像を生成する。なお、透視投影法を行う場合、3次元仮想空間レンダリング部1362kは、視線方向を中心に光を3次元的に放射状に照射する点光源や面光源を各視点にて設定する。また、透視投影法を行う場合、レンダリング条件によっては、視点(1)〜(9)は、平行移動される場合であってもよい。
【0058】
なお、3次元仮想空間レンダリング部1362kは、表示されるボリュームレンダリング画像の縦方向に対しては、視線方向を中心に光を2次元的に放射状に照射し、表示されるボリュームレンダリング画像の横方向に対しては、視線方向に沿って無限遠から平行な光線を照射する光源を設定することで、平行投影法と透視投影法とを併用したボリュームレンダリング処理を行ってもよい。
【0059】
このようにして生成された9つの視差画像が、視差画像群である。第1の実施形態において、9つの視差画像は、例えば制御部135により所定フォーマット(例えば格子状)に配置した中間画像に変換され、立体表示モニタとしての表示部132に出力される。すると、ワークステーション130の操作者は、立体表示モニタに表示された立体視可能な医用画像を確認しながら、視差画像群生成のための操作を行うことができる。
【0060】
なお、図6の例では、レンダリング条件として、投影方法、基準の視点位置及び視差角を受け付けた場合を説明したが、レンダリング条件として、他の条件を受け付けた場合も同様に、3次元仮想空間レンダリング部1362kは、それぞれのレンダリング条件を反映しつつ、視差画像群を生成する。
【0061】
また、3次元仮想空間レンダリング部1362kは、ボリュームレンダリングだけでなく、断面再構成法(MPR:Multi Planer Reconstruction)を行ってボリュームデータからMPR画像を再構成する機能も有する。なお、3次元仮想空間レンダリング部1362kは、「Curved MPR」を行う機能や、「Intensity Projection」を行う機能も有する。
【0062】
続いて、3次元画像処理部1362がボリュームデータから生成した視差画像群は、アンダーレイ(Underlay)とされる。そして、各種情報(目盛り、患者名、検査項目等)が描出されたオーバーレイ(Overlay)がアンダーレイに対して重畳されることで、出力用の2次元画像とされる。2次元画像処理部1363は、オーバーレイ及びアンダーレイに対して画像処理を行うことで、出力用の2次元画像を生成する処理部であり、図5に示すように、2次元物体描画部1363a、2次元幾何変換処理部1363b及び輝度調整部1363cを有する。例えば、2次元画像処理部1363は、出力用の2次元画像の生成処理に要する負荷を軽減するために、9枚の視差画像(アンダーレイ)のそれぞれに対して1枚のオーバーレイを重畳することで、出力用の2次元画像を9枚、生成する。
【0063】
2次元物体描画部1363aは、オーバーレイに描出される各種情報を描画する処理部であり、2次元幾何変換処理部1363bは、オーバーレイに描出される各種情報の位置を平行移動処理又は回転移動処理したり、オーバーレイに描出される各種情報の拡大処理又は縮小処理したりする処理部である。
【0064】
また、輝度調整部1363cは、輝度変換処理を行う処理部であり、例えば、出力先の立体表示モニタの諧調や、ウィンドウ幅(WW:Window Width)、ウィンドウレベル(WL:Window Level)等の画像処理用のパラメータに応じて、オーバーレイ及びアンダーレイの輝度を調整する処理部である。
【0065】
このようにして生成された出力用の2次元画像は、例えば制御部135により一旦記憶部134に格納され、その後、通信部133を介して画像保管装置120に送信される。例えば、端末装置140が、画像保管装置120からこの出力用の2次元画像を取得し、所定フォーマット(例えば格子状)に配置した中間画像に変換した上で立体表示モニタに表示すると、観察者である医師や検査技師は、各種情報(目盛り、患者名、検査項目等)が描出された状態で、立体視可能な医用画像を閲覧することができる。
【0066】
ところで、実施形態に係るワークステーション130は、第1画像と、この第1画像と立体感の異なる第2画像とを生成し、立体表示モニタの表示面内で指定された指定領域及びこの指定領域を除く背景領域のいずれか一方に第1画像を、他方に第2画像をそれぞれ表示するように制御するものである。例えば、第1の実施形態に係るワークステーション130は、第1画像である立体視可能な画像(以下、立体視画像)と、第2画像である平面画像とを重畳し、立体表示モニタの表示面内で指定された指定領域及びこの指定領域を除く背景領域のいずれか一方に立体視画像を、他方に平面画像をそれぞれ表示するように制御する。立体視画像と平面画像とは、立体感の異なる画像である。
【0067】
上述したように、ワークステーション130が有する立体表示モニタは、所定の視差数の視差画像群を表示することで立体視画像を表示することができるが、複数の同一画像を視差画像群に置き換えて表示することで平面画像を表示することもできる。例えば、第1の実施形態に係る立体表示モニタは、図3に示すように、9視差画像にて同一位置にある9つの画素それぞれを9列の画素202に割り振って出力させることで、立体視画像を表示することができるが、9つの画素のうちの1つの画素を9列の画素202全てに割り振って出力させることで、平面画像を表示することもできる。
【0068】
なお、上述したように、アンダーレイとしての視差画像群それぞれに、オーバーレイとしての各種情報が重畳されることで、出力用の2次元画像群が生成されることになるが、以下において、「立体視画像」又は「視差画像群」と記載する場合には、各種情報が重畳される前の視差画像群を示す場合と、各種情報が重畳された後の出力用の2次元画像群を示す場合とが含まれる。同様に、「平面画像」又は「同一画像群」と記載する場合には、各種情報が重畳される前の同一画像群を示す場合と、各種情報が重畳された後の出力用の2次元画像群を示す場合とがある。すなわち、視差画像群そのものとしての「立体視画像」と同一画像群そのものとしての「平面画像」とが重畳された後に、各種情報が重畳されてもよいし、各種情報が重畳された後の「立体視画像」と「平面画像」とが重畳されてもよい。また、各種情報の重畳は運用の形態に応じて任意に変更することができるので、以下においては説明を省略する。
【0069】
図7及び図8は、第1の実施形態に係る表示例を説明するための図である。図7において、虫メガネaが示す円領域は、ワークステーション130の操作者によって指定された指定領域を示す。図7に示すように、ワークステーション130は、この指定領域に立体視画像を表示し、背景領域に平面画像を表示する。概念的には、図8に示すように、虫メガネaが示す円領域には、立体感のある立体視画像が表示され、円領域を除く背景領域には、平面画像化された対象物が表示される。
【0070】
このように、第1の実施形態に係るワークステーション130は、表示面内の全領域に立体視画像を表示するのではなく、一部の領域のみに立体視画像を表示する。立体視画像の欠点として、観察者に与えるストレスが強いといった点や、立体視画像全体の焦点を合わせることが難しいといった点などが挙げられるが、一部の領域のみに立体視画像を表示する手法によれば、ストレスを軽減するとともに、所望の領域に焦点を合わせることが可能になる。
【0071】
かかる表示は、第1の実施形態に係るワークステーション130において、制御部135、レンダリング処理部136、及び表示部132が協働することによって実現される。図9は、第1の実施形態に係る制御部135の構成例を説明するための図である。図9に示すように、第1の実施形態に係る制御部135は、立体視領域指定受付部135aと、立体視画像生成部135bと、平面画像生成部135cと、表示制御部135dとを有する。
【0072】
立体視領域指定受付部135aは、視点位置、及び、立体視画像を表示する指定領域(以下、立体視領域)の指定を、入力部131を介して操作者から受け付ける。具体的には、立体視領域指定受付部135aは、記憶部134からボリュームデータを読み込み、読み込んだボリュームデータに対してレンダリング処理部136によるボリュームレンダリング処理を行い、視点位置及び立体視領域の指定を受け付けるための2次元画像(以下、指定用画像)を生成する。次に、立体視領域指定受付部135aは、生成した指定用画像を表示部132に表示し、指定用画像上で、視点位置及び立体視領域の指定を受け付ける。そして、立体視領域指定受付部135aは、受け付けた視点位置及び立体視領域を、立体視画像生成部135b及び平面画像生成部135cに送る。
【0073】
例えば、立体視領域指定受付部135aは、図7に示す虫メガネaのツールを指定用画像上に表示する。また、この虫メガネaのツールは、入力部131であるマウスの操作によって、表示部132の表示面上で、拡大・縮小可能であり、移動可能である。このため、立体視領域指定受付部135aは、マウスによって操作された後の虫メガネaが示す円領域を、立体視領域として受け付ける。なお、立体視領域の指定は、虫メガネaのツールに限られない。通常の関心領域の指定と同様、円形ROI(Region Of Interest)やポリゴン(polygon)ROIのツールなどであってもよい。
【0074】
また、指定用画像に描出された対象物は、入力部131であるマウスの操作によって、表示部132の表示面内で回転可能である。また、視点位置は、例えば、表示面に対して垂直な方向である。このため、例えば、立体視領域指定受付部135aは、立体視領域の指定を受け付けた時に表示面に表示されている指定用画像と垂直な方向を、視点位置として受け付ける。
【0075】
立体視画像生成部135bは、立体視画像を生成する。具体的には、立体視画像生成部135bは、立体視領域指定受付部135aから受け付けた視点位置及び立体視領域と、その他のレンダリング条件とを用いて、記憶部134から読み込んだボリュームデータに対してレンダリング処理部136によるボリュームレンダリング処理を行い、視差画像群を生成する。そして、立体視画像生成部135bは、生成した視差画像群を表示制御部135dに送る。なお、その他のレンダリング条件としては、予めプリセットされたものを用いればよい。
【0076】
図10〜12は、第1の実施形態に係る立体視画像生成処理を説明するための図である。第1の実施形態において、立体視画像の生成は、図10に示すように、ボリュームデータのうち、ボリュームデータ全体を貫通する円筒領域部分のボリュームデータを用いて行われる。また、図11は、図10に示すボリュームデータを頭頂方向から観察した図である。立体視画像の生成は、図11に示すように、指定された視点位置を「視点位置5」とし、この「視点位置5」を中心とする「視点位置1」から「視点位置9」までをレンダリング条件として行われる。例えば、立体視画像生成部135bは、図12に示すように、円筒領域部分のボリュームデータを用いて、背景領域に「0」の値が埋め込まれた9視差画像を生成する。なお、図12において、黒色部分が「0」の値であることを示す。
【0077】
平面画像生成部135cは、平面画像を生成する。この平面画像には、立体視画像に描出される対象物と同一の対象物が描出される。具体的には、平面画像生成部135cは、立体視領域指定受付部135aから受け付けた視点位置及び立体視領域と、その他のレンダリング条件とを用いて、記憶部134から読み込んだボリュームデータに対してレンダリング処理部136によるボリュームレンダリング処理を行い、視差画像群に置き換えて用いられる同一画像群を生成する。そして、平面画像生成部135cは、生成した同一画像群を表示制御部135dに送る。
【0078】
図13は、第1の実施形態に係る平面画像生成処理を説明するための図である。第1の実施形態において、平面画像の生成は、円筒領域部分以外のボリュームデータを用いて行われる。また、平面画像の生成は、指定された視点位置である「視点位置5」をレンダリング条件として行われる。例えば、平面画像生成部135cは、図13に示すように、円筒領域部分以外のボリュームデータを用いて、立体視領域に「0」の値が埋め込まれた同一画像群を生成する。なお、図13において、黒色部分が「0」の値であることを示す。
【0079】
なお、例えば、平面画像生成部135cは、改めてボリュームレンダリング処理を行うことなく、立体視画像生成部135bによって生成された視差画像群から、ひとつの視差画像(例えば、「視点位置5」に対応する視差画像)を抽出し、この視差画像を複製することで同一画像群を生成してもよい。
【0080】
表示制御部135dは、立体視画像と平面画像とを重畳し、立体視領域及び背景領域のそれぞれに、立体視画像及び平面画像のそれぞれを表示するように制御する。具体的には、表示制御部135dは、立体視画像生成部135bから受け付けた立体視画像を、表示部132に表示するための中間画像に変換し、変換後の中間画像をレイヤ1の画像とする。また、表示制御部135dは、平面画像生成部135cから受け付けた平面画像を、表示部132に表示するための中間画像に変換し、変換後の中間画像をレイヤ2の画像とする。そして、表示制御部135dは、レイヤ1の画像とレイヤ2の画像とを重畳して表示部132に表示する。すると、立体視領域には立体視画像が表示され、背景領域には平面画像が表示される。
【0081】
図14は、第1の実施形態に係る表示制御処理を説明するための図である。第1の実施形態において、立体視画像を表示部132に表示するための中間画像は、図14の(A)に示すように、図12に示した視差画像群、及び、図13に示した同一画像群が、格子状に配置されたものである。表示制御部135dは、図14の(B)に示すように、レイヤ1とレイヤ2とを重畳し、表示部132に表示する。
【0082】
なお、上述した立体視画像生成処理、平面画像生成処理、及び表示制御処理は、一例に過ぎない。例えば、立体視画像生成部135b及び平面画像生成部135cは、ボリュームデータ全体を用いて画像生成処理を行い、表示制御部135dが、立体視画像については立体視領域のみを表示するためのマスク処理、平面画像については背景領域のみを表示するためのマスク処理を行い、その後に両画像を重畳してもよい。このように、ボリュームデータ全体を用いて立体視画像や平面画像が生成されている場合には、例えば、表示制御部135dは、その後操作者による操作を受け付けて、表示面全域を立体視画像で表示する表示に切り替える、又は、表示面全域を平面画像で表示する表示に切り替えることが可能になる。
【0083】
図15は、第1の実施形態に係る処理手順を示すフローチャートである。図15に示すように、まず、立体視領域指定受付部135aが、記憶部134からボリュームデータを読み込み(ステップS101)、読み込んだボリュームデータから指定用画像を生成し、生成した指定用画像を表示部132に表示する(ステップS102)。続いて、立体視領域指定受付部135aは、指定用画像上で、視点位置及び立体視領域の指定を受け付ける(ステップS103)。
【0084】
すると、立体視画像生成部135bは、立体視領域指定受付部135aにて受け付けられた視点位置及び立体視領域等を用いて、立体視画像を生成する(ステップS104)。また、平面画像生成部135cは、立体視領域指定受付部135aにて受け付けられた視点位置及び立体視領域等を用いて、平面画像を生成する(ステップS105)。そして、表示制御部135dが、立体視領域に立体視画像を表示し、背景領域に平面画像を表示するように制御する(ステップS106)。
【0085】
なお、図15に示す処理手順は一例に過ぎない。例えば、立体視画像の生成処理と平面画像の生成処理とは、順序が逆であってもよいし、処理が並行して行われてもよい。
【0086】
ところで、第1の実施形態に係るワークステーション130は、立体視画像及び平面画像の表示について、以下の追加機能を有する。
【0087】
(追加機能1:視点位置、立体視領域の変更)
まず、第1の実施形態に係るワークステーション130は、表示部132の表示面上で視点位置や立体視領域の変更指示を受け付け、受け付けた変更指示に従って、表示中の画像を更新する。具体的には、立体視領域指定受付部135aは、表示制御部135dによって立体視画像及び平面画像が表示されている間、その表示面上で視点位置や立体視領域の変更指示を受け付ける。
【0088】
例えば、虫メガネaのツールは、入力部131であるマウスの操作によって、表示部132の表示面上で、拡大・縮小可能であり、移動可能である。また、立体視画像及び平面画像に描出された対象物は、マウスの操作によって、表示面内で回転可能である。そこで、例えば、立体視領域指定受付部135aは、マウスによって操作された後の虫メガネaが示す円領域を、変更後の立体視領域として受け付ける。また、立体視領域指定受付部135aは、変更後の立体視領域の指定を受け付けた時に表示面に表示されている画像と垂直な方向を、変更後の視点位置として受け付ける。
【0089】
すると、立体視画像生成部135b及び平面画像生成部135cは、変更後の視点位置及び立体視領域と、その他のレンダリング条件とを用いて、再び、記憶部134から読み込んだボリュームデータに対してレンダリング処理部136によるボリュームレンダリング処理を行い、新たな立体視画像や平面画像を生成する。そして、表示制御部135dは、新たに生成された立体視画像と平面画像とを重畳し、変更後の立体視領域及び変更後の背景領域のそれぞれに、新たに生成された立体視画像及び平面画像のそれぞれを表示するように制御する。
【0090】
なお、上述したように、ボリュームデータ全体を用いて立体視画像や平面画像が生成されている場合であって、かつ、視点位置に変更が生じなかった場合には、例えば、表示制御部135dは、新たに立体視画像や平面画像を生成し直すことなく、マスク処理の位置を変更するのみで、表示中の画面を更新することができる。
【0091】
(追加機能2:立体感の変更)
次に、第1の実施形態に係るワークステーション130は、立体視領域内の立体視画像について、その立体感の変更指示を受け付け、受け付けた変更指示に従って、表示中の画像を更新する。具体的には、立体視領域指定受付部135aは、表示制御部135dによって立体視画像及び平面画像が表示されている間、例えば、その表示面上に表示されたツールバーがマウスによって操作されることで、立体感の変更指示を受け付ける。
【0092】
ここで、立体視画像の立体感は、視差角によって決定される。例えば、視差角「0.5度」が指定された場合と視差角「1度」が指定された場合とを比較すると、視差角「1度」が指定された場合の方が、立体感は大きくなる。例えば、立体視画像生成部135bが、初期値として設定された視差角「0.5度」を用いて立体視画像を生成していたとする。その後、立体感を大きくする方向の変更指示を受け付け、その視差角として「1度」が指定されたとする。すると、立体視画像生成部135bは、変更後の視差角「1度」を新たなレンダリング条件として、再び、記憶部134から読み込んだボリュームデータに対してレンダリング処理部136によるボリュームレンダリング処理を行い、新たな立体視画像を生成する。そして、表示制御部135dは、レイヤ1の画像として表示すべき立体視画像を、新たに生成された立体視画像に置き換える。
【0093】
(追加機能3:拡縮率の変更)
続いて、第1の実施形態に係るワークステーション130は、立体視領域内の立体視画像について、その拡大率又は縮小率(以下、拡縮率)の変更指示を受け付け、受け付けた変更指示に従って、表示中の画像を更新する。具体的には、立体視領域指定受付部135aは、表示制御部135dによって立体視画像及び平面画像が表示されている間、例えば、その表示面上に表示されたツールバーがマウスによって操作されることで、拡縮率の変更指示を受け付ける。
【0094】
例えば、立体視画像生成部135bが、初期値として設定された拡縮率「100%」を用いて立体視画像を生成していたとする。その後、拡大する方向の変更指示を受け付け、その拡縮率として「115%」が指定されたとする。すると、立体視画像生成部135bは、変更後の拡縮率「115%」を新たなレンダリング条件として、再び、記憶部134から読み込んだボリュームデータに対してレンダリング処理部136によるボリュームレンダリング処理を行い、新たな立体視画像を生成する。そして、表示制御部135dは、レイヤ1の画像として表示すべき立体視画像を、新たに生成された立体視画像に置き換える。
【0095】
(第1の実施形態に係る変形例)
なお、これまで第1の実施形態に係る表示例や追加機能について説明してきたが、実施形態はこれに限られるものではない。
【0096】
上述の表示例では、指定領域に「立体視画像」を表示し、背景領域に「平面画像」を表示する例を説明した。また、この「平面画像」は、立体視画像を表示するための視差画像群のうちのひとつの視差画像を、視差画像群に置き換える同一画像として用いたものであった。言い換えると、「立体視画像」は、ボリュームデータに対してボリュームレンダリング処理を行うことで生成された画像であって、立体表示モニタに3次元表示されるものである。一方、「平面画像」は、同じくボリュームデータに対してボリュームレンダリング処理を行うことで生成された画像であるが、立体表示モニタに2次元表示されるものである。すなわち、上述の表示例は、指定領域に、ボリュームレンダリング画像を3次元表示し、背景領域に、ボリュームレンダリング画像を2次元表示するものであった。
【0097】
しかしながら、実施形態はこれに限られるものではなく、例えば、指定領域に、ボリュームレンダリング画像を2次元表示し、背景領域に、ボリュームレンダリング画像を3次元表示するものであってもよい。また、2次元表示される「平面画像」は、「ボリュームレンダリング画像」に限られず、例えば、「サーフェスレンダリング画像」や、「MPR画像」や「MIP(Maximum Intensity Projection)画像」、「MinIP(Minimum Intensity Projection)画像」などであってもよい。なお、MIP画像は、最大値投影画像であり、MinIP画像は、最小値投影画像である。この場合、平面画像に描出される対象物は、立体視画像に描出される対象物と必ずしも同一ではないが、対応することになる。すなわち、例えば、立体視画像に被検体の脳血管が描出されている場合、平面画像に描出される対象物も、同じ被検体の同じ脳血管となるが、同一のレンダリング処理が施された画像が2次元表示されたものではなく、異なるレンダリング処理が施された画像である。
【0098】
また、「立体視画像」は、例えば、立体視可能な図形により表現されたアイコンのようにデフォルメされた画像(以下、アイコン立体視画像)であってもよい。図16は、第1の実施形態に係る変形例を説明するための図である。例えば、図16の(A)は、背景画像に「ボリュームレンダリング画像」を2次元表示するとともに、指定領域に「アイコン立体視画像」を3次元表示し、この「アイコン立体視画像」の表面には「平面画像」として「ボリュームレンダリング画像」が貼り付けられている。
【0099】
また、例えば、図16の(B)は、背景画像に「ボリュームレンダリング画像」を2次元表示するとともに、指定領域に「アイコン立体視画像」を3次元表示し、この「アイコン立体視画像」の表面には「MPR画像」が貼り付けられている。また、例えば、図16の(C)は、背景画像に「MPR画像」を2次元表示するとともに、指定領域に「アイコン立体視画像」を3次元表示し、この「アイコン立体視画像」の表面には「MPR画像」が貼り付けられている。
【0100】
なお、指定領域に「アイコン立体視画像」を表示する手法を説明すると、例えば、記憶部134は、医用画像データとしてのボリュームデータとは別に、アイコン用のボリュームデータとして、様々な大きさの立方体や直方体、円柱のボリュームデータを記憶する。例えば、立体視画像生成部135bは、記憶部134から読み込んだ医用画像データとしてのボリュームデータから、「アイコン立体視画像」の表面に貼り付けるための視差画像群を生成するとともに、記憶部134から読み込んだアイコン用のボリュームデータから、「アイコン立体視画像」の本体を表示するための視差画像群を生成する。そして、立体視画像生成部135bは、「アイコン立体視画像」の本体を表示するための視差画像群それぞれに、「アイコン立体視画像」の表面に貼り付けるための視差画像群それぞれを重畳することで、「アイコン立体視画像」を表示するための視差画像群を生成する。なお、記憶部134は、様々な大きさに対応する「アイコン立体視画像」の本体を表示するための視差画像群を予め記憶していてもよい。
【0101】
上述したように、立体視画像及び平面画像の組合せは、運用の形態に応じて任意に変更することが可能であるが、その一部は、例えば以下の表1に示す通りとなる。なお、表1において、括弧内は、アイコン立体視画像に貼り付けられる画像を示す。
【表1】

【0102】
また、表1における「ボリュームレンダリング画像」に替えて「サーフェスレンダリング画像」を用いることもでき、また、「MIP画像」に替えて「MinIP画像」を用いることもできる。また、上述において、立体視画像は、主に、表示面から手前方向への飛び出し感として視認される例を説明したが、実施形態はこれに限られるものではなく、表示面から奥行き方向への奥行き感として視認される場合や、飛び出し感及び奥行き感の双方が視認される場合にも同様に適用することができる。例えば、立体視画像に描出される対象物が肺野である場合、肺野をその中心から前後に分け、前側部分を飛び出し感として視認させ、後側部分を奥行き感として視認させるように、立体視画像や平面画像を生成し、表示してもよい。このようにすることで、この立体視画像や平面画像を観察する観察者は、容易に読影することが可能になる。なお、飛び出し感や奥行き感は、例えばレンダリング条件の一つとして予め設定されればよい。
【0103】
なお、上述の変形例においても、追加機能は適用可能である。すなわち、視点位置、指定領域の変更、立体感の変更、拡縮率の変更は、上述の変形例においても同様に適用可能である。
【0104】
(第1の実施形態の効果)
上述したように、第1の実施形態によれば、表示面内の指定領域及び背景領域のそれぞれに、立体視画像及び平面画像のそれぞれを表示する手法であるので、表示面内の全領域に立体視画像を表示する手法に比較して、ストレスを軽減するとともに、所望の領域に焦点を合わせることが可能になり、医用画像を適切に表示することができる。
【0105】
(第2の実施形態)
次に、第2の実施形態を説明する。第1の実施形態の変形例として説明したように、実施形態には、指定領域に「立体視画像」を3次元表示し、背景領域に「MPR画像」を2次元表示する例や、指定領域に「MPR画像」を2次元表示し、背景領域に「立体視画像」を3次元表示する例、あるいは、指定領域に「MPR画像」が貼り付けられた「アイコン立体視画像」を3次元表示し、背景領域に「ボリュームレンダリング画像」を2次元表示する例などが含まれる。ここで、第2の実施形態に係るワークステーション130は、指定領域や背景領域に2次元表示する「MPR画像」の断面位置の指定を受け付け、受け付けた断面位置の指定に従って、表示中の画像を更新する。なお、第2の実施形態においても、立体視画像は、主に、表示面から手前方向への飛び出し感として視認される例を説明するが、実施形態はこれに限られるものではなく、表示面から奥行き方向への奥行き感として視認される場合や、飛び出し感及び奥行き感の双方が視認される場合にも、同様に適用することができる。
【0106】
図17〜図19は、第2の実施形態に係る表示例を説明するための図である。図17に示すように、第2の実施形態に係るワークステーション130は、指定領域に立体視画像を3次元表示し、背景領域にMPR画像を2次元表示する。あるいは、図18に示すように、第2の実施形態に係るワークステーション130は、指定領域にMPR画像を2次元表示し、背景領域に立体視画像を3次元表示する。あるいは、図19の(A)に示すように、第2の実施形態に係るワークステーション130は、指定領域にアイコン立体視画像を3次元表示し、背景領域にボリュームレンダリング画像を2次元表示する。なお、このアイコン立体視画像の表面には、MPR画像が貼り付けられている。
【0107】
図20は、第2の実施形態に係る制御部135の構成例を説明するための図である。図20に示すように、第2の実施形態に係る制御部135は、断面位置指定受付部135eを更に有する。断面位置指定受付部135eは、断面位置の指定を、入力部131を介して操作者から受け付け、受け付けた断面位置の指定を、立体視画像生成部135b又は平面画像生成部135cに送る。例えば、断面位置指定受付部135eは、表示制御部135dによって立体視画像及び平面画像が表示されている間、例えば、その表示面上に表示されたツールバーがマウスによって操作されることで、断面位置の指定を受け付ける。
【0108】
すると、立体視画像生成部135b又は平面画像生成部135cは、指定後の断面位置を新たなレンダリング条件として、再び、記憶部134から読み込んだボリュームデータに対してレンダリング処理部136によるボリュームレンダリング処理を行い、新たなMPR画像を生成する。そして、表示制御部135dは、レイヤ1又はレイヤ2の画像として表示すべきMPR画像を、新たに生成されたMPR画像に置き換える。例えば、図19の(B)は、アイコン立体視画像の表面に貼り付けられたMPR画像が、新たに生成されたMPR画像に置き換えられた例である。
【0109】
(第2の実施形態の効果)
上述したように、第2の実施形態によれば、指定領域や背景領域に2次元表示するMPR画像の断面位置の指定を受け付け、受け付けた断面位置の指定に従って、表示中の画像を更新する手法であるので、操作者は、断面位置を変更しながら閲覧することが可能になる。
【0110】
(第3の実施形態)
続いて、第3の実施形態を説明する。第3の実施形態に係るワークステーション130は、操作者から指定領域の指定を受け付けるのではなく、医用画像データの解析結果に基づいて指定領域を特定する。
【0111】
第3の実施形態に係るワークステーション130は、制御部135に替えて、制御部235を備える。図21は、第3の実施形態に係る制御部235の構成例を説明するための図である。図21に示すように、第3の実施形態に係る制御部235は、立体視領域指定受付部135に替えて、解析部235a−1及び指定領域特定部235a−2を備える。なお、立体視画像生成部235b、平面画像生成部235c、及び表示制御部235dは、それぞれ、立体視画像生成部135b、平面画像生成部135c、及び表示制御部135dに対応する機能を有するので、説明を割愛する。
【0112】
解析部235a−1は、ボリュームデータなどの医用画像データを解析し、解析結果を出力する。例えば、解析部235a−1は、記憶部134からボリュームデータを読み込み、読み込んだボリュームデータに対して、予め設定された解析アルゴリズムに従った解析を行い、解析結果を出力する。そして、解析部235a−1は、出力した解析結果を、指定領域特定部235a−2に送る。
【0113】
ここで、解析部235a−1による解析は、例えば、既存の自動診断技術(CAD:Computer Aided Diagnosis)によって実現することが可能である。例えば、解析部235a−1は、対象物に含まれる各領域について、予め設定された複数の判断項目による判断を行い、複数の判断項目のうち例えば1項目でも閾値を超過する場合には、該当する領域の位置を示す解析結果を出力する。例えば、判断項目は、腫瘍と疑われる領域の大きさ、腫瘍と疑われる領域の形状、腫瘍と疑われる領域の場所、血管のスピキュラー度、気管支のスピキュラー度、造影の有無等である。
【0114】
指定領域特定部235a−2は、解析部235a−1による解析結果に基づいて、指定領域を特定する。例えば、指定領域特定部235a−2は、解析部235a−1から解析結果として「腫瘍と疑われる領域」の位置を受け付けると、この「腫瘍と疑われる領域」を含む所定範囲の領域を、指定領域として特定する。そして、指定領域特定部235a−2は、特定した指定領域を、立体視画像生成部235b及び平面画像生成部235cに送る。なお、第3の実施形態において、視点位置は、予め設定された初期値を用いてもよいし、あるいは、第1又は第2の実施形態と同様、指定を受け付けてもよい。
【0115】
図22は、第3の実施形態に係る処理手順を示すフローチャートである。図22に示すように、まず、解析部235a−1が、記憶部134から読み込んだボリュームデータに対して、予め設定された解析アルゴリズムに従った解析を行い、解析結果として、異常が疑われる領域の位置を出力する(ステップS201)。
【0116】
続いて、指定領域特定部235a−2は、解析部235a−1から受け付けた位置を含む所定範囲の領域を、指定領域として特定する(ステップS202)。
【0117】
その後は、第1の実施形態又は第2の実施形態と同様、立体視画像生成部235bは、立体視画像を生成し(ステップS203)、平面画像生成部235cは、平面画像を生成し(ステップS204)、表示制御部235dは、例えば、指定領域に立体視画像を3次元表示し、背景領域に平面画像を2次元表示するように制御する(ステップS205)。なお、第3の実施形態においても、指定領域に平面画像を2次元表示し、背景画像に立体視画像を3次元表示することも可能であり、また、立体視画像及び平面画像の組合せは、運用の形態に応じて任意に変更することが可能である。
【0118】
(第3の実施形態に係る変形例1)
なお、第3の実施形態として、解析部235a−1による解析が、既存の自動診断技術によって実現される例を説明したが、実施形態はこれに限られるものではない。
【0119】
例えば、解析部235a−1による解析は、既存のCBP(Cerebral Blood Perfusion)技術によって実現することも可能である。例えば、解析部235a−1は、造影剤を投与した連続高速撮影によって収集された医用画像データを解析し、解析結果として単位時間あたりの血液量(以下、MAP値)を出力する。指定領域特定部235a−2は、解析部235a−1からMAP値を受け付けると、このMAP値が所定閾値を超える領域を、指定領域として特定する。そして、指定領域特定部235a−2は、特定した指定領域を、立体視画像生成部235b及び平面画像生成部235cに送る。
【0120】
すると、例えば、立体視画像生成部235bは、まず通常のMAP画像を生成し、生成したMAP画像のうち指定領域のみが立体視可能となるように、視差画像群を生成する。どのような手法を用いて生成してもよいが、例えば、立体視画像生成部135bは、上述した「アイコン立体視画像」の生成と同様の手法を用いればよい。
【0121】
すなわち、例えば、立体視画像生成部235bは、通常のMAP画像から、指定領域の円に対応する円柱の表面に表示するための視差画像群を生成するとともに、アイコン用のボリュームデータから、円柱の本体を表示するための視差画像群を生成する。そして、立体視画像生成部235bは、円柱の本体を表示するための視差画像群それぞれに、円柱の表面に表示するための視差画像群それぞれを重畳する。一方、平面画像生成部235cは、通常のMAP画像を平面画像として表示するための同一画像群を生成する。
【0122】
図23は、第3の実施形態の変形例に係る表示例を説明するための図である。図23の(A)は、立体視画像を含まないMAP画像であり、図23の(B)は、MAP値が所定閾値を超えた領域が立体視可能な円柱として表示されているMAP画像である。なお、MAP値が所定閾値を超えた領域は、通常、病変部である。第3の実施形態によれば、図23の(B)に示すように、この病変部が立体視可能に表示されるので、病変部の見逃しを減らすことが可能になる。
【0123】
(第3の実施形態に係る変形例2)
次に、第1の実施形態や第2の実施形態において、指定領域や背景領域に「MPR画像」を表示する手法を説明した。また、第3の実施形態において、操作者から立体視領域の指定を受け付けるのではなく、医用画像データの解析結果に基づいて立体視領域を特定する手法を説明した。ここで、変形例2では、医用画像データの解析結果に基づいて、指定領域や背景領域に表示する「MPR画像」の断面位置を特定する手法を説明する。
【0124】
すなわち、上述したように、解析部235a−1による解析が、例えば既存の自動診断技術によって実現された場合、解析部235a−1は、解析結果として、異常が疑われる領域の位置を出力することができる。そこで、指定領域特定部235a−2は、上述したように、この位置を含む所定範囲の領域を指定領域として特定するが、この他に、この位置に基づいて「MPR画像」の断面位置を特定する。例えば、指定領域特定部235a−2は、異常が疑われる領域について、その重心を算出し、算出した重心の位置を「MPR画像」の断面位置として特定する。そして、指定領域特定部235a−2は、この断面位置の情報を、立体視画像生成部235b又は平面画像生成部235cに送り、立体視画像生成部235b又は平面画像生成部235cは、特定された断面位置をレンダリング条件として、MPR画像を生成する。
【0125】
(第3の実施形態の効果)
上述したように、第3の実施形態によれば、既存の自動診断技術や既存のCBP技術による解析結果に基づいて、自動で指定領域を特定することができるので、解析結果をより適切に表示することが可能になる。
【0126】
また、例えば、X線CT装置を用いた肺がん検診が導入された場合には、読影の対象となる画像の量は大幅に増加すると考えられる。また、自動診断技術は、乳がんや大腸がんなどに既に用いられている。この点、第3の実施形態によれば、読影を効率的にサポートすることが可能になる。
【0127】
(第4の実施形態)
続いて、第4の実施形態を説明する。第4の実施形態に係るワークステーション130は、第3の実施形態と同様、医用画像データの解析結果に基づいて指定領域を特定することを前提とするが、更に、この解析結果に基づいて立体視画像の立体感を特定する。
【0128】
例えば、解析部235a−1による解析が既存の自動診断技術によって実現された場合、指定領域特定部235a−2は、解析結果として、閾値を超えた判断項目の数を受け付け、この判断項目の数に応じて立体感を特定する。例えば、予め設定された判断項目が10項目であった場合、指定領域特定部235a−2は、最大立体感の1/10の立体感を1単位の立体感とし、閾値を超えた判断項目の数が『2』であれば、立体感が『2』であると特定する。そして、指定領域特定部235a−2は、立体感『2』を立体視画像生成部235bに送る。
【0129】
すると、立体視画像生成部235bは、立体感『2』に応じた視差角をレンダリング条件として、記憶部134から読み込んだボリュームデータに対してレンダリング処理部136によるボリュームレンダリング処理を行い、視差画像群を生成する。そして、表示制御部235dは、この視差画像群を3次元表示する。
【0130】
また、例えば、解析部235a−1による解析が既存のCBP技術によって実現された場合、指定領域特定部235a−2は、解析結果としてMAP値を受け付け、このMAP値に応じて立体感を特定する。そして、指定領域特定部235a−2は、特定した立体感を立体視画像生成部235bに送る。すると、立体視画像生成部235bは、立体感に応じた視差角をレンダリング条件として、記憶部134から読み込んだボリュームデータに対してレンダリング処理部136によるボリュームレンダリング処理を行い、視差画像群を生成する。そして、表示制御部235dは、この視差画像群を3次元表示する。
【0131】
(アイコン立体視画像の立体感)
ところで、解析結果に基づく立体感の特定は、立体視画像として「アイコン立体視画像」を用いると更に有効である。図24は、第4の実施形態に係るアイコン立体視画像を説明するための図である。図24の(A1)及び(A2)と(B1)及び(B2)とを比較すると明らかであるように、立体視画像として「アイコン立体視画像」を用いた場合、その立体感はアイコンの高さに相当するので、観察者は、その立体感の違いを容易に把握することが可能である。なお、図24の(A2)及び(B2)は、図24の(A1)及び(B1)のアイコンを横から観察した図である。
【0132】
解析部235a−1による解析が既存の自動診断技術によって実現された場合、上述したように、指定領域特定部235a−2は、解析結果として、閾値を超えた判断項目の数を受け付け、この判断項目の数に応じて立体感を特定する。例えば、指定領域特定部235a−2は、閾値を超えた判断項目の数が『2』であれば、立体感が『2』であると特定する。そして、指定領域特定部235a−2は、立体感『2』を立体視画像生成部235bに送る。
【0133】
すると、立体視画像生成部235bは、アイコン用のボリュームデータの中から、立体感『2』に対応するアイコン用のボリュームデータを選択し、選択したこのボリュームデータを用いて、「アイコン立体視画像」を表示するための視差画像群を生成する。なお、解析部235a−1による解析が既存のCBP技術によって実現された場合も同様に実現することができる。
【0134】
なお、このように立体視画像として「アイコン立体視画像」を用いる場合には、更に、解析結果を「アイコン立体視画像」の色に反映してもよい。例えば、指定領域特定部235a−2は、閾値を超えた判断項目の数から異常が疑われる度合いが『低レベル』であると判定し、その旨を立体視画像生成部235bに通知する。すると、立体視画像生成部235bは、立方体や直方体、円柱の周囲の色である「アイコン立体視画像」の色に、『低レベル』に対応する色(例えば、青色)を着色して、この「アイコン立体視画像」を表示する。なお、例えば、『中レベル』ならば黄色、『高レベル』ならば赤色といった着色を行えばよい。
【0135】
なお、判断項目の数やMAP値に限らず、解析部235a−1による解析結果として、例えば「腫瘍の悪性度」が出力される場合には、指定領域特定部235a−2は、この悪性度に応じた立体感を特定すればよい。
【0136】
(第4の実施形態に係る変形例)
ところで、解析結果に基づいて立体視画像の立体感を特定する手法の他に、例えば、指定領域や背景領域に2次元表示する「MPR画像」の断面位置との関係で、立体視画像の立体感を特定してもよい。
【0137】
図25は、第4の実施形態に係る変形例の表示例を説明するための図である。図25に示すように、例えば、背景画像に「ボリュームレンダリング画像」が2次元表示され、指定領域に「アイコン立体視画像」が3次元表示され、この「アイコン立体視画像」の表面に「MPR画像」が貼り付けられている場合、立体視画像生成部235bは、「MPR画像」の断面位置に応じて、「アイコン立体視画像」の高さを変更する。
【0138】
すなわち、指定領域特定部235a−2は、「MPR画像」として表示する断面位置について、3次元空間上の座標(奥行き方向の座標)を特定する。そして、立体視画像生成部235bは、アイコン用のボリュームデータの中から、奥行き方向の座標に対応するアイコン用のボリュームデータを選択し、選択したこのボリュームデータを用いて、「アイコン立体視画像」を3次元表示するための視差画像群を生成する。
【0139】
例えば、図25の(A)に示す「アイコン立体視画像」の高さと、(B)に示す「アイコン立体視画像」の高さとを比較するとわかるように、(B)に示す「アイコン立体視画像」の方が、(A)に示す「アイコン立体視画像」よりも高さが高い。これは、(A)に示す「アイコン立体視画像」に貼り付けられている「MPR画像」の断面位置よりも、(B)に示す「アイコン立体視画像」に貼り付けられている「MPR画像」の断面位置の方が、前面寄りであることを示す。
【0140】
なお、上述したように、第4の実施形態において、立体感は、解析結果に基づいて特定される場合と、「MPR画像」の断面位置との関係で特定される場合とがあるが、例えば、ワークステーション130は、その両方の機能を切り替え可能に備えることができる。
【0141】
(第4の実施形態の効果)
上述したように、第4の実施形態によれば、既存の自動診断技術や既存のCBP技術による解析結果に基づいて、立体視画像の立体感も調整することができるので、解析結果をより適切に表示することが可能になる。
【0142】
(その他の実施形態)
その他の実施形態をいくつか説明する。
【0143】
(4Dデータの表示)
上述の実施形態において、表示面内の指定領域及び背景領域のそれぞれに、立体視画像及び平面画像のそれぞれを表示する手法を説明した。ところで、立体視画像及び平面画像の一方又は双方に4Dデータを用いてもよい。すなわち、立体視画像や平面画像を、時系列に連続再生してもよい。
【0144】
また、この場合、時間遷移に伴う移動を追跡し、追跡結果に連動して指定領域を移動させてもよい。例えば、呼吸の動き等によって腫瘍の位置が移動する場合に有効である。例えば、指定領域特定部235a−2は、解析結果に基づいて最初の指定領域を特定した後、この指定領域に含まれる画像(例えば、腫瘍)について、時間遷移に伴う移動を追跡し、追跡結果と連動して指定領域を変更し、表示制御部235dに通知する。すると、表示制御部235dは、例えばマスク処理の位置を変更することで、指定領域を移動させる。
【0145】
あるいは、指定領域を移動させずに背景画像を変化させてもよい。この場合、例えば、指定領域特定部235a−2は、追跡結果を、背景画像を生成する立体視画像生成部235b又は平面画像生成部235cに通知する。すると、立体視画像生成部235b又は平面画像生成部235cは、この追跡結果に応じて位置を移動させた立体視画像や平面画像を生成する。
【0146】
(診断レポート)
また、上述の実施形態にて表示された画像に基づいて、診断レポートを自動生成してもよい。図26は、その他の実施形態に係る表示例を説明するための図である。例えば、図26に示す画像が表示されている場合、医師等の操作者は、画像上にコメントを付すことができる。また、医師等の操作者は、入力部131を操作することで(例えば、入力部131であるマウスのホイールを操作するなど)、「アイコン立体視画像」の立体感を変更することができる。例えば、医師等の操作者は、画像を閲覧した上で「癌ではない」と診断すると、「アイコン立体視画像」の高さを『0』にする。そして、ワークステーション130は、コメントが付され、「アイコン立体視画像」の高さが調整された画像を、診断レポートとして記憶部134に格納する。
【0147】
また、例えば、医師等の操作者は、画像を閲覧した上で「良性であると考えられるが疑わしさが残る」と診断すると、入力部131を操作し、例えば「アイコン立体視画像」の立体感を残しつつ、やや高さ低くするように、「アイコン立体視画像」の立体感を変更する。すなわち、医師等の操作者は、入力部131を操作することで、診断内容(例えば、癌の悪性度など)に応じて「アイコン立体視画像」の高さを変更することができる。言い換えると、第4の実施形態に係るワークステーション130は、操作者による入力部131の操作を介して、「アイコン立体視画像」の立体感の変更を受け付け、受け付けた立体感に従う新たな立体視画像を生成し、診断レポートとして記憶部134に格納する。
【0148】
(構成)
また、上述の実施形態においては、ワークステーション130が、立体視画像及び平面画像を生成し、その表示を制御するものとして説明した。しかしながら、実施形態はこれに限られるものではない。例えば、医用画像診断装置110や端末装置140が、制御部135やレンダリング処理部136に相当する機能、制御部235に相当する機能を備えてもよい。この場合には、医用画像診断装置110や端末装置140が、立体視画像及び平面画像を生成し、その表示を制御する。また、立体視画像の生成、平面画像の生成、及び表示の制御は、画像処理システム1に含まれる各装置に分散されて実現されてもよい。
【0149】
また、上述の実施形態においては、端末装置140は、画像保管装置120から取得した医用画像等を表示等するものとして説明した。しかしながら、実施形態はこれに限られるものではない。例えば、端末装置140は、医用画像診断装置110に直接接続されてもよい。
【0150】
また、上述の実施形態においては、ワークステーション130は、画像保管装置120からボリュームデータを取得した。しかしながら、実施形態はこれに限られるものではない。例えば、ワークステーション130は、医用画像診断装置110からボリュームデータを取得してもよい。
【0151】
また、上述の実施形態においては、立体視画像を変更する場合に、ボリュームデータに対するボリュームレンダリング処理をリアルタイムに行ったが、実施形態はこれに限られるものではない。例えば、複数の視点位置に応じた複数の視差画像が予め生成され、予め記憶されていてもよい。この場合、立体視画像生成部は、立体感の変更指示を受け付けると、予め記憶されている複数の視差画像の中から適宜、新たな視差角に応じた視差画像群を選択することで、新たな立体視画像を生成する。
【0152】
(指定領域及び背景領域の双方が立体視画像)
また、上述の実施形態においては、表示面内の指定領域及び背景領域のそれぞれに、立体視画像及び平面画像のそれぞれを表示する手法を説明したが、実施形態はこれに限られるものではない。例えば、第1の実施形態〜第4の実施形態において、指定領域及び背景領域の双方に、立体感が異なる立体視画像を表示してもよい。この立体感の差は、あたかも立体視画像と平面画像とであるかのように観察される大きな差であってもよいし、見分けがつかないほどの僅かな差であってもよい。すなわち、立体感の差は、任意に変更することができる。また、指定領域に表示する立体視画像についてのみ、立体感や拡縮率の変更を受け付けてもよい。このような手法によれば、関心領域だけ立体感や拡縮率を変更することができる。
【0153】
この場合、例えば、ワークステーション130は、第1画像生成部と、第2画像生成部と、表示制御部とを備える。第1画像生成部は、ボリュームデータに対してレンダリング処理を行うことで、第1画像を生成する。第2画像生成部は、ボリュームデータに対してレンダリング処理を行うことで、第1画像と立体感の異なる第2画像を生成する。そして、表示制御部は、指定領域及び背景領域のそれぞれに、第1画像及び第2画像のそれぞれを表示するように制御する。すなわち、表示制御部は、指定領域及び背景領域のそれぞれに、第1画像及び第2画像のそれぞれを3次元表示するように制御する。また、ワークステーション130は、指定領域に表示される立体視画像について、立体感や拡縮率の変更を受け付け、第1画像生成部又は第2画像生成部は、受け付けられた変更に従って、新たな立体視画像を再生成する。
【0154】
(別ウィンドウに立体視画像)
また、上述の実施形態においては、表示面内の指定領域及び背景領域のそれぞれに、立体視画像及び平面画像のそれぞれを表示する手法を説明したが、実施形態はこれに限られるものではない。例えば、全領域に平面画像を表示し、別のウィンドウに立体視画像を表示してもよい。
【0155】
この場合、例えば、ワークステーション130は、立体表示モニタに平面画像を2次元表示し、この平面画像上で、立体視画像として3次元表示する領域の指定を受け付ける。例えば、ワークステーション130は、虫メガネのツールによって領域の指定を受け付ける。そして、ワークステーション130は、別のウィンドウに、この指定を受け付けた領域内の立体視画像を3次元表示する。
【0156】
(2視差、6視差など)
また、上述の実施形態においては、9視差画像の場合を例に挙げて説明したが、実施形態はこれに限られるものではなく、例えば、2視差、6視差など、任意の視差数を用いることができる。図27は、その他の実施形態に係る立体視画像生成処理を説明するための図である。2視差の場合、立体視画像の生成は、図27の(A)に示すように、指定された視点位置を「視点位置C」とし、この「視点位置C」を中心とする「視点位置L」及び「視点位置R」の2点をレンダリング条件として行われる。また、6視差の場合、立体視画像の生成は、図27の(B)に示すように、指定された視点位置を「視点位置C」とし、この「視点位置C」を中心とする「視点位置L2」、「視点位置L1」、「視点位置L3」、「視点位置R2」、「視点位置R1」、及び「視点位置R3」の6点をレンダリング条件として行われる。
【0157】
(その他)
なお、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。更に、各装置にて行なわれる各処理機能は、その全部または任意の一部が、CPUおよび当該CPUにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現され得る。
【0158】
また、上述の実施形態で説明した画像処理方法は、あらかじめ用意された画像処理プログラムをパーソナルコンピュータやワークステーションなどのコンピュータで実行することによって実現することができる。この画像処理プログラムは、インターネットなどのネットワークを介して配布することができる。また、このプログラムは、ハードディスク、フレキシブルディスク(FD)、CD−ROM、MO、DVDなどのコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行することもできる。
【0159】
以上述べた少なくとも一つの実施形態の画像処理システム及び方法によれば、医用画像を適切に表示することができる。
【0160】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【符号の説明】
【0161】
110 医用画像診断装置
120 画像保管装置
130 ワークステーション
135 制御部
135a 立体視領域指定受付部
135b 立体視画像生成部
135c 平面画像生成部
135d 表示制御部
140 端末装置

【特許請求の範囲】
【請求項1】
3次元の医用画像データであるボリュームデータに対してレンダリング処理を行うことで、第1画像を生成する第1画像生成部と、
前記ボリュームデータに対してレンダリング処理を行うことで、前記第1画像と立体感の異なる第2画像を生成する第2画像生成部と
を備えたことを特徴とする画像処理システム。
【請求項2】
画像処理システムで実行される画像処理方法であって、
3次元の医用画像データであるボリュームデータに対してレンダリング処理を行うことで、第1画像を生成する第1画像生成工程と、
前記ボリュームデータに対してレンダリング処理を行うことで、前記第1画像と立体感の異なる第2画像を生成する第2画像生成工程と
を含んだことを特徴とする画像処理方法。

【図1】
image rotate

【図2】
image rotate

【図3】
image rotate

【図4】
image rotate

【図5】
image rotate

【図6】
image rotate

【図7】
image rotate

【図8】
image rotate

【図9】
image rotate

【図10】
image rotate

【図11】
image rotate

【図12】
image rotate

【図13】
image rotate

【図14】
image rotate

【図15】
image rotate

【図16】
image rotate

【図17】
image rotate

【図18】
image rotate

【図19】
image rotate

【図20】
image rotate

【図21】
image rotate

【図22】
image rotate

【図23】
image rotate

【図24】
image rotate

【図25】
image rotate

【図26】
image rotate

【図27】
image rotate


【公開番号】特開2013−66241(P2013−66241A)
【公開日】平成25年4月11日(2013.4.11)
【国際特許分類】
【出願番号】特願2012−281217(P2012−281217)
【出願日】平成24年12月25日(2012.12.25)
【分割の表示】特願2012−114844(P2012−114844)の分割
【原出願日】平成24年5月18日(2012.5.18)
【出願人】(000003078)株式会社東芝 (54,554)
【出願人】(594164542)東芝メディカルシステムズ株式会社 (4,066)
【Fターム(参考)】