内視鏡システム、内視鏡システムのプロセッサ装置、及び画像処理方法
【課題】生体組織における凹凸情報などを消すことなく、表層血管又は中深層血管を強調または抑制する。
【解決手段】広帯域光BBと狭帯域光NBが被検体に同時照射される。この被検体をカラーのCCDで撮像することにより青色信号B、緑色信号G、赤色信号Rを得る。これら3色の信号B,G,Rからベース画像を生成する。青色信号B及び緑色信号G間の輝度比B/Gから構成されるB/G画像を生成する。B/G画像から高周波成分を抽出することにより表層血管抽出画像が得られ、また、B/G画像から中周波成分を抽出することにより中深層血管抽出画像が得られる。表層血管抽出画像または中深層血管抽出画像の一方とベース画像から、表層血管または中深層血管が強調または抑制された血管強調・抑制画像が生成される。血管強調・抑制画像は、モニタに表示される。
【解決手段】広帯域光BBと狭帯域光NBが被検体に同時照射される。この被検体をカラーのCCDで撮像することにより青色信号B、緑色信号G、赤色信号Rを得る。これら3色の信号B,G,Rからベース画像を生成する。青色信号B及び緑色信号G間の輝度比B/Gから構成されるB/G画像を生成する。B/G画像から高周波成分を抽出することにより表層血管抽出画像が得られ、また、B/G画像から中周波成分を抽出することにより中深層血管抽出画像が得られる。表層血管抽出画像または中深層血管抽出画像の一方とベース画像から、表層血管または中深層血管が強調または抑制された血管強調・抑制画像が生成される。血管強調・抑制画像は、モニタに表示される。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、被検体内における表層血管、中深層血管、ピットパターンなどの凹凸情報などに着目して診断を行う内視鏡システム、内視鏡システムのプロセッサ装置、及び画像処理方法に関する。
【背景技術】
【0002】
近年の医療においては、内視鏡装置を用いた診断等が広く行われている。内視鏡装置による被検体内の観察としては、照明光として広帯域光の白色光を用いる通常光観察の他、特許文献1のように、波長を狭帯域化した狭帯域光を用いて、被検体内の血管を強調表示等させる特殊光観察も行われるようになってきている。
【0003】
特許文献1では、被検体内に照射する光の波長が長くなるほど被写体組織内における光の深達度が高くなる特性を利用して、特定の深さにある血管を強調している。例えば、深達度が低い短波長のB色の狭帯域光を照射することにより、表層の血管を強調することができ、B色よりも波長が長く且つ深達度が高いG色の狭帯域光を照射することにより、表層よりも中深層の血管を強調することができる。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特許3559755号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
内視鏡診断では、診断状況に応じて、中深層血管に着目して診断を行う場合や、反対に表層血管に着目して診断を行う場合があり、さらには、それらの血管情報に加え、ピットパターンなどの生体組織における凹凸情報に着目して診断を行う場合がある。したがって、診断の目的に合わせて臨機応変に、生体組織における凹凸情報などを消すことなく、中深層血管のみを強調したり、表層血管のみを強調したりすることが望まれている。さらには、表層血管と中深層血管の両方が目立っている場合には、着目するほうの血管のみを強調し、着目しないほうの血管は表示を抑制することが望まれている。
【0006】
このような要望に対して、特許文献1では、ある特定深さの血管を強調することはできるが、それ以外の血管の表示を抑制することについては全く触れられていない。さらには、特許文献1では、照明光を狭帯域化しているために、血管自体の視認性は向上するものの、血管以外の生体組織の凹凸情報については光量不足のため視認性が低下するおそれがある。
【0007】
本発明は、上記背景に鑑みてなされたもので、生体組織における凹凸情報などを消すことなく、表層血管又は中深層血管を強調または抑制することができる内視鏡システム、内視鏡システムのプロセッサ装置、及び画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【0008】
上記目的を達成するために、本発明の内視鏡システムは、被検体に照明光を照射する照明手段と、前記被写体からの反射光を撮像する撮像手段と、撮像により得られる撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成する画像処理手段と、前記血管強調・抑制画像を表示する表示手段とを備えることを特徴とする。
【0009】
前記画像処理手段は、前記撮像信号から、前記第1または第2層血管の強調・抑制処理を行うために用いるベース画像を生成するベース画像生成手段と、前記撮像信号から前記第1層血管または前記第2層血管の一方を抽出する血管抽出手段と、前記血管抽出手段により抽出された血管を含む血管抽出画像と前記ベース画像とを用いて、前記第1層血管または前記第2層血管の一方が選択的に強調または抑制された血管強調・抑制画像を生成する血管強調・抑制画像生成手段とを有することが好ましい。
【0010】
前記撮像手段は、カラーの撮像素子で前記被検体の撮像を行い、前記血管抽出手段は、前記撮像素子のB画素から出力される青色信号と前記撮像信号のG画素から出力される緑色信号間の輝度比から構成されるB/G画像を生成するB/G画像生成部と、前記B/G画像から前記第1層血管または前記第2層血管の一方を抽出する血管抽出部とを有することが好ましい。前記血管抽出部は、前記B/G画像から前記第1層血管が含まれている第1周波数成分を抽出することにより、第1層血管抽出画像を生成し、または、前記B/G画像から前記第2層血管が含まれている第2周波数成分を抽出することにより、第2層血管抽出画像を生成することが好ましい。
【0011】
前記照明手段は、広帯域光と狭帯域光を被検体に同時照射し、前記ベース画像生成手段は、広帯域光と狭帯域光が同時照射された被検体を撮像することで得られる撮像信号から、前記ベース画像を生成することが好ましい。前記ベース画像生成手段は、前記狭帯域光の帯域幅が広い場合に、狭帯域光の情報を使用せずに、ベース画像を生成することが好ましい。前記ベース画像生成手段は、前記撮像信号を周波数変換して第1層血管に相当する第1周波数成分を求め、その求めた第1周波数成分が一定値よりも低い場合には、前記第1層血管の解像度が低いとして、狭帯域光の情報を使用せずにベース画像を生成することが好ましい。前記撮像手段は、カラーの撮像素子で前記被検体の撮像を行い、前記ベース画像生成手段は、撮像により得られる撮像信号のうち前記撮像素子のB画素の出力値とG画素の出力値の相関を求め、B画素の出力値とG画素の出力値の類似性が高い場合には、前記第1層血管の解像度が低いとして、狭帯域光の情報を使用せずにベース画像を生成することが好ましい。前記第1層血管の解像度が低い場合には、前記B画素の出力値を使用せずにベース画像を生成することが好ましい。前記第1層血管の解像度が低い場合には、前記広帯域光のみを照射し、前記狭帯域光の照射を停止した状態で撮像された撮像信号から、ベース画像を生成することが好ましい。
【0012】
前記照明手段は、広帯域光と狭帯域光を被検体に別々に順次照射し、前記ベース画像生成手段は、広帯域光が照射された被検体を撮像したときの広帯域信号と、狭帯域光が照射されたときの撮像信号からベース画像を生成することが好ましい。前記第1層血管の血管深さ情報と前記第2層血管の血管深さ情報は、狭帯域信号と広帯域信号間の輝度比から求められることが好ましい。
【0013】
前記第1層血管は表層血管であり、前記第2層血管は中深層血管であることが好ましい。
【0014】
本発明の内視鏡システムのプロセッサ装置は、照明光が照射された被検体を撮像手段で撮像することにより撮像信号を得る電子内視鏡から、前記撮像信号を受信する受信手段と、前記撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成する画像処理手段を備えることを特徴とする。
【0015】
本発明の画像処理方法は、照明光が照射された被検体を撮像手段で撮像することにより撮像信号を得る電子内視鏡から、前記撮像信号を受信し、前記撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成することを特徴とする。
【発明の効果】
【0016】
本発明によれば、生体組織における凹凸情報などを消すことなく、表層血管又は中深層血管を強調または抑制することができる。
【図面の簡単な説明】
【0017】
【図1】内視鏡システムの外観図である。
【図2】第1実施形態の内視鏡システムの電気的構成を示すブロック図である。
【図3】広帯域光及び狭帯域光の発光スペクトルを示すグラフである。
【図4】青色レーザ光とこの青色レーザー光を蛍光体に当てることによって励起発光する励起発光光の発光スペクトルを示すグラフである。
【図5】R色、G色、B色のカラーフィルターの分光透過率を示すグラフである。
【図6】輝度比B/Gと血管深さとの関係を示すグラフである。
【図7】B/G画像の所定ラインにおける輝度分布を表すグラフである。
【図8】表層血管抽出画像の所定ラインにおける輝度分布を表すグラフである。
【図9】中深層血管画像の所定ラインにおける輝度分布を表すグラフである。
【図10】表層血管が強調され、中深層血管が抑制された画像を示す画像図である。
【図11】表層血管が抑制され、中深層血管が強調された画像を示す画像図である。
【図12】本発明の作用を示すフローチャートである。
【図13】第2実施形態の内視鏡システムの電気的構成を示すブロック図である。
【図14】回転フィルタの概略図である。
【発明を実施するための形態】
【0018】
図1に示すように、第1実施形態の電子内視鏡システム10は、被検体内を撮像する電子内視鏡11と、撮像により得られた信号に基づいて内視鏡画像を生成するプロセッサ装置12と、被検体を照明する光を発生する光源装置13と、内視鏡画像を表示するモニタ14とを備えている。電子内視鏡11は、体腔内に挿入される可撓性の挿入部16と、挿入部16の基端部分に設けられた操作部17と、操作部17とプロセッサ装置12及び光源装置13との間を連結するユニバーサルコード18とを備えている。
【0019】
挿入部16の先端には、複数の湾曲駒を連結した湾曲部19が形成されている。湾曲部19は、操作部のアングルノブ21を操作することにより、上下左右方向に湾曲動作する。湾曲部19の先端には、体腔内撮影用の光学系等を内蔵した先端部16aが設けられている。先端部16aは、湾曲部19の湾曲動作によって体腔内の所望の方向に向けられる。
【0020】
ユニバーサルコード18には、プロセッサ装置12および光源装置13側にコネクタ24が取り付けられている。コネクタ24は、通信用コネクタと光源用コネクタからなる複合タイプのコネクタであり、電子内視鏡11は、このコネクタ24を介して、プロセッサ装置12および光源装置13に着脱自在に接続される。
【0021】
図2に示すように、光源装置13は、広帯域光源30と、狭帯域光源33と、カプラー36とを備えている。広帯域光源30は、図3に示すように、波長が青色領域から赤色領域(約400〜700nm)にわたる広帯域光BBを発生する。広帯域光源30は、電子内視鏡11の使用中、常時点灯している。広帯域光源30から発せられた広帯域光BBは、広帯域用光ファイバ40に入射する。なお、広帯域光BBとしては、キセノンランプなどの白色光ほか、中心波長445nmのレーザ光とこのレーザ光により蛍光体から励起発光される460nm〜700nmの励起発光光とを合波した白色光(発光スペクトルは図4参照)を用いてもよい。
【0022】
狭帯域光源33はLED(light Emitting Diode)やLD(Laser Diode)などであり、図3に示すように、波長が400±10nm(中心波長405nm)に制限された狭帯域光NBを発生する。狭帯域光源33から発せられた狭帯域光NBは、この狭帯域用光ファイバ33aに入射する。なお、狭帯域光NBの波長は400±10nm(中心波長405nm)に限らず、例えば440±10nm(中心波長445nm)の狭帯域光であってもよい。
【0023】
カプラー36は、電子内視鏡11内のライトガイド43と、広帯域用光ファイバ40及び狭帯域用光ファイバ33aとを連結する。これにより、広帯域光BB及び狭帯域光NBの両方が、ライトガイド43に同時に入射する。
【0024】
電子内視鏡11は、ライトガイド43、CCD44、アナログ処理回路45(AFE:Analog Front End)、撮像制御部46を備えている。ライトガイド43は大口径光ファイバ、バンドルファイバなどであり、入射端が光源装置内のカプラー36に挿入されており、出射端が先端部16aに設けられた照射レンズ48に向けられている。ライトガイド43内で導光された広帯域光BB及び狭帯域光NBは、照射レンズ48及び先端部16aの端面に取り付けられた照明窓49を通して、被検体内に照射される。被検体内で反射した広帯域光BB及び狭帯域光NBは、先端部16aの端面に取り付けられた観察窓50を通して、集光レンズ51に入射する。
【0025】
CCD44は、集光レンズ51からの光を撮像面44aで受光し、受光した光を光電変換して信号電荷を蓄積し、蓄積した信号電荷を撮像信号として読み出す。読み出された撮像信号は、AFE45に送られる。また、CCD44はカラーCCDであり、撮像面44aには、B色、G色、R色のいずれかのカラーフィルターが設けられたB画素、G画素、R画素の3色の画素が配列されている。
【0026】
B色、G色、R色のカラーフィルターは、図5に示すような分光透過率52,53,54を有している。波長領域が約400〜700nmである広帯域光BBのみがCCD44に入射した場合には、B色、G色、R色のカラーフィルターは、広帯域光BBのうちそれぞれの分光透過率52,53,54に応じた波長の光を透過する。ここで、R画素で光電変換された信号を赤色信号R、G画素で光電変換された信号を緑色信号G、B画素で光電変換された信号を青色信号Bとする。
【0027】
AFE45は、相関二重サンプリング回路(CDS)、自動ゲイン制御回路(AGC)、及びアナログ/デジタル変換器(A/D)(いずれも図示省略)から構成されている。CDSは、CCD44からの撮像信号に対して相関二重サンプリング処理を施し、CCD44の駆動により生じたノイズを除去する。AGCは、CDSによりノイズが除去された撮像信号を増幅する。A/Dは、AGCで増幅された撮像信号を、所定のビット数のデジタルな撮像信号に変換してプロセッサ装置12に入力する。
【0028】
撮像制御部46は、プロセッサ装置12内のコントローラー59に接続されており、コントローラー59から指示がなされたときにCCD44に対して駆動信号を送る。CCD44は、撮像制御部46からの駆動信号に基づいて、所定のフレームレートで撮像信号をAFE45に出力する。
【0029】
図2に示すように、プロセッサ装置12は、ベース画像生成部55と、フレームメモリ56と、画像処理部57と、表示制御回路58を備えており、コントローラー59が各部を制御している。ベース画像生成部55は、電子内視鏡のAFE45から出力される青色信号B、緑色信号G、赤色信号Rに各種信号処理を施すことによって、ベース画像を作成する。作成されたベース画像はフレームメモリ56に一時的に記憶される。また、AFE45から出力される青色信号B、緑色信号G、赤色信号Rも、フレームメモリ56に記憶される。なお、ベース画像は、狭帯域光NBを使用せず、広帯域光BBのみを使用して得られる通常観察画像や、酸素飽和度などの血管機能情報を疑似カラー化した疑似カラー画像などであってもよい。
【0030】
画像処理部57は、B/G画像生成部61と、血管抽出部63と、血管強調・抑制画像生成部65とを備えている。B/G画像生成部61は、青色信号B及び緑色信号Gにおいて同じ位置にある画素間の輝度比B/Gから構成されるB/G画像を生成する。輝度比B/Gは血管深さと関連性を有しており、図6に示すように、血管深さが大きくなるほど輝度比B/Gも大きくなる比例関係となっている。したがって、「表層血管の輝度<粘膜の輝度<中深層血管の輝度」の大小関係が成り立っている。しかしながら、図7のB/G画像が示すように、照明ムラ等の要因により、B/G画像の輝度は中心部分が一番高く、中心から周辺に向かうほど低くなる分布となる場合がある。このような場合には、上記大小関係(表層血管の輝度<粘膜の輝度<中深層血管の輝度)は局所的には成り立つものの、大局的には成り立たないことがある。
【0031】
血管抽出部63は、B/G画像から、表層血管または中深層血管のいずれかを抽出する。表層血管または中深層血管のいずれを抽出するかは、画像処理ボタン68の操作に従って決められる。血管抽出は、周波数フィルタリング処理により行われる。表層血管を抽出する場合には、表層血管に多い周波数帯成分である高周波成分をB/G画像から抽出する。これにより、図8に示すように、表層血管の輝度が負で、粘膜部分の輝度がほぼ「0」となる表層血管抽出画像が得られる。表層血管抽出画像では、表層血管のみがシャープに抽出されている。
【0032】
一方、中深層血管を抽出する場合には、中深層血管に多い周波数帯成分である中周波成分をB/G画像から抽出する。これにより、図9に示すように、中深層血管の輝度が正で、粘膜部分の輝度がほぼ「0」となる中深層血管周出画像が得られる。中深層血管抽出画像では、中深層血管のみがシャープに抽出されている。
【0033】
以上のような周波数フィルタリング処理を行うことで、粘膜の成分はほぼ「0」に近い値となるため、血管部分のみを抽出することができる。また、上記大小関係(表層血管の輝度<粘膜の輝度<中深層血管の輝度)も大局的に成り立つようになる。
【0034】
血管強調・抑制画像生成部65は、表層血管抽出画像または中深層血管抽出画像とベース画像とに基づいて、表層血管または中深層血管が強調(または抑制)された血管強調・抑制画像を生成する。強調または抑制のいずれを行うかは、画像処理ボタン68の操作によって決められる。血管強調・抑制画像は、表層血管抽出画像または中深層血管抽出画像における粘膜部分を閾値として、それぞれの画像をベース画像に加減算することで得られる。
【0035】
表示制御回路58は、血管強調・抑制画像をモニタ14に表示する。例えば、図10に示すように、B/G画像から抽出した表層血管71を血管強調・抑制画像上で強調している場合には、表層血管71は中深層血管72よりも目立つため、表層血管71のみに着目した診断が可能となる。反対に、図11に示すように、B/G画像から抽出した中深層血管72を血管強調・抑制画像上で強調している場合には、中深層血管72は表層血管71よりも目立つため、中深層血管72のみに着目した診断が可能となる。
【0036】
以上のように、B/G画像から着目する血管の画像のみを抽出し、その抽出した血管画像を用いて血管強調・抑制画像を生成することによって、血管以外の部分、例えば観察部位の凹凸などの情報を消すことなく、着目する血管部分のみを確実に強調・抑制処理することができる。これにより、血管に加え観察部位の凹凸など診断に役立つ情報を数多くユーザーに提供することができるため、診断能を向上させることができる。また、血管を表層と中深層に分けて別々に抽出し、それぞれを個別に強調・抑制していることから、表層血管に着目した診断や中深層血管に着目した診断が可能となる。
【0037】
なお、照明ムラが少ないとき、即ち、B/G画像において上記大小関係(表層血管の輝度<粘膜の輝度<中深層血管の輝度)が大域的に成り立っている場合には、周波数フィルタリングによる血管抽出処理を行わず、B/G画像をそのままベース画像に反映してもよい。ただし、上記大小関係が大域的に成り立っていない場合にB/G画像をそのままベース画像に反映させたときには、中心部分の血管が周辺部分の血管よりも太く強調等されるため、血管抽出処理を省略することは好ましくない。
【0038】
次に、本発明の作用について、図12に示すフローチャートを用いて説明する。光源装置13から発せられる広帯域光BB及び狭帯域光NBは、ライトガイド43を介して、被検体内に同時に照射される。被検体からの反射光は、カラーのCCD44により撮像される。この撮像により得られる青色信号B、緑色信号G、赤色信号Rから、ベース画像を生成する。生成されたベース画像と青色信号B、緑色信号G、赤色信号Rは、フレームメモリ56に一時的に記憶される。
【0039】
次に、B/G画像生成部61において、青色信号B及び緑色信号G間の輝度比B/GからなるB/G画像を生成する。B/G画像が生成されると、血管抽出部部63において、B/G画像から表層血管または中深層血管が抽出される。これにより、表層血管抽出画像または中深層血管抽出画像が得られる。表層血管または中深層血管のいずれを抽出するかは、画像処理ボタン68の操作に従って決められる。B/G画像から血管が抽出されたら、表層血管または中深層血管のいずれか一方とベース画像とから、表層血管または中深層血管が強調・抑制された血管強調・抑制画像が生成される。生成された血管強調・抑制画像は、表示制御回路58でモニタ表示可能な信号に変換された後、図10または図11に示すように、モニタ14に画像表示される。
【0040】
本発明の第2実施形態は、狭帯域光NBの帯域幅が広い等により表層血管が十分に解像されていない場合にも対応できるようにしたものであり、上記第1実施形態と異なる方法で、ベース画像を生成する(なお、それ以外は第1実施形態と同様であるので、説明を省略する)。例えば、既に広帯域光BBと狭帯域光NBを同時照射したときの撮像信号からベース画像を生成する際には、カラーのCCD44の各画素における出力値間の相関関係を使うことによって、ベース画像から狭帯域成分を取り除き、広帯域成分とすることができる。また、広帯域光BBと狭帯域光NBを照射する前であれば、狭帯域光源33を消灯し、広帯域光BBのみを被検体内に照射することで、特別な画像処理なしに、狭帯域成分が含まれないベース画像を生成することができる。また、ベース画像を生成する際に、青色信号Bを使用しないことによっても、狭帯域成分が含まれないベース画像を生成することができる。
【0041】
このように、狭帯域成分が含まれていないベース画像において、中深層血管の強調・抑制処理を行う際には、上記実施形態のように、高周波成分等を用いる表層血管の処理は行わず、中〜低周波成分等を用いて中深層血管のみを抽出し、抽出した中深層血管に強調・抑制処理を施す。
【0042】
本発明の第3実施形態は、観察エリアにおいて表層血管がほとんど存在しないため、表層血管が十分に解像されていない場合にも対応できるようにしたものであり、上記第1実施形態と異なる方法でベース画像を生成する(なお、それ以外は第1実施形態と同様であるので、説明を省略する)。まず、同時照射された広帯域光BB及び狭帯域光NBを撮像することにより得られる青色信号B、緑色信号G、赤色信号Rを周波数変換し、表層血管に相当する周波数成分を算出する。このとき、周波数成分が低い場合には、狭帯域光の情報を使用せずに、ベース画像を生成する。このベース画像の生成方法は、上記で示したので省略する。また、狭帯域成分が含まれていないベース画像において、中深層血管の強調・抑制処理についても、上記で示したので省略する。
【0043】
本発明の第4実施形態は、上記第2及び3実施形態と異なる方法で表層血管の解像度を判定し、その上で上記第1実施形態と異なる方法でベース画像を生成する(なお、それ以外は第1実施形態と同様であるので、説明を省略する)。まず、同時照射された広帯域光BB及び狭帯域光NBを撮像することにより得られる信号のうち、青色信号B及び緑色信号G間の相関を求める。その結果、青色信号Bと緑色信号Gの類似性が高い場合には、表層血管が十分に解像されていないとみなし、狭帯域光の情報を使用せずに、ベース画像を生成する。このベース画像の生成方法と狭帯域成分が含まれていないベース画像上での中深層血管の強調・抑制処理は、上記で示したので省略する。
【0044】
本発明の第5実施形態は、広帯域光BBと狭帯域光NBを同時照射した第1〜第4実施形態と異なり、広帯域光BBと狭帯域光NBを別々に順次照射する。したがって、第5実施形態の電子内視鏡システム100においては、図13に示すように、広帯域光BBと狭帯域光NBを順次照射するために、回転フィルタ101とこれを一定速度で回転させるモータ102を使用する。回転フィルタ101は、図14に示すように、広帯域光源30からの広帯域光BBそのまま透過させる開口部101aと、広帯域光のうち中心波長405nmの狭帯域光(波長域400〜410nm)を透過させるバンドパスフィルタ101bとが、周方向に沿って設けられている。したがって、回転フィルタ101が回転することで、広帯域光BBと狭帯域光NBが、ライトガイド43に向けて別々に順次照射される。
【0045】
このように広帯域光BBと狭帯域光NBを順次照射することによって、ベース画像の生成方法とB/G画像の生成方法が、同時照射方式の第1〜第4実施形態と異なる。その他については第5実施形態は第1〜第4実施形態と同様である。ベース画像の生成については、広帯域光BBを照射及び撮像したときに得られる広帯域信号と、狭帯域光NBを照射及び撮像したときに得られる狭帯域信号とを組み合わせてベース画像を生成する。また、B/G画像を生成する際には、狭帯域信号のうちB画素からの出力値と広帯域信号のうちG画素からの出力値間の輝度比を用いることが好ましい。なお、ベース画像は、広帯域信号のみで生成してもよい。
【0046】
なお、上記実施形態では、周波数フィルタリング処理を用いて、表層血管や中深層血管を抽出したが、これら血管を抽出することができれば、前記手段に限る必要はない。また、上記実施形態では、表層血管または中深層血管のいずれか一方のみを選択的に強調・抑制したが、これに限らず、表層血管または中深層血管の両方を強調・抑制してもよく、さらには、表層血管、中層血管、深層血管の3層の血管が存在する場合には、各層の血管について強調・抑制を行ってもよい。
【符号の説明】
【0047】
10 電子内視鏡システム
14 モニタ
30 広帯域光源
33 狭帯域光源
57 画像処理部
61 B/G画像生成部
63 血管抽出部
65 血管強調・抑制画像生成部
71 表層血管
72 中深層血管
【技術分野】
【0001】
本発明は、被検体内における表層血管、中深層血管、ピットパターンなどの凹凸情報などに着目して診断を行う内視鏡システム、内視鏡システムのプロセッサ装置、及び画像処理方法に関する。
【背景技術】
【0002】
近年の医療においては、内視鏡装置を用いた診断等が広く行われている。内視鏡装置による被検体内の観察としては、照明光として広帯域光の白色光を用いる通常光観察の他、特許文献1のように、波長を狭帯域化した狭帯域光を用いて、被検体内の血管を強調表示等させる特殊光観察も行われるようになってきている。
【0003】
特許文献1では、被検体内に照射する光の波長が長くなるほど被写体組織内における光の深達度が高くなる特性を利用して、特定の深さにある血管を強調している。例えば、深達度が低い短波長のB色の狭帯域光を照射することにより、表層の血管を強調することができ、B色よりも波長が長く且つ深達度が高いG色の狭帯域光を照射することにより、表層よりも中深層の血管を強調することができる。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特許3559755号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
内視鏡診断では、診断状況に応じて、中深層血管に着目して診断を行う場合や、反対に表層血管に着目して診断を行う場合があり、さらには、それらの血管情報に加え、ピットパターンなどの生体組織における凹凸情報に着目して診断を行う場合がある。したがって、診断の目的に合わせて臨機応変に、生体組織における凹凸情報などを消すことなく、中深層血管のみを強調したり、表層血管のみを強調したりすることが望まれている。さらには、表層血管と中深層血管の両方が目立っている場合には、着目するほうの血管のみを強調し、着目しないほうの血管は表示を抑制することが望まれている。
【0006】
このような要望に対して、特許文献1では、ある特定深さの血管を強調することはできるが、それ以外の血管の表示を抑制することについては全く触れられていない。さらには、特許文献1では、照明光を狭帯域化しているために、血管自体の視認性は向上するものの、血管以外の生体組織の凹凸情報については光量不足のため視認性が低下するおそれがある。
【0007】
本発明は、上記背景に鑑みてなされたもので、生体組織における凹凸情報などを消すことなく、表層血管又は中深層血管を強調または抑制することができる内視鏡システム、内視鏡システムのプロセッサ装置、及び画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【0008】
上記目的を達成するために、本発明の内視鏡システムは、被検体に照明光を照射する照明手段と、前記被写体からの反射光を撮像する撮像手段と、撮像により得られる撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成する画像処理手段と、前記血管強調・抑制画像を表示する表示手段とを備えることを特徴とする。
【0009】
前記画像処理手段は、前記撮像信号から、前記第1または第2層血管の強調・抑制処理を行うために用いるベース画像を生成するベース画像生成手段と、前記撮像信号から前記第1層血管または前記第2層血管の一方を抽出する血管抽出手段と、前記血管抽出手段により抽出された血管を含む血管抽出画像と前記ベース画像とを用いて、前記第1層血管または前記第2層血管の一方が選択的に強調または抑制された血管強調・抑制画像を生成する血管強調・抑制画像生成手段とを有することが好ましい。
【0010】
前記撮像手段は、カラーの撮像素子で前記被検体の撮像を行い、前記血管抽出手段は、前記撮像素子のB画素から出力される青色信号と前記撮像信号のG画素から出力される緑色信号間の輝度比から構成されるB/G画像を生成するB/G画像生成部と、前記B/G画像から前記第1層血管または前記第2層血管の一方を抽出する血管抽出部とを有することが好ましい。前記血管抽出部は、前記B/G画像から前記第1層血管が含まれている第1周波数成分を抽出することにより、第1層血管抽出画像を生成し、または、前記B/G画像から前記第2層血管が含まれている第2周波数成分を抽出することにより、第2層血管抽出画像を生成することが好ましい。
【0011】
前記照明手段は、広帯域光と狭帯域光を被検体に同時照射し、前記ベース画像生成手段は、広帯域光と狭帯域光が同時照射された被検体を撮像することで得られる撮像信号から、前記ベース画像を生成することが好ましい。前記ベース画像生成手段は、前記狭帯域光の帯域幅が広い場合に、狭帯域光の情報を使用せずに、ベース画像を生成することが好ましい。前記ベース画像生成手段は、前記撮像信号を周波数変換して第1層血管に相当する第1周波数成分を求め、その求めた第1周波数成分が一定値よりも低い場合には、前記第1層血管の解像度が低いとして、狭帯域光の情報を使用せずにベース画像を生成することが好ましい。前記撮像手段は、カラーの撮像素子で前記被検体の撮像を行い、前記ベース画像生成手段は、撮像により得られる撮像信号のうち前記撮像素子のB画素の出力値とG画素の出力値の相関を求め、B画素の出力値とG画素の出力値の類似性が高い場合には、前記第1層血管の解像度が低いとして、狭帯域光の情報を使用せずにベース画像を生成することが好ましい。前記第1層血管の解像度が低い場合には、前記B画素の出力値を使用せずにベース画像を生成することが好ましい。前記第1層血管の解像度が低い場合には、前記広帯域光のみを照射し、前記狭帯域光の照射を停止した状態で撮像された撮像信号から、ベース画像を生成することが好ましい。
【0012】
前記照明手段は、広帯域光と狭帯域光を被検体に別々に順次照射し、前記ベース画像生成手段は、広帯域光が照射された被検体を撮像したときの広帯域信号と、狭帯域光が照射されたときの撮像信号からベース画像を生成することが好ましい。前記第1層血管の血管深さ情報と前記第2層血管の血管深さ情報は、狭帯域信号と広帯域信号間の輝度比から求められることが好ましい。
【0013】
前記第1層血管は表層血管であり、前記第2層血管は中深層血管であることが好ましい。
【0014】
本発明の内視鏡システムのプロセッサ装置は、照明光が照射された被検体を撮像手段で撮像することにより撮像信号を得る電子内視鏡から、前記撮像信号を受信する受信手段と、前記撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成する画像処理手段を備えることを特徴とする。
【0015】
本発明の画像処理方法は、照明光が照射された被検体を撮像手段で撮像することにより撮像信号を得る電子内視鏡から、前記撮像信号を受信し、前記撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成することを特徴とする。
【発明の効果】
【0016】
本発明によれば、生体組織における凹凸情報などを消すことなく、表層血管又は中深層血管を強調または抑制することができる。
【図面の簡単な説明】
【0017】
【図1】内視鏡システムの外観図である。
【図2】第1実施形態の内視鏡システムの電気的構成を示すブロック図である。
【図3】広帯域光及び狭帯域光の発光スペクトルを示すグラフである。
【図4】青色レーザ光とこの青色レーザー光を蛍光体に当てることによって励起発光する励起発光光の発光スペクトルを示すグラフである。
【図5】R色、G色、B色のカラーフィルターの分光透過率を示すグラフである。
【図6】輝度比B/Gと血管深さとの関係を示すグラフである。
【図7】B/G画像の所定ラインにおける輝度分布を表すグラフである。
【図8】表層血管抽出画像の所定ラインにおける輝度分布を表すグラフである。
【図9】中深層血管画像の所定ラインにおける輝度分布を表すグラフである。
【図10】表層血管が強調され、中深層血管が抑制された画像を示す画像図である。
【図11】表層血管が抑制され、中深層血管が強調された画像を示す画像図である。
【図12】本発明の作用を示すフローチャートである。
【図13】第2実施形態の内視鏡システムの電気的構成を示すブロック図である。
【図14】回転フィルタの概略図である。
【発明を実施するための形態】
【0018】
図1に示すように、第1実施形態の電子内視鏡システム10は、被検体内を撮像する電子内視鏡11と、撮像により得られた信号に基づいて内視鏡画像を生成するプロセッサ装置12と、被検体を照明する光を発生する光源装置13と、内視鏡画像を表示するモニタ14とを備えている。電子内視鏡11は、体腔内に挿入される可撓性の挿入部16と、挿入部16の基端部分に設けられた操作部17と、操作部17とプロセッサ装置12及び光源装置13との間を連結するユニバーサルコード18とを備えている。
【0019】
挿入部16の先端には、複数の湾曲駒を連結した湾曲部19が形成されている。湾曲部19は、操作部のアングルノブ21を操作することにより、上下左右方向に湾曲動作する。湾曲部19の先端には、体腔内撮影用の光学系等を内蔵した先端部16aが設けられている。先端部16aは、湾曲部19の湾曲動作によって体腔内の所望の方向に向けられる。
【0020】
ユニバーサルコード18には、プロセッサ装置12および光源装置13側にコネクタ24が取り付けられている。コネクタ24は、通信用コネクタと光源用コネクタからなる複合タイプのコネクタであり、電子内視鏡11は、このコネクタ24を介して、プロセッサ装置12および光源装置13に着脱自在に接続される。
【0021】
図2に示すように、光源装置13は、広帯域光源30と、狭帯域光源33と、カプラー36とを備えている。広帯域光源30は、図3に示すように、波長が青色領域から赤色領域(約400〜700nm)にわたる広帯域光BBを発生する。広帯域光源30は、電子内視鏡11の使用中、常時点灯している。広帯域光源30から発せられた広帯域光BBは、広帯域用光ファイバ40に入射する。なお、広帯域光BBとしては、キセノンランプなどの白色光ほか、中心波長445nmのレーザ光とこのレーザ光により蛍光体から励起発光される460nm〜700nmの励起発光光とを合波した白色光(発光スペクトルは図4参照)を用いてもよい。
【0022】
狭帯域光源33はLED(light Emitting Diode)やLD(Laser Diode)などであり、図3に示すように、波長が400±10nm(中心波長405nm)に制限された狭帯域光NBを発生する。狭帯域光源33から発せられた狭帯域光NBは、この狭帯域用光ファイバ33aに入射する。なお、狭帯域光NBの波長は400±10nm(中心波長405nm)に限らず、例えば440±10nm(中心波長445nm)の狭帯域光であってもよい。
【0023】
カプラー36は、電子内視鏡11内のライトガイド43と、広帯域用光ファイバ40及び狭帯域用光ファイバ33aとを連結する。これにより、広帯域光BB及び狭帯域光NBの両方が、ライトガイド43に同時に入射する。
【0024】
電子内視鏡11は、ライトガイド43、CCD44、アナログ処理回路45(AFE:Analog Front End)、撮像制御部46を備えている。ライトガイド43は大口径光ファイバ、バンドルファイバなどであり、入射端が光源装置内のカプラー36に挿入されており、出射端が先端部16aに設けられた照射レンズ48に向けられている。ライトガイド43内で導光された広帯域光BB及び狭帯域光NBは、照射レンズ48及び先端部16aの端面に取り付けられた照明窓49を通して、被検体内に照射される。被検体内で反射した広帯域光BB及び狭帯域光NBは、先端部16aの端面に取り付けられた観察窓50を通して、集光レンズ51に入射する。
【0025】
CCD44は、集光レンズ51からの光を撮像面44aで受光し、受光した光を光電変換して信号電荷を蓄積し、蓄積した信号電荷を撮像信号として読み出す。読み出された撮像信号は、AFE45に送られる。また、CCD44はカラーCCDであり、撮像面44aには、B色、G色、R色のいずれかのカラーフィルターが設けられたB画素、G画素、R画素の3色の画素が配列されている。
【0026】
B色、G色、R色のカラーフィルターは、図5に示すような分光透過率52,53,54を有している。波長領域が約400〜700nmである広帯域光BBのみがCCD44に入射した場合には、B色、G色、R色のカラーフィルターは、広帯域光BBのうちそれぞれの分光透過率52,53,54に応じた波長の光を透過する。ここで、R画素で光電変換された信号を赤色信号R、G画素で光電変換された信号を緑色信号G、B画素で光電変換された信号を青色信号Bとする。
【0027】
AFE45は、相関二重サンプリング回路(CDS)、自動ゲイン制御回路(AGC)、及びアナログ/デジタル変換器(A/D)(いずれも図示省略)から構成されている。CDSは、CCD44からの撮像信号に対して相関二重サンプリング処理を施し、CCD44の駆動により生じたノイズを除去する。AGCは、CDSによりノイズが除去された撮像信号を増幅する。A/Dは、AGCで増幅された撮像信号を、所定のビット数のデジタルな撮像信号に変換してプロセッサ装置12に入力する。
【0028】
撮像制御部46は、プロセッサ装置12内のコントローラー59に接続されており、コントローラー59から指示がなされたときにCCD44に対して駆動信号を送る。CCD44は、撮像制御部46からの駆動信号に基づいて、所定のフレームレートで撮像信号をAFE45に出力する。
【0029】
図2に示すように、プロセッサ装置12は、ベース画像生成部55と、フレームメモリ56と、画像処理部57と、表示制御回路58を備えており、コントローラー59が各部を制御している。ベース画像生成部55は、電子内視鏡のAFE45から出力される青色信号B、緑色信号G、赤色信号Rに各種信号処理を施すことによって、ベース画像を作成する。作成されたベース画像はフレームメモリ56に一時的に記憶される。また、AFE45から出力される青色信号B、緑色信号G、赤色信号Rも、フレームメモリ56に記憶される。なお、ベース画像は、狭帯域光NBを使用せず、広帯域光BBのみを使用して得られる通常観察画像や、酸素飽和度などの血管機能情報を疑似カラー化した疑似カラー画像などであってもよい。
【0030】
画像処理部57は、B/G画像生成部61と、血管抽出部63と、血管強調・抑制画像生成部65とを備えている。B/G画像生成部61は、青色信号B及び緑色信号Gにおいて同じ位置にある画素間の輝度比B/Gから構成されるB/G画像を生成する。輝度比B/Gは血管深さと関連性を有しており、図6に示すように、血管深さが大きくなるほど輝度比B/Gも大きくなる比例関係となっている。したがって、「表層血管の輝度<粘膜の輝度<中深層血管の輝度」の大小関係が成り立っている。しかしながら、図7のB/G画像が示すように、照明ムラ等の要因により、B/G画像の輝度は中心部分が一番高く、中心から周辺に向かうほど低くなる分布となる場合がある。このような場合には、上記大小関係(表層血管の輝度<粘膜の輝度<中深層血管の輝度)は局所的には成り立つものの、大局的には成り立たないことがある。
【0031】
血管抽出部63は、B/G画像から、表層血管または中深層血管のいずれかを抽出する。表層血管または中深層血管のいずれを抽出するかは、画像処理ボタン68の操作に従って決められる。血管抽出は、周波数フィルタリング処理により行われる。表層血管を抽出する場合には、表層血管に多い周波数帯成分である高周波成分をB/G画像から抽出する。これにより、図8に示すように、表層血管の輝度が負で、粘膜部分の輝度がほぼ「0」となる表層血管抽出画像が得られる。表層血管抽出画像では、表層血管のみがシャープに抽出されている。
【0032】
一方、中深層血管を抽出する場合には、中深層血管に多い周波数帯成分である中周波成分をB/G画像から抽出する。これにより、図9に示すように、中深層血管の輝度が正で、粘膜部分の輝度がほぼ「0」となる中深層血管周出画像が得られる。中深層血管抽出画像では、中深層血管のみがシャープに抽出されている。
【0033】
以上のような周波数フィルタリング処理を行うことで、粘膜の成分はほぼ「0」に近い値となるため、血管部分のみを抽出することができる。また、上記大小関係(表層血管の輝度<粘膜の輝度<中深層血管の輝度)も大局的に成り立つようになる。
【0034】
血管強調・抑制画像生成部65は、表層血管抽出画像または中深層血管抽出画像とベース画像とに基づいて、表層血管または中深層血管が強調(または抑制)された血管強調・抑制画像を生成する。強調または抑制のいずれを行うかは、画像処理ボタン68の操作によって決められる。血管強調・抑制画像は、表層血管抽出画像または中深層血管抽出画像における粘膜部分を閾値として、それぞれの画像をベース画像に加減算することで得られる。
【0035】
表示制御回路58は、血管強調・抑制画像をモニタ14に表示する。例えば、図10に示すように、B/G画像から抽出した表層血管71を血管強調・抑制画像上で強調している場合には、表層血管71は中深層血管72よりも目立つため、表層血管71のみに着目した診断が可能となる。反対に、図11に示すように、B/G画像から抽出した中深層血管72を血管強調・抑制画像上で強調している場合には、中深層血管72は表層血管71よりも目立つため、中深層血管72のみに着目した診断が可能となる。
【0036】
以上のように、B/G画像から着目する血管の画像のみを抽出し、その抽出した血管画像を用いて血管強調・抑制画像を生成することによって、血管以外の部分、例えば観察部位の凹凸などの情報を消すことなく、着目する血管部分のみを確実に強調・抑制処理することができる。これにより、血管に加え観察部位の凹凸など診断に役立つ情報を数多くユーザーに提供することができるため、診断能を向上させることができる。また、血管を表層と中深層に分けて別々に抽出し、それぞれを個別に強調・抑制していることから、表層血管に着目した診断や中深層血管に着目した診断が可能となる。
【0037】
なお、照明ムラが少ないとき、即ち、B/G画像において上記大小関係(表層血管の輝度<粘膜の輝度<中深層血管の輝度)が大域的に成り立っている場合には、周波数フィルタリングによる血管抽出処理を行わず、B/G画像をそのままベース画像に反映してもよい。ただし、上記大小関係が大域的に成り立っていない場合にB/G画像をそのままベース画像に反映させたときには、中心部分の血管が周辺部分の血管よりも太く強調等されるため、血管抽出処理を省略することは好ましくない。
【0038】
次に、本発明の作用について、図12に示すフローチャートを用いて説明する。光源装置13から発せられる広帯域光BB及び狭帯域光NBは、ライトガイド43を介して、被検体内に同時に照射される。被検体からの反射光は、カラーのCCD44により撮像される。この撮像により得られる青色信号B、緑色信号G、赤色信号Rから、ベース画像を生成する。生成されたベース画像と青色信号B、緑色信号G、赤色信号Rは、フレームメモリ56に一時的に記憶される。
【0039】
次に、B/G画像生成部61において、青色信号B及び緑色信号G間の輝度比B/GからなるB/G画像を生成する。B/G画像が生成されると、血管抽出部部63において、B/G画像から表層血管または中深層血管が抽出される。これにより、表層血管抽出画像または中深層血管抽出画像が得られる。表層血管または中深層血管のいずれを抽出するかは、画像処理ボタン68の操作に従って決められる。B/G画像から血管が抽出されたら、表層血管または中深層血管のいずれか一方とベース画像とから、表層血管または中深層血管が強調・抑制された血管強調・抑制画像が生成される。生成された血管強調・抑制画像は、表示制御回路58でモニタ表示可能な信号に変換された後、図10または図11に示すように、モニタ14に画像表示される。
【0040】
本発明の第2実施形態は、狭帯域光NBの帯域幅が広い等により表層血管が十分に解像されていない場合にも対応できるようにしたものであり、上記第1実施形態と異なる方法で、ベース画像を生成する(なお、それ以外は第1実施形態と同様であるので、説明を省略する)。例えば、既に広帯域光BBと狭帯域光NBを同時照射したときの撮像信号からベース画像を生成する際には、カラーのCCD44の各画素における出力値間の相関関係を使うことによって、ベース画像から狭帯域成分を取り除き、広帯域成分とすることができる。また、広帯域光BBと狭帯域光NBを照射する前であれば、狭帯域光源33を消灯し、広帯域光BBのみを被検体内に照射することで、特別な画像処理なしに、狭帯域成分が含まれないベース画像を生成することができる。また、ベース画像を生成する際に、青色信号Bを使用しないことによっても、狭帯域成分が含まれないベース画像を生成することができる。
【0041】
このように、狭帯域成分が含まれていないベース画像において、中深層血管の強調・抑制処理を行う際には、上記実施形態のように、高周波成分等を用いる表層血管の処理は行わず、中〜低周波成分等を用いて中深層血管のみを抽出し、抽出した中深層血管に強調・抑制処理を施す。
【0042】
本発明の第3実施形態は、観察エリアにおいて表層血管がほとんど存在しないため、表層血管が十分に解像されていない場合にも対応できるようにしたものであり、上記第1実施形態と異なる方法でベース画像を生成する(なお、それ以外は第1実施形態と同様であるので、説明を省略する)。まず、同時照射された広帯域光BB及び狭帯域光NBを撮像することにより得られる青色信号B、緑色信号G、赤色信号Rを周波数変換し、表層血管に相当する周波数成分を算出する。このとき、周波数成分が低い場合には、狭帯域光の情報を使用せずに、ベース画像を生成する。このベース画像の生成方法は、上記で示したので省略する。また、狭帯域成分が含まれていないベース画像において、中深層血管の強調・抑制処理についても、上記で示したので省略する。
【0043】
本発明の第4実施形態は、上記第2及び3実施形態と異なる方法で表層血管の解像度を判定し、その上で上記第1実施形態と異なる方法でベース画像を生成する(なお、それ以外は第1実施形態と同様であるので、説明を省略する)。まず、同時照射された広帯域光BB及び狭帯域光NBを撮像することにより得られる信号のうち、青色信号B及び緑色信号G間の相関を求める。その結果、青色信号Bと緑色信号Gの類似性が高い場合には、表層血管が十分に解像されていないとみなし、狭帯域光の情報を使用せずに、ベース画像を生成する。このベース画像の生成方法と狭帯域成分が含まれていないベース画像上での中深層血管の強調・抑制処理は、上記で示したので省略する。
【0044】
本発明の第5実施形態は、広帯域光BBと狭帯域光NBを同時照射した第1〜第4実施形態と異なり、広帯域光BBと狭帯域光NBを別々に順次照射する。したがって、第5実施形態の電子内視鏡システム100においては、図13に示すように、広帯域光BBと狭帯域光NBを順次照射するために、回転フィルタ101とこれを一定速度で回転させるモータ102を使用する。回転フィルタ101は、図14に示すように、広帯域光源30からの広帯域光BBそのまま透過させる開口部101aと、広帯域光のうち中心波長405nmの狭帯域光(波長域400〜410nm)を透過させるバンドパスフィルタ101bとが、周方向に沿って設けられている。したがって、回転フィルタ101が回転することで、広帯域光BBと狭帯域光NBが、ライトガイド43に向けて別々に順次照射される。
【0045】
このように広帯域光BBと狭帯域光NBを順次照射することによって、ベース画像の生成方法とB/G画像の生成方法が、同時照射方式の第1〜第4実施形態と異なる。その他については第5実施形態は第1〜第4実施形態と同様である。ベース画像の生成については、広帯域光BBを照射及び撮像したときに得られる広帯域信号と、狭帯域光NBを照射及び撮像したときに得られる狭帯域信号とを組み合わせてベース画像を生成する。また、B/G画像を生成する際には、狭帯域信号のうちB画素からの出力値と広帯域信号のうちG画素からの出力値間の輝度比を用いることが好ましい。なお、ベース画像は、広帯域信号のみで生成してもよい。
【0046】
なお、上記実施形態では、周波数フィルタリング処理を用いて、表層血管や中深層血管を抽出したが、これら血管を抽出することができれば、前記手段に限る必要はない。また、上記実施形態では、表層血管または中深層血管のいずれか一方のみを選択的に強調・抑制したが、これに限らず、表層血管または中深層血管の両方を強調・抑制してもよく、さらには、表層血管、中層血管、深層血管の3層の血管が存在する場合には、各層の血管について強調・抑制を行ってもよい。
【符号の説明】
【0047】
10 電子内視鏡システム
14 モニタ
30 広帯域光源
33 狭帯域光源
57 画像処理部
61 B/G画像生成部
63 血管抽出部
65 血管強調・抑制画像生成部
71 表層血管
72 中深層血管
【特許請求の範囲】
【請求項1】
被検体に照明光を照射する照明手段と、
前記被写体からの反射光を撮像する撮像手段と、
撮像により得られる撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成する画像処理手段と、
前記血管強調・抑制画像を表示する表示手段とを備えることを特徴とする内視鏡システム。
【請求項2】
前記画像処理手段は、
前記撮像信号から、前記第1または第2層血管の強調・抑制処理を行うために用いるベース画像を生成するベース画像生成手段と、
前記撮像信号から前記第1層血管または前記第2層血管の一方を抽出する血管抽出手段と、
前記血管抽出手段により抽出された血管を含む血管抽出画像と前記ベース画像とを用いて、前記第1層血管または前記第2層血管の一方が選択的に強調または抑制された血管強調・抑制画像を生成する血管強調・抑制画像生成手段とを有することを特徴とする請求項1記載の内視鏡システム。
【請求項3】
前記撮像手段は、カラーの撮像素子で前記被検体の撮像を行い、
前記血管抽出手段は、
前記撮像素子のB画素から出力される青色信号と前記撮像素子のG画素の出力から出力される緑色信号間の輝度比から構成されるB/G画像を生成するB/G画像生成部と、
前記B/G画像から前記第1層血管または前記第2層血管の一方を抽出する血管抽出部とを有することを特徴とする請求項2記載の内視鏡システム。
【請求項4】
前記血管抽出部は、
前記B/G画像から前記第1層血管が含まれている第1周波数成分を抽出することにより、第1層血管抽出画像を生成し、または、前記B/G画像から前記第2層血管が含まれている第2周波数成分を抽出することにより、第2層血管抽出画像を生成することを特徴とする請求項3記載の内視鏡システム。
【請求項5】
前記照明手段は、広帯域光と狭帯域光を被検体に同時照射し、
前記ベース画像生成手段は、広帯域光と狭帯域光が同時照射された被検体を撮像することで得られる撮像信号から、前記ベース画像を生成することを特徴とする請求項2ないし4いずれか1項記載の内視鏡システム。
【請求項6】
前記ベース画像生成手段は、前記狭帯域光の帯域幅が広い場合に、狭帯域光の情報を使用せずに、ベース画像を生成することを特徴とする請求項5記載の内視鏡システム。
【請求項7】
前記ベース画像生成手段は、前記撮像信号を周波数変換して第1層血管に相当する第1周波数成分を求め、その求めた第1周波数成分が一定値よりも低い場合には、前記第1層血管の解像度が低いとして、狭帯域光の情報を使用せずにベース画像を生成することを特徴とする請求項5記載の内視鏡システム。
【請求項8】
前記撮像手段は、カラーの撮像素子で前記被検体の撮像を行い、
前記ベース画像生成手段は、撮像により得られる撮像信号のうち前記撮像素子のB画素の出力値とG画素の出力値の相関を求め、B画素の出力値とG画素の出力値の類似性が高い場合には、前記第1層血管の解像度が低いとして、狭帯域光の情報を使用せずにベース画像を生成することを特徴とする請求項5記載の内視鏡システム。
【請求項9】
前記第1層血管の解像度が低い場合には、前記B画素の出力値を使用せずにベース画像を生成することを特徴とする請求項8記載の内視鏡システム。
【請求項10】
前記第1層血管の解像度が低い場合には、前記広帯域光のみを照射し、前記狭帯域光の照射を停止した状態で撮像された撮像信号から、ベース画像を生成することを特徴とする請求項5ないし8いずれか1項記載の内視鏡システム。
【請求項11】
前記照明手段は、広帯域光と狭帯域光を被検体に別々に順次照射し、
前記ベース画像生成手段は、広帯域光が照射された被検体を撮像したときの広帯域信号と、狭帯域光が照射されたときの撮像信号からベース画像を生成することを特徴とする請求項2ないし4いずれか1項記載の内視鏡システム。
【請求項12】
前記第1層血管の血管深さ情報と前記第2層血管の血管深さ情報は、狭帯域信号と広帯域信号間の輝度比から求められることを特徴とする請求項11記載の内視鏡システム。
【請求項13】
前記第1層血管は表層血管であり、前記第2層血管は中深層血管であることを特徴とする請求項1ないし12いずれか1項記載の内視鏡システム。
【請求項14】
照明光が照射された被検体を撮像手段で撮像することにより撮像信号を得る電子内視鏡から、前記撮像信号を受信する受信手段と、
前記撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成する画像処理手段を備えることを特徴とする内視鏡システムのプロセッサ装置。
【請求項15】
照明光が照射された被検体を撮像手段で撮像することにより撮像信号を得る電子内視鏡から、前記撮像信号を受信し、
前記撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成することを特徴とする画像処理方法。
【請求項1】
被検体に照明光を照射する照明手段と、
前記被写体からの反射光を撮像する撮像手段と、
撮像により得られる撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成する画像処理手段と、
前記血管強調・抑制画像を表示する表示手段とを備えることを特徴とする内視鏡システム。
【請求項2】
前記画像処理手段は、
前記撮像信号から、前記第1または第2層血管の強調・抑制処理を行うために用いるベース画像を生成するベース画像生成手段と、
前記撮像信号から前記第1層血管または前記第2層血管の一方を抽出する血管抽出手段と、
前記血管抽出手段により抽出された血管を含む血管抽出画像と前記ベース画像とを用いて、前記第1層血管または前記第2層血管の一方が選択的に強調または抑制された血管強調・抑制画像を生成する血管強調・抑制画像生成手段とを有することを特徴とする請求項1記載の内視鏡システム。
【請求項3】
前記撮像手段は、カラーの撮像素子で前記被検体の撮像を行い、
前記血管抽出手段は、
前記撮像素子のB画素から出力される青色信号と前記撮像素子のG画素の出力から出力される緑色信号間の輝度比から構成されるB/G画像を生成するB/G画像生成部と、
前記B/G画像から前記第1層血管または前記第2層血管の一方を抽出する血管抽出部とを有することを特徴とする請求項2記載の内視鏡システム。
【請求項4】
前記血管抽出部は、
前記B/G画像から前記第1層血管が含まれている第1周波数成分を抽出することにより、第1層血管抽出画像を生成し、または、前記B/G画像から前記第2層血管が含まれている第2周波数成分を抽出することにより、第2層血管抽出画像を生成することを特徴とする請求項3記載の内視鏡システム。
【請求項5】
前記照明手段は、広帯域光と狭帯域光を被検体に同時照射し、
前記ベース画像生成手段は、広帯域光と狭帯域光が同時照射された被検体を撮像することで得られる撮像信号から、前記ベース画像を生成することを特徴とする請求項2ないし4いずれか1項記載の内視鏡システム。
【請求項6】
前記ベース画像生成手段は、前記狭帯域光の帯域幅が広い場合に、狭帯域光の情報を使用せずに、ベース画像を生成することを特徴とする請求項5記載の内視鏡システム。
【請求項7】
前記ベース画像生成手段は、前記撮像信号を周波数変換して第1層血管に相当する第1周波数成分を求め、その求めた第1周波数成分が一定値よりも低い場合には、前記第1層血管の解像度が低いとして、狭帯域光の情報を使用せずにベース画像を生成することを特徴とする請求項5記載の内視鏡システム。
【請求項8】
前記撮像手段は、カラーの撮像素子で前記被検体の撮像を行い、
前記ベース画像生成手段は、撮像により得られる撮像信号のうち前記撮像素子のB画素の出力値とG画素の出力値の相関を求め、B画素の出力値とG画素の出力値の類似性が高い場合には、前記第1層血管の解像度が低いとして、狭帯域光の情報を使用せずにベース画像を生成することを特徴とする請求項5記載の内視鏡システム。
【請求項9】
前記第1層血管の解像度が低い場合には、前記B画素の出力値を使用せずにベース画像を生成することを特徴とする請求項8記載の内視鏡システム。
【請求項10】
前記第1層血管の解像度が低い場合には、前記広帯域光のみを照射し、前記狭帯域光の照射を停止した状態で撮像された撮像信号から、ベース画像を生成することを特徴とする請求項5ないし8いずれか1項記載の内視鏡システム。
【請求項11】
前記照明手段は、広帯域光と狭帯域光を被検体に別々に順次照射し、
前記ベース画像生成手段は、広帯域光が照射された被検体を撮像したときの広帯域信号と、狭帯域光が照射されたときの撮像信号からベース画像を生成することを特徴とする請求項2ないし4いずれか1項記載の内視鏡システム。
【請求項12】
前記第1層血管の血管深さ情報と前記第2層血管の血管深さ情報は、狭帯域信号と広帯域信号間の輝度比から求められることを特徴とする請求項11記載の内視鏡システム。
【請求項13】
前記第1層血管は表層血管であり、前記第2層血管は中深層血管であることを特徴とする請求項1ないし12いずれか1項記載の内視鏡システム。
【請求項14】
照明光が照射された被検体を撮像手段で撮像することにより撮像信号を得る電子内視鏡から、前記撮像信号を受信する受信手段と、
前記撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成する画像処理手段を備えることを特徴とする内視鏡システムのプロセッサ装置。
【請求項15】
照明光が照射された被検体を撮像手段で撮像することにより撮像信号を得る電子内視鏡から、前記撮像信号を受信し、
前記撮像信号に基づいて、特定深さにある第1層血管及びこの第1層血管よりも深い位置にある第2層血管のうち少なくとも一方が強調または抑制された血管強調・抑制画像を生成することを特徴とする画像処理方法。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【公開番号】特開2012−152459(P2012−152459A)
【公開日】平成24年8月16日(2012.8.16)
【国際特許分類】
【出願番号】特願2011−15500(P2011−15500)
【出願日】平成23年1月27日(2011.1.27)
【出願人】(306037311)富士フイルム株式会社 (25,513)
【Fターム(参考)】
【公開日】平成24年8月16日(2012.8.16)
【国際特許分類】
【出願日】平成23年1月27日(2011.1.27)
【出願人】(306037311)富士フイルム株式会社 (25,513)
【Fターム(参考)】
[ Back to top ]