説明

画像解析方法および画像解析装置

【課題】大きい分子や不動分子の影響を適材適所に除去するRICSの画像解析方法を提供する。
【解決手段】ステップS1:複数フレームの蛍光画像を時系列的に取得する。各蛍光画像は、ピクセルのデータが時系列的に取得された複数のピクセルからなる。ステップS2:取得した蛍光画像に対して解析領域を設定する。ステップS3:解析領域R2の区分値を算出する。ステップS4:複数の画像を区分値に基づいて一以上のグループに分類する。ステップS5:グループごとに解析領域の平均画像を算出する。ステップS6:グループごとに解析領域の各画像から平均画像を減算して解析領域の新規画像を算出する。ステップS7:グループごとに新規画像に基づいて相関値を演算する。ステップS8:フィッティング式を用いて拡散時間(拡散定数)、分子数等の推定を行う。

【発明の詳細な説明】
【技術分野】
【0001】
本発明は、画像解析方法および画像解析装置に関する。
【背景技術】
【0002】
従来、ラスターイメージ相関分光法(RICS:Raster Image Correlation Spectroscopy)として非特許文献1,2に示すような方法が提案されている。この画像解析方法において、1フレーム以上のラスター走査画像からなる蛍光画像を取得する。つまり、画像解析したい試料において、興味を持っている領域を決め、その領域をラスター走査方式で繰り返し走査し、複数フレームの蛍光強度からなる画像を取得する。フレーム中の蛍光強度はピクセル単位でデータとして表わされている。
【0003】
ここで、画像解析した試料の中には、大きい分子や小さい分子が混在している。このような場合、試料の中で、小さい分子について画像解析したいのであれば、大きい分子の影響を取り除く必要がある。
【先行技術文献】
【非特許文献】
【0004】
【非特許文献1】「Measuring Fast Dynamics in Solutions and Cells with a Laser Scanning Microscope」, Michelle A. Digman, Claire M. Brown, Parijat Sengupta, Paul W. Wiseman, Alan R. Horwitz, and Enrico Gratton, Biophysical Journal, Vol.89, P1317-1327, August 2005.
【非特許文献2】「Fluctuation Correlation Spectroscopy with a Laser-Scanning Microscope: Exploiting the Hidden Time Structure」, Michelle A. Digman, Parijat Sengupta, Paul W. Wiseman, Claire M. Brown, Alan R. Horwitz, and Enrico Gratton, Biophysical Journal: Biophysical Letters, L33-36, 2005.
【発明の概要】
【発明が解決しようとする課題】
【0005】
非特許文献1,2に示されるように、大きい分子や不動分子などの影響を取り除く手法としてアベレージ法がある。アベレージ法では、取得したフレームデータの平均画像を計算し、これを元のフレームデータから減算する。平均画像は、フレームデータに大きい分子や不動分子の影響が含まれているかどうかに関係なく、取得したフレームの連続した一部または全部から計算される。したがって、大きい分子や不動分子の影響は、フレームデータの変化と関係なく、同一の平均画像の減算処理で取り除かれる。
【0006】
ここで、取得した全ての画像に、共通する大きい分子や不動分子が存在する場合、全ての画像から、取得したフレームデータの平均画像を、それぞれ減算すれば良い。
【0007】
しかしながら、取得した全ての画像の内、一部の画像に、他の画像に共通する大きい分子や不動分子が存在しない場合がある。この場合、そもそも、当該一部の画像には大きい分子や不動分子が存在しないのであるから、当該一部の画像から、取得したフレームデータの平均画像を減算するのは適切ではない。このため、非特許文献1,2に示された方法によれば、大きい分子や不動分子の影響について、適材適所な除去(平均画像の減算)処理が行なわれていない。
【0008】
本発明の目的は、大きい分子や不動分子の影響を適材適所に除去するRICSの画像解析方法を提供することである。
【課題を解決するための手段】
【0009】
本発明による画像解析方法は、各画像のピクセルのデータが時系列的に取得された複数のピクセルからなる複数フレームの画像を時系列的に取得する画像取得ステップと、前記画像に対して解析領域を設定する解析領域設定ステップと、前記解析領域の区分値を算出する区分値算出ステップと、前記複数の画像を前記区分値に基づいて一以上のグループに分類する分類ステップと、前記グループごとに前記解析領域の平均画像を算出する平均画像算出ステップと、前記グループごとに前記解析領域の各画像から前記平均画像を減算して前記解析領域の新規画像を算出する新規画像算出ステップと、前記グループごとに前記新規画像に基づいて相関値を演算する演算ステップとを有している。
【発明の効果】
【0010】
本発明によれば、大きい分子や不動分子の影響を適材適所に除去するRICSの画像解析方法が提供される。
【図面の簡単な説明】
【0011】
【図1】本発明の実施形態による画像解析装置を概略的に示している。
【図2】図1に示された制御部の機能ブロックを示している。
【図3】本発明の実施形態による画像解析のフローチャートである。
【図4】時系列的に取得された複数フレームの蛍光画像を示している。
【図5】観察領域と解析領域を示している。
【図6】複数グループに分類された複数フレームの蛍光画像を模式的に示している。
【図7】小さい分子に対するRICSによる空間相関値の算出結果を輝度で示した画像である。
【図8】小さい分子に対するRICSによる空間相関値のフィッティング結果を示している。
【図9】大きい分子に対するRICSによる空間相関値の算出結果を輝度で示した画像である。
【図10】大きい分子に対するRICSによる空間相関値のフィッティング結果を示している。
【発明を実施するための形態】
【0012】
以下、図面を参照しながら本発明の実施形態について説明する。
【0013】
図1は、本発明の実施形態による画像解析装置を概略的に示している。この画像解析装置は、試料の蛍光観察のための走査型共焦点光学顕微鏡をベースに構成されている。
【0014】
図1に示すように、画像解析装置100は、試料Sに励起光を照射する光照射部110と、試料S内の測定点から発せられる光を検出する光検出部130と、画像解析に必要な制御を行なう制御部160と、試料Sを支持する試料ステージ190とを有している。
【0015】
試料Sはマイクロプレートやスライドガラスなどの試料容器に収容され、試料ステージ190に載置される。試料ステージ190は、例えば、試料Sを光照射部110および光検出部130に対して横方向(xy方向)および高さ方向(z方向)に移動可能に支持する。例えば、試料ステージ190は、出力軸が互いに直交する三つのステッピング・モーターを含んでおり、これらのステッピング・モーターによって試料Sをxyz方向に移動し得る。
【0016】
画像解析装置100は、多重光照射・多重光検出型である。このため、光照射部110はnチャンネルの光源系111を含み、これに対応して光検出部130はnチャンネルの検出系131を含んでいる。nチャンネルの検出系131は、それぞれ、nチャンネルの光源系111から射出された励起光によって生成された蛍光を検出する。ここで、nチャンネルは、チャンネル1、チャンネル2、・・・チャンネルnによって構成される。チャンネルは、励起光の種類によってそれぞれ異なる。
【0017】
光照射部110のnチャンネルの光源系111は、光源112a,…,112nとコリメートレンズ114a,…,114nとダイクロイックミラー116a,…,116nとを含んでいる。光源112a,…,112nは、試料Sに含まれる蛍光色素を励起して試料Sから光(蛍光)を発せさせるための励起光を発する。光源112a,…,112nから発せられる励起光の波長は、試料Sに含まれる蛍光色素の種類に対応して、互いに相違している。光源112a,…,112nは、例えば、試料S中の蛍光色素に合った発振波長のレーザー光源で構成される。コリメートレンズ114a,…,114nは、それぞれ、光源112a,…,112nから発せられた励起光をコリメートする。ダイクロイックミラー116a,…,116nは、それぞれ、コリメートレンズ114a,…,114nを通過した励起光を同じ方向に反射する。ダイクロイックミラー116a,…,116nは、それぞれ、図1の上方から入射する励起光を透過し、図1の右方から入射する励起光を反射する。その結果、光源112a,…,112nからそれぞれ射出された異なる波長の励起光は、ダイクロイックミラー116aの通過後に一本のビームに合成される。ダイクロイックミラー116nは、励起光を透過する必要がないので、単なるミラーに変更されてもよい。
【0018】
光照射部110はさらに、ダイクロイックミラー122とガルバノミラー124と対物レンズ126と対物レンズ駆動機構128を含んでいる。ダイクロイックミラー122は、光源系111からの励起光をガルバノミラー124に向けて反射し、試料Sから発せられる蛍光を透過する。ガルバノミラー124は、励起光を対物レンズ126に向けて反射するとともに、その反射方向を変更する。対物レンズ126は、励起光を収束して試料S内の測定点に照射するとともに、試料S内の測定点からの光を取り込む。対物レンズ126には、微小な共焦点領域(測定点)の形成のために、NA(開口数)の大きいものが使用される。これにより得られる共焦点領域の大きさは、直径0.6μm程度、長さ2μm程度の略円筒状となる。ガルバノミラー124は、測定点をxy方向に走査するxy走査手段を構成している。xy走査手段は、ガルバノミラーを使用して構成するほかに、音響光学変調素子(AOM)やポリゴンミラー、ホログラムスキャナーなどを使用して構成してもよい。対物レンズ駆動機構128は、対物レンズ126を光軸に沿って移動させる。これにより、測定点がz方向に移動される。つまり、対物レンズ駆動機構128は、測定点をz方向に走査するz走査手段を構成している。
【0019】
光検出部130は、対物レンズ126とガルバノミラー124とダイクロイックミラー122を光照射部110と共有している。光検出部130はさらに、収束レンズ132とピンホール134とコリメートレンズ136とを含んでいる。収束レンズ132は、ダイクロイックミラー122を透過した光を収束する。ピンホール134は、収束レンズ132の焦点に配置されている。つまり、ピンホール134は、試料S内の測定点に対して共役な位置にあり、測定点からの光だけを選択的に通す。コリメートレンズ136は、ピンホール134を通過した光を平行にする。コリメートレンズ136を通過した光は、nチャンネルの検出系131に入射する。
【0020】
nチャンネルの検出系131は、ダイクロイックミラー138a,…,138nと蛍光フィルター140a,…,140nと光検出器142a,…,142nとを含んでいる。ダイクロイックミラー138a,…,138nは、それぞれ、光源112a,…,112nからの励起光によって試料Sから生成された蛍光の波長域付近の波長の光を選択的に反射する。ダイクロイックミラー138nは、光を透過する必要がないので、単なるミラーに変更されてもよい。蛍光フィルター140a,…,140nは、それぞれ、ダイクロイックミラー138a,…,138nによって反射された光から、不所望な波長成分の光を遮断し、光源112a,…,112nからの励起光によって生成された蛍光だけを選択的に透過する。蛍光フィルター140a,…,140nを透過した蛍光はそれぞれ光検出器142a,…,142nに入射する。光検出器142a,…,142nは、入射した光の強度に対応した信号を出力する。すなわち、光検出器142a,…,142nは、試料S内の測定点からの蛍光強度信号を出力する。
【0021】
制御部160は例えばパーソナルコンピューターで構成される。制御部160は、試料Sの観察領域の蛍光画像の取得と記憶と表示、取得する蛍光画像のフレーム数(枚数)や解析領域の設定の入力待ち、画像解析(相関値の算出)、拡散時間の推定などを行なう。また制御部160は、xy走査手段であるガルバノミラー124、z走査手段である対物レンズ駆動機構128、試料ステージ190などの制御を行なう。
【0022】
図1に示される制御部の機能ブロックを図2に示す。制御部160は、図2に示すように、走査制御部162と画像形成部164と記憶部166と表示部168と入力部170と解析領域設定部172とデータ抽出部176と解析部178とステージ制御部180とを含んでいる。走査制御部162と画像形成部164と記憶部166とステージ制御部180とガルバノミラー124と対物レンズ駆動機構128とステージ190と光検出器142により、画像取得部が構成される。
【0023】
走査制御部162は、試料Sの蛍光画像を取得する際、励起光の照射位置を試料Sに対してラスター走査するようにガルバノミラー124を制御する。走査制御部162はまた、必要であれば、励起光の照射位置を試料Sに対してz走査するように対物レンズ駆動機構128を制御する。画像形成部164は、走査制御部162から入力される励起光の照射位置の情報と光検出器142a,…,142nの出力信号とから試料Sの蛍光画像を形成する。これにより、蛍光画像を取得することができる。記憶部166は、画像形成部164で形成された蛍光画像を順次記憶する。表示部168は、試料Sの蛍光画像や解析結果を表示する。入力部170は、例えばマウスやキーボードを含み、表示部168と共同してGUIを構成する。このGUIは、取得フレーム数や観察領域や解析領域の設定などに利用される。ステージ制御部180は、例えば観察領域を設定するために、入力部170からの入力情報に従って試料ステージ190を制御する。解析領域設定部172は、入力部170からの入力情報に従って解析領域を設定する。データ抽出部176は、解析領域設定部172からの入力情報に基づいて、記憶部166に記憶されている蛍光画像から必要なデータを抽出する。必要なデータは、例えば、記憶部166に記憶されているすべての蛍光画像のすべてのピクセルのデータまたは一部のピクセルのデータであってよく、あるいは、記憶部166に記憶されている一部の蛍光画像のすべてのピクセルのデータまたは一部のピクセルのデータであってもよい。解析部178は、データ抽出部176によって抽出されたデータに対して後述する相関値の演算を行なう。より具体的には、解析部178は、後述する解析領域の区分値を算出し、複数の蛍光画像を区分値に基づいて一以上のグループに分類する。そして、解析部178は、グループごとに、解析領域の平均画像を算出した上で、グループごとに解析領域の各画像から平均画像を減算して解析領域の新規画像を算出する。その後、解析部178は、グループごとに新規画像に基づいて相関値を演算する。
【0024】
図1において、光源112a,…,112nから発せられた励起光は、コリメートレンズ114a,…,114nとダイクロイックミラー116a,…,116nとダイクロイックミラー122とガルバノミラー124と対物レンズ126を経て試料S内の測定点に照射される。励起光が照射される測定点は、ガルバノミラー124によってxy方向にラスター走査される。さらに必要であれば、対物レンズ駆動機構128によってz走査される。励起光を受けた試料Sは測定点から蛍光を発する。試料Sからの光(蛍光のほかに不所望な反射光などを含む)は、対物レンズ126とガルバノミラー124とダイクロイックミラー122と収束レンズ132を経てピンホール134に至る。ピンホール134は測定点と共役な位置にあるため、試料S内の測定点からの光だけがピンホール134を通過する。ピンホール134を通過した光すなわち試料S内の測定点からの光はコリメートレンズ136を経てnチャンネルの検出系131に入射する。nチャンネルの検出系131に入射した光は、ダイクロイックミラー138a,…,138nによって波長に従って分離される(つまり分光される)とともに、蛍光フィルター140a,…,140nによって不所望な成分が除去される。その結果、光源112a,…,112nからの励起光によって生成された蛍光だけが光検出器142a,…,142nにそれぞれ入射する。光検出器142a,…,142nは、それぞれ、入射光すなわち試料S内の測定点から発せられた蛍光の強度を示す蛍光強度信号を出力する。この蛍光強度信号は画像形成部164に入力される。画像形成部164は、1回のラスター走査(およびz走査)ごとに、入力される蛍光強度信号をxy方向(およびz方向)の位置情報に同期させて処理して、試料S内の焦点面(測定点が移動した平面または曲面)の1フレームの蛍光画像を形成する。形成された蛍光画像は、記憶部166に保存される。ここに述べた一連の動作は、設定された取得するフレーム数だけ繰り返され、設定されたフレーム数の蛍光画像が取得される。各蛍光画像は、ピクセルのデータが時系列的に取得された複数のピクセルからなる。
【0025】
記憶部166に保存された蛍光画像は、必要に応じて処理され、表示部168に表示される。例えば、測定点のz位置を変えて複数フレームの蛍光画像を取得し、それらを合成して三次元画像を形成し、これを表示部168に表示することも可能である。
【0026】
以下、図3を参照しながら画像解析の手順について説明する。また、各ステップについて、適宜、図4〜図6を参照しながら説明する。
【0027】
<ステップS1>:
試料Sの観察領域と取得する蛍光画像のフレーム数を設定する。設定した観察領域の蛍光画像を設定したフレーム数だけ取得する。蛍光画像の取得は、同一の観察領域に対して同一の走査方法によって行なう。取得する複数フレームの蛍光画像は、時系列的に取得された画像であり、各画像は、ピクセルのデータが時系列的に取得された複数のピクセルからなる。
【0028】
時系列的に取得された複数フレームの蛍光画像を模式的に図4に示す。図4において、Fは、一つのチャンネルにおけるnフレーム目の蛍光画像を表している。つまり、図4は、80フレームの蛍光画像を取得した例を示している。
【0029】
<ステップS2>:
図5に示すように、取得した蛍光画像の領域(観察領域)R1に対して解析する領域(解析領域)R2を設定する。解析領域R2は、観察領域R1の一部に限定されるものではなく、観察領域R1に一致していてもよい。解析領域R2は、アプリケーション的にはデフォルトで観察領域R1すなわちステップS1における走査領域に設定されている。観察領域R1の全体を解析する場合には、このステップは不要である。
【0030】
<ステップS3>:
解析領域R2の区分値を算出する。区分値は、例えば、解析領域R2のピクセルのデータの統計値であり、解析領域R2のピクセルのデータの最大値、最小値、平均値、相対差、相対比のいずれかである。ピクセルのデータは、例えば、2次元または3次元の観察領域から得られた蛍光強度である。相対差は、例えば、最大値と最小値との差である。
【0031】
続く説明では、蛍光画像F,…,F20の解析領域の区分値はDであり、蛍光画像F21,…,F50の解析領域の区分値は、Dとは大きく異なるDであり、蛍光画像F51,…,F80の解析領域の区分値はDであるとする。
【0032】
<ステップS4>:
複数の画像を区分値に基づいて一以上のグループに分類する。例えば、区分値が大きく変化する前後で画像をグループ分けする。グループの数は、区分値の変化の仕方に応じて決まる。
【0033】
複数グループに分類された複数フレームの解析領域の蛍光画像を模式的に図6に示す。図6において、Faはnフレーム目の蛍光画像の解析領域の画像を表している。図6は、図4に示した蛍光画像F,…,F80の解析領域の画像Fa,…,Fa80を二つのグループG,Gに分類した例を示している。図6では、画像Fa,…,Fa20と画像Fa51,…,Fa80がグループGに分類され、画像Fa21,…,Fa50がグループGに分類されている。
【0034】
<ステップS5>:
グループごとに解析領域の平均画像を算出する。平均画像は、各グループに含まれる全ての画像の平均値であってもよく、または各グループに含まれる一部の画像の平均値であってもよい。例えば、平均画像の算出は、各グループに含まれる画像の数を算出し、算出した画像の数に基づいて各グループの平均画像を算出する。
【0035】
より具体的には、各グループに含まれる全ての画像について、解析領域を構成するピクセルごとに、ピクセルのデータの平均値を算出する。そして、ピクセルごとに算出された各ピクセルのデータの平均値からなる画像を平均画像としてよい。
【0036】
続く説明では、グループGに含まれる画像Fa,…,Fa20と画像Fa51,…,Fa80の平均画像をAとし、グループGに含まれる画像Fa21,…,Fa50の平均画像をAとする。
【0037】
画像Fa,…,Fa20と画像Fa51,…,Fa80から一つの平均画像Aを算出する代わりに、画像Fa,…,Fa20からは平均画像Aa1を算出し、画像Fa51,…,Fa80からは別の平均画像Aa2を算出してもよい。
【0038】
<ステップS6>:
グループごとに解析領域の各画像から平均画像を減算して解析領域の新規画像を算出する。ここで、解析領域の各画像から平均画像を減算するには、例えば、解析領域を構成するピクセルごとに、各画像のピクセルのデータから平均画像のピクセルのデータを減算し、算出された値からなる画像を得ればよい。
【0039】
nフレーム目の解析領域の新規画像をFbとする。グループGに含まれる画像Fa,…,Fa20,Fa51,…,Fa80に対しては、Fb=Fa−A,…,Fb20=Fa20−A,Fa51=Fa51−A,…,Fa51=Fa20−Aによって、新規画像Fb,…,Fb20,Fb51,…,Fb80を算出し、グループGに含まれる画像Fa21,…,Fa50に対しては、Fb21=Fa21−A,…,Fb50=Fa50−Aによって、新規画像Fb21,…,Fb50を算出する。
【0040】
新規画像Fb,…,Fb20,Fb51,…,Fb80を算出するために、各画像Fa,…,Fa20,Fa51,…,Fa80から共通のA,を減算する代わりに、各画像Fa,…,Fa20からは前述した平均画像Aa1を減算し、各画像Fa51,…,Fa80からは前述した平均画像Aa2を減算してもよい。
【0041】
<ステップS7>:
グループごとに新規画像に基づいて相関値を演算する。相関値の演算に使用する各ピクセルのデータは、そのピクセルのデータそのものであってもよいし、そのピクセルを含む複数のピクセルのデータの統計値であってもよい。複数のピクセルは、たとえば、注目のピクセルおよびこれに隣接するピクセルであってよい。統計値は、たとえば、ピクセルのデータの平均値、最大値、最小値、相対差、絶対差、相対比のいずれかであってよい。どのような統計値を使用するかは、RICSの解析によってどのような情報を得たいかによって決める。
【0042】
相関値の演算は、例えば、グループごとにピクセルのデータの最小値を算出し、算出した最小値を新規画像の全てのピクセルのデータに加算し、最小値を加算した新規画像について相関値を演算する。この処理によって、新規画像のピクセルのデータが全て正になる。ここでは、新規画像のピクセルのデータを全て正にするために、最小値を加算する例をあげたが、加算する値は最小値に限らず、最小値よりも大きい任意の値を加算すればよい。
【0043】
また相関値の演算は、ピクセルのデータに基づいて画像をそれぞれ構成し直し、構成し直した画像について相関値を演算してもよい。例えば、隣のピクセルのデータ同士を足して、ピクセルのデータの数を半分にする。または、一つのピクセルのデータを複数に分割する。本来ならば、一度画像を取得するとピクセルのデータの数は増えないが、取得したピクセルのデータの強度がそのピクセルのデータの周囲にガウシアン分布で広がっていると仮定して、本来取得できていないピクセルのデータを補う。本質的にピクセルのデータの数が増えている訳ではないが、見た目が良くなる。
【0044】
相関値の演算は、例えば、次式(1)を用いて空間自己相関値を算出する。
【数1】

【0045】
ここで、GsaはRICSの空間自己相関値、Iはピクセルのデータ、x,yは測定点の空間的座標、ξ,ψは測定点からの空間的座標の変化量、M11はデータ積和計算の回数、Mはデータ総数である。
【0046】
または、相関値の演算は、例えば、次式(2)を用いて空間相互相関値を算出する。
【数2】

【0047】
ここで、GscはRICSの空間相互相関値、Iはチャンネル1のピクセルのデータ、Iはチャンネル2のピクセルのデータ、x,yは測定点の空間的座標、ξ,ψは測定点からの空間的座標の変化量、M12はデータ積和計算の回数、Mはチャンネル1のデータ総数、Mはチャンネル2のデータ総数である。式(2)は、チャンネル1とチャンネル2との間の空間相互相関値の算出式であるが、チャンネルは適宜変更されてよい。
【0048】
さらに、各新規画像に基づいて算出された相関値を平均化する。
【0049】
nフレーム目の解析領域の新規画像Fbに基づいて算出した相関値をGsnとする。そして、平均の相関値Gを、G=(Gs1+Gs2+…+Gs79+Gs80)/80によって算出する。
【0050】
<ステップS8>:
上記ステップS7の空間相関値の算出結果を式(3)によってフィッティングする。
【数3】

【0051】
ここで、GはRICSの空間相関値、SはRICSの解析におけるスキャンの影響、GはRICSの解析における時間遅延の影響、Dは拡散定数、ξ,ψは測定点からの空間的座標の変化量、δrはピクセルサイズ、Nは分子数、Wは励起レーザビームの横方向の半径、Wは励起レーザビームの縦方向の半径、τはピクセル時間、τはライン時間、γは任意の定数である。
【0052】
なお、γについては、システムに応じて適宜設定することができる。例えば、γ=1としてフィッティングしてよい。
【0053】
また、ピクセル時間とは、ピクセル間の取得時間のずれを意味する。また、ライン時間とは、任意のラインの最初のピクセルと、その次のラインの最初のピクセルと、の間の取得時間のずれを意味する。すなわち、ライン時間は、一ライン走査するのに要する時間を意味する。
【0054】
このように式(3)を用いてフィッティングすることで、拡散時間の推定をする。具体的には、式(1)または式(2)を用いて、異なる遅延時間に対する相関値Gsaまたは相関値Gscをそれぞれ求める。ここで、遅延時間とは、一の画素の取得時間と、別の画素の取得時間と、の差を意味している。例えば、(ξ,ψ)=(1,1)と、(ξ,ψ)=(4,2)と、の遅延時間は、(4−1)τ+(2−1)τで表される。
【0055】
ここで、式(3)において、遅延時間がゼロのときは(ξ=0、ψ=0)、Sは1であり、Gは1/Nで表せる。従って、分子数を求めることができる。これを新たに、式(3)に代入する。
【0056】
そして、未知数である拡散定数Dを変動させながら、測定値として得られる相関値Gsaまたは相関値Gscと、理論値として得られるGと、の差が最小となるように、適切な拡散定数Dを求める。このように、式(3)によるフィッティングとは、拡散定数Dを変動させながら、2次元または3次元の観察領域における、最適な、分子数または拡散定数を推定することである。
【0057】
そして、拡散定数からは、拡散時間を求めることができる。
【0058】
すなわち、拡散定数と、拡散時間との関係は、次式(4)で表される。
【数4】

【0059】
ここで、Dは拡散定数、τは拡散時間、Wは励起レーザビームの横方向の半径を意味する。
【0060】
<ステップS9>:
解析結果を表示するとともに適宜保存する。具体的には、ステップS7で得た空間相関値の算出結果と、ステップS8で得た空間相関値のフィッティング結果を表示する。解析結果の一例を図7〜図10に示す。図7は、小さい分子に対する空間相関値の算出結果を輝度で示した画像であり、図8は、そのフィッティング結果を示している。また図9は、大きい分子に対する空間相関値の算出結果を輝度で示した画像であり、図10は、そのフィッティング結果を示している。
【0061】
このように本実施形態では、RICSのような画像データを計算の元とする空間的相関解析において、複数フレームの画像をフレームデータの変化に応じていくつかのグループに分類し、グループごとに平均画像の減算処理を行なっている。つまり、異なる大きい分子や不動分子の影響が混在するフレームから一つの平均画像を算出して減算処理することを避け、大きい分子や不動分子の影響を事前に分類し、分類したグループごとに平均画像を算出して減算処理している。これにより、フレームデータの変化に応じたグループごとに、大きい分子や不動分子の影響が適材適所に除去される。
【0062】
これまで、図面を参照しながら本発明の実施形態を述べたが、本発明は、これらの実施形態に限定されるものではなく、その要旨を逸脱しない範囲において様々な変形や変更が施されてもよい。
【0063】
また実施形態では、ラスター走査によって取得された画像について説明したが、画像は、ラスター走査によって取得されたものに限定されるものではなく、ピクセルのデータが時系列的に取得された複数のピクセルからなる画像であればよく、他の走査方法によって取得されたものであってもよい。
【符号の説明】
【0064】
100…画像解析装置、110…光照射部、112a,…,112n…光源、114a,…,114n…コリメートレンズ、116a,…,116n…ダイクロイックミラー、122…ダイクロイックミラー、124…ガルバノミラー、126…対物レンズ、128…対物レンズ駆動機構、130…光検出部、132…収束レンズ、134…ピンホール、136…コリメートレンズ、138a,…,138n…ダイクロイックミラー、140a,…,140n…蛍光フィルター、142a,…,142n…光検出器、160…制御部、162…走査制御部、164…画像形成部、166…記憶部、168…表示部、170…入力部、172…解析領域設定部、176…データ抽出部、178…解析部、180…ステージ制御部、190…試料ステージ、R1…観察領域、R2…解析領域。

【特許請求の範囲】
【請求項1】
各画像のピクセルのデータが時系列的に取得された複数のピクセルからなる複数フレームの画像を時系列的に取得する画像取得ステップと、
前記画像に対して解析領域を設定する解析領域設定ステップと、
前記解析領域の区分値を算出する区分値算出ステップと、
前記複数の画像を前記区分値に基づいて一以上のグループに分類する分類ステップと、
前記グループごとに前記解析領域の平均画像を算出する平均画像算出ステップと、
前記グループごとに前記解析領域の各画像から前記平均画像を減算して前記解析領域の新規画像を算出する新規画像算出ステップと、
前記グループごとに前記新規画像に基づいて相関値を演算する演算ステップとを有している画像解析方法。
【請求項2】
前記区分値は、前記解析領域のピクセルのデータの最大値、最小値、平均値、相対差、相対比のいずれかである、請求項1に記載の画像解析方法。
【請求項3】
前記ピクセルのデータは、2次元または3次元の観察領域から得られた蛍光強度である、請求項1または2に記載の画像解析方法。
【請求項4】
前記演算ステップは、前記グループごとに前記ピクセルのデータの最小値を算出し、算出した最小値を前記新規画像の全てのピクセルのデータに加算し、前記最小値を加算した新規画像について相関値を演算する、請求項1ないし請求項3のいずれかひとつに記載の画像解析方法。
【請求項5】
前記平均画像算出ステップは、各グループに含まれる画像の数を算出し、算出した画像の数に基づいて各グループの平均画像を算出する、請求項1ないし4のいずれかひとつに記載の画像解析方法。
【請求項6】
前記演算ステップは、前記ピクセルのデータに基づいて、前記複数の画像をそれぞれ構成し直し、構成し直した画像について相関値を演算する、請求項1ないし5のいずれかひとつに記載の画像解析方法。
【請求項7】
前記画像は、走査型顕微鏡によって得られたものである、請求項1ないし6のいずれかひとつに記載の画像解析方法。
【請求項8】
前記演算ステップは、次式(1)または次式(2)を用いて、2次元または3次元の観察領域の相関演算を行う、
【数1】

ここで、GsaはRICSの空間自己相関値、Iはピクセルのデータ、x,yは測定点の空間的座標、ξ,ψは測定点からの空間的座標の変化量、M11はデータ積和計算の回数、Mはデータ総数であり、
【数2】

ここで、GscはRICSの空間相互相関値、Iはチャンネル1のピクセルのデータ、Iはチャンネル2のピクセルのデータ、x,yは測定点の空間的座標、ξ,ψは測定点からの空間的座標の変化量、M12はデータ積和計算の回数、Mはチャンネル1のデータ総数、Mはチャンネル2のデータ総数である、請求項1ないし請求項7のいずれかひとつに記載の画像解析方法。
【請求項9】
前記演算ステップは、次式(3)を用いて、前記空間相関値の算出結果をフィッティングする、
【数3】

ここで、GはRICSの空間相関値、SはRICSの解析におけるスキャンの影響、GはRICSの解析における時間遅延の影響、Dは拡散定数、ξ,ψは測定点からの空間的座標の変化量、δrはピクセルサイズ、Nは分子数、Wは励起レーザビームの横方向の半径、Wは励起レーザビームの縦方向の半径、τはピクセル時間、τはライン時間、γは任意の定数である、請求項8に記載の画像解析方法。
【請求項10】
各画像のピクセルのデータが時系列的に取得された複数のピクセルからなる複数フレームの画像を時系列的に取得する画像取得手段と、
前記画像に対して解析領域を設定する解析領域設定手段と、
前記解析領域の区分値を算出する区分値算出手段と、
前記複数の画像を前記区分値に基づいて一以上のグループに分類し、前記グループごとに前記解析領域の平均画像を算出し、前記グループごとに前記解析領域の画像から前記平均画像を減算して前記解析領域の新規画像を算出し、前記新規画像について相関値を演算する演算手段とを有している、画像解析装置。
【請求項11】
前記区分値は、前記解析領域のピクセルのデータの最大値、最小値、平均値、相対差、相対比のいずれかである、請求項10に記載の画像解析装置。
【請求項12】
前記ピクセルのデータは、2次元または3次元の観察領域から得られた蛍光強度である、請求項10または11に記載の画像解析装置。
【請求項13】
前記演算ステップは、前記グループごとに前記ピクセルのデータの最小値を算出し、算出した最小値を前記新規画像の全てのピクセルのデータに加算し、前記最小値を加算した新規画像について相関値を演算する、請求項10ないし12のいずれかひとつに記載の画像解析装置。
【請求項14】
前記演算手段は、各グループに含まれる画像の数を算出し、前記画像の数に基づいて前記グループごとに前記平均画像を算出する、請求項10ないし13のいずれかひとつに記載の画像解析装置。
【請求項15】
前記演算ステップは、前記ピクセルのデータに基づいて、前記複数の画像をそれぞれ構成し直し、構成し直した画像について相関値を演算する、請求項10ないし14のいずれかひとつに記載の画像解析装置。
【請求項16】
前記画像は、走査型顕微鏡によって得られたものである、請求項10ないし15のいずれかひとつに記載の画像解析装置。
【請求項17】
前記演算手段は、次式(1)と次式(2)に基づいて、2次元または3次元の観察領域の分子数または拡散定数を推定する、
【数4】

ここで、GsaはRICSの空間自己相関値、Iはピクセルのデータ、x,yは測定点の空間的座標、ξ,ψは測定点からの空間的座標の変化量、M11はデータ積和計算の回数、Mはデータ総数であり、
【数5】

ここで、GscはRICSの空間相互相関値、Iはチャンネル1のピクセルのデータ、Iはチャンネル2のピクセルのデータ、x,yは測定点の空間的座標、ξ,ψは測定点からの空間的座標の変化量、M12はデータ積和計算の回数、Mはチャンネル1のデータ総数、Mはチャンネル2のデータ総数である、請求項10ないし16のいずれかひとつに記載の画像解析装置。
【請求項18】
前記演算手段は、次式(3)を用いて、前記空間相関値の算出結果をフィッティングする、
【数6】

ここで、GはRICSの空間相関値、SはRICSの解析におけるスキャンの影響、GはRICSの解析における時間遅延の影響、Dは拡散定数、ξ,ψは測定点からの空間的座標の変化量、δrはピクセルサイズ、Nは分子数、Wは励起レーザビームの横方向の半径、Wは励起レーザビームの縦方向の半径、τはピクセル時間、τはライン時間、γは任意の定数である、請求項17に記載の画像解析装置。

【図1】
image rotate

【図2】
image rotate

【図3】
image rotate

【図4】
image rotate

【図5】
image rotate

【図6】
image rotate

【図7】
image rotate

【図8】
image rotate

【図9】
image rotate

【図10】
image rotate


【公開番号】特開2010−281735(P2010−281735A)
【公開日】平成22年12月16日(2010.12.16)
【国際特許分類】
【出願番号】特願2009−136395(P2009−136395)
【出願日】平成21年6月5日(2009.6.5)
【出願人】(000000376)オリンパス株式会社 (11,466)
【Fターム(参考)】