画像処理装置
【課題】複数の標本の時間的な変化を簡単に比較することができるようにする。
【解決手段】培養観察装置には、所定の容器の観察位置の細胞を所定の時間間隔で撮像して得られた観察画像群が複数記録されている。ユーザにより、これらの観察画像群のうちのいくつかが選択されると、培養観察装置には、マルチポイント表示画面３３１が表示される。マルチポイント表示画面３３１には、観察画像群が表示される表示領域３４１が複数並べられて設けられており、この表示領域３４１のそれぞれに、選択された観察画像群の観察画像のそれぞれが時系列で順番に表示される。本発明は、細胞培養観察装置に適用することができる。
【解決手段】培養観察装置には、所定の容器の観察位置の細胞を所定の時間間隔で撮像して得られた観察画像群が複数記録されている。ユーザにより、これらの観察画像群のうちのいくつかが選択されると、培養観察装置には、マルチポイント表示画面３３１が表示される。マルチポイント表示画面３３１には、観察画像群が表示される表示領域３４１が複数並べられて設けられており、この表示領域３４１のそれぞれに、選択された観察画像群の観察画像のそれぞれが時系列で順番に表示される。本発明は、細胞培養観察装置に適用することができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像処理装置に関し、特に、タイムラプス観察で得られる観察画像を表示するのに好適な画像処理装置に関する。
【背景技術】
【０００２】
培養細胞を用いた実験、特に癌細胞に対する抗癌剤の効果の観察や、初代培養細胞の培養方法の検討においては、複数のシャーレ、ウェルプレートなどの容器が用いられ、観察条件の異なる細胞の時間的な変化が比較される。
【０００３】
すなわち、１つのシャーレ、またはウェルプレートの１つのウェルが１つのサンプルとされて、複数のサンプルのそれぞれに観察対象の標本である細胞が均一に撒かれる。そして、細胞が撒かれたサンプルのそれぞれに、異なる薬剤が添加されたり、同じ薬剤が異なる濃度で添加されたりして、各サンプル内の細胞がタイムラプス観察される。
【０００４】
例えば、従来の細胞培養装置には、サンプルごとにタイムラプス観察を行い、各時刻におけるサンプル内の細胞の観察画像を撮像する機能を有するものがある（例えば、特許文献１参照）。この細胞培養装置によれば、ユーザは、所望のサンプルの各時刻の観察画像を順番に表示させて比較することで、時間とともにどのように細胞が変化するかを把握することができる。
【０００５】
【特許文献１】特開２００２−２７７７５４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、上述した技術では、ユーザは、所望する１つのサンプル内の標本の時間的な変化を知ることはできるが、観察条件の異なる複数のサンプル内の標本のそれぞれの時間的な変化を比較することは困難であった。例えば、ユーザは、細胞培養装置を操作して、観察画像をサンプルごとに順番に表示させて各標本を比較しなければならないため、所定のサンプルの標本の観察画像が表示されているときに、他のサンプルの標本の状態を確認することができなかった。
【０００７】
本発明は、このような状況に鑑みてなされたものであり、複数のサンプルの標本の時間的な変化を簡単に比較することができるようにするものである。
【課題を解決するための手段】
【０００８】
本発明の画像処理装置は、所定の位置の容器の所定の観察位置にある観察対象の標本を撮像して得られた、撮像時刻の異なる複数の観察画像からなる観察画像群を選択する選択手段と、選択された複数の前記観察画像群の前記観察画像が、前記観察画像群ごとに並べられて表示されるように、前記観察対象の位置関係に対応する表示位置に、それぞれ前記観察画像群の観察画像を時系列で順番に表示させる表示制御手段とを備えることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、複数の標本の時間的な変化をより簡単に比較することができる。
【発明を実施するための最良の形態】
【００１０】
以下、図面を参照して、本発明を適用した実施の形態について説明する。
【００１１】
図１は、本発明を適用した培養観察装置の一実施の形態の構成例を示すブロック図である。
【００１２】
培養観察装置１１は、例えば、観察対象の標本である細胞を培養するとともに、その細胞をタイムラプス観察する細胞培養観察装置である。培養観察装置１１は、容器保持部２１、ステージ２２、観察部２３、記録部２４、入力部２５、制御部２６、表示制御部２７、表示部２８、動画像生成部２９、および通信部３０から構成される。
【００１３】
容器保持部２１は、細胞の培養室などからなり、観察対象となる細胞の入った容器を保持している。例えば、容器保持部２１に保持される容器は、シャーレやウェルプレートなどとされ、容器保持部２１は、それらの容器を所定の温度や湿度に保たれた培養室内に保持し、容器内の細胞を培養する。
【００１４】
また、容器保持部２１は、制御部２６の指示に応じて、培養室に保持している複数の容器のうちの所定の容器をステージ２２上に載置したり、ステージ２２に載置されている容器を容器保持部２１に設けられた培養室内に格納したりする。
【００１５】
ステージ２２は、制御部２６の指示に応じて駆動することで、ステージ２２上に載置されている容器を移動させる。観察部２３は、ステージ２２に載置された容器内の細胞を照明光で照明したり、容器内の細胞からの観察光を結像させたりする光学系や、細胞の画像を撮像するカメラなどからなり、制御部２６の指示に応じて容器内の細胞の観察画像を撮像する。
【００１６】
記録部２４は、観察部２３により撮像された観察画像や、細胞の観察条件などの各種の情報、制御部２６により実行されるプログラム等を記録する。入力部２５は、マウスやボタン、タッチパネルなどからなり、ユーザの操作に応じた信号を制御部２６に供給する。
【００１７】
制御部２６は、培養観察装置１１の全体を制御する。例えば、制御部２６は、容器保持部２１、ステージ２２、および観察部２３を制御して、容器保持部２１に保持されている容器内の細胞の観察画像を所定の時間間隔で撮像させたり、観察部２３から観察画像を取得して記録部２４に記録させたりする。また、制御部２６は、表示制御部２７に記録部２４に記録されている観察画像の表示を指示したり、動画像生成部２９に複数の観察画像が同時に表示される動画像の動画像ファイルの生成を指示したりする。
【００１８】
さらに、制御部２６は、再生位置調整部４１を備えている。再生位置調整部４１は、入力部２５からの信号に応じて、観察画像を撮像時刻順に時系列で表示させるときの先頭の撮像画像を示す再生開始位置情報を生成する。
【００１９】
表示制御部２７は、制御部２６からの指示に応じて、表示部２８への画像の表示を制御する。例えば、表示制御部２７は、記録部２４に記録されている観察画像を表示部２８に供給して表示させる。表示部２８は、例えば液晶ディスプレイなどからなり、表示制御部２７から供給された画像を表示する。
【００２０】
動画像生成部２９は、制御部２６の指示に応じて、表示制御部２７から複数の観察画像を取得し、取得した観察画像が並べられて表示される１つの動画像の動画像ファイルを生成する。通信部３０は、通信網を介して培養観察装置１１に接続されている他の装置と通信し、他の装置と各種の情報の授受を行う。
【００２１】
ところで、培養観察装置１１では複数の容器が保持されており、それらの容器では細胞が培養されている。例えば、ユーザは入力部２５を操作して、所望の容器の所定の観察位置と、細胞の観察条件とを指定することで、指定した観察位置の細胞をタイムラプス観察させることができる。
【００２２】
ここで、容器としてのシャーレ、またはウェルプレートの１つのウェルを１つのサンプルと呼ぶこととすると、まず、ユーザは入力部２５を操作することで、観察対象とする細胞の入った容器のサンプルを指定し、さらに必要に応じてサンプル内の所望する位置を観察位置として指定する。
【００２３】
次に、ユーザは入力部２５を操作し、観察条件として、例えば細胞の観察画像を撮像する時間間隔（インターバル）、観察開始時刻、観察終了時刻、蛍光観察や位相差観察などの観察方法、観察に用いる対物レンズの倍率などを指定する。
【００２４】
このようにユーザにより、観察位置と観察条件とが指定されると、制御部２６は、ユーザの操作に応じて入力部２５から供給された信号に基づいて、培養観察装置１１の各部を制御し、指定された観察位置（サンプル）の指定された観察条件での観察を行う。
【００２５】
すなわち、容器保持部２１は、制御部２６により指定された容器を移動させてステージ２２上に載置し、ステージ２２は、ステージ２２上の容器の観察位置が観察部２３としてのカメラの視野内に入るように、制御部２６により指定された位置に移動する。また、観察部２３は、制御部２６の制御に基づいて、ユーザにより指定された時間間隔で観察位置にある細胞の観察画像を撮像する。
【００２６】
観察部２３により撮像された観察画像が、観察部２３から制御部２６に供給されると、制御部２６は、指定されたサンプルのサンプル名と観察位置、観察部２３から供給された観察画像、および入力部２５から供給された、ユーザにより入力された観察条件を記録部２４に供給する。そして、制御部２６は、記録部２４に供給したサンプル名、観察位置、観察画像、および観察条件を、タイムラプス観察を行った１つのサンプルに関する情報であるサンプル情報として記録部２４に記録させる。
【００２７】
このとき、制御部２６は、必要に応じて容器保持部２１から、サンプル（細胞）の他の観察条件、より詳細には細胞の培養に関する情報、例えば観察対象の標本名、培養室内の温度、培養室内の湿度、サンプルに添加した試薬、試薬の添加時刻、試薬の濃度などの情報を取得して記録部２４に供給し、サンプル情報として記録させる。
【００２８】
また、制御部２６は、必要に応じて、所定の解析プログラムを実行して観察部２３からの観察画像を対象とする解析を行い、その解析結果を記録部２４に供給してサンプル情報として記録させる。例えば、観察画像を対象とする解析により、観察画像内で確認された細胞の数、細胞からの蛍光の強度の時間的な変化、細胞の増殖率などの情報が得られる。
【００２９】
さらに、制御部２６は、入力部２５から供給された、ユーザが入力したタイムラプス観察時のコメント等を記録部２４に供給してサンプル情報として記録させる。したがって、指定されたサンプルのタイムラプス観察が行われると、記録部２４には、サンプル名、観察位置、各時刻の観察画像からなる観察画像群、観察条件、解析結果、入力されたコメントなどの情報が、互いに関連付けられてサンプル情報として記録される。
【００３０】
このように、ユーザが入力部２５を操作して所定のサンプル、より詳細にはサンプル内の細胞のタイムラプス観察を指示すると、指定されたサンプルのタイムラプス観察が行われ、そのサンプルのサンプル情報が記録される。なお、タイムラプス観察時に、例えば、位相差観察および蛍光観察の両方の観察方法で細胞が観察された場合には、位相差観察により得られた観察画像群と、蛍光観察により得られた観察画像群とが互いに関連付けられて、１つのサンプル情報として記録される。また、位相差観察により得られた観察画像群と、蛍光観察により得られた複数の観察画像群、例えば波長の異なる複数の蛍光の観察画像群とが互いに関連付けられて、１つのサンプル情報として記録されてもよい。
【００３１】
このようにして記録部２４に各サンプルのサンプル情報が蓄積されると、ユーザは、記録されているいくつかのサンプル情報の観察画像群を指定して、それらの観察画像群の観察画像を、１つの表示画面に観察画像群ごとに並べて時系列に表示させることができる。なお、以下、１つの表示画面に複数の観察画像を並べて、それらの観察画像を時系列に表示する表示方法をマルチポイント表示とも称する。
【００３２】
次に、図２および図３のフローチャートを参照して、培養観察装置１１が観察画像をマルチポイント表示する処理であるマルチポイント表示処理について説明する。
【００３３】
ステップＳ１１において、制御部２６は、入力部２５からの信号に応じて容器を選択する。すなわち、マルチポイント表示処理が開始されると、表示制御部２７は、制御部２６からの指示に応じて表示部２８を制御し、培養観察装置１１において培養中である細胞の入った容器の一覧を表示部２８に表示させる。
【００３４】
これにより、例えば表示部２８には、図４に示す容器一覧画面６１が表示される。容器一覧画面６１には、培養観察装置１１の培養室に格納されている容器を示すボタン、より詳細には容器が配置される位置を示すボタンが、培養室内の容器と同じ配列で並べられている。そして、それらのボタンのうち、細胞の培養が行われている容器を示すボタン７１−１乃至ボタン７１−８は、他のボタンと異なる色で表示されている。また、ボタン７１−１乃至ボタン７１−８には、ユーザにより入力された容器の名前や、その容器を用いて行われている実験名、実験開始日など、容器を特定する文字が表示されている。なお、以下、ボタン７１−１乃至ボタン７１−８のそれぞれを個々に区別する必要のない場合、単にボタン７１と称する。
【００３５】
また、容器一覧画面６１の図中、左下には、各種の機能を実行させるときに操作される機能ボタン７２が表示されている。
【００３６】
このような容器一覧画面６１が表示されている状態で、ユーザが入力部２５を操作して、ボタン７１を選択すると、制御部２６は、ユーザの操作に応じてボタン７１により特定される容器を選択し、その容器の詳細を示す画面の表示を表示制御部２７に指示する。すると、表示制御部２７は、制御部２６からの指示に応じて、例えば、図５に示す画面を表示部２８に表示させる。
【００３７】
図５に示す画面では、中央に選択されたボタン７１により特定される容器の画像が表示されており、図５の例では、容器として円形の６つのウェルを有するウェルプレートが表示されている。また、画面の図中、左下には、表示部２８に表示される画面を、直前に表示されていた容器一覧画面６１に切り換えるボタン１０１が設けられており、ボタン１０１の図中、右側には、表示されている容器のサンプルの一覧を表示させるボタン１０２が設けられている。
【００３８】
ユーザが入力部２５を操作してボタン１０２を選択すると、制御部２６は表示制御部２７にサンプルの一覧の表示を指示する。そして、表示制御部２７は、制御部２６の指示に応じて表示部２８に選択されている容器のサンプルの一覧を表示させる。
【００３９】
これにより、表示部２８には、例えば図６に示すサンプル一覧画面１３１が表示される。サンプル一覧画面１３１には、選択された容器に設けられたサンプル、すなわち図５に表示されたウェルプレートの６つのウェルのそれぞれを示す番号１乃至６と、サンプルを特定するサンプル名１４１−１乃至サンプル名１４１−６とが図中、縦方向に並べられて表示されている。これらのサンプル名１４１−１乃至サンプル名１４１−６のそれぞれは、より詳細にはサンプル名が表示されたボタンとされており、サンプルを選択するときに操作される。なお、以下、サンプル名１４１−１乃至サンプル名１４１−６のそれぞれを個々に区別する必要のない場合、単にサンプル名１４１と称する。
【００４０】
また、サンプル一覧画面１３１には、サンプル名１４１の図中、左側に各サンプルを選択するチェックボックス１４２−１乃至チェックボックス１４２−６が設けられている。これらのチェックボックス１４２−１乃至チェックボックス１４２−６が操作されて、チェック記号が表示されると、対応するサンプル名１４１−１乃至サンプル名１４１−６により特定されるサンプルが選択される。なお、以下、チェックボックス１４２−１乃至チェックボックス１４２−６のそれぞれを個々に区別する必要のない場合、単にチェックボックス１４２と称する。
【００４１】
ユーザは、入力部２５を操作して、これらのチェックボックス１４２のうちの所望のものを操作して対応するサンプルを選択し、さらにサンプル一覧画面１３１の図中、左側に設けられたボタン１４３を操作すると、選択されたサンプルの観察画像を一覧表示させることができる。すなわち、ボタン１４３が操作されると、制御部２６はユーザの操作に応じて、表示制御部２７に、選択されているサンプルの最後に撮像された観察画像、つまり撮像時刻の最も新しい観察画像の表示を指示する。そして、表示制御部２７は、制御部２６からの指示に応じて、表示部２８に選択されたサンプルの最後に撮像された観察画像のそれぞれを並べて表示させる。
【００４２】
また、ユーザは文字“select all”が表示されているボタン１４４を操作することで、全てのチェックボックス１４２にチェック記号を表示させ、それらのチェックボックス１４２に対応するサンプルを選択させることができる。
【００４３】
このように、図５に示した画面が表示されている状態で、ボタン１０２が操作されると、容器のサンプルを選択するためのサンプル一覧画面１３１が表示される。なお、サンプル一覧画面１３１を表示させるには、必ずしも容器一覧画面６１において容器を示すボタン７１を選択する必要はなく、例えば容器一覧画面６１において機能ボタン７２を操作し、所定の条件を満たす容器の検索を行うことでもサンプル一覧画面１３１を表示させることができる。
【００４４】
すなわち、機能ボタン７２が操作されると、制御部２６は入力部２５からの信号に応じて、表示制御部２７に機能一覧画面の表示を指示する。すると、表示制御部２７は、制御部２６からの指示に応じて表示部２８に、例えば図７に示す機能一覧画面１７１を表示させる。
【００４５】
機能一覧画面１７１には、各種の機能を実行させるためのボタンや、機能一覧画面１７１を閉じるときに操作されるボタン１８１が設けられている。例えば、各種の機能を実行させるボタンとして、所定の条件を満たす容器を検索するための検索ボタン１８２が設けられている。ユーザが入力部２５を操作して検索ボタン１８２を選択（操作）すると、制御部２６は、ユーザの操作に応じて、容器を検索するときの検索条件を入力する検索条件入力画面の表示を表示制御部２７に指示する。すると、表示制御部２７は、制御部２６からの指示に応じて、表示部２８に、例えば図８に示す検索条件入力画面２１１を表示させる。
【００４６】
検索条件入力画面２１１には、培養者を選択するボタン、サンプル名を入力する入力欄、および容器に入れられた細胞の種類を選択するときに操作されるボタンが設けられている。また、検索条件入力画面２１１には、サンプル内の細胞の培養開始日を指定するプルダウンボックス、容器の種類を選択するときに操作されるボタン、およびその他の条件を指定するときに操作されるボタンが設けられている。
【００４７】
ユーザは、入力部２５を操作して、これらのプルダウンボックスやボタンなどを操作することで、検索条件を入力する。
【００４８】
また、検索条件入力画面２１１には、検索を実行させるときに操作されるボタン２２１や、検索条件入力画面２１１を閉じるときに操作されるボタン２２２が設けられている。例えば、ユーザが入力部２５を操作して検索条件入力画面２１１に検索条件を入力し、さらにボタン２２１を操作すると、制御部２６は、入力された検索条件、および記録部２４に記録されているサンプル情報に基づいて、容器保持部２１に格納されている容器のうち、入力された検索条件を満たす容器を検索する。そして、制御部２６は、検索により特定された容器について、その容器のサンプルの一覧を示すサンプル一覧画面１３１の表示を表示制御部２７に指示する。これにより、表示部２８には、検索条件を満たす容器のサンプル一覧画面１３１が表示される。
【００４９】
このように、検索条件入力画面２１１が表示されて、入力された検索条件を満たす容器が検索された場合には、ステップＳ１１において制御部２６は、検索の結果得られた容器を選択する。
【００５０】
図２のフローチャートの説明に戻り、ステップＳ１１において容器が選択され、サンプル一覧画面１３１が表示されると、ステップＳ１２において、制御部２６は、容器のサンプルを選択する。
【００５１】
例えば、ユーザが入力部２５を操作して、サンプル一覧画面１３１から、１つのサンプル名１４１を選択すると、制御部２６は、ユーザの操作に応じて選択されたサンプル名１４１により特定されるサンプルを選択する。
【００５２】
なお、より詳細には、制御部２６は、ステップＳ１２において、サンプルだけでなく、サンプル内の観察位置や、その観察位置を観察したときの対物レンズの倍率、観察方法なども選択する。すなわち、制御部２６は、サンプル名１４１が選択されると、選択されたサンプル名１４１により特定されるサンプルにおける細胞の培養履歴が表示される培養履歴画面の表示を表示制御部２７に指示する。
【００５３】
表示制御部２７は、制御部２６の指示に応じて、指示されたサンプルのサンプル情報を記録部２４から取得し、取得したサンプル情報に基づいて、表示部２８に培養履歴画面を表示させる。例えば、サンプル名１４１−１が選択されると、表示部２８には図９に示す培養履歴画面２５１が表示される。
【００５４】
培養履歴画面２５１の図中、上側には、サンプル名、サンプル内の細胞の名前、培養者名が表示されており、また、選択された容器を表す画像も表示されている。図９の例では、図中、右上に容器を表す画像として、６つのウェルを有するウェルプレートの画像が表示されており、６つのウェルのうち、ユーザにより選択されたサンプルとしてのウェルは、他のウェルとは異なる色で表示されている。
【００５５】
さらに、培養履歴画面２５１には、タイムラプス観察時に撮像した観察画像の撮像時刻ごとにサンプル内の細胞に関する情報が表示される表示欄２６１−１乃至表示欄２６１−５が図中、縦方向に並べられて設けられている。また、表示欄２６１−１乃至表示欄２６１−５には、サンプル内の細胞に関する情報の詳細を表示するときに操作される詳細表示ボタン２６２−１乃至詳細表示ボタン２６２−５が設けられている。
【００５６】
なお、以下、表示欄２６１−１乃至表示欄２６１−５のそれぞれを個々に区別する必要のない場合、単に表示欄２６１と称し、詳細表示ボタン２６２−１乃至詳細表示ボタン２６２−５のそれぞれを個々に区別する必要のない場合、単に詳細表示ボタン２６２と称する。
【００５７】
培養履歴画面２５１では、表示欄２６１内の詳細表示ボタン２６２が操作される前の状態において、表示欄２６１には詳細表示ボタン２６２、観察画像の撮像時刻、および培養者名だけが表示されている。そして、詳細表示ボタン２６２が操作されると、表示欄２６１には、さらに観察画像などの詳細な情報が表示される。
【００５８】
図９の例では、表示欄２６１−２乃至表示欄２６１−５には、詳細表示ボタン２６２、撮像時刻、および培養者名だけが表示されている。例えば、表示欄２６１−２には、撮像時刻を示す文字“2007/Nov/01 11：10”が表示され、培養者名を示す文字“BioStationCT Admin”が表示されている。
【００５９】
また、表示欄２６１−１は、詳細表示ボタン２６２−１が操作された状態となっており、表示欄２６１−１には、詳細表示ボタン２６２、撮像時刻“2007/Nov/01 11：20”、および培養者名“BioStationCT Admin”の他、観察画像などの詳細な情報も表示されている。
【００６０】
すなわち、表示欄２６１−１内には、選択された容器の画像２６３と、撮像時刻“2007/Nov/01 11：20”におけるサンプル内の観察位置ごとの情報が表示されるサブ表示欄２６４とが表示されている。さらに、サブ表示欄２６４内の図中、左側には、円形のウェルの画像が、選択されたサンプルの画像として表示されており、その画像のウェルの中央には、観察位置を示す点が表示されている。
【００６１】
また、サブ表示欄２６４内の図中、右側には、表示欄２６１内の図中、上側に表示された撮像時刻において、サンプルの画像により示される観察位置を撮像して得られた観察画像２６５−１乃至観察画像２６５−４が表示されている。観察画像２６５−１乃至観察画像２６５−４のそれぞれの図中、上側には観察条件を示す文字“４×”、“１０×”、“２０×”、および“ＦＬ”が表示されている。
【００６２】
例えば、文字“４×”は、その文字の下の観察画像２６５−１が、倍率が４倍である対物レンズを用いて細胞を位相差観察したときの観察画像であることを示している。また、文字“ＦＬ”は、その文字の下の観察画像２６５−４が、細胞を蛍光観察したときの観察画像であることを示している。このように、サブ表示欄２６４内には、観察位置と撮像時刻が同じであり、観察条件の異なる観察画像が並べられて表示される。
【００６３】
さらに、観察画像２６５−１乃至観察画像２６５−４のそれぞれの図中、下側には、それらの画像を拡大して表示させるときに操作される拡大ボタン２６６−１乃至拡大ボタン２６６−４が表示されている。なお、以下、観察画像２６５−１乃至観察画像２６５−４のそれぞれを個々に区別する必要のない場合、単に観察画像２６５と称し、拡大ボタン２６６−１乃至拡大ボタン２６６−４のそれぞれを個々に区別する必要のない場合、単に拡大ボタン２６６と称する。
【００６４】
なお、表示欄２６１−１には、１つのサブ表示欄２６４だけが表示されているが、表示欄２６１−１に表示された撮像時刻に、複数の観察位置において観察画像が撮像された場合には、それらの観察位置についてのサブ表示欄のそれぞれが並べられて表示される。さらに、図９に示す状態において、詳細表示ボタン２６２−１が操作されると、表示欄２６１−１から画像２６３およびサブ表示欄２６４の表示が消えて、表示欄２６１−１には撮像時刻、詳細表示ボタン２６２−１、および培養者名だけが表示される。
【００６５】
このようにして、培養履歴画面２５１が表示され、ユーザが入力部２５を操作して拡大ボタン２６６を選択すると、制御部２６はユーザの操作に応じて、拡大ボタン２６６に対応する観察画像２６５を選択する。
【００６６】
例えば、拡大ボタン２６６−１が選択された場合、制御部２６は、ステップＳ１１の処理で選択された容器のサンプルのうち、培養履歴画面２５１に表示されているサンプル名により特定されるサンプルを選択し、さらにそのサンプル内の中央を観察位置として、４倍の対物レンズで位相差観察したときの観察画像群を選択する。つまり、制御部２６は、記録部２４に記録されているサンプル情報に含まれる観察画像群のうち、観察画像２６５−１が含まれている観察画像群を選択する。
【００６７】
このように、ステップＳ１２の処理においては、制御部２６は、サンプルだけでなく、そのサンプル内の観察位置および観察条件も選択する。これにより、所定の容器のサンプル内の位置を観察位置として、その観察位置を所定の観察条件でタイムラプス観察して得られた観察画像群が選択されることになる。
【００６８】
図２のフローチャートの説明に戻り、ステップＳ１２の処理によりサンプルが選択されると、すなわち培養履歴画面２５１内の拡大ボタン２６６が選択されると、ステップＳ１３において、表示部２８は、選択された拡大ボタン２６６に対応する観察画像を表示する。
【００６９】
例えば、拡大ボタン２６６−１が選択された場合、制御部２６は、ユーザの操作に応じて、表示制御部２７に拡大ボタン２６６−１に対応する観察画像２６５−１を拡大して表示させる。表示制御部２７は、制御部２６の指示に応じて、観察画像２６５−１が拡大して表示される観察画像表示画面を表示部２８に表示させる。
【００７０】
これにより、表示部２８には、例えば図１０に示す観察画像表示画面２９１が表示される。観察画像表示画面２９１の表示領域３０１には、拡大ボタン２６６に対応する観察画像が拡大表示され、表示領域３０１の図中、右側には、サンプル名やサンプル内の観察位置、観察画像の撮像時刻、観察対象となった細胞の培養条件（観察条件）などが表示されている。
【００７１】
また、観察画像表示画面２９１には、観察画像群の再生を制御するときに操作されるボタン群３０２が設けられている。例えばユーザは、ボタン群３０２を操作することで、表示領域３０１に、選択された拡大ボタン２６６に対応する観察画像２６５の含まれる観察画像群を時系列で順番に表示させる。これにより、ユーザは拡大表示された観察画像を見ながら、その観察画像をマルチポイント表示させる画像とするか否かを決めることができる。
【００７２】
さらに、観察画像表示画面２９１には、マルチポイントボタン３０３、ボタン３０４、タブ３０５−１乃至タブ３０５−４、およびオーバーラップボタン３０６が設けられている。マルチポイントボタン３０３は、表示領域３０１に表示されている観察画像、より詳細には、その観察画像が含まれる観察画像群をマルチポイント表示させる観察画像群として選択するときに操作され、ボタン３０４は、観察画像表示画面２９１を閉じるときに操作される。
【００７３】
また、タブ３０５−１乃至タブ３０５−４は、表示領域３０１における観察画像の表示を切り換えるときに操作される。すなわち、拡大ボタン２６６に対応する観察画像２６５の含まれる観察画像群に、関連付けられた他の観察画像群がある場合、ユーザは、タブ３０５−１乃至タブ３０５−４の何れかを選択することで、互いに関連付けられた観察画像群のうちの何れかを表示領域３０１に表示させることができる。
【００７４】
ここで、互いに関連付けられた観察画像群とは、観察対象および各観察画像の撮像時刻が同じであり、観察条件だけが異なる観察画像群をいう。例えば、細胞を位相差観察して得られた観察画像からなる観察画像群と、その観察画像群の各観察画像と撮像時刻が同じであり、同じ細胞を蛍光観察して得られた観察画像からなる観察画像群とは、互いに関連付けられた観察画像群とされる。
【００７５】
タブ３０５−１乃至タブ３０５−４のそれぞれには、文字“Ｐｈ”、“Ｃｈ１”、“Ｃｈ２”、および“Ｃｈ３”が表示されており、タブ３０５−１が選択されると、表示領域３０１には、位相差観察により得られた観察画像が表示される。また、タブ３０５−２乃至タブ３０５−４の何れかが選択されると、表示領域３０１には、蛍光観察により得られた観察画像が表示される。ここで、タブ３０５−２乃至タブ３０５−４のそれぞれが選択されたときに表示される観察画像は、撮像された蛍光の波長が異なる観察画像とされる。
【００７６】
さらに、オーバーラップボタン３０６は、互いに関連付けられた観察画像のうちの２つの観察画像を表示領域３０１に重畳させて表示させるときに操作される。例えば、タブ３０５−１が選択されて位相差観察により得られた観察画像が表示領域３０１に表示されている状態で、ユーザがオーバーラップボタン３０６を操作して、タブ３０５−２を選択すると、表示領域３０１には、位相差観察により得られた観察画像に、蛍光観察により得られた観察画像が重畳（合成）されて表示される。
【００７７】
図２のフローチャートの説明に戻り、観察画像表示画面２９１の表示領域３０１に観察画像が表示されると、ステップＳ１４において、制御部２６は、表示されている観察画像の含まれる観察画像群をマルチポイント表示用の観察画像群とするか否かを判定する。
【００７８】
例えば、観察画像表示画面２９１が表示されている状態において、マルチポイントボタン３０３が選択（操作）された場合、マルチポイント表示用の観察画像群とすると判定され、ボタン３０４が操作された場合、マルチポイント表示用の観察画像群としないと判定される。
【００７９】
ボタン３０４が操作され、ステップＳ１４において、マルチポイント表示用の観察画像群としないと判定された場合、表示制御部２７は、制御部２６の指示に応じて表示部２８を制御し、観察画像表示画面２９１を閉じさせる。そして、処理は、ステップＳ１２に戻り、上述した処理が繰り返される。
【００８０】
例えば、観察画像表示画面２９１が閉じられると、表示部２８の表示は、培養履歴画面２５１に切り換わり、ユーザは、拡大ボタン２６６を操作してサンプルを選択し直す。なお、ユーザは、入力部２５を操作することで、培養履歴画面２５１を閉じさせて容器一覧画面６１を表示させ、容器を選択し直すことも可能である。この場合には、処理はステップＳ１１に戻り、制御部２６はユーザの操作に応じて容器の選択を行う。
【００８１】
一方、ステップＳ１４において、マルチポイント表示用の観察画像群とすると判定された場合、ステップＳ１５において、制御部２６は観察画像表示画面２９１の表示領域３０１に表示されている観察画像の観察画像群をマルチポイント表示用の観察画像群として選択する。換言すれば、制御部２６は、選択された拡大ボタン２６６に対応する観察画像２６５の含まれる観察画像群をマルチポイント表示用の観察画像群とする。
【００８２】
ステップＳ１６において、表示部２８は、マルチポイント表示画面を表示する。すなわち、制御部２６は、表示制御部２７に対して、複数のマルチポイント表示用の観察画像群の観察画像が並べられて表示されるマルチポイント表示画面の表示を指示する。そして、表示制御部２７は、制御部２６の指示に応じて、必要に応じて記録部２４からサンプル情報を取得し、取得したサンプル情報を用いて表示部２８にマルチポイント表示画面を表示させる。
【００８３】
これにより、表示部２８には、例えば図１１に示すマルチポイント表示画面３３１が表示される。マルチポイント表示画面３３１には、マルチポイント表示用の観察画像が表示される表示領域３４１−１乃至表示領域３４１−６が並べられて設けられており、表示領域３４１−１乃至表示領域３４１−６には、それぞれ異なる観察画像群の観察画像が表示される。
【００８４】
図１１の例では、マルチポイント表示用の観察画像群が１つしか選択されていないため、表示領域３４１−２乃至表示領域３４１−６には観察画像が表示されておらず、表示領域３４１−１だけに観察画像が表示されている。なお、以下、表示領域３４１−１乃至表示領域３４１−６を個々に区別する必要のない場合、単に表示領域３４１と称する。
【００８５】
また、ユーザは、入力部２５を操作して表示領域３４１を選択することで、その選択した表示領域３４１に表示させるマルチポイント表示用の観察画像群を選択することができる。例えば、表示領域３４１−２が選択されて、マルチポイント表示用とする観察画像群が指定されると、表示領域３４１−２には新たに選択された観察画像群の観察画像が表示される。このようにマルチポイント表示画面３３１では、ユーザは任意の表示領域３４１に、所望の観察画像を表示させることができるので、ユーザの好みの配列で、複数の観察画像を並べて表示させることができる。
【００８６】
さらに、マルチポイント表示画面３３１には、表示領域３４１への観察画像の表示を制御するときに操作されるボタン群３４２が設けられている。ユーザは、ボタン群３４２を操作することにより、表示領域３４１に観察画像を時系列で順番に表示させたり、観察画像の時系列での表示を停止、一時停止、または早送りさせたりすることができる。
【００８７】
さらに、また、マルチポイント表示画面３３１における表示領域３４１の図中、下側にはシークバー３４３が設けられており、シークバー３４３には、時系列で表示される観察画像の撮像時刻に対応する位置につまみ３４３ａが表示されている。
【００８８】
例えば、表示領域３４１に観察画像群を構成する観察画像が撮像時刻の古いものから順番に表示される場合、観察画像群の先頭の観察画像が表示されているときには、つまみ３４３ａは、シークバー３４３上の図中、左端に位置している。そして、つまみ３４３ａは時間の経過とともに、図中、右方向に移動し、観察画像群の最後の観察画像が表示されたときに、シークバー３４３上の図中、右端に到達する。ユーザは入力部２５を操作してつまみ３４３ａを移動させることにより、観察画像群のうちの所望の撮像時刻の観察画像を表示領域３４１に表示させることができる。
【００８９】
また、マルチポイント表示画面３３１におけるシークバー３４３の図中、下側には合成設定ボタン３４４−１乃至合成設定ボタン３４４−４、ボタン３４５、再生位置調整ボタン３４６、およびダウンロードボタン３４７が設けられている。
【００９０】
合成設定ボタン３４４−１乃至合成設定ボタン３４４−４は、表示領域３４１に表示される観察画像に、さらにその観察画像に関連付けられた他の観察画像を重畳して表示させるときに操作される。合成設定ボタン３４４−１乃至合成設定ボタン３４４−４には、文字“Ｐｈ”、“Ｃｈ１”、“Ｃｈ２”、および“Ｃｈ３”が表示されており、合成設定ボタン３４４−１が選択されると、表示領域３４１には、位相差観察により得られた観察画像が表示される。また、合成設定ボタン３４４−２乃至合成設定ボタン３４４−４が選択されると、表示領域３４１には、蛍光観察により得られた観察画像が表示される。ここで、合成設定ボタン３４４−２乃至合成設定ボタン３４４−４のそれぞれが選択されたときに表示される観察画像は、撮像された蛍光の波長の異なる観察画像とされる。
【００９１】
例えば、マルチポイント表示用とされた観察画像群が、位相差観察により得られた観察画像群である場合、合成設定ボタン３４４−１は、予め選択された状態となっている。そして、この状態において、ユーザがさらに合成設定ボタン３４４−２および合成設定ボタン３４４−３を選択すると、表示領域３４１には、位相差観察により得られた観察画像に対して、さらに合成設定ボタン３４４−２および合成設定ボタン３４４−３に対応する、蛍光観察により得られた観察画像のそれぞれが重畳されて表示される。
【００９２】
つまり、表示領域３４１には、位相差観察により得られた観察画像と、蛍光観察により得られた２つの観察画像とが合成されて得られた画像が、時系列で順番に表示されることになる。なお、以下、合成設定ボタン３４４−１乃至合成設定ボタン３４４−４のそれぞれを個々に区別する必要のない場合、単に合成設定ボタン３４４と称する。
【００９３】
また、ボタン３４５は、マルチポイント表示画面３３１を閉じるときに操作され、再生位置調整ボタン３４６は、表示領域３４１に時系列で表示される観察画像のうちの先頭の観察画像を変更するときに操作される。
【００９４】
例えば、再生位置調整ボタン３４６が操作され、表示領域３４１−１に表示される観察画像群から、所定の観察画像が先頭の観察画像として選択された場合、表示領域３４１−１には、選択された観察画像から順番に時系列で観察画像が表示される。このとき、選択された観察画像よりも撮像時刻が古い観察画像は、表示領域３４１−１には表示されない。
【００９５】
ダウンロードボタン３４７は、表示領域３４１のそれぞれに時系列で観察画像が表示される１つの動画像の動画像ファイルを生成させるときに操作される。
【００９６】
なお、マルチポイント表示画面３３１の表示領域３４１に、観察画像の他、ユーザにより選択された、容器の全体の画像、つまりその容器に設けられた複数のサンプルが表示されている画像が表示されるようにしてもよい。
【００９７】
図２のフローチャートの説明に戻り、ステップＳ１６においてマルチポイント表示画面３３１が表示されると、ステップＳ１７において、制御部２６は、新たなマルチポイント表示用の観察画像群を選択するか否かを判定する。例えば、ユーザにより表示領域３４１が選択されて、マルチポイント表示用の観察画像群の選択が指示されると、マルチポイント表示用の観察画像群を選択すると判定される。
【００９８】
ステップＳ１７において、マルチポイント表示用の観察画像群を選択すると判定された場合、処理はステップＳ１３に戻り、新たなマルチポイント表示用の観察画像群が選択される。すなわち、表示制御部２７は、制御部２６の指示に応じて、表示部２８の表示をマルチポイント表示画面３３１から観察画像表示画面２９１に切り換える。そして、ユーザによりボタン３０４が操作されると、表示制御部２７は、制御部２６の指示に応じて、さらに表示部２８の表示を観察画像表示画面２９１から、培養履歴画面２５１に切り換える。
【００９９】
ユーザは、入力部２５を操作して培養履歴画面２５１から拡大ボタン２６６を選択し、さらに、これにより新たに表示された観察画像表示画面２９１のマルチポイントボタン３０３を選択することで、制御部２６にマルチポイント表示用の観察画像群を選択させる。
【０１００】
一方、ステップＳ１７において、マルチポイント表示用の観察画像群を選択しないと判定された場合、ステップＳ１８において、制御部２６は、再生開始位置の調整を行うか否かを判定する。例えば、マルチポイント表示画面３３１が表示されている状態で、ユーザにより再生位置調整ボタン３４６が操作された場合、再生開始位置の調整を行うと判定される。
【０１０１】
ステップＳ１８において、再生開始位置の調整を行わないと判定された場合、処理はステップＳ２０に進む。
【０１０２】
これに対してステップＳ１８において、再生開始位置の調整を行うと判定された場合、ステップＳ１９において、再生位置調整部４１は、ユーザの操作に応じて、観察画像群を時系列で表示させるときの先頭の観察画像を選択する。そして、再生位置調整部４１は、その先頭の観察画像と、観察画像が表示される表示領域３４１とを示す再生開始位置情報を生成する。
【０１０３】
例えば、表示領域３４１−１に表示される観察画像群Ｇ１が、サンプルへの試薬の添加前の時刻から所定の時間間隔で撮像された観察画像からなり、表示領域３４１−２に表示される観察画像群Ｇ２が、サンプルへの試薬の添加直後から所定の時間間隔で撮像された観察画像からなるものとする。この場合、マルチポイント表示を行うと、表示領域３４１−１には、試薬の添加前の時刻からの観察画像が表示され、表示領域３４１−２には、試薬の添加直後の時刻からの観察画像が表示される。
【０１０４】
しかしながら、これらの２つのサンプル（観察画像に表示される細胞）の時間的な変化を比較するには、表示領域３４１−１に表示される観察画像群Ｇ１も、試薬の添加直後の時刻の観察画像から表示が開始されることが望ましい。そこで、例えばユーザは、再生位置調整ボタン３４６を操作し、さらに表示領域３４１−１を指定して、観察画像群Ｇ１の観察画像のうち、サンプルに試薬が添加された直後の時刻の観察画像を、先頭の観察画像として選択することで、観察画像群Ｇ１の再生開始位置を調整する。
【０１０５】
例えば、再生位置調整ボタン３４６が操作され、さらに表示領域３４１−１が指定されると、表示部２８の表示は、表示領域３４１−１に表示される観察画像群の観察画像だけが時系列で表示される画面に切り換わる。そしてユーザは、その画面に表示されたシークバーを操作して各撮像時刻の観察画像を表示させながら、先頭の観察画像を指定する。
【０１０６】
再生位置調整部４１は、ユーザの操作に応じて、観察画像群Ｇ１の観察画像のうち、ユーザにより指定された観察画像を、時系列で表示する先頭の観察画像として選択し、その観察画像と、観察画像が表示される表示領域３４１とを示す再生開始位置情報を生成する。これにより、ユーザは、簡単な操作で観察画像群の再生開始位置を調整し、複数のサンプル内の細胞の時間的な変化をより簡単に比較することができる。
【０１０７】
特に、観察画像とともに試薬の添加のタイミングを示す画像やコメントなどが表示されるようにすると、ユーザは、簡単に観察画像群の再生開始位置を調整することができる。
【０１０８】
ステップＳ１９において再生開始位置が調整されるか、またはステップＳ１８において、再生開始位置の調整を行わないと判定されると、ステップＳ２０において、制御部２６は観察画像の合成表示の設定を行うか否かを判定する。例えば、ユーザにより合成設定ボタン３４４が操作された場合、合成表示の設定を行うと判定される。
【０１０９】
ステップＳ２０において、合成表示の設定を行わないと判定された場合、処理はステップＳ２２に進む。一方、ステップＳ２０において、合成表示の設定を行うと判定された場合、ステップＳ２１において、制御部２６は、表示領域３４１に重畳（合成）して表示させる観察画像群を示す合成設定情報を生成する。
【０１１０】
すなわち、ユーザは合成表示の設定を行おうとする表示領域３４１を指定し、さらにその表示領域３４１に表示させる互いに関連付けられた観察画像群が選択されるように、合成設定ボタン３４４を操作する。すると、制御部２６は、ユーザの操作に応じて、合成設定ボタン３４４により選択された観察画像群と、それらの観察画像群が表示される表示領域３４１とを示す合成設定情報を生成する。
【０１１１】
ステップＳ２１において合成設定情報が生成されるか、またはステップＳ２０において合成表示の設定を行わないと判定された場合、ステップＳ２２において、制御部２６は、マルチポイント表示での観察画像の時系列の表示が指示されたか否かを判定する。例えば、ユーザによりボタン群３４２が操作され、観察画像の時系列の表示が指示された場合、観察画像の時系列の表示が指示されたと判定される。
【０１１２】
ステップＳ２２において、観察画像の時系列の表示が指示されていないと判定された場合、処理はステップＳ２４に進む。これに対して、ステップＳ２２において、観察画像の時系列の表示が指示されたと判定された場合、ステップＳ２３において、表示部２８は各表示領域３４１に観察画像を時系列に順番に表示する。
【０１１３】
すなわち、制御部２６は、表示制御部２７に再生開始位置情報および合成設定情報を供給するとともに、表示制御部２７にマルチポイント表示用の観察画像群として選択されている観察画像群の表示領域３４１への時系列での表示を指示する。すると、表示制御部２７は、制御部２６からの再生開始位置情報および合成設定情報に基づいて、表示領域３４１−１乃至表示領域３４１−６のそれぞれに、選択された観察画像群の観察画像のそれぞれを時系列で順番に表示させる。
【０１１４】
このとき、表示制御部２７は、再生開始位置情報により示される表示領域３４１については、その再生開始位置情報により示される観察画像を先頭とし、それ以降の撮像時刻の観察画像が時系列で順番に表示されるように、表示領域３４１への観察画像の表示を制御する。また、表示制御部２７は、合成設定情報により示される表示領域３４１については、その合成設定情報により示される複数の観察画像群の観察画像が合成されて表示領域３４１に表示されるように表示領域３４１への観察画像の表示を制御する。
【０１１５】
これにより、例えば、表示領域３４１−１には、位相差観察により得られた観察画像と、蛍光観察により得られた観察画像とが合成されて表示される。このように、位相差観察により得られた観察画像と、蛍光観察により得られた観察画像とを重ねて同時に表示させることで、ユーザは、細胞のどの部位から蛍光が発現しているかを容易に把握することができる。また、ユーザはどの程度細胞が増殖し、各細胞の部位からどの程度蛍光が発現しているかも容易に把握することができる。
【０１１６】
さらに、マルチポイント表示時において、表示制御部２７は、表示領域３４１に表示される観察画像群の先頭の観察画像のそれぞれの撮像時刻から、同じ時間が経過したときに撮像された観察画像のそれぞれが同時に表示されるように、観察画像の表示を制御する。
【０１１７】
具体的には、例えば表示領域３４１−１に表示される観察画像群Ｇ２１が、時間間隔ｔで撮像された観察画像からなり、表示領域３４１−２に表示される観察画像群Ｇ２２が、時間間隔２ｔで撮像された観察画像からなるとする。このとき、表示制御部２７は、表示領域３４１−１に観察画像群Ｇ２１の先頭の観察画像を表示させるとともに、表示領域３４１−２に観察画像群Ｇ２２の先頭の観察画像を表示させる。
【０１１８】
そして、表示制御部２７は、所定の時間が経過すると、表示領域３４１−１の表示を観察画像群Ｇ２１の先頭の観察画像から、２番目の観察画像に切り換え、さらに所定の時間が経過すると、表示領域３４１−１の表示を観察画像群Ｇ２１の３番目の観察画像に切り換える。また、表示領域３４１−２ついては、表示制御部２７は、表示領域３４１−１に３番目の観察画像が表示される直前までは、表示領域３４１−２に観察画像群Ｇ２２の先頭の観察画像を表示させたままとする。そして、表示制御部２７は、表示領域３４１−１に３番目の観察画像が表示されるタイミングで、表示領域３４１−２に観察画像群Ｇ２２の２番目の観察画像を表示させる。
【０１１９】
ここで、観察画像群Ｇ２１の３番目の観察画像は、先頭の観察画像の撮像時刻から時間２ｔが経過したときに撮像された観察画像であり、また観察画像群Ｇ２２の２番目の観察画像は、先頭の観察画像の撮像時刻から時間２ｔが経過したときに撮像された観察画像である。このように、それぞれの表示領域３４１に表示される先頭の観察画像の撮像時刻から、同じ時間が経過したときに撮像された観察画像のそれぞれが同時に表示されるようにすることで、ユーザは、複数のサンプル内の細胞の時間的変化を簡単に比較することができる。
【０１２０】
なお、表示領域３４１に観察画像を時系列に表示させる場合、表示制御部２７が必要に応じて記録部２４からサンプル情報を取得し、取得したサンプル情報に含まれる観察条件や解析結果、ユーザのコメントなどを観察画像とともに表示させるようにしてもよい。
【０１２１】
ステップＳ２３において観察画像がマルチポイント表示されるか、またはステップＳ２２において観察画像の時系列の表示が指示されていないと判定されると、ステップＳ２４において、制御部２６は、動画像ファイルの生成が指示されたか否かを判定する。例えば、ユーザによりダウンロードボタン３４７が操作された場合、動画像ファイルの生成が指示されたと判定される。
【０１２２】
ステップＳ２４において、動画像ファイルの生成が指示されていないと判定された場合、処理はステップＳ２６に進む。これに対して、ステップＳ２４において、動画像ファイルの生成が指示されたと判定された場合、ステップＳ２５において、動画像生成部２９は、動画像ファイルを生成する。
【０１２３】
すなわち、ダウンロードボタン３４７が操作されて動画像ファイルの生成が指示されると、制御部２６は、動画像生成部２９に動画像ファイルの生成を指示する。すると、動画像生成部２９は、制御部２６の指示に応じて、表示制御部２７からマルチポイント表示画面３３１を表示するための画像データや、表示領域３４１に表示させる観察画像群を取得する。そして、動画像生成部２９は、取得した画像データや観察画像群に基づいて、マルチポイント表示画面３３１の表示領域３４１のそれぞれに、対応する観察画像群の観察画像のそれぞれが時系列で表示される１つの動画像の動画像ファイルを生成する。
【０１２４】
この動画像では、例えば図１２に示すように、マルチポイント表示画面３３１の表示領域３４１のそれぞれに観察画像のそれぞれが表示されている画像が、動画像を構成する１コマ分の画像とされている。すなわち、表示領域３４１における観察画像の表示が切り換わった、各時刻のマルチポイント表示画面３３１が時系列に並べられてできる動画像の動画像ファイルが動画像生成部２９により生成される。
【０１２５】
したがって、動画像生成部２９により生成された動画像ファイルの動画像を再生して表示部２８に表示させると、表示部２８には、ステップＳ２３の処理におけるマルチポイント表示のときに表示部２８に表示される画面と同じ画面が表示されることになる。
【０１２６】
ところが、マルチポイント表示においては、観察画像群に基づいて、表示領域３４１のそれぞれに、観察画像群のそれぞれを構成する観察画像のそれぞれが時系列に表示される。そのため、例えばボタン３４５が操作されて、一度、マルチポイント表示画面３３１が閉じられてしまうと、同じ観察画像のそれぞれを同じ表示領域３４１のそれぞれにマルチポイント表示させるには、ユーザは再度、同じ観察画像群を選び直さなければならない。
【０１２７】
これに対して、動画像生成部２９に、各時刻におけるマルチポイント表示画面３３１の画像が１コマ分の画像とされる動画像の動画像ファイルを生成させると、ユーザはその動画像を再生させて、同じ組み合わせの観察画像が並べられて時系列に表示される画像を何度でも簡単に見ることができる。しかも、ユーザは、いちいち観察画像群を選択し直す必要もない。
【０１２８】
なお、生成された動画像ファイルの動画像を再生した場合にも、ステップＳ２３の処理におけるマルチポイント表示の場合と同様に、表示領域３４１に複数の観察画像が重畳されて表示されたり、観察画像とともに観察条件や解析結果、コメントなどが表示されたり、あるいは先頭の観察画像として選択された観察画像から順番に表示されたりする。また、動画像とは別に、観察条件や解析結果、コメントなどを表示することができるように、これらの情報が動画像に付加されるようにしてもよい。
【０１２９】
このようにして、動画像生成部２９により生成された動画像ファイルは、制御部２６に供給され、制御部２６により記録部２４に記録されたり、通信部３０を介して、培養観察装置１１に接続された他の装置に送信されたりする。
【０１３０】
ステップＳ２５において動画像ファイルが生成されるか、またはステップＳ２４において、動画像ファイルの生成が指示されなかったと判定されると、ステップＳ２６において、制御部２６は、観察画像をマルチポイント表示する処理を終了するか否かを判定する。例えば、マルチポイント表示画面３３１のボタン３４５が操作された場合、処理を終了すると判定される。
【０１３１】
ステップＳ２６において、処理を終了しないと判定された場合、処理はステップＳ１７に戻り、上述した処理が繰り返される。
【０１３２】
これに対して、ステップＳ２６において、処理を終了すると判定された場合、制御部２６は、表示制御部２７を制御して、マルチポイント表示画面３３１を閉じさせ、マルチポイント表示処理は終了する。
【０１３３】
以上のようにして、培養観察装置１１は、マルチポイント表示画面３３１に複数の観察画像群の観察画像のそれぞれを並べて時系列に表示する。このように、複数の観察画像のそれぞれを並べて時系列に表示することで、ユーザは、複数の異なる標本（細胞）の時間的な変化を簡単に比較することができる。
【０１３４】
なお、以上においては、ユーザが培養観察装置１１を操作することにより、マルチポイント表示処理などの各種の処理を培養観察装置１１に実行させると説明したが、ユーザが、例えば、通信網を介して培養観察装置１１に接続されているパーソナルコンピュータなどの装置を操作することで、培養観察装置１１に処理を実行させるようにしてもよい。そのような場合、例えば培養観察装置１１は、パーソナルコンピュータの遠隔制御に基づいて、各種の処理を行い、その処理の結果をパーソナルコンピュータに送信する。そして、パーソナルコンピュータは、培養観察装置１１から送信されてきた処理結果を受信して表示する。
【０１３５】
また、培養観察装置１１に限らず、パーソナルコンピュータや顕微鏡などの装置にサンプル情報を記録させておき、それらの装置に図２および図３を参照して説明したマルチポイント表示処理を実行させるようにしてもよい。
【０１３６】
さらに、上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。上述した一連の処理をソフトウェアにより実行する場合には、一連の処理を行うために制御部２６に実行させるプログラムは、予め記録部２４に記録されているか、または培養観察装置１１と接続されているサーバなどの外部装置から培養観察装置１１の記録部２４にインストールすることができる。
【０１３７】
なお、上述した一連の処理を実行させるプログラムは、必要に応じてルータ、モデムなどのインタフェースを介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を介して培養観察装置１１にインストールされるようにしてもよい。
【０１３８】
また、制御部２６等のコンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【０１３９】
さらに、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【０１４０】
【図１】本発明を適用した培養観察装置の一実施の形態の構成例を示すブロック図である。
【図２】マルチポイント表示処理を説明するフローチャートである。
【図３】マルチポイント表示処理を説明するフローチャートである。
【図４】容器一覧画面の表示例を示す図である。
【図５】選択された容器を示す画面の表示例を示す図である。
【図６】サンプル一覧画面の表示例を示す図である。
【図７】機能一覧画面の表示例を示す図である。
【図８】検索条件入力画面の表示例を示す図である。
【図９】培養履歴画面の表示例を示す図である。
【図１０】観察画像表示画面の表示例を示す図である。
【図１１】マルチポイント表示画面の表示例を示す図である。
【図１２】動画像ファイルを説明する図である。
【符号の説明】
【０１４１】
１１ 培養観察装置， ２１ 容器保持部， ２３ 観察部， ２４ 記録部， ２６ 制御部， ２７ 表示制御部， ２８ 表示部， ２９ 動画像生成部， ３０ 通信部， ４１ 再生位置調整部， ２５１ 培養履歴画面， ３３１ マルチポイント表示画面
【技術分野】
【０００１】
本発明は画像処理装置に関し、特に、タイムラプス観察で得られる観察画像を表示するのに好適な画像処理装置に関する。
【背景技術】
【０００２】
培養細胞を用いた実験、特に癌細胞に対する抗癌剤の効果の観察や、初代培養細胞の培養方法の検討においては、複数のシャーレ、ウェルプレートなどの容器が用いられ、観察条件の異なる細胞の時間的な変化が比較される。
【０００３】
すなわち、１つのシャーレ、またはウェルプレートの１つのウェルが１つのサンプルとされて、複数のサンプルのそれぞれに観察対象の標本である細胞が均一に撒かれる。そして、細胞が撒かれたサンプルのそれぞれに、異なる薬剤が添加されたり、同じ薬剤が異なる濃度で添加されたりして、各サンプル内の細胞がタイムラプス観察される。
【０００４】
例えば、従来の細胞培養装置には、サンプルごとにタイムラプス観察を行い、各時刻におけるサンプル内の細胞の観察画像を撮像する機能を有するものがある（例えば、特許文献１参照）。この細胞培養装置によれば、ユーザは、所望のサンプルの各時刻の観察画像を順番に表示させて比較することで、時間とともにどのように細胞が変化するかを把握することができる。
【０００５】
【特許文献１】特開２００２−２７７７５４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、上述した技術では、ユーザは、所望する１つのサンプル内の標本の時間的な変化を知ることはできるが、観察条件の異なる複数のサンプル内の標本のそれぞれの時間的な変化を比較することは困難であった。例えば、ユーザは、細胞培養装置を操作して、観察画像をサンプルごとに順番に表示させて各標本を比較しなければならないため、所定のサンプルの標本の観察画像が表示されているときに、他のサンプルの標本の状態を確認することができなかった。
【０００７】
本発明は、このような状況に鑑みてなされたものであり、複数のサンプルの標本の時間的な変化を簡単に比較することができるようにするものである。
【課題を解決するための手段】
【０００８】
本発明の画像処理装置は、所定の位置の容器の所定の観察位置にある観察対象の標本を撮像して得られた、撮像時刻の異なる複数の観察画像からなる観察画像群を選択する選択手段と、選択された複数の前記観察画像群の前記観察画像が、前記観察画像群ごとに並べられて表示されるように、前記観察対象の位置関係に対応する表示位置に、それぞれ前記観察画像群の観察画像を時系列で順番に表示させる表示制御手段とを備えることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、複数の標本の時間的な変化をより簡単に比較することができる。
【発明を実施するための最良の形態】
【００１０】
以下、図面を参照して、本発明を適用した実施の形態について説明する。
【００１１】
図１は、本発明を適用した培養観察装置の一実施の形態の構成例を示すブロック図である。
【００１２】
培養観察装置１１は、例えば、観察対象の標本である細胞を培養するとともに、その細胞をタイムラプス観察する細胞培養観察装置である。培養観察装置１１は、容器保持部２１、ステージ２２、観察部２３、記録部２４、入力部２５、制御部２６、表示制御部２７、表示部２８、動画像生成部２９、および通信部３０から構成される。
【００１３】
容器保持部２１は、細胞の培養室などからなり、観察対象となる細胞の入った容器を保持している。例えば、容器保持部２１に保持される容器は、シャーレやウェルプレートなどとされ、容器保持部２１は、それらの容器を所定の温度や湿度に保たれた培養室内に保持し、容器内の細胞を培養する。
【００１４】
また、容器保持部２１は、制御部２６の指示に応じて、培養室に保持している複数の容器のうちの所定の容器をステージ２２上に載置したり、ステージ２２に載置されている容器を容器保持部２１に設けられた培養室内に格納したりする。
【００１５】
ステージ２２は、制御部２６の指示に応じて駆動することで、ステージ２２上に載置されている容器を移動させる。観察部２３は、ステージ２２に載置された容器内の細胞を照明光で照明したり、容器内の細胞からの観察光を結像させたりする光学系や、細胞の画像を撮像するカメラなどからなり、制御部２６の指示に応じて容器内の細胞の観察画像を撮像する。
【００１６】
記録部２４は、観察部２３により撮像された観察画像や、細胞の観察条件などの各種の情報、制御部２６により実行されるプログラム等を記録する。入力部２５は、マウスやボタン、タッチパネルなどからなり、ユーザの操作に応じた信号を制御部２６に供給する。
【００１７】
制御部２６は、培養観察装置１１の全体を制御する。例えば、制御部２６は、容器保持部２１、ステージ２２、および観察部２３を制御して、容器保持部２１に保持されている容器内の細胞の観察画像を所定の時間間隔で撮像させたり、観察部２３から観察画像を取得して記録部２４に記録させたりする。また、制御部２６は、表示制御部２７に記録部２４に記録されている観察画像の表示を指示したり、動画像生成部２９に複数の観察画像が同時に表示される動画像の動画像ファイルの生成を指示したりする。
【００１８】
さらに、制御部２６は、再生位置調整部４１を備えている。再生位置調整部４１は、入力部２５からの信号に応じて、観察画像を撮像時刻順に時系列で表示させるときの先頭の撮像画像を示す再生開始位置情報を生成する。
【００１９】
表示制御部２７は、制御部２６からの指示に応じて、表示部２８への画像の表示を制御する。例えば、表示制御部２７は、記録部２４に記録されている観察画像を表示部２８に供給して表示させる。表示部２８は、例えば液晶ディスプレイなどからなり、表示制御部２７から供給された画像を表示する。
【００２０】
動画像生成部２９は、制御部２６の指示に応じて、表示制御部２７から複数の観察画像を取得し、取得した観察画像が並べられて表示される１つの動画像の動画像ファイルを生成する。通信部３０は、通信網を介して培養観察装置１１に接続されている他の装置と通信し、他の装置と各種の情報の授受を行う。
【００２１】
ところで、培養観察装置１１では複数の容器が保持されており、それらの容器では細胞が培養されている。例えば、ユーザは入力部２５を操作して、所望の容器の所定の観察位置と、細胞の観察条件とを指定することで、指定した観察位置の細胞をタイムラプス観察させることができる。
【００２２】
ここで、容器としてのシャーレ、またはウェルプレートの１つのウェルを１つのサンプルと呼ぶこととすると、まず、ユーザは入力部２５を操作することで、観察対象とする細胞の入った容器のサンプルを指定し、さらに必要に応じてサンプル内の所望する位置を観察位置として指定する。
【００２３】
次に、ユーザは入力部２５を操作し、観察条件として、例えば細胞の観察画像を撮像する時間間隔（インターバル）、観察開始時刻、観察終了時刻、蛍光観察や位相差観察などの観察方法、観察に用いる対物レンズの倍率などを指定する。
【００２４】
このようにユーザにより、観察位置と観察条件とが指定されると、制御部２６は、ユーザの操作に応じて入力部２５から供給された信号に基づいて、培養観察装置１１の各部を制御し、指定された観察位置（サンプル）の指定された観察条件での観察を行う。
【００２５】
すなわち、容器保持部２１は、制御部２６により指定された容器を移動させてステージ２２上に載置し、ステージ２２は、ステージ２２上の容器の観察位置が観察部２３としてのカメラの視野内に入るように、制御部２６により指定された位置に移動する。また、観察部２３は、制御部２６の制御に基づいて、ユーザにより指定された時間間隔で観察位置にある細胞の観察画像を撮像する。
【００２６】
観察部２３により撮像された観察画像が、観察部２３から制御部２６に供給されると、制御部２６は、指定されたサンプルのサンプル名と観察位置、観察部２３から供給された観察画像、および入力部２５から供給された、ユーザにより入力された観察条件を記録部２４に供給する。そして、制御部２６は、記録部２４に供給したサンプル名、観察位置、観察画像、および観察条件を、タイムラプス観察を行った１つのサンプルに関する情報であるサンプル情報として記録部２４に記録させる。
【００２７】
このとき、制御部２６は、必要に応じて容器保持部２１から、サンプル（細胞）の他の観察条件、より詳細には細胞の培養に関する情報、例えば観察対象の標本名、培養室内の温度、培養室内の湿度、サンプルに添加した試薬、試薬の添加時刻、試薬の濃度などの情報を取得して記録部２４に供給し、サンプル情報として記録させる。
【００２８】
また、制御部２６は、必要に応じて、所定の解析プログラムを実行して観察部２３からの観察画像を対象とする解析を行い、その解析結果を記録部２４に供給してサンプル情報として記録させる。例えば、観察画像を対象とする解析により、観察画像内で確認された細胞の数、細胞からの蛍光の強度の時間的な変化、細胞の増殖率などの情報が得られる。
【００２９】
さらに、制御部２６は、入力部２５から供給された、ユーザが入力したタイムラプス観察時のコメント等を記録部２４に供給してサンプル情報として記録させる。したがって、指定されたサンプルのタイムラプス観察が行われると、記録部２４には、サンプル名、観察位置、各時刻の観察画像からなる観察画像群、観察条件、解析結果、入力されたコメントなどの情報が、互いに関連付けられてサンプル情報として記録される。
【００３０】
このように、ユーザが入力部２５を操作して所定のサンプル、より詳細にはサンプル内の細胞のタイムラプス観察を指示すると、指定されたサンプルのタイムラプス観察が行われ、そのサンプルのサンプル情報が記録される。なお、タイムラプス観察時に、例えば、位相差観察および蛍光観察の両方の観察方法で細胞が観察された場合には、位相差観察により得られた観察画像群と、蛍光観察により得られた観察画像群とが互いに関連付けられて、１つのサンプル情報として記録される。また、位相差観察により得られた観察画像群と、蛍光観察により得られた複数の観察画像群、例えば波長の異なる複数の蛍光の観察画像群とが互いに関連付けられて、１つのサンプル情報として記録されてもよい。
【００３１】
このようにして記録部２４に各サンプルのサンプル情報が蓄積されると、ユーザは、記録されているいくつかのサンプル情報の観察画像群を指定して、それらの観察画像群の観察画像を、１つの表示画面に観察画像群ごとに並べて時系列に表示させることができる。なお、以下、１つの表示画面に複数の観察画像を並べて、それらの観察画像を時系列に表示する表示方法をマルチポイント表示とも称する。
【００３２】
次に、図２および図３のフローチャートを参照して、培養観察装置１１が観察画像をマルチポイント表示する処理であるマルチポイント表示処理について説明する。
【００３３】
ステップＳ１１において、制御部２６は、入力部２５からの信号に応じて容器を選択する。すなわち、マルチポイント表示処理が開始されると、表示制御部２７は、制御部２６からの指示に応じて表示部２８を制御し、培養観察装置１１において培養中である細胞の入った容器の一覧を表示部２８に表示させる。
【００３４】
これにより、例えば表示部２８には、図４に示す容器一覧画面６１が表示される。容器一覧画面６１には、培養観察装置１１の培養室に格納されている容器を示すボタン、より詳細には容器が配置される位置を示すボタンが、培養室内の容器と同じ配列で並べられている。そして、それらのボタンのうち、細胞の培養が行われている容器を示すボタン７１−１乃至ボタン７１−８は、他のボタンと異なる色で表示されている。また、ボタン７１−１乃至ボタン７１−８には、ユーザにより入力された容器の名前や、その容器を用いて行われている実験名、実験開始日など、容器を特定する文字が表示されている。なお、以下、ボタン７１−１乃至ボタン７１−８のそれぞれを個々に区別する必要のない場合、単にボタン７１と称する。
【００３５】
また、容器一覧画面６１の図中、左下には、各種の機能を実行させるときに操作される機能ボタン７２が表示されている。
【００３６】
このような容器一覧画面６１が表示されている状態で、ユーザが入力部２５を操作して、ボタン７１を選択すると、制御部２６は、ユーザの操作に応じてボタン７１により特定される容器を選択し、その容器の詳細を示す画面の表示を表示制御部２７に指示する。すると、表示制御部２７は、制御部２６からの指示に応じて、例えば、図５に示す画面を表示部２８に表示させる。
【００３７】
図５に示す画面では、中央に選択されたボタン７１により特定される容器の画像が表示されており、図５の例では、容器として円形の６つのウェルを有するウェルプレートが表示されている。また、画面の図中、左下には、表示部２８に表示される画面を、直前に表示されていた容器一覧画面６１に切り換えるボタン１０１が設けられており、ボタン１０１の図中、右側には、表示されている容器のサンプルの一覧を表示させるボタン１０２が設けられている。
【００３８】
ユーザが入力部２５を操作してボタン１０２を選択すると、制御部２６は表示制御部２７にサンプルの一覧の表示を指示する。そして、表示制御部２７は、制御部２６の指示に応じて表示部２８に選択されている容器のサンプルの一覧を表示させる。
【００３９】
これにより、表示部２８には、例えば図６に示すサンプル一覧画面１３１が表示される。サンプル一覧画面１３１には、選択された容器に設けられたサンプル、すなわち図５に表示されたウェルプレートの６つのウェルのそれぞれを示す番号１乃至６と、サンプルを特定するサンプル名１４１−１乃至サンプル名１４１−６とが図中、縦方向に並べられて表示されている。これらのサンプル名１４１−１乃至サンプル名１４１−６のそれぞれは、より詳細にはサンプル名が表示されたボタンとされており、サンプルを選択するときに操作される。なお、以下、サンプル名１４１−１乃至サンプル名１４１−６のそれぞれを個々に区別する必要のない場合、単にサンプル名１４１と称する。
【００４０】
また、サンプル一覧画面１３１には、サンプル名１４１の図中、左側に各サンプルを選択するチェックボックス１４２−１乃至チェックボックス１４２−６が設けられている。これらのチェックボックス１４２−１乃至チェックボックス１４２−６が操作されて、チェック記号が表示されると、対応するサンプル名１４１−１乃至サンプル名１４１−６により特定されるサンプルが選択される。なお、以下、チェックボックス１４２−１乃至チェックボックス１４２−６のそれぞれを個々に区別する必要のない場合、単にチェックボックス１４２と称する。
【００４１】
ユーザは、入力部２５を操作して、これらのチェックボックス１４２のうちの所望のものを操作して対応するサンプルを選択し、さらにサンプル一覧画面１３１の図中、左側に設けられたボタン１４３を操作すると、選択されたサンプルの観察画像を一覧表示させることができる。すなわち、ボタン１４３が操作されると、制御部２６はユーザの操作に応じて、表示制御部２７に、選択されているサンプルの最後に撮像された観察画像、つまり撮像時刻の最も新しい観察画像の表示を指示する。そして、表示制御部２７は、制御部２６からの指示に応じて、表示部２８に選択されたサンプルの最後に撮像された観察画像のそれぞれを並べて表示させる。
【００４２】
また、ユーザは文字“select all”が表示されているボタン１４４を操作することで、全てのチェックボックス１４２にチェック記号を表示させ、それらのチェックボックス１４２に対応するサンプルを選択させることができる。
【００４３】
このように、図５に示した画面が表示されている状態で、ボタン１０２が操作されると、容器のサンプルを選択するためのサンプル一覧画面１３１が表示される。なお、サンプル一覧画面１３１を表示させるには、必ずしも容器一覧画面６１において容器を示すボタン７１を選択する必要はなく、例えば容器一覧画面６１において機能ボタン７２を操作し、所定の条件を満たす容器の検索を行うことでもサンプル一覧画面１３１を表示させることができる。
【００４４】
すなわち、機能ボタン７２が操作されると、制御部２６は入力部２５からの信号に応じて、表示制御部２７に機能一覧画面の表示を指示する。すると、表示制御部２７は、制御部２６からの指示に応じて表示部２８に、例えば図７に示す機能一覧画面１７１を表示させる。
【００４５】
機能一覧画面１７１には、各種の機能を実行させるためのボタンや、機能一覧画面１７１を閉じるときに操作されるボタン１８１が設けられている。例えば、各種の機能を実行させるボタンとして、所定の条件を満たす容器を検索するための検索ボタン１８２が設けられている。ユーザが入力部２５を操作して検索ボタン１８２を選択（操作）すると、制御部２６は、ユーザの操作に応じて、容器を検索するときの検索条件を入力する検索条件入力画面の表示を表示制御部２７に指示する。すると、表示制御部２７は、制御部２６からの指示に応じて、表示部２８に、例えば図８に示す検索条件入力画面２１１を表示させる。
【００４６】
検索条件入力画面２１１には、培養者を選択するボタン、サンプル名を入力する入力欄、および容器に入れられた細胞の種類を選択するときに操作されるボタンが設けられている。また、検索条件入力画面２１１には、サンプル内の細胞の培養開始日を指定するプルダウンボックス、容器の種類を選択するときに操作されるボタン、およびその他の条件を指定するときに操作されるボタンが設けられている。
【００４７】
ユーザは、入力部２５を操作して、これらのプルダウンボックスやボタンなどを操作することで、検索条件を入力する。
【００４８】
また、検索条件入力画面２１１には、検索を実行させるときに操作されるボタン２２１や、検索条件入力画面２１１を閉じるときに操作されるボタン２２２が設けられている。例えば、ユーザが入力部２５を操作して検索条件入力画面２１１に検索条件を入力し、さらにボタン２２１を操作すると、制御部２６は、入力された検索条件、および記録部２４に記録されているサンプル情報に基づいて、容器保持部２１に格納されている容器のうち、入力された検索条件を満たす容器を検索する。そして、制御部２６は、検索により特定された容器について、その容器のサンプルの一覧を示すサンプル一覧画面１３１の表示を表示制御部２７に指示する。これにより、表示部２８には、検索条件を満たす容器のサンプル一覧画面１３１が表示される。
【００４９】
このように、検索条件入力画面２１１が表示されて、入力された検索条件を満たす容器が検索された場合には、ステップＳ１１において制御部２６は、検索の結果得られた容器を選択する。
【００５０】
図２のフローチャートの説明に戻り、ステップＳ１１において容器が選択され、サンプル一覧画面１３１が表示されると、ステップＳ１２において、制御部２６は、容器のサンプルを選択する。
【００５１】
例えば、ユーザが入力部２５を操作して、サンプル一覧画面１３１から、１つのサンプル名１４１を選択すると、制御部２６は、ユーザの操作に応じて選択されたサンプル名１４１により特定されるサンプルを選択する。
【００５２】
なお、より詳細には、制御部２６は、ステップＳ１２において、サンプルだけでなく、サンプル内の観察位置や、その観察位置を観察したときの対物レンズの倍率、観察方法なども選択する。すなわち、制御部２６は、サンプル名１４１が選択されると、選択されたサンプル名１４１により特定されるサンプルにおける細胞の培養履歴が表示される培養履歴画面の表示を表示制御部２７に指示する。
【００５３】
表示制御部２７は、制御部２６の指示に応じて、指示されたサンプルのサンプル情報を記録部２４から取得し、取得したサンプル情報に基づいて、表示部２８に培養履歴画面を表示させる。例えば、サンプル名１４１−１が選択されると、表示部２８には図９に示す培養履歴画面２５１が表示される。
【００５４】
培養履歴画面２５１の図中、上側には、サンプル名、サンプル内の細胞の名前、培養者名が表示されており、また、選択された容器を表す画像も表示されている。図９の例では、図中、右上に容器を表す画像として、６つのウェルを有するウェルプレートの画像が表示されており、６つのウェルのうち、ユーザにより選択されたサンプルとしてのウェルは、他のウェルとは異なる色で表示されている。
【００５５】
さらに、培養履歴画面２５１には、タイムラプス観察時に撮像した観察画像の撮像時刻ごとにサンプル内の細胞に関する情報が表示される表示欄２６１−１乃至表示欄２６１−５が図中、縦方向に並べられて設けられている。また、表示欄２６１−１乃至表示欄２６１−５には、サンプル内の細胞に関する情報の詳細を表示するときに操作される詳細表示ボタン２６２−１乃至詳細表示ボタン２６２−５が設けられている。
【００５６】
なお、以下、表示欄２６１−１乃至表示欄２６１−５のそれぞれを個々に区別する必要のない場合、単に表示欄２６１と称し、詳細表示ボタン２６２−１乃至詳細表示ボタン２６２−５のそれぞれを個々に区別する必要のない場合、単に詳細表示ボタン２６２と称する。
【００５７】
培養履歴画面２５１では、表示欄２６１内の詳細表示ボタン２６２が操作される前の状態において、表示欄２６１には詳細表示ボタン２６２、観察画像の撮像時刻、および培養者名だけが表示されている。そして、詳細表示ボタン２６２が操作されると、表示欄２６１には、さらに観察画像などの詳細な情報が表示される。
【００５８】
図９の例では、表示欄２６１−２乃至表示欄２６１−５には、詳細表示ボタン２６２、撮像時刻、および培養者名だけが表示されている。例えば、表示欄２６１−２には、撮像時刻を示す文字“2007/Nov/01 11：10”が表示され、培養者名を示す文字“BioStationCT Admin”が表示されている。
【００５９】
また、表示欄２６１−１は、詳細表示ボタン２６２−１が操作された状態となっており、表示欄２６１−１には、詳細表示ボタン２６２、撮像時刻“2007/Nov/01 11：20”、および培養者名“BioStationCT Admin”の他、観察画像などの詳細な情報も表示されている。
【００６０】
すなわち、表示欄２６１−１内には、選択された容器の画像２６３と、撮像時刻“2007/Nov/01 11：20”におけるサンプル内の観察位置ごとの情報が表示されるサブ表示欄２６４とが表示されている。さらに、サブ表示欄２６４内の図中、左側には、円形のウェルの画像が、選択されたサンプルの画像として表示されており、その画像のウェルの中央には、観察位置を示す点が表示されている。
【００６１】
また、サブ表示欄２６４内の図中、右側には、表示欄２６１内の図中、上側に表示された撮像時刻において、サンプルの画像により示される観察位置を撮像して得られた観察画像２６５−１乃至観察画像２６５−４が表示されている。観察画像２６５−１乃至観察画像２６５−４のそれぞれの図中、上側には観察条件を示す文字“４×”、“１０×”、“２０×”、および“ＦＬ”が表示されている。
【００６２】
例えば、文字“４×”は、その文字の下の観察画像２６５−１が、倍率が４倍である対物レンズを用いて細胞を位相差観察したときの観察画像であることを示している。また、文字“ＦＬ”は、その文字の下の観察画像２６５−４が、細胞を蛍光観察したときの観察画像であることを示している。このように、サブ表示欄２６４内には、観察位置と撮像時刻が同じであり、観察条件の異なる観察画像が並べられて表示される。
【００６３】
さらに、観察画像２６５−１乃至観察画像２６５−４のそれぞれの図中、下側には、それらの画像を拡大して表示させるときに操作される拡大ボタン２６６−１乃至拡大ボタン２６６−４が表示されている。なお、以下、観察画像２６５−１乃至観察画像２６５−４のそれぞれを個々に区別する必要のない場合、単に観察画像２６５と称し、拡大ボタン２６６−１乃至拡大ボタン２６６−４のそれぞれを個々に区別する必要のない場合、単に拡大ボタン２６６と称する。
【００６４】
なお、表示欄２６１−１には、１つのサブ表示欄２６４だけが表示されているが、表示欄２６１−１に表示された撮像時刻に、複数の観察位置において観察画像が撮像された場合には、それらの観察位置についてのサブ表示欄のそれぞれが並べられて表示される。さらに、図９に示す状態において、詳細表示ボタン２６２−１が操作されると、表示欄２６１−１から画像２６３およびサブ表示欄２６４の表示が消えて、表示欄２６１−１には撮像時刻、詳細表示ボタン２６２−１、および培養者名だけが表示される。
【００６５】
このようにして、培養履歴画面２５１が表示され、ユーザが入力部２５を操作して拡大ボタン２６６を選択すると、制御部２６はユーザの操作に応じて、拡大ボタン２６６に対応する観察画像２６５を選択する。
【００６６】
例えば、拡大ボタン２６６−１が選択された場合、制御部２６は、ステップＳ１１の処理で選択された容器のサンプルのうち、培養履歴画面２５１に表示されているサンプル名により特定されるサンプルを選択し、さらにそのサンプル内の中央を観察位置として、４倍の対物レンズで位相差観察したときの観察画像群を選択する。つまり、制御部２６は、記録部２４に記録されているサンプル情報に含まれる観察画像群のうち、観察画像２６５−１が含まれている観察画像群を選択する。
【００６７】
このように、ステップＳ１２の処理においては、制御部２６は、サンプルだけでなく、そのサンプル内の観察位置および観察条件も選択する。これにより、所定の容器のサンプル内の位置を観察位置として、その観察位置を所定の観察条件でタイムラプス観察して得られた観察画像群が選択されることになる。
【００６８】
図２のフローチャートの説明に戻り、ステップＳ１２の処理によりサンプルが選択されると、すなわち培養履歴画面２５１内の拡大ボタン２６６が選択されると、ステップＳ１３において、表示部２８は、選択された拡大ボタン２６６に対応する観察画像を表示する。
【００６９】
例えば、拡大ボタン２６６−１が選択された場合、制御部２６は、ユーザの操作に応じて、表示制御部２７に拡大ボタン２６６−１に対応する観察画像２６５−１を拡大して表示させる。表示制御部２７は、制御部２６の指示に応じて、観察画像２６５−１が拡大して表示される観察画像表示画面を表示部２８に表示させる。
【００７０】
これにより、表示部２８には、例えば図１０に示す観察画像表示画面２９１が表示される。観察画像表示画面２９１の表示領域３０１には、拡大ボタン２６６に対応する観察画像が拡大表示され、表示領域３０１の図中、右側には、サンプル名やサンプル内の観察位置、観察画像の撮像時刻、観察対象となった細胞の培養条件（観察条件）などが表示されている。
【００７１】
また、観察画像表示画面２９１には、観察画像群の再生を制御するときに操作されるボタン群３０２が設けられている。例えばユーザは、ボタン群３０２を操作することで、表示領域３０１に、選択された拡大ボタン２６６に対応する観察画像２６５の含まれる観察画像群を時系列で順番に表示させる。これにより、ユーザは拡大表示された観察画像を見ながら、その観察画像をマルチポイント表示させる画像とするか否かを決めることができる。
【００７２】
さらに、観察画像表示画面２９１には、マルチポイントボタン３０３、ボタン３０４、タブ３０５−１乃至タブ３０５−４、およびオーバーラップボタン３０６が設けられている。マルチポイントボタン３０３は、表示領域３０１に表示されている観察画像、より詳細には、その観察画像が含まれる観察画像群をマルチポイント表示させる観察画像群として選択するときに操作され、ボタン３０４は、観察画像表示画面２９１を閉じるときに操作される。
【００７３】
また、タブ３０５−１乃至タブ３０５−４は、表示領域３０１における観察画像の表示を切り換えるときに操作される。すなわち、拡大ボタン２６６に対応する観察画像２６５の含まれる観察画像群に、関連付けられた他の観察画像群がある場合、ユーザは、タブ３０５−１乃至タブ３０５−４の何れかを選択することで、互いに関連付けられた観察画像群のうちの何れかを表示領域３０１に表示させることができる。
【００７４】
ここで、互いに関連付けられた観察画像群とは、観察対象および各観察画像の撮像時刻が同じであり、観察条件だけが異なる観察画像群をいう。例えば、細胞を位相差観察して得られた観察画像からなる観察画像群と、その観察画像群の各観察画像と撮像時刻が同じであり、同じ細胞を蛍光観察して得られた観察画像からなる観察画像群とは、互いに関連付けられた観察画像群とされる。
【００７５】
タブ３０５−１乃至タブ３０５−４のそれぞれには、文字“Ｐｈ”、“Ｃｈ１”、“Ｃｈ２”、および“Ｃｈ３”が表示されており、タブ３０５−１が選択されると、表示領域３０１には、位相差観察により得られた観察画像が表示される。また、タブ３０５−２乃至タブ３０５−４の何れかが選択されると、表示領域３０１には、蛍光観察により得られた観察画像が表示される。ここで、タブ３０５−２乃至タブ３０５−４のそれぞれが選択されたときに表示される観察画像は、撮像された蛍光の波長が異なる観察画像とされる。
【００７６】
さらに、オーバーラップボタン３０６は、互いに関連付けられた観察画像のうちの２つの観察画像を表示領域３０１に重畳させて表示させるときに操作される。例えば、タブ３０５−１が選択されて位相差観察により得られた観察画像が表示領域３０１に表示されている状態で、ユーザがオーバーラップボタン３０６を操作して、タブ３０５−２を選択すると、表示領域３０１には、位相差観察により得られた観察画像に、蛍光観察により得られた観察画像が重畳（合成）されて表示される。
【００７７】
図２のフローチャートの説明に戻り、観察画像表示画面２９１の表示領域３０１に観察画像が表示されると、ステップＳ１４において、制御部２６は、表示されている観察画像の含まれる観察画像群をマルチポイント表示用の観察画像群とするか否かを判定する。
【００７８】
例えば、観察画像表示画面２９１が表示されている状態において、マルチポイントボタン３０３が選択（操作）された場合、マルチポイント表示用の観察画像群とすると判定され、ボタン３０４が操作された場合、マルチポイント表示用の観察画像群としないと判定される。
【００７９】
ボタン３０４が操作され、ステップＳ１４において、マルチポイント表示用の観察画像群としないと判定された場合、表示制御部２７は、制御部２６の指示に応じて表示部２８を制御し、観察画像表示画面２９１を閉じさせる。そして、処理は、ステップＳ１２に戻り、上述した処理が繰り返される。
【００８０】
例えば、観察画像表示画面２９１が閉じられると、表示部２８の表示は、培養履歴画面２５１に切り換わり、ユーザは、拡大ボタン２６６を操作してサンプルを選択し直す。なお、ユーザは、入力部２５を操作することで、培養履歴画面２５１を閉じさせて容器一覧画面６１を表示させ、容器を選択し直すことも可能である。この場合には、処理はステップＳ１１に戻り、制御部２６はユーザの操作に応じて容器の選択を行う。
【００８１】
一方、ステップＳ１４において、マルチポイント表示用の観察画像群とすると判定された場合、ステップＳ１５において、制御部２６は観察画像表示画面２９１の表示領域３０１に表示されている観察画像の観察画像群をマルチポイント表示用の観察画像群として選択する。換言すれば、制御部２６は、選択された拡大ボタン２６６に対応する観察画像２６５の含まれる観察画像群をマルチポイント表示用の観察画像群とする。
【００８２】
ステップＳ１６において、表示部２８は、マルチポイント表示画面を表示する。すなわち、制御部２６は、表示制御部２７に対して、複数のマルチポイント表示用の観察画像群の観察画像が並べられて表示されるマルチポイント表示画面の表示を指示する。そして、表示制御部２７は、制御部２６の指示に応じて、必要に応じて記録部２４からサンプル情報を取得し、取得したサンプル情報を用いて表示部２８にマルチポイント表示画面を表示させる。
【００８３】
これにより、表示部２８には、例えば図１１に示すマルチポイント表示画面３３１が表示される。マルチポイント表示画面３３１には、マルチポイント表示用の観察画像が表示される表示領域３４１−１乃至表示領域３４１−６が並べられて設けられており、表示領域３４１−１乃至表示領域３４１−６には、それぞれ異なる観察画像群の観察画像が表示される。
【００８４】
図１１の例では、マルチポイント表示用の観察画像群が１つしか選択されていないため、表示領域３４１−２乃至表示領域３４１−６には観察画像が表示されておらず、表示領域３４１−１だけに観察画像が表示されている。なお、以下、表示領域３４１−１乃至表示領域３４１−６を個々に区別する必要のない場合、単に表示領域３４１と称する。
【００８５】
また、ユーザは、入力部２５を操作して表示領域３４１を選択することで、その選択した表示領域３４１に表示させるマルチポイント表示用の観察画像群を選択することができる。例えば、表示領域３４１−２が選択されて、マルチポイント表示用とする観察画像群が指定されると、表示領域３４１−２には新たに選択された観察画像群の観察画像が表示される。このようにマルチポイント表示画面３３１では、ユーザは任意の表示領域３４１に、所望の観察画像を表示させることができるので、ユーザの好みの配列で、複数の観察画像を並べて表示させることができる。
【００８６】
さらに、マルチポイント表示画面３３１には、表示領域３４１への観察画像の表示を制御するときに操作されるボタン群３４２が設けられている。ユーザは、ボタン群３４２を操作することにより、表示領域３４１に観察画像を時系列で順番に表示させたり、観察画像の時系列での表示を停止、一時停止、または早送りさせたりすることができる。
【００８７】
さらに、また、マルチポイント表示画面３３１における表示領域３４１の図中、下側にはシークバー３４３が設けられており、シークバー３４３には、時系列で表示される観察画像の撮像時刻に対応する位置につまみ３４３ａが表示されている。
【００８８】
例えば、表示領域３４１に観察画像群を構成する観察画像が撮像時刻の古いものから順番に表示される場合、観察画像群の先頭の観察画像が表示されているときには、つまみ３４３ａは、シークバー３４３上の図中、左端に位置している。そして、つまみ３４３ａは時間の経過とともに、図中、右方向に移動し、観察画像群の最後の観察画像が表示されたときに、シークバー３４３上の図中、右端に到達する。ユーザは入力部２５を操作してつまみ３４３ａを移動させることにより、観察画像群のうちの所望の撮像時刻の観察画像を表示領域３４１に表示させることができる。
【００８９】
また、マルチポイント表示画面３３１におけるシークバー３４３の図中、下側には合成設定ボタン３４４−１乃至合成設定ボタン３４４−４、ボタン３４５、再生位置調整ボタン３４６、およびダウンロードボタン３４７が設けられている。
【００９０】
合成設定ボタン３４４−１乃至合成設定ボタン３４４−４は、表示領域３４１に表示される観察画像に、さらにその観察画像に関連付けられた他の観察画像を重畳して表示させるときに操作される。合成設定ボタン３４４−１乃至合成設定ボタン３４４−４には、文字“Ｐｈ”、“Ｃｈ１”、“Ｃｈ２”、および“Ｃｈ３”が表示されており、合成設定ボタン３４４−１が選択されると、表示領域３４１には、位相差観察により得られた観察画像が表示される。また、合成設定ボタン３４４−２乃至合成設定ボタン３４４−４が選択されると、表示領域３４１には、蛍光観察により得られた観察画像が表示される。ここで、合成設定ボタン３４４−２乃至合成設定ボタン３４４−４のそれぞれが選択されたときに表示される観察画像は、撮像された蛍光の波長の異なる観察画像とされる。
【００９１】
例えば、マルチポイント表示用とされた観察画像群が、位相差観察により得られた観察画像群である場合、合成設定ボタン３４４−１は、予め選択された状態となっている。そして、この状態において、ユーザがさらに合成設定ボタン３４４−２および合成設定ボタン３４４−３を選択すると、表示領域３４１には、位相差観察により得られた観察画像に対して、さらに合成設定ボタン３４４−２および合成設定ボタン３４４−３に対応する、蛍光観察により得られた観察画像のそれぞれが重畳されて表示される。
【００９２】
つまり、表示領域３４１には、位相差観察により得られた観察画像と、蛍光観察により得られた２つの観察画像とが合成されて得られた画像が、時系列で順番に表示されることになる。なお、以下、合成設定ボタン３４４−１乃至合成設定ボタン３４４−４のそれぞれを個々に区別する必要のない場合、単に合成設定ボタン３４４と称する。
【００９３】
また、ボタン３４５は、マルチポイント表示画面３３１を閉じるときに操作され、再生位置調整ボタン３４６は、表示領域３４１に時系列で表示される観察画像のうちの先頭の観察画像を変更するときに操作される。
【００９４】
例えば、再生位置調整ボタン３４６が操作され、表示領域３４１−１に表示される観察画像群から、所定の観察画像が先頭の観察画像として選択された場合、表示領域３４１−１には、選択された観察画像から順番に時系列で観察画像が表示される。このとき、選択された観察画像よりも撮像時刻が古い観察画像は、表示領域３４１−１には表示されない。
【００９５】
ダウンロードボタン３４７は、表示領域３４１のそれぞれに時系列で観察画像が表示される１つの動画像の動画像ファイルを生成させるときに操作される。
【００９６】
なお、マルチポイント表示画面３３１の表示領域３４１に、観察画像の他、ユーザにより選択された、容器の全体の画像、つまりその容器に設けられた複数のサンプルが表示されている画像が表示されるようにしてもよい。
【００９７】
図２のフローチャートの説明に戻り、ステップＳ１６においてマルチポイント表示画面３３１が表示されると、ステップＳ１７において、制御部２６は、新たなマルチポイント表示用の観察画像群を選択するか否かを判定する。例えば、ユーザにより表示領域３４１が選択されて、マルチポイント表示用の観察画像群の選択が指示されると、マルチポイント表示用の観察画像群を選択すると判定される。
【００９８】
ステップＳ１７において、マルチポイント表示用の観察画像群を選択すると判定された場合、処理はステップＳ１３に戻り、新たなマルチポイント表示用の観察画像群が選択される。すなわち、表示制御部２７は、制御部２６の指示に応じて、表示部２８の表示をマルチポイント表示画面３３１から観察画像表示画面２９１に切り換える。そして、ユーザによりボタン３０４が操作されると、表示制御部２７は、制御部２６の指示に応じて、さらに表示部２８の表示を観察画像表示画面２９１から、培養履歴画面２５１に切り換える。
【００９９】
ユーザは、入力部２５を操作して培養履歴画面２５１から拡大ボタン２６６を選択し、さらに、これにより新たに表示された観察画像表示画面２９１のマルチポイントボタン３０３を選択することで、制御部２６にマルチポイント表示用の観察画像群を選択させる。
【０１００】
一方、ステップＳ１７において、マルチポイント表示用の観察画像群を選択しないと判定された場合、ステップＳ１８において、制御部２６は、再生開始位置の調整を行うか否かを判定する。例えば、マルチポイント表示画面３３１が表示されている状態で、ユーザにより再生位置調整ボタン３４６が操作された場合、再生開始位置の調整を行うと判定される。
【０１０１】
ステップＳ１８において、再生開始位置の調整を行わないと判定された場合、処理はステップＳ２０に進む。
【０１０２】
これに対してステップＳ１８において、再生開始位置の調整を行うと判定された場合、ステップＳ１９において、再生位置調整部４１は、ユーザの操作に応じて、観察画像群を時系列で表示させるときの先頭の観察画像を選択する。そして、再生位置調整部４１は、その先頭の観察画像と、観察画像が表示される表示領域３４１とを示す再生開始位置情報を生成する。
【０１０３】
例えば、表示領域３４１−１に表示される観察画像群Ｇ１が、サンプルへの試薬の添加前の時刻から所定の時間間隔で撮像された観察画像からなり、表示領域３４１−２に表示される観察画像群Ｇ２が、サンプルへの試薬の添加直後から所定の時間間隔で撮像された観察画像からなるものとする。この場合、マルチポイント表示を行うと、表示領域３４１−１には、試薬の添加前の時刻からの観察画像が表示され、表示領域３４１−２には、試薬の添加直後の時刻からの観察画像が表示される。
【０１０４】
しかしながら、これらの２つのサンプル（観察画像に表示される細胞）の時間的な変化を比較するには、表示領域３４１−１に表示される観察画像群Ｇ１も、試薬の添加直後の時刻の観察画像から表示が開始されることが望ましい。そこで、例えばユーザは、再生位置調整ボタン３４６を操作し、さらに表示領域３４１−１を指定して、観察画像群Ｇ１の観察画像のうち、サンプルに試薬が添加された直後の時刻の観察画像を、先頭の観察画像として選択することで、観察画像群Ｇ１の再生開始位置を調整する。
【０１０５】
例えば、再生位置調整ボタン３４６が操作され、さらに表示領域３４１−１が指定されると、表示部２８の表示は、表示領域３４１−１に表示される観察画像群の観察画像だけが時系列で表示される画面に切り換わる。そしてユーザは、その画面に表示されたシークバーを操作して各撮像時刻の観察画像を表示させながら、先頭の観察画像を指定する。
【０１０６】
再生位置調整部４１は、ユーザの操作に応じて、観察画像群Ｇ１の観察画像のうち、ユーザにより指定された観察画像を、時系列で表示する先頭の観察画像として選択し、その観察画像と、観察画像が表示される表示領域３４１とを示す再生開始位置情報を生成する。これにより、ユーザは、簡単な操作で観察画像群の再生開始位置を調整し、複数のサンプル内の細胞の時間的な変化をより簡単に比較することができる。
【０１０７】
特に、観察画像とともに試薬の添加のタイミングを示す画像やコメントなどが表示されるようにすると、ユーザは、簡単に観察画像群の再生開始位置を調整することができる。
【０１０８】
ステップＳ１９において再生開始位置が調整されるか、またはステップＳ１８において、再生開始位置の調整を行わないと判定されると、ステップＳ２０において、制御部２６は観察画像の合成表示の設定を行うか否かを判定する。例えば、ユーザにより合成設定ボタン３４４が操作された場合、合成表示の設定を行うと判定される。
【０１０９】
ステップＳ２０において、合成表示の設定を行わないと判定された場合、処理はステップＳ２２に進む。一方、ステップＳ２０において、合成表示の設定を行うと判定された場合、ステップＳ２１において、制御部２６は、表示領域３４１に重畳（合成）して表示させる観察画像群を示す合成設定情報を生成する。
【０１１０】
すなわち、ユーザは合成表示の設定を行おうとする表示領域３４１を指定し、さらにその表示領域３４１に表示させる互いに関連付けられた観察画像群が選択されるように、合成設定ボタン３４４を操作する。すると、制御部２６は、ユーザの操作に応じて、合成設定ボタン３４４により選択された観察画像群と、それらの観察画像群が表示される表示領域３４１とを示す合成設定情報を生成する。
【０１１１】
ステップＳ２１において合成設定情報が生成されるか、またはステップＳ２０において合成表示の設定を行わないと判定された場合、ステップＳ２２において、制御部２６は、マルチポイント表示での観察画像の時系列の表示が指示されたか否かを判定する。例えば、ユーザによりボタン群３４２が操作され、観察画像の時系列の表示が指示された場合、観察画像の時系列の表示が指示されたと判定される。
【０１１２】
ステップＳ２２において、観察画像の時系列の表示が指示されていないと判定された場合、処理はステップＳ２４に進む。これに対して、ステップＳ２２において、観察画像の時系列の表示が指示されたと判定された場合、ステップＳ２３において、表示部２８は各表示領域３４１に観察画像を時系列に順番に表示する。
【０１１３】
すなわち、制御部２６は、表示制御部２７に再生開始位置情報および合成設定情報を供給するとともに、表示制御部２７にマルチポイント表示用の観察画像群として選択されている観察画像群の表示領域３４１への時系列での表示を指示する。すると、表示制御部２７は、制御部２６からの再生開始位置情報および合成設定情報に基づいて、表示領域３４１−１乃至表示領域３４１−６のそれぞれに、選択された観察画像群の観察画像のそれぞれを時系列で順番に表示させる。
【０１１４】
このとき、表示制御部２７は、再生開始位置情報により示される表示領域３４１については、その再生開始位置情報により示される観察画像を先頭とし、それ以降の撮像時刻の観察画像が時系列で順番に表示されるように、表示領域３４１への観察画像の表示を制御する。また、表示制御部２７は、合成設定情報により示される表示領域３４１については、その合成設定情報により示される複数の観察画像群の観察画像が合成されて表示領域３４１に表示されるように表示領域３４１への観察画像の表示を制御する。
【０１１５】
これにより、例えば、表示領域３４１−１には、位相差観察により得られた観察画像と、蛍光観察により得られた観察画像とが合成されて表示される。このように、位相差観察により得られた観察画像と、蛍光観察により得られた観察画像とを重ねて同時に表示させることで、ユーザは、細胞のどの部位から蛍光が発現しているかを容易に把握することができる。また、ユーザはどの程度細胞が増殖し、各細胞の部位からどの程度蛍光が発現しているかも容易に把握することができる。
【０１１６】
さらに、マルチポイント表示時において、表示制御部２７は、表示領域３４１に表示される観察画像群の先頭の観察画像のそれぞれの撮像時刻から、同じ時間が経過したときに撮像された観察画像のそれぞれが同時に表示されるように、観察画像の表示を制御する。
【０１１７】
具体的には、例えば表示領域３４１−１に表示される観察画像群Ｇ２１が、時間間隔ｔで撮像された観察画像からなり、表示領域３４１−２に表示される観察画像群Ｇ２２が、時間間隔２ｔで撮像された観察画像からなるとする。このとき、表示制御部２７は、表示領域３４１−１に観察画像群Ｇ２１の先頭の観察画像を表示させるとともに、表示領域３４１−２に観察画像群Ｇ２２の先頭の観察画像を表示させる。
【０１１８】
そして、表示制御部２７は、所定の時間が経過すると、表示領域３４１−１の表示を観察画像群Ｇ２１の先頭の観察画像から、２番目の観察画像に切り換え、さらに所定の時間が経過すると、表示領域３４１−１の表示を観察画像群Ｇ２１の３番目の観察画像に切り換える。また、表示領域３４１−２ついては、表示制御部２７は、表示領域３４１−１に３番目の観察画像が表示される直前までは、表示領域３４１−２に観察画像群Ｇ２２の先頭の観察画像を表示させたままとする。そして、表示制御部２７は、表示領域３４１−１に３番目の観察画像が表示されるタイミングで、表示領域３４１−２に観察画像群Ｇ２２の２番目の観察画像を表示させる。
【０１１９】
ここで、観察画像群Ｇ２１の３番目の観察画像は、先頭の観察画像の撮像時刻から時間２ｔが経過したときに撮像された観察画像であり、また観察画像群Ｇ２２の２番目の観察画像は、先頭の観察画像の撮像時刻から時間２ｔが経過したときに撮像された観察画像である。このように、それぞれの表示領域３４１に表示される先頭の観察画像の撮像時刻から、同じ時間が経過したときに撮像された観察画像のそれぞれが同時に表示されるようにすることで、ユーザは、複数のサンプル内の細胞の時間的変化を簡単に比較することができる。
【０１２０】
なお、表示領域３４１に観察画像を時系列に表示させる場合、表示制御部２７が必要に応じて記録部２４からサンプル情報を取得し、取得したサンプル情報に含まれる観察条件や解析結果、ユーザのコメントなどを観察画像とともに表示させるようにしてもよい。
【０１２１】
ステップＳ２３において観察画像がマルチポイント表示されるか、またはステップＳ２２において観察画像の時系列の表示が指示されていないと判定されると、ステップＳ２４において、制御部２６は、動画像ファイルの生成が指示されたか否かを判定する。例えば、ユーザによりダウンロードボタン３４７が操作された場合、動画像ファイルの生成が指示されたと判定される。
【０１２２】
ステップＳ２４において、動画像ファイルの生成が指示されていないと判定された場合、処理はステップＳ２６に進む。これに対して、ステップＳ２４において、動画像ファイルの生成が指示されたと判定された場合、ステップＳ２５において、動画像生成部２９は、動画像ファイルを生成する。
【０１２３】
すなわち、ダウンロードボタン３４７が操作されて動画像ファイルの生成が指示されると、制御部２６は、動画像生成部２９に動画像ファイルの生成を指示する。すると、動画像生成部２９は、制御部２６の指示に応じて、表示制御部２７からマルチポイント表示画面３３１を表示するための画像データや、表示領域３４１に表示させる観察画像群を取得する。そして、動画像生成部２９は、取得した画像データや観察画像群に基づいて、マルチポイント表示画面３３１の表示領域３４１のそれぞれに、対応する観察画像群の観察画像のそれぞれが時系列で表示される１つの動画像の動画像ファイルを生成する。
【０１２４】
この動画像では、例えば図１２に示すように、マルチポイント表示画面３３１の表示領域３４１のそれぞれに観察画像のそれぞれが表示されている画像が、動画像を構成する１コマ分の画像とされている。すなわち、表示領域３４１における観察画像の表示が切り換わった、各時刻のマルチポイント表示画面３３１が時系列に並べられてできる動画像の動画像ファイルが動画像生成部２９により生成される。
【０１２５】
したがって、動画像生成部２９により生成された動画像ファイルの動画像を再生して表示部２８に表示させると、表示部２８には、ステップＳ２３の処理におけるマルチポイント表示のときに表示部２８に表示される画面と同じ画面が表示されることになる。
【０１２６】
ところが、マルチポイント表示においては、観察画像群に基づいて、表示領域３４１のそれぞれに、観察画像群のそれぞれを構成する観察画像のそれぞれが時系列に表示される。そのため、例えばボタン３４５が操作されて、一度、マルチポイント表示画面３３１が閉じられてしまうと、同じ観察画像のそれぞれを同じ表示領域３４１のそれぞれにマルチポイント表示させるには、ユーザは再度、同じ観察画像群を選び直さなければならない。
【０１２７】
これに対して、動画像生成部２９に、各時刻におけるマルチポイント表示画面３３１の画像が１コマ分の画像とされる動画像の動画像ファイルを生成させると、ユーザはその動画像を再生させて、同じ組み合わせの観察画像が並べられて時系列に表示される画像を何度でも簡単に見ることができる。しかも、ユーザは、いちいち観察画像群を選択し直す必要もない。
【０１２８】
なお、生成された動画像ファイルの動画像を再生した場合にも、ステップＳ２３の処理におけるマルチポイント表示の場合と同様に、表示領域３４１に複数の観察画像が重畳されて表示されたり、観察画像とともに観察条件や解析結果、コメントなどが表示されたり、あるいは先頭の観察画像として選択された観察画像から順番に表示されたりする。また、動画像とは別に、観察条件や解析結果、コメントなどを表示することができるように、これらの情報が動画像に付加されるようにしてもよい。
【０１２９】
このようにして、動画像生成部２９により生成された動画像ファイルは、制御部２６に供給され、制御部２６により記録部２４に記録されたり、通信部３０を介して、培養観察装置１１に接続された他の装置に送信されたりする。
【０１３０】
ステップＳ２５において動画像ファイルが生成されるか、またはステップＳ２４において、動画像ファイルの生成が指示されなかったと判定されると、ステップＳ２６において、制御部２６は、観察画像をマルチポイント表示する処理を終了するか否かを判定する。例えば、マルチポイント表示画面３３１のボタン３４５が操作された場合、処理を終了すると判定される。
【０１３１】
ステップＳ２６において、処理を終了しないと判定された場合、処理はステップＳ１７に戻り、上述した処理が繰り返される。
【０１３２】
これに対して、ステップＳ２６において、処理を終了すると判定された場合、制御部２６は、表示制御部２７を制御して、マルチポイント表示画面３３１を閉じさせ、マルチポイント表示処理は終了する。
【０１３３】
以上のようにして、培養観察装置１１は、マルチポイント表示画面３３１に複数の観察画像群の観察画像のそれぞれを並べて時系列に表示する。このように、複数の観察画像のそれぞれを並べて時系列に表示することで、ユーザは、複数の異なる標本（細胞）の時間的な変化を簡単に比較することができる。
【０１３４】
なお、以上においては、ユーザが培養観察装置１１を操作することにより、マルチポイント表示処理などの各種の処理を培養観察装置１１に実行させると説明したが、ユーザが、例えば、通信網を介して培養観察装置１１に接続されているパーソナルコンピュータなどの装置を操作することで、培養観察装置１１に処理を実行させるようにしてもよい。そのような場合、例えば培養観察装置１１は、パーソナルコンピュータの遠隔制御に基づいて、各種の処理を行い、その処理の結果をパーソナルコンピュータに送信する。そして、パーソナルコンピュータは、培養観察装置１１から送信されてきた処理結果を受信して表示する。
【０１３５】
また、培養観察装置１１に限らず、パーソナルコンピュータや顕微鏡などの装置にサンプル情報を記録させておき、それらの装置に図２および図３を参照して説明したマルチポイント表示処理を実行させるようにしてもよい。
【０１３６】
さらに、上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。上述した一連の処理をソフトウェアにより実行する場合には、一連の処理を行うために制御部２６に実行させるプログラムは、予め記録部２４に記録されているか、または培養観察装置１１と接続されているサーバなどの外部装置から培養観察装置１１の記録部２４にインストールすることができる。
【０１３７】
なお、上述した一連の処理を実行させるプログラムは、必要に応じてルータ、モデムなどのインタフェースを介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を介して培養観察装置１１にインストールされるようにしてもよい。
【０１３８】
また、制御部２６等のコンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【０１３９】
さらに、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【０１４０】
【図１】本発明を適用した培養観察装置の一実施の形態の構成例を示すブロック図である。
【図２】マルチポイント表示処理を説明するフローチャートである。
【図３】マルチポイント表示処理を説明するフローチャートである。
【図４】容器一覧画面の表示例を示す図である。
【図５】選択された容器を示す画面の表示例を示す図である。
【図６】サンプル一覧画面の表示例を示す図である。
【図７】機能一覧画面の表示例を示す図である。
【図８】検索条件入力画面の表示例を示す図である。
【図９】培養履歴画面の表示例を示す図である。
【図１０】観察画像表示画面の表示例を示す図である。
【図１１】マルチポイント表示画面の表示例を示す図である。
【図１２】動画像ファイルを説明する図である。
【符号の説明】
【０１４１】
１１ 培養観察装置， ２１ 容器保持部， ２３ 観察部， ２４ 記録部， ２６ 制御部， ２７ 表示制御部， ２８ 表示部， ２９ 動画像生成部， ３０ 通信部， ４１ 再生位置調整部， ２５１ 培養履歴画面， ３３１ マルチポイント表示画面
【特許請求の範囲】
【請求項１】
所定の位置の容器の所定の観察位置にある観察対象の標本を撮像して得られた、撮像時刻の異なる複数の観察画像からなる観察画像群を選択する選択手段と、
選択された複数の前記観察画像群の前記観察画像が、前記観察画像群ごとに並べられて表示されるように、前記観察対象の位置関係に対応する表示位置に、それぞれ前記観察画像群の観察画像を時系列で順番に表示させる表示制御手段と
を備えることを特徴とする画像処理装置。
【請求項２】
選択された前記複数の観察画像群に基づいて、前記表示位置のそれぞれに、対応する前記観察画像群のそれぞれの観察画像が時系列に表示される１つの動画像を生成する動画像生成手段をさらに備える
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
選択された前記観察画像群から、前記表示位置への時系列の表示を開始する先頭の観察画像を選択する再生位置調整手段をさらに備える
ことを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記表示制御手段は、前記表示位置に、対応する前記観察画像群の観察画像と、その観察画像群に関連付けられた他の観察画像群の観察画像とを重畳して表示させる
ことを特徴とする請求項１に記載の画像処理装置。
【請求項５】
前記表示制御手段は、前記観察画像に関連付けられた前記標本の観察に関する情報を、前記観察画像とともに前記表示位置に表示させる
ことを特徴とする請求項１に記載の画像処理装置。
【請求項１】
所定の位置の容器の所定の観察位置にある観察対象の標本を撮像して得られた、撮像時刻の異なる複数の観察画像からなる観察画像群を選択する選択手段と、
選択された複数の前記観察画像群の前記観察画像が、前記観察画像群ごとに並べられて表示されるように、前記観察対象の位置関係に対応する表示位置に、それぞれ前記観察画像群の観察画像を時系列で順番に表示させる表示制御手段と
を備えることを特徴とする画像処理装置。
【請求項２】
選択された前記複数の観察画像群に基づいて、前記表示位置のそれぞれに、対応する前記観察画像群のそれぞれの観察画像が時系列に表示される１つの動画像を生成する動画像生成手段をさらに備える
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
選択された前記観察画像群から、前記表示位置への時系列の表示を開始する先頭の観察画像を選択する再生位置調整手段をさらに備える
ことを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記表示制御手段は、前記表示位置に、対応する前記観察画像群の観察画像と、その観察画像群に関連付けられた他の観察画像群の観察画像とを重畳して表示させる
ことを特徴とする請求項１に記載の画像処理装置。
【請求項５】
前記表示制御手段は、前記観察画像に関連付けられた前記標本の観察に関する情報を、前記観察画像とともに前記表示位置に表示させる
ことを特徴とする請求項１に記載の画像処理装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２００９−１６２７０８（Ｐ２００９−１６２７０８Ａ）
【公開日】平成２１年７月２３日（２００９．７．２３）
【国際特許分類】
【出願番号】特願２００８−２８４０（Ｐ２００８−２８４０）
【出願日】平成２０年１月１０日（２００８．１．１０）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成２１年７月２３日（２００９．７．２３）
【国際特許分類】
【出願日】平成２０年１月１０日（２００８．１．１０）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]