画像処理システム、画像処理装置及びプログラム
【課題】撮像画像を送信した相手側で表示されている画像を、その撮像画像の被写体を見ながら確認する。
【解決手段】第１の画像処理装置１０は、被写体６０を撮像した撮像画像を順次取得し、順次取得された撮像画像を第２の画像処理装置２０に送信する。第２の画像処理装置２０は、受信した撮像画像の識別情報を第１の画像処理装置１０に送信し、第１の画像処理装置１０は、送信された識別情報により識別される撮像画像の少なくとも一部を投影画像として被写体６０に投影させる。
【解決手段】第１の画像処理装置１０は、被写体６０を撮像した撮像画像を順次取得し、順次取得された撮像画像を第２の画像処理装置２０に送信する。第２の画像処理装置２０は、受信した撮像画像の識別情報を第１の画像処理装置１０に送信し、第１の画像処理装置１０は、送信された識別情報により識別される撮像画像の少なくとも一部を投影画像として被写体６０に投影させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理システム、画像処理装置及びプログラムに関する。
【背景技術】
【０００２】
遠隔地間をネットワークで結び、一方の地点の様子を撮像した画像を他方の地点に映し出して会議等を行う技術が知られている。例えば、下記の特許文献１では、遠隔地間を結んで行われる会議において、双方で表示される情報が不一致であった場合にはユーザにその旨通知する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平５−２０７４５３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明の目的の一つは、撮像画像を送信した相手側で表示されている画像を、その撮像画像の被写体を見ながら確認できる画像処理システム、画像処理装置及びプログラムを提供することにある。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、請求項１に記載の画像処理システムの発明は、第１の画像処理装置と、第２の画像処理装置とを含み、前記第１の画像処理装置は、被写体を撮像した撮像画像を順次取得する取得手段と、前記取得手段により順次取得された撮像画像を送信する撮像画像送信手段と、を含み、前記第２の画像処理装置は、前記撮像画像送信手段により送信された撮像画像を受信する撮像画像受信手段と、前記撮像画像受信手段により受信された撮像画像の識別情報を送信する識別情報送信手段と、を含み、前記第１の画像処理装置はさらに、前記識別情報送信手段により送信された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段を含むことを特徴とする。
【０００６】
また、請求項２に記載の発明は、請求項１に記載の画像処理システムにおいて、前記投影制御手段は、前記取得手段により順次取得される撮像画像の変化が予め定められた基準に満たない場合に、前記投影画像を投影させることを特徴とする。
【０００７】
また、請求項３に記載の発明は、請求項１又は２に記載の画像処理システムにおいて、前記被写体を撮像する撮像タイミングと、前記投影画像を前記被写体に投影させる投影タイミングとが重ならないように制御するタイミング制御手段をさらに含むことを特徴とする。
【０００８】
また、請求項４に記載の画像処理装置の発明は、被写体を撮像した撮像画像を順次取得する取得手段と、前記取得手段により順次取得された撮像画像を他の装置に送信する撮像画像送信手段と、前記他の装置により受信された撮像画像の識別情報を取得する識別情報取得手段と、前記識別情報取得手段により取得された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段と、を含むことを特徴とする。
【０００９】
また、請求項５に記載のプログラムの発明は、コンピュータを、被写体を撮像した撮像画像を順次取得する取得手段と、前記取得手段により順次取得された撮像画像を他の装置に送信する撮像画像送信手段と、前記他の装置により受信された撮像画像の識別情報を取得する識別情報取得手段と、前記識別情報取得手段により取得された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段として機能させるためのプログラムである。
【発明の効果】
【００１０】
請求項１、４及び５に記載の発明によれば、撮像画像を送信した相手側で表示されている画像を、その撮像画像の被写体を見ながら確認できる。
【００１１】
請求項２に記載の発明によれば、被写体側に変化がない間に、相手側で表示されている画像を確認できる。
【００１２】
請求項３に記載の発明によれば、投影した画像により撮像画像が影響を受けないようにできる。
【図面の簡単な説明】
【００１３】
【図１】本実施形態に係る画像処理システムのシステム構成図である。
【図２】第１の画像処理装置と第２の画像処理装置の機能ブロック図である。
【図３】画像管理テーブルの一例を示す図である。
【図４】投影画像の生成処理を説明する図である。
【図５】プロジェクタにより被写体に投影画像が投影された様子の一例を示す図である。
【図６】プロジェクタの投影タイミングを制御する処理の一例を説明するフローチャートである。
【図７】カメラによる撮像タイミングと、プロジェクタによる投影タイミングとを制御する処理の一例を説明する図である。
【図８】画像処理システムにおける処理の一例を説明するシーケンス図である。
【発明を実施するための形態】
【００１４】
以下、本発明を実施するための好適な実施の形態（以下、実施形態という）を、図面に従って説明する。
【００１５】
図１には、本実施形態に係る画像処理システム１のシステム構成図を示す。図１に示されるように、画像処理システム１は、第１の画像処理装置１０と第２の画像処理装置２０を含み、第１の画像処理装置１０と第２の画像処理装置２０とはネットワーク５を介して相互にデータ通信を行うものである。第１の画像処理装置１０には、カメラ３０及びプロジェクタ４０が接続されており、第２の画像処理装置２０には液晶ディスプレイ等の表示装置５０が接続されている。
【００１６】
本実施形態においては、カメラ３０及びプロジェクタ４０は共にレンズの画角が等しく、図１に示されるようにカメラ３０及びプロジェクタ４０の光軸はハーフミラー３５に到達するまではそれぞれ直角に、そしてハーフミラー３５から被写体６０に到達するまでは両者の光軸は一致するように配置される。
【００１７】
カメラ３０は、例えば技術説明に用いる資料を載せたテーブル等の被写体６０を撮像し、撮像した画像を第１の画像処理装置１０に転送する。また、プロジェクタ４０は、第１の画像処理装置１０により生成される投影画像の入力を受けて、入力された投影画像を被写体６０に対して投影するものである。
【００１８】
本実施形態では、第１の画像処理装置１０がカメラ３０から取得した撮像画像毎に識別情報を付与して管理し、識別情報を付与した撮像画像を第２の画像処理装置２０に送信することとする。そして、第２の画像処理装置２０では、第１の画像処理装置１０から送信された撮像画像を受信した後、受信した撮像画像に付与された識別情報を第１の画像処理装置１０に送信する。第１の画像処理装置１０は、第２の画像処理装置２０から送信された識別情報に対応する画像に基づいて投影画像を生成し、生成した投影画像をプロジェクタ４０により被写体６０上に投影することとする。以下、図２に示された、第１の画像処理装置１０と第２の画像処理装置２０の機能ブロック図を参照しながら、上記処理を実現するために第１の画像処理装置１０と第２の画像処理装置２０のそれぞれに備えられた機能について説明する。
【００１９】
まず、第１の画像処理装置１０に備えられた機能について説明する。図２に示されるように、第１の画像処理装置１０は、撮像画像取得部７０、画像管理部７２、画像送信部７４、識別情報受信部７６、画像特定部７８、対象領域設定部８０、投影画像生成部８２、投影制御部８４、及びタイミング制御部８６を備える。上記の各部の機能は、ＣＰＵ等の制御手段、メモリ等の記憶手段、外部デバイスとデータを送受信する入出力手段等を備えたコンピュータが、コンピュータ読み取り可能な情報記憶媒体に格納されたプログラムを読み込み実行することで実現されるものとしてよい。なお、プログラムは情報記憶媒体によってコンピュータたる第１の画像処理装置１０に供給されることとしてもよいし、インターネット等のデータ通信手段を介して供給されることとしてもよい。
【００２０】
撮像画像取得部７０は、カメラ３０とデータを通信する通信インターフェースを含み構成され、カメラ３０により撮像された撮像画像を順次取得するものである。撮像画像取得部７０は、予め定められた時間間隔毎に撮像画像を取得することとしてもよいし、第１の画像処理装置１０を操作するユーザからの入力に応じたタイミングで撮像画像を取得することとしてもよい。
【００２１】
画像管理部７２は、撮像画像取得部７０により取得された画像に識別情報を付与するとともに、識別情報が付与された各画像を管理するものである。本実施形態では、画像管理部７２は、撮像画像取得部７０により取得された各画像について画像管理テーブルを生成して管理することとする。
【００２２】
図３には、画像管理テーブルの一例を示した。図３に示されるように、画像管理テーブルは、各画像を識別する画像ＩＤに関連づけて、画像データと撮像時刻とを格納したテーブルとして構成されることとしてよい。例えば、画像管理部７２は、撮像画像取得部７０により取得された画像について、撮像された順序に応じて識別番号を付与し、当該付与した識別番号を画像ＩＤとすることとしてよい。なお、画像管理部７２は、撮像画像取得部７０により取得された全画像を管理することとしてもよいし、管理する画像の期間や数を定めることとしてもよい。
【００２３】
画像送信部７４は、画像管理部７２により識別情報が付与された画像を第２の画像処理装置２０に順次送信するものである。上述したように、第２の画像処理装置２０では、画像送信部７４により送信された画像を受信すると、当該受信した画像に付与された識別情報を第１の画像処理装置１０に向けて送信する。
【００２４】
識別情報受信部７６は、第２の画像処理装置２０から送信された識別情報を受信するものであり、受信した識別情報は画像特定部７８に出力される。
【００２５】
画像特定部７８は、識別情報受信部７６により受信された識別情報が入力されると、当該入力された識別情報により識別される画像を画像管理部７２に管理される画像の中から特定するものである。本実施形態では、画像特定部７８は、入力された識別情報をキーにして、画像管理部７２により管理される画像管理テーブルを参照して、該当する画像データを得ることとする。
【００２６】
対象領域設定部８０は、画像管理部７２により管理される画像のうち、第２の画像処理装置２０での表示を確認したい領域を対象領域として設定するものである。例えば、対象領域設定部８０は、ユーザからマウス等を用いて指定された座標範囲のデータに基づいて対象領域を設定することとしてよい。なお、対象領域は、画像管理部７２により管理される画像毎に設定してもよいし、複数の画像について共通して設定することとしてもよい。
【００２７】
投影画像生成部８２は、画像特定部７８により特定された画像と、対象領域設定部８０により設定された対象領域とに基づいて、投影画像を生成するものである。本実施形態では、画像特定部７８により特定された画像から、対象領域の示す座標範囲を抽出して投影画像を生成することとする。
【００２８】
図４には、投影画像の生成処理を説明する図を示した。図４に示されるように、画像ＩＤがそれぞれ「０９８」、「０９９」、「１００」、「１０１」の撮像画像が第１の画像処理装置１０により管理され、これらの各撮像画像は第２の画像処理装置２０に順次送信されたとする。これに対して、第２の画像処理装置２０からは画像ＩＤ「０９９」までが送信された場合には、第１の画像処理装置１０では、画像ＩＤ「０９９」に該当する撮像画像のうち、対象領域の部分を抽出してこれを投影画像とする。
【００２９】
投影制御部８４は、プロジェクタ４０にデータを転送する通信インターフェースを含み構成され、投影画像生成部８２により生成された投影画像をプロジェクタ４０に出力して投影させるものである。
【００３０】
図５には、プロジェクタ４０により被写体６０に投影画像が投影された様子の一例を示した。第１の画像処理装置１０の各ユーザは、被写体６０から目を離す必要なしに、第２の画像処理装置２０において表示されている画像を確認する。
【００３１】
タイミング制御部８６は、カメラ３０による撮像タイミングやプロジェクタ４０による投影タイミングを制御するものである。以下、タイミング制御部８６による制御処理の具体例について説明する。
【００３２】
図６には、プロジェクタ４０の投影タイミングを制御する処理の一例を説明するフローチャートを示した。図６に示されるように、タイミング制御部８６は、タイマーを初期化し（Ｓ１０１）、タイマーによる計時を開始する（Ｓ１０２）。次に、タイミング制御部８６は、カメラ３０により順次撮像される画像の差分を計算し（Ｓ１０３）、計算された差分が規定量を超えるか否かを判断する（Ｓ１０４）。タイミング制御部８６は、上記計算された差分が規定量を超えると判断する場合には（Ｓ１０４：Ｙ）、Ｓ１０１に戻り、規定量を超えないと判断する場合には（Ｓ１０４：Ｎ）、タイマーにより計時された時間が規定時間を超えたか否かを判断する（Ｓ１０５）。そして、タイミング制御部８６は、上記タイマーにより計時された時間が規定時間を超えていないと判断する場合には（Ｓ１０５：Ｎ）、Ｓ１０３に戻り、規定時間を超えたと判断する場合には（Ｓ１０５：Ｙ）、プロジェクタ４０に投影画像を出力させる（Ｓ１０６）。なお、以上の処理は、投影画像生成部８２により投影画像が生成される毎に行うこととしてよい。
【００３３】
次に、図７を参照しながら、カメラ３０による撮像タイミングと、プロジェクタ４０による投影タイミングとを制御する処理の一例を説明する。図７に示されるように、タイミング制御部８６は、カメラ３０が撮像処理を行っている間は、プロジェクタ４０の投影を一時停止するように、カメラ３０の撮像タイミングとプロジェクタ４０の投影タイミングとを制御することとしてよい。このように両者のタイミングを制御することで、撮像画像にプロジェクタ４０が投影した画像が含まれないようにすると共に、カメラ３０がプロジェクタ４０により投影された明部を撮像してしまうことによりカメラ３０のダイナミックレンジを超えてしまわないようにしている。
【００３４】
次に、第２の画像処理装置２０に備えられた機能について説明する。図２に示されるように、第２の画像処理装置２０は、画像受信部９０、識別情報送信部９２及び表示制御部９４を備える。上記の各部の機能は、ＣＰＵ等の制御手段、メモリ等の記憶手段、外部デバイスとデータを送受信する入出力手段等を備えたコンピュータが、コンピュータ読み取り可能な情報記憶媒体に格納されたプログラムを読み込み実行することで実現されるものとしてよい。なお、プログラムは情報記憶媒体によってコンピュータたる第２の画像処理装置２０に供給されることとしてもよいし、インターネット等のデータ通信手段を介して供給されることとしてもよい。
【００３５】
画像受信部９０は、第１の画像処理装置１０から送信された画像情報を受信するものである。画像受信部９０により受信された画像情報には、第１の画像処理装置１０により付与された識別情報が含まれる。
【００３６】
識別情報送信部９２は、画像受信部９０により受信された画像情報に付与された識別情報を取得すると共に、当該取得した識別情報を第１の画像処理装置１０に送信するものである。
【００３７】
表示制御部９４は、表示装置５０にデータを転送する通信インターフェースを含み構成され、画像受信部９０により受信された画像情報に基づいて生成したグラフィックデータを表示装置５０に出力するものである。
【００３８】
次に、図８に示される画像処理システム１における処理の一例を説明するシーケンス図を参照しながら、画像処理システム１における処理の一連の流れを説明する。
【００３９】
図８に示されるように、第１の画像処理装置１０は、カメラ３０により被写体６０を撮像した撮像画像を取得し（Ｓ２０１）、取得した撮像画像に対して識別情報を付与して管理する（Ｓ２０２）。第１の画像処理装置１０は、識別情報を付与した撮像画像を第２の画像処理装置２０に送信する（Ｓ２０３）。
【００４０】
第２の画像処理装置２０は、第１の画像処理装置１０から撮像画像を受信すると、当該受信した撮像画像に付与された識別情報を取得して（Ｓ２０４）、取得した識別情報を第１の画像処理装置１０に送信する（Ｓ２０５）。
【００４１】
第１の画像処理装置１０は、第２の画像処理装置２０から受信した識別情報に基づいて撮像画像を取得し（Ｓ２０６）、取得した撮像画像について指定された対象領域を抽出して投影画像を生成する（Ｓ２０７）。そして、第１の画像処理装置１０は、投影タイミングが到来したか否かを判断し（Ｓ２０８）、投影タイミングが到来したと判断する場合には（Ｓ２０８：Ｙ）、投影画像をプロジェクタ４０により投影させる（Ｓ２０９）。
【００４２】
以上の画像処理システム１では、第１の画像処理装置１０側において、第２の画像処理装置２０側で表示されている画像を確認する際に、カメラ３０の被写体６０から目を離す必要がない。また、第１の画像処理装置１０と第２の画像処理装置２０とのそれぞれにマイクを設け、マイクで集音された音声データを相手側の装置に送信することとすれば、第１の画像処理装置１０側では第２の画像処理装置２０側での表示が確認されるため、会話の齟齬が生じない。
【００４３】
また、本発明は上記の実施形態に限定されるものではない。例えば、上記の実施形態では、投影画像は撮像画像について設定された対象領域をそのまま用いることとしているが、当該対象領域を強調表示する等の画像処理を施して投影画像を生成することとしてもよい。
【符号の説明】
【００４４】
１ 画像処理システム、１０ 第１の画像処理装置、２０ 第２の画像処理装置、３０ カメラ、３５ ハーフミラー、４０ プロジェクタ、５０ 表示装置、６０ 被写体、７０ 撮像画像取得部、７２ 画像管理部、７４ 画像送信部、７６ 識別情報受信部、７８ 画像特定部、８０ 対象領域設定部、８２ 投影画像生成部、８４ 投影制御部、８６ タイミング制御部。
【技術分野】
【０００１】
本発明は、画像処理システム、画像処理装置及びプログラムに関する。
【背景技術】
【０００２】
遠隔地間をネットワークで結び、一方の地点の様子を撮像した画像を他方の地点に映し出して会議等を行う技術が知られている。例えば、下記の特許文献１では、遠隔地間を結んで行われる会議において、双方で表示される情報が不一致であった場合にはユーザにその旨通知する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平５−２０７４５３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明の目的の一つは、撮像画像を送信した相手側で表示されている画像を、その撮像画像の被写体を見ながら確認できる画像処理システム、画像処理装置及びプログラムを提供することにある。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、請求項１に記載の画像処理システムの発明は、第１の画像処理装置と、第２の画像処理装置とを含み、前記第１の画像処理装置は、被写体を撮像した撮像画像を順次取得する取得手段と、前記取得手段により順次取得された撮像画像を送信する撮像画像送信手段と、を含み、前記第２の画像処理装置は、前記撮像画像送信手段により送信された撮像画像を受信する撮像画像受信手段と、前記撮像画像受信手段により受信された撮像画像の識別情報を送信する識別情報送信手段と、を含み、前記第１の画像処理装置はさらに、前記識別情報送信手段により送信された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段を含むことを特徴とする。
【０００６】
また、請求項２に記載の発明は、請求項１に記載の画像処理システムにおいて、前記投影制御手段は、前記取得手段により順次取得される撮像画像の変化が予め定められた基準に満たない場合に、前記投影画像を投影させることを特徴とする。
【０００７】
また、請求項３に記載の発明は、請求項１又は２に記載の画像処理システムにおいて、前記被写体を撮像する撮像タイミングと、前記投影画像を前記被写体に投影させる投影タイミングとが重ならないように制御するタイミング制御手段をさらに含むことを特徴とする。
【０００８】
また、請求項４に記載の画像処理装置の発明は、被写体を撮像した撮像画像を順次取得する取得手段と、前記取得手段により順次取得された撮像画像を他の装置に送信する撮像画像送信手段と、前記他の装置により受信された撮像画像の識別情報を取得する識別情報取得手段と、前記識別情報取得手段により取得された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段と、を含むことを特徴とする。
【０００９】
また、請求項５に記載のプログラムの発明は、コンピュータを、被写体を撮像した撮像画像を順次取得する取得手段と、前記取得手段により順次取得された撮像画像を他の装置に送信する撮像画像送信手段と、前記他の装置により受信された撮像画像の識別情報を取得する識別情報取得手段と、前記識別情報取得手段により取得された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段として機能させるためのプログラムである。
【発明の効果】
【００１０】
請求項１、４及び５に記載の発明によれば、撮像画像を送信した相手側で表示されている画像を、その撮像画像の被写体を見ながら確認できる。
【００１１】
請求項２に記載の発明によれば、被写体側に変化がない間に、相手側で表示されている画像を確認できる。
【００１２】
請求項３に記載の発明によれば、投影した画像により撮像画像が影響を受けないようにできる。
【図面の簡単な説明】
【００１３】
【図１】本実施形態に係る画像処理システムのシステム構成図である。
【図２】第１の画像処理装置と第２の画像処理装置の機能ブロック図である。
【図３】画像管理テーブルの一例を示す図である。
【図４】投影画像の生成処理を説明する図である。
【図５】プロジェクタにより被写体に投影画像が投影された様子の一例を示す図である。
【図６】プロジェクタの投影タイミングを制御する処理の一例を説明するフローチャートである。
【図７】カメラによる撮像タイミングと、プロジェクタによる投影タイミングとを制御する処理の一例を説明する図である。
【図８】画像処理システムにおける処理の一例を説明するシーケンス図である。
【発明を実施するための形態】
【００１４】
以下、本発明を実施するための好適な実施の形態（以下、実施形態という）を、図面に従って説明する。
【００１５】
図１には、本実施形態に係る画像処理システム１のシステム構成図を示す。図１に示されるように、画像処理システム１は、第１の画像処理装置１０と第２の画像処理装置２０を含み、第１の画像処理装置１０と第２の画像処理装置２０とはネットワーク５を介して相互にデータ通信を行うものである。第１の画像処理装置１０には、カメラ３０及びプロジェクタ４０が接続されており、第２の画像処理装置２０には液晶ディスプレイ等の表示装置５０が接続されている。
【００１６】
本実施形態においては、カメラ３０及びプロジェクタ４０は共にレンズの画角が等しく、図１に示されるようにカメラ３０及びプロジェクタ４０の光軸はハーフミラー３５に到達するまではそれぞれ直角に、そしてハーフミラー３５から被写体６０に到達するまでは両者の光軸は一致するように配置される。
【００１７】
カメラ３０は、例えば技術説明に用いる資料を載せたテーブル等の被写体６０を撮像し、撮像した画像を第１の画像処理装置１０に転送する。また、プロジェクタ４０は、第１の画像処理装置１０により生成される投影画像の入力を受けて、入力された投影画像を被写体６０に対して投影するものである。
【００１８】
本実施形態では、第１の画像処理装置１０がカメラ３０から取得した撮像画像毎に識別情報を付与して管理し、識別情報を付与した撮像画像を第２の画像処理装置２０に送信することとする。そして、第２の画像処理装置２０では、第１の画像処理装置１０から送信された撮像画像を受信した後、受信した撮像画像に付与された識別情報を第１の画像処理装置１０に送信する。第１の画像処理装置１０は、第２の画像処理装置２０から送信された識別情報に対応する画像に基づいて投影画像を生成し、生成した投影画像をプロジェクタ４０により被写体６０上に投影することとする。以下、図２に示された、第１の画像処理装置１０と第２の画像処理装置２０の機能ブロック図を参照しながら、上記処理を実現するために第１の画像処理装置１０と第２の画像処理装置２０のそれぞれに備えられた機能について説明する。
【００１９】
まず、第１の画像処理装置１０に備えられた機能について説明する。図２に示されるように、第１の画像処理装置１０は、撮像画像取得部７０、画像管理部７２、画像送信部７４、識別情報受信部７６、画像特定部７８、対象領域設定部８０、投影画像生成部８２、投影制御部８４、及びタイミング制御部８６を備える。上記の各部の機能は、ＣＰＵ等の制御手段、メモリ等の記憶手段、外部デバイスとデータを送受信する入出力手段等を備えたコンピュータが、コンピュータ読み取り可能な情報記憶媒体に格納されたプログラムを読み込み実行することで実現されるものとしてよい。なお、プログラムは情報記憶媒体によってコンピュータたる第１の画像処理装置１０に供給されることとしてもよいし、インターネット等のデータ通信手段を介して供給されることとしてもよい。
【００２０】
撮像画像取得部７０は、カメラ３０とデータを通信する通信インターフェースを含み構成され、カメラ３０により撮像された撮像画像を順次取得するものである。撮像画像取得部７０は、予め定められた時間間隔毎に撮像画像を取得することとしてもよいし、第１の画像処理装置１０を操作するユーザからの入力に応じたタイミングで撮像画像を取得することとしてもよい。
【００２１】
画像管理部７２は、撮像画像取得部７０により取得された画像に識別情報を付与するとともに、識別情報が付与された各画像を管理するものである。本実施形態では、画像管理部７２は、撮像画像取得部７０により取得された各画像について画像管理テーブルを生成して管理することとする。
【００２２】
図３には、画像管理テーブルの一例を示した。図３に示されるように、画像管理テーブルは、各画像を識別する画像ＩＤに関連づけて、画像データと撮像時刻とを格納したテーブルとして構成されることとしてよい。例えば、画像管理部７２は、撮像画像取得部７０により取得された画像について、撮像された順序に応じて識別番号を付与し、当該付与した識別番号を画像ＩＤとすることとしてよい。なお、画像管理部７２は、撮像画像取得部７０により取得された全画像を管理することとしてもよいし、管理する画像の期間や数を定めることとしてもよい。
【００２３】
画像送信部７４は、画像管理部７２により識別情報が付与された画像を第２の画像処理装置２０に順次送信するものである。上述したように、第２の画像処理装置２０では、画像送信部７４により送信された画像を受信すると、当該受信した画像に付与された識別情報を第１の画像処理装置１０に向けて送信する。
【００２４】
識別情報受信部７６は、第２の画像処理装置２０から送信された識別情報を受信するものであり、受信した識別情報は画像特定部７８に出力される。
【００２５】
画像特定部７８は、識別情報受信部７６により受信された識別情報が入力されると、当該入力された識別情報により識別される画像を画像管理部７２に管理される画像の中から特定するものである。本実施形態では、画像特定部７８は、入力された識別情報をキーにして、画像管理部７２により管理される画像管理テーブルを参照して、該当する画像データを得ることとする。
【００２６】
対象領域設定部８０は、画像管理部７２により管理される画像のうち、第２の画像処理装置２０での表示を確認したい領域を対象領域として設定するものである。例えば、対象領域設定部８０は、ユーザからマウス等を用いて指定された座標範囲のデータに基づいて対象領域を設定することとしてよい。なお、対象領域は、画像管理部７２により管理される画像毎に設定してもよいし、複数の画像について共通して設定することとしてもよい。
【００２７】
投影画像生成部８２は、画像特定部７８により特定された画像と、対象領域設定部８０により設定された対象領域とに基づいて、投影画像を生成するものである。本実施形態では、画像特定部７８により特定された画像から、対象領域の示す座標範囲を抽出して投影画像を生成することとする。
【００２８】
図４には、投影画像の生成処理を説明する図を示した。図４に示されるように、画像ＩＤがそれぞれ「０９８」、「０９９」、「１００」、「１０１」の撮像画像が第１の画像処理装置１０により管理され、これらの各撮像画像は第２の画像処理装置２０に順次送信されたとする。これに対して、第２の画像処理装置２０からは画像ＩＤ「０９９」までが送信された場合には、第１の画像処理装置１０では、画像ＩＤ「０９９」に該当する撮像画像のうち、対象領域の部分を抽出してこれを投影画像とする。
【００２９】
投影制御部８４は、プロジェクタ４０にデータを転送する通信インターフェースを含み構成され、投影画像生成部８２により生成された投影画像をプロジェクタ４０に出力して投影させるものである。
【００３０】
図５には、プロジェクタ４０により被写体６０に投影画像が投影された様子の一例を示した。第１の画像処理装置１０の各ユーザは、被写体６０から目を離す必要なしに、第２の画像処理装置２０において表示されている画像を確認する。
【００３１】
タイミング制御部８６は、カメラ３０による撮像タイミングやプロジェクタ４０による投影タイミングを制御するものである。以下、タイミング制御部８６による制御処理の具体例について説明する。
【００３２】
図６には、プロジェクタ４０の投影タイミングを制御する処理の一例を説明するフローチャートを示した。図６に示されるように、タイミング制御部８６は、タイマーを初期化し（Ｓ１０１）、タイマーによる計時を開始する（Ｓ１０２）。次に、タイミング制御部８６は、カメラ３０により順次撮像される画像の差分を計算し（Ｓ１０３）、計算された差分が規定量を超えるか否かを判断する（Ｓ１０４）。タイミング制御部８６は、上記計算された差分が規定量を超えると判断する場合には（Ｓ１０４：Ｙ）、Ｓ１０１に戻り、規定量を超えないと判断する場合には（Ｓ１０４：Ｎ）、タイマーにより計時された時間が規定時間を超えたか否かを判断する（Ｓ１０５）。そして、タイミング制御部８６は、上記タイマーにより計時された時間が規定時間を超えていないと判断する場合には（Ｓ１０５：Ｎ）、Ｓ１０３に戻り、規定時間を超えたと判断する場合には（Ｓ１０５：Ｙ）、プロジェクタ４０に投影画像を出力させる（Ｓ１０６）。なお、以上の処理は、投影画像生成部８２により投影画像が生成される毎に行うこととしてよい。
【００３３】
次に、図７を参照しながら、カメラ３０による撮像タイミングと、プロジェクタ４０による投影タイミングとを制御する処理の一例を説明する。図７に示されるように、タイミング制御部８６は、カメラ３０が撮像処理を行っている間は、プロジェクタ４０の投影を一時停止するように、カメラ３０の撮像タイミングとプロジェクタ４０の投影タイミングとを制御することとしてよい。このように両者のタイミングを制御することで、撮像画像にプロジェクタ４０が投影した画像が含まれないようにすると共に、カメラ３０がプロジェクタ４０により投影された明部を撮像してしまうことによりカメラ３０のダイナミックレンジを超えてしまわないようにしている。
【００３４】
次に、第２の画像処理装置２０に備えられた機能について説明する。図２に示されるように、第２の画像処理装置２０は、画像受信部９０、識別情報送信部９２及び表示制御部９４を備える。上記の各部の機能は、ＣＰＵ等の制御手段、メモリ等の記憶手段、外部デバイスとデータを送受信する入出力手段等を備えたコンピュータが、コンピュータ読み取り可能な情報記憶媒体に格納されたプログラムを読み込み実行することで実現されるものとしてよい。なお、プログラムは情報記憶媒体によってコンピュータたる第２の画像処理装置２０に供給されることとしてもよいし、インターネット等のデータ通信手段を介して供給されることとしてもよい。
【００３５】
画像受信部９０は、第１の画像処理装置１０から送信された画像情報を受信するものである。画像受信部９０により受信された画像情報には、第１の画像処理装置１０により付与された識別情報が含まれる。
【００３６】
識別情報送信部９２は、画像受信部９０により受信された画像情報に付与された識別情報を取得すると共に、当該取得した識別情報を第１の画像処理装置１０に送信するものである。
【００３７】
表示制御部９４は、表示装置５０にデータを転送する通信インターフェースを含み構成され、画像受信部９０により受信された画像情報に基づいて生成したグラフィックデータを表示装置５０に出力するものである。
【００３８】
次に、図８に示される画像処理システム１における処理の一例を説明するシーケンス図を参照しながら、画像処理システム１における処理の一連の流れを説明する。
【００３９】
図８に示されるように、第１の画像処理装置１０は、カメラ３０により被写体６０を撮像した撮像画像を取得し（Ｓ２０１）、取得した撮像画像に対して識別情報を付与して管理する（Ｓ２０２）。第１の画像処理装置１０は、識別情報を付与した撮像画像を第２の画像処理装置２０に送信する（Ｓ２０３）。
【００４０】
第２の画像処理装置２０は、第１の画像処理装置１０から撮像画像を受信すると、当該受信した撮像画像に付与された識別情報を取得して（Ｓ２０４）、取得した識別情報を第１の画像処理装置１０に送信する（Ｓ２０５）。
【００４１】
第１の画像処理装置１０は、第２の画像処理装置２０から受信した識別情報に基づいて撮像画像を取得し（Ｓ２０６）、取得した撮像画像について指定された対象領域を抽出して投影画像を生成する（Ｓ２０７）。そして、第１の画像処理装置１０は、投影タイミングが到来したか否かを判断し（Ｓ２０８）、投影タイミングが到来したと判断する場合には（Ｓ２０８：Ｙ）、投影画像をプロジェクタ４０により投影させる（Ｓ２０９）。
【００４２】
以上の画像処理システム１では、第１の画像処理装置１０側において、第２の画像処理装置２０側で表示されている画像を確認する際に、カメラ３０の被写体６０から目を離す必要がない。また、第１の画像処理装置１０と第２の画像処理装置２０とのそれぞれにマイクを設け、マイクで集音された音声データを相手側の装置に送信することとすれば、第１の画像処理装置１０側では第２の画像処理装置２０側での表示が確認されるため、会話の齟齬が生じない。
【００４３】
また、本発明は上記の実施形態に限定されるものではない。例えば、上記の実施形態では、投影画像は撮像画像について設定された対象領域をそのまま用いることとしているが、当該対象領域を強調表示する等の画像処理を施して投影画像を生成することとしてもよい。
【符号の説明】
【００４４】
１ 画像処理システム、１０ 第１の画像処理装置、２０ 第２の画像処理装置、３０ カメラ、３５ ハーフミラー、４０ プロジェクタ、５０ 表示装置、６０ 被写体、７０ 撮像画像取得部、７２ 画像管理部、７４ 画像送信部、７６ 識別情報受信部、７８ 画像特定部、８０ 対象領域設定部、８２ 投影画像生成部、８４ 投影制御部、８６ タイミング制御部。
【特許請求の範囲】
【請求項１】
第１の画像処理装置と、第２の画像処理装置とを含み、
前記第１の画像処理装置は、
被写体を撮像した撮像画像を順次取得する取得手段と、
前記取得手段により順次取得された撮像画像を送信する撮像画像送信手段と、を含み、
前記第２の画像処理装置は、
前記撮像画像送信手段により送信された撮像画像を受信する撮像画像受信手段と、
前記撮像画像受信手段により受信された撮像画像の識別情報を送信する識別情報送信手段と、を含み、
前記第１の画像処理装置はさらに、
前記識別情報送信手段により送信された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段を含む
ことを特徴とする画像処理システム。
【請求項２】
前記投影制御手段は、前記取得手段により順次取得される撮像画像の変化が予め定められた基準に満たない場合に、前記投影画像を投影させる
ことを特徴とする請求項１に記載の画像処理システム。
【請求項３】
前記被写体を撮像する撮像タイミングと、前記投影画像を前記被写体に投影させる投影タイミングとが重ならないように制御するタイミング制御手段をさらに含む
ことを特徴とする請求項１又は２に記載の画像処理システム。
【請求項４】
被写体を撮像した撮像画像を順次取得する取得手段と、
前記取得手段により順次取得された撮像画像を他の装置に送信する撮像画像送信手段と、
前記他の装置により受信された撮像画像の識別情報を取得する識別情報取得手段と、
前記識別情報取得手段により取得された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段と、を含む
ことを特徴とする画像処理装置。
【請求項５】
コンピュータを、
被写体を撮像した撮像画像を順次取得する取得手段と、
前記取得手段により順次取得された撮像画像を他の装置に送信する撮像画像送信手段と、
前記他の装置により受信された撮像画像の識別情報を取得する識別情報取得手段と、
前記識別情報取得手段により取得された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段として機能させるためのプログラム。
【請求項１】
第１の画像処理装置と、第２の画像処理装置とを含み、
前記第１の画像処理装置は、
被写体を撮像した撮像画像を順次取得する取得手段と、
前記取得手段により順次取得された撮像画像を送信する撮像画像送信手段と、を含み、
前記第２の画像処理装置は、
前記撮像画像送信手段により送信された撮像画像を受信する撮像画像受信手段と、
前記撮像画像受信手段により受信された撮像画像の識別情報を送信する識別情報送信手段と、を含み、
前記第１の画像処理装置はさらに、
前記識別情報送信手段により送信された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段を含む
ことを特徴とする画像処理システム。
【請求項２】
前記投影制御手段は、前記取得手段により順次取得される撮像画像の変化が予め定められた基準に満たない場合に、前記投影画像を投影させる
ことを特徴とする請求項１に記載の画像処理システム。
【請求項３】
前記被写体を撮像する撮像タイミングと、前記投影画像を前記被写体に投影させる投影タイミングとが重ならないように制御するタイミング制御手段をさらに含む
ことを特徴とする請求項１又は２に記載の画像処理システム。
【請求項４】
被写体を撮像した撮像画像を順次取得する取得手段と、
前記取得手段により順次取得された撮像画像を他の装置に送信する撮像画像送信手段と、
前記他の装置により受信された撮像画像の識別情報を取得する識別情報取得手段と、
前記識別情報取得手段により取得された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段と、を含む
ことを特徴とする画像処理装置。
【請求項５】
コンピュータを、
被写体を撮像した撮像画像を順次取得する取得手段と、
前記取得手段により順次取得された撮像画像を他の装置に送信する撮像画像送信手段と、
前記他の装置により受信された撮像画像の識別情報を取得する識別情報取得手段と、
前記識別情報取得手段により取得された識別情報により識別される撮像画像の少なくとも一部を投影画像として前記被写体に投影させる投影制御手段として機能させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１１−５５０５６（Ｐ２０１１−５５０５６Ａ）
【公開日】平成２３年３月１７日（２０１１．３．１７）
【国際特許分類】
【出願番号】特願２００９−１９９５３８（Ｐ２００９−１９９５３８）
【出願日】平成２１年８月３１日（２００９．８．３１）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
【公開日】平成２３年３月１７日（２０１１．３．１７）
【国際特許分類】
【出願日】平成２１年８月３１日（２００９．８．３１）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
[ Back to top ]