情報処理装置及びプログラム
【課題】対象物のＣＡＤデータに基づいて、外部端末との間で通信された当該対象物に関する撮影画像のデータを容易に閲覧することが可能な情報処理装置及びプログラムを提供する。
【解決手段】記憶部１０３が対象物８の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶し、制御部１０１が対象物８の対象物ＩＤ（識別情報）を取得し（Ｓ５）、当該取得された対象物８の対象物ＩＤに基づいてデータベースに含まれる対象物８のＣＡＤデータを特定し（Ｓ７）、当該特定された対象物８のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを当該特定された対象物８のＣＡＤデータと関連付けて、記憶部１０３に記憶させる（Ｓ１１）。
【解決手段】記憶部１０３が対象物８の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶し、制御部１０１が対象物８の対象物ＩＤ（識別情報）を取得し（Ｓ５）、当該取得された対象物８の対象物ＩＤに基づいてデータベースに含まれる対象物８のＣＡＤデータを特定し（Ｓ７）、当該特定された対象物８のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを当該特定された対象物８のＣＡＤデータと関連付けて、記憶部１０３に記憶させる（Ｓ１１）。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置及びプログラムに関する。
【背景技術】
【０００２】
従来より、カメラ及びプロジェクタが接続されているサーバ（例えばコンピュータ）と、ネットワークを介して当該サーバに接続される遠隔地のクライアント（例えばコンピュータ）とを備える遠隔指示システムが知られている（例えば、特許文献１、２参照）。
【０００３】
この遠隔指示システムでは、サーバに接続されているカメラが対象物を撮影し、ネットワークを介して撮影画像をクライアントに送信する。クライアントは、表示装置の表示画面に撮影画像を表示し、当該表示画面上にアノテーション画像などが書き込まれると、当該アノテーション画像をネットワークを介してサーバに送信する。サーバは受信したアノテーション画像をプロジェクタに送信し、プロジェクタは受信したアノテーション画像を立体物を含む投影領域の適切な位置（これは、クライアントが、撮影画像の範囲内でアノテーション画像を書き込んだ位置に対応する）に投影する。
【０００４】
このような環境の下で、サーバ及びクライアント間で行われた撮影画像のデータをサーバ又はクライアントの記憶媒体に保存することが望まれている。
【特許文献１】米国特許公開２００４／００７０６７４号公報
【特許文献２】特開２００５−３３７５６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、上記対象物のＣＡＤデータを再利用して、当該対象物を再設計する場合には、当該対象物に関する撮影画像のデータを参照することが望ましいが、大量の対象物を含む製品などの場合には、記憶媒体に大量の対象物に関する撮影画像のデータが保存されているため、所望の対象物に関する撮影画像のデータを探し出し、閲覧することは容易ではない。
【０００６】
本発明の目的は、対象物のＣＡＤデータに基づいて、外部端末との間で通信された当該対象物に関する撮影画像のデータを容易に閲覧することが可能な情報処理装置及びプログラムを提供することにある。
【課題を解決するための手段】
【０００７】
上記目的を達成するため、請求項１の情報処理装置は、外部端末から入力された注釈画像を対象物を含む投影領域に投影する投影装置、当該投影領域を撮影する撮影装置、及び前記投影装置、及び前記撮影装置に入出力する画像のデータを前記外部端末との間で通信する情報処理装置であって、前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段と、前記対象物の識別情報を取得する取得手段と、当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段と、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段とを備えることを特徴とする。
【０００８】
請求項２の情報処理装置は、請求項１に記載の情報処理装置において、前記情報処理装置は、前記外部端末への音声を入力すると共に前記外部端末からの音声を出力する音声入出力装置に接続され、前記音声のデータを前記外部端末との間で通信し、前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記音声入出力装置で入力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【０００９】
請求項３の情報処理装置は、請求項２に記載の情報処理装置において、前記音声のデータをテキストデータに変換するデータ変換手段を備え、前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記データ変換手段により変換されたテキストデータが視聴可能なように、当該撮影画像のデータ及び当該テキストデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１０】
請求項４の情報処理装置は、注釈画像を対象物を含む投影領域に投影する投影装置、及び当該投影領域を撮影する撮影装置が接続されるサーバとの間で、前記投影装置及び前記撮影装置に入出力される画像のデータを通信する情報処理装置であって、前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段と、前記対象物の識別情報を取得する取得手段と、当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段と、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段とを備えることを特徴とする。
【００１１】
請求項５の情報処理装置は、請求項４に記載の情報処理装置において、前記情報処理装置には、音声を入出力する第１音声入出力装置が接続され、前記サーバには音声を入出力する第２音声入出力装置が接続され、前記情報処理装置と前記サーバとの間で前記音声のデータの通信が行われ、前記制御手段は、 前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記第１音声入出力装置で入出力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１２】
請求項６の情報処理装置は、請求項５に記載の情報処理装置において、前記第１音声入出力装置で入出力された音声のデータをテキストデータに変換するデータ変換手段を備え、前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記データ変換手段により変換されたテキストデータが視聴可能なように、当該撮影画像のデータ及び当該テキストデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１３】
請求項７の情報処理装置は、請求項１又は４に記載の情報処理装置において、 複数の対象物が一つずつ撮影される場合に、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータが視聴可能なように、当該複数の対象物の撮影画像のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１４】
請求項８の情報処理装置は、請求項２又は５に記載の情報処理装置において、 複数の対象物が一つずつ撮影されると共に各対象物の交換時に音声のデータのファイルが切り換えられる場合に、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータ及び前記音声入出力装置又は前記第１音声入出力装置で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１５】
請求項９の情報処理装置は、請求項８に記載の情報処理装置において、仮記憶指示又は最終記憶指示を入力する入力手段を備え、前記入力手段により前記仮記憶指示が入力された場合には、前記制御手段は、対象物毎の撮影画像のデータ及び対象物毎の音声のデータを前記記憶手段に一時記憶させ、前記入力手段により前記最終記憶指示が入力された場合には、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータ及び前記音声入出力装置で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１６】
請求項１０のプログラムは、外部端末から入力された注釈画像を対象物を含む投影領域に投影する投影装置、当該投影領域を撮影する撮影装置、及び前記投影装置、及び前記撮影装置に入出力する画像のデータを前記外部端末との間で通信するコンピュータを、前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段、前記対象物の識別情報を取得する取得手段、当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段、及び前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段として機能させることを特徴とする。
【００１７】
請求項１１のプログラムは、注釈画像を対象物を含む投影領域に投影する投影装置、及び当該投影領域を撮影する撮影装置が接続されるサーバとの間で、前記投影装置及び前記撮影装置に入出力される画像のデータを通信するコンピュータを、前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段、前記対象物の識別情報を取得する取得手段、当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段、及び前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段として機能させることを特徴とする。
【発明の効果】
【００１８】
請求項１，１０の発明によれば、対象物のＣＡＤデータに基づいて、外部端末との間で通信された当該対象物に関する撮影画像のデータを容易に閲覧することができる。
【００１９】
請求項２の発明によれば、対象物のＣＡＤデータに基づいて、外部端末との間で通信された当該対象物に関する撮影画像及び音声のデータを容易に閲覧することができる。
【００２０】
請求項３の発明によれば、対象物のＣＡＤデータに基づいて、外部端末との間で通信された当該対象物に関する撮影画像のデータ及び音声のデータに対応するテキストデータを容易に閲覧することができる。
【００２１】
請求項４，１１の発明によれば、対象物のＣＡＤデータに基づいて、サーバとの間で通信された当該対象物に関する撮影画像のデータを容易に閲覧することができる。
【００２２】
請求項５の発明によれば、対象物のＣＡＤデータに基づいて、サーバとの間で通信された当該対象物に関する撮影画像及び音声のデータを容易に閲覧することができる。
【００２３】
請求項６の発明によれば、対象物のＣＡＤデータに基づいて、サーバとの間で通信された当該対象物に関する撮影画像のデータ及び音声のデータに対応するテキストデータを容易に閲覧することができる。
【００２４】
請求項７の発明によれば、最初に又は最後に特定された対象物のＣＡＤデータに基づいて、外部端末又はサーバとの間で通信された当該対象物を含む複数の対象物に関する撮影画像のデータを容易に閲覧することができる。途中過程の部品に関するＣＡＤデータ等との関連付けはなされないため情報量が少なくなり、情報の整理がしやすくなる。
【００２５】
請求項８の発明によれば、最初に又は最後に特定された対象物のＣＡＤデータに基づいて、外部端末又はサーバとの間で通信された当該対象物を含む複数の対象物に関する撮影画像及び音声のデータを容易に閲覧することができる。途中過程の部品に関するＣＡＤデータ等との関連付けはなされないため情報量が少なくなり、情報の整理がしやすくなる。
【００２６】
請求項９の発明によれば、仮記憶指示により対象物毎の撮影画像及び音声のデータを記憶手段に一時記憶し、最終記憶指示により、一時記憶されていた撮影画像及び音声のデータを含む複数の対象物の撮影画像及び音声のデータを、最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、記憶手段に記憶することができる。
【発明を実施するための最良の形態】
【００２７】
以下、本発明の実施の形態について、図面を参照して説明する。
【００２８】
（第１の実施の形態）
図１は、本発明の実施の形態に係る遠隔指示システムの構成を示すブロック図である。
【００２９】
図１の遠隔指示システムは、サーバとして機能するパーソナルコンピュータ（ＰＣ）１、クライアントとして機能するＰＣ２（外部端末）を備えており、これらは、ネットワーク３を介して互いに接続されている。ＰＣ１には、プロジェクタ４（投影装置）、カメラ５（撮影装置）が接続されている。
【００３０】
プロジェクタ４は、ＰＣ１からの制御コマンドに基づいて、テーブル９上に載置された対象物８及びスクリーン１２に対して、ハーフミラー６を介して単なる光線を照射する又はアノテーション画像（注釈画像）等を投影する。尚、アノテーション画像は、線、文字、記号、図形、色、フォント（書体）等のあらゆる態様の画像を含む。
【００３１】
カメラ５は、ＰＴＺ（Pan-Tilt-Zoom）カメラ、ネットワークカメラ又はビデオカメラで構成され、テーブル上に設置されており、対象物８を含むスクリーン１２の反射画像をハーフミラー６を介して撮影し、撮影画像をＰＣ１に出力する。即ち、カメラ５は、対象物８の全体像を撮影する。プロジェクタ４の光軸及び画角はカメラ５の光軸及び画角と一致する。カメラ５は、ＰＣ２から入力される指示若しくはＰＣ１に直接入力される指示に基づいて、又は定期的に（例えば、０．１秒間隔で）、対象物９を静止画像としてキャプチャする。尚、対象物８の表面には、対象物８のＩＤ（識別情報）を含むＱＲコード７が貼り付けられている。
【００３２】
ＰＣ１は、カメラ５により撮影された撮影画像をネットワーク３を介してＰＣ２に出力する。ＰＣ２には、表示部２０５が接続されており、表示部２０５は、表示領域１５及びユーザインターフェース（ＵＩ）１４を表示する。この表示領域１５は、ＰＣ１から送られてきた撮影画像を表示する。尚、ＰＣ２は、表示部２０５を備える一体型のパーソナルコンピュータで構成してもよい。
【００３３】
マイク７（（第２）音声入出力装置）は、ＰＣ１のユーザの指示などの音声を入力し、ＰＣ２に接続されているスピーカ１９へ出力する。スピーカ８（（第２）音声入出力装置）は、ＰＣ２に接続されているマイク１８から入力されたＰＣ２のユーザの指示などの音声を出力する。
【００３４】
ＵＩ１４は、ペン、テキスト、及び消去などのボタン群と、線種や色種のアイコンとを含む。表示領域１５には、カメラ５で撮影された撮影画像が表示される。同図においては、対象物８を含むスクリーン１２をカメラ５により撮影した撮影画像が表示領域１５に表示されている。
【００３５】
例えば、ＵＩ１４のペンボタンが押下されて、表示領域１５内の対象物８上に図形等が記載されると、当該図形の情報（具体的には座標データ）がＰＣ２からＰＣ１へ出力される。ＰＣ１は、この図形の情報（具体的には座標データ）をデコードし、プロジェクタ４の投影画像に変換し、プロジェクタ４に出力する。プロジェクタ４は当該投影画像を対象物８上に投写する。
【００３６】
また、ＰＣ２は、ＰＣ１に対して制御コマンドを出力し、プロジェクタ４、及びカメラ５の動作（例えば、カメラ５の撮影角度及び撮影画像の明るさ、並びにプロジェクタ４の投影画像の明るさなど）を制御することができる。
【００３７】
マイク１８（第１音声入出力装置）は、ＰＣ２のユーザの指示などの音声を入力し、ＰＣ１に接続されているスピーカ８へ出力し、スピーカ１９（第１音声入出力装置）は、ＰＣ１に接続されているマイク７から入力されたＰＣ１のユーザの指示などの音声を出力する。
【００３８】
尚、同図においては、クライアントは、ＰＣ２の１台が記載されているが、遠隔指示システムは、複数のクライアント（ＰＣ）を備えていてもよい。
【００３９】
以上のように構成された遠隔指示システムでは、カメラ５で撮影された撮影画像がＰＣ２の表示部２０５に表示され、ＰＣ２側で書き込まれたアノテーション画像がプロジェクタ４を介して対象物８に投影されるので、ＰＣ１側のユーザとＰＣ２側のユーザは、実物である対象物８を用いたコミュニケーションができ、さらにＰＣ１側のユーザとＰＣ２側のユーザは、それぞれマイク７及びスピーカ８、並びにマイク１８及びスピーカ１９を使って、互いに音声でコミュニケーションができる。
【００４０】
図２は、ＰＣ１〜２の機能構成を示すブロック図である。
【００４１】
ＰＣ１は、装置全体を制御すると共にプロジェクタ４及びカメラ５の動作を制御する制御部１０１（取得手段、特定手段、制御手段）と、ネットワーク３を介してＰＣ２と情報やデータの送受信を行う送受信部１０２と、制御プログラム、データ及び情報等を記憶する記憶部１０３（記憶手段）と、プロジェクタ４、カメラ５及びカメラ７と接続するためのインターフェイス（ＩＦ）部１０４とを備えている。さらに、ＰＣ１は、撮影画像を表示するための表示部１０５と、マウス及びキーボードなどで構成される操作部１０６（入力手段）とを備えていてもよい。制御部１０１は、送受信部１０２、記憶部１０３、ＩＦ部１０４、表示部１０５及び操作部１０６に接続されており、さらにＩＦ部１０４を介してプロジェクタ４、カメラ５、マイク１０及びスピーカ１１に接続されている。
【００４２】
ＰＣ２は、装置全体を制御する制御部２０１（取得手段、特定手段、制御手段）と、ネットワーク３を介してＰＣ１と情報やデータの送受信を行う送受信部２０２と、制御プログラム、データ及び情報等を記憶する記憶部２０３（記憶手段）と、マウスやキーボードなどで構成される操作部２０４（入力手段）と、表示部２０５と、ＩＦ部２０６とを備えている。制御部２０１は、送受信部２０２、記憶部２０３、操作部２０４、表示部２０５及びＩＦ部２０６に接続されており、さらにＩＦ部２０６を介してマイク１８及びスピーカ１９に接続されている。
【００４３】
図３（Ａ）は、ＰＣ１のハードウエア構成を示すブロック図であり、図３（Ｂ）は、ＰＣ２のハードウエア構成を示すブロック図である。
【００４４】
ＰＣ１は、装置全体を制御するＣＰＵ２１、制御プログラムを備えるＲＯＭ２２、ワーキングエリアとして機能するＲＡＭ２３、各種の情報やプログラムを備えるハードディスクドライブ（ＨＤＤ）２４、他のコンピュータと接続するためのネットワークインターフェース２６、及び不図示のＵＳＢ機器と接続するためのＵＳＢ（universal serial bus）インターフェース２８を備えている。ＣＰＵ２１はシステムバス２９を介してＲＯＭ２２、ＲＡＭ２３、ハードディスクドライブ（ＨＤＤ）２４、ネットワークインターフェース２６及びＵＳＢインターフェース２８に接続されている。ＰＣ１はＵＳＢインターフェース２８を介してプロジェクタ４、カメラ５、マイク１０及びスピーカ１１に接続されている。尚、ＰＣ１は、マウス及びキーボード２５、並びにディスプレイ２７を備えていてもよい。
【００４５】
制御部１０１は、制御プログラムに従って各種の処理を実行するＣＰＵ２１に相当する。送受信部１０２は、ネットワークインタフェース２６に相当し、記憶部１０３は、ハードディスクドライブ（ＨＤＤ）２４に相当する。表示部１０５は、ディスプレイ２７に相当し、操作部１０６はマウス及びキーボード２５に相当する。
【００４６】
ＰＣ２は、装置全体を制御するＣＰＵ３１、制御プログラムを備えるＲＯＭ３２、ワーキングエリアとして機能するＲＡＭ３３、各種の情報やプログラムを備えるハードディスクドライブ（ＨＤＤ）３４、マウス及びキーボード３５、他のコンピュータと接続するためのネットワークインターフェース３６、液晶モニタ又はＣＲＴで構成されるディスプレイ３７、及び不図示のＵＳＢ機器と接続するためのＵＳＢ（universal serial bus）インターフェース３８を備えている。ＣＰＵ３１はシステムバス３９を介してＲＯＭ３２、ＲＡＭ３３、ハードディスクドライブ（ＨＤＤ）３４、マウス及びキーボード３５、ネットワークインターフェース３６、ディスプレイ３７及びＵＳＢインターフェース３８に接続されている。ＰＣ２はＵＳＢインターフェース３８を介してマイク１８及びスピーカ１９に接続されている。
【００４７】
制御部２０１は、制御プログラムに従って各種の処理を実行するＣＰＵ３１に相当する。送受信部２０２は、ネットワークインターフェース３６に相当し、記憶部２０３は、ハードディスクドライブ（ＨＤＤ）３４に相当する。操作部２０４は、マウス及びキーボード３５に相当し、表示部２０５は、ディスプレイ３７に相当する。
【００４８】
図４は、記憶部１０３及び記憶部２０３の少なくともいずれか一方に記憶されているＣＡＤデータベースの例を示す図である。
【００４９】
ＣＡＤデータベースは、対象物８を識別する識別情報である対象物ＩＤ、ＣＡＤデータ（ファイル名）、及び属性情報を備えている。属性情報は、タイトル、ＣＡＤデータの作成者を示すユーザ名、及びＣＡＤデータの作成日及び作成時間を示す日時に関するデータを含む。
【００５０】
図５は、ＰＣ１で実行される処理を示すフローチャートである。
【００５１】
ＰＣ１の制御部１０１は、初期投射画像をプロジェクタ４に出力する（ステップＳ１）。初期投射画像とは、黒色の画像である。
【００５２】
次いで、制御部１０１は、カメラ５で撮影された撮影画像を送受信部１０２及びネットワーク３を介してＰＣ２に出力し（ステップＳ２）、マイク１０から入力される音声及びスピーカ１１から出力される音声の録音を開始する（ステップＳ３）。
【００５３】
次に、制御部１０１は、カメラ５で撮影された撮影画像内にＱＲコード７が含まれているか否かを判別する（ステップＳ４）。
【００５４】
ステップＳ４でＹＥＳの場合には、制御部１０１は、ＱＲコード７をデコードし、対象物８の対象物ＩＤを取得し（ステップＳ５）、記憶部１０３に記憶されているＣＡＤデータベース内の当該対象物ＩＤに対応するＣＡＤデータを検索し（ステップＳ６）、当該対象物ＩＤに対応するＣＡＤデータを特定する（ステップＳ７）。ステップＳ４でＮＯの場合には、ステップＳ８に進む。
【００５５】
次に、制御部１０１は、送受信部１０２を介してＰＣ２からアノテーション画像の座標データを受信すると（ステップＳ８）、制御部１０１は、当該座標データに従って画像の投影処理を実行する（ステップＳ９）。具体的には、制御部１０１は、当該アノテーション画像の座標データをデコードし、プロジェクタ４の投影画像に変換し、プロジェクタ４に出力する。プロジェクタ４はこの投影画像、即ち、アノテーション画像を対象物８及びスクリーン１２に投影する。
【００５６】
次いで、制御部１０１は、カメラ５で撮影された撮影画像、マイク１０から入力される音声及びスピーカ１１から出力される音声の保存指示を受信したか否かを判別する（ステップＳ１０）。尚、撮影画像及び音声の保存指示は、操作部１０６又は操作部２０４を介して入力されたり、又は撮影画像及び音声の保存指示を含むＱＲコードがカメラ５に撮影されることで入力される。
【００５７】
ステップＳ１０でＮＯの場合には、ステップＳ１２に進む。一方、ステップＳ１０でＹＥＳの場合には、制御部１０１は、カメラ５で撮影された撮影画像、マイク１０から入力される音声及びスピーカ１１から出力される音声を対象物８の対象物ＩＤを介してステップＳ７で特定されたＣＡＤデータと関連付けして、記憶部１０３に保存する（ステップＳ１１）。尚、ステップＳ４でＮＯの場合には、対象物８の対象物ＩＤが不明なので、カメラ５で撮影された撮影画像、マイク１０から入力される音声及びスピーカ１１から出力される音声とステップＳ７で特定されたＣＡＤデータとは別々に記憶部１０３に保存される。
【００５８】
また、ステップＳ１１で保存されるカメラ５で撮影された撮影画像の容量を削減するため、制御部１０１は、カメラ５で撮影された撮影画像（静止画像）を一つ前の撮影画像と比較し、予め設定した閾値以上の違いがあるか否かを判別し、所定の閾値以上の違いがある撮影画像のみを記憶部１０３に保存するようにしてもよい。例えば、カメラ５の撮影画像を構成するドットが一つ前の撮影画像を構成するドットと比べて１００ドット以上異なる場合、又はカメラ５の撮影画像を構成する全ドットが一つ前の撮影画像を構成する全ドットと比べて３％以上異なる場合に、制御部１０１は、上記所定の閾値以上の違いがあると判別し、当該撮影画像を記憶部１０３に保存する。
【００５９】
図６にＣＡＤデータと撮影画像及び音声のデータとが関連付けて保存されている例を示す。同図においては、対象物ＩＤが「object001」であるＣＡＤデータと撮影画像及び音声のデータとが互いに関連付けられて記憶部１０３に保存されている。図６の対象物ＩＤが「object001」であるＣＡＤデータの属性情報は、図４の対象物ＩＤが「object001」であるＣＡＤデータの属性情報と比べてリンクの項目が追加されている。当該リンクの項目は、関連付けられた撮影画像及び音声のデータのファイル名が記載される。後述するように、制御部１０１は、ＣＡＤデータの属性情報に含まれる撮影画像及び音声のデータのリンクがクリックされることにより、ＣＡＤデータに関連付けられた撮影画像及び音声のデータを記憶部１０３から読み出し、出力する。
【００６０】
尚、同図の撮影画像及び音声のデータに付加されている属性情報は、会議の属性情報であり、タイトル、会議参加者のユーザ名、及び会議の日時を含む。
【００６１】
ステップＳ１１の処理後、制御部１０１は、投影処理、及び画像や音声の保存処理などの全ての処理が終了したか否かを判別し（ステップＳ１２）、ステップＳ１２でＮＯの場合には、ステップＳ２に戻る。一方ステップＳ１２でＹＥＳの場合には、本処理を終了する。
【００６２】
上記ステップＳ４，Ｓ５では、制御部１０１は、ＱＲコード７を介して対象物ＩＤを取得したが、対象物ＩＤの取得方法はこれに限定されるものではない。例えば、制御部１０１は、操作部１０６又は操作部２０４を介して入力された対象物ＩＤを取得してもよい。また、ＰＣ１に接続された不図示のＲＦＩＤタグのリーダ又はバーコードリーダが、対象物８に貼付られたＲＦＩＤタグ又はバーコードを読み取ることで、制御部１０１が対象物ＩＤを取得してもよい。
【００６３】
図７（Ａ）は、対象物ＩＤが「object001」である撮影画像及びその属性情報を示す図であり、図７（Ｂ）は、表示部１０５又は２０５の画面の変遷を示す図である。
【００６４】
図５の処理により、記憶部１０３に図７（Ａ）に示す撮影画像及び音声のデータが保存されているものとする。
【００６５】
制御部１０１は、記憶部１０３又は２０３に記憶されているＣＡＤデータを作成するアプリケーションを起動した状態で、操作部１０６又は２０４を介して対象物ＩＤ「object001」が入力されると、表示部１０５又は２０５に図７（Ｂ）の左図に示す対象物ＩＤ「object001」に対応するＣＡＤデータを表示する。さらに、制御部１０１は、当該ＣＡＤデータの属性情報を表示させる指示が入力されると、図７（Ｂ）の中央図に示すように、表示部１０５又は２０５にＣＡＤデータの属性情報を表示する。この状態で、操作部１０６又は２０４を介して「image001-025」及び「sound001」のリンクがクリックされると、制御部１０１は、図７（Ｂ）の右図に示すように、表示部１０５又は２０５の画面に撮影画像を表示するウインドウを表示し、「sound001」の音声をスピーカ１１又は１９から出力する。このように、制御部１０１は、ＣＡＤデータの属性情報に含まれる撮影画像及び音声のデータのリンクがクリックされることにより、ＣＡＤデータに関連付けられた撮影画像及び音声のデータを記憶部１０３から読み出し、出力する。
【００６６】
以上詳細に説明したように、本実施の形態によれば、記憶部１０３が対象物８の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶し、制御部１０１が対象物８の対象物ＩＤ（識別情報）を取得し、当該取得された対象物８の対象物ＩＤに基づいてデータベースに含まれる対象物８のＣＡＤデータを特定し、当該特定された対象物８のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された撮影画像のデータ及びマイク１０及びスピーカ１１で入出力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを当該特定された対象物８のＣＡＤデータと関連付けて、記憶部１０３に記憶させる。
【００６７】
よって、対象物８のＣＡＤデータに基づいて、ＰＣ２との間で通信された当該対象物８に関する撮影画像及び音声のデータを容易に閲覧することができる。
【００６８】
第１の実施の形態では、制御部１０１が、撮影画像のデータ及び音声のデータを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３に記憶させているが、撮影画像のデータのみを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ２との間で通信された当該対象物８に関する撮影画像のデータを容易に閲覧することができる。また、制御部１０１（データ変換手段）が、音声データを公知の方法によりテキストデータに変換し、撮影画像のデータ及びテキストデータを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ２との間で通信された当該対象物８に関する撮影画像及び音声のデータに対応するテキストデータを容易に閲覧することができる。
【００６９】
さらに、対象物８を様々な計測機器（サイズ計測器、温度計、湿度計、電流計など）を利用して測定した場合、制御部１０１は、それらの測定データを対象物のＣＡＤデータと関連付けて、記憶部１０３に記憶させてもよい。
【００７０】
（第２の実施の形態）
第１の実施の形態では、ＣＡＤデータと撮影画像及び音声のデータとが互いに関連付けられて記憶部１０３に保存される例を説明したが、本実施の形態では、ＣＡＤデータと撮影画像及び音声のデータとが互いに関連付けられて記憶部２０３に保存される例を説明する。
【００７１】
第１の実施の形態では、ＣＡＤデータベースは記憶部１０３に予め保存されているが、本実施の形態では、図４のＣＡＤデータベースは記憶部２０３に予め保存されているものとする。
【００７２】
図８は、ＰＣ２で実行される処理を示すフローチャートである。
【００７３】
制御部２０１は、ＰＣ１から撮影画像を取得し（ステップＳ２１）、マイク１８から入力される音声及びスピーカ１９から出力される音声の録音を開始する（ステップＳ２２）。
【００７４】
次に、制御部２０１は、取得された撮影画像内にＱＲコード７が含まれているか否かを判別する（ステップＳ２３）。
【００７５】
ステップＳ２３でＹＥＳの場合には、制御部２０１は、ＱＲコード７をデコードし、対象物８の対象物ＩＤを取得し（ステップＳ２４）、記憶部２０３に記憶されているＣＡＤデータベース内の当該対象物ＩＤに対応するＣＡＤデータを検索し（ステップＳ２５）、当該対象物ＩＤに対応するＣＡＤデータを特定する（ステップＳ２６）。ステップＳ２３でＮＯの場合には、ステップ２７に進む。
【００７６】
次いで、制御部２０１は、操作部２０４からアノテーション画像を描画する画面処理コマンドを受信したか否かを判別する（ステップＳ２７）。
【００７７】
ステップＳ２７でＮＯの場合には、ステップＳ３０に進む。ステップＳ２７でＹＥＳの場合には、制御部２０１は、当該画面処理コマンドに従って、アノテーション画像を表示領域１５に描画し（ステップＳ２８）、アノテーション画像の座標データを送受信部２０２を介してＰＣ１に送信する（ステップＳ２９）。尚、ＰＣ１に送信された座標データは、図５のステップＳ８の処理で、送受信部１０２を介して制御部１１により受信される。
【００７８】
次いで、制御部２０１は、撮影画像、マイク１８から入力される音声及びスピーカ１９から出力される音声の保存指示を受信したか否かを判別する（ステップＳ３０）。尚、撮影画像及び音声の保存指示は、操作部１０６又は操作部２０４を介して入力されたり、又は撮影画像及び音声の保存指示を含むＱＲコードがカメラ５に撮影されることで入力される。
【００７９】
ステップＳ３０でＮＯの場合には、ステップＳ３２に進む。一方、ステップＳ３０でＹＥＳの場合には、制御部２０１は、撮影画像、マイク１８から入力される音声及びスピーカ１９から出力される音声を対象物８の対象物ＩＤを介してステップＳ２６で特定されたＣＡＤデータと関連付けして、記憶部２０３に保存する（ステップＳ３１）。尚、ステップＳ２３でＮＯの場合には、対象物８の対象物ＩＤが不明なので、撮影画像、マイク１８から入力される音声及びスピーカ１９から出力される音声とステップＳ２６で特定されたＣＡＤデータとは別々に記憶部２０３に保存される。
【００８０】
また、ステップＳ３１で保存されるカメラ５で撮影された撮影画像の容量を削減するため、制御部２０１は、撮影画像（静止画像）を一つ前の撮影画像と比較し、予め設定した閾値以上の違いがあるか否かを判別し、所定の閾値以上の違いがある撮影画像のみを記憶部２０３に保存するようにしてもよい。例えば、撮影画像を構成するドットが一つ前の撮影画像を構成するドットと比べて１００ドット以上異なる場合、又は撮影画像を構成する全ドットが一つ前の撮影画像を構成する全ドットと比べて３％以上異なる場合に、制御部２０１は、上記所定の閾値以上の違いがあると判別し、当該撮影画像を記憶部２０３に保存する。
【００８１】
ステップＳ３１の処理後、制御部２０１は、アノテーション画像の座標データの送信及び画像や音声の保存などの全ての処理が終了したか否かを判別し（ステップＳ３２）、ステップＳ３２でＮＯの場合には、ステップＳ２１に戻る。一方ステップＳ３２でＹＥＳの場合には、本処理を終了する。
【００８２】
上記ステップＳ２３，Ｓ２４では、制御部２０１は、ＱＲコード７を介して対象物ＩＤを取得したが、対象物ＩＤの取得方法はこれに限定されるものではない。例えば、制御部２０１は、操作部１０６又は操作部２０４を介して入力された対象物ＩＤを取得してもよい。また、制御部２０１は、ＰＣ１から直接送信される対象物ＩＤを取得してもよい。
【００８３】
また、上記図７で説明した制御部１０１と同様に、制御部２０１は、ＣＡＤデータの属性情報に含まれる撮影画像及び音声のデータのリンクがクリックされることにより、ＣＡＤデータに関連付けられた撮影画像及び音声のデータを記憶部２０３から読み出し、出力する。
【００８４】
以上詳細に説明したように、本実施の形態によれば、記憶部２０３が対象物８の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶し、制御部２０１が対象物８の対象物ＩＤ（識別情報）を取得し、当該取得された対象物８の対象物ＩＤに基づいてデータベースに含まれる対象物８のＣＡＤデータを特定し、当該特定された対象物８のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された撮影画像のデータ及びマイク１８及びスピーカ１９で入出力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを当該特定された対象物８のＣＡＤデータと関連付けて、記憶部２０３に記憶させる。
【００８５】
よって、対象物８のＣＡＤデータに基づいて、ＰＣ１との間で通信された当該対象物８に関する撮影画像及び音声のデータを容易に閲覧することができる。
【００８６】
第２の実施の形態では、制御部２０１が、撮影画像のデータ及び音声のデータを特定された対象物のＣＡＤデータと関連付けて、記憶部２０３に記憶させているが、撮影画像のデータのみを特定された対象物のＣＡＤデータと関連付けて、記憶部２０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ１との間で通信された当該対象物８に関する撮影画像のデータを容易に閲覧することができる。また、制御部２０１（データ変換手段）が、音声データを公知の方法によりテキストデータに変換し、撮影画像のデータ及びテキストデータを特定された対象物のＣＡＤデータと関連付けて、記憶部２０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ１との間で通信された当該対象物８に関する撮影画像及び音声のデータに対応するテキストデータを容易に閲覧することができる。
【００８７】
さらに、対象物８を様々な計測機器（サイズ計測器、温度計、湿度計、電流計など）を利用して測定した場合、制御部２０１は、それらの測定データを対象物のＣＡＤデータと関連付けて、記憶部２０３に記憶させてもよい。
【００８８】
（第３の実施の形態）
第１の実施の形態では、制御部１０１は、対象物８の対象物ＩＤに対応するＣＡＤデータに対して、当該対象物８の撮影画像及び音声のデータを関連付けして、記憶部１０３に保存した。対象物８が任意の完成品に含まれる部品等であり、ＣＡＤデータを利用して対象物８を再設計する場合、対象物８の撮影画像及び音声のデータだけでなく、対象物８に関連する他の部品の撮影画像及び音声のデータも参照したい場合がある。本実施の形態では、かかる場合を考慮し、制御部１０１は、対象物８の対象物ＩＤに対応するＣＡＤデータに対して、当該対象物８及びこれに関連する他の対象物の撮影画像及び音声のデータを関連付けして、記憶部１０３に保存する。
【００８９】
図９は、ＰＣ１が実行する処理を示すフローチャートである。図５と同一の工程には、同一のステップ番号を付し、その説明を省略する。
【００９０】
以下の説明では、対象物８を最初に撮影し、その後、対象物８に関連する他の部品を撮影しているものとする。
【００９１】
ステップＳ９の処理後、制御部１０１は、表示部１０５又は表示部２０５に、保存指示のダイアログを表示する（ステップＳ４１）。
【００９２】
図１０（Ａ）は保存指示のダイアログ６１を表示する表示部１０５の一例を示す図であり、図１０（Ｂ）は保存指示のダイアログ６１を表示する表示部２０５の一例を示す図である。
【００９３】
保存指示のダイアログ６１は、各対象物の撮影画像及び音声のデータを記憶部１０３に一時保存するための仮保存ボタン６２、対象物８及びこれに関連する他の対象物の撮影画像及び音声のデータを最終的に記憶部１０３に保存するための最終保存ボタン６３、及びキャンセルボタン６４を含む。
【００９４】
図９に戻り、制御部１０１は、操作部１０６又は操作部２０４を介して仮保存ボタン６２が押下されたか否かを判別する（ステップＳ４２）。
【００９５】
ステップＳ４２でＹＥＳの場合には、制御部１０１は、撮影画像及び音声のデータを記憶部１０３に一時保存し（ステップＳ４３）、ステップＳ２に戻る。尚、ステップＳ４３からステップＳ２に戻った場合は、ステップＳ３において、制御部１０１は別の音声の録音ファイルに切り換えて音声の録音を開始する。また、ステップＳ４３からステップＳ２に戻った場合は、対象物８と異なる他の対象物の撮影が可能になる。
【００９６】
ステップＳ４２でＮＯの場合には、制御部１０１は、操作部１０６又は操作部２０４を介して最終保存ボタン６３が押下されたか否かを判別する（ステップＳ４４）。
【００９７】
ステップＳ４４でＮＯの場合、即ちキャンセルボタン６４が押下された場合には、ステップＳ４６に進む。
【００９８】
ステップＳ４４でＹＥＳの場合には、制御部１０１は、現在撮影中の撮影画像及び音声のデータ並びに記憶部１０３に一時保存されている撮影画像及び音声のデータを対象物８の対象物ＩＤを介してステップＳ７で最初に特定された対象物８のＣＡＤデータと関連付けして、記憶部１０３に保存する（ステップＳ４５）。尚、ステップＳ４でＮＯの場合には、対象物ＩＤが不明なので、撮影画像及び音声のデータとステップＳ７で最初に特定された対象物８のＣＡＤデータとは別々に記憶部１０３に保存される。
【００９９】
また、ステップＳ４３で一時保存される撮影画像のデータ又はステップＳ４５で最終保存される撮影画像のデータの容量を削減するため、制御部１０１は、カメラ５で撮影された撮影画像（静止画像）を一つ前の撮影画像と比較し、予め設定した閾値以上の違いがあるか否かを判別し、所定の閾値以上の違いがある撮影画像のみを記憶部１０３に保存するようにしてもよい。例えば、カメラ５の撮影画像を構成するドットが一つ前の撮影画像を構成するドットと比べて１００ドット以上異なる場合、又はカメラ５の撮影画像を構成する全ドットが一つ前の撮影画像を構成する全ドットと比べて３％以上異なる場合に、制御部１０１は、上記所定の閾値以上の違いがあると判別し、当該撮影画像を記憶部１０３に保存する。
【０１００】
図１１に１つのＣＡＤデータと撮影画像及び音声の複数のデータとが関連付けて保存されている例を示す。同図においては、対象物ＩＤが「object001」であるＣＡＤデータと撮影画像及び音声の複数のデータとが互いに関連付けられて記憶部１０３に保存されている。図１３の対象物ＩＤが「object001」であるＣＡＤデータの属性情報は、図４の対象物ＩＤが「object001」であるＣＡＤデータの属性情報と比べてリンクの項目が追加されている。当該リンクの項目は、関連付けられた撮影画像及び音声のデータのファイル名が記載される。制御部１０１は、ＣＡＤデータの属性情報に含まれる撮影画像及び音声のデータのリンクがクリックされることにより、ＣＡＤデータに関連付けられた撮影画像及び音声のデータを記憶部１０３から読み出し、出力する。
【０１０１】
尚、同図の撮影画像及び音声のデータに付加されている属性情報は、会議の属性情報であり、タイトル、会議参加者のユーザ名、及び会議の日時を含む。
【０１０２】
ステップＳ４５の処理後、制御部１０１は、投影処理、及び画像や音声の保存処理などの全ての処理が終了したか否かを判別し（ステップＳ４６）、ステップＳ４６でＮＯの場合には、ステップＳ２に戻る。一方ステップＳ４６でＹＥＳの場合には、本処理を終了する。
【０１０３】
上記ステップＳ４１〜４５では、制御部１０１は、表示部１０５又は表示部２０５に、保存指示のダイアログを表示し、仮保存ボタン６２又は最終保存ボタン６３が押下されたか否かを判別しているが、制御部１０１は、予め設定されている仮保存ボタン６２に相当するキー入力（例えば、Alt+F1）又は最終保存ボタン６３に相当するキー入力（例えば、Alt+F2）が実行されたか否かにより仮保存ボタン６２又は最終保存ボタン６３が押下されたか否かを判別してもよい。
【０１０４】
上記ステップＳ４５では、制御部１０１は、現在撮影中の撮影画像及び音声のデータ並びに記憶部１０３に一時保存されている撮影画像及び音声のデータを対象物８の対象物ＩＤを介してステップＳ７で最初に特定された対象物８のＣＡＤデータと関連付けして、記憶部１０３に保存したが、現在撮影中の撮影画像及び音声のデータ並びに記憶部１０３に一時保存されている撮影画像及び音声のデータを対象物８の対象物ＩＤを介してステップＳ７で最後に特定された対象物のＣＡＤデータと関連付けして、記憶部１０３に保存してもよい。
【０１０５】
また、図１２に示すように、ステップ４１〜ステップＳ４６の処理を図８のステップＳ２１〜ステップＳ２９の処理に加えると、ＰＣ２の制御部２０１が、対象物８の対象物ＩＤに対応するＣＡＤデータに対して、当該対象物８及びこれに関連する他の対象物の撮影画像及び音声のデータを関連付けして、記憶部２０３に保存することができる。
【０１０６】
以上詳細に説明したように、本実施の形態によれば、複数の対象物が一つずつ撮影されると共に各対象物の交換時に音声のデータのファイルが切り換えられる場合に、制御部１０１は、最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された複数の対象物の撮影画像のデータ及びマイク１０及びスピーカ１１で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、記憶部１０３に記憶させる。
【０１０７】
よって、最初に又は最後に特定された対象物のＣＡＤデータに基づいて、ＰＣ２との間で通信された当該対象物を含む複数の対象物に関する撮影画像及び音声のデータを容易に閲覧することができる。
【０１０８】
同様に、複数の対象物が一つずつ撮影されると共に各対象物の交換時に音声のデータのファイルが切り換えられる場合に、制御部２０１は、最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された複数の対象物の撮影画像のデータ及びマイク１８及びスピーカ１９で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、記憶部２０３に記憶させる。
【０１０９】
よって、最初に又は最後に特定された対象物のＣＡＤデータに基づいて、ＰＣ１との間で通信された当該対象物を含む複数の対象物に関する撮影画像及び音声のデータを容易に閲覧することができる。
【０１１０】
また、仮保存ボタン６２が押下された場合には、制御部１０１又は制御部２０１は、対象物毎の撮影画像のデータ及び対象物毎の音声のデータを記憶部１０３又は記憶部２０３に一時記憶させ、最終保存ボタン６３が押下された場合には、制御部１０１又は制御部２０１は、最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された複数の対象物の撮影画像のデータ並びにマイク１０及びスピーカ１１、又はマイク１８及びスピーカ１９で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶させる。
【０１１１】
よって、仮保存ボタン６２の押下により対象物毎の撮影画像及び音声のデータを記憶部１０３又は記憶部２０３に一時記憶し、最終保存ボタン６３の押下により、一時記憶されていた撮影画像及び音声のデータを含む複数の対象物の撮影画像及び音声のデータを、最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶することができる。
【０１１２】
第３の実施の形態では、制御部１０１又は制御部２０１が、撮影画像のデータ及び音声のデータを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶させているが、撮影画像のデータのみを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ２又はＰＣ１との間で通信された当該対象物８に関する撮影画像のデータを容易に閲覧することができる。また、制御部１０１又は制御部２０１（データ変換手段）が、音声データを公知の方法によりテキストデータに変換し、撮影画像のデータ及びテキストデータを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ２又はＰＣ１との間で通信された当該対象物８に関する撮影画像及び音声のデータに対応するテキストデータを容易に閲覧することができる。
【０１１３】
さらに、対象物８を様々な計測機器（サイズ計測器、温度計、湿度計、電流計など）を利用して測定した場合、制御部１０１又は制御部２０１は、それらの測定データを対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶させてもよい。
【０１１４】
ＰＣ１〜ＰＣ２の機能を実現するためのソフトウェアのプログラムが記録されている記録媒体を、各ＰＣに供給し、各ＰＣのＣＰＵが記憶媒体に格納されたプログラムを読み出し実行することによっても、上記実施の形態と同様の効果を奏する。プログラムを供給するための記憶媒体としては、例えば、ＣＤ−ＲＯＭ、ＤＶＤ、又はＳＤカードなどがある。
【０１１５】
また、各ＰＣのＣＰＵが、各ＰＣの機能を実現するためのソフトウェアのプログラムを実行することによっても、上記実施の形態と同様の効果を奏する。
【０１１６】
なお、本発明は、上述した実施の形態に限定されるものではなく、その要旨を逸脱しない範囲内で種々変形して実施することが可能である。
【図面の簡単な説明】
【０１１７】
【図１】本発明の第１の実施の形態に係る遠隔指示システムの構成を示すブロック図である。
【図２】ＰＣ１〜２の機能構成を示すブロック図である。
【図３】（Ａ）は、ＰＣ１のハードウエア構成を示すブロック図であり、（Ｂ）は、ＰＣ２のハードウエア構成を示すブロック図である。
【図４】記憶部１０３及び記憶部２０３の少なくともいずれか一方に記憶されているＣＡＤデータベースの例を示す図である。
【図５】ＰＣ１で実行される処理を示すフローチャートである。
【図６】ＣＡＤデータと撮影画像及び音声のデータとが関連付けて保存されている例を示す図である。
【図７】（Ａ）は、対象物ＩＤが「object001」である撮影画像及びその属性情報を示す図であり、（Ｂ）は、表示部１０５又は２０５の画面の変遷を示す図である。
【図８】第２の実施の形態に係るＰＣ２で実行される処理を示すフローチャートである。
【図９】第３の実施の形態に係るＰＣ１が実行する処理を示すフローチャートである。
【図１０】（Ａ）は保存指示のダイアログ６１を表示する表示部１０５の一例を示す図であり、（Ｂ）は保存指示のダイアログ６１を表示する表示部２０５の一例を示す図である。
【図１１】１つのＣＡＤデータと撮影画像及び音声の複数のデータとが関連付けて保存されている例を示す図である。
【図１２】第３の実施の形態に係るＰＣ２が実行する処理を示すフローチャートである。
【符号の説明】
【０１１８】
１，２ ＰＣ
３ ネットワーク
４ プロジェクタ
５ カメラ
６ ハーフミラー
７ ＱＲコード
８ 対象物
９ テーブル
１０，１８ マイク
１１，１９ スピーカ
１０１，２０１ 制御部
１０２，２０２ 送受信部
１０３，２０３ 記憶部
１０４，２０６ ＩＦ部
１０５，２０５ 表示部
１０６，２０４ 操作部
【技術分野】
【０００１】
本発明は、情報処理装置及びプログラムに関する。
【背景技術】
【０００２】
従来より、カメラ及びプロジェクタが接続されているサーバ（例えばコンピュータ）と、ネットワークを介して当該サーバに接続される遠隔地のクライアント（例えばコンピュータ）とを備える遠隔指示システムが知られている（例えば、特許文献１、２参照）。
【０００３】
この遠隔指示システムでは、サーバに接続されているカメラが対象物を撮影し、ネットワークを介して撮影画像をクライアントに送信する。クライアントは、表示装置の表示画面に撮影画像を表示し、当該表示画面上にアノテーション画像などが書き込まれると、当該アノテーション画像をネットワークを介してサーバに送信する。サーバは受信したアノテーション画像をプロジェクタに送信し、プロジェクタは受信したアノテーション画像を立体物を含む投影領域の適切な位置（これは、クライアントが、撮影画像の範囲内でアノテーション画像を書き込んだ位置に対応する）に投影する。
【０００４】
このような環境の下で、サーバ及びクライアント間で行われた撮影画像のデータをサーバ又はクライアントの記憶媒体に保存することが望まれている。
【特許文献１】米国特許公開２００４／００７０６７４号公報
【特許文献２】特開２００５−３３７５６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、上記対象物のＣＡＤデータを再利用して、当該対象物を再設計する場合には、当該対象物に関する撮影画像のデータを参照することが望ましいが、大量の対象物を含む製品などの場合には、記憶媒体に大量の対象物に関する撮影画像のデータが保存されているため、所望の対象物に関する撮影画像のデータを探し出し、閲覧することは容易ではない。
【０００６】
本発明の目的は、対象物のＣＡＤデータに基づいて、外部端末との間で通信された当該対象物に関する撮影画像のデータを容易に閲覧することが可能な情報処理装置及びプログラムを提供することにある。
【課題を解決するための手段】
【０００７】
上記目的を達成するため、請求項１の情報処理装置は、外部端末から入力された注釈画像を対象物を含む投影領域に投影する投影装置、当該投影領域を撮影する撮影装置、及び前記投影装置、及び前記撮影装置に入出力する画像のデータを前記外部端末との間で通信する情報処理装置であって、前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段と、前記対象物の識別情報を取得する取得手段と、当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段と、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段とを備えることを特徴とする。
【０００８】
請求項２の情報処理装置は、請求項１に記載の情報処理装置において、前記情報処理装置は、前記外部端末への音声を入力すると共に前記外部端末からの音声を出力する音声入出力装置に接続され、前記音声のデータを前記外部端末との間で通信し、前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記音声入出力装置で入力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【０００９】
請求項３の情報処理装置は、請求項２に記載の情報処理装置において、前記音声のデータをテキストデータに変換するデータ変換手段を備え、前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記データ変換手段により変換されたテキストデータが視聴可能なように、当該撮影画像のデータ及び当該テキストデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１０】
請求項４の情報処理装置は、注釈画像を対象物を含む投影領域に投影する投影装置、及び当該投影領域を撮影する撮影装置が接続されるサーバとの間で、前記投影装置及び前記撮影装置に入出力される画像のデータを通信する情報処理装置であって、前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段と、前記対象物の識別情報を取得する取得手段と、当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段と、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段とを備えることを特徴とする。
【００１１】
請求項５の情報処理装置は、請求項４に記載の情報処理装置において、前記情報処理装置には、音声を入出力する第１音声入出力装置が接続され、前記サーバには音声を入出力する第２音声入出力装置が接続され、前記情報処理装置と前記サーバとの間で前記音声のデータの通信が行われ、前記制御手段は、 前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記第１音声入出力装置で入出力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１２】
請求項６の情報処理装置は、請求項５に記載の情報処理装置において、前記第１音声入出力装置で入出力された音声のデータをテキストデータに変換するデータ変換手段を備え、前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記データ変換手段により変換されたテキストデータが視聴可能なように、当該撮影画像のデータ及び当該テキストデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１３】
請求項７の情報処理装置は、請求項１又は４に記載の情報処理装置において、 複数の対象物が一つずつ撮影される場合に、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータが視聴可能なように、当該複数の対象物の撮影画像のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１４】
請求項８の情報処理装置は、請求項２又は５に記載の情報処理装置において、 複数の対象物が一つずつ撮影されると共に各対象物の交換時に音声のデータのファイルが切り換えられる場合に、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータ及び前記音声入出力装置又は前記第１音声入出力装置で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１５】
請求項９の情報処理装置は、請求項８に記載の情報処理装置において、仮記憶指示又は最終記憶指示を入力する入力手段を備え、前記入力手段により前記仮記憶指示が入力された場合には、前記制御手段は、対象物毎の撮影画像のデータ及び対象物毎の音声のデータを前記記憶手段に一時記憶させ、前記入力手段により前記最終記憶指示が入力された場合には、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータ及び前記音声入出力装置で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする。
【００１６】
請求項１０のプログラムは、外部端末から入力された注釈画像を対象物を含む投影領域に投影する投影装置、当該投影領域を撮影する撮影装置、及び前記投影装置、及び前記撮影装置に入出力する画像のデータを前記外部端末との間で通信するコンピュータを、前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段、前記対象物の識別情報を取得する取得手段、当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段、及び前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段として機能させることを特徴とする。
【００１７】
請求項１１のプログラムは、注釈画像を対象物を含む投影領域に投影する投影装置、及び当該投影領域を撮影する撮影装置が接続されるサーバとの間で、前記投影装置及び前記撮影装置に入出力される画像のデータを通信するコンピュータを、前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段、前記対象物の識別情報を取得する取得手段、当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段、及び前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段として機能させることを特徴とする。
【発明の効果】
【００１８】
請求項１，１０の発明によれば、対象物のＣＡＤデータに基づいて、外部端末との間で通信された当該対象物に関する撮影画像のデータを容易に閲覧することができる。
【００１９】
請求項２の発明によれば、対象物のＣＡＤデータに基づいて、外部端末との間で通信された当該対象物に関する撮影画像及び音声のデータを容易に閲覧することができる。
【００２０】
請求項３の発明によれば、対象物のＣＡＤデータに基づいて、外部端末との間で通信された当該対象物に関する撮影画像のデータ及び音声のデータに対応するテキストデータを容易に閲覧することができる。
【００２１】
請求項４，１１の発明によれば、対象物のＣＡＤデータに基づいて、サーバとの間で通信された当該対象物に関する撮影画像のデータを容易に閲覧することができる。
【００２２】
請求項５の発明によれば、対象物のＣＡＤデータに基づいて、サーバとの間で通信された当該対象物に関する撮影画像及び音声のデータを容易に閲覧することができる。
【００２３】
請求項６の発明によれば、対象物のＣＡＤデータに基づいて、サーバとの間で通信された当該対象物に関する撮影画像のデータ及び音声のデータに対応するテキストデータを容易に閲覧することができる。
【００２４】
請求項７の発明によれば、最初に又は最後に特定された対象物のＣＡＤデータに基づいて、外部端末又はサーバとの間で通信された当該対象物を含む複数の対象物に関する撮影画像のデータを容易に閲覧することができる。途中過程の部品に関するＣＡＤデータ等との関連付けはなされないため情報量が少なくなり、情報の整理がしやすくなる。
【００２５】
請求項８の発明によれば、最初に又は最後に特定された対象物のＣＡＤデータに基づいて、外部端末又はサーバとの間で通信された当該対象物を含む複数の対象物に関する撮影画像及び音声のデータを容易に閲覧することができる。途中過程の部品に関するＣＡＤデータ等との関連付けはなされないため情報量が少なくなり、情報の整理がしやすくなる。
【００２６】
請求項９の発明によれば、仮記憶指示により対象物毎の撮影画像及び音声のデータを記憶手段に一時記憶し、最終記憶指示により、一時記憶されていた撮影画像及び音声のデータを含む複数の対象物の撮影画像及び音声のデータを、最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、記憶手段に記憶することができる。
【発明を実施するための最良の形態】
【００２７】
以下、本発明の実施の形態について、図面を参照して説明する。
【００２８】
（第１の実施の形態）
図１は、本発明の実施の形態に係る遠隔指示システムの構成を示すブロック図である。
【００２９】
図１の遠隔指示システムは、サーバとして機能するパーソナルコンピュータ（ＰＣ）１、クライアントとして機能するＰＣ２（外部端末）を備えており、これらは、ネットワーク３を介して互いに接続されている。ＰＣ１には、プロジェクタ４（投影装置）、カメラ５（撮影装置）が接続されている。
【００３０】
プロジェクタ４は、ＰＣ１からの制御コマンドに基づいて、テーブル９上に載置された対象物８及びスクリーン１２に対して、ハーフミラー６を介して単なる光線を照射する又はアノテーション画像（注釈画像）等を投影する。尚、アノテーション画像は、線、文字、記号、図形、色、フォント（書体）等のあらゆる態様の画像を含む。
【００３１】
カメラ５は、ＰＴＺ（Pan-Tilt-Zoom）カメラ、ネットワークカメラ又はビデオカメラで構成され、テーブル上に設置されており、対象物８を含むスクリーン１２の反射画像をハーフミラー６を介して撮影し、撮影画像をＰＣ１に出力する。即ち、カメラ５は、対象物８の全体像を撮影する。プロジェクタ４の光軸及び画角はカメラ５の光軸及び画角と一致する。カメラ５は、ＰＣ２から入力される指示若しくはＰＣ１に直接入力される指示に基づいて、又は定期的に（例えば、０．１秒間隔で）、対象物９を静止画像としてキャプチャする。尚、対象物８の表面には、対象物８のＩＤ（識別情報）を含むＱＲコード７が貼り付けられている。
【００３２】
ＰＣ１は、カメラ５により撮影された撮影画像をネットワーク３を介してＰＣ２に出力する。ＰＣ２には、表示部２０５が接続されており、表示部２０５は、表示領域１５及びユーザインターフェース（ＵＩ）１４を表示する。この表示領域１５は、ＰＣ１から送られてきた撮影画像を表示する。尚、ＰＣ２は、表示部２０５を備える一体型のパーソナルコンピュータで構成してもよい。
【００３３】
マイク７（（第２）音声入出力装置）は、ＰＣ１のユーザの指示などの音声を入力し、ＰＣ２に接続されているスピーカ１９へ出力する。スピーカ８（（第２）音声入出力装置）は、ＰＣ２に接続されているマイク１８から入力されたＰＣ２のユーザの指示などの音声を出力する。
【００３４】
ＵＩ１４は、ペン、テキスト、及び消去などのボタン群と、線種や色種のアイコンとを含む。表示領域１５には、カメラ５で撮影された撮影画像が表示される。同図においては、対象物８を含むスクリーン１２をカメラ５により撮影した撮影画像が表示領域１５に表示されている。
【００３５】
例えば、ＵＩ１４のペンボタンが押下されて、表示領域１５内の対象物８上に図形等が記載されると、当該図形の情報（具体的には座標データ）がＰＣ２からＰＣ１へ出力される。ＰＣ１は、この図形の情報（具体的には座標データ）をデコードし、プロジェクタ４の投影画像に変換し、プロジェクタ４に出力する。プロジェクタ４は当該投影画像を対象物８上に投写する。
【００３６】
また、ＰＣ２は、ＰＣ１に対して制御コマンドを出力し、プロジェクタ４、及びカメラ５の動作（例えば、カメラ５の撮影角度及び撮影画像の明るさ、並びにプロジェクタ４の投影画像の明るさなど）を制御することができる。
【００３７】
マイク１８（第１音声入出力装置）は、ＰＣ２のユーザの指示などの音声を入力し、ＰＣ１に接続されているスピーカ８へ出力し、スピーカ１９（第１音声入出力装置）は、ＰＣ１に接続されているマイク７から入力されたＰＣ１のユーザの指示などの音声を出力する。
【００３８】
尚、同図においては、クライアントは、ＰＣ２の１台が記載されているが、遠隔指示システムは、複数のクライアント（ＰＣ）を備えていてもよい。
【００３９】
以上のように構成された遠隔指示システムでは、カメラ５で撮影された撮影画像がＰＣ２の表示部２０５に表示され、ＰＣ２側で書き込まれたアノテーション画像がプロジェクタ４を介して対象物８に投影されるので、ＰＣ１側のユーザとＰＣ２側のユーザは、実物である対象物８を用いたコミュニケーションができ、さらにＰＣ１側のユーザとＰＣ２側のユーザは、それぞれマイク７及びスピーカ８、並びにマイク１８及びスピーカ１９を使って、互いに音声でコミュニケーションができる。
【００４０】
図２は、ＰＣ１〜２の機能構成を示すブロック図である。
【００４１】
ＰＣ１は、装置全体を制御すると共にプロジェクタ４及びカメラ５の動作を制御する制御部１０１（取得手段、特定手段、制御手段）と、ネットワーク３を介してＰＣ２と情報やデータの送受信を行う送受信部１０２と、制御プログラム、データ及び情報等を記憶する記憶部１０３（記憶手段）と、プロジェクタ４、カメラ５及びカメラ７と接続するためのインターフェイス（ＩＦ）部１０４とを備えている。さらに、ＰＣ１は、撮影画像を表示するための表示部１０５と、マウス及びキーボードなどで構成される操作部１０６（入力手段）とを備えていてもよい。制御部１０１は、送受信部１０２、記憶部１０３、ＩＦ部１０４、表示部１０５及び操作部１０６に接続されており、さらにＩＦ部１０４を介してプロジェクタ４、カメラ５、マイク１０及びスピーカ１１に接続されている。
【００４２】
ＰＣ２は、装置全体を制御する制御部２０１（取得手段、特定手段、制御手段）と、ネットワーク３を介してＰＣ１と情報やデータの送受信を行う送受信部２０２と、制御プログラム、データ及び情報等を記憶する記憶部２０３（記憶手段）と、マウスやキーボードなどで構成される操作部２０４（入力手段）と、表示部２０５と、ＩＦ部２０６とを備えている。制御部２０１は、送受信部２０２、記憶部２０３、操作部２０４、表示部２０５及びＩＦ部２０６に接続されており、さらにＩＦ部２０６を介してマイク１８及びスピーカ１９に接続されている。
【００４３】
図３（Ａ）は、ＰＣ１のハードウエア構成を示すブロック図であり、図３（Ｂ）は、ＰＣ２のハードウエア構成を示すブロック図である。
【００４４】
ＰＣ１は、装置全体を制御するＣＰＵ２１、制御プログラムを備えるＲＯＭ２２、ワーキングエリアとして機能するＲＡＭ２３、各種の情報やプログラムを備えるハードディスクドライブ（ＨＤＤ）２４、他のコンピュータと接続するためのネットワークインターフェース２６、及び不図示のＵＳＢ機器と接続するためのＵＳＢ（universal serial bus）インターフェース２８を備えている。ＣＰＵ２１はシステムバス２９を介してＲＯＭ２２、ＲＡＭ２３、ハードディスクドライブ（ＨＤＤ）２４、ネットワークインターフェース２６及びＵＳＢインターフェース２８に接続されている。ＰＣ１はＵＳＢインターフェース２８を介してプロジェクタ４、カメラ５、マイク１０及びスピーカ１１に接続されている。尚、ＰＣ１は、マウス及びキーボード２５、並びにディスプレイ２７を備えていてもよい。
【００４５】
制御部１０１は、制御プログラムに従って各種の処理を実行するＣＰＵ２１に相当する。送受信部１０２は、ネットワークインタフェース２６に相当し、記憶部１０３は、ハードディスクドライブ（ＨＤＤ）２４に相当する。表示部１０５は、ディスプレイ２７に相当し、操作部１０６はマウス及びキーボード２５に相当する。
【００４６】
ＰＣ２は、装置全体を制御するＣＰＵ３１、制御プログラムを備えるＲＯＭ３２、ワーキングエリアとして機能するＲＡＭ３３、各種の情報やプログラムを備えるハードディスクドライブ（ＨＤＤ）３４、マウス及びキーボード３５、他のコンピュータと接続するためのネットワークインターフェース３６、液晶モニタ又はＣＲＴで構成されるディスプレイ３７、及び不図示のＵＳＢ機器と接続するためのＵＳＢ（universal serial bus）インターフェース３８を備えている。ＣＰＵ３１はシステムバス３９を介してＲＯＭ３２、ＲＡＭ３３、ハードディスクドライブ（ＨＤＤ）３４、マウス及びキーボード３５、ネットワークインターフェース３６、ディスプレイ３７及びＵＳＢインターフェース３８に接続されている。ＰＣ２はＵＳＢインターフェース３８を介してマイク１８及びスピーカ１９に接続されている。
【００４７】
制御部２０１は、制御プログラムに従って各種の処理を実行するＣＰＵ３１に相当する。送受信部２０２は、ネットワークインターフェース３６に相当し、記憶部２０３は、ハードディスクドライブ（ＨＤＤ）３４に相当する。操作部２０４は、マウス及びキーボード３５に相当し、表示部２０５は、ディスプレイ３７に相当する。
【００４８】
図４は、記憶部１０３及び記憶部２０３の少なくともいずれか一方に記憶されているＣＡＤデータベースの例を示す図である。
【００４９】
ＣＡＤデータベースは、対象物８を識別する識別情報である対象物ＩＤ、ＣＡＤデータ（ファイル名）、及び属性情報を備えている。属性情報は、タイトル、ＣＡＤデータの作成者を示すユーザ名、及びＣＡＤデータの作成日及び作成時間を示す日時に関するデータを含む。
【００５０】
図５は、ＰＣ１で実行される処理を示すフローチャートである。
【００５１】
ＰＣ１の制御部１０１は、初期投射画像をプロジェクタ４に出力する（ステップＳ１）。初期投射画像とは、黒色の画像である。
【００５２】
次いで、制御部１０１は、カメラ５で撮影された撮影画像を送受信部１０２及びネットワーク３を介してＰＣ２に出力し（ステップＳ２）、マイク１０から入力される音声及びスピーカ１１から出力される音声の録音を開始する（ステップＳ３）。
【００５３】
次に、制御部１０１は、カメラ５で撮影された撮影画像内にＱＲコード７が含まれているか否かを判別する（ステップＳ４）。
【００５４】
ステップＳ４でＹＥＳの場合には、制御部１０１は、ＱＲコード７をデコードし、対象物８の対象物ＩＤを取得し（ステップＳ５）、記憶部１０３に記憶されているＣＡＤデータベース内の当該対象物ＩＤに対応するＣＡＤデータを検索し（ステップＳ６）、当該対象物ＩＤに対応するＣＡＤデータを特定する（ステップＳ７）。ステップＳ４でＮＯの場合には、ステップＳ８に進む。
【００５５】
次に、制御部１０１は、送受信部１０２を介してＰＣ２からアノテーション画像の座標データを受信すると（ステップＳ８）、制御部１０１は、当該座標データに従って画像の投影処理を実行する（ステップＳ９）。具体的には、制御部１０１は、当該アノテーション画像の座標データをデコードし、プロジェクタ４の投影画像に変換し、プロジェクタ４に出力する。プロジェクタ４はこの投影画像、即ち、アノテーション画像を対象物８及びスクリーン１２に投影する。
【００５６】
次いで、制御部１０１は、カメラ５で撮影された撮影画像、マイク１０から入力される音声及びスピーカ１１から出力される音声の保存指示を受信したか否かを判別する（ステップＳ１０）。尚、撮影画像及び音声の保存指示は、操作部１０６又は操作部２０４を介して入力されたり、又は撮影画像及び音声の保存指示を含むＱＲコードがカメラ５に撮影されることで入力される。
【００５７】
ステップＳ１０でＮＯの場合には、ステップＳ１２に進む。一方、ステップＳ１０でＹＥＳの場合には、制御部１０１は、カメラ５で撮影された撮影画像、マイク１０から入力される音声及びスピーカ１１から出力される音声を対象物８の対象物ＩＤを介してステップＳ７で特定されたＣＡＤデータと関連付けして、記憶部１０３に保存する（ステップＳ１１）。尚、ステップＳ４でＮＯの場合には、対象物８の対象物ＩＤが不明なので、カメラ５で撮影された撮影画像、マイク１０から入力される音声及びスピーカ１１から出力される音声とステップＳ７で特定されたＣＡＤデータとは別々に記憶部１０３に保存される。
【００５８】
また、ステップＳ１１で保存されるカメラ５で撮影された撮影画像の容量を削減するため、制御部１０１は、カメラ５で撮影された撮影画像（静止画像）を一つ前の撮影画像と比較し、予め設定した閾値以上の違いがあるか否かを判別し、所定の閾値以上の違いがある撮影画像のみを記憶部１０３に保存するようにしてもよい。例えば、カメラ５の撮影画像を構成するドットが一つ前の撮影画像を構成するドットと比べて１００ドット以上異なる場合、又はカメラ５の撮影画像を構成する全ドットが一つ前の撮影画像を構成する全ドットと比べて３％以上異なる場合に、制御部１０１は、上記所定の閾値以上の違いがあると判別し、当該撮影画像を記憶部１０３に保存する。
【００５９】
図６にＣＡＤデータと撮影画像及び音声のデータとが関連付けて保存されている例を示す。同図においては、対象物ＩＤが「object001」であるＣＡＤデータと撮影画像及び音声のデータとが互いに関連付けられて記憶部１０３に保存されている。図６の対象物ＩＤが「object001」であるＣＡＤデータの属性情報は、図４の対象物ＩＤが「object001」であるＣＡＤデータの属性情報と比べてリンクの項目が追加されている。当該リンクの項目は、関連付けられた撮影画像及び音声のデータのファイル名が記載される。後述するように、制御部１０１は、ＣＡＤデータの属性情報に含まれる撮影画像及び音声のデータのリンクがクリックされることにより、ＣＡＤデータに関連付けられた撮影画像及び音声のデータを記憶部１０３から読み出し、出力する。
【００６０】
尚、同図の撮影画像及び音声のデータに付加されている属性情報は、会議の属性情報であり、タイトル、会議参加者のユーザ名、及び会議の日時を含む。
【００６１】
ステップＳ１１の処理後、制御部１０１は、投影処理、及び画像や音声の保存処理などの全ての処理が終了したか否かを判別し（ステップＳ１２）、ステップＳ１２でＮＯの場合には、ステップＳ２に戻る。一方ステップＳ１２でＹＥＳの場合には、本処理を終了する。
【００６２】
上記ステップＳ４，Ｓ５では、制御部１０１は、ＱＲコード７を介して対象物ＩＤを取得したが、対象物ＩＤの取得方法はこれに限定されるものではない。例えば、制御部１０１は、操作部１０６又は操作部２０４を介して入力された対象物ＩＤを取得してもよい。また、ＰＣ１に接続された不図示のＲＦＩＤタグのリーダ又はバーコードリーダが、対象物８に貼付られたＲＦＩＤタグ又はバーコードを読み取ることで、制御部１０１が対象物ＩＤを取得してもよい。
【００６３】
図７（Ａ）は、対象物ＩＤが「object001」である撮影画像及びその属性情報を示す図であり、図７（Ｂ）は、表示部１０５又は２０５の画面の変遷を示す図である。
【００６４】
図５の処理により、記憶部１０３に図７（Ａ）に示す撮影画像及び音声のデータが保存されているものとする。
【００６５】
制御部１０１は、記憶部１０３又は２０３に記憶されているＣＡＤデータを作成するアプリケーションを起動した状態で、操作部１０６又は２０４を介して対象物ＩＤ「object001」が入力されると、表示部１０５又は２０５に図７（Ｂ）の左図に示す対象物ＩＤ「object001」に対応するＣＡＤデータを表示する。さらに、制御部１０１は、当該ＣＡＤデータの属性情報を表示させる指示が入力されると、図７（Ｂ）の中央図に示すように、表示部１０５又は２０５にＣＡＤデータの属性情報を表示する。この状態で、操作部１０６又は２０４を介して「image001-025」及び「sound001」のリンクがクリックされると、制御部１０１は、図７（Ｂ）の右図に示すように、表示部１０５又は２０５の画面に撮影画像を表示するウインドウを表示し、「sound001」の音声をスピーカ１１又は１９から出力する。このように、制御部１０１は、ＣＡＤデータの属性情報に含まれる撮影画像及び音声のデータのリンクがクリックされることにより、ＣＡＤデータに関連付けられた撮影画像及び音声のデータを記憶部１０３から読み出し、出力する。
【００６６】
以上詳細に説明したように、本実施の形態によれば、記憶部１０３が対象物８の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶し、制御部１０１が対象物８の対象物ＩＤ（識別情報）を取得し、当該取得された対象物８の対象物ＩＤに基づいてデータベースに含まれる対象物８のＣＡＤデータを特定し、当該特定された対象物８のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された撮影画像のデータ及びマイク１０及びスピーカ１１で入出力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを当該特定された対象物８のＣＡＤデータと関連付けて、記憶部１０３に記憶させる。
【００６７】
よって、対象物８のＣＡＤデータに基づいて、ＰＣ２との間で通信された当該対象物８に関する撮影画像及び音声のデータを容易に閲覧することができる。
【００６８】
第１の実施の形態では、制御部１０１が、撮影画像のデータ及び音声のデータを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３に記憶させているが、撮影画像のデータのみを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ２との間で通信された当該対象物８に関する撮影画像のデータを容易に閲覧することができる。また、制御部１０１（データ変換手段）が、音声データを公知の方法によりテキストデータに変換し、撮影画像のデータ及びテキストデータを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ２との間で通信された当該対象物８に関する撮影画像及び音声のデータに対応するテキストデータを容易に閲覧することができる。
【００６９】
さらに、対象物８を様々な計測機器（サイズ計測器、温度計、湿度計、電流計など）を利用して測定した場合、制御部１０１は、それらの測定データを対象物のＣＡＤデータと関連付けて、記憶部１０３に記憶させてもよい。
【００７０】
（第２の実施の形態）
第１の実施の形態では、ＣＡＤデータと撮影画像及び音声のデータとが互いに関連付けられて記憶部１０３に保存される例を説明したが、本実施の形態では、ＣＡＤデータと撮影画像及び音声のデータとが互いに関連付けられて記憶部２０３に保存される例を説明する。
【００７１】
第１の実施の形態では、ＣＡＤデータベースは記憶部１０３に予め保存されているが、本実施の形態では、図４のＣＡＤデータベースは記憶部２０３に予め保存されているものとする。
【００７２】
図８は、ＰＣ２で実行される処理を示すフローチャートである。
【００７３】
制御部２０１は、ＰＣ１から撮影画像を取得し（ステップＳ２１）、マイク１８から入力される音声及びスピーカ１９から出力される音声の録音を開始する（ステップＳ２２）。
【００７４】
次に、制御部２０１は、取得された撮影画像内にＱＲコード７が含まれているか否かを判別する（ステップＳ２３）。
【００７５】
ステップＳ２３でＹＥＳの場合には、制御部２０１は、ＱＲコード７をデコードし、対象物８の対象物ＩＤを取得し（ステップＳ２４）、記憶部２０３に記憶されているＣＡＤデータベース内の当該対象物ＩＤに対応するＣＡＤデータを検索し（ステップＳ２５）、当該対象物ＩＤに対応するＣＡＤデータを特定する（ステップＳ２６）。ステップＳ２３でＮＯの場合には、ステップ２７に進む。
【００７６】
次いで、制御部２０１は、操作部２０４からアノテーション画像を描画する画面処理コマンドを受信したか否かを判別する（ステップＳ２７）。
【００７７】
ステップＳ２７でＮＯの場合には、ステップＳ３０に進む。ステップＳ２７でＹＥＳの場合には、制御部２０１は、当該画面処理コマンドに従って、アノテーション画像を表示領域１５に描画し（ステップＳ２８）、アノテーション画像の座標データを送受信部２０２を介してＰＣ１に送信する（ステップＳ２９）。尚、ＰＣ１に送信された座標データは、図５のステップＳ８の処理で、送受信部１０２を介して制御部１１により受信される。
【００７８】
次いで、制御部２０１は、撮影画像、マイク１８から入力される音声及びスピーカ１９から出力される音声の保存指示を受信したか否かを判別する（ステップＳ３０）。尚、撮影画像及び音声の保存指示は、操作部１０６又は操作部２０４を介して入力されたり、又は撮影画像及び音声の保存指示を含むＱＲコードがカメラ５に撮影されることで入力される。
【００７９】
ステップＳ３０でＮＯの場合には、ステップＳ３２に進む。一方、ステップＳ３０でＹＥＳの場合には、制御部２０１は、撮影画像、マイク１８から入力される音声及びスピーカ１９から出力される音声を対象物８の対象物ＩＤを介してステップＳ２６で特定されたＣＡＤデータと関連付けして、記憶部２０３に保存する（ステップＳ３１）。尚、ステップＳ２３でＮＯの場合には、対象物８の対象物ＩＤが不明なので、撮影画像、マイク１８から入力される音声及びスピーカ１９から出力される音声とステップＳ２６で特定されたＣＡＤデータとは別々に記憶部２０３に保存される。
【００８０】
また、ステップＳ３１で保存されるカメラ５で撮影された撮影画像の容量を削減するため、制御部２０１は、撮影画像（静止画像）を一つ前の撮影画像と比較し、予め設定した閾値以上の違いがあるか否かを判別し、所定の閾値以上の違いがある撮影画像のみを記憶部２０３に保存するようにしてもよい。例えば、撮影画像を構成するドットが一つ前の撮影画像を構成するドットと比べて１００ドット以上異なる場合、又は撮影画像を構成する全ドットが一つ前の撮影画像を構成する全ドットと比べて３％以上異なる場合に、制御部２０１は、上記所定の閾値以上の違いがあると判別し、当該撮影画像を記憶部２０３に保存する。
【００８１】
ステップＳ３１の処理後、制御部２０１は、アノテーション画像の座標データの送信及び画像や音声の保存などの全ての処理が終了したか否かを判別し（ステップＳ３２）、ステップＳ３２でＮＯの場合には、ステップＳ２１に戻る。一方ステップＳ３２でＹＥＳの場合には、本処理を終了する。
【００８２】
上記ステップＳ２３，Ｓ２４では、制御部２０１は、ＱＲコード７を介して対象物ＩＤを取得したが、対象物ＩＤの取得方法はこれに限定されるものではない。例えば、制御部２０１は、操作部１０６又は操作部２０４を介して入力された対象物ＩＤを取得してもよい。また、制御部２０１は、ＰＣ１から直接送信される対象物ＩＤを取得してもよい。
【００８３】
また、上記図７で説明した制御部１０１と同様に、制御部２０１は、ＣＡＤデータの属性情報に含まれる撮影画像及び音声のデータのリンクがクリックされることにより、ＣＡＤデータに関連付けられた撮影画像及び音声のデータを記憶部２０３から読み出し、出力する。
【００８４】
以上詳細に説明したように、本実施の形態によれば、記憶部２０３が対象物８の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶し、制御部２０１が対象物８の対象物ＩＤ（識別情報）を取得し、当該取得された対象物８の対象物ＩＤに基づいてデータベースに含まれる対象物８のＣＡＤデータを特定し、当該特定された対象物８のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された撮影画像のデータ及びマイク１８及びスピーカ１９で入出力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを当該特定された対象物８のＣＡＤデータと関連付けて、記憶部２０３に記憶させる。
【００８５】
よって、対象物８のＣＡＤデータに基づいて、ＰＣ１との間で通信された当該対象物８に関する撮影画像及び音声のデータを容易に閲覧することができる。
【００８６】
第２の実施の形態では、制御部２０１が、撮影画像のデータ及び音声のデータを特定された対象物のＣＡＤデータと関連付けて、記憶部２０３に記憶させているが、撮影画像のデータのみを特定された対象物のＣＡＤデータと関連付けて、記憶部２０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ１との間で通信された当該対象物８に関する撮影画像のデータを容易に閲覧することができる。また、制御部２０１（データ変換手段）が、音声データを公知の方法によりテキストデータに変換し、撮影画像のデータ及びテキストデータを特定された対象物のＣＡＤデータと関連付けて、記憶部２０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ１との間で通信された当該対象物８に関する撮影画像及び音声のデータに対応するテキストデータを容易に閲覧することができる。
【００８７】
さらに、対象物８を様々な計測機器（サイズ計測器、温度計、湿度計、電流計など）を利用して測定した場合、制御部２０１は、それらの測定データを対象物のＣＡＤデータと関連付けて、記憶部２０３に記憶させてもよい。
【００８８】
（第３の実施の形態）
第１の実施の形態では、制御部１０１は、対象物８の対象物ＩＤに対応するＣＡＤデータに対して、当該対象物８の撮影画像及び音声のデータを関連付けして、記憶部１０３に保存した。対象物８が任意の完成品に含まれる部品等であり、ＣＡＤデータを利用して対象物８を再設計する場合、対象物８の撮影画像及び音声のデータだけでなく、対象物８に関連する他の部品の撮影画像及び音声のデータも参照したい場合がある。本実施の形態では、かかる場合を考慮し、制御部１０１は、対象物８の対象物ＩＤに対応するＣＡＤデータに対して、当該対象物８及びこれに関連する他の対象物の撮影画像及び音声のデータを関連付けして、記憶部１０３に保存する。
【００８９】
図９は、ＰＣ１が実行する処理を示すフローチャートである。図５と同一の工程には、同一のステップ番号を付し、その説明を省略する。
【００９０】
以下の説明では、対象物８を最初に撮影し、その後、対象物８に関連する他の部品を撮影しているものとする。
【００９１】
ステップＳ９の処理後、制御部１０１は、表示部１０５又は表示部２０５に、保存指示のダイアログを表示する（ステップＳ４１）。
【００９２】
図１０（Ａ）は保存指示のダイアログ６１を表示する表示部１０５の一例を示す図であり、図１０（Ｂ）は保存指示のダイアログ６１を表示する表示部２０５の一例を示す図である。
【００９３】
保存指示のダイアログ６１は、各対象物の撮影画像及び音声のデータを記憶部１０３に一時保存するための仮保存ボタン６２、対象物８及びこれに関連する他の対象物の撮影画像及び音声のデータを最終的に記憶部１０３に保存するための最終保存ボタン６３、及びキャンセルボタン６４を含む。
【００９４】
図９に戻り、制御部１０１は、操作部１０６又は操作部２０４を介して仮保存ボタン６２が押下されたか否かを判別する（ステップＳ４２）。
【００９５】
ステップＳ４２でＹＥＳの場合には、制御部１０１は、撮影画像及び音声のデータを記憶部１０３に一時保存し（ステップＳ４３）、ステップＳ２に戻る。尚、ステップＳ４３からステップＳ２に戻った場合は、ステップＳ３において、制御部１０１は別の音声の録音ファイルに切り換えて音声の録音を開始する。また、ステップＳ４３からステップＳ２に戻った場合は、対象物８と異なる他の対象物の撮影が可能になる。
【００９６】
ステップＳ４２でＮＯの場合には、制御部１０１は、操作部１０６又は操作部２０４を介して最終保存ボタン６３が押下されたか否かを判別する（ステップＳ４４）。
【００９７】
ステップＳ４４でＮＯの場合、即ちキャンセルボタン６４が押下された場合には、ステップＳ４６に進む。
【００９８】
ステップＳ４４でＹＥＳの場合には、制御部１０１は、現在撮影中の撮影画像及び音声のデータ並びに記憶部１０３に一時保存されている撮影画像及び音声のデータを対象物８の対象物ＩＤを介してステップＳ７で最初に特定された対象物８のＣＡＤデータと関連付けして、記憶部１０３に保存する（ステップＳ４５）。尚、ステップＳ４でＮＯの場合には、対象物ＩＤが不明なので、撮影画像及び音声のデータとステップＳ７で最初に特定された対象物８のＣＡＤデータとは別々に記憶部１０３に保存される。
【００９９】
また、ステップＳ４３で一時保存される撮影画像のデータ又はステップＳ４５で最終保存される撮影画像のデータの容量を削減するため、制御部１０１は、カメラ５で撮影された撮影画像（静止画像）を一つ前の撮影画像と比較し、予め設定した閾値以上の違いがあるか否かを判別し、所定の閾値以上の違いがある撮影画像のみを記憶部１０３に保存するようにしてもよい。例えば、カメラ５の撮影画像を構成するドットが一つ前の撮影画像を構成するドットと比べて１００ドット以上異なる場合、又はカメラ５の撮影画像を構成する全ドットが一つ前の撮影画像を構成する全ドットと比べて３％以上異なる場合に、制御部１０１は、上記所定の閾値以上の違いがあると判別し、当該撮影画像を記憶部１０３に保存する。
【０１００】
図１１に１つのＣＡＤデータと撮影画像及び音声の複数のデータとが関連付けて保存されている例を示す。同図においては、対象物ＩＤが「object001」であるＣＡＤデータと撮影画像及び音声の複数のデータとが互いに関連付けられて記憶部１０３に保存されている。図１３の対象物ＩＤが「object001」であるＣＡＤデータの属性情報は、図４の対象物ＩＤが「object001」であるＣＡＤデータの属性情報と比べてリンクの項目が追加されている。当該リンクの項目は、関連付けられた撮影画像及び音声のデータのファイル名が記載される。制御部１０１は、ＣＡＤデータの属性情報に含まれる撮影画像及び音声のデータのリンクがクリックされることにより、ＣＡＤデータに関連付けられた撮影画像及び音声のデータを記憶部１０３から読み出し、出力する。
【０１０１】
尚、同図の撮影画像及び音声のデータに付加されている属性情報は、会議の属性情報であり、タイトル、会議参加者のユーザ名、及び会議の日時を含む。
【０１０２】
ステップＳ４５の処理後、制御部１０１は、投影処理、及び画像や音声の保存処理などの全ての処理が終了したか否かを判別し（ステップＳ４６）、ステップＳ４６でＮＯの場合には、ステップＳ２に戻る。一方ステップＳ４６でＹＥＳの場合には、本処理を終了する。
【０１０３】
上記ステップＳ４１〜４５では、制御部１０１は、表示部１０５又は表示部２０５に、保存指示のダイアログを表示し、仮保存ボタン６２又は最終保存ボタン６３が押下されたか否かを判別しているが、制御部１０１は、予め設定されている仮保存ボタン６２に相当するキー入力（例えば、Alt+F1）又は最終保存ボタン６３に相当するキー入力（例えば、Alt+F2）が実行されたか否かにより仮保存ボタン６２又は最終保存ボタン６３が押下されたか否かを判別してもよい。
【０１０４】
上記ステップＳ４５では、制御部１０１は、現在撮影中の撮影画像及び音声のデータ並びに記憶部１０３に一時保存されている撮影画像及び音声のデータを対象物８の対象物ＩＤを介してステップＳ７で最初に特定された対象物８のＣＡＤデータと関連付けして、記憶部１０３に保存したが、現在撮影中の撮影画像及び音声のデータ並びに記憶部１０３に一時保存されている撮影画像及び音声のデータを対象物８の対象物ＩＤを介してステップＳ７で最後に特定された対象物のＣＡＤデータと関連付けして、記憶部１０３に保存してもよい。
【０１０５】
また、図１２に示すように、ステップ４１〜ステップＳ４６の処理を図８のステップＳ２１〜ステップＳ２９の処理に加えると、ＰＣ２の制御部２０１が、対象物８の対象物ＩＤに対応するＣＡＤデータに対して、当該対象物８及びこれに関連する他の対象物の撮影画像及び音声のデータを関連付けして、記憶部２０３に保存することができる。
【０１０６】
以上詳細に説明したように、本実施の形態によれば、複数の対象物が一つずつ撮影されると共に各対象物の交換時に音声のデータのファイルが切り換えられる場合に、制御部１０１は、最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された複数の対象物の撮影画像のデータ及びマイク１０及びスピーカ１１で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、記憶部１０３に記憶させる。
【０１０７】
よって、最初に又は最後に特定された対象物のＣＡＤデータに基づいて、ＰＣ２との間で通信された当該対象物を含む複数の対象物に関する撮影画像及び音声のデータを容易に閲覧することができる。
【０１０８】
同様に、複数の対象物が一つずつ撮影されると共に各対象物の交換時に音声のデータのファイルが切り換えられる場合に、制御部２０１は、最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された複数の対象物の撮影画像のデータ及びマイク１８及びスピーカ１９で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、記憶部２０３に記憶させる。
【０１０９】
よって、最初に又は最後に特定された対象物のＣＡＤデータに基づいて、ＰＣ１との間で通信された当該対象物を含む複数の対象物に関する撮影画像及び音声のデータを容易に閲覧することができる。
【０１１０】
また、仮保存ボタン６２が押下された場合には、制御部１０１又は制御部２０１は、対象物毎の撮影画像のデータ及び対象物毎の音声のデータを記憶部１０３又は記憶部２０３に一時記憶させ、最終保存ボタン６３が押下された場合には、制御部１０１又は制御部２０１は、最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、カメラ５で撮影された複数の対象物の撮影画像のデータ並びにマイク１０及びスピーカ１１、又はマイク１８及びスピーカ１９で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶させる。
【０１１１】
よって、仮保存ボタン６２の押下により対象物毎の撮影画像及び音声のデータを記憶部１０３又は記憶部２０３に一時記憶し、最終保存ボタン６３の押下により、一時記憶されていた撮影画像及び音声のデータを含む複数の対象物の撮影画像及び音声のデータを、最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶することができる。
【０１１２】
第３の実施の形態では、制御部１０１又は制御部２０１が、撮影画像のデータ及び音声のデータを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶させているが、撮影画像のデータのみを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ２又はＰＣ１との間で通信された当該対象物８に関する撮影画像のデータを容易に閲覧することができる。また、制御部１０１又は制御部２０１（データ変換手段）が、音声データを公知の方法によりテキストデータに変換し、撮影画像のデータ及びテキストデータを特定された対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶させてもよい。これにより、対象物８のＣＡＤデータに基づいて、ＰＣ２又はＰＣ１との間で通信された当該対象物８に関する撮影画像及び音声のデータに対応するテキストデータを容易に閲覧することができる。
【０１１３】
さらに、対象物８を様々な計測機器（サイズ計測器、温度計、湿度計、電流計など）を利用して測定した場合、制御部１０１又は制御部２０１は、それらの測定データを対象物のＣＡＤデータと関連付けて、記憶部１０３又は記憶部２０３に記憶させてもよい。
【０１１４】
ＰＣ１〜ＰＣ２の機能を実現するためのソフトウェアのプログラムが記録されている記録媒体を、各ＰＣに供給し、各ＰＣのＣＰＵが記憶媒体に格納されたプログラムを読み出し実行することによっても、上記実施の形態と同様の効果を奏する。プログラムを供給するための記憶媒体としては、例えば、ＣＤ−ＲＯＭ、ＤＶＤ、又はＳＤカードなどがある。
【０１１５】
また、各ＰＣのＣＰＵが、各ＰＣの機能を実現するためのソフトウェアのプログラムを実行することによっても、上記実施の形態と同様の効果を奏する。
【０１１６】
なお、本発明は、上述した実施の形態に限定されるものではなく、その要旨を逸脱しない範囲内で種々変形して実施することが可能である。
【図面の簡単な説明】
【０１１７】
【図１】本発明の第１の実施の形態に係る遠隔指示システムの構成を示すブロック図である。
【図２】ＰＣ１〜２の機能構成を示すブロック図である。
【図３】（Ａ）は、ＰＣ１のハードウエア構成を示すブロック図であり、（Ｂ）は、ＰＣ２のハードウエア構成を示すブロック図である。
【図４】記憶部１０３及び記憶部２０３の少なくともいずれか一方に記憶されているＣＡＤデータベースの例を示す図である。
【図５】ＰＣ１で実行される処理を示すフローチャートである。
【図６】ＣＡＤデータと撮影画像及び音声のデータとが関連付けて保存されている例を示す図である。
【図７】（Ａ）は、対象物ＩＤが「object001」である撮影画像及びその属性情報を示す図であり、（Ｂ）は、表示部１０５又は２０５の画面の変遷を示す図である。
【図８】第２の実施の形態に係るＰＣ２で実行される処理を示すフローチャートである。
【図９】第３の実施の形態に係るＰＣ１が実行する処理を示すフローチャートである。
【図１０】（Ａ）は保存指示のダイアログ６１を表示する表示部１０５の一例を示す図であり、（Ｂ）は保存指示のダイアログ６１を表示する表示部２０５の一例を示す図である。
【図１１】１つのＣＡＤデータと撮影画像及び音声の複数のデータとが関連付けて保存されている例を示す図である。
【図１２】第３の実施の形態に係るＰＣ２が実行する処理を示すフローチャートである。
【符号の説明】
【０１１８】
１，２ ＰＣ
３ ネットワーク
４ プロジェクタ
５ カメラ
６ ハーフミラー
７ ＱＲコード
８ 対象物
９ テーブル
１０，１８ マイク
１１，１９ スピーカ
１０１，２０１ 制御部
１０２，２０２ 送受信部
１０３，２０３ 記憶部
１０４，２０６ ＩＦ部
１０５，２０５ 表示部
１０６，２０４ 操作部
【特許請求の範囲】
【請求項１】
外部端末から入力された注釈画像を対象物を含む投影領域に投影する投影装置、当該投影領域を撮影する撮影装置、及び前記投影装置、及び前記撮影装置に入出力する画像のデータを前記外部端末との間で通信する情報処理装置であって、
前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段と、
前記対象物の識別情報を取得する取得手段と、
当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段と、
前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段と
を備えることを特徴とする情報処理装置。
【請求項２】
前記情報処理装置は、前記外部端末への音声を入力すると共に前記外部端末からの音声を出力する音声入出力装置に接続され、前記音声のデータを前記外部端末との間で通信し、
前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記音声入出力装置で入力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記音声のデータをテキストデータに変換するデータ変換手段を備え、
前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記データ変換手段により変換されたテキストデータが視聴可能なように、当該撮影画像のデータ及び当該テキストデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項２に記載の情報処理装置。
【請求項４】
注釈画像を対象物を含む投影領域に投影する投影装置、及び当該投影領域を撮影する撮影装置が接続されるサーバとの間で、前記投影装置及び前記撮影装置に入出力される画像のデータを通信する情報処理装置であって、
前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段と、
前記対象物の識別情報を取得する取得手段と、
当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段と、
前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段と
を備えることを特徴とする情報処理装置。
【請求項５】
前記情報処理装置には、音声を入出力する第１音声入出力装置が接続され、前記サーバには音声を入出力する第２音声入出力装置が接続され、前記情報処理装置と前記サーバとの間で前記音声のデータの通信が行われ、
前記制御手段は、 前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記第１音声入出力装置で入出力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項４に記載の情報処理装置。
【請求項６】
前記第１音声入出力装置で入出力された音声のデータをテキストデータに変換するデータ変換手段を備え、
前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記データ変換手段により変換されたテキストデータが視聴可能なように、当該撮影画像のデータ及び当該テキストデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項５に記載の情報処理装置。
【請求項７】
複数の対象物が一つずつ撮影される場合に、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータが視聴可能なように、当該複数の対象物の撮影画像のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項１又は４に記載の情報処理装置。
【請求項８】
複数の対象物が一つずつ撮影されると共に各対象物の交換時に音声のデータのファイルが切り換えられる場合に、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータ及び前記音声入出力装置又は前記第１音声入出力装置で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項２又は５に記載の情報処理装置。
【請求項９】
仮記憶指示又は最終記憶指示を入力する入力手段を備え、
前記入力手段により前記仮記憶指示が入力された場合には、前記制御手段は、対象物毎の撮影画像のデータ及び対象物毎の音声のデータを前記記憶手段に一時記憶させ、前記入力手段により前記最終記憶指示が入力された場合には、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータ及び前記音声入出力装置で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項８に記載の情報処理装置。
【請求項１０】
外部端末から入力された注釈画像を対象物を含む投影領域に投影する投影装置、当該投影領域を撮影する撮影装置、及び前記投影装置、及び前記撮影装置に入出力する画像のデータを前記外部端末との間で通信するコンピュータを、
前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段、
前記対象物の識別情報を取得する取得手段、
当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段、及び
前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段
として機能させることを特徴とするプログラム。
【請求項１１】
注釈画像を対象物を含む投影領域に投影する投影装置、及び当該投影領域を撮影する撮影装置が接続されるサーバとの間で、前記投影装置及び前記撮影装置に入出力される画像のデータを通信するコンピュータを、
前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段、
前記対象物の識別情報を取得する取得手段、
当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段、及び
前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段
として機能させることを特徴とするプログラム。
【請求項１】
外部端末から入力された注釈画像を対象物を含む投影領域に投影する投影装置、当該投影領域を撮影する撮影装置、及び前記投影装置、及び前記撮影装置に入出力する画像のデータを前記外部端末との間で通信する情報処理装置であって、
前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段と、
前記対象物の識別情報を取得する取得手段と、
当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段と、
前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段と
を備えることを特徴とする情報処理装置。
【請求項２】
前記情報処理装置は、前記外部端末への音声を入力すると共に前記外部端末からの音声を出力する音声入出力装置に接続され、前記音声のデータを前記外部端末との間で通信し、
前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記音声入出力装置で入力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記音声のデータをテキストデータに変換するデータ変換手段を備え、
前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記データ変換手段により変換されたテキストデータが視聴可能なように、当該撮影画像のデータ及び当該テキストデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項２に記載の情報処理装置。
【請求項４】
注釈画像を対象物を含む投影領域に投影する投影装置、及び当該投影領域を撮影する撮影装置が接続されるサーバとの間で、前記投影装置及び前記撮影装置に入出力される画像のデータを通信する情報処理装置であって、
前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段と、
前記対象物の識別情報を取得する取得手段と、
当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段と、
前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段と
を備えることを特徴とする情報処理装置。
【請求項５】
前記情報処理装置には、音声を入出力する第１音声入出力装置が接続され、前記サーバには音声を入出力する第２音声入出力装置が接続され、前記情報処理装置と前記サーバとの間で前記音声のデータの通信が行われ、
前記制御手段は、 前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記第１音声入出力装置で入出力された音声のデータが視聴可能なように、当該撮影画像のデータ及び当該音声のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項４に記載の情報処理装置。
【請求項６】
前記第１音声入出力装置で入出力された音声のデータをテキストデータに変換するデータ変換手段を備え、
前記制御手段は、前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータ及び前記データ変換手段により変換されたテキストデータが視聴可能なように、当該撮影画像のデータ及び当該テキストデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項５に記載の情報処理装置。
【請求項７】
複数の対象物が一つずつ撮影される場合に、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータが視聴可能なように、当該複数の対象物の撮影画像のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項１又は４に記載の情報処理装置。
【請求項８】
複数の対象物が一つずつ撮影されると共に各対象物の交換時に音声のデータのファイルが切り換えられる場合に、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータ及び前記音声入出力装置又は前記第１音声入出力装置で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項２又は５に記載の情報処理装置。
【請求項９】
仮記憶指示又は最終記憶指示を入力する入力手段を備え、
前記入力手段により前記仮記憶指示が入力された場合には、前記制御手段は、対象物毎の撮影画像のデータ及び対象物毎の音声のデータを前記記憶手段に一時記憶させ、前記入力手段により前記最終記憶指示が入力された場合には、前記制御手段は、前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された複数の対象物の撮影画像のデータ及び前記音声入出力装置で入出力された複数の音声のデータが視聴可能なように、当該複数の対象物の撮影画像のデータ及び当該複数の音声のデータを前記特定手段により最初に又は最後に特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させることを特徴とする請求項８に記載の情報処理装置。
【請求項１０】
外部端末から入力された注釈画像を対象物を含む投影領域に投影する投影装置、当該投影領域を撮影する撮影装置、及び前記投影装置、及び前記撮影装置に入出力する画像のデータを前記外部端末との間で通信するコンピュータを、
前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段、
前記対象物の識別情報を取得する取得手段、
当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段、及び
前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段
として機能させることを特徴とするプログラム。
【請求項１１】
注釈画像を対象物を含む投影領域に投影する投影装置、及び当該投影領域を撮影する撮影装置が接続されるサーバとの間で、前記投影装置及び前記撮影装置に入出力される画像のデータを通信するコンピュータを、
前記対象物の設計に使用されるＣＡＤデータ及びその属性情報を含むデータベースを記憶する記憶手段、
前記対象物の識別情報を取得する取得手段、
当該取得された対象物の識別情報に基づいて前記データベースに含まれる当該対象物のＣＡＤデータを特定する特定手段、及び
前記特定手段により特定された対象物のＣＡＤデータの属性情報に基づいて、前記撮影装置で撮影された撮影画像のデータが視聴可能なように、当該撮影画像のデータを前記特定手段により特定された対象物のＣＡＤデータと関連付けて、前記記憶手段に記憶させる制御手段
として機能させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２００９−１６９７６８（Ｐ２００９−１６９７６８Ａ）
【公開日】平成２１年７月３０日（２００９．７．３０）
【国際特許分類】
【出願番号】特願２００８−８５６５（Ｐ２００８−８５６５）
【出願日】平成２０年１月１７日（２００８．１．１７）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＱＲコード
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
【公開日】平成２１年７月３０日（２００９．７．３０）
【国際特許分類】
【出願日】平成２０年１月１７日（２００８．１．１７）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＱＲコード
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
[ Back to top ]