撮影装置および遠隔作業支援システム
【課題】本発明は、頭部装着式のカメラにおいて、頭部の高速移動や揺れの場合でもあっても、このカメラによって撮影された映像によって映像酔い等の気分が悪くなることを低減し得る撮影装置および遠隔作業支援システムを提供する。
【解決手段】本発明の撮影装置１は、頭部に装着する装着ユニット１０と、被写体を撮影する撮影ユニット２０と、前記頭部の角速度を検出する角速度センサユニット３０と、角速度センサユニット３０で検出された前記頭部の角速度に基づいて、撮影ユニット２０の撮影方向の変化を検出し、この検出した撮影ユニット２０の撮影方向の変化が所定の第１時間内において所定の方向に沿う往復移動の場合に、撮影ユニット２０によって撮影された被写体の映像を表示する場合における被写体の映像の切り換えを制限する映像表示制御部６３とを備える。
【解決手段】本発明の撮影装置１は、頭部に装着する装着ユニット１０と、被写体を撮影する撮影ユニット２０と、前記頭部の角速度を検出する角速度センサユニット３０と、角速度センサユニット３０で検出された前記頭部の角速度に基づいて、撮影ユニット２０の撮影方向の変化を検出し、この検出した撮影ユニット２０の撮影方向の変化が所定の第１時間内において所定の方向に沿う往復移動の場合に、撮影ユニット２０によって撮影された被写体の映像を表示する場合における被写体の映像の切り換えを制限する映像表示制御部６３とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、頭部に装着されるカメラによって撮影された映像を表示装置に表示する撮影装置およびこの撮影装置を用いた遠隔作業支援システムに関する。
【背景技術】
【０００２】
頭部に装着される頭部装着式のカメラは、装着者の体験映像を得ることができることから、例えば、前記装着者の体験映像を指示者に送信して指示者から適宜な指示を受信する遠隔作業支援システムや、前記装着者の体験映像を記録しておき適時にこの記録しておいた体験映像を提示することで過去の体験を前記装着者に想起させる日常生活支援システム等に活用されている。また、頭部装着式のカメラは、体験映像を得るために装着者の手を煩わせることがないため、装着者は、手を自由に使える利点もある。
【０００３】
このような頭部装着式のカメラは、例えば、特許文献１および特許文献２に開示されている。この特許文献１に開示の撮像装置は、撮影者の頭部に装着し得るように構成されたものであり、画像データを生成するための撮像手段と、上記撮影者の頭部に装着し得るように構成されたものであり、被写体を観察するときの上記撮影者の動きに関連する生体情報であって、かつ上記画像データを編集処理する際に用いる生体情報、を検出するための生体情報検出手段と、上記画像データを、該画像データが生成されたタイム情報に関連付けて記録するための画像データ記録手段と、上記生体情報を、上記画像データが生成されたタイム情報に関連付けて記録するための生体情報記録手段とを具備している。上記生体情報検出手段は、上記生体情報として撮影者の頭部の角速度を検出するための角速度検出手段を含み、上記編集処理は、記録された画像データの、カッティングと、ぶれ補正と、記録時間の引き延ばしと、電子ズーミングとの内の少なくとも１つである。上記カッティングは、ぶれ補正等を行うことができない場合に、このぶれ補正等を行うことができない特定の画像に対して行われる。このような構成によって、特許文献１に開示の撮像装置では、撮影者の意思を反映した編集処理を撮影後に行うことができる。
【０００４】
また、特許文献２に開示の頭部装着式映像表示装置は、映像を表示する表示ユニットと、当該頭部装着式映像表示装置から作業対象物までの距離を検出する距離検出部と、前記表示ユニットに表示させる、作業対象物の参照映像の表示サイズを調整する表示制御部とを備え、前記参照映像には、前記作業対象物の現実の大きさに対する該参照映像の縮尺比情報が添付され、前記表示制御部は、前記距離検出部で検出された距離と前記参照映像に添付されている縮尺比情報とに基づいて、前記表示ユニットに表示させる前記参照映像の表示サイズを調整するものである。このような構成によって、特許文献２に開示の頭部装着式映像表示装置は、作業者や指示者へ負担を課することなく、作業に適切なサイズの参照画像を表示することができる。そして、特許文献２には、この頭部装着式映像表示装置を用いた遠隔作業支援システムも開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−２５２７３２号公報
【特許文献２】特開２００８−１２３２５７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
ところで、頭部装着式のカメラでは、頭部の動きに伴ってカメラの撮影方向が動くため、頭部が例えば高速に移動したり揺れたりすると、カメラによって撮影された映像も流れたり揺れたりする。このため、このカメラによって撮影された映像を見る観察者は、この撮影映像の揺れにより、映像酔い等の気分が悪くなってしまうことがある。特に、頭部装着式のカメラを頭部に装着した装着者が、肯定や否定を頭部の往復運動による頷き動作で示す場合に、このような事態が顕著に起こり得る。
【０００７】
本発明は、上述の事情に鑑みて為された発明であり、その目的は、頭部装着式のカメラにおいて、頭部が高速に移動したり揺れたりした場合でもあっても、このカメラによって撮影された映像によって映像酔い等の気分が悪くなることを低減することができる撮影装置およびこの撮影装置を用いた遠隔作業支援システムを提供することである。
【課題を解決するための手段】
【０００８】
本発明者は、種々検討した結果、上記目的は、以下の本発明により達成されることを見出した。すなわち、本発明の一態様にかかる撮影装置は、頭部に装着する装着部と、被写体を撮影する撮影部とを備える頭部装着式撮影部と、前記撮影部の撮影方向の変化を検出する撮影方向検出部と、前記撮影方向検出部で検出された前記撮影部の撮影方向の変化が、所定の第１時間内において所定の方向に沿う往復移動の場合に、前記撮影部によって撮影された被写体の映像を表示する場合における前記被写体の映像の切り換えを制限する映像表示制御部とを備えることを特徴とする。
【０００９】
このような構成の撮影装置では、頭部に装着される頭部装着式撮影部の撮影部における撮影方向の変化が撮影方向検出部によって検出され、その検出された撮影方向の変化が所定の第１時間内において所定の方向に沿う往復移動の場合に、撮影部によって撮影された被写体の映像の切り換えが制限される。この被写体の映像の切り換えが制限されることによって、被写体の映像が例えばコマ落としや略静止画等のように表示され、あるいは例えば非表示とされ、映像酔い等の気分が悪くなることを低減することができる。
【００１０】
また、他の一撮影装置では、上述の撮影装置において、好ましくは、前記往復移動は、前記撮影方向検出部で検出された前記撮影部の撮影方向が前記所定の方向に沿って略１８０度異なる方向へ２回以上変化することである。
【００１１】
この構成によれば、撮影方向が前記所定の方向に沿って略１８０度異なる方向へ２回以上変化した場合に往復移動と判定する簡易な判定条件としているので、撮影方向検出部や映像表示制御部を比較的簡単な装置や処理で実現することが可能である。
【００１２】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記所定の第１時間は、０．３秒〜３秒であることである。
【００１３】
一例では、頭部が０．３秒〜３秒程度の間に往復移動した場合に、その頭部に装着されたカメラによって撮影された映像を見た観察者は、映像酔い等の気分が悪くなりやすい。上記構成によれば、このような映像酔い等の気分の悪くなりやすい時間帯のうちのいずれかの時間に第１時間を設定しているので、このような事態を効果的に抑制または防止することが可能となる。
【００１４】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記映像表示制御部は、所定の第２時間の間、前記被写体の映像におけるフレームを更新しないことによって、前記被写体の映像の切り換えを制限することである。
【００１５】
この構成によれば、被写体の映像におけるフレームを更新しないので被写体の映像が略静止画となり、被写体の映像におけるフレームを更新しないという比較的簡易な手法によって、映像酔い等の気分の悪くなることを低減または防止することができる。
【００１６】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記映像表示制御部は、所定の第２時間の間、前記被写体の映像を表示しないことによって、前記被写体の映像の切り換えを制限することである。
【００１７】
この構成によれば、被写体の映像を表示しないので被写体の映像が消え、被写体の映像を表示しないという比較的簡易な手法によって、映像酔い等の気分の悪くなることを低減または防止することができる。
【００１８】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記所定の第２時間は、前記第１時間よりも長く、かつ、１秒〜５秒であることである。
【００１９】
この構成によれば、第２時間中、前記被写体の映像の切り換えを制限することで、映像酔い等の気分の悪くなることを低減または防止することができるとともに、第２時間の経過後に、前記被写体の映像の切り換えの制限を解除し、元に復帰することができる。
【００２０】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記所定の方向は、鉛直方向であることである。
【００２１】
この構成によれば、装着者の頭部における鉛直方向の往復移動による映像酔い等の気分の悪くなることに対処することができる。特に、装着者の歩行の場合や、装着者が肯定を頭部の鉛直方向における往復運動によって示す場合に対処することができる。
【００２２】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記所定の方向は、水平方向であることである。
【００２３】
この構成によれば、装着者の頭部における水平方向の往復移動による映像酔い等の気分の悪くなることに対処することができる。特に、装着者が否定を頭部の水平方向における往復運動によって示す場合に対処することができる。
【００２４】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記撮影方向検出部は、水平センサを備えることである。
【００２５】
この構成によれば、撮影方向の鉛直方向における往復移動を検出するために水平センサを用いるので、比較的簡単な構造で安価に、撮影方向における鉛直方向に沿った往復移動を検出することができる。
【００２６】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記撮影方向検出部は、角速度センサを備えることである。
【００２７】
この構成によれば、撮影方向における所定の方向に沿った往復移動を検出するために角速度センサを用いるので、比較的コンパクトで正確に、撮影方向における所定の方向に沿った往復移動を検出することができる。
【００２８】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記撮影方向検出部は、前記撮影部によって撮影された被写体の映像のうちの２枚の画像間における対応点を対応点探索処理によって抽出することで、前記撮影部の撮影方向を検出する対応点探索部を備えることである。
【００２９】
この構成によれば、対応点探索処理の画像処理で撮影方向の変化を検出するので、別途にセンサ部品を必要せず、センサレスでソフトウェアによって撮影方向検出部を構成することが可能となる。
【００３０】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記頭部装着式撮影部の撮影部は、前記被写体の光学像を電気的な信号に変換する撮像素子と、前記撮像素子の受光面上に前記被写体の光学像を形成する光学系とを備え、前記撮像素子は、ＣＭＯＳ型イメージセンサであることである。
【００３１】
ＣＭＯＳ型イメージセンサは、各画素の画像信号を順次に走査することによって得ている。このため、頭部が高速に移動したり揺れたりした場合では、映像が歪みやすく、これにより、映像酔い等の気分が悪くなることが、一層、発生しやすい。上記構成によれば、撮影部の撮影方向の変化が撮影方向検出部で検出され、その検出された撮影部の撮影方向の挙動に基づいて表示部に表示される被写体の映像の切り換えが制限されるので、撮影部の撮像素子がＣＭＯＳ型イメージセンサであっても、この撮影部によって撮影された映像により、映像酔い等の気分が悪くなることを低減することができる。
【００３２】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記頭部装着式撮影部の撮影部によって撮影された被写体の映像を表示する表示部をさらに備えることである。
【００３３】
この構成によれば、前記頭部装着式撮影部の撮影部によって撮影された被写体の映像を表示する表示部をさらに備えた撮影装置を提供することができる。
【００３４】
また、他の一態様では、上述の撮影装置において、好ましくは、前記表示部は、前記頭部装着式撮影部に備えられていることである。
【００３５】
この構成によれば、撮影部の撮影方向が撮影方向検出部で検出され、その検出された撮影部の撮影方向に基づいて表示部に表示される被写体の映像の切り換えが制限されるので、表示部が頭部装着式撮影部に備えられている場合であっても、装着者は、この撮影部によって撮影された映像により、映像酔い等の気分が悪くなることを低減することができ、その場で即座に撮影している領域を確認することができる。
【００３６】
また、他の一態様では、これら上述の撮影装置において、好ましくは、音を音信号に変換する音入力部と、音信号を音に変換する音出力と、通信信号を送受信する通信部と、前記通信部の送受信を制御する通信制御部とをさらに備え、前記通信制御部は、前記音入力部によって変換された音信号を前記通信部に送信させるとともに、音を出力させるべく、前記通信部によって受信された音信号を前記音出力部へ出力することである。
【００３７】
この構成によれば、装着者は、例えば遠隔作業支援システム等の外部システムと、音声によってコミュニケーションを図ることができる。特に、コミュニケーションによって生じる装着者の動作に対処することができる。
【００３８】
そして、本発明の他の一態様にかかる遠隔作業支援システムは、撮影装置と、通信網を介して前記撮影装置と通信可能に接続される遠隔作業支援装置とを備える遠隔作業支援システムであって、前記撮影装置は、これら上述のいずれかに記載の撮影装置であり、前記遠隔作業支援装置は、前記通信網を介して受信され、前記頭部装着式撮影部の撮影部によって撮影された被写体の映像を表示する第２表示部と、指示者の指示を受け付けて該指示を前記通信網を介して前記撮影装置へ送信する指示受付部とを備えることを特徴とする。
【００３９】
このような構成の遠隔作業支援システムは、これら上述のいずれかの撮影装置を備えるので、撮影装置のユーザ（装着者、作業者）の頭部が高速に移動したり揺れたりした場合でもあっても、映像の切り換えの制限によって、遠隔作業支援装置のユーザ（指示者）は、この撮影部によって撮影された映像により、映像酔い等の気分が悪くなることを低減することができる。
【発明の効果】
【００４０】
本発明にかかる撮影装置および遠隔作業支援システムは、頭部装着式のカメラにおいて、頭部が高速に移動したり揺れたりした場合でもあっても、このカメラによって撮影された映像によって映像酔い等の気分が悪くなることを低減することができる。
【図面の簡単な説明】
【００４１】
【図１】実施形態にかかる遠隔作業支援システムの構成を示す図である。
【図２】実施形態にかかる遠隔作業支援システムにおける撮影装置の構成を示す外観斜視図である。
【図３】実施形態にかかる遠隔作業支援システムの撮影装置における表示ユニットの側断面図である。
【図４】実施形態にかかる遠隔作業支援システムにおける撮影装置の電気的な構成を示すブロック図である。
【図５】本実施形態の遠隔作業支援システムにおける撮影装置の動作を示すフローチャートである。
【図６】撮影方向の往復移動が第１態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。
【図７】撮影方向の往復移動が第２態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。
【図８】撮影方向の往復移動が第３態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。
【図９】実施形態にかかる遠隔作業支援システムにおける撮影装置の他の電気的な構成を示すブロック図である。
【発明を実施するための形態】
【００４２】
以下、本発明にかかる実施の一形態を図面に基づいて説明する。なお、各図において同一の符号を付した構成は、同一の構成であることを示し、適宜、その説明を省略する。
【００４３】
図１は、実施形態にかかる遠隔作業支援システムの構成を示す図である。図２は、実施形態にかかる遠隔作業支援システムにおける撮影装置の構成を示す外観斜視図である。図３は、実施形態にかかる遠隔作業支援システムの撮影装置における表示ユニットの側断面図である。図４は、実施形態にかかる遠隔作業支援システムにおける撮影装置の電気的な構成を示すブロック図である。
【００４４】
実施形態にかかる遠隔作業支援システムは、作業者における所定の方向の被写体を撮影し、この撮影した被写体の映像を前記作業者とは離れた別の場所に居る指示者が観察することができるように表示し、この被写体の映像を参照した前記指示者の指示を前記作業者に提供するシステムである。このような遠隔作業支援システムＳは、例えば、図１ないし図４に示すように、作業者Ｗに使用され、作業者Ｗにおける所定の方向、例えば作業者Ｗの視線方向の例えば作業対象物等の被写体を撮影し、この撮影した被写体の映像を送信する撮影装置１と、ネットワーク（通信網）ＮＴを介してこの撮影装置１によって撮影された被写体の映像を受信し、指示者Ａが見ることができるようにこの受信した被写体の映像を表示し、この被写体の映像を参照した指示者Ａの指示を受け付け、この受け付けた指示者Ａの指示を撮影装置１から出力させるべく、この受け付けた指示者Ａの指示をネットワークＮＴを介して撮影装置１へ送信する遠隔支援装置５とを備えて構成されている。
【００４５】
遠隔支援装置５は、撮影装置１から離れた場所に設けられ、撮影装置１と互いにデータを交換することができるように、ネットワークＮＴを介して通信可能に撮影装置１と接続され、例えば、図１に示すように、メインサーバコンピュータ装置（以下、「メインサーバＰＣ」と略記する。）６と、支援記録サーバコンピュータ装置（以下、「支援記録サーバＰＣ」と略記する。）７と、コンテンツサーバコンピュータ装置（以下、「コンテンツサーバＰＣ」と略記する。）８とを備えて構成される。
【００４６】
ネットワークＮＴは、例えば、電話網、ディジタル通信網および無線通信網等の通信網であり、所定の通信プロトコルを用いてデータが伝送される。本実施形態では、ネットワークＮＴは、例えば公衆電話網（固定電話網）、ＩＳＤＮ等のディジタル通信網および移動体電話網（携帯電話網）等の公衆ネットワークＮＴａと、例えばイーサネット（登録商標）等のローカル・エリア・ネットワーク（ＬＡＮ；プライベートネットワーク）ＮＴｂとを備えて構成される。公衆ネットワークＮＴａは、例えば、通信プロトコルにＦＴＰ（File Transfer Protocol）やＴＣＰ／ＩＰ（Transmission Control Protocol/Internet Protocol）等のインターネットプロトコルが用いられてインターネットを構成し、プライベートネットワークＮＴｂは、例えば、前記インターネットプロトコルが用いられてイントラネットを構成する。撮影装置１は、公衆ネットワークＮＴａと通信可能に接続され、遠隔支援装置５のメインサーバＰＣ６、支援記録サーバＰＣ７およびコンテンツサーバＰＣ７の各サーバＰＣは、互いにデータを交換することができるように、プライベートネットワークＮＴｂと通信可能に接続され、そして、公衆ネットワークＮＴａとプライベートネットワークＮＴｂとは、通信可能に接続されている。
【００４７】
メインサーバＰＣ６は、ネットワークＮＴを介して撮影装置１から受信した被写体の映像を表示するとともに、この被写体の映像を参照した指示者Ａの指示を受け付け、この受け付けた指示者Ａの指示をネットワークＮＴを介して撮影装置１へ送信するサーバコンピュータであり、例えば、メインサーバＰＣ６の全体制御を司るコンピュータ１６１と、指示者Ａの指示を受け付け、入力するための例えばキーボード１６２ａやマウス１６２ｂ等の入力装置１６２と、例えば映像を表示するディスプレイ１６３ａ等の出力装置１６３とを備えて構成される。
【００４８】
なお、本明細書において、総称する場合には添え字を省略した参照符号で示し、個別の構成を指す場合には添え字を付した参照符号で示す。
【００４９】
このコンピュータ１６１は、ネットワークＮＴ（プライベートネットワークＮＴｂ）と通信可能に接続するための、撮影装置１における後述のネットワークインタフェース部６８と同様の通信インタフェース回路（ネットワークカード）を備えており、撮影装置１からネットワークＮＴを介して受信した被写体の映像をディスプレイ１６３ａに表示するとともに、キーボード１６２ａやマウス１６２ｂから受け付けた（入力された）指示者Ａの指示をネットワークＮＴを介して撮影装置１へ送信する制御を行う。この指示者Ａの指示は、撮影装置１にネットワークＮＴを介して受信され、撮影装置１における後述の表示ユニット４０に表示される。
【００５０】
支援記録サーバＰＣ７は、撮影装置１と遠隔支援装置５との間でやり取りされた支援データを記憶して記録し、クライアント装置の要求に従ってこの要求に対応する支援データをクライアント装置に提供するサーバコンピュータである。支援記憶サーバＰＣ７は、コンピュータ１６１の制御に従って、あるいは、プライベートネットワークＮＴｂを伝送する通信信号を監視（モニタ）することによって独自に、撮影映像装置１による被写体の映像を日付や時刻等の日時情報と対応付けて支援データとして記録するとともに遠隔支援装置５による作業者Ａの指示を日付や時刻等の日時情報と対応付けて支援データとして記録する。このように支援記録サーバＰＣ７は、遠隔作業支援システムＳの履歴として支援データを保存し、記録する。
【００５１】
そして、本実施形態の遠隔作業支援システムＳは、映像だけでなく、例えば音声等の音も撮影装置１と遠隔支援装置５との間で互いに交換することができるように構成されており、撮影装置１には、後述するように、音入出力ユニット５０としてイヤホン５１Ｌ、５１Ｒとマイクロホン５２とを備えており、メインサーバＰＣ６には、入力装置１６２としてマイクロホン１６２ｃをさらに備え、出力装置１６３としてスピーカ１６３ｂをさらに備えている。そして、コンピュータ１６１は、撮影装置１からネットワークＮＴを介して受信した音声等の音（マイクロホン５２で集音した音）をスピーカ１６３ｂから出力するとともに、マイクロホン１６２ｃから受け付けた（入力された）指示者Ａの指示（音声指示）をネットワークＮＴを介して撮影装置１へ送信する制御を行う。この指示者Ａの音声指示は、撮影装置１にネットワークＮＴを介して受信され、撮影装置１における前記イヤホン５１Ｌ、５１Ｒから出力される。また、支援記録サーバＰＣ７は、コンピュータ１６１の制御に従って、あるいは、独自に、撮影装置１による前記音を日時情報と対応付けて支援データとして記録するとともに遠隔支援装置５による作業者Ａの音声指示を日時情報と対応付けて支援データとして記録する。
【００５２】
そして、本実施形態における遠隔作業支援システムＳでは、指示者Ａの指示には、作業者Ｗが遠隔支援装置５へ直接入力した例えばテキストデータや音声指示等のデータだけでなく、例えば作業対象物を表す参照映像や、作業手順を示す作業マニュアルや、製品の取り扱い方を示す取り扱い説明書等の、作業者Ｗが作業を行う際にその作業の支援となる映像や音声等の支援コンテンツ（支援情報）も含まれる。コンテンツサーバＰＣ８は、この支援コンテンツを格納し、クライアント装置の要求に従ってこの要求に対応する支援コンテンツをクライアント装置に提供するサーバコンピュータである。メインサーバＰＣ６のコンピュータ１６１は、キーボード１６２ａやマウス１６２ｂから指示者Ａの支援コンテンツを選択する指示（コンテンツ選択指示）を受け付け、このコンテンツ選択指示に対応する支援コンテンツをネットワークＮＴを介して撮影装置１へ送信するようにコンテンツサーバＰＣ８を制御する。コンテンツサーバＰＣ８は、コンピュータ１６１の制御に従って、コンテンツ選択指示に対応する支援コンテンツをネットワークＮＴを介して撮影装置１へ送信し、撮影装置１に支援コンテンツを提供する。
【００５３】
このような遠隔支援装置５と組み合わせて好適に使用される撮影装置１は、作業者Ｗの頭部に装着され、作業者Ｗ（装着者）の視線方向に略沿った被写体を撮影し、この撮影した被写体の映像をネットワークＮＴを介して遠隔支援装置５へ送信する頭部装着式の撮影装置（カメラ）であり、例えば、図２ないし図４に示すように、装着ユニット１０と、撮影ユニット２０と、角速度センサユニット３０と、表示ユニット４０と、音入出力ユニット５０と、制御ユニット６０とを備えて構成される。
【００５４】
装着ユニット１０は、作業者Ｗの頭部に装着するための装置であり、本実施形態では、視力矯正用のメガネを模した構造で構成されている。すなわち、本実施形態の装着ユニット１０は、左右一対のテンプル１１Ｌ、１１Ｒと、ブリッジ１２と、左右一対の鼻パッド１３Ｌ、１３Ｒと、左右一対の透明部材１４Ｌ、１４Ｒとを備えて構成されている。
【００５５】
テンプル１１Ｌ、１１Ｒは、例えば弾性素材等から構成される長尺棒状の部材であり、その一方端部には装着者（ここでは作業者Ｗ）の耳に掛けられる耳掛け部分を有し、その他方端部には回動部１１Ｌａ、１１Ｒａを介して透明部材１４Ｌ、１４Ｒに固定されて保持する保持部分を有しており、作業者Ｗの耳や側頭部に掛け止められ、作業者Ｗの頭部への保持および装着位置を調整するためのものである。テンプル１１Ｌ、１１Ｒと透明部材１４Ｌ、１４Ｒとの固定には、例えば接着剤による接着やねじによるねじ留め等の固定手段が用いられる。また、撮影装置１は、回動部１１Ｌａ、１１Ｒａによる回動により、テンプル１１Ｌ、１１Ｒを互いに回転方向の異なる矢印Ｐ、Ｑ方向へ回動させて、テンプル１１Ｌ、１１Ｒを透明部材１４Ｌ、１４Ｒに沿わせることによって、不使用時にコンパクトに折り畳めるようになっている。
【００５６】
ブリッジ１２は、左右一対の透明部材１４Ｌ、１４Ｒを互いに連結するための短尺棒状の部材であり、テンプル１１Ｌ、１１Ｒの固定手段と同様の手段によって、その両端で透明部材１４Ｌ、１４Ｒに固定される。左右一対の透明部材１４Ｌ、１４Ｒは、このブリッジ１２によって一定の間隔を空けた相対位置関係で保持される。
【００５７】
鼻パッド１３Ｌ、１３Ｒは、装着ユニット１０の装着者（ここでは作業者Ｗ）に対する顔面への保持を行うための部材であり、各脚部を介してブリッジ１２に接続されている。
【００５８】
透明部材１４Ｌ、１４Ｒは、例えばポリカーボネートやポリメチルメタクリレート等の樹脂やガラス等の可視光線に対し透明な素材等から構成され、視力矯正用のメガネレンズの外形形状のような、角を丸く縁取りした長方形状の板状部材である。もちろん、透明部材１４Ｌ、１４Ｒは、撮影装置１の本来の機能の観点において視力矯正用の調整度数を備える必要はないが、視力矯正用の調整度数を備えていても良い。透明部材１４Ｌ、１４Ｒの一方には、本実施形態では、右眼に対応する透明部材１４Ｒに表示ユニット４０の接眼光学系４１を嵌め込むための略Ｕ字形状の切り欠き部１４Ｒｓが形成されている。
【００５９】
これらテンプル１１Ｌ、１１Ｒ、ブリッジ１２および鼻パッド１３Ｌ、１３Ｒによっていわゆるメガネフレームが構成され、このメガネフレームが装着者に対し掛け止められ、透明部材１４Ｌ、１４Ｒが装着者の眼に対し所定の状態（所定の距離、所定の位置）で装着される。
【００６０】
なお、本実施形態では、装着ユニット１０は、テンプル１１Ｌ、１１Ｒおよびブリッジ１２によって透明部材１４Ｌ、１４Ｒを固定、保持するように構成されたが、左右一対のリムを備え、この各リムを介して透明部材１４Ｌ、１４Ｒを固定、保持するように構成されてもよい。この各リムは、例えば内溝を持った環状または半環状の部材であり、この環または半環に透明部材１４Ｌ、１４Ｒの外周部分を嵌め込むことによって透明部材１４Ｌ、１４Ｒを固定、保持するものである。
【００６１】
撮影ユニット２０は、例えば作業物体や装着者（ここでは作業者Ｗ）の周囲の外界情景等の被写体を撮影する装置であり、装着者（作業者Ｗ）に装着され前記装着者が前方略水平方向を見た場合に、その光軸が装着者の視線方向に略一致するように、装着ユニット１０に対し固定的に保持される。これによって撮影ユニット２０は、装着者の前方視野内を撮影することが可能となる。本実施形態では、撮影ユニット２０は、表示ユニット本体４５の一方端部に外付けされており、表示ユニット本体４５が接眼光学系４１を介して装着ユニット１０の透明部材１４Ｒに固定的に取り付けられることによって、装着ユニット１０に対し固定的に保持される。このように撮影ユニット２０は、本実施形態では、装着者（ここでは作業者Ｗ）の視野内撮影カメラとして機能し、また装着ユニット１０に保持されるので、撮影装置１がコンパクトに構成され、また作業者Ｗは、ハンズフリーとなって、両手を使った作業が可能となる。なお、撮影ユニット２０を装着ユニット１０に前記光軸と前記視線方向に略一致するように固定的に保持する機構は、撮影ユニット２０が脱着可能な構造であってもよい。このように構成することによって撮影ユニット２０を適宜に変えることができる。
【００６２】
撮影ユニット２０は、例えば、図４に示すように、撮影光学系２１と、撮像素子２２と、アナログフロントエンド２３と、映像制御部２４とを備えて構成される。
【００６３】
撮影光学系２１は、被写体の光学像（光像）を撮像素子２２の受光面に結像するための光学系である。撮影光学系２１は、単焦点光学系であってもよく、またズーミングすべくズーム機能を備えた変倍光学系であってもよい。また撮影光学系２１は、オートフォーカス（ＡＦ）機能を備えて構成されてよい。
【００６４】
撮像素子２２は、この撮影光学系２１によって受光面上に形成された被写体の光学像における光量に応じてＲ（赤）、Ｇ（緑）、Ｂ（青）の各成分の画像信号に光電変換してアナログフロントエンド２３へ出力する装置である。撮像素子２２には、例えば、ＣＣＤ型カラーイメージセンサやＣＭＯＳ型カラーイメージセンサ等が用いられる。本実施形態では、ＣＭＯＳ型カラーイメージセンサが用いられ、このＣＭＯＳ型カラーイメージセンサは、例えば、Ｒ（赤）光、Ｇ（緑）光、Ｂ（青）光の各光に対応した各色透過フィルタをピクセル単位（画素単位）で市松模様に配置されたカラーエリア撮影センサであって、撮影光学系２１により結像された被写体光像を、Ｒ（赤）光、Ｇ（緑）光、Ｂ（青）光の各成分の画像信号（各画素単位で受光された画素信号の信号列から成る信号）に光電変換するものである。ＣＭＯＳ型イメージセンサは、２次元配列された複数の画素から所定の順序に従って順番に各画素信号を読み出すように構成される。より具体的には、例えば、ｍ行ｎ列の画素でＣＭＯＳ型イメージセンサが構成されている場合に、１行１列の画素から１行ｎ列まで各列の画素信号が行方向に沿って順次に読み出され、１行ｎ列まで読み出すと、次行の画像信号を読み出すべく次行の１列目に戻り、同様に、次行の１列からｎ列まで各列の画素信号が行方向に沿って順次に読み出され、そして、このような画素信号の読み出しがｍ行ｎ列まで実行される。このため、ＣＭＯＳ型イメージセンサでは、最初の画素の読み出し時刻と、最後の画素の読み出し時刻とには、所定時間の差が生じている。
【００６５】
アナログフロントエンド２３は、所定の基準クロックに基づいて撮像素子２２の駆動を制御し、撮像素子２２で得られた画像信号に周知のアナログ信号処理を施した後にディジタル映像信号に変換し、映像制御部２４へ出力する回路である。
【００６６】
映像制御部２４は、アナログフロントエンド２３から入力された映像信号に、例えば黒レベル補正処理、画素補間処理、ホワイトバランス調整処理、ガンマ（γ）補正処理、シェーディング補正処理等の、周知の画像処理を施す回路である。映像制御部２４は、アナログフロントエンド２３から入力された映像信号を、ＣＭＯＳ型カラーイメージセンサにおける画像信号の読み出しクロックに同期して、制御ユニット６０内の画像メモリ６１に書き込む。すなわち、映像信号は、アナログフロントエンド２３から一旦画像メモリ６１に書き込まれ、所定の各画像処理が施される際に、画像メモリ６１から映像制御部２４に読み込まれ、各画像処理が施される。そして、これら各画像処理の施された映像信号は、再度、画像メモリ６１に書き込まれ、記憶（格納）される。
【００６７】
角速度センサユニット３０は、装着ユニット１０に対し固定的に保持されている撮影ユニット２０の撮影方向を検出するために、装着者（ここでは作業者Ｗ）の頭部の角速度を検出し、検出結果を制御ユニット６０へ出力する装置である。角速度センサユニット３０は、本実施形態では、例えば、装着者（作業者Ｗ）の頭部における鉛直方向の角速度を検出する回路である鉛直方向角速度センサ部３１と、装着者（作業者Ｗ）の頭部における水平方向の角速度を検出する回路である水平方向角速度センサ部３２とを備えて構成される。より具体的には、角速度センサユニット３０は、２軸の角速度を検出することができる２軸圧電振動ジャイロセンサを備えて構成され、装着ユニット１０に固定的に取り付けられる表示ユニット本体４５内に内蔵されている。ここで、角速度センサユニット３０で検出された角速度を積分することによって頭部の方向を算出することも可能である。このように本実施形態では、撮影方向における所定の方向に沿った往復移動を検出するためのセンサとして、加速度センサが用いられているので、比較的コンパクトで正確に、撮影方向における所定の方向に沿った往復移動を検出するためのセンサを構成することが可能となる。
【００６８】
表示ユニット４０は、所定の画像（映像）を表示する装置であり、遠隔支援装置５からネットワークＮＴを介して送信されてきた指示者Ａの指示を表示するものである。前記指示者Ａの指示には、上述したように、指示者Ａが遠隔支援装置５へ直接入力した例えばテキストデータ等のデータだけでなく、作業者Ｗが作業を行う際にその作業の支援となる映像や音声等のコンテンツサーバＰＣ８による支援コンテンツも含まれる。そして、本実施形態では、表示ユニット４０は、撮影ユニット２０の電子ファインダの機能を兼ねており、撮影ユニット２０によって撮影された映像も表示することができるようにされている。撮影ユニット２０によって撮影された被写体の映像が別体の表示装置に表示される場合には、作業者Ｗは、撮影ユニット２０によって撮影されている領域（被写体）を見るために前記表示装置の方に向かなければならないが、これによって撮影ユニット２０の撮影者である作業者Ｗは、撮影ユニット２０によって撮影されている領域（被写体）を見るために、その頭部の方向を変える必要がなく、視線をそらせる必要もなく、作業者Ｗ自信が撮影ユニット２０によって撮影している領域（被写体）を正確に認識することができる。
【００６９】
表示ユニット４０は、装着ユニット１０に取り付けられることなく別体で構成されてもよいが、作業者Ｗの視界内に指示者Ａの指示を表示し、作業者Ｗが指示者Ａの指示を参照しながら作業を行うことができるように、本実施形態では、装着ユニット１０に、しかも一方の透明部材１４Ｒに取り付けられている。このような表示ユニット４０は、例えば、図２ないし図４に示すように、接眼光学系４１と、映像生成部４２と、照明光学系４３と、光源部４４と、これら映像生成部４２、照明光学系４３および光源部４４を収容するとともに接眼光学系４１に取り付けられる筐体である表示ユニット本体４５とを備えて構成される。表示ユニット本体４５には、上述したように、その一方端に撮影ユニット２０が外付けされており、角速度センサユニット３０が内蔵され、そして、底面から外部に接眼光学系４１が延びている。さらに、表示ユニット本体４５の他方端から、ケーブル４６が延び、撮影ユニット２０、角速度センサユニット３０、表示ユニット４０および音入出力ユニット５０と制御ユニット６０とは、相互にデータを交換することができるようにこのケーブル４６によって電気的に接続されている。
【００７０】
光源部４４は、所定波長の光を発光する装置であり、例えば、所定波長色を含む白色発光ダイオード（以下、「白色ＬＥＤ」と略記する）から成る点光源である。
【００７１】
照明光学系４３は、光源部４４の発光光が入射され、この入射された発光光から映像生成部４２を照明する照明光を生成する装置であり、例えば、本実施形態では、方向により拡散度が異なり、前記入射された発光光を一方向に拡散する一方向拡散板４３ａと、一方向拡散板４３ａで拡散された光を集光する集光レンズ４３ｂとを備えて構成される。より具体的には、例えば、本実施形態では、一方向拡散板４３ａは、光源部４４から入射された発光光を図３の紙面に垂直な方向に約４０度で拡散するとともに図３の紙面に平行な方向に約０．２度で拡散する。
【００７２】
映像生成部４２は、照明光学系４３の照明光が入射され、各画素において、この照明光をＲＧＢごとにＶＲＡＭ６４の映像信号に応じて強度変調することによって映像を生成する装置であり、例えば、透過型ＬＣＤ装置（透過型液晶表示装置）を備えて構成される。
【００７３】
接眼光学系４１は、映像生成部４２で生成された映像を装着者（作業者Ｗ）の眼に導くための装置であり、例えば、光学プリズム４１ａと、反射部４１ｂとを備えて構成される。
【００７４】
光学プリズム４１ａは、例えばガラスや透明樹脂等の可視光に対して透明な材料より成る部材であって、互いに対向する一対の主面が略平行となるように形成された平行平板である。光学プリズム４１ａの上端部（上面部）は、上面が映像生成部４２で生成された映像光の入射面であり、映像光の大部分を内部に採光することができるように、肉厚部４１１が形成されている。この肉厚部４１１は、上方に向かってより肉厚となるように前面側（接眼面と反対側）が突き出るくさび形状に形成される。そして、光学プリズム４１ａの下端部（底面部）は、斜めにカットされた傾斜部４１２が形成されており、この傾斜部４１２に反射部４１ｂが設けられている。光学プリズム４１ａは、その上端部から入射された映像光をその内部で複数回の反射を行わせ、前記映像光を反射部４１ｂへ導光する。より具体的には、光学プリズム４１ａは、その上端部から入射された映像光を前記一対の主面で交互に全反射を繰り返し、前記映像光を反射部４１ｂへ導光する。
【００７５】
反射部４１ｂは、光学プリズム４１ａによって導光された映像光を、光学プリズム４１ａの傾斜部４１２と協働して後面側（接眼面側）へ反射する光学素子であり、例えば、ハーフミラー、多層膜およびホログラム光学素子等である。本実施形態では、反射部４１ｂは、ホログラムを生成するホログラム光学素子（ＨＯＥ）であり、例えば、波長選択性および角度選択性がともに比較的高いことから、体積位相型の反射型ホログラム光学素子である。体積位相型のホログラム光学素子は、光学的に軸非対称ないわゆる自由曲面で構成されて正の光学的パワーを有する。この反射型ホログラム光学素子は、所定波長の映像光を回折するように構成されており、前記光源部４４は、この反射型ホログラム光学素子の回折波長に応じた所定波長の光を発光するように構成される。より具体的には、本実施形態では、反射型ホログラム光学素子は、ＲＧＢ（赤緑青）に対応した各波長４６５ｎｍ±１０ｎｍ、５２０ｎｍ±１０ｎｍおよび６３５ｎｍ±１０ｎｍの映像光を回折するように製作され、これに応じて、光源部４４は、中心波長４６５ｎｍ、５２０ｎｍおよび６３５ｎｍのＲＧＢ一体型の白色ＬＥＤを備えて構成される。この反射型ホログラム光学素子の感光材料として、例えば、フォトポリマ、銀塩材料、重クロム酸ゼラチン等を挙げることができ、特に、ドライプロセスで製造することができることから、フォトポリマが好ましい。
【００７６】
そして、前記透明部材１４Ｒの切り欠き部１４Ｒｓは、光学プリズム４１ａが隙間無く嵌め込まれるように、光学プリズム４１ａの形状に対応した形状とされており、透明部材１４Ｒの切り欠き部１４Ｒｓに接眼光学系４１が嵌め込まれた場合に、透明部材１４Ｒと接眼光学系４１とは１枚の板状に一体化され、傾斜部４１２に設けられた反射部４１ｂは、光学プリズム４１ａと透明部材１４Ｒとに挟まれて埋設する。このように透明部材１４Ｒと光学プリズム４１ａとは、反射部４１ｂを２つの透明材料に埋設した接合光学プリズムを構成している。このため、反射部４１ｂが外気に触れることが無く、反射部４１ｂがホログラム光学素子である場合に、ホログラムを安定にその性能を保つことが可能となる。
【００７７】
光学プリズム４１ａによって導光された映像光は、反射部４１ｂで反射し、より具体的には、本実施形態では、反射型ホログラム光学素子によって回折され、虚像として光学瞳Ｅに導かれる。装着者（作業者Ｗ）は、この光学瞳Ｅの映像光をその瞳に入射することで、映像を見ることができる。このように表示ユニット４０では、ＶＲＡＭ６４の映像信号による映像が映像生成部４２の透過型ＬＣＤ装置に表示され、この映像生成部４２の透過型ＬＣＤ装置によって得られた映像が、接眼光学系４１によって装着者（作業者Ｗ）の眼球に直接投影され、あたかも該映像が空中に拡大投影されているかのような虚像の観察が可能になっている。
【００７８】
また、透明部材１４Ｒは、光学プリズム４１ａの傾斜部４１２での屈折をキャンセル（相殺）するので、装着者（作業者Ｗ）は、外界光を略歪むことなく見ることができる。また、体積位相型の反射型ホログラム光学素子は、上述のように、特定入射角の特定波長の光のみを回折するので、外界光にはほとんど影響せず、外界光は、透明部材１４Ｒ、反射部４１ｂの反射型ホログラム光学素子および光学プリズム４１ａを透過し、装着者（作業者Ｗ）は、略通常通り、外界を見ることができる。このように体積位相型の反射型ホログラム光学素子は、特定波長域の反射光とそれ以外の波長域の透過光とを合成するコンバイナ光学素子として機能している。このような構成によって表示ユニット４０における外界光の可視光透過率を約８５％以上に確保することが可能となり、外界光の透過率が高く、装着者（作業者Ｗ）がシースルーで外界を良好に見ることができ、装着者（作業者Ｗ）の作業性を向上することが可能となる。そして、本実施形態では、接眼光学系４１は、右眼に対応する透明部材１４Ｒに配設され、表示ユニット４０に表示される映像を右眼で観察することができると同時に外界を右眼でも観察することができる（もちろん、左眼は、外界を観察することができる）。
【００７９】
また、接眼光学系４１は、本実施形態では、映像光を光学プリズム４１ａの内部で反射するとともに反射部４１ｂの体積位相型の反射型ホログラム光学素子によって光学瞳Ｅに導くように構成されているので、透明部材１４Ｒの厚みは、通常のメガネレンズと略同程度の厚み（例えば３ｍｍ程度）とすることができ、小型で軽量となる。そして、前記反射は、本実施形態では、全反射であるので、装着者（作業者Ｗ）は、透明部材１４Ｒの一対の両主面を通して外界光の透過率を略落とすことなく、外界を見ることができる。
【００８０】
音入出力ユニット５０は、音を入出力するための回路であり、音を出力する左右一対のイヤホン５１Ｌ、５１Ｒと、音を集音するマイクロホン５２とを備えて構成される。マイクロホン５２は、装着ユニット１０を作業者Ｗが装着した場合に、作業者Ｗの音声を集音すべく、装着ユニット１０のテンプル１１Ｌから延びる略Ｌ字状のアーム５３の先端に取り付けられている。この音入力ユニット５０のマイクロホン５２によって作業者Ｗの音声が集音され、この音声の音声データが撮影装置１からネットワークＮＴを介して遠隔支援装置５へ送信され、遠隔支援装置５のメインサーバＰＣ６におけるスピーカ１６３ｂからこの音声データの音声が出力される。一方、この遠隔支援装置５のメインサーバＰＣ６におけるマイクロホン１６２ｃによって指示者Ａの音声が集音され、この音声の音声データが遠隔支援装置５からネットワークＮＴを介して撮影装置１へ送信され、撮影装置１のイヤホン５１Ｌ、５１Ｒからこの音声データの音声が出力される。あるいは、コンテンツサーバＰＣ８から音声の支援コンテンツがネットワークＮＴを介して撮影装置１へ送信され、撮影装置１のイヤホン５１Ｌ、５１Ｒからこの音声の支援コンテンツが出力される。なお、撮影装置１のイヤホン５１Ｌ、５１Ｒは、一方のみであっても良い。これによって本実施形態の遠隔作業支援システムＳは、音声指示を作業者Ｗに与えることができ、また、例えば音声等の音も撮影装置１と遠隔支援装置５との間で互いに交換することができ、作業者Ｗと指示者Ａとは、音声によってコミュニケーションを図ることができる。特に、音声によるコミュニケーションを図ると、指示者Ａの音声指示により、作業者Ｗ（装着者）は、頷き動作を行い易いが、このような場合に本実施形態の遠隔作業支援システムＳでは後述のように映像の切り換えを制限して映像での観察に制限を施すので、このような場合に本実施形態の遠隔作業支援システムＳは、効果的である。
【００８１】
制御ユニット６０は、撮影装置１の全体制御を司る回路である。制御ユニット６０は、撮影ユニット２０、角速度センサユニット３０および表示ユニット４０のように装着ユニット１０に取り付けられても良いが、撮影装置１における作業者Ｗの頭部に装着される部分の重量を軽減するために、本実施形態では、装着ユニット１０に取り付けられることなく装着ユニット１０とは別体に設けられており、上述したように、ケーブル４６によって撮影ユニット２０、角速度センサユニット３０、表示ユニット４０および音入出力ユニット５０と電気的に接続されている。制御ユニット６０は、例えば、図１、図２および図４に示すように、画像メモリ６１と、制御部６２と、ＶＲＡＭ６４と、音入力処理部６５と、音出力処理部６６と、電源スイッチ６７と、ネットワークＩＦ部６８とを備えて構成され、これら画像メモリ６１、制御部６２、ＶＲＡＭ６４、音入力処理部６５、音出力処理部６６、電源スイッチ６７およびネットワークＩＦ部６８は、略直方体形状の筐体６９に収容されている。なお、電源スイッチ６７は、その操作部分が筐体６９の外部に臨むように筐体６９内に配設され、ネットワークＩＦ部６８は、そのコネクタ部分が筐体６９の外部に臨むように筐体６９内に配設される。
【００８２】
画像メモリ６１は、例えば、ＲＡＭ（Random Access Memory）等の揮発性の記憶素子およびその周辺回路を備えて構成され、上述したように、撮影ユニット２０における映像制御部２４の作業領域として用いられる。
【００８３】
ＶＲＡＭ６４は、ＲＡＭおよびその周辺回路を備えて構成される、いわゆるビデオラム（Ｖｉｄｅｏ ＲＡＭ）であり、表示ユニット４０における映像生成部４２の画素数に対応した映像信号の記憶容量を少なくとも有し、映像生成部４２で再生表示される映像を構成する映像信号をバッファするためのバッファメモリである。
【００８４】
音入力処理部６５は、音入出力ユニット５０におけるマイクロホン５２から入力されてきた音信号に対し、例えば、増幅やノイズカット等の所定の信号処理を行って制御部６２へ出力する回路である。
【００８５】
音出力処理部６６は、制御部６２から入力されてきた音信号に対し、例えば、増幅やノイズカット等の所定の信号処理を行って音入出力ユニット５０におけるイヤホン５１Ｌ、５１Ｒへ出力する回路である。
【００８６】
電源スイッチ６７は、撮影装置１を稼動するために、撮影装置１を起動するスイッチ回路である。電源スイッチ６７の投入（スイッチオン）により、例えば電池等の電源から、撮影装置１における電力を必要とする各部へ電力が供給される。
【００８７】
ネットワークＩＦ部６８は、ネットワークＮＴを介して撮影装置１と遠隔支援装置５との間で通信を行うための通信インタフェース回路であり、制御部６２から入力されてきたデータをネットワークＮＴの通信プロトコルに対応した通信信号に収容し、この収容した通信信号をネットワークＮＴへ送信するとともに、ネットワークＮＴから撮影装置１宛ての通信信号を受信し、この受信した通信信号に収容されているデータを取り出して制御部６２で処理可能な形式に変換し、この変換したデータを制御部６２へ出力するものである。
【００８８】
制御部６２は、撮影装置１の各部を当該機能に応じて制御する回路であり、例えば、撮影装置１の各部を当該機能に応じて制御するための制御プログラム等の各種の所定のプログラムや前記所定のプログラムの実行に必要なデータ等の各種の所定のデータ等を記憶する、不揮発性の記憶素子であるＲＯＭ（Read Only Memory）、前記所定のプログラムを読み出して実行することによって所定の演算処理や制御処理を行うＣＰＵ（Central Processing Unit）、前記所定のプログラムの実行中に生じるデータ等を記憶するいわゆる前記ＣＰＵのワーキングメモリとなるＲＡＭ、および、これらの周辺回路を備えたマイクロコンピュータ等によって構成される。なお、この制御部６２は、例えば、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）等の書き換え可能な不揮発性の記憶素子を備えても良い。制御部６２は、機能的に、映像表示制御部６３を備えている。
【００８９】
映像表示制御部６３は、撮影ユニット２０によって撮影された被写体の映像を表示する場合に、本実施形態では、角速度センサユニット３０で検出された撮影ユニット２０の撮影方向の変化が所定の第１時間内において所定の方向に沿う往復移動の場合に、撮影ユニット２０によって撮影された被写体の映像を表示する場合における前記被写体の映像の切り換えを制限するものであり、例えば、機能的に、撮影方向判定部６３１と、観察制限制御部６３２とを備えて構成される。映像表示制御部６３は、撮影ユニット２０によって撮影された被写体の映像を表示ユニット４０に表示する場合には、表示ユニット４０に表示すべき映像を制御し、また、撮影ユニット２０によって撮影された被写体の映像を遠隔支援装置５に出力する場合には、遠隔支援装置５宛てに送信する通信信号に収容される映像を制御するものである。
【００９０】
撮影方向判定部６３１は、角速度センサユニット３０で検出された作業者Ｗ（装着者）の頭部の角速度に基づいて撮影ユニット２０の撮影方向を検出し、この検出された撮影ユニット２０の撮影方向が所定の第１時間内に所定の方向に沿って往復移動したか否かを判定し、その判定結果を観察制限制御部６３２へ通知するものである。
【００９１】
観察制限制御部６３２は、撮影方向判定部６３１から通知された判定結果に応じて撮影ユニット２０で生成される映像の切り換えを制限するものである。なお、制御部６２は、この切り換えを制限した被写体の映像をネットワークＩＦ部６８からネットワークＮＴを介して遠隔支援装置５へ送信する。
【００９２】
より具体的には、例えば、撮影方向判定部６３１は、角速度センサユニット３０で検出された作業者Ｗの頭部の角速度に基づいて検出された撮影方向が前記所定の第１時間内に前記所定の方向に沿って略１８０度異なる方向へ２回以上変化したか否かを判定し、その判定結果を観察制限制御部６３２へ通知するものであり、観察制限制御部６３２は、撮影ユニット２０によって撮影された被写体の映像を表示する場合において、前記判定結果に基づいて、角速度センサユニット３０で検出された作業者Ｗの頭部の角速度に基づいて検出された撮影方向が前記所定の第１時間内に前記所定の方向に沿って略１８０度異なる方向へ２回以上変化した場合に、撮影ユニット２０で生成される映像の切り換えを制限するものである。例えば、本実施形態では、観察制限制御部６３２は、被写体の映像におけるフレームを予め設定された所定のフレームに制限することで、撮影ユニット２０で生成される映像の切り換えを制限する。前記判定における、撮影方向が前記所定の方向に沿って略１８０度異なる方向へ変化する回数は、頭部が高速に移動したり揺れたりした場合に頭部に装着されるカメラによって撮影された映像を観察者が見た場合に観察者が気分を悪くするか否かの観点から例えば統計等によって決定される回数であり、例えば、本実施形態では、２回である。このように撮影方向が前記所定の方向に沿って略１８０度異なる方向へ２回以上変化した場合に所定の方向に沿った往復移動があったと判定する簡易な判定条件としているので、角速度センサユニット３０や映像表示制御部６３等のこのための装置を比較的簡単な装置や処理で実現することが可能である。
【００９３】
前記所定の第１時間（判定時間Ａ）は、予め設定され、例えば、頭部が高速に移動したり揺れたりした場合に頭部に装着されるカメラによって撮影された映像を観察者が見た場合に観察者が気分を悪くするか否かの観点から例えば統計等によって決定される時間長である。一例では、頭部が約０．３秒〜３秒程度の間に往復移動した場合に、その頭部に装着されたカメラによって撮影された映像を見た観察者は、映像酔い等の気分が悪くなりやすい。約０．３秒を下回ると、前記観察者は、いわゆる手ぶれのような単なるブレと意識され、一方、約３秒を上回ると、前記観察者は、往復移動のサイクルが充分に長いので、映像酔い等の気分が悪くなりにくい。このため、前記所定の第１時間は、例えば、約０．３秒〜３秒のうちのいずれかの時間長に設定される。このような映像酔い等の気分の悪くなりやすい時間帯のうちのいずれかの時間に第１時間を設定しているので、このような事態を効果的に抑制または防止することが可能となる。
【００９４】
観察制限制御部６３２による映像の切り換えの制限は、例えば、所定の第２時間の間、被写体の映像におけるフレームを更新しないことによって行われてよい。より具体的には、例えば、本実施形態では、観察制限制御部６３２は、前記第２時間の間、ＶＲＡＭ６４の各データを更新せず、前記第２時間の開始時刻における被写体の映像におけるフレームの各データ値をそのまま維持するように、ＶＲＡＭ６４を制御する。したがって、前記第２時間の開始時刻における被写体の映像におけるフレームがそのまま維持され、静止画のように表示ユニット４０や遠隔支援装置５のディスプレイ１６３ａに表示される。このように被写体の映像におけるフレームを更新しないので被写体の映像が、第２時間中、略静止画となり、被写体の映像におけるフレームを更新しないという比較的簡易な手法によって、映像酔い等の気分の悪くなることを低減または防止することができる。
【００９５】
また例えば、観察制限制御部６３２による映像の切り換えの制限は、所定の第２時間の間、被写体の映像を表示しないことによって行われてよい。より具体的には、例えば、本実施形態では、観察制限制御部６３２は、前記第２時間の間、ＶＲＡＭ６４の各データを予め設定された所定レベルのデータ値に書き換えるように、ＶＲＡＭ６４を制御する。すなわち、第２時間中、表示ユニット４０や遠隔支援装置５のディスプレイ１６３ａには、例えば黒や白等の単色表示で、被写体が何も表示されない。このように被写体の映像を表示せずに被写体の映像を消し、被写体の映像を表示しないという比較的簡易な手法によって、映像酔い等の気分の悪くなることを低減または防止することができる。
【００９６】
また例えば、観察制限制御部６３２による映像の切り換えの制限は、被写体の映像の信号を遠隔支援装置５に送信しないことや、被写体の映像の信号を表示ユニット４０に出力しないことや、被写体の映像の信号をＶＲＡＭ６４に記録しないこと等であっても良い。
【００９７】
前記所定の第２時間（観察制限時間Ｂ）は、予め設定され、例えば、映像酔い等の気分の悪くなることがないように、前記所定の第１時間（判定時間Ａ）を超えるように決定される時間長であり、前記継続時間は、例えば統計等によって決定される。例えば、前記所定の第２時間は、前記第１時間よりも長く、かつ、１秒〜５秒のうちのいずれかの時間長に設定される。このように、第２時間中、被写体の映像の切り換えを制限することで、映像酔い等の気分の悪くなることを低減または防止することができるとともに、前記被写体の映像の切り換えを制限する第２時間を設けるので、第２時間の経過後に、被写体の映像の切り換えの制限を解除し、元に復帰することができる。前記所定の第２時間が１秒を下回ると、映像酔い等の気分の悪くなることを低減または防止することが難しく、好ましくない。一方、前記所定の第２時間が５秒を上回ると、表示ユニット４０に表示される映像や遠隔支援装置５に表示される映像の即時性が損なわれ、指示者Ａに作業者Ｗの映像が略リアルタイムに提供されなくなり、適切な指示を与えることが難しくなるので、好ましくない。
【００９８】
また例えば、前記所定の方向は、鉛直方向であってよく、撮影方向判定部６３１は、鉛直方向角速度センサユニット３１で検出された作業者Ｗ（装着者）の頭部における鉛直方向の角速度に基づいて撮影ユニット２０の鉛直面内における撮影方向（鉛直方向での上方方向（＋方向）または下方方向（−方向））を検出し、この検出された撮影ユニット２０の撮影方向が所定の第１時間内に鉛直方向に沿って往復移動したか否かを判定し、その判定結果を観察制限制御部６３２へ通知するものであって、観察制限制御部６３２は、撮影ユニット２０によって撮影された被写体の映像を表示する場合において、前記判定結果に基づいて、撮影ユニット２０の撮影方向が所定の第１時間内に鉛直方向に沿って往復移動した場合に、前記被写体の映像の切り換えを制限するものである。このように構成することによって、装着者の頭部における鉛直方向の往復移動による映像酔い等の気分の悪くなることに対処することができる。特に、装着者の歩行の場合や、装着者が肯定を頭部の鉛直方向における往復運動によって示す場合に対処することができる。
【００９９】
なお、鉛直方向角速度センサ部３１は、本実施形態では、２軸圧電振動ジャイロセンサのうちの１軸を利用することで構成されたが、水平センサを備えて構成されてもよい。このように撮影方向の鉛直方向における往復移動を検出するためにセンサとして水平センサを用いることで、比較的簡単な構造で安価に、撮影方向における鉛直方向に沿った往復移動を検出することができる。
【０１００】
また例えば、前記所定の方向は、水平方向であってよく、撮影方向判定部６３１は、水平方向角速度センサユニット３２で検出された作業者Ｗ（装着者）の頭部における水平方向の角速度に基づいて撮影ユニット２０の水平面内における撮影方向（水平方向での右方向（＋方向）または左方向（−方向））を検出し、この検出された撮影ユニット２０の撮影方向が所定の第１時間内に水平方向に沿って往復移動したか否かを判定し、その判定結果を観察制限制御部６３２へ通知するものであって、観察制限制御部６３２は、撮影ユニット２０によって撮影された被写体の映像を表示する場合において、前記判定結果に基づいて、撮影ユニット２０の撮影方向が所定の第１時間内に水平方向に沿って往復移動した場合に、前記被写体の映像の切り換えを制限するものである。このように構成することによって、装着者の頭部における水平方向の往復移動による映像酔い等の気分の悪くなることに対処することができる。特に、装着者が否定を頭部の水平方向における往復運動によって示す場合に対処することができる。
【０１０１】
本実施形態では、撮影装置１の装着ユニット１０、撮影ユニット２０、角速度センサユニット３０および制御ユニット６０における映像表示制御部６３が、それぞれ、請求項の装着部、撮影部、撮影方向検出部および映像表示制御部の一例に相当し、そして、遠隔支援装置５のディスプレイ１６３ａが表示部および第２表示部の一例に相当する。そして、撮影装置１の表示ユニット４０が撮影ユニット２０の電子ファインダとして機能していることから、本実施形態では、撮影装置１の表示ユニット４０も表示部の一例に相当している。
【０１０２】
次に、本実施形態の動作について説明する。図５は、本実施形態の遠隔作業支援システムにおける撮影装置の動作を示すフローチャートである。図６は、撮影方向の往復移動が第１態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。図７は、撮影方向の往復移動が第２態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。図８は、撮影方向の往復移動が第３態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。これら図６（Ａ）、図７（Ａ）および図８（Ａ）は、撮影方向を示し、図６（Ｂ）、図７（Ｂ）および図８（Ｂ）は、遠隔支援装置５のディスプレイ１６３ａや表示ユニット４０に表示される表示映像の態様を示す。また、図６（Ａ）、図７（Ａ）および図８（Ａ）における各矢印は、各サンプリング時刻における撮影ユニット２０の各撮影方向の変化方向（移動方向）を示し、（＋）は、前記所定の方向に沿った一方方向を示し、（−）は、（＋）方向の１８０度異なる他方方向を示す。
【０１０３】
本実施形態の遠隔作業支援システムＳにおける撮影装置１は、被写体の映像の切り換えを制限する制御に関し、図５に示すように動作している。すなわち、図５において、ステップＳ１１では、撮影ユニット２０の撮影方向の変化方向（移動方向）を検出すべく、角速度センサユニット３０によって作業者Ｗ（装着者）の頭部の角速度が検出され、この検出結果が制御ユニット６０へ出力され、制御ユニット６０で記憶される。
【０１０４】
続いて、制御ユニット６０において、この検出結果が角速度センサユニット３０から入力されてくると、上述のように、制御部６２の映像表示制御部６３によって、この検出結果が記憶され、この検出結果が所定の条件を満たすか否かが判定される。例えば、上述したように、この検出結果に基づいて検出された撮影ユニット２０の撮影方向の変化方向が前記所定の第１時間内に前記所定の方向に沿って略１８０度異なる方向へ２回以上変化したか否かが、判定される。より具体的には、本実施形態では、前記検出結果に基づいて検出された撮影ユニット２０の撮影方向の変化方向が前記所定の第１時間内に鉛直方向や水平方向に沿って略１８０度異なる方向へ２回変化したか否かが、判定される。
【０１０５】
この判定において、本実施形態では、図５に示すように、まず、ステップＳ１２では、映像表示制御部６３の撮影方向判定部６３１によって、この検出結果が記憶され、この検出結果に基づいて検出された撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化したか否かが、判定される。この判定の結果、撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化した場合（Ｙ）には、この今回の撮影方向の反転を判定した時刻が記憶され、ステップＳ１３の処理が実行され、一方、撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化していない場合（Ｎ）には、ステップＳ１４の処理が実行される。
【０１０６】
ここで、この撮影ユニット２０の撮影方向の変化方向における略１８０度異なる方向への変化は、例えば、前回の検出結果に基づいて検出された前回の撮影ユニット２０の撮影方向と今回の検出結果に基づいて検出された今回の撮影ユニット２０の撮影方向とを比較することによって判断され、これらが略１８０度異なる方向である場合には、撮影方向判定部６３１によって、前回の検出と今回の検出との間に、撮影ユニット２０の撮影方向の変化方向が略１８０度異なる方向へ１回変化したと判断され、一方、これらが略１８０度異なる方向ではない場合には、撮影方向判定部６３１によって、前回の検出と今回の検出との間に、撮影ユニット２０の撮影方向の変化方向が略１８０度異なる方向への変化がないと判断される。
【０１０７】
ステップＳ１４では、映像表示制御部６３の観察制限制御部６３２によって、被写体の映像における切り換え制限が行われることなく、例えば１５ｆｐｓ（毎秒１５フレーム）や２４ｆｐｓ（毎秒２４フレーム）や３０ｆｐｓ（毎秒３０フレーム）等のデフォルトのフレームレートで被写体の映像を表示するべく、被写体の映像の信号（表示用映像信号）が撮影装置１から遠隔支援装置５へ送信される。遠隔支援装置５では、この表示用映像信号が受信されると、表示用映像信号による映像がディスプレイ１６３ａに表示される。これによって指示者Ａは、作業者Ｗ（装着者）の前方視野内の被写体を参照することができ、例えば、作業対象物を観察することができる。また、本実施形態では、この被写体の映像は、撮影装置１の表示ユニット４０にも表示される。これによって作業者Ｗ（装着者）は、撮影ユニット２０によって撮影されている領域を見ることができる。
【０１０８】
続いて、ステップＳ１５では、本撮影放置１の稼動が終了であるか否かが判定され、この判定の結果、稼動が終了である場合（Ｙ）には、処理を終了し、稼動が終了していない場合（Ｎ）には、処理をステップＳ１１に戻す。
【０１０９】
一方、ステップＳ１３では、映像表示制御部６３の撮影方向判定部６３１によって、前記ステップＳ１２で判定された撮影ユニット２０の撮影方向の反転が前記所定の第１時間内（判定時間Ａ内）であるか否かが、判定される。この判定の結果、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内である場合（Ｙ）には、ステップＳ２１の処理が実行され、一方、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内ではない場合（Ｎ）には、上述のステップＳ１４の処理が実行される。
【０１１０】
ここで、この撮影ユニット２０の撮影方向の反転が前記所定の第１時間内であるか否かの判定は、例えば、前回の撮影方向の反転を判定した時刻と今回の撮影方向の反転を判定した時刻とを比較することによって判断され、これら時刻の差が前記所定の第１時間内である場合には、撮影方向判定部６３１によって、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内であると判断され、一方、これら時刻の差が前記所定の第１時間内ではない場合には、撮影方向判定部６３１によって、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内ではないと判断される。なお、前回の撮影方向の反転を判定した時刻が記憶されていない場合には、撮影装置１の起動後における最初の反転であり、前記所定の第１時間内ではない場合と判断すればよい。
【０１１１】
続いて、ステップＳ２１では、映像表示制御部６３の観察制限制御部６３２によって、前記所定の第２時間（観察制限時間Ｂ）を計時するためのタイマ（例えばソフトウェアタイマ）が０にリセット（初期化）され、その後に、計時がスタート（開始）される。
【０１１２】
続いて、ステップＳ２２では、観察制限制御部６３２によって、撮影ユニット２０によって撮影された被写体の映像を表示する場合において、その被写体の映像の切り換えを制限すべく、映像の切り換えを制限した被写体の映像の信号（表示用映像信号）が撮影装置１から遠隔支援装置５へ送信される。例えば、上述したように、同じフレームの映像の信号や、被写体を表示しない予め設定された所定のフレームの映像の信号が送信される。遠隔支援装置５では、この表示用映像信号が受信されると、表示用映像信号による、映像の切り換えを制限した映像が、ディスプレイ１６３ａに表示される。これによって指示者Ａは、作業者Ｗの撮影装置１を介して例えば作業対象物を観察している場合に、作業者Ｗ（装着者）がその頭部を高速に移動させたり揺らしたりした場合でもあっても、この被写体の映像の切り換えが制限されることによって、前記指示者Ａは、このカメラによって撮影された映像によって映像酔い等の気分が悪くなることが低減される。また、本実施形態では、この映像の切り換えを制限した被写体の映像は、撮影装置１の表示ユニット４０にも表示される。これによって作業者Ｗ（装着者）は、その頭部を高速に移動させたり揺らしたりした場合でもあっても、この撮影された映像によって映像酔い等の気分が悪くなることが低減される。
【０１１３】
続いて、ステップＳ２３において、ステップＳ１１と同様に、撮影ユニット２０の撮影方向の変化方向を検出すべく、角速度センサユニット３０によって作業者Ｗ（装着者）の頭部の角速度が検出され、この検出結果が制御ユニット６０へ出力され、制御ユニット６０で記憶される。
【０１１４】
続いて、ステップＳ２４では、ステップＳ１２と同様に、映像表示制御部６３の撮影方向判定部６３１によって、この検出結果が記憶され、この検出結果に基づいて検出された撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化したか否かが、判定される。この判定の結果、撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化した場合（Ｙ）には、この今回の撮影方向の反転を判定した時刻が記憶され、ステップＳ２５の処理が実行され、一方、撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化していない場合（Ｎ）には、ステップＳ２６の処理が実行される。
【０１１５】
ステップＳ２５では、ステップＳ１３と同様に、映像表示制御部６３の撮影方向判定部６３１によって、前記ステップＳ２４で判定された撮影ユニット２０の撮影方向の反転が前記所定の第１時間内（判定時間Ａ内）であるか否かが、判定される。
【０１１６】
この判定の結果、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内である場合（Ｙ）には、ステップＳ２１の処理が実行される。したがって、この場合（Ｙ）では、ステップＳ２１以下の処理の実行によって、被写体の映像の切り換え制限（観察制限）が続行されるとともに、前記所定の第２時間（観察制限時間Ｂ）の計時が再スタートされる。
【０１１７】
一方、このステップＳ２５における判定の結果、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内ではない場合（Ｎ）には、上述のステップＳ２６の処理が実行される。
【０１１８】
ステップＳ２６では、映像表示制御部６３の観察制限制御部６３２によって、前記タイマがタイムアウトしているか否かが、判定される。すなわち、被写体の映像の切り換えを制限した時刻から前記所定の第２時間（観察制限時間Ｂ）が経過したか否かが、判定される。
【０１１９】
この判定の結果、タイマがタイムアウトしていない場合（Ｎ）では、ステップＳ２２の処理が実行される。したがって、この場合（Ｙ）では、ステップＳ２２以下の処理の実行によって、被写体の映像の切り換え制限（観察制限）が続行される。
【０１２０】
一方、このステップＳ２６における判定の結果、タイマがタイムアウトしている場合（Ｙ）では、ステップＳ１４の処理が実行される。したがって、この場合（Ｙ）では、ステップＳ１４以下の処理の実行によって、被写体の映像の切り換え制限（観察制限）が解除される。
【０１２１】
このように動作する遠隔作業支援システムＳおよび撮影装置１では、例えば、図６（Ａ）に示すように、撮影ユニット２０の撮影方向が時刻ｔ１１で第１の反転（１）が起こり、続いて、時刻ｔ１２で第２の反転（２）が起こり、そして、時刻ｔ１３で第３の反転が起こる場合であって、第１の反転（１）から第２の反転（２）が起こる時間間隔Ｔ１（＝ｔ１２−ｔ１１）および第２の反転（２）から第３の反転（３）が起こる時間間隔Ｔ２（＝ｔ１３−ｔ１２）が前記所定の第１時間（判定時間Ａ）よりも長い第１態様では、上述したステップＳ１１、ステップＳ１２、ステップＳ１３、ステップＳ１４およびステップＳ１５の各処理が繰り返されることとなり、図６（Ｂ）に示すように、被写体の映像は、その切り換えに制限を受けず、指示者Ａや作業者Ｗは、被写体の映像を観察し続けることになる。
【０１２２】
また例えば、このように動作する遠隔作業支援システムＳおよび撮影装置１では、例えば、図７（Ａ）に示すように、撮影ユニット２０の撮影方向が時刻ｔ２１で第１の反転（１）が起こり、そして、時刻ｔ２２で第２の反転（２）が起こる場合であって、第１の反転（１）から第２の反転（２）が起こる時間間隔Ｔ１（＝ｔ２２−ｔ２１）が前記所定の第１時間（判定時間Ａ）よりも短い第２態様では、上述したステップＳ１１、ステップＳ１２、ステップＳ１３、ステップＳ１４およびステップＳ１５の各処理が実行された後に、ステップＳ１１、ステップＳ１２およびステップＳ１３の各処理が実行され、続いて、ステップＳ２１ないしステップＳ２６の各処理が実行され、そして、ステップＳ１４およびステップＳ１５の各処理が実行されることとなり、図７（Ｂ）に示すように、被写体の映像は、第２の反転（２）でその反転時刻ｔ２２から被写体の映像の切り換えに制限を受け、指示者Ａや作業者Ｗは、前記反転時刻ｔ２２から観察制限時間Ｂが経過するまで、映像の切り換え制限された映像を観察することになり、前記反転時刻ｔ２２から観察制限時間Ｂが経過すると、映像の切り換え制限が解除され、被写体の映像が通常通りに復帰する。
【０１２３】
また例えば、このように動作する遠隔作業支援システムＳおよび撮影装置１では、例えば、図８（Ａ）に示すように、撮影ユニット２０の撮影方向が時刻ｔ３１で第１の反転（１）が起こり、続いて、時刻ｔ３２で第２の反転（２）が起こり、そして、時刻ｔ３３で第３の反転が起こる場合であって、第１の反転（１）から第２の反転（２）が起こる時間間隔Ｔ１（＝ｔ３２−ｔ３１）および第２の反転（２）から第３の反転（３）が起こる時間間隔Ｔ２（＝ｔ３３−ｔ３２）が前記所定の第１時間（判定時間Ａ）よりも短い第３態様では、上述したステップＳ１１、ステップＳ１２、ステップＳ１３、ステップＳ１４およびステップＳ１５の各処理が実行された後に、ステップＳ１１、ステップＳ１２およびステップＳ１３の各処理が実行され、続いて、ステップＳ２１ないしステップＳ２５の各処理が実行され、そして、再び、ステップＳ２１ないしステップＳ２５の各処理が実行された後に、ステップＳ２６、ステップＳ１４およびステップＳ１５の各処理が実行されることとなり、被写体の映像は、第２の反転（２）でその反転時刻ｔ２２から被写体の映像の切り換えに制限を受け、前記反転時刻ｔ３２から観察制限時間Ｂが経過する前に、再び、第３の反転（３）でその反転時刻ｔ３３から被写体の映像の切り換えに制限を受け、前記反転時刻ｔ３２から前記反転時刻ｔ３３を超えて、さらに、前記反転時刻ｔ３３から観察制限時間Ｂが経過するまで、被写体の映像の切り換えに制限を受け続けることになる。このため、指示者Ａや作業者Ｗは、前記反転時刻ｔ３２を起点に、前記反転時刻ｔ３３から観察制限時間Ｂが経過するまでの時間帯、映像の切り換え制限された映像を観察することになり、前記反転時刻ｔ３３から観察制限時間Ｂが経過すると、映像の切り換え制限が解除され、被写体の映像が通常通りに復帰する。
【０１２４】
このように本実施形態の遠隔作業支援システムＳおよび撮影装置１では、撮影ユニット２０の撮影方向の変化を検出するべく、頭部の角速度が角速度センサユニット３０で検出され、その検出された撮影ユニット２０の撮影方向の変化に基づいて遠隔支援装置５の出力装置１６３や撮影装置１の表示ユニット４０に表示される被写体の映像の切り換えが制限される。このため、本実施形態の遠隔作業支援システムＳおよび撮影装置１は、この被写体の映像の切り換えが制限されることによって、被写体の映像が例えばコマ落としや略静止画等のように表示され、あるいは例えば非表示とされ、映像酔い等の気分が悪くなることを低減することができる。
【０１２５】
また、本実施形態では、撮影ユニット２０の撮像素子２２に、ＣＭＯＳ型イメージセンサが用いられている。上述したように、ＣＭＯＳ型イメージセンサは、各画素の画像信号を順次に走査することによって得ている。このため、頭部が高速に移動したり揺れたりした場合では、映像が歪みやすく、これにより、映像酔い等の気分が悪くなることが、一層、発生しやすい。しかしながら、本実施形態では、上述したように、頭部の角速度が角速度センサユニット３０で検出され、その検出された頭部の角速度に基づいて撮影ユニット２０の撮影方向の変化が検出され、この検出された撮影ユニット２０の撮影方向の変化に基づいて表示用の被写体の映像におけるその切り換えが制限されるので、撮影ユニット２０の撮像素子２２がＣＭＯＳ型イメージセンサであっても、表示する場合に、この撮影ユニット２０によって撮影された映像により、映像酔い等の気分が悪くなることを低減することができる。このように本実施形態の遠隔作業支援システムＳおよび撮影装置１は、撮影ユニット２０の撮像素子２２がＣＭＯＳ型イメージセンサである場合に、効果的である。
【０１２６】
また、本実施形態では、表示ユニット４０は、撮影ユニット２０の電子ファインダとして機能し、撮影ユニット２０とともに装着ユニット１０に取り付けられている。このような構成であっても、本実施形態では、頭部の角速度が角速度センサユニット３０で検出され、その検出された頭部の角速度に基づいて撮影ユニット２０の撮影方向の変化が検出され、この検出された撮影ユニット２０の撮影方向に基づいて表示用の被写体の映像におけるその切り換えが制限されるので、作業者Ｗ（装着者）において、この撮影ユニット２０によって撮影された映像により、映像酔い等の気分が悪くなることを低減することができる。また、本実施形態のように表示ユニット４０が撮影ユニット２０の電子ファインダとして機能し、表示ユニット４０と撮影ユニット２０とが一体的に構成されている場合に、効果的である。
【０１２７】
また、本実施形態では、表示ユニット４０の接眼光学系４１が装着ユニット１０の透明部材１４Ｒに取り付けられている。このような構成では、透明部材１４Ｒが被写体の光像を所定の透過率で透過するとともに、表示ユニット４０の接眼光学系４１がこの透明部材１４Ｒに設けられた表示ユニット４０の接眼光学系４１によって、被写体の映像を被写体の光像に重ねて表示することができる。このため、このような構成では、作業者Ｗ（装着者）の視界を損なうことが低減され、作業者Ｗは、作業者Ｗの視界にある外界と表示ユニット４０の表示とを一緒に見ることができる。したがって、本実施形態の撮影装置１は、作業支援に効果的である。
【０１２８】
なお、本実施形態では、撮影装置１は、映像を表示することができるように表示ユニット４０を備えているが、指示者Ａの指示を音声のみで作業者Ｗに提供する場合には、表示ユニット４０は、備えていなくてもよい。
【０１２９】
また、本実施形態では、角速度センサユニット３０は、鉛直方向角速度センサ部３１および水平方向角速度センサ部３２を備え、映像表示制御部６３は、角速度センサユニット３０の出力に基づいて、撮影ユニット２０の撮影方向が所定の第１時間内に鉛直方向に沿って往復移動した場合および撮影ユニット２０の撮影方向が所定の第１時間内に水平方向に沿って往復移動した場合のうちの少なくとも一方の場合に、被写体の映像の切り換えを制限するものであったが、角速度センサユニット３０は、鉛直方向角速度センサ部３１のみを備え、映像表示制御部６３は、角速度センサユニット３０の出力に基づいて、撮影ユニット２０の撮影方向が所定の第１時間内に鉛直方向に沿って往復移動した場合に、被写体の映像の切り換えを制限するものであってもよく、また、角速度センサユニット３０は、水平方向角速度センサ部３２のみを備え、映像表示制御部６３は、角速度センサユニット３０の出力に基づいて、撮影ユニット２０の撮影方向が所定の第１時間内に水平方向に沿って往復移動した場合に、被写体の映像の切り換えを制限するものであってもよい。
【０１３０】
特に、角速度センサユニット３０が鉛直方向角速度センサ部３１のみを備える場合に、この鉛直方向角速度センサ部３１として、水平センサを用いることで、比較的簡単な構造で安価に、撮影方向における鉛直方向に沿った往復移動を検出するためのセンサを構成することが可能となる。この水平センサは、振り子式のセンサであり、振り子（一方端に錘が吊り下げられるとともに周方向に変位可能に他方端が支持された線材）の傾きで鉛直面内における撮影方向を検出することができる。
【０１３１】
また、本実施形態では、図４に破線で示すように、撮影ユニット２０によって撮影され、映像表示制御部６３の映像表示制御６３によって被写体の映像の切り換えを制限する前の前記被写体の映像と制限した区間情報を併せて記録する記録部７０をさらに備えて構成されてもよい。記録部７０は、例えば、ハードディスク、フラッシュメモリ等のメモリカード等を備えて構成される。本実施形態では、画像メモリ６１には、被写体の映像の切り換えを制限する前の被写体の映像が記憶されているので、このような構成を容易に実現することが可能である。このように構成することによって、被写体の映像の切り換えを制限する前の被写体の映像が記録部７０に記録されるので、頭部が高速に移動したり揺れたりした場合でもあっても、より正確な被写体の映像を記録することができる。また、切り換え制限した区間情報を併せて記録することで、後日、保存された映像を観察する際に、必要に応じて制限部分をスキップし、映像酔い等が発生することなく観察することも選択可能となる。
【０１３２】
さらに、この撮影装置１は、この切り換え制限後の被写体の映像だけでなく、この被写体の映像の切り換え制限前の被写体の映像をネットワークＩＦ部６８を用いて撮影装置１から遠隔支援装置５へ送信するように構成され、支援記録サーバＰＣ７は、この切り換え制限前のこの被写体の映像を記憶して記録するように構成されてもよい。切り換え制限前の被写体の映像は、例えば、所定時間纏めて適宜なタイミングで送信される。このように構成することによって、被写体の映像の切り換えを制限する前の被写体の映像が支援記録サーバＰＣ７に記録されるので、頭部が高速に移動したり揺れたりした場合でもあっても、より正確な被写体の映像を記録することができる。
【０１３３】
また、上述の実施形態では、撮影ユニット２０の撮影方向の変化は、角速度センサユニット３０で検出した装着者（作業者Ｗ）の頭部の角速度に基づいて検出されたが、撮影ユニット２０によって撮影された被写体の映像のうちの２枚の画像間における対応点を対応点探索処理によって抽出することで、検出されてもよい。
【０１３４】
図９は、実施形態にかかる遠隔作業支援システムにおける撮影装置の他の電気的な構成を示すブロック図である。このような遠隔作業支援システムＳにおける撮影装置１Ａは、図９に示すように、図略の装着ユニット１０と、撮影ユニット２０と、表示ユニット４０と、音入出力ユニット５０と、制御ユニット６０Ａとを備えて構成される。これら装着ユニット１０、撮影ユニット２０、表示ユニット４０および音入出力ユニット５０は、図１ないし図８を用いて説明した上記実施形態の撮影装置１における装着ユニット１０、撮影ユニット２０、表示ユニット４０および音入出力ユニット５０と同様であるので、その説明を省略する。
【０１３５】
そして、制御ユニット６０Ａは、撮影装置１Ａの全体制御を司る回路であり、画像メモリ６１と、制御部６２Ａと、ＶＲＡＭ６４と、音入力処理部６５と、音出力処理部６６と、電源スイッチ６７と、ネットワークＩＦ部６８とを備えて構成される。これら画像メモリ６１、ＶＲＡＭ６４、音入力処理部６５、音出力処理部６６、電源スイッチ６７およびネットワークＩＦ部６８は、図１ないし図８を用いて説明した上記実施形態の撮影装置１の制御ユニット６０における画像メモリ６１、ＶＲＡＭ６４、音入力処理部６５、音出力処理部６６およびネットワークＩＦ部６８と同様であるので、その説明を省略する。
【０１３６】
制御部６２Ａは、撮影装置１Ａの各部を当該機能に応じて制御する回路であり、例えば、マイクロコンピュータ等によって構成される。制御部６２Ａは、図１ないし図８を用いて説明した上記実施形態の撮影装置１における制御部６２の機能に加え、さらに、機能的に、撮影方向検出部８０を備えている。この撮影方向検出部８０は、対応点探索部であって、撮影ユニット２０によって撮影された被写体の映像のうちの２枚の画像間における対応点を対応点探索処理によって抽出することで、撮影ユニット２０の撮影方向を検出するものである。
【０１３７】
この対応点探索処理による撮影ユニット２０の撮影方向の検出では、撮影方向検出部８０は、次のように動作する。まず、撮影ユニット２０によって撮影された被写体の映像のうちの２枚の画像が抽出される。例えば、撮影ユニット２０によって撮影された被写体の映像における今回のフレームにおける撮影ユニット２０の撮影方向を検出する場合には、今回のフレームと、今回のフレームから予め設定された所定のフレームだけ時間的に遡った過去のフレームとが抽出される。例えば、フレームレートが２４ｆｐｓである場合に、１秒間に、３回、撮影ユニット２０の撮影方向を検出する場合では、今回のフレームと今回のフレームより８フレームだけ時間的に前のフレームとが取り出される。
【０１３８】
次に、今回のフレームにおける画像の中から予め設定された所定の特徴点が設定される。この所定の特徴点は、例えば、画像における予め設定された特定の位置（例えば画像の中央位置等）であっても良く、また例えば、画像の中から予め設定された特定の対象物であっても良い。前記特定の対象物は、例えば、前記特定の対象物の画像を予め記憶して登録しておき、パターンマッチングによって前記画像の中から検索される。また、この所定の特徴点は、１個であっても良く、また複数であってもよい。処理時間を短縮する観点からは、この所定の特徴点は、１個であることが好ましく、また、撮影ユニット２０の撮影方向をより正確に検出する観点からは、この所定の特徴点は、複数であることが好ましい。また、この所定の特徴点は、複数の画素から構成されてよい。
【０１３９】
次に、今回のフレームの画像における前記所定の特徴点が過去のフレームの画像におけるいずれの位置に存在するかが、マッチング処理によって探索される。より具体的には、前記所定の特徴点を構成する画素の画素値と略一致する画素値を持つ画素が、過去のフレームの画像から探索され、過去のフレームにおいて、前記略一致する画素値を持つ画素の位置が、今回のフレームの画像における前記所定の特徴点に対応する過去のフレームの画像における位置とされる。
【０１４０】
そして、今回のフレームの画像における前記所定の特徴点の位置と、前記所定の特徴点に対応する過去のフレームの画像における画素の位置とから、撮影ユニット２０の撮影方向が求められ、撮影ユニット２０の撮影方向が検出される。
【０１４１】
このように構成することによって、遠隔作業支援システムＳおよび撮影装置１Ａは、対応点探索処理の画像処理で撮影ユニット２０の撮影方向の変化を検出するので、例えば角速度センサユニット３０のようなセンサ部品を、別途に必要せず、センサレスでソフトウェアによって撮影方向検出部を構成することが可能となる。
【０１４２】
本発明を表現するために、上述において図面を参照しながら実施形態を通して本発明を適切且つ十分に説明したが、当業者であれば上述の実施形態を変更および／または改良することは容易に為し得ることであると認識すべきである。したがって、当業者が実施する変更形態または改良形態が、請求の範囲に記載された請求項の権利範囲を離脱するレベルのものでない限り、当該変更形態または当該改良形態は、当該請求項の権利範囲に包括されると解釈される。
【符号の説明】
【０１４３】
Ｓ 遠隔作業支援システム
１、１Ａ 撮影装置
５ 遠隔支援装置
６ メインサーバコンピュータ装置
７ 支援記録サーバコンピュータ装置
８ コンテンツサーバコンピュータ装置
１０ 装着ユニット
２０ 撮影ユニット
３０ 角速度センサユニット
３１ 鉛直方向角速度センサ部
３２ 水平方向角速度センサ部
４０ 表示ユニット
４１ 接眼光学系
４１ａ 光学プリズム
４１ｂ 反射部
５０ 音入出力ユニット
６０、６０Ａ 制御ユニット
６３ 映像表示制御部
６３１ 撮影方向判定部
６３２ 観察制限制御部
７０ 記録部
８０ 撮影方向検出部
【技術分野】
【０００１】
本発明は、頭部に装着されるカメラによって撮影された映像を表示装置に表示する撮影装置およびこの撮影装置を用いた遠隔作業支援システムに関する。
【背景技術】
【０００２】
頭部に装着される頭部装着式のカメラは、装着者の体験映像を得ることができることから、例えば、前記装着者の体験映像を指示者に送信して指示者から適宜な指示を受信する遠隔作業支援システムや、前記装着者の体験映像を記録しておき適時にこの記録しておいた体験映像を提示することで過去の体験を前記装着者に想起させる日常生活支援システム等に活用されている。また、頭部装着式のカメラは、体験映像を得るために装着者の手を煩わせることがないため、装着者は、手を自由に使える利点もある。
【０００３】
このような頭部装着式のカメラは、例えば、特許文献１および特許文献２に開示されている。この特許文献１に開示の撮像装置は、撮影者の頭部に装着し得るように構成されたものであり、画像データを生成するための撮像手段と、上記撮影者の頭部に装着し得るように構成されたものであり、被写体を観察するときの上記撮影者の動きに関連する生体情報であって、かつ上記画像データを編集処理する際に用いる生体情報、を検出するための生体情報検出手段と、上記画像データを、該画像データが生成されたタイム情報に関連付けて記録するための画像データ記録手段と、上記生体情報を、上記画像データが生成されたタイム情報に関連付けて記録するための生体情報記録手段とを具備している。上記生体情報検出手段は、上記生体情報として撮影者の頭部の角速度を検出するための角速度検出手段を含み、上記編集処理は、記録された画像データの、カッティングと、ぶれ補正と、記録時間の引き延ばしと、電子ズーミングとの内の少なくとも１つである。上記カッティングは、ぶれ補正等を行うことができない場合に、このぶれ補正等を行うことができない特定の画像に対して行われる。このような構成によって、特許文献１に開示の撮像装置では、撮影者の意思を反映した編集処理を撮影後に行うことができる。
【０００４】
また、特許文献２に開示の頭部装着式映像表示装置は、映像を表示する表示ユニットと、当該頭部装着式映像表示装置から作業対象物までの距離を検出する距離検出部と、前記表示ユニットに表示させる、作業対象物の参照映像の表示サイズを調整する表示制御部とを備え、前記参照映像には、前記作業対象物の現実の大きさに対する該参照映像の縮尺比情報が添付され、前記表示制御部は、前記距離検出部で検出された距離と前記参照映像に添付されている縮尺比情報とに基づいて、前記表示ユニットに表示させる前記参照映像の表示サイズを調整するものである。このような構成によって、特許文献２に開示の頭部装着式映像表示装置は、作業者や指示者へ負担を課することなく、作業に適切なサイズの参照画像を表示することができる。そして、特許文献２には、この頭部装着式映像表示装置を用いた遠隔作業支援システムも開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−２５２７３２号公報
【特許文献２】特開２００８−１２３２５７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
ところで、頭部装着式のカメラでは、頭部の動きに伴ってカメラの撮影方向が動くため、頭部が例えば高速に移動したり揺れたりすると、カメラによって撮影された映像も流れたり揺れたりする。このため、このカメラによって撮影された映像を見る観察者は、この撮影映像の揺れにより、映像酔い等の気分が悪くなってしまうことがある。特に、頭部装着式のカメラを頭部に装着した装着者が、肯定や否定を頭部の往復運動による頷き動作で示す場合に、このような事態が顕著に起こり得る。
【０００７】
本発明は、上述の事情に鑑みて為された発明であり、その目的は、頭部装着式のカメラにおいて、頭部が高速に移動したり揺れたりした場合でもあっても、このカメラによって撮影された映像によって映像酔い等の気分が悪くなることを低減することができる撮影装置およびこの撮影装置を用いた遠隔作業支援システムを提供することである。
【課題を解決するための手段】
【０００８】
本発明者は、種々検討した結果、上記目的は、以下の本発明により達成されることを見出した。すなわち、本発明の一態様にかかる撮影装置は、頭部に装着する装着部と、被写体を撮影する撮影部とを備える頭部装着式撮影部と、前記撮影部の撮影方向の変化を検出する撮影方向検出部と、前記撮影方向検出部で検出された前記撮影部の撮影方向の変化が、所定の第１時間内において所定の方向に沿う往復移動の場合に、前記撮影部によって撮影された被写体の映像を表示する場合における前記被写体の映像の切り換えを制限する映像表示制御部とを備えることを特徴とする。
【０００９】
このような構成の撮影装置では、頭部に装着される頭部装着式撮影部の撮影部における撮影方向の変化が撮影方向検出部によって検出され、その検出された撮影方向の変化が所定の第１時間内において所定の方向に沿う往復移動の場合に、撮影部によって撮影された被写体の映像の切り換えが制限される。この被写体の映像の切り換えが制限されることによって、被写体の映像が例えばコマ落としや略静止画等のように表示され、あるいは例えば非表示とされ、映像酔い等の気分が悪くなることを低減することができる。
【００１０】
また、他の一撮影装置では、上述の撮影装置において、好ましくは、前記往復移動は、前記撮影方向検出部で検出された前記撮影部の撮影方向が前記所定の方向に沿って略１８０度異なる方向へ２回以上変化することである。
【００１１】
この構成によれば、撮影方向が前記所定の方向に沿って略１８０度異なる方向へ２回以上変化した場合に往復移動と判定する簡易な判定条件としているので、撮影方向検出部や映像表示制御部を比較的簡単な装置や処理で実現することが可能である。
【００１２】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記所定の第１時間は、０．３秒〜３秒であることである。
【００１３】
一例では、頭部が０．３秒〜３秒程度の間に往復移動した場合に、その頭部に装着されたカメラによって撮影された映像を見た観察者は、映像酔い等の気分が悪くなりやすい。上記構成によれば、このような映像酔い等の気分の悪くなりやすい時間帯のうちのいずれかの時間に第１時間を設定しているので、このような事態を効果的に抑制または防止することが可能となる。
【００１４】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記映像表示制御部は、所定の第２時間の間、前記被写体の映像におけるフレームを更新しないことによって、前記被写体の映像の切り換えを制限することである。
【００１５】
この構成によれば、被写体の映像におけるフレームを更新しないので被写体の映像が略静止画となり、被写体の映像におけるフレームを更新しないという比較的簡易な手法によって、映像酔い等の気分の悪くなることを低減または防止することができる。
【００１６】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記映像表示制御部は、所定の第２時間の間、前記被写体の映像を表示しないことによって、前記被写体の映像の切り換えを制限することである。
【００１７】
この構成によれば、被写体の映像を表示しないので被写体の映像が消え、被写体の映像を表示しないという比較的簡易な手法によって、映像酔い等の気分の悪くなることを低減または防止することができる。
【００１８】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記所定の第２時間は、前記第１時間よりも長く、かつ、１秒〜５秒であることである。
【００１９】
この構成によれば、第２時間中、前記被写体の映像の切り換えを制限することで、映像酔い等の気分の悪くなることを低減または防止することができるとともに、第２時間の経過後に、前記被写体の映像の切り換えの制限を解除し、元に復帰することができる。
【００２０】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記所定の方向は、鉛直方向であることである。
【００２１】
この構成によれば、装着者の頭部における鉛直方向の往復移動による映像酔い等の気分の悪くなることに対処することができる。特に、装着者の歩行の場合や、装着者が肯定を頭部の鉛直方向における往復運動によって示す場合に対処することができる。
【００２２】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記所定の方向は、水平方向であることである。
【００２３】
この構成によれば、装着者の頭部における水平方向の往復移動による映像酔い等の気分の悪くなることに対処することができる。特に、装着者が否定を頭部の水平方向における往復運動によって示す場合に対処することができる。
【００２４】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記撮影方向検出部は、水平センサを備えることである。
【００２５】
この構成によれば、撮影方向の鉛直方向における往復移動を検出するために水平センサを用いるので、比較的簡単な構造で安価に、撮影方向における鉛直方向に沿った往復移動を検出することができる。
【００２６】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記撮影方向検出部は、角速度センサを備えることである。
【００２７】
この構成によれば、撮影方向における所定の方向に沿った往復移動を検出するために角速度センサを用いるので、比較的コンパクトで正確に、撮影方向における所定の方向に沿った往復移動を検出することができる。
【００２８】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記撮影方向検出部は、前記撮影部によって撮影された被写体の映像のうちの２枚の画像間における対応点を対応点探索処理によって抽出することで、前記撮影部の撮影方向を検出する対応点探索部を備えることである。
【００２９】
この構成によれば、対応点探索処理の画像処理で撮影方向の変化を検出するので、別途にセンサ部品を必要せず、センサレスでソフトウェアによって撮影方向検出部を構成することが可能となる。
【００３０】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記頭部装着式撮影部の撮影部は、前記被写体の光学像を電気的な信号に変換する撮像素子と、前記撮像素子の受光面上に前記被写体の光学像を形成する光学系とを備え、前記撮像素子は、ＣＭＯＳ型イメージセンサであることである。
【００３１】
ＣＭＯＳ型イメージセンサは、各画素の画像信号を順次に走査することによって得ている。このため、頭部が高速に移動したり揺れたりした場合では、映像が歪みやすく、これにより、映像酔い等の気分が悪くなることが、一層、発生しやすい。上記構成によれば、撮影部の撮影方向の変化が撮影方向検出部で検出され、その検出された撮影部の撮影方向の挙動に基づいて表示部に表示される被写体の映像の切り換えが制限されるので、撮影部の撮像素子がＣＭＯＳ型イメージセンサであっても、この撮影部によって撮影された映像により、映像酔い等の気分が悪くなることを低減することができる。
【００３２】
また、他の一撮影装置では、これら上述の撮影装置において、好ましくは、前記頭部装着式撮影部の撮影部によって撮影された被写体の映像を表示する表示部をさらに備えることである。
【００３３】
この構成によれば、前記頭部装着式撮影部の撮影部によって撮影された被写体の映像を表示する表示部をさらに備えた撮影装置を提供することができる。
【００３４】
また、他の一態様では、上述の撮影装置において、好ましくは、前記表示部は、前記頭部装着式撮影部に備えられていることである。
【００３５】
この構成によれば、撮影部の撮影方向が撮影方向検出部で検出され、その検出された撮影部の撮影方向に基づいて表示部に表示される被写体の映像の切り換えが制限されるので、表示部が頭部装着式撮影部に備えられている場合であっても、装着者は、この撮影部によって撮影された映像により、映像酔い等の気分が悪くなることを低減することができ、その場で即座に撮影している領域を確認することができる。
【００３６】
また、他の一態様では、これら上述の撮影装置において、好ましくは、音を音信号に変換する音入力部と、音信号を音に変換する音出力と、通信信号を送受信する通信部と、前記通信部の送受信を制御する通信制御部とをさらに備え、前記通信制御部は、前記音入力部によって変換された音信号を前記通信部に送信させるとともに、音を出力させるべく、前記通信部によって受信された音信号を前記音出力部へ出力することである。
【００３７】
この構成によれば、装着者は、例えば遠隔作業支援システム等の外部システムと、音声によってコミュニケーションを図ることができる。特に、コミュニケーションによって生じる装着者の動作に対処することができる。
【００３８】
そして、本発明の他の一態様にかかる遠隔作業支援システムは、撮影装置と、通信網を介して前記撮影装置と通信可能に接続される遠隔作業支援装置とを備える遠隔作業支援システムであって、前記撮影装置は、これら上述のいずれかに記載の撮影装置であり、前記遠隔作業支援装置は、前記通信網を介して受信され、前記頭部装着式撮影部の撮影部によって撮影された被写体の映像を表示する第２表示部と、指示者の指示を受け付けて該指示を前記通信網を介して前記撮影装置へ送信する指示受付部とを備えることを特徴とする。
【００３９】
このような構成の遠隔作業支援システムは、これら上述のいずれかの撮影装置を備えるので、撮影装置のユーザ（装着者、作業者）の頭部が高速に移動したり揺れたりした場合でもあっても、映像の切り換えの制限によって、遠隔作業支援装置のユーザ（指示者）は、この撮影部によって撮影された映像により、映像酔い等の気分が悪くなることを低減することができる。
【発明の効果】
【００４０】
本発明にかかる撮影装置および遠隔作業支援システムは、頭部装着式のカメラにおいて、頭部が高速に移動したり揺れたりした場合でもあっても、このカメラによって撮影された映像によって映像酔い等の気分が悪くなることを低減することができる。
【図面の簡単な説明】
【００４１】
【図１】実施形態にかかる遠隔作業支援システムの構成を示す図である。
【図２】実施形態にかかる遠隔作業支援システムにおける撮影装置の構成を示す外観斜視図である。
【図３】実施形態にかかる遠隔作業支援システムの撮影装置における表示ユニットの側断面図である。
【図４】実施形態にかかる遠隔作業支援システムにおける撮影装置の電気的な構成を示すブロック図である。
【図５】本実施形態の遠隔作業支援システムにおける撮影装置の動作を示すフローチャートである。
【図６】撮影方向の往復移動が第１態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。
【図７】撮影方向の往復移動が第２態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。
【図８】撮影方向の往復移動が第３態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。
【図９】実施形態にかかる遠隔作業支援システムにおける撮影装置の他の電気的な構成を示すブロック図である。
【発明を実施するための形態】
【００４２】
以下、本発明にかかる実施の一形態を図面に基づいて説明する。なお、各図において同一の符号を付した構成は、同一の構成であることを示し、適宜、その説明を省略する。
【００４３】
図１は、実施形態にかかる遠隔作業支援システムの構成を示す図である。図２は、実施形態にかかる遠隔作業支援システムにおける撮影装置の構成を示す外観斜視図である。図３は、実施形態にかかる遠隔作業支援システムの撮影装置における表示ユニットの側断面図である。図４は、実施形態にかかる遠隔作業支援システムにおける撮影装置の電気的な構成を示すブロック図である。
【００４４】
実施形態にかかる遠隔作業支援システムは、作業者における所定の方向の被写体を撮影し、この撮影した被写体の映像を前記作業者とは離れた別の場所に居る指示者が観察することができるように表示し、この被写体の映像を参照した前記指示者の指示を前記作業者に提供するシステムである。このような遠隔作業支援システムＳは、例えば、図１ないし図４に示すように、作業者Ｗに使用され、作業者Ｗにおける所定の方向、例えば作業者Ｗの視線方向の例えば作業対象物等の被写体を撮影し、この撮影した被写体の映像を送信する撮影装置１と、ネットワーク（通信網）ＮＴを介してこの撮影装置１によって撮影された被写体の映像を受信し、指示者Ａが見ることができるようにこの受信した被写体の映像を表示し、この被写体の映像を参照した指示者Ａの指示を受け付け、この受け付けた指示者Ａの指示を撮影装置１から出力させるべく、この受け付けた指示者Ａの指示をネットワークＮＴを介して撮影装置１へ送信する遠隔支援装置５とを備えて構成されている。
【００４５】
遠隔支援装置５は、撮影装置１から離れた場所に設けられ、撮影装置１と互いにデータを交換することができるように、ネットワークＮＴを介して通信可能に撮影装置１と接続され、例えば、図１に示すように、メインサーバコンピュータ装置（以下、「メインサーバＰＣ」と略記する。）６と、支援記録サーバコンピュータ装置（以下、「支援記録サーバＰＣ」と略記する。）７と、コンテンツサーバコンピュータ装置（以下、「コンテンツサーバＰＣ」と略記する。）８とを備えて構成される。
【００４６】
ネットワークＮＴは、例えば、電話網、ディジタル通信網および無線通信網等の通信網であり、所定の通信プロトコルを用いてデータが伝送される。本実施形態では、ネットワークＮＴは、例えば公衆電話網（固定電話網）、ＩＳＤＮ等のディジタル通信網および移動体電話網（携帯電話網）等の公衆ネットワークＮＴａと、例えばイーサネット（登録商標）等のローカル・エリア・ネットワーク（ＬＡＮ；プライベートネットワーク）ＮＴｂとを備えて構成される。公衆ネットワークＮＴａは、例えば、通信プロトコルにＦＴＰ（File Transfer Protocol）やＴＣＰ／ＩＰ（Transmission Control Protocol/Internet Protocol）等のインターネットプロトコルが用いられてインターネットを構成し、プライベートネットワークＮＴｂは、例えば、前記インターネットプロトコルが用いられてイントラネットを構成する。撮影装置１は、公衆ネットワークＮＴａと通信可能に接続され、遠隔支援装置５のメインサーバＰＣ６、支援記録サーバＰＣ７およびコンテンツサーバＰＣ７の各サーバＰＣは、互いにデータを交換することができるように、プライベートネットワークＮＴｂと通信可能に接続され、そして、公衆ネットワークＮＴａとプライベートネットワークＮＴｂとは、通信可能に接続されている。
【００４７】
メインサーバＰＣ６は、ネットワークＮＴを介して撮影装置１から受信した被写体の映像を表示するとともに、この被写体の映像を参照した指示者Ａの指示を受け付け、この受け付けた指示者Ａの指示をネットワークＮＴを介して撮影装置１へ送信するサーバコンピュータであり、例えば、メインサーバＰＣ６の全体制御を司るコンピュータ１６１と、指示者Ａの指示を受け付け、入力するための例えばキーボード１６２ａやマウス１６２ｂ等の入力装置１６２と、例えば映像を表示するディスプレイ１６３ａ等の出力装置１６３とを備えて構成される。
【００４８】
なお、本明細書において、総称する場合には添え字を省略した参照符号で示し、個別の構成を指す場合には添え字を付した参照符号で示す。
【００４９】
このコンピュータ１６１は、ネットワークＮＴ（プライベートネットワークＮＴｂ）と通信可能に接続するための、撮影装置１における後述のネットワークインタフェース部６８と同様の通信インタフェース回路（ネットワークカード）を備えており、撮影装置１からネットワークＮＴを介して受信した被写体の映像をディスプレイ１６３ａに表示するとともに、キーボード１６２ａやマウス１６２ｂから受け付けた（入力された）指示者Ａの指示をネットワークＮＴを介して撮影装置１へ送信する制御を行う。この指示者Ａの指示は、撮影装置１にネットワークＮＴを介して受信され、撮影装置１における後述の表示ユニット４０に表示される。
【００５０】
支援記録サーバＰＣ７は、撮影装置１と遠隔支援装置５との間でやり取りされた支援データを記憶して記録し、クライアント装置の要求に従ってこの要求に対応する支援データをクライアント装置に提供するサーバコンピュータである。支援記憶サーバＰＣ７は、コンピュータ１６１の制御に従って、あるいは、プライベートネットワークＮＴｂを伝送する通信信号を監視（モニタ）することによって独自に、撮影映像装置１による被写体の映像を日付や時刻等の日時情報と対応付けて支援データとして記録するとともに遠隔支援装置５による作業者Ａの指示を日付や時刻等の日時情報と対応付けて支援データとして記録する。このように支援記録サーバＰＣ７は、遠隔作業支援システムＳの履歴として支援データを保存し、記録する。
【００５１】
そして、本実施形態の遠隔作業支援システムＳは、映像だけでなく、例えば音声等の音も撮影装置１と遠隔支援装置５との間で互いに交換することができるように構成されており、撮影装置１には、後述するように、音入出力ユニット５０としてイヤホン５１Ｌ、５１Ｒとマイクロホン５２とを備えており、メインサーバＰＣ６には、入力装置１６２としてマイクロホン１６２ｃをさらに備え、出力装置１６３としてスピーカ１６３ｂをさらに備えている。そして、コンピュータ１６１は、撮影装置１からネットワークＮＴを介して受信した音声等の音（マイクロホン５２で集音した音）をスピーカ１６３ｂから出力するとともに、マイクロホン１６２ｃから受け付けた（入力された）指示者Ａの指示（音声指示）をネットワークＮＴを介して撮影装置１へ送信する制御を行う。この指示者Ａの音声指示は、撮影装置１にネットワークＮＴを介して受信され、撮影装置１における前記イヤホン５１Ｌ、５１Ｒから出力される。また、支援記録サーバＰＣ７は、コンピュータ１６１の制御に従って、あるいは、独自に、撮影装置１による前記音を日時情報と対応付けて支援データとして記録するとともに遠隔支援装置５による作業者Ａの音声指示を日時情報と対応付けて支援データとして記録する。
【００５２】
そして、本実施形態における遠隔作業支援システムＳでは、指示者Ａの指示には、作業者Ｗが遠隔支援装置５へ直接入力した例えばテキストデータや音声指示等のデータだけでなく、例えば作業対象物を表す参照映像や、作業手順を示す作業マニュアルや、製品の取り扱い方を示す取り扱い説明書等の、作業者Ｗが作業を行う際にその作業の支援となる映像や音声等の支援コンテンツ（支援情報）も含まれる。コンテンツサーバＰＣ８は、この支援コンテンツを格納し、クライアント装置の要求に従ってこの要求に対応する支援コンテンツをクライアント装置に提供するサーバコンピュータである。メインサーバＰＣ６のコンピュータ１６１は、キーボード１６２ａやマウス１６２ｂから指示者Ａの支援コンテンツを選択する指示（コンテンツ選択指示）を受け付け、このコンテンツ選択指示に対応する支援コンテンツをネットワークＮＴを介して撮影装置１へ送信するようにコンテンツサーバＰＣ８を制御する。コンテンツサーバＰＣ８は、コンピュータ１６１の制御に従って、コンテンツ選択指示に対応する支援コンテンツをネットワークＮＴを介して撮影装置１へ送信し、撮影装置１に支援コンテンツを提供する。
【００５３】
このような遠隔支援装置５と組み合わせて好適に使用される撮影装置１は、作業者Ｗの頭部に装着され、作業者Ｗ（装着者）の視線方向に略沿った被写体を撮影し、この撮影した被写体の映像をネットワークＮＴを介して遠隔支援装置５へ送信する頭部装着式の撮影装置（カメラ）であり、例えば、図２ないし図４に示すように、装着ユニット１０と、撮影ユニット２０と、角速度センサユニット３０と、表示ユニット４０と、音入出力ユニット５０と、制御ユニット６０とを備えて構成される。
【００５４】
装着ユニット１０は、作業者Ｗの頭部に装着するための装置であり、本実施形態では、視力矯正用のメガネを模した構造で構成されている。すなわち、本実施形態の装着ユニット１０は、左右一対のテンプル１１Ｌ、１１Ｒと、ブリッジ１２と、左右一対の鼻パッド１３Ｌ、１３Ｒと、左右一対の透明部材１４Ｌ、１４Ｒとを備えて構成されている。
【００５５】
テンプル１１Ｌ、１１Ｒは、例えば弾性素材等から構成される長尺棒状の部材であり、その一方端部には装着者（ここでは作業者Ｗ）の耳に掛けられる耳掛け部分を有し、その他方端部には回動部１１Ｌａ、１１Ｒａを介して透明部材１４Ｌ、１４Ｒに固定されて保持する保持部分を有しており、作業者Ｗの耳や側頭部に掛け止められ、作業者Ｗの頭部への保持および装着位置を調整するためのものである。テンプル１１Ｌ、１１Ｒと透明部材１４Ｌ、１４Ｒとの固定には、例えば接着剤による接着やねじによるねじ留め等の固定手段が用いられる。また、撮影装置１は、回動部１１Ｌａ、１１Ｒａによる回動により、テンプル１１Ｌ、１１Ｒを互いに回転方向の異なる矢印Ｐ、Ｑ方向へ回動させて、テンプル１１Ｌ、１１Ｒを透明部材１４Ｌ、１４Ｒに沿わせることによって、不使用時にコンパクトに折り畳めるようになっている。
【００５６】
ブリッジ１２は、左右一対の透明部材１４Ｌ、１４Ｒを互いに連結するための短尺棒状の部材であり、テンプル１１Ｌ、１１Ｒの固定手段と同様の手段によって、その両端で透明部材１４Ｌ、１４Ｒに固定される。左右一対の透明部材１４Ｌ、１４Ｒは、このブリッジ１２によって一定の間隔を空けた相対位置関係で保持される。
【００５７】
鼻パッド１３Ｌ、１３Ｒは、装着ユニット１０の装着者（ここでは作業者Ｗ）に対する顔面への保持を行うための部材であり、各脚部を介してブリッジ１２に接続されている。
【００５８】
透明部材１４Ｌ、１４Ｒは、例えばポリカーボネートやポリメチルメタクリレート等の樹脂やガラス等の可視光線に対し透明な素材等から構成され、視力矯正用のメガネレンズの外形形状のような、角を丸く縁取りした長方形状の板状部材である。もちろん、透明部材１４Ｌ、１４Ｒは、撮影装置１の本来の機能の観点において視力矯正用の調整度数を備える必要はないが、視力矯正用の調整度数を備えていても良い。透明部材１４Ｌ、１４Ｒの一方には、本実施形態では、右眼に対応する透明部材１４Ｒに表示ユニット４０の接眼光学系４１を嵌め込むための略Ｕ字形状の切り欠き部１４Ｒｓが形成されている。
【００５９】
これらテンプル１１Ｌ、１１Ｒ、ブリッジ１２および鼻パッド１３Ｌ、１３Ｒによっていわゆるメガネフレームが構成され、このメガネフレームが装着者に対し掛け止められ、透明部材１４Ｌ、１４Ｒが装着者の眼に対し所定の状態（所定の距離、所定の位置）で装着される。
【００６０】
なお、本実施形態では、装着ユニット１０は、テンプル１１Ｌ、１１Ｒおよびブリッジ１２によって透明部材１４Ｌ、１４Ｒを固定、保持するように構成されたが、左右一対のリムを備え、この各リムを介して透明部材１４Ｌ、１４Ｒを固定、保持するように構成されてもよい。この各リムは、例えば内溝を持った環状または半環状の部材であり、この環または半環に透明部材１４Ｌ、１４Ｒの外周部分を嵌め込むことによって透明部材１４Ｌ、１４Ｒを固定、保持するものである。
【００６１】
撮影ユニット２０は、例えば作業物体や装着者（ここでは作業者Ｗ）の周囲の外界情景等の被写体を撮影する装置であり、装着者（作業者Ｗ）に装着され前記装着者が前方略水平方向を見た場合に、その光軸が装着者の視線方向に略一致するように、装着ユニット１０に対し固定的に保持される。これによって撮影ユニット２０は、装着者の前方視野内を撮影することが可能となる。本実施形態では、撮影ユニット２０は、表示ユニット本体４５の一方端部に外付けされており、表示ユニット本体４５が接眼光学系４１を介して装着ユニット１０の透明部材１４Ｒに固定的に取り付けられることによって、装着ユニット１０に対し固定的に保持される。このように撮影ユニット２０は、本実施形態では、装着者（ここでは作業者Ｗ）の視野内撮影カメラとして機能し、また装着ユニット１０に保持されるので、撮影装置１がコンパクトに構成され、また作業者Ｗは、ハンズフリーとなって、両手を使った作業が可能となる。なお、撮影ユニット２０を装着ユニット１０に前記光軸と前記視線方向に略一致するように固定的に保持する機構は、撮影ユニット２０が脱着可能な構造であってもよい。このように構成することによって撮影ユニット２０を適宜に変えることができる。
【００６２】
撮影ユニット２０は、例えば、図４に示すように、撮影光学系２１と、撮像素子２２と、アナログフロントエンド２３と、映像制御部２４とを備えて構成される。
【００６３】
撮影光学系２１は、被写体の光学像（光像）を撮像素子２２の受光面に結像するための光学系である。撮影光学系２１は、単焦点光学系であってもよく、またズーミングすべくズーム機能を備えた変倍光学系であってもよい。また撮影光学系２１は、オートフォーカス（ＡＦ）機能を備えて構成されてよい。
【００６４】
撮像素子２２は、この撮影光学系２１によって受光面上に形成された被写体の光学像における光量に応じてＲ（赤）、Ｇ（緑）、Ｂ（青）の各成分の画像信号に光電変換してアナログフロントエンド２３へ出力する装置である。撮像素子２２には、例えば、ＣＣＤ型カラーイメージセンサやＣＭＯＳ型カラーイメージセンサ等が用いられる。本実施形態では、ＣＭＯＳ型カラーイメージセンサが用いられ、このＣＭＯＳ型カラーイメージセンサは、例えば、Ｒ（赤）光、Ｇ（緑）光、Ｂ（青）光の各光に対応した各色透過フィルタをピクセル単位（画素単位）で市松模様に配置されたカラーエリア撮影センサであって、撮影光学系２１により結像された被写体光像を、Ｒ（赤）光、Ｇ（緑）光、Ｂ（青）光の各成分の画像信号（各画素単位で受光された画素信号の信号列から成る信号）に光電変換するものである。ＣＭＯＳ型イメージセンサは、２次元配列された複数の画素から所定の順序に従って順番に各画素信号を読み出すように構成される。より具体的には、例えば、ｍ行ｎ列の画素でＣＭＯＳ型イメージセンサが構成されている場合に、１行１列の画素から１行ｎ列まで各列の画素信号が行方向に沿って順次に読み出され、１行ｎ列まで読み出すと、次行の画像信号を読み出すべく次行の１列目に戻り、同様に、次行の１列からｎ列まで各列の画素信号が行方向に沿って順次に読み出され、そして、このような画素信号の読み出しがｍ行ｎ列まで実行される。このため、ＣＭＯＳ型イメージセンサでは、最初の画素の読み出し時刻と、最後の画素の読み出し時刻とには、所定時間の差が生じている。
【００６５】
アナログフロントエンド２３は、所定の基準クロックに基づいて撮像素子２２の駆動を制御し、撮像素子２２で得られた画像信号に周知のアナログ信号処理を施した後にディジタル映像信号に変換し、映像制御部２４へ出力する回路である。
【００６６】
映像制御部２４は、アナログフロントエンド２３から入力された映像信号に、例えば黒レベル補正処理、画素補間処理、ホワイトバランス調整処理、ガンマ（γ）補正処理、シェーディング補正処理等の、周知の画像処理を施す回路である。映像制御部２４は、アナログフロントエンド２３から入力された映像信号を、ＣＭＯＳ型カラーイメージセンサにおける画像信号の読み出しクロックに同期して、制御ユニット６０内の画像メモリ６１に書き込む。すなわち、映像信号は、アナログフロントエンド２３から一旦画像メモリ６１に書き込まれ、所定の各画像処理が施される際に、画像メモリ６１から映像制御部２４に読み込まれ、各画像処理が施される。そして、これら各画像処理の施された映像信号は、再度、画像メモリ６１に書き込まれ、記憶（格納）される。
【００６７】
角速度センサユニット３０は、装着ユニット１０に対し固定的に保持されている撮影ユニット２０の撮影方向を検出するために、装着者（ここでは作業者Ｗ）の頭部の角速度を検出し、検出結果を制御ユニット６０へ出力する装置である。角速度センサユニット３０は、本実施形態では、例えば、装着者（作業者Ｗ）の頭部における鉛直方向の角速度を検出する回路である鉛直方向角速度センサ部３１と、装着者（作業者Ｗ）の頭部における水平方向の角速度を検出する回路である水平方向角速度センサ部３２とを備えて構成される。より具体的には、角速度センサユニット３０は、２軸の角速度を検出することができる２軸圧電振動ジャイロセンサを備えて構成され、装着ユニット１０に固定的に取り付けられる表示ユニット本体４５内に内蔵されている。ここで、角速度センサユニット３０で検出された角速度を積分することによって頭部の方向を算出することも可能である。このように本実施形態では、撮影方向における所定の方向に沿った往復移動を検出するためのセンサとして、加速度センサが用いられているので、比較的コンパクトで正確に、撮影方向における所定の方向に沿った往復移動を検出するためのセンサを構成することが可能となる。
【００６８】
表示ユニット４０は、所定の画像（映像）を表示する装置であり、遠隔支援装置５からネットワークＮＴを介して送信されてきた指示者Ａの指示を表示するものである。前記指示者Ａの指示には、上述したように、指示者Ａが遠隔支援装置５へ直接入力した例えばテキストデータ等のデータだけでなく、作業者Ｗが作業を行う際にその作業の支援となる映像や音声等のコンテンツサーバＰＣ８による支援コンテンツも含まれる。そして、本実施形態では、表示ユニット４０は、撮影ユニット２０の電子ファインダの機能を兼ねており、撮影ユニット２０によって撮影された映像も表示することができるようにされている。撮影ユニット２０によって撮影された被写体の映像が別体の表示装置に表示される場合には、作業者Ｗは、撮影ユニット２０によって撮影されている領域（被写体）を見るために前記表示装置の方に向かなければならないが、これによって撮影ユニット２０の撮影者である作業者Ｗは、撮影ユニット２０によって撮影されている領域（被写体）を見るために、その頭部の方向を変える必要がなく、視線をそらせる必要もなく、作業者Ｗ自信が撮影ユニット２０によって撮影している領域（被写体）を正確に認識することができる。
【００６９】
表示ユニット４０は、装着ユニット１０に取り付けられることなく別体で構成されてもよいが、作業者Ｗの視界内に指示者Ａの指示を表示し、作業者Ｗが指示者Ａの指示を参照しながら作業を行うことができるように、本実施形態では、装着ユニット１０に、しかも一方の透明部材１４Ｒに取り付けられている。このような表示ユニット４０は、例えば、図２ないし図４に示すように、接眼光学系４１と、映像生成部４２と、照明光学系４３と、光源部４４と、これら映像生成部４２、照明光学系４３および光源部４４を収容するとともに接眼光学系４１に取り付けられる筐体である表示ユニット本体４５とを備えて構成される。表示ユニット本体４５には、上述したように、その一方端に撮影ユニット２０が外付けされており、角速度センサユニット３０が内蔵され、そして、底面から外部に接眼光学系４１が延びている。さらに、表示ユニット本体４５の他方端から、ケーブル４６が延び、撮影ユニット２０、角速度センサユニット３０、表示ユニット４０および音入出力ユニット５０と制御ユニット６０とは、相互にデータを交換することができるようにこのケーブル４６によって電気的に接続されている。
【００７０】
光源部４４は、所定波長の光を発光する装置であり、例えば、所定波長色を含む白色発光ダイオード（以下、「白色ＬＥＤ」と略記する）から成る点光源である。
【００７１】
照明光学系４３は、光源部４４の発光光が入射され、この入射された発光光から映像生成部４２を照明する照明光を生成する装置であり、例えば、本実施形態では、方向により拡散度が異なり、前記入射された発光光を一方向に拡散する一方向拡散板４３ａと、一方向拡散板４３ａで拡散された光を集光する集光レンズ４３ｂとを備えて構成される。より具体的には、例えば、本実施形態では、一方向拡散板４３ａは、光源部４４から入射された発光光を図３の紙面に垂直な方向に約４０度で拡散するとともに図３の紙面に平行な方向に約０．２度で拡散する。
【００７２】
映像生成部４２は、照明光学系４３の照明光が入射され、各画素において、この照明光をＲＧＢごとにＶＲＡＭ６４の映像信号に応じて強度変調することによって映像を生成する装置であり、例えば、透過型ＬＣＤ装置（透過型液晶表示装置）を備えて構成される。
【００７３】
接眼光学系４１は、映像生成部４２で生成された映像を装着者（作業者Ｗ）の眼に導くための装置であり、例えば、光学プリズム４１ａと、反射部４１ｂとを備えて構成される。
【００７４】
光学プリズム４１ａは、例えばガラスや透明樹脂等の可視光に対して透明な材料より成る部材であって、互いに対向する一対の主面が略平行となるように形成された平行平板である。光学プリズム４１ａの上端部（上面部）は、上面が映像生成部４２で生成された映像光の入射面であり、映像光の大部分を内部に採光することができるように、肉厚部４１１が形成されている。この肉厚部４１１は、上方に向かってより肉厚となるように前面側（接眼面と反対側）が突き出るくさび形状に形成される。そして、光学プリズム４１ａの下端部（底面部）は、斜めにカットされた傾斜部４１２が形成されており、この傾斜部４１２に反射部４１ｂが設けられている。光学プリズム４１ａは、その上端部から入射された映像光をその内部で複数回の反射を行わせ、前記映像光を反射部４１ｂへ導光する。より具体的には、光学プリズム４１ａは、その上端部から入射された映像光を前記一対の主面で交互に全反射を繰り返し、前記映像光を反射部４１ｂへ導光する。
【００７５】
反射部４１ｂは、光学プリズム４１ａによって導光された映像光を、光学プリズム４１ａの傾斜部４１２と協働して後面側（接眼面側）へ反射する光学素子であり、例えば、ハーフミラー、多層膜およびホログラム光学素子等である。本実施形態では、反射部４１ｂは、ホログラムを生成するホログラム光学素子（ＨＯＥ）であり、例えば、波長選択性および角度選択性がともに比較的高いことから、体積位相型の反射型ホログラム光学素子である。体積位相型のホログラム光学素子は、光学的に軸非対称ないわゆる自由曲面で構成されて正の光学的パワーを有する。この反射型ホログラム光学素子は、所定波長の映像光を回折するように構成されており、前記光源部４４は、この反射型ホログラム光学素子の回折波長に応じた所定波長の光を発光するように構成される。より具体的には、本実施形態では、反射型ホログラム光学素子は、ＲＧＢ（赤緑青）に対応した各波長４６５ｎｍ±１０ｎｍ、５２０ｎｍ±１０ｎｍおよび６３５ｎｍ±１０ｎｍの映像光を回折するように製作され、これに応じて、光源部４４は、中心波長４６５ｎｍ、５２０ｎｍおよび６３５ｎｍのＲＧＢ一体型の白色ＬＥＤを備えて構成される。この反射型ホログラム光学素子の感光材料として、例えば、フォトポリマ、銀塩材料、重クロム酸ゼラチン等を挙げることができ、特に、ドライプロセスで製造することができることから、フォトポリマが好ましい。
【００７６】
そして、前記透明部材１４Ｒの切り欠き部１４Ｒｓは、光学プリズム４１ａが隙間無く嵌め込まれるように、光学プリズム４１ａの形状に対応した形状とされており、透明部材１４Ｒの切り欠き部１４Ｒｓに接眼光学系４１が嵌め込まれた場合に、透明部材１４Ｒと接眼光学系４１とは１枚の板状に一体化され、傾斜部４１２に設けられた反射部４１ｂは、光学プリズム４１ａと透明部材１４Ｒとに挟まれて埋設する。このように透明部材１４Ｒと光学プリズム４１ａとは、反射部４１ｂを２つの透明材料に埋設した接合光学プリズムを構成している。このため、反射部４１ｂが外気に触れることが無く、反射部４１ｂがホログラム光学素子である場合に、ホログラムを安定にその性能を保つことが可能となる。
【００７７】
光学プリズム４１ａによって導光された映像光は、反射部４１ｂで反射し、より具体的には、本実施形態では、反射型ホログラム光学素子によって回折され、虚像として光学瞳Ｅに導かれる。装着者（作業者Ｗ）は、この光学瞳Ｅの映像光をその瞳に入射することで、映像を見ることができる。このように表示ユニット４０では、ＶＲＡＭ６４の映像信号による映像が映像生成部４２の透過型ＬＣＤ装置に表示され、この映像生成部４２の透過型ＬＣＤ装置によって得られた映像が、接眼光学系４１によって装着者（作業者Ｗ）の眼球に直接投影され、あたかも該映像が空中に拡大投影されているかのような虚像の観察が可能になっている。
【００７８】
また、透明部材１４Ｒは、光学プリズム４１ａの傾斜部４１２での屈折をキャンセル（相殺）するので、装着者（作業者Ｗ）は、外界光を略歪むことなく見ることができる。また、体積位相型の反射型ホログラム光学素子は、上述のように、特定入射角の特定波長の光のみを回折するので、外界光にはほとんど影響せず、外界光は、透明部材１４Ｒ、反射部４１ｂの反射型ホログラム光学素子および光学プリズム４１ａを透過し、装着者（作業者Ｗ）は、略通常通り、外界を見ることができる。このように体積位相型の反射型ホログラム光学素子は、特定波長域の反射光とそれ以外の波長域の透過光とを合成するコンバイナ光学素子として機能している。このような構成によって表示ユニット４０における外界光の可視光透過率を約８５％以上に確保することが可能となり、外界光の透過率が高く、装着者（作業者Ｗ）がシースルーで外界を良好に見ることができ、装着者（作業者Ｗ）の作業性を向上することが可能となる。そして、本実施形態では、接眼光学系４１は、右眼に対応する透明部材１４Ｒに配設され、表示ユニット４０に表示される映像を右眼で観察することができると同時に外界を右眼でも観察することができる（もちろん、左眼は、外界を観察することができる）。
【００７９】
また、接眼光学系４１は、本実施形態では、映像光を光学プリズム４１ａの内部で反射するとともに反射部４１ｂの体積位相型の反射型ホログラム光学素子によって光学瞳Ｅに導くように構成されているので、透明部材１４Ｒの厚みは、通常のメガネレンズと略同程度の厚み（例えば３ｍｍ程度）とすることができ、小型で軽量となる。そして、前記反射は、本実施形態では、全反射であるので、装着者（作業者Ｗ）は、透明部材１４Ｒの一対の両主面を通して外界光の透過率を略落とすことなく、外界を見ることができる。
【００８０】
音入出力ユニット５０は、音を入出力するための回路であり、音を出力する左右一対のイヤホン５１Ｌ、５１Ｒと、音を集音するマイクロホン５２とを備えて構成される。マイクロホン５２は、装着ユニット１０を作業者Ｗが装着した場合に、作業者Ｗの音声を集音すべく、装着ユニット１０のテンプル１１Ｌから延びる略Ｌ字状のアーム５３の先端に取り付けられている。この音入力ユニット５０のマイクロホン５２によって作業者Ｗの音声が集音され、この音声の音声データが撮影装置１からネットワークＮＴを介して遠隔支援装置５へ送信され、遠隔支援装置５のメインサーバＰＣ６におけるスピーカ１６３ｂからこの音声データの音声が出力される。一方、この遠隔支援装置５のメインサーバＰＣ６におけるマイクロホン１６２ｃによって指示者Ａの音声が集音され、この音声の音声データが遠隔支援装置５からネットワークＮＴを介して撮影装置１へ送信され、撮影装置１のイヤホン５１Ｌ、５１Ｒからこの音声データの音声が出力される。あるいは、コンテンツサーバＰＣ８から音声の支援コンテンツがネットワークＮＴを介して撮影装置１へ送信され、撮影装置１のイヤホン５１Ｌ、５１Ｒからこの音声の支援コンテンツが出力される。なお、撮影装置１のイヤホン５１Ｌ、５１Ｒは、一方のみであっても良い。これによって本実施形態の遠隔作業支援システムＳは、音声指示を作業者Ｗに与えることができ、また、例えば音声等の音も撮影装置１と遠隔支援装置５との間で互いに交換することができ、作業者Ｗと指示者Ａとは、音声によってコミュニケーションを図ることができる。特に、音声によるコミュニケーションを図ると、指示者Ａの音声指示により、作業者Ｗ（装着者）は、頷き動作を行い易いが、このような場合に本実施形態の遠隔作業支援システムＳでは後述のように映像の切り換えを制限して映像での観察に制限を施すので、このような場合に本実施形態の遠隔作業支援システムＳは、効果的である。
【００８１】
制御ユニット６０は、撮影装置１の全体制御を司る回路である。制御ユニット６０は、撮影ユニット２０、角速度センサユニット３０および表示ユニット４０のように装着ユニット１０に取り付けられても良いが、撮影装置１における作業者Ｗの頭部に装着される部分の重量を軽減するために、本実施形態では、装着ユニット１０に取り付けられることなく装着ユニット１０とは別体に設けられており、上述したように、ケーブル４６によって撮影ユニット２０、角速度センサユニット３０、表示ユニット４０および音入出力ユニット５０と電気的に接続されている。制御ユニット６０は、例えば、図１、図２および図４に示すように、画像メモリ６１と、制御部６２と、ＶＲＡＭ６４と、音入力処理部６５と、音出力処理部６６と、電源スイッチ６７と、ネットワークＩＦ部６８とを備えて構成され、これら画像メモリ６１、制御部６２、ＶＲＡＭ６４、音入力処理部６５、音出力処理部６６、電源スイッチ６７およびネットワークＩＦ部６８は、略直方体形状の筐体６９に収容されている。なお、電源スイッチ６７は、その操作部分が筐体６９の外部に臨むように筐体６９内に配設され、ネットワークＩＦ部６８は、そのコネクタ部分が筐体６９の外部に臨むように筐体６９内に配設される。
【００８２】
画像メモリ６１は、例えば、ＲＡＭ（Random Access Memory）等の揮発性の記憶素子およびその周辺回路を備えて構成され、上述したように、撮影ユニット２０における映像制御部２４の作業領域として用いられる。
【００８３】
ＶＲＡＭ６４は、ＲＡＭおよびその周辺回路を備えて構成される、いわゆるビデオラム（Ｖｉｄｅｏ ＲＡＭ）であり、表示ユニット４０における映像生成部４２の画素数に対応した映像信号の記憶容量を少なくとも有し、映像生成部４２で再生表示される映像を構成する映像信号をバッファするためのバッファメモリである。
【００８４】
音入力処理部６５は、音入出力ユニット５０におけるマイクロホン５２から入力されてきた音信号に対し、例えば、増幅やノイズカット等の所定の信号処理を行って制御部６２へ出力する回路である。
【００８５】
音出力処理部６６は、制御部６２から入力されてきた音信号に対し、例えば、増幅やノイズカット等の所定の信号処理を行って音入出力ユニット５０におけるイヤホン５１Ｌ、５１Ｒへ出力する回路である。
【００８６】
電源スイッチ６７は、撮影装置１を稼動するために、撮影装置１を起動するスイッチ回路である。電源スイッチ６７の投入（スイッチオン）により、例えば電池等の電源から、撮影装置１における電力を必要とする各部へ電力が供給される。
【００８７】
ネットワークＩＦ部６８は、ネットワークＮＴを介して撮影装置１と遠隔支援装置５との間で通信を行うための通信インタフェース回路であり、制御部６２から入力されてきたデータをネットワークＮＴの通信プロトコルに対応した通信信号に収容し、この収容した通信信号をネットワークＮＴへ送信するとともに、ネットワークＮＴから撮影装置１宛ての通信信号を受信し、この受信した通信信号に収容されているデータを取り出して制御部６２で処理可能な形式に変換し、この変換したデータを制御部６２へ出力するものである。
【００８８】
制御部６２は、撮影装置１の各部を当該機能に応じて制御する回路であり、例えば、撮影装置１の各部を当該機能に応じて制御するための制御プログラム等の各種の所定のプログラムや前記所定のプログラムの実行に必要なデータ等の各種の所定のデータ等を記憶する、不揮発性の記憶素子であるＲＯＭ（Read Only Memory）、前記所定のプログラムを読み出して実行することによって所定の演算処理や制御処理を行うＣＰＵ（Central Processing Unit）、前記所定のプログラムの実行中に生じるデータ等を記憶するいわゆる前記ＣＰＵのワーキングメモリとなるＲＡＭ、および、これらの周辺回路を備えたマイクロコンピュータ等によって構成される。なお、この制御部６２は、例えば、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）等の書き換え可能な不揮発性の記憶素子を備えても良い。制御部６２は、機能的に、映像表示制御部６３を備えている。
【００８９】
映像表示制御部６３は、撮影ユニット２０によって撮影された被写体の映像を表示する場合に、本実施形態では、角速度センサユニット３０で検出された撮影ユニット２０の撮影方向の変化が所定の第１時間内において所定の方向に沿う往復移動の場合に、撮影ユニット２０によって撮影された被写体の映像を表示する場合における前記被写体の映像の切り換えを制限するものであり、例えば、機能的に、撮影方向判定部６３１と、観察制限制御部６３２とを備えて構成される。映像表示制御部６３は、撮影ユニット２０によって撮影された被写体の映像を表示ユニット４０に表示する場合には、表示ユニット４０に表示すべき映像を制御し、また、撮影ユニット２０によって撮影された被写体の映像を遠隔支援装置５に出力する場合には、遠隔支援装置５宛てに送信する通信信号に収容される映像を制御するものである。
【００９０】
撮影方向判定部６３１は、角速度センサユニット３０で検出された作業者Ｗ（装着者）の頭部の角速度に基づいて撮影ユニット２０の撮影方向を検出し、この検出された撮影ユニット２０の撮影方向が所定の第１時間内に所定の方向に沿って往復移動したか否かを判定し、その判定結果を観察制限制御部６３２へ通知するものである。
【００９１】
観察制限制御部６３２は、撮影方向判定部６３１から通知された判定結果に応じて撮影ユニット２０で生成される映像の切り換えを制限するものである。なお、制御部６２は、この切り換えを制限した被写体の映像をネットワークＩＦ部６８からネットワークＮＴを介して遠隔支援装置５へ送信する。
【００９２】
より具体的には、例えば、撮影方向判定部６３１は、角速度センサユニット３０で検出された作業者Ｗの頭部の角速度に基づいて検出された撮影方向が前記所定の第１時間内に前記所定の方向に沿って略１８０度異なる方向へ２回以上変化したか否かを判定し、その判定結果を観察制限制御部６３２へ通知するものであり、観察制限制御部６３２は、撮影ユニット２０によって撮影された被写体の映像を表示する場合において、前記判定結果に基づいて、角速度センサユニット３０で検出された作業者Ｗの頭部の角速度に基づいて検出された撮影方向が前記所定の第１時間内に前記所定の方向に沿って略１８０度異なる方向へ２回以上変化した場合に、撮影ユニット２０で生成される映像の切り換えを制限するものである。例えば、本実施形態では、観察制限制御部６３２は、被写体の映像におけるフレームを予め設定された所定のフレームに制限することで、撮影ユニット２０で生成される映像の切り換えを制限する。前記判定における、撮影方向が前記所定の方向に沿って略１８０度異なる方向へ変化する回数は、頭部が高速に移動したり揺れたりした場合に頭部に装着されるカメラによって撮影された映像を観察者が見た場合に観察者が気分を悪くするか否かの観点から例えば統計等によって決定される回数であり、例えば、本実施形態では、２回である。このように撮影方向が前記所定の方向に沿って略１８０度異なる方向へ２回以上変化した場合に所定の方向に沿った往復移動があったと判定する簡易な判定条件としているので、角速度センサユニット３０や映像表示制御部６３等のこのための装置を比較的簡単な装置や処理で実現することが可能である。
【００９３】
前記所定の第１時間（判定時間Ａ）は、予め設定され、例えば、頭部が高速に移動したり揺れたりした場合に頭部に装着されるカメラによって撮影された映像を観察者が見た場合に観察者が気分を悪くするか否かの観点から例えば統計等によって決定される時間長である。一例では、頭部が約０．３秒〜３秒程度の間に往復移動した場合に、その頭部に装着されたカメラによって撮影された映像を見た観察者は、映像酔い等の気分が悪くなりやすい。約０．３秒を下回ると、前記観察者は、いわゆる手ぶれのような単なるブレと意識され、一方、約３秒を上回ると、前記観察者は、往復移動のサイクルが充分に長いので、映像酔い等の気分が悪くなりにくい。このため、前記所定の第１時間は、例えば、約０．３秒〜３秒のうちのいずれかの時間長に設定される。このような映像酔い等の気分の悪くなりやすい時間帯のうちのいずれかの時間に第１時間を設定しているので、このような事態を効果的に抑制または防止することが可能となる。
【００９４】
観察制限制御部６３２による映像の切り換えの制限は、例えば、所定の第２時間の間、被写体の映像におけるフレームを更新しないことによって行われてよい。より具体的には、例えば、本実施形態では、観察制限制御部６３２は、前記第２時間の間、ＶＲＡＭ６４の各データを更新せず、前記第２時間の開始時刻における被写体の映像におけるフレームの各データ値をそのまま維持するように、ＶＲＡＭ６４を制御する。したがって、前記第２時間の開始時刻における被写体の映像におけるフレームがそのまま維持され、静止画のように表示ユニット４０や遠隔支援装置５のディスプレイ１６３ａに表示される。このように被写体の映像におけるフレームを更新しないので被写体の映像が、第２時間中、略静止画となり、被写体の映像におけるフレームを更新しないという比較的簡易な手法によって、映像酔い等の気分の悪くなることを低減または防止することができる。
【００９５】
また例えば、観察制限制御部６３２による映像の切り換えの制限は、所定の第２時間の間、被写体の映像を表示しないことによって行われてよい。より具体的には、例えば、本実施形態では、観察制限制御部６３２は、前記第２時間の間、ＶＲＡＭ６４の各データを予め設定された所定レベルのデータ値に書き換えるように、ＶＲＡＭ６４を制御する。すなわち、第２時間中、表示ユニット４０や遠隔支援装置５のディスプレイ１６３ａには、例えば黒や白等の単色表示で、被写体が何も表示されない。このように被写体の映像を表示せずに被写体の映像を消し、被写体の映像を表示しないという比較的簡易な手法によって、映像酔い等の気分の悪くなることを低減または防止することができる。
【００９６】
また例えば、観察制限制御部６３２による映像の切り換えの制限は、被写体の映像の信号を遠隔支援装置５に送信しないことや、被写体の映像の信号を表示ユニット４０に出力しないことや、被写体の映像の信号をＶＲＡＭ６４に記録しないこと等であっても良い。
【００９７】
前記所定の第２時間（観察制限時間Ｂ）は、予め設定され、例えば、映像酔い等の気分の悪くなることがないように、前記所定の第１時間（判定時間Ａ）を超えるように決定される時間長であり、前記継続時間は、例えば統計等によって決定される。例えば、前記所定の第２時間は、前記第１時間よりも長く、かつ、１秒〜５秒のうちのいずれかの時間長に設定される。このように、第２時間中、被写体の映像の切り換えを制限することで、映像酔い等の気分の悪くなることを低減または防止することができるとともに、前記被写体の映像の切り換えを制限する第２時間を設けるので、第２時間の経過後に、被写体の映像の切り換えの制限を解除し、元に復帰することができる。前記所定の第２時間が１秒を下回ると、映像酔い等の気分の悪くなることを低減または防止することが難しく、好ましくない。一方、前記所定の第２時間が５秒を上回ると、表示ユニット４０に表示される映像や遠隔支援装置５に表示される映像の即時性が損なわれ、指示者Ａに作業者Ｗの映像が略リアルタイムに提供されなくなり、適切な指示を与えることが難しくなるので、好ましくない。
【００９８】
また例えば、前記所定の方向は、鉛直方向であってよく、撮影方向判定部６３１は、鉛直方向角速度センサユニット３１で検出された作業者Ｗ（装着者）の頭部における鉛直方向の角速度に基づいて撮影ユニット２０の鉛直面内における撮影方向（鉛直方向での上方方向（＋方向）または下方方向（−方向））を検出し、この検出された撮影ユニット２０の撮影方向が所定の第１時間内に鉛直方向に沿って往復移動したか否かを判定し、その判定結果を観察制限制御部６３２へ通知するものであって、観察制限制御部６３２は、撮影ユニット２０によって撮影された被写体の映像を表示する場合において、前記判定結果に基づいて、撮影ユニット２０の撮影方向が所定の第１時間内に鉛直方向に沿って往復移動した場合に、前記被写体の映像の切り換えを制限するものである。このように構成することによって、装着者の頭部における鉛直方向の往復移動による映像酔い等の気分の悪くなることに対処することができる。特に、装着者の歩行の場合や、装着者が肯定を頭部の鉛直方向における往復運動によって示す場合に対処することができる。
【００９９】
なお、鉛直方向角速度センサ部３１は、本実施形態では、２軸圧電振動ジャイロセンサのうちの１軸を利用することで構成されたが、水平センサを備えて構成されてもよい。このように撮影方向の鉛直方向における往復移動を検出するためにセンサとして水平センサを用いることで、比較的簡単な構造で安価に、撮影方向における鉛直方向に沿った往復移動を検出することができる。
【０１００】
また例えば、前記所定の方向は、水平方向であってよく、撮影方向判定部６３１は、水平方向角速度センサユニット３２で検出された作業者Ｗ（装着者）の頭部における水平方向の角速度に基づいて撮影ユニット２０の水平面内における撮影方向（水平方向での右方向（＋方向）または左方向（−方向））を検出し、この検出された撮影ユニット２０の撮影方向が所定の第１時間内に水平方向に沿って往復移動したか否かを判定し、その判定結果を観察制限制御部６３２へ通知するものであって、観察制限制御部６３２は、撮影ユニット２０によって撮影された被写体の映像を表示する場合において、前記判定結果に基づいて、撮影ユニット２０の撮影方向が所定の第１時間内に水平方向に沿って往復移動した場合に、前記被写体の映像の切り換えを制限するものである。このように構成することによって、装着者の頭部における水平方向の往復移動による映像酔い等の気分の悪くなることに対処することができる。特に、装着者が否定を頭部の水平方向における往復運動によって示す場合に対処することができる。
【０１０１】
本実施形態では、撮影装置１の装着ユニット１０、撮影ユニット２０、角速度センサユニット３０および制御ユニット６０における映像表示制御部６３が、それぞれ、請求項の装着部、撮影部、撮影方向検出部および映像表示制御部の一例に相当し、そして、遠隔支援装置５のディスプレイ１６３ａが表示部および第２表示部の一例に相当する。そして、撮影装置１の表示ユニット４０が撮影ユニット２０の電子ファインダとして機能していることから、本実施形態では、撮影装置１の表示ユニット４０も表示部の一例に相当している。
【０１０２】
次に、本実施形態の動作について説明する。図５は、本実施形態の遠隔作業支援システムにおける撮影装置の動作を示すフローチャートである。図６は、撮影方向の往復移動が第１態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。図７は、撮影方向の往復移動が第２態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。図８は、撮影方向の往復移動が第３態様である場合における、本実施形態の遠隔作業支援システムにおける撮影装置の動作を説明するためのタイムチャートである。これら図６（Ａ）、図７（Ａ）および図８（Ａ）は、撮影方向を示し、図６（Ｂ）、図７（Ｂ）および図８（Ｂ）は、遠隔支援装置５のディスプレイ１６３ａや表示ユニット４０に表示される表示映像の態様を示す。また、図６（Ａ）、図７（Ａ）および図８（Ａ）における各矢印は、各サンプリング時刻における撮影ユニット２０の各撮影方向の変化方向（移動方向）を示し、（＋）は、前記所定の方向に沿った一方方向を示し、（−）は、（＋）方向の１８０度異なる他方方向を示す。
【０１０３】
本実施形態の遠隔作業支援システムＳにおける撮影装置１は、被写体の映像の切り換えを制限する制御に関し、図５に示すように動作している。すなわち、図５において、ステップＳ１１では、撮影ユニット２０の撮影方向の変化方向（移動方向）を検出すべく、角速度センサユニット３０によって作業者Ｗ（装着者）の頭部の角速度が検出され、この検出結果が制御ユニット６０へ出力され、制御ユニット６０で記憶される。
【０１０４】
続いて、制御ユニット６０において、この検出結果が角速度センサユニット３０から入力されてくると、上述のように、制御部６２の映像表示制御部６３によって、この検出結果が記憶され、この検出結果が所定の条件を満たすか否かが判定される。例えば、上述したように、この検出結果に基づいて検出された撮影ユニット２０の撮影方向の変化方向が前記所定の第１時間内に前記所定の方向に沿って略１８０度異なる方向へ２回以上変化したか否かが、判定される。より具体的には、本実施形態では、前記検出結果に基づいて検出された撮影ユニット２０の撮影方向の変化方向が前記所定の第１時間内に鉛直方向や水平方向に沿って略１８０度異なる方向へ２回変化したか否かが、判定される。
【０１０５】
この判定において、本実施形態では、図５に示すように、まず、ステップＳ１２では、映像表示制御部６３の撮影方向判定部６３１によって、この検出結果が記憶され、この検出結果に基づいて検出された撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化したか否かが、判定される。この判定の結果、撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化した場合（Ｙ）には、この今回の撮影方向の反転を判定した時刻が記憶され、ステップＳ１３の処理が実行され、一方、撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化していない場合（Ｎ）には、ステップＳ１４の処理が実行される。
【０１０６】
ここで、この撮影ユニット２０の撮影方向の変化方向における略１８０度異なる方向への変化は、例えば、前回の検出結果に基づいて検出された前回の撮影ユニット２０の撮影方向と今回の検出結果に基づいて検出された今回の撮影ユニット２０の撮影方向とを比較することによって判断され、これらが略１８０度異なる方向である場合には、撮影方向判定部６３１によって、前回の検出と今回の検出との間に、撮影ユニット２０の撮影方向の変化方向が略１８０度異なる方向へ１回変化したと判断され、一方、これらが略１８０度異なる方向ではない場合には、撮影方向判定部６３１によって、前回の検出と今回の検出との間に、撮影ユニット２０の撮影方向の変化方向が略１８０度異なる方向への変化がないと判断される。
【０１０７】
ステップＳ１４では、映像表示制御部６３の観察制限制御部６３２によって、被写体の映像における切り換え制限が行われることなく、例えば１５ｆｐｓ（毎秒１５フレーム）や２４ｆｐｓ（毎秒２４フレーム）や３０ｆｐｓ（毎秒３０フレーム）等のデフォルトのフレームレートで被写体の映像を表示するべく、被写体の映像の信号（表示用映像信号）が撮影装置１から遠隔支援装置５へ送信される。遠隔支援装置５では、この表示用映像信号が受信されると、表示用映像信号による映像がディスプレイ１６３ａに表示される。これによって指示者Ａは、作業者Ｗ（装着者）の前方視野内の被写体を参照することができ、例えば、作業対象物を観察することができる。また、本実施形態では、この被写体の映像は、撮影装置１の表示ユニット４０にも表示される。これによって作業者Ｗ（装着者）は、撮影ユニット２０によって撮影されている領域を見ることができる。
【０１０８】
続いて、ステップＳ１５では、本撮影放置１の稼動が終了であるか否かが判定され、この判定の結果、稼動が終了である場合（Ｙ）には、処理を終了し、稼動が終了していない場合（Ｎ）には、処理をステップＳ１１に戻す。
【０１０９】
一方、ステップＳ１３では、映像表示制御部６３の撮影方向判定部６３１によって、前記ステップＳ１２で判定された撮影ユニット２０の撮影方向の反転が前記所定の第１時間内（判定時間Ａ内）であるか否かが、判定される。この判定の結果、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内である場合（Ｙ）には、ステップＳ２１の処理が実行され、一方、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内ではない場合（Ｎ）には、上述のステップＳ１４の処理が実行される。
【０１１０】
ここで、この撮影ユニット２０の撮影方向の反転が前記所定の第１時間内であるか否かの判定は、例えば、前回の撮影方向の反転を判定した時刻と今回の撮影方向の反転を判定した時刻とを比較することによって判断され、これら時刻の差が前記所定の第１時間内である場合には、撮影方向判定部６３１によって、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内であると判断され、一方、これら時刻の差が前記所定の第１時間内ではない場合には、撮影方向判定部６３１によって、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内ではないと判断される。なお、前回の撮影方向の反転を判定した時刻が記憶されていない場合には、撮影装置１の起動後における最初の反転であり、前記所定の第１時間内ではない場合と判断すればよい。
【０１１１】
続いて、ステップＳ２１では、映像表示制御部６３の観察制限制御部６３２によって、前記所定の第２時間（観察制限時間Ｂ）を計時するためのタイマ（例えばソフトウェアタイマ）が０にリセット（初期化）され、その後に、計時がスタート（開始）される。
【０１１２】
続いて、ステップＳ２２では、観察制限制御部６３２によって、撮影ユニット２０によって撮影された被写体の映像を表示する場合において、その被写体の映像の切り換えを制限すべく、映像の切り換えを制限した被写体の映像の信号（表示用映像信号）が撮影装置１から遠隔支援装置５へ送信される。例えば、上述したように、同じフレームの映像の信号や、被写体を表示しない予め設定された所定のフレームの映像の信号が送信される。遠隔支援装置５では、この表示用映像信号が受信されると、表示用映像信号による、映像の切り換えを制限した映像が、ディスプレイ１６３ａに表示される。これによって指示者Ａは、作業者Ｗの撮影装置１を介して例えば作業対象物を観察している場合に、作業者Ｗ（装着者）がその頭部を高速に移動させたり揺らしたりした場合でもあっても、この被写体の映像の切り換えが制限されることによって、前記指示者Ａは、このカメラによって撮影された映像によって映像酔い等の気分が悪くなることが低減される。また、本実施形態では、この映像の切り換えを制限した被写体の映像は、撮影装置１の表示ユニット４０にも表示される。これによって作業者Ｗ（装着者）は、その頭部を高速に移動させたり揺らしたりした場合でもあっても、この撮影された映像によって映像酔い等の気分が悪くなることが低減される。
【０１１３】
続いて、ステップＳ２３において、ステップＳ１１と同様に、撮影ユニット２０の撮影方向の変化方向を検出すべく、角速度センサユニット３０によって作業者Ｗ（装着者）の頭部の角速度が検出され、この検出結果が制御ユニット６０へ出力され、制御ユニット６０で記憶される。
【０１１４】
続いて、ステップＳ２４では、ステップＳ１２と同様に、映像表示制御部６３の撮影方向判定部６３１によって、この検出結果が記憶され、この検出結果に基づいて検出された撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化したか否かが、判定される。この判定の結果、撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化した場合（Ｙ）には、この今回の撮影方向の反転を判定した時刻が記憶され、ステップＳ２５の処理が実行され、一方、撮影ユニット２０の撮影方向の変化方向が鉛直方向や水平方向に沿って略１８０度異なる方向へ変化していない場合（Ｎ）には、ステップＳ２６の処理が実行される。
【０１１５】
ステップＳ２５では、ステップＳ１３と同様に、映像表示制御部６３の撮影方向判定部６３１によって、前記ステップＳ２４で判定された撮影ユニット２０の撮影方向の反転が前記所定の第１時間内（判定時間Ａ内）であるか否かが、判定される。
【０１１６】
この判定の結果、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内である場合（Ｙ）には、ステップＳ２１の処理が実行される。したがって、この場合（Ｙ）では、ステップＳ２１以下の処理の実行によって、被写体の映像の切り換え制限（観察制限）が続行されるとともに、前記所定の第２時間（観察制限時間Ｂ）の計時が再スタートされる。
【０１１７】
一方、このステップＳ２５における判定の結果、撮影ユニット２０の撮影方向の反転が前記所定の第１時間内ではない場合（Ｎ）には、上述のステップＳ２６の処理が実行される。
【０１１８】
ステップＳ２６では、映像表示制御部６３の観察制限制御部６３２によって、前記タイマがタイムアウトしているか否かが、判定される。すなわち、被写体の映像の切り換えを制限した時刻から前記所定の第２時間（観察制限時間Ｂ）が経過したか否かが、判定される。
【０１１９】
この判定の結果、タイマがタイムアウトしていない場合（Ｎ）では、ステップＳ２２の処理が実行される。したがって、この場合（Ｙ）では、ステップＳ２２以下の処理の実行によって、被写体の映像の切り換え制限（観察制限）が続行される。
【０１２０】
一方、このステップＳ２６における判定の結果、タイマがタイムアウトしている場合（Ｙ）では、ステップＳ１４の処理が実行される。したがって、この場合（Ｙ）では、ステップＳ１４以下の処理の実行によって、被写体の映像の切り換え制限（観察制限）が解除される。
【０１２１】
このように動作する遠隔作業支援システムＳおよび撮影装置１では、例えば、図６（Ａ）に示すように、撮影ユニット２０の撮影方向が時刻ｔ１１で第１の反転（１）が起こり、続いて、時刻ｔ１２で第２の反転（２）が起こり、そして、時刻ｔ１３で第３の反転が起こる場合であって、第１の反転（１）から第２の反転（２）が起こる時間間隔Ｔ１（＝ｔ１２−ｔ１１）および第２の反転（２）から第３の反転（３）が起こる時間間隔Ｔ２（＝ｔ１３−ｔ１２）が前記所定の第１時間（判定時間Ａ）よりも長い第１態様では、上述したステップＳ１１、ステップＳ１２、ステップＳ１３、ステップＳ１４およびステップＳ１５の各処理が繰り返されることとなり、図６（Ｂ）に示すように、被写体の映像は、その切り換えに制限を受けず、指示者Ａや作業者Ｗは、被写体の映像を観察し続けることになる。
【０１２２】
また例えば、このように動作する遠隔作業支援システムＳおよび撮影装置１では、例えば、図７（Ａ）に示すように、撮影ユニット２０の撮影方向が時刻ｔ２１で第１の反転（１）が起こり、そして、時刻ｔ２２で第２の反転（２）が起こる場合であって、第１の反転（１）から第２の反転（２）が起こる時間間隔Ｔ１（＝ｔ２２−ｔ２１）が前記所定の第１時間（判定時間Ａ）よりも短い第２態様では、上述したステップＳ１１、ステップＳ１２、ステップＳ１３、ステップＳ１４およびステップＳ１５の各処理が実行された後に、ステップＳ１１、ステップＳ１２およびステップＳ１３の各処理が実行され、続いて、ステップＳ２１ないしステップＳ２６の各処理が実行され、そして、ステップＳ１４およびステップＳ１５の各処理が実行されることとなり、図７（Ｂ）に示すように、被写体の映像は、第２の反転（２）でその反転時刻ｔ２２から被写体の映像の切り換えに制限を受け、指示者Ａや作業者Ｗは、前記反転時刻ｔ２２から観察制限時間Ｂが経過するまで、映像の切り換え制限された映像を観察することになり、前記反転時刻ｔ２２から観察制限時間Ｂが経過すると、映像の切り換え制限が解除され、被写体の映像が通常通りに復帰する。
【０１２３】
また例えば、このように動作する遠隔作業支援システムＳおよび撮影装置１では、例えば、図８（Ａ）に示すように、撮影ユニット２０の撮影方向が時刻ｔ３１で第１の反転（１）が起こり、続いて、時刻ｔ３２で第２の反転（２）が起こり、そして、時刻ｔ３３で第３の反転が起こる場合であって、第１の反転（１）から第２の反転（２）が起こる時間間隔Ｔ１（＝ｔ３２−ｔ３１）および第２の反転（２）から第３の反転（３）が起こる時間間隔Ｔ２（＝ｔ３３−ｔ３２）が前記所定の第１時間（判定時間Ａ）よりも短い第３態様では、上述したステップＳ１１、ステップＳ１２、ステップＳ１３、ステップＳ１４およびステップＳ１５の各処理が実行された後に、ステップＳ１１、ステップＳ１２およびステップＳ１３の各処理が実行され、続いて、ステップＳ２１ないしステップＳ２５の各処理が実行され、そして、再び、ステップＳ２１ないしステップＳ２５の各処理が実行された後に、ステップＳ２６、ステップＳ１４およびステップＳ１５の各処理が実行されることとなり、被写体の映像は、第２の反転（２）でその反転時刻ｔ２２から被写体の映像の切り換えに制限を受け、前記反転時刻ｔ３２から観察制限時間Ｂが経過する前に、再び、第３の反転（３）でその反転時刻ｔ３３から被写体の映像の切り換えに制限を受け、前記反転時刻ｔ３２から前記反転時刻ｔ３３を超えて、さらに、前記反転時刻ｔ３３から観察制限時間Ｂが経過するまで、被写体の映像の切り換えに制限を受け続けることになる。このため、指示者Ａや作業者Ｗは、前記反転時刻ｔ３２を起点に、前記反転時刻ｔ３３から観察制限時間Ｂが経過するまでの時間帯、映像の切り換え制限された映像を観察することになり、前記反転時刻ｔ３３から観察制限時間Ｂが経過すると、映像の切り換え制限が解除され、被写体の映像が通常通りに復帰する。
【０１２４】
このように本実施形態の遠隔作業支援システムＳおよび撮影装置１では、撮影ユニット２０の撮影方向の変化を検出するべく、頭部の角速度が角速度センサユニット３０で検出され、その検出された撮影ユニット２０の撮影方向の変化に基づいて遠隔支援装置５の出力装置１６３や撮影装置１の表示ユニット４０に表示される被写体の映像の切り換えが制限される。このため、本実施形態の遠隔作業支援システムＳおよび撮影装置１は、この被写体の映像の切り換えが制限されることによって、被写体の映像が例えばコマ落としや略静止画等のように表示され、あるいは例えば非表示とされ、映像酔い等の気分が悪くなることを低減することができる。
【０１２５】
また、本実施形態では、撮影ユニット２０の撮像素子２２に、ＣＭＯＳ型イメージセンサが用いられている。上述したように、ＣＭＯＳ型イメージセンサは、各画素の画像信号を順次に走査することによって得ている。このため、頭部が高速に移動したり揺れたりした場合では、映像が歪みやすく、これにより、映像酔い等の気分が悪くなることが、一層、発生しやすい。しかしながら、本実施形態では、上述したように、頭部の角速度が角速度センサユニット３０で検出され、その検出された頭部の角速度に基づいて撮影ユニット２０の撮影方向の変化が検出され、この検出された撮影ユニット２０の撮影方向の変化に基づいて表示用の被写体の映像におけるその切り換えが制限されるので、撮影ユニット２０の撮像素子２２がＣＭＯＳ型イメージセンサであっても、表示する場合に、この撮影ユニット２０によって撮影された映像により、映像酔い等の気分が悪くなることを低減することができる。このように本実施形態の遠隔作業支援システムＳおよび撮影装置１は、撮影ユニット２０の撮像素子２２がＣＭＯＳ型イメージセンサである場合に、効果的である。
【０１２６】
また、本実施形態では、表示ユニット４０は、撮影ユニット２０の電子ファインダとして機能し、撮影ユニット２０とともに装着ユニット１０に取り付けられている。このような構成であっても、本実施形態では、頭部の角速度が角速度センサユニット３０で検出され、その検出された頭部の角速度に基づいて撮影ユニット２０の撮影方向の変化が検出され、この検出された撮影ユニット２０の撮影方向に基づいて表示用の被写体の映像におけるその切り換えが制限されるので、作業者Ｗ（装着者）において、この撮影ユニット２０によって撮影された映像により、映像酔い等の気分が悪くなることを低減することができる。また、本実施形態のように表示ユニット４０が撮影ユニット２０の電子ファインダとして機能し、表示ユニット４０と撮影ユニット２０とが一体的に構成されている場合に、効果的である。
【０１２７】
また、本実施形態では、表示ユニット４０の接眼光学系４１が装着ユニット１０の透明部材１４Ｒに取り付けられている。このような構成では、透明部材１４Ｒが被写体の光像を所定の透過率で透過するとともに、表示ユニット４０の接眼光学系４１がこの透明部材１４Ｒに設けられた表示ユニット４０の接眼光学系４１によって、被写体の映像を被写体の光像に重ねて表示することができる。このため、このような構成では、作業者Ｗ（装着者）の視界を損なうことが低減され、作業者Ｗは、作業者Ｗの視界にある外界と表示ユニット４０の表示とを一緒に見ることができる。したがって、本実施形態の撮影装置１は、作業支援に効果的である。
【０１２８】
なお、本実施形態では、撮影装置１は、映像を表示することができるように表示ユニット４０を備えているが、指示者Ａの指示を音声のみで作業者Ｗに提供する場合には、表示ユニット４０は、備えていなくてもよい。
【０１２９】
また、本実施形態では、角速度センサユニット３０は、鉛直方向角速度センサ部３１および水平方向角速度センサ部３２を備え、映像表示制御部６３は、角速度センサユニット３０の出力に基づいて、撮影ユニット２０の撮影方向が所定の第１時間内に鉛直方向に沿って往復移動した場合および撮影ユニット２０の撮影方向が所定の第１時間内に水平方向に沿って往復移動した場合のうちの少なくとも一方の場合に、被写体の映像の切り換えを制限するものであったが、角速度センサユニット３０は、鉛直方向角速度センサ部３１のみを備え、映像表示制御部６３は、角速度センサユニット３０の出力に基づいて、撮影ユニット２０の撮影方向が所定の第１時間内に鉛直方向に沿って往復移動した場合に、被写体の映像の切り換えを制限するものであってもよく、また、角速度センサユニット３０は、水平方向角速度センサ部３２のみを備え、映像表示制御部６３は、角速度センサユニット３０の出力に基づいて、撮影ユニット２０の撮影方向が所定の第１時間内に水平方向に沿って往復移動した場合に、被写体の映像の切り換えを制限するものであってもよい。
【０１３０】
特に、角速度センサユニット３０が鉛直方向角速度センサ部３１のみを備える場合に、この鉛直方向角速度センサ部３１として、水平センサを用いることで、比較的簡単な構造で安価に、撮影方向における鉛直方向に沿った往復移動を検出するためのセンサを構成することが可能となる。この水平センサは、振り子式のセンサであり、振り子（一方端に錘が吊り下げられるとともに周方向に変位可能に他方端が支持された線材）の傾きで鉛直面内における撮影方向を検出することができる。
【０１３１】
また、本実施形態では、図４に破線で示すように、撮影ユニット２０によって撮影され、映像表示制御部６３の映像表示制御６３によって被写体の映像の切り換えを制限する前の前記被写体の映像と制限した区間情報を併せて記録する記録部７０をさらに備えて構成されてもよい。記録部７０は、例えば、ハードディスク、フラッシュメモリ等のメモリカード等を備えて構成される。本実施形態では、画像メモリ６１には、被写体の映像の切り換えを制限する前の被写体の映像が記憶されているので、このような構成を容易に実現することが可能である。このように構成することによって、被写体の映像の切り換えを制限する前の被写体の映像が記録部７０に記録されるので、頭部が高速に移動したり揺れたりした場合でもあっても、より正確な被写体の映像を記録することができる。また、切り換え制限した区間情報を併せて記録することで、後日、保存された映像を観察する際に、必要に応じて制限部分をスキップし、映像酔い等が発生することなく観察することも選択可能となる。
【０１３２】
さらに、この撮影装置１は、この切り換え制限後の被写体の映像だけでなく、この被写体の映像の切り換え制限前の被写体の映像をネットワークＩＦ部６８を用いて撮影装置１から遠隔支援装置５へ送信するように構成され、支援記録サーバＰＣ７は、この切り換え制限前のこの被写体の映像を記憶して記録するように構成されてもよい。切り換え制限前の被写体の映像は、例えば、所定時間纏めて適宜なタイミングで送信される。このように構成することによって、被写体の映像の切り換えを制限する前の被写体の映像が支援記録サーバＰＣ７に記録されるので、頭部が高速に移動したり揺れたりした場合でもあっても、より正確な被写体の映像を記録することができる。
【０１３３】
また、上述の実施形態では、撮影ユニット２０の撮影方向の変化は、角速度センサユニット３０で検出した装着者（作業者Ｗ）の頭部の角速度に基づいて検出されたが、撮影ユニット２０によって撮影された被写体の映像のうちの２枚の画像間における対応点を対応点探索処理によって抽出することで、検出されてもよい。
【０１３４】
図９は、実施形態にかかる遠隔作業支援システムにおける撮影装置の他の電気的な構成を示すブロック図である。このような遠隔作業支援システムＳにおける撮影装置１Ａは、図９に示すように、図略の装着ユニット１０と、撮影ユニット２０と、表示ユニット４０と、音入出力ユニット５０と、制御ユニット６０Ａとを備えて構成される。これら装着ユニット１０、撮影ユニット２０、表示ユニット４０および音入出力ユニット５０は、図１ないし図８を用いて説明した上記実施形態の撮影装置１における装着ユニット１０、撮影ユニット２０、表示ユニット４０および音入出力ユニット５０と同様であるので、その説明を省略する。
【０１３５】
そして、制御ユニット６０Ａは、撮影装置１Ａの全体制御を司る回路であり、画像メモリ６１と、制御部６２Ａと、ＶＲＡＭ６４と、音入力処理部６５と、音出力処理部６６と、電源スイッチ６７と、ネットワークＩＦ部６８とを備えて構成される。これら画像メモリ６１、ＶＲＡＭ６４、音入力処理部６５、音出力処理部６６、電源スイッチ６７およびネットワークＩＦ部６８は、図１ないし図８を用いて説明した上記実施形態の撮影装置１の制御ユニット６０における画像メモリ６１、ＶＲＡＭ６４、音入力処理部６５、音出力処理部６６およびネットワークＩＦ部６８と同様であるので、その説明を省略する。
【０１３６】
制御部６２Ａは、撮影装置１Ａの各部を当該機能に応じて制御する回路であり、例えば、マイクロコンピュータ等によって構成される。制御部６２Ａは、図１ないし図８を用いて説明した上記実施形態の撮影装置１における制御部６２の機能に加え、さらに、機能的に、撮影方向検出部８０を備えている。この撮影方向検出部８０は、対応点探索部であって、撮影ユニット２０によって撮影された被写体の映像のうちの２枚の画像間における対応点を対応点探索処理によって抽出することで、撮影ユニット２０の撮影方向を検出するものである。
【０１３７】
この対応点探索処理による撮影ユニット２０の撮影方向の検出では、撮影方向検出部８０は、次のように動作する。まず、撮影ユニット２０によって撮影された被写体の映像のうちの２枚の画像が抽出される。例えば、撮影ユニット２０によって撮影された被写体の映像における今回のフレームにおける撮影ユニット２０の撮影方向を検出する場合には、今回のフレームと、今回のフレームから予め設定された所定のフレームだけ時間的に遡った過去のフレームとが抽出される。例えば、フレームレートが２４ｆｐｓである場合に、１秒間に、３回、撮影ユニット２０の撮影方向を検出する場合では、今回のフレームと今回のフレームより８フレームだけ時間的に前のフレームとが取り出される。
【０１３８】
次に、今回のフレームにおける画像の中から予め設定された所定の特徴点が設定される。この所定の特徴点は、例えば、画像における予め設定された特定の位置（例えば画像の中央位置等）であっても良く、また例えば、画像の中から予め設定された特定の対象物であっても良い。前記特定の対象物は、例えば、前記特定の対象物の画像を予め記憶して登録しておき、パターンマッチングによって前記画像の中から検索される。また、この所定の特徴点は、１個であっても良く、また複数であってもよい。処理時間を短縮する観点からは、この所定の特徴点は、１個であることが好ましく、また、撮影ユニット２０の撮影方向をより正確に検出する観点からは、この所定の特徴点は、複数であることが好ましい。また、この所定の特徴点は、複数の画素から構成されてよい。
【０１３９】
次に、今回のフレームの画像における前記所定の特徴点が過去のフレームの画像におけるいずれの位置に存在するかが、マッチング処理によって探索される。より具体的には、前記所定の特徴点を構成する画素の画素値と略一致する画素値を持つ画素が、過去のフレームの画像から探索され、過去のフレームにおいて、前記略一致する画素値を持つ画素の位置が、今回のフレームの画像における前記所定の特徴点に対応する過去のフレームの画像における位置とされる。
【０１４０】
そして、今回のフレームの画像における前記所定の特徴点の位置と、前記所定の特徴点に対応する過去のフレームの画像における画素の位置とから、撮影ユニット２０の撮影方向が求められ、撮影ユニット２０の撮影方向が検出される。
【０１４１】
このように構成することによって、遠隔作業支援システムＳおよび撮影装置１Ａは、対応点探索処理の画像処理で撮影ユニット２０の撮影方向の変化を検出するので、例えば角速度センサユニット３０のようなセンサ部品を、別途に必要せず、センサレスでソフトウェアによって撮影方向検出部を構成することが可能となる。
【０１４２】
本発明を表現するために、上述において図面を参照しながら実施形態を通して本発明を適切且つ十分に説明したが、当業者であれば上述の実施形態を変更および／または改良することは容易に為し得ることであると認識すべきである。したがって、当業者が実施する変更形態または改良形態が、請求の範囲に記載された請求項の権利範囲を離脱するレベルのものでない限り、当該変更形態または当該改良形態は、当該請求項の権利範囲に包括されると解釈される。
【符号の説明】
【０１４３】
Ｓ 遠隔作業支援システム
１、１Ａ 撮影装置
５ 遠隔支援装置
６ メインサーバコンピュータ装置
７ 支援記録サーバコンピュータ装置
８ コンテンツサーバコンピュータ装置
１０ 装着ユニット
２０ 撮影ユニット
３０ 角速度センサユニット
３１ 鉛直方向角速度センサ部
３２ 水平方向角速度センサ部
４０ 表示ユニット
４１ 接眼光学系
４１ａ 光学プリズム
４１ｂ 反射部
５０ 音入出力ユニット
６０、６０Ａ 制御ユニット
６３ 映像表示制御部
６３１ 撮影方向判定部
６３２ 観察制限制御部
７０ 記録部
８０ 撮影方向検出部
【特許請求の範囲】
【請求項１】
頭部に装着する装着部と、被写体を撮影する撮影部とを備える頭部装着式撮影部と、
前記撮影部の撮影方向の変化を検出する撮影方向検出部と、
前記撮影方向検出部で検出された前記撮影部の撮影方向の変化が、所定の第１時間内において所定の方向に沿う往復移動の場合に、前記撮影部によって撮影された被写体の映像を表示する場合における前記被写体の映像の切り換えを制限する映像表示制御部とを備えること
を特徴とする撮影装置。
【請求項２】
前記往復移動は、前記撮影方向検出部で検出された前記撮影部の撮影方向が前記所定の方向に沿って略１８０度異なる方向へ２回以上変化することであること
を特徴とする請求項１に記載の撮影装置。
【請求項３】
前記所定の第１時間は、０．３秒〜３秒であること
を特徴とする請求項１または請求項２に記載の撮影装置。
【請求項４】
前記映像表示制御部は、所定の第２時間の間、前記被写体の映像におけるフレームを更新しないことによって、前記被写体の映像の切り換えを制限すること
を特徴とする請求項１ないし請求項３のいずれか１項に記載の撮影装置。
【請求項５】
前記映像表示制御部は、所定の第２時間の間、前記被写体の映像を表示しないことによって、前記被写体の映像の切り換えを制限すること
を特徴とする請求項１ないし請求項３のいずれか１項に記載の撮影装置。
【請求項６】
前記所定の第２時間は、前記第１時間よりも長く、かつ、１秒〜５秒であること
を特徴とする請求項１ないし請求項５のいずれか１項に記載の撮影装置。
【請求項７】
前記所定の方向は、鉛直方向であること
を特徴とする請求項１ないし請求項６のいずれか１項に記載の撮影装置。
【請求項８】
前記所定の方向は、水平方向であること
を特徴とする請求項１ないし請求項７のいずれか１項に記載の撮影装置。
【請求項９】
前記撮影方向検出部は、水平センサを備えること
を特徴とする請求項１ないし請求項７のいずれか１項に記載の撮影装置。
【請求項１０】
前記撮影方向検出部は、角速度センサを備えること
を特徴とする請求項１ないし請求項８のいずれか１項に記載の撮影装置。
【請求項１１】
前記撮影方向検出部は、前記撮影部によって撮影された被写体の映像のうちの２枚の画像間における対応点を対応点探索処理によって抽出することで、前記撮影部の撮影方向を検出する対応点探索部を備えること
を特徴とする請求項１ないし請求項８のいずれか１項に記載の撮影装置。
【請求項１２】
前記頭部装着式撮影部の撮影部は、前記被写体の光学像を電気的な信号に変換する撮像素子と、前記撮像素子の受光面上に前記被写体の光学像を形成する光学系とを備え、
前記撮像素子は、ＣＭＯＳ型イメージセンサであること
を特徴とする請求項１ないし請求項１１のいずれか１項に記載の撮影装置。
【請求項１３】
前記頭部装着式撮影部の撮影部によって撮影された被写体の映像を表示する表示部をさらに備えること
を特徴とする請求項１ないし請求項１２の何れか１項に記載の撮影装置。
【請求項１４】
前記表示部は、前記頭部装着式撮影部に備えられていること
を特徴とする請求項１３に記載の撮影装置。
【請求項１５】
音を音信号に変換する音入力部と、音信号を音に変換する音出力と、通信信号を送受信する通信部と、前記通信部の送受信を制御する通信制御部とをさらに備え、
前記通信制御部は、前記音入力部によって変換された音信号を前記通信部に送信させるとともに、音を出力させるべく、前記通信部によって受信された音信号を前記音出力部へ出力すること
を特徴とする請求項１ないし請求項１４のいずれか１項に記載の撮影装置。
【請求項１６】
撮影装置と、通信網を介して前記撮影装置と通信可能に接続される遠隔作業支援装置とを備える遠隔作業支援システムであって、
前記撮影装置は、請求項１ないし請求項１５のいずれか１項に記載の撮影装置であり、
前記遠隔作業支援装置は、前記通信網を介して受信され、前記頭部装着式撮影部の撮影部によって撮影された被写体の映像を表示する第２表示部と、指示者の指示を受け付けて該指示を前記通信網を介して前記撮影装置へ送信する指示受付部とを備えること
を特徴とする遠隔作業支援システム。
【請求項１】
頭部に装着する装着部と、被写体を撮影する撮影部とを備える頭部装着式撮影部と、
前記撮影部の撮影方向の変化を検出する撮影方向検出部と、
前記撮影方向検出部で検出された前記撮影部の撮影方向の変化が、所定の第１時間内において所定の方向に沿う往復移動の場合に、前記撮影部によって撮影された被写体の映像を表示する場合における前記被写体の映像の切り換えを制限する映像表示制御部とを備えること
を特徴とする撮影装置。
【請求項２】
前記往復移動は、前記撮影方向検出部で検出された前記撮影部の撮影方向が前記所定の方向に沿って略１８０度異なる方向へ２回以上変化することであること
を特徴とする請求項１に記載の撮影装置。
【請求項３】
前記所定の第１時間は、０．３秒〜３秒であること
を特徴とする請求項１または請求項２に記載の撮影装置。
【請求項４】
前記映像表示制御部は、所定の第２時間の間、前記被写体の映像におけるフレームを更新しないことによって、前記被写体の映像の切り換えを制限すること
を特徴とする請求項１ないし請求項３のいずれか１項に記載の撮影装置。
【請求項５】
前記映像表示制御部は、所定の第２時間の間、前記被写体の映像を表示しないことによって、前記被写体の映像の切り換えを制限すること
を特徴とする請求項１ないし請求項３のいずれか１項に記載の撮影装置。
【請求項６】
前記所定の第２時間は、前記第１時間よりも長く、かつ、１秒〜５秒であること
を特徴とする請求項１ないし請求項５のいずれか１項に記載の撮影装置。
【請求項７】
前記所定の方向は、鉛直方向であること
を特徴とする請求項１ないし請求項６のいずれか１項に記載の撮影装置。
【請求項８】
前記所定の方向は、水平方向であること
を特徴とする請求項１ないし請求項７のいずれか１項に記載の撮影装置。
【請求項９】
前記撮影方向検出部は、水平センサを備えること
を特徴とする請求項１ないし請求項７のいずれか１項に記載の撮影装置。
【請求項１０】
前記撮影方向検出部は、角速度センサを備えること
を特徴とする請求項１ないし請求項８のいずれか１項に記載の撮影装置。
【請求項１１】
前記撮影方向検出部は、前記撮影部によって撮影された被写体の映像のうちの２枚の画像間における対応点を対応点探索処理によって抽出することで、前記撮影部の撮影方向を検出する対応点探索部を備えること
を特徴とする請求項１ないし請求項８のいずれか１項に記載の撮影装置。
【請求項１２】
前記頭部装着式撮影部の撮影部は、前記被写体の光学像を電気的な信号に変換する撮像素子と、前記撮像素子の受光面上に前記被写体の光学像を形成する光学系とを備え、
前記撮像素子は、ＣＭＯＳ型イメージセンサであること
を特徴とする請求項１ないし請求項１１のいずれか１項に記載の撮影装置。
【請求項１３】
前記頭部装着式撮影部の撮影部によって撮影された被写体の映像を表示する表示部をさらに備えること
を特徴とする請求項１ないし請求項１２の何れか１項に記載の撮影装置。
【請求項１４】
前記表示部は、前記頭部装着式撮影部に備えられていること
を特徴とする請求項１３に記載の撮影装置。
【請求項１５】
音を音信号に変換する音入力部と、音信号を音に変換する音出力と、通信信号を送受信する通信部と、前記通信部の送受信を制御する通信制御部とをさらに備え、
前記通信制御部は、前記音入力部によって変換された音信号を前記通信部に送信させるとともに、音を出力させるべく、前記通信部によって受信された音信号を前記音出力部へ出力すること
を特徴とする請求項１ないし請求項１４のいずれか１項に記載の撮影装置。
【請求項１６】
撮影装置と、通信網を介して前記撮影装置と通信可能に接続される遠隔作業支援装置とを備える遠隔作業支援システムであって、
前記撮影装置は、請求項１ないし請求項１５のいずれか１項に記載の撮影装置であり、
前記遠隔作業支援装置は、前記通信網を介して受信され、前記頭部装着式撮影部の撮影部によって撮影された被写体の映像を表示する第２表示部と、指示者の指示を受け付けて該指示を前記通信網を介して前記撮影装置へ送信する指示受付部とを備えること
を特徴とする遠隔作業支援システム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１１−１０９４６３（Ｐ２０１１−１０９４６３Ａ）
【公開日】平成２３年６月２日（２０１１．６．２）
【国際特許分類】
【出願番号】特願２００９−２６２９６８（Ｐ２００９−２６２９６８）
【出願日】平成２１年１１月１８日（２００９．１１．１８）
【出願人】（３０３０００４０８）コニカミノルタオプト株式会社 (3,255)
【Ｆターム（参考）】
【公開日】平成２３年６月２日（２０１１．６．２）
【国際特許分類】
【出願日】平成２１年１１月１８日（２００９．１１．１８）
【出願人】（３０３０００４０８）コニカミノルタオプト株式会社 (3,255)
【Ｆターム（参考）】
[ Back to top ]