説明

映像信号とセンサー信号の同期化システム及び方法

本発明は、カメラから入力される映像信号と、それぞれの映像信号に対応するセンサー信号に対して、センサー装置及び中央制御装置に同期用時計がそれぞれ内蔵されており、同期化装置でそれぞれの装置に同期信号を伝送して同期用時計を同期化させた後、センサー装置で獲得したセンサー信号に取得時間を付加して、中央制御装置を経由してコンピューター装置に伝送し、中央制御装置がカメラからコンピューター装置に伝送される映像信号の取得数に取得時間を付加してコンピューター装置に伝送することで、コンピューター装置が取得時間情報に基づいて映像信号とセンサー信号の同期化を行うことができる映像信号とセンサー信号の同期化システム及び方法に関する。本発明による映像信号とセンサー信号の同期化システムは、 被写体を撮影して映像信号を獲得し、前記獲得した映像信号を出力するカメラ装置と、第1同期用時計が内蔵されており、前記映像信号に対応したセンサー信号をセンシング動作によって生成し、前記生成されたセンサー信号に前記第1同期用時計による取得時間情報を付加して出力するセンサー装置と、第2同期用時計が内蔵されており、前記センサー装置から前記取得時間情報の付加されたセンサー信号を受信してコンピューター装置に伝送するように制御し、前記カメラ装置からコンピューター装置に伝送される映像信号に対する取得数を継続的に累積して計算し、前記取得数に前記第2同期用時計による取得時間情報を付加してコンピューター装置に伝送または保存した後、分析の際に活用して同期化を検証する中央制御装置と、基準時計を内蔵し、前記第1同期用時計と前記第2同期用時計の同期のための基準時間を所定の間隔で前記センサー装置及び前記中央制御装置に同時に伝送する同期化装置と、前記中央制御装置から前記取得時間情報の付加されたセンサー信号を受信し、前記カメラ装置から映像信号を受信してそれぞれの信号の時間情報を確認し、それぞれの信号を同じ時間帯に再構成して前記映像信号と前記センサー信号を同期化するコンピューター装置と、を備える。本発明によれば、周辺環境によって収集された映像信号及びセンサー信号の同期性を確保することができる。また、多チャンネルであり、高速である映像信号とそれに対応したセンサー信号の同期化を通じてユーザーに向上したサービスを提供することができる。さらに、映像信号及びセンサー信号を獲得して有線または無線で伝送する通信手段に関係なく、両信号の同期化を容易に具現することができ、それにより、映像信号とセンサー信号を正確かつ便利に分析することができる。

【発明の詳細な説明】
【技術分野】
【0001】
本発明は、有無線環境で多チャンネル映像信号とセンサー信号の分析の際に、映像信号とセンサー信号を同期化するシステム及び方法に係り、さらに詳細には、カメラから入力される映像信号と、それぞれの映像信号に対応するセンサー信号に対して、センサー装置及び中央制御装置に同期用時計がそれぞれ内蔵されており、同期化装置がそれぞれの装置に同期信号を伝送して同期用時計を同期化させた後、センサー装置で獲得したセンサー信号に取得時間を付加して、中央制御装置を経由してコンピューター装置に伝送し、中央制御装置がカメラからコンピューター装置に伝送される映像信号の取得数に取得時間を付加してコンピューター装置に伝送することで、コンピューター装置が取得時間情報に基づいて映像信号とセンサー信号の同期化を行うことができる映像信号とセンサー信号の同期化システム及び方法に関する。
【背景技術】
【0002】
最近、被写体を撮影して映像信号を獲得するカメラを、ユーザーが携帯する携帯電話やノート・パソコンに採用して使用している。また、カメラによって獲得した映像信号を、例えば、洋弓分析器のようなゲーム機などに活用する装置が登場している。
【0003】
ゲーム装置などには、周辺の状況をセンシングする、例えば、風向きや風速をセンシングするか、または張力、勾配、温度、圧力などをセンシングするセンサーが備えられている。
【0004】
ところが、カメラから獲得した映像信号とセンサーを通じてセンシングしたセンサー信号とをマッチしてユーザーに提供すべき場合に、サービスの品質のためには両信号の同期化が非常に重要である。
【0005】
しかし、最小2チャンネル以上の多チャンネルであり、高速であり、さらに無線通信で映像信号やセンサー信号を伝送すべき場合に、周辺環境によって収集された個別信号の同期性を確保することが非常に難しいという問題点がある。
【発明の概要】
【発明が解決しようとする課題】
【0006】
前述の問題点を解決するための本発明の目的は、カメラから入力される映像信号と、それぞれの映像信号に対応するセンサー信号に対して、センサー装置及び中央制御装置に同期用時計がそれぞれ内蔵されており、同期化装置でそれぞれの装置に同期信号を伝送して同期用時計を同期化させた後、センサー装置で獲得したセンサー信号に取得時間を付加して、中央制御装置を経由してコンピューター装置に伝送し、中央制御装置がカメラからコンピューター装置に伝送される映像信号の取得数に取得時間を付加してコンピューター装置に伝送することで、コンピューター装置が取得時間情報に基づいて映像信号とセンサー信号の同期化を行うことができる映像信号とセンサー信号の同期化システム及び方法、同期化装置及びその映像信号とセンサー信号の同期化方法、及びコンピューター装置及びその映像信号とセンサー信号の同期化方法を提供するところにある。
【課題を解決するための手段】
【0007】
前述の目的を達成するための本発明による映像信号とセンサー信号の同期化システムは、被写体を撮影して映像信号を獲得し、前記獲得した映像信号を出力するカメラ装置と、第1同期用時計が内蔵されており、前記映像信号に対応したセンサー信号をセンシング動作によって生成し、前記生成されたセンサー信号に前記第1同期用時計による取得時間情報を付加して出力するセンサー装置と、第2同期用時計が内蔵されており、前記センサー装置から前記取得時間情報の付加されたセンサー信号を受信してコンピューター装置に伝送するように制御し、前記カメラ装置からコンピューター装置に伝送される映像信号に対する取得数を継続的に累積して計算し、前記取得数に前記第2同期用時計による取得時間情報を付加してコンピューター装置に伝送または保存した後、分析の際に活用して同期化を検証する中央制御装置と、基準時計を内蔵し、前記第1同期用時計と前記第2同期用時計の同期のための基準時間を所定の間隔で前記センサー装置及び前記中央制御装置に同時に伝送する同期化装置と、前記中央制御装置から前記取得時間情報の付加されたセンサー信号を受信し、前記カメラ装置から映像信号を受信してそれぞれの信号の時間情報を確認し、それぞれの信号を同じ時間帯に再構成して前記映像信号と前記センサー信号を同期化するコンピューター装置と、を備える。
【0008】
また、前記センサー装置は、前記同期化装置から受信した基準時間に基づいて前記第1同期用時計を同期化した後、前記センシング動作によって生成された前記センサー信号に前記第1同期用時計による取得時間情報を付加して前記中央制御装置に伝送する。
【0009】
また、前記センサー装置は、前記同期化装置から受信した前記基準時間を前記第2同期用時計の時間と比較して誤差だけ補正し、補正された時間に基づいて前記センサー信号に取得時間情報を付加して前記中央制御装置に伝送する。
【0010】
また、前記センサー装置は、前記同期化装置から受信した前記基準時間を前記第1同期用時計の時間と比較して時間誤差を獲得し、前記獲得した時間誤差をそれぞれ前記コンピューター装置に伝送し、前記コンピューター装置は、前記センサー装置から受信した前記センサー信号に対して前記時間誤差だけ時間軸で補正する。
【0011】
また、前記同期化装置は、前記センサー装置に現在時間情報を要請して獲得し、前記獲得した現在時間情報を前記基準時間情報と比較して誤差範囲を確認し、校正が必要な場合は、校正時間情報及び時間校正命令を前記センサー装置に伝送する。
【0012】
そして、前記センサー装置は、前記時間校正命令を受信すれば、前記校正時間情報に基づいて校正を行い、第二のクロックで前記同期化装置から受信したクロックで同期化を行い、校正完了命令を前記同期化装置に伝送する。
【0013】
一方、前述の目的を達成するための本発明による同期化装置は、センサー装置、中央制御装置及びコンピューター装置と通信するための通信部と、前記センサー装置、中央制御装置及びコンピューター装置に同期化のための基準時間情報を伝送するために周波数信号を生成する周波数生成部(Oscillator)と、前記生成された周波数信号をクロック信号として生成する同期化クロック部と、前記生成されたクロック信号を前記基準時間情報として生成する基準時間モジュール部(Field Programmable Gate Array:FPGA)と、前記基準時間モジュール部にリアルタイムクロック(Real Time Clock:RTC)を提供するリアルタイムクロック部と、前記周波数生成部、前記同期化クロック部及び前記基準時間モジュール部を制御して前記基準時間情報を生成し、前記生成された基準時間情報が前記センサー装置、中央制御装置及びコンピューター装置に伝送されるように制御する制御部と、を備える。
【0014】
また、前記制御部は、前記センサー装置に現在時間情報を要請して獲得し、前記獲得した現在時間情報を前記基準時間情報と比較して誤差範囲を確認し、校正が必要な場合は、現在時間情報及び時間校正命令を前記センサー装置に伝送する。
【0015】
そして、前記センサー装置、中央制御装置及びコンピューター装置から入力されたアナログ信号をデジタル信号に変換するA/D変換部(Analog to Digital Converter)と、前記デジタル信号を出力するための出力部と、前記基準時間情報の生成動作、前記現在時間情報及び前記時間校正命令に関する伝送動作などを表示するためのディスプレイ部と、をさらに備える。
【0016】
一方、前述の目的を達成するための本発明によるセンサー装置は、勾配、張力、重量などをセンシングしたセンサー信号を生成するセンサーと、アナログ型の前記センサー信号をデジタル型のセンサーデータに変換する信号変換部と、前記センサーデータを同期化装置及び中央制御装置に伝送するための通信部と、前記同期化装置から提供された基準時間で同期化するための同期用時計部と、前記センサーデータを保存するためのメモリ部と、前記センサーデータが前記中央制御装置に伝送されるように制御し、前記同期化装置から前記基準時間を受信して同期化した後、前記センサーデータを取得した取得時間情報を前記センサーデータとともに前記中央制御装置に伝送する制御部と、周波数信号を生成して前記制御部に提供する周波数生成部と、前記制御部にリアルタイムクロックを提供するリアルタイムクロック部と、を備える。
【0017】
一方、前述の目的を達成するための本発明による映像信号とセンサー信号の同期化方法は、カメラ装置、センサー装置、中央制御装置、同期化装置及びコンピューター装置を備えるシステムの映像信号とセンサー信号の同期化方法であって、(a)前記同期化装置が同期化時間情報を前記センサー装置及び前記中央制御装置に伝送するステップと、(b)前記センサー装置及び前記中央制御装置が前記同期化時間情報に基づいてそれぞれに内蔵された同期用時計を同期させるステップと、(c)前記カメラ装置が映像信号を獲得して前記コンピューター装置に伝送するステップと、(d)前記センサー装置がセンサー信号を獲得して、前記内蔵された同期用時計による取得時間情報を付加して前記中央制御装置に伝送し、前記中央制御装置が前記取得時間情報の付加された映像信号を前記コンピューター装置に伝送するステップと、(e)前記コンピューター装置が前記内蔵された同期用時計及び前記取得時間情報に基づいて前記映像信号と前記センサー信号の同期化を行うステップと、を含む。
【0018】
そして、前記ステップ(e)は、前記コンピューター装置が前記内蔵された同期用時計の時間情報と前記取得時間情報とを比較して時間誤差を計算し、前記映像信号と前記センサー信号に対して時間軸で時間誤差だけ補正して前記映像信号と前記センサー信号を同期化する。
【0019】
一方、前述の目的を達成するための本発明による同期化装置の映像信号とセンサー信号を同期化する方法は、センサー装置、中央制御装置及びコンピューター装置を備える特定の装置と有線または無線で通信する同期化装置の映像信号とセンサー信号を同期化する方法であって、(a)前記特定の装置に現在時間情報を要請して現在時間情報を受信するステップと、(b)前記現在時間情報を基準時間情報と比較して誤差情報を獲得するステップと、(c)前記誤差情報を補正する時間情報を生成し、前記特定の装置に前記時間情報及び時間校正命令を伝送するステップと、(d)前記特定の装置から前記時間情報による時間校正で同期化が完了したことを知らせる同期完了命令を受信するステップと、を含む。
【0020】
一方、前述の目的を達成するための本発明によるコンピューター装置の映像信号とセンサー信号を同期化する方法は、カメラ装置、センサー装置、中央制御装置及び同期化装置と有線または無線で通信するコンピューター装置の映像信号とセンサー信号を同期化する方法であって、(a)前記同期化装置から基準時間情報を受信して内蔵された同期用時計を同期させるステップと、(b)前記カメラ装置から映像信号を受信し、前記中央制御装置から前記センサー装置によって獲得した取得時間情報を含むセンサー信号を受信するステップと、(c)前記内蔵された同期用時計及び前記取得時間情報に基づいて前記映像信号と前記センサー信号を同期化するステップと、を含む。
【0021】
また、前記ステップ(c)は、前記内蔵された同期用時計の時間情報と前記取得時間情報とを比較して時間誤差を計算し、前記映像信号と前記センサー信号に対して時間軸で前記時間誤差だけ補正して前記映像信号と前記センサー信号を同期化する。
【0022】
そして、前記ステップ(c)は、前記センサー装置及び前記中央制御装置から受信した時間誤差情報に基づいて、前記映像信号と前記センサー信号に対して時間軸で前記時間誤差情報だけ補正して前記映像信号と前記センサー信号を同期化する。
【発明の効果】
【0023】
本発明によれば、周辺環境によって収集された映像信号及びセンサー信号の同期性を確保することができる。
【0024】
また、多チャンネルであり、高速である映像信号とそれに対応したセンサー信号の同期化を通じてユーザーに向上したサービスを提供することができる。
【0025】
さらに、映像信号及びセンサー信号を獲得して有線または無線で伝送する通信手段に関係なく、両信号の同期化を容易に具現することができ、それにより、映像信号とセンサー信号を正確かつ便利に分析することができる。
【図面の簡単な説明】
【0026】
【図1】本発明の実施形態による映像信号とセンサー信号の同期化システムの構成を概略的に示す構成図であり、
【図2】本発明の実施形態による同期化装置の内部構成を概略的に示す構成図であり、
【図3】本発明の実施形態によるセンサー装置の内部構成を概略的に示す構成図であり、
【図4】本発明の実施形態による映像信号とセンサー信号の同期化方法を説明するための全体フローチャートであり、
【図5】本発明の実施形態による同期化装置の映像信号とセンサー信号を同期化する方法を説明するための動作フローチャートであり、
【図6】本発明の実施形態による同期化過程及びタイミング図を示し、
【図7】本発明の実施形態によるコンピューター装置の映像信号とセンサー信号を同期化する方法を説明するための動作フローチャートである。
【発明を実施するための形態】
【0027】
本発明の目的、技術的構成及びそれによる作用効果に関する詳細な事項は、本発明の明細書に添付された図面に基づく、以下の詳細な説明によってさらに明確に理解できるであろう。以下、添付図面を参照して本発明による実施形態を詳細に説明する。
【0028】
図1は、本発明の実施形態による映像信号とセンサー信号の同期化システムの構成を概略的に示す構成図である。
【0029】
図1に示すように、本発明による映像信号とセンサー信号の同期化システム100は、カメラ装置110、同期化装置120、複数のセンサー装置130ないし134、中央制御装置140及びコンピューター装置150を備える。
【0030】
カメラ装置110は、被写体を撮影して映像信号を獲得し、獲得した映像信号をコンピューター装置150に出力及び伝送する。
【0031】
同期化装置120は、基準時計を内蔵し、センサー装置130ないし134及び中央制御装置140の同期のための基準時間を所定の間隔でセンサー装置130ないし134及び中央制御装置140に同時に伝送する。
【0032】
複数のセンサー装置130ないし134は、第1同期用時計を内蔵しており、映像信号に対応したセンサー信号をセンシング動作によって生成し、生成されたセンサー信号に第1同期用時計による取得時間情報を付加して中央制御装置140に出力及び伝送する。
【0033】
ここで、複数のセンサー装置130ないし134は、例えば、矢の勾配や張力などをセンシングする洋弓分析器、ユーザーの足動作を前後左右にセンシングする足動作分析器(X−balance)、周辺の風向きや風速をセンシングする気候分析器などであってもよい。このとき、洋弓分析器の場合、張力や勾配などがセンサー信号になり、足動作分析器の場合、前、後、左、右などがセンサー信号になり、気候分析器の場合、風向きや風速などがセンサー信号になり得る。その他、センサーのセンシング特性によって温度、圧力などをセンサー信号とすることができる。
【0034】
中央制御装置140は、第2同期用時計を内蔵しており、センサー装置130ないし134から取得時間情報の付加されたセンサー信号を受信してコンピューター装置150に伝送するように制御する。
【0035】
また、中央制御装置140は、カメラ装置110からコンピューター装置150に伝送される映像信号に対する取得数を継続的に累積して計算し、取得数を第2同期用時計による時間情報とともに保存した後、分析の際に活用して同期化を検証する。
【0036】
コンピューター装置150は、中央制御装置140から取得時間情報の付加されたセンサー信号を受信し、カメラ装置110から映像信号を受信してそれぞれの信号の時間情報を確認し、それぞれの信号を同じ時間帯に再構成して映像信号とセンサー信号を同期化する。ここで、コンピューター装置は、デスクトップ(Desktop)型のPCであってもよく、移動可能なノート・パソコン型のPCであってもよい。
【0037】
また、センサー装置130ないし134は、同期化装置120から受信した基準時間に基づいて第1同期用時計を同期化した後、センシング動作によって生成されたセンサー信号に第1同期用時計による取得時間情報を付加して中央制御装置140に伝送する。
【0038】
また、センサー装置130ないし134は、同期化装置120から受信した基準時間を第1同期用時計の時間と比較して誤差だけ補正し、補正された時間に基づいてセンサー信号に取得時間情報を付加して中央制御装置140に伝送する。
【0039】
また、センサー装置130ないし134は、同期化装置120から受信した基準時間を第1同期用時計の時間と比較して時間誤差を獲得し、獲得した時間誤差をコンピューター装置150にそれぞれ伝送し、コンピューター装置150は、センサー装置130ないし134から受信したセンサー信号に対して時間誤差だけ時間軸で補正する。
【0040】
また、同期化装置120は、センサー装置130ないし134に現在時間情報を要請して獲得し、獲得した現在時間情報を基準時間情報と比較して誤差範囲を確認し、校正が必要な場合は、校正時間情報及び時間校正命令をセンサー装置130ないし134に伝送する。
【0041】
そして、センサー装置130ないし134が時間校正命令を受信すれば、受信した校正時間情報に基づいて校正を行い、第二のクロックで同期化装置120から受信したクロックで同期化を行い、同期(校正)完了命令を同期化装置120に伝送する。
【0042】
図2は、本発明の実施形態による同期化装置の内部構成を概略的に示す構成図である。
【0043】
図2に示すように、本発明による同期化装置120は、通信部210、周波数生成部220、同期化クロック部230、基準時間モジュール部240、リアルタイムクロック部250、制御部260、A/D変換部270、出力部280及びディスプレイ部290を備える。
【0044】
通信部210は、センサー装置130ないし134、中央制御装置140及びコンピューター装置150と通信する。
【0045】
周波数生成部220は、センサー装置130ないし134、中央制御装置140及びコンピューター装置150に同期化のための基準時間情報を伝送するために周波数信号を生成する。
【0046】
同期化クロック部230は、周波数生成部220によって生成された周波数信号をクロック信号として生成する。
【0047】
基準時間モジュール部240は、生成されたクロック信号を基準時間情報として生成する。
【0048】
リアルタイムクロック部250は、基準時間モジュール部240にリアルタイムクロックを提供する。
【0049】
制御部260は、周波数生成部220、同期化クロック部230及び基準時間モジュール部240を制御して基準時間情報を生成し、生成された基準時間情報がセンサー装置130ないし134、中央制御装置140及びコンピューター装置150に伝送されるように制御する。
【0050】
また、制御部260は、センサー装置130ないし134に現在時間情報を要請して獲得し、獲得した現在時間情報を基準時間情報と比較して誤差範囲を確認し、校正が必要な場合は、校正時間情報及び時間校正命令をセンサー装置130ないし134に伝送する。
【0051】
A/D変換部270は、センサー装置130ないし134、中央制御装置140及びコンピューター装置150から入力されたアナログ信号をデジタル信号に変換する。
【0052】
出力部280は、デジタル信号をポートを介して外部に出力する。
【0053】
ディスプレイ部290は、基準時間情報の生成動作、現在時間情報及び時間校正命令に関する伝送動作などを表示する。
【0054】
図3は、本発明の実施形態によるセンサー装置の内部構成を概略的に示す構成図である。
【0055】
図3に示すように、本発明によるセンサー装置130は、通信部310、センサー320、信号変換部330、同期用時計部340、メモリ部350、制御部360、周波数生成部370及びリアルタイムクロック部380を備える。
【0056】
通信部310は、センサーデータを同期化装置120及び中央制御装置140に伝送する。
【0057】
センサー320は、勾配、張力、重量などをセンシングしたセンサー信号を生成する。
【0058】
信号変換部330は、アナログ型のセンサー信号をデジタル型のセンサーデータに変換する。
【0059】
同期用時計部340は、同期化装置120から提供された基準時間で同期化する。
【0060】
メモリ部350はセンサーデータを保存する。
【0061】
制御部360は、センサーデータが中央制御装置140に伝送されるように制御し、同期化装置120から基準時間を受信して同期化した後、センサーデータを取得した取得時間情報をセンサーデータとともに中央制御装置140に伝送するように制御する。
【0062】
周波数生成部370は、周波数信号を生成して制御部460に提供する。
【0063】
リアルタイムクロック部380は、制御部460にリアルタイムクロックを提供する。
【0064】
図4は、本発明の実施形態による映像信号とセンサー信号の同期化方法を説明するための全体フローチャートである。
【0065】
図4に示すように、まず、同期化装置120は、同期化時間情報をセンサー装置130ないし134及び中央制御装置140に伝送する(S410)。
【0066】
したがって、センサー装置130ないし134及び中央制御装置140が同期化時間情報に基づいてそれぞれに内蔵された同期用時計を同期させる(S420)。
【0067】
次いで、カメラ装置110が被写体を撮影して獲得した映像信号をコンピューター装置150に伝送する(S430)。
【0068】
このとき、中央制御装置140は、カメラ装置110からコンピューター装置150に伝送される映像信号に対する取得数を継続的に累積して計算し、計算された取得数を第2同期用時計による時間情報とともに保存した後、分析の際に活用して同期化を検証する。
【0069】
また、センサー装置130ないし134は、センサー320を通じてセンサー信号を獲得し、取得時間情報を付加して中央制御装置140に伝送し、中央制御装置140は、取得時間情報の付加されたセンサー信号をコンピューター装置150に伝送する(S440)。
【0070】
ここで、映像信号は一般的に大容量であるため、中央制御装置140を経由せずに、取得時間情報が付加されたままの状態で直ぐにコンピューター装置150に伝送される。
【0071】
したがって、コンピューター装置150は、第2同期用時計の時間情報及び取得時間情報に基づいて映像信号とセンサー信号の同期化を行う(S450)。
【0072】
このとき、コンピューター装置150は、中央制御装置140及びセンサー装置130ないし134から受信した誤差時間情報に基づいてそれぞれの信号の誤差時間を補正した後、映像信号とセンサー信号を同期化する。
【0073】
また、コンピューター装置150は、センサー信号に付加された取得時間情報を第2同期用時計の時間情報と比較して時間誤差を計算し、センサー信号に対して時間軸で時間誤差だけ補正して映像信号とセンサー信号を同期化することができる。
【0074】
図5は、本発明の実施形態による同期化装置の映像信号とセンサー信号を同期化する方法を説明するための動作フローチャートである。
【0075】
図5に示すように、本発明による同期化装置120は、システムが初期化された状態で基準時間モジュール部240を介して基準時間情報を獲得する(S502)。
【0076】
次いで、同期化装置120は、センサー装置130ないし134及び中央制御装置140などを備える特定の装置に、図6に示すように、現在時間情報を要請して現在時間情報を受信する(S504)。図6は、本発明の実施形態による同期化過程及びタイミング図を示す。図6で、△T1は校正以前の同期化装置120とセンサー装置130ないし134間の誤差時間を示し、△t1はシリアル通信による時間情報伝送遅延時間を示し、△t2はセンサー装置130ないし134で現在時間情報を送信した時間を示し、△t3は同期化装置120で誤差時間を確認し、設定時間及び命令伝達遅延時間を示し、△t4は同期化装置120から時間情報を受信して校正を待機する時間を示す。
【0077】
次いで、同期化装置120は、受信した現在時間情報を基準時間情報と比較して誤差情報を獲得する(S506)。
【0078】
次いで、同期化装置120は、誤差情報を補正する校正時間情報を生成する(S508)。
【0079】
次いで、同期化装置120は、生成した校正時間情報と時間校正命令を、センサー装置130ないし134及び中央制御装置140などを備える特定の装置に伝送する(S510)。
【0080】
したがって、センサー装置130ないし134及び中央制御装置140などを備える特定の装置は、同期化装置120から受信した校正時間情報及び時間校正命令に基づいて、内蔵された同期用時計を校正時間情報で校正して同期化し、同期化が完了したことを知らせる同期完了命令を同期化装置120に伝送する。
【0081】
したがって、同期化装置120は、センサー装置130ないし134及び中央制御装置140などを備える特定の装置から、校正時間情報による時間校正で同期化が完了したことを知らせる同期完了命令を受信する(S512)。
【0082】
図7は、本発明の実施形態によるコンピューター装置の映像信号及びセンサー信号を同期化する方法を説明するための動作フローチャートである。
【0083】
図7に示すように、本発明によるコンピューター装置150は、同期化装置120から基準時間情報を受信して、コンピューター装置150に内蔵された同期用時計を同期させる(S710)。
【0084】
次いで、コンピューター装置150は、カメラ装置110から映像信号を受信し、中央制御装置140からセンサー装置130ないし134によって獲得されて、取得時間情報を含むセンサー信号を受信する(S720)。
【0085】
次いで、コンピューター装置150は、内蔵された第2同期用時計の時間情報及び取得時間情報に基づいて映像信号とセンサー信号を同期化する(S730)。
【0086】
すなわち、コンピューター装置150は、第2同期用時計の時間情報とセンサー装置130ないし134の取得時間情報とを比較して時間誤差を計算し、センサー信号に対して時間軸で時間誤差だけ補正して映像信号とセンサー信号を同期化する(S730)。
【0087】
一方、コンピューター装置150は、カメラ装置110及びセンサー装置130ないし134から映像信号及びセンサー信号を取得する途中にも同期化が駄目になり得るため、取得が終了した後にこれを検証せねばならない。したがって、中央制御装置140が、カメラ装置110から映像信号獲得時間情報及びセンサー装置130ないし134のセンサー信号獲得時間誤差を計算した後にコンピューター装置150に伝達して、コンピューター装置150が受信した時間誤差だけ該当情報を時間軸で補正すれば良い。また、中央制御装置140で時間誤差を計算せずに、コンピューター装置150が直接時間誤差を算出して、それによって映像信号とセンサー信号を時間誤差だけ補正することも可能であることは言うまでもない。
【0088】
前述のように、本発明によれば、カメラから入力される映像信号と、それぞれの映像信号に対応するセンサー信号に対して、センサー装置及び中央制御装置に同期用時計がそれぞれ内蔵されており、同期化装置でそれぞれの装置に同期信号を伝送して同期用時計を同期化させた後、センサー装置で獲得したセンサー信号に取得時間を付加して、中央制御装置を経由してコンピューター装置に伝送し、中央制御装置が、カメラからコンピューター装置に伝送される映像信号の取得数に取得時間を付加してコンピューター装置に伝送することで、コンピューター装置が取得時間情報に基づいて映像信号とセンサー信号の同期化を行うことができる映像信号とセンサー信号の同期化システム及び方法、同期化装置及びその映像信号とセンサー信号の同期化方法、及びコンピューター装置及びその映像信号とセンサー信号の同期化方法を実現することができる。
【0089】
本発明が属する技術分野の当業者は本発明がその技術的思想や必須的な特徴を変更せずに他の具体的な形態で実施されうるということを理解しうる。したがって、以上で記述した実施形態はあらゆる面で例示的なものであり、限定的ではないものと理解せねばならない。本発明の範囲は発明の詳細な説明よりは特許請求の範囲により示され、特許請求の範囲の意味及び範囲、そしてその等価概念から導出されるあらゆる変更または変形された形態が本発明の範囲に含まれると解釈されねばならない。
【産業上の利用可能性】
【0090】
本発明は、カメラ装置で獲得した映像信号とセンサー装置から獲得したセンサー信号とを同時に画面及び音響として提供するシステム及びサービスに適用することができる。
【0091】
また、映像信号及びセンサー信号を生成して無線通信及び有線通信で伝送する装置に適用することができる。
【0092】
さらに、多チャンネル映像信号及びセンサー信号を分析する装置やシステムなどに適用することができる。

【特許請求の範囲】
【請求項1】
被写体を撮影して映像信号を獲得し、前記獲得した映像信号を出力するカメラ装置と、
第1同期用時計が内蔵されており、前記映像信号に対応したセンサー信号をセンシング動作によって生成し、前記生成されたセンサー信号に前記第1同期用時計による取得時間情報を付加して出力するセンサー装置と、
第2同期用時計が内蔵されており、前記センサー装置から前記取得時間情報の付加されたセンサー信号を受信してコンピューター装置に伝送するように制御し、前記カメラ装置からコンピューター装置に伝送される映像信号に対する取得数を継続的に累積して計算し、前記取得数に前記第2同期用時計による取得時間情報を付加してコンピューター装置に伝送または保存した後、分析の際に活用して同期化を検証する中央制御装置と、
基準時計を内蔵し、前記第1同期用時計と前記第2同期用時計の同期のための基準時間を所定の間隔で前記センサー装置及び前記中央制御装置に同時に伝送する同期化装置と、
前記中央制御装置から前記取得時間情報の付加されたセンサー信号を受信し、前記カメラ装置から映像信号を受信してそれぞれの信号の時間情報を確認し、それぞれの信号を同じ時間帯に再構成して前記映像信号と前記センサー信号を同期化するコンピューター装置と、を備える映像信号とセンサー信号の同期化システム。
【請求項2】
前記センサー装置は、前記同期化装置から受信した基準時間に基づいて前記第1同期用時計を同期化した後、前記センシング動作によって生成された前記センサー信号に前記第1同期用時計による取得時間情報を付加して前記中央制御装置に伝送することを特徴とする請求項1に記載の映像信号とセンサー信号の同期化システム。
【請求項3】
前記センサー装置は、前記同期化装置から受信した前記基準時間を前記第2同期用時計の時間と比較して誤差だけ補正し、補正された時間に基づいて前記センサー信号に取得時間情報を付加して前記中央制御装置に伝送することを特徴とする請求項2に記載の映像信号とセンサー信号の同期化システム。
【請求項4】
前記センサー装置は、前記同期化装置から受信した前記基準時間を前記第1同期用時計の時間と比較して時間誤差を獲得し、前記獲得した時間誤差をそれぞれ前記コンピューター装置に伝送し、前記コンピューター装置は、前記センサー装置から受信した前記センサー信号に対して前記時間誤差だけ時間軸で補正することを特徴とする請求項1に記載の映像信号とセンサー信号の同期化システム。
【請求項5】
前記同期化装置は、前記センサー装置に現在時間情報を要請して獲得し、前記獲得した現在時間情報を前記基準時間情報と比較して誤差範囲を確認し、校正が必要な場合は、校正時間情報及び時間校正命令を前記センサー装置に伝送することを特徴とする請求項1に記載の映像信号とセンサー信号の同期化システム。
【請求項6】
前記センサー装置は、前記時間校正命令を受信すれば、前記校正時間情報に基づいて校正を行い、第二のクロックで前記同期化装置から受信したクロックで同期化を行い、校正完了命令を前記同期化装置に伝送することを特徴とする請求項5に記載の映像信号とセンサー信号の同期化システム。
【請求項7】
センサー装置、中央制御装置及びコンピューター装置と通信するための通信部と、
前記センサー装置、中央制御装置及びコンピューター装置に同期化のための基準時間情報を伝送するために周波数信号を生成する周波数生成部と、
前記生成された周波数信号をクロック信号として生成する同期化クロック部と、
前記生成されたクロック信号を前記基準時間情報として生成する基準時間モジュール部と、
前記基準時間モジュール部にリアルタイムクロックを提供するリアルタイムクロック部と、
前記周波数生成部、前記同期化クロック部及び前記基準時間モジュール部を制御して前記基準時間情報を生成し、前記生成された基準時間情報が前記センサー装置、中央制御装置及びコンピューター装置に伝送されるように制御する制御部と、を備え
前記制御部は、前記センサー装置に現在時間情報を要請して獲得し、前記獲得した現在時間情報を前記基準時間情報と比較して誤差範囲を確認し、校正が必要な場合は、 校正時間情報及び時間校正命令を前記センサー装置に伝送することを特徴とする同期化装置。
【請求項8】
前記センサー装置、中央制御装置及びコンピューター装置から入力されたアナログ信号をデジタル信号に変換するA/D変換部と、
前記デジタル信号を出力するための出力部と、
前記基準時間情報の生成動作、前記現在時間情報及び前記時間校正命令に関する伝送動作などを表示するためのディスプレイ部と、をさらに備えることを特徴とする請求項7に記載の同期化装置。
【請求項9】
勾配、張力、重量などをセンシングしたセンサー信号を生成するセンサーと、
アナログ型の前記センサー信号をデジタル型のセンサーデータに変換する信号変換部と、
前記センサーデータを同期化装置及び中央制御装置に伝送するための通信部と、
前記同期化装置から提供された基準時間で同期化するための同期用時計部と、
前記センサーデータを保存するためのメモリ部と、
前記センサーデータが前記中央制御装置に伝送されるように制御し、前記同期化装置から前記基準時間を受信して同期化した後、前記センサーデータを取得した取得時間情報を前記センサーデータとともに前記中央制御装置に伝送する制御部と、
周波数信号を生成して前記制御部に提供する周波数生成部と、
前記制御部にリアルタイムクロックを提供するリアルタイム(RTC)モジュール部と、
を備えるセンサー装置。
【請求項10】
カメラ装置、センサー装置、中央制御装置、同期化装置及びコンピューター装置を備えるシステムの映像信号とセンサー信号の同期化方法であって、
(a)前記同期化装置が同期化時間情報を前記センサー装置及び前記中央制御装置に伝送するステップと、
(b)前記センサー装置及び前記中央制御装置が前記同期化時間情報に基づいてそれぞれに内蔵された同期用時計を同期させるステップと、
(c)前記カメラ装置が映像信号を獲得して前記コンピューター装置に伝送するステップと、
(d)前記センサー装置がセンサー信号を獲得して、前記内蔵された同期用時計による取得時間情報を付加して前記中央制御装置に伝送し、前記中央制御装置が前記取得時間情報の付加されたセンサー信号を前記コンピューター装置に伝送するステップと、
(e)前記コンピューター装置が前記内蔵された同期用時計及び前記取得時間情報に基づいて前記映像信号と前記センサー信号の同期化を行うステップと、を含む映像信号とセンサー信号の同期化方法。
【請求項11】
前記ステップ(e)は、前記コンピューター装置が前記内蔵された同期用時計の時間情報と前記取得時間情報とを比較して時間誤差を計算し、前記映像信号と前記センサー信号に対して時間軸で時間誤差だけ補正して前記映像信号と前記センサー信号を同期化することを特徴とする請求項10に記載の映像信号とセンサー信号の同期化方法。
【請求項12】
センサー装置、中央制御装置及びコンピューター装置を備える特定の装置と有線または無線で通信する同期化装置の映像信号とセンサー信号を同期化する方法であって、
(a)前記特定の装置に現在時間情報を要請して現在時間情報を受信するステップと、
(b)前記現在時間情報を基準時間情報と比較して誤差情報を獲得するステップと、
(c)前記誤差情報を補正する時間情報を生成し、前記特定の装置に前記時間情報及び時間校正命令を伝送するステップと、
(d)前記特定の装置から前記時間情報による時間校正で同期化が完了したことを知らせる同期完了命令を受信するステップと、を含む同期化装置の映像信号とセンサー信号を同期化する方法。
【請求項13】
カメラ装置、センサー装置、中央制御装置及び同期化装置と有線または無線で通信するコンピューター装置の映像信号とセンサー信号を同期化する方法であって、
(a)前記同期化装置から基準時間情報を受信して内蔵された同期用時計を同期させるステップと、
(b)前記カメラ装置から映像信号を受信し、前記中央制御装置から前記センサー装置によって獲得した取得時間情報を含むセンサー信号を受信するステップと、
(c)前記内蔵された同期用時計及び前記取得時間情報に基づいて前記映像信号と前記センサー信号を同期化するステップと、を含むコンピューター装置の映像信号とセンサー信号を同期化する方法。
【請求項14】
前記ステップ(c)は、前記内蔵された同期用時計の時間情報と前記取得時間情報とを比較して時間誤差を計算し、前記映像信号と前記センサー信号に対して時間軸で前記時間誤差だけ補正して前記映像信号と前記センサー信号を同期化することを特徴とする請求項13に記載のコンピューター装置の映像信号とセンサー信号を同期化する方法。
【請求項15】
前記ステップ(c)は、前記センサー装置及び前記中央制御装置から受信した時間誤差情報に基づいて、前記映像信号と前記センサー信号に対して時間軸で前記時間誤差情報だけ補正して前記映像信号と前記センサー信号を同期化することを特徴とする請求項13に記載のコンピューター装置の映像信号とセンサー信号を同期化する方法。

【図1】
image rotate

【図2】
image rotate

【図3】
image rotate

【図4】
image rotate

【図5】
image rotate

【図6】
image rotate

【図7】
image rotate


【公表番号】特表2013−513283(P2013−513283A)
【公表日】平成25年4月18日(2013.4.18)
【国際特許分類】
【出願番号】特願2012−541950(P2012−541950)
【出願日】平成22年12月3日(2010.12.3)
【国際出願番号】PCT/KR2010/008622
【国際公開番号】WO2011/068380
【国際公開日】平成23年6月9日(2011.6.9)
【出願人】(512146258)アールディ−テック シーオー エルティディ (2)
【Fターム(参考)】