受信装置およびカメラシステム
【課題】非同期伝送路の伝送遅延のジッタに対応可能で、かつ、同期信号入力に同期した
映像出力を得ることできる低遅延映像伝送を実現できる送信装置、受信装置、映像伝送装
置、およびカメラシステムを提供する。
【解決手段】送信装置３０は、入力される映像信号を符号化データに変換し、この符号化
データを伝送路に送出する符号化部３１と、伝送路５０を伝送された位相情報を基に、入
力される映像信号の位相を調整する同期信号ＳＹＮＣを発生する同期信号発生部３３と、
を有し、位相情報ＰＨＳは、伝送に必要な時間だけ、同期信号発生部３３で発生する同期
信号のタイミングを前にずらすことを示す情報を含み、同期信号発生部３３は、入力され
る映像信号を伝送に必要な時間だけ前倒しするように同期信号ＳＹＮＣを発生する。
映像出力を得ることできる低遅延映像伝送を実現できる送信装置、受信装置、映像伝送装
置、およびカメラシステムを提供する。
【解決手段】送信装置３０は、入力される映像信号を符号化データに変換し、この符号化
データを伝送路に送出する符号化部３１と、伝送路５０を伝送された位相情報を基に、入
力される映像信号の位相を調整する同期信号ＳＹＮＣを発生する同期信号発生部３３と、
を有し、位相情報ＰＨＳは、伝送に必要な時間だけ、同期信号発生部３３で発生する同期
信号のタイミングを前にずらすことを示す情報を含み、同期信号発生部３３は、入力され
る映像信号を伝送に必要な時間だけ前倒しするように同期信号ＳＹＮＣを発生する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像を伝送する受信装置およびカメラシステムに関するものである。
【背景技術】
【０００２】
近年、ライブ放送などでは低遅延の映像伝送が求められている。
また、伝送路としてはコストの面などからＬＡＮやインターネット、ＮＧＮ等のＩＰ網など非同期通信回線での伝送が求められている。
このような要求から低遅延コーデックとしてラインベースコーデックが提案されている（たとえば、特許文献１参照）。
【０００３】
マルチカメラが前提となるシステムカメラやＶＴＲでは、各機器の出力位相を合わせるために、受信装置に同期信号入力が設けられており、出力映像信号が同期信号に同期する必要がある。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８-０２８５４１号公報
【特許文献２】特開２００６-３２５０２０号公報
【特許文献３】特開平１１-２７５４６１号公報
【特許文献４】特開平０１−２５５３８２号公報
【特許文献５】特開２００６−２１７３８４号公報
【特許文献６】特開平１１−２７５４６１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、映像の供給元（カメラやＶＴＲなど）となる機器Ａと同期信号入力の入力先となる機器Ｂが一致せず、この２つの機器間で映像を伝送している場合は、伝送遅延を考慮しないと機器Ｂから出力する出力映像信号が正しく同期信号に同期しない。
【０００６】
このような例としては、機器Ａとしてカメラ、機器Ｂとしてカメラ・コントロール・ユニット（ＣＣＵ）からなるシステムが挙げられる。出力映像と同期信号を正しく同期させるため、カメラ・コントロール・ユニットとカメラが接続されているときに、ケーブル等による遅延分だけカメラ内で同期信号の位相を進めることで、カメラ・コントロール・ユニットへ入力された同期信号と映像出力を同期させる技術がある（たとえば、特許文献４，５参照）。
【０００７】
しかし、機器Ａと機器Ｂを非同期伝送路でつなぐ場合においては、これらの技術を使うことができない。非同期伝送路においては、伝送遅延が一定ではなく、ばらつきを有しており、このばらつきを吸収する必要があるからである。伝送遅延のばらつきを考慮しない場合、遅延量が大きくなると映像を出力すべき時間になっても映像情報が機器Ｂに届かず、映像が乱れるという現象が発生する。
【０００８】
ＩＰ網などの非同期通信回線を使ってコーデックデータを伝送する場合、コーデックでのジッタ、伝送路でのジッタなど多くの不安定な遅延要素が含まれる。
このため、安定してデコードするためにデータ領域にバッファを設け、同期をとる技術が提案されている（たとえば、特許文献２参照）。
【０００９】
しかし、上記した特許文献２に開示された技術では、安定した映像の出力は得られるものの、基準同期信号入力に同期した映像を得ることはできない。
そのため、デコーダの出力映像を基準同期信号入力に同期した映像にするために映像をフレームバッファで同期をとる技術が必要となる（たとえば特許文献３参照）。
【００１０】
このように位相信号入力の位相にデコーダの出力位相を合わせるためにフレームバッファを用いる場合、フレームバッファで１フレーム近くの遅延が発生してしまう。
特に、コーデックでの遅延量が数ラインの低遅延コーデックを用いた低遅延映像伝送装置ではフレームバッファでの遅延は無視できない大きな遅延であり、低遅延を最大の特徴とする低遅延伝送システムでは大きな問題である。
【００１１】
また、機器Ａと機器Ｂが非同期伝送路でつながれている場合に同期をとる場合、特許文献３に記載されている方法では、機器Ａの映像出力から機器Ｂの映像出力までの遅延時間を意図した値に調整することができない問題がある。
【００１２】
更に、映像信号をバッファに記憶しておく時間が短すぎると、今度は伝送遅延のばらつきに対応できず、バッファがアンダーフローした場合、若しくはオーバーフローした場合に、出力映像が乱れる原因となる。
【００１３】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、非同期伝送路の伝送遅延のジッタに対応可能で、かつ、同期信号入力に同期した映像出力を得ることのできる低遅延映像伝送を実現することが可能な、新規かつ改良された 受信装置およびカメラシステムを提供することにある。
【課題を解決するための手段】
【００１４】
上記課題を解決するために、本発明のある観点によれば、伝送路を伝送された映像の符号化データを復号する復号部と、上記復号部で復号された映像データを基準同期信号に同期させて出力する同期出力部と、入力される上記符号化データおよび時刻情報により伝送路の遅延に係る情報を取得する伝送遅延情報取得部と、上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御する位相情報を求め、当該位相情報を、上記伝送路を通して伝達する同期信号伝達部と、を有する受信装置が提供される。
【００１５】
また、前記伝送遅延情報取得部は、伝送路の遅延時間を測定する伝送遅延測定部を含み、前記同期信号伝達部は、上記伝送遅延測定部で得られた遅延時間から伝送に必要な時間を求め、入力される上記基準信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための前記位相情報を求めるものであってもよい。
【００１６】
また、上記符号化データは、上記伝送路に送出された時刻情報が付加されており、上記伝送遅延測定部は、上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間を伝送遅延許容時間として求め、上記同期信号伝達部は、上記伝送遅延許容時間を上記伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を生成するための時刻の情報を上記位相情報として上記伝送路を通して伝達するものであってもよい。
【００１７】
また、少なくとも上記伝送路および上記復号部によりコーデック部が形成され、当該コーデック部の遅延量が、コーデック遅延量としてあらかじめ設定され、上記同期信号伝達部は、上記伝送遅延測定部で得られた伝送遅延許容時間と上記コーデック遅延量の総和時間を上記伝送に必要な時間として求め、入力される上記基準同期信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための位相情報を求め、当該位相情報を、上記伝送路を通して伝達するものであってもよい。
【００１８】
また、上記符号化データは、上記伝送路に送出された時刻情報が付加されており、上記伝送遅延測定部は、上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間として伝送遅延許容時間を求め、上記同期信号伝達部は、上記伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を上記位相情報として上記伝送路を通して伝達するものであってもよい。
【００１９】
また、上記同期信号伝達部は、入力される上記基準同期信号を同期パルスごとに時刻を記録して上記伝送路に送出するものであってもよい。
【００２０】
また、上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御するための位相制御量を求める位相制御量計算部を備え、前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御し、制御された位相情報を上記伝送路を通して伝達するものであってもよい。
【００２１】
また、前記伝送路の遅延に係る情報の統計情報を計算する統計計算部を備え、前記位相制御量計算部は、前記統計情報に基づいて前記位相制御量を求めるものであってもよい。
【００２２】
また、前記伝送路の遅延に係る情報の統計情報を計算する統計計算部と、前記統計情報を表示する表示部と、前記表示部の表示に基づいて入力される操作量を取得する操作部と、を備え、前記位相制御量計算部は、前記統計情報と前記操作量とに基づいて前記位相制御量を求めるものであってもよい。
【００２３】
また、前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御する位相制御部を含み、前記位相制御部は、上記基準同期信号の位相を目標となる位相制御量に瞬時に制御するものであってもよい。
【００２４】
また、前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御する位相制御部を含み、前記位相制御部は、上記基準同期信号の位相を目標となる位相制御量に段階的に制御するものであってもよい。
【００２５】
また、前記伝送路の遅延に係る情報は、前記伝送路の遅延時間又は上記符号化データを蓄積するバッファの使用率であってもよい。
【００２６】
また、上記課題を解決するために、本発明の別の観点によれば、撮像して映像信号を得る撮像部と、伝送路と、上記撮像部で撮像して得られた映像信号の符号化データを上記伝送路に送出する送信装置と、上記符号化データを受信する受信装置と、を有し、上記送信装置は、入力される映像信号を符号化データに変換し、当該符号化データを上記伝送路に送出する符号化部と、上記伝送路を伝送された位相情報を基に、上記撮像部により得られ、入力される映像信号の位相を調整する同期信号を発生する同期信号発生部と、を含み、上記位相情報は、伝送に必要な時間だけ、上記同期信号発生部で発生する同期信号のタイミングを前にずらすことを示す情報を含み、上記同期信号発生部は、入力される映像信号を伝送に必要な時間だけ前倒しするように上記同期信号を発生し、上記受信装置は、伝送路を伝送された映像の符号化データを復号する復号部と、上記復号部で復号された映像データを基準同期信号に同期させて出力する同期出力部と、入力される上記符号化データおよび時刻情報により伝送路の遅延に係る情報を取得する伝送遅延情報取得部と、上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御する位相情報を求め、当該位相情報を、上記伝送路を通して伝達する同期信号伝達部と、と、を含む、カメラシステムが提供される。
【００２７】
また、上記位相情報は、伝送に必要な時間だけ、上記同期信号発生部で発生する同期信号のタイミングを前にずらすことを示す情報を含み、上記同期信号発生部は、入力される映像信号を伝送に必要な時間だけ前倒しするように上記同期信号を発生し、前記伝送遅延情報取得部は、伝送路の遅延時間を測定する伝送遅延測定部を含み、前記同期信号伝達部は、上記伝送遅延測定部で得られた遅延時間から伝送に必要な時間を求め、入力される上記基準信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための前記位相情報を求めるものであってもよい。
【００２８】
また、上記送信装置は、上記符号化データに上記伝送路に送出される時刻情報を付加する時刻情報付加部を含み、上記受信装置の上記伝送遅延測定部は、上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間を伝送遅延許容時間として求め、上記同期信号伝達部は、上記伝送遅延許容時間を上記伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を生成するための時刻の情報を上記位相情報として上記伝送路を通して上記送信装置に伝達し、上記送信装置の同期信号発生部は、上記時刻の情報を基に、発生する上記同期信号の位相を前倒しした位相となるように設定するものであってもよい。
【００２９】
また、上記符号化部、上記伝送路、および上記復号部によりコーデック部が形成され、当該コーデック部の遅延量が、コーデック遅延量としてあらかじめ設定され、上記同期信号伝達部は、上記伝送遅延測定部で得られた伝送遅延許容時間と上記コーデック遅延量の総和時間を上記伝送に必要な時間として求め、入力される上記基準同期信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための位相情報を求め、当該位相情報を、上記伝送路を通して上記送信装置に伝達するものであってもよい。
【００３０】
また、上記送信装置は、上記符号化データに上記伝送路に送出される時刻情報を付加する時刻情報付加部を含み、上記受信装置の伝送遅延測定部は、上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間として伝送遅延許容時間を求め、上記同期信号伝達部は、上記伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を上記位相情報として上記伝送路を通して上記送信装置に伝達し、上記送信装置の同期信号発生部は、上記時刻の情報を基に、発生する上記同期信号の位相を前倒しした位相となるように設定するものであってもよい。
【００３１】
また、上記受信装置は、上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御するための位相制御量を求める位相制御量計算部を備え、前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御し、制御された位相情報を上記伝送路を通して伝達するものであってもよい。
【００３２】
また、上記受信装置は、前記伝送路の遅延に係る情報の統計情報を計算する統計計算部を備え、前記位相制御量計算部は、前記統計情報に基づいて前記位相制御量を求めるものであってもよい。
【００３３】
また、上記受信装置は、前記伝送路の遅延に係る情報の統計情報を計算する統計計算部と、前記統計情報を表示する表示部と、前記表示部の表示に基づいて入力される操作量を取得する操作部と、を備え、前記位相制御量計算部は、前記統計情報と前記操作量とに基づいて前記位相制御量を求めるものであってもよい。
【発明の効果】
【００３４】
本発明によれば、非同期伝送路の伝送遅延のジッタに対応可能で、かつ、同期信号入力に同期した映像出力を得ることできる低遅延映像伝送を実現できる。
【図面の簡単な説明】
【００３５】
【図１】本発明の実施形態に係る映像伝送装置を採用したカメラシステムの構成例を示す図である。
【図２】本実施形態において、伝送に必要な時間だけ送信装置側の同期信号の発生を早める基本原理を説明するための図である。
【図３】既存の映像伝送装置の課題を説明するための図である。
【図４】本実施形態の映像伝送装置の起動時の動作を説明するためのフローチャートである。
【図５】第２の実施形態のシステム構成を示す模式図である。
【図６】第２の実施形態のシステム構成を示す模式図である。
【図７】統計処理の結果の一例を示す模式図である。
【図８】統計処理の結果の一例を示す模式図である。
【図９】統計処理の結果の一例を示す模式図である。
【図１０】統計処理の結果の一例を示す模式図である。
【図１１】位相進み量を瞬時に変える場合を示す模式図である。
【図１２】位相進み量を徐々に変える場合を示す模式図である。
【図１３】図６の受信装置４０の各タイミングにおける信号を示すタイミングチャートである。
【図１４】映像情報の受信から位相進み量を指令するまでの処理を示すフローチャートである。
【図１５】同期信号入力から位相情報送信までの処理を示すフローチャートである。
【発明を実施するための形態】
【００３６】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００３７】
なお、説明は以下の順序で行うものとする。
第１の実施形態
１．映像伝送装置を含むカメラシステムの全体構成の概要
２．送信装置の構成例
３．受信装置の構成例
４．起動時の動作例
第２の実施形態
１．カメラシステムの全体構成
２．統計情報の一例
３．統計情報に基づく位相進み量の調整
４．本実施形態のシステムの処理手順
【００３８】
・第１の実施形態
＜１．映像伝送装置を含むカメラシステムの全体構成の概要＞
図１は、本発明の第１の実施形態に係る映像伝送装置を採用したカメラシステムの構成例を示す図である。
【００３９】
本カメラシステム１０は、撮像部２０、送信装置３０、受信装置４０、および伝送路５０を含んで構成されている。
そして、送信装置３０、受信装置４０、および伝送路５０により映像伝送装置が構成される。
【００４０】
伝送路５０は、送信装置３０と受信装置４０間の信号伝送に適用される。
本実施形態において伝送路５０は、ＬＡＮやインターネット、ＮＧＮ等のＩＰ網などの非同期伝送路を想定している。なお、非同期伝送路は伝送にかかる時間に揺らぎがあり、その時間を伝送ジッタと呼ぶ。
また、本実施形態においては、たとえば伝送路５０を伝送される信号はパケット化される。
【００４１】
本実施形態のカメラシステム１０は、以下の特徴をもって構成されている。
カメラシステム１０においては、基本的に図２に示すように、送信装置３０から同期信号ＳＹＮＣを出力し、その同期信号ＳＹＮＣの位相を制御することにより、送信装置３０に入力される撮像部２０により得られた映像信号の位相を制御する。
受信装置４０に入力される基準同期信号ＲＳＹＮＣから、伝送に必要な遅延量だけ、送信装置３０で出力する同期信号ＳＹＮＣのタイミングを前にずらすことで、入力映像を伝送に必要な遅延時間だけ前倒しする。
これにより、本カメラシステム１０は、受信装置４０に入力された基準同期信号ＲＳＹＮＣに同期したデコード映像を得ることができる。
そして、本カメラシステム１０は、伝送路５０で生じる遅延量を測定する機能と組み合わせ、最低の遅延量（伝送遅延許容時間）を算出することにより、低遅延映像伝送を実現する。なお、伝送遅延許容時間は、伝送遅延の許容最大値に相当し、非同期ネットワークによる伝送遅延時間（伝送遅延量）と、非同期ネットワークのジッタを吸収するバッファ４００で待機する時間との和に相当する。
【００４２】
このような構成を採用した理由は以下の通りである。
既存の映像伝送装置では入力映像はフリーの位相であり、その映像をエンコード（符号化）し、伝送し、デコード（復号）する時に生じる遅延時間だけ遅れた映像が受信機の映像出力から出力されるような構造となっている。
このような構造では低遅延の映像を伝送するために低遅延コーデックを使ってエンコードとデコードの遅延量を低く抑えたとしても、非同期伝送路での伝送ジッタを吸収するために、実際に必要なバッファ量よりも多くのバッファを必要としていた。
これはＩＰ網などの非同期伝送路での伝送ジッタがどのくらいの量か不明であるため、余裕を持つ必要があるからである。
また、複数カメラの映像を切り替え器(スイッチャー)に入力する場合など、受信装置からの出力映像を基準同期信号ＲＳＹＮＣに同期させる必要がある場合、図３に示すように、デコーダＤＥＣの後段に映像を同期するためのフレームバッファＦＢＦが必要となる。 このフレームバッファＦＢＦでの遅延は低遅延伝送では無視できない大きなものとなる。
【００４３】
そこで、本実施形態においては、受信装置４０に入力される基準同期信号ＲＳＹＮＣから、伝送に必要な遅延量だけ、送信装置３０で出力する同期信号ＳＹＮＣのタイミングを前にずらすことで、入力映像を伝送に必要な遅延時間だけ前倒しする。
これにより、本カメラシステム１０は、受信装置４０に入力された基準同期信号ＲＳＹＮＣに同期したデコード映像を得ることができ、伝送路５０で生じる遅延量を測定する機能と組み合わせ、最適な遅延量を求めて低遅延映像伝送を実現するように構成される。
【００４４】
以下、以上の特徴を有する本カメラシステム１０を形成する撮像部２０、送信装置３０、および受信装置４０の構成および機能について具体的に説明する。
【００４５】
［１．撮像部２０の構成］
撮像部２０は、ＣＣＤやＣＭＯＳイメージセンサ等の撮像素子と、撮像素子で光電変換された信号に対してカメラ信号処理を施す信号処理回路を含んで構成される。
撮像部２０は、撮像して得られた映像信号ＶＤＳを送信装置３０に出力する。
撮像部２０は、同期信号入力を備えており、イメージセンサの撮像タイミングを調整することで、映像信号ＶＤＳの出力位相を同期信号入力に合わせる機能を有する。
なお、映像信号ＶＤＳにはビデオ信号および音声信号が含まれる。
【００４６】
＜２．送信装置３０の構成例＞
送信装置３０は、符号化部としてのエンコーダ３１、時刻情報付加部としてのタイムスタンプ付加部３２、同期信号発生器３３、および時刻情報保持部３４を有する。
【００４７】
エンコーダ３１は、入力される映像信号ＶＤＳを符号化データに変換し、この符号化データをタイムスタンプ付加部３２に出力する。
タイムスタンプ付加部３２は、時刻情報保持部３４の時刻情報を参照して、符号化データに伝送路５０に送出される時刻情報をタイムスタンプとして付加し、タイムスタンプを付加した符号化データＤＥＮＣを伝送路５０に送出する。
【００４８】
同期信号発生器３３は、受信装置４０から送出され、伝送路５０を伝送された位相情報を基に、時刻情報保持部３４の時刻情報を参照して、撮影部２０に対して同期信号ＳＹＮＣを発生する。撮像部２０は撮像タイミングを調整することで、入力された同期信号ＳＹＮＣに位相の合った映像信号ＶＤＳを送信装置３０に対して出力する。これにより、送信装置３０に入力される映像信号ＶＤＳの位相を調整する。
ここで、位相情報ＰＨＳは、伝送に必要な時間だけ、同期信号発生器３３で発生する同期信号ＳＹＮＣのタイミングを前にずらすことを示す情報を含む。
位相情報ＰＨＳは、受信装置４０に入力される基準同期信号ＲＳＹＮＣを時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号ＳＹＮＣを生成するための時刻の情報として伝送路５０を伝送される。
位相情報については、後でさらに詳述する。
【００４９】
同期信号発生器３３は、このような位相情報ＰＨＳを基に、入力される映像信号ＶＤＳを伝送に必要な時間だけ前倒しするように同期信号ＳＹＮＣを発生する。
同期信号発生器３３は、位相情報ＰＨＳに含まれる時刻の情報を基に時刻情報のパルスを作ることで同期信号ＳＹＮＣを作り出し、発生する同期信号ＳＹＮＣの位相を前倒しした位相となるように設定する。
【００５０】
本実施形態においては、送信装置３０の時刻情報保持部３４は、受信装置４０と独立し
た時刻情報を持つ。この時刻は世界で統一されている何日何時といった情報である。ＮＴＰ（Network Time Protocol），ＧＰＳ(Global Positioning
System)，ＲＴＣ(Real TimeClock)などの技術を用いて正しい時刻に合わせておくことが可能である。これにより、受信装置４０の時刻情報４７と時刻情報３４の時刻が近くなるように調整される。
【００５１】
＜３．受信装置４０の構成例＞
受信装置４０は、タイムスタンプ取得部４１、復号部としてのデコーダ４２、同期出力部としてバッファ４３、遅延時間計算部４４、同期信号時刻変換部４５、制御部であるＣＰＵ４６、および時刻情報保持部４７を有する。
タイムスタンプ取得部４１および遅延時間計算部４４により伝送遅延情報取得部（伝送遅延測定部）が構成される。
また、同期信号時刻変換部４５およびＣＰＵ４６により同期信号伝達部が構成される。
【００５２】
また、本実施形態においては、送信装置３０のエンコーダ３１、タイムスタンプ付加部３２、伝送路５０、タイムスタンプ取得部４１、およびデコーダ４２によりコーデック部が形成される。
なお、タイムスタンプ付加部３２およびタイムスタンプ取得部４１を含まない場合も基本的なコーデック部が形成される。
ＬＬＶＣなどの低遅延コーデックを使うことで低遅延映像伝送を実現できる。コーデック部での遅延量を「コーデック遅延量」と呼び、コーデックの方法や設定によって変化し、伝送映像の絵柄によっても変化する。
本実施形態の受信装置４０においては、コーデック遅延量の最大値をあらかじめ測定してあり、その最大値がコーデック遅延量として設定されている。
【００５３】
タイムスタンプ取得部４１は、送信装置３０から送出され伝送路５０を伝送された符号化データＤＥＮＣを受信して、付加されている送出された時刻を示すタイムスタンプ情報を取得して遅延時間計算部４４に出力する。また符号化データＤＥＮＣをデコーダ４２に出力する。
【００５４】
デコーダ４２は、受信した符号化データＤＥＮＣをデコードし、デコードされた映像データＤＤＥＣをバッファ４３に出力する。
【００５５】
同期信号出力部としてのバッファ４３は、デコーダ４２でデコードされた映像データＤＤＥＣを、入力される基準同期信号ＲＳＹＮＣに同期させ出力する。
本実施形態では、このバッファ４３の量を最低限に抑えることができる。
【００５６】
遅延時間計算部４４は、受信装置４０の伝送遅延測定部として機能する。
遅延時間計算部４４は、時刻情報保持部４７の時刻情報を参照して、符号化データＤＥＮＣに付加された時刻情報および符号化データを受信したときの時刻情報に基づき伝送路５０における遅延時間を測定する。
遅延時間計算部４４は、伝送路５０を通る各パケットの遅延時間を取り込み、統計処理を行うことで伝送に必要な遅延時間を求める。この値を「伝送遅延許容時間」と呼ぶ。
このように、遅延時間計算部４４は、実際の符号化データを用いて伝送路の遅延時間を測定する。遅延時間計算部４４は、伝送遅延のジッタを把握するために一定時間測定を行い、パケットごとの遅延時間が集まったら、遅延時間の集合に対して統計処理を行い、伝送路５０でかかる遅延時間を算出する。
【００５７】
同期信号時刻変換部４５は、時刻情報保持部４７の時刻情報を参照して、入力される基準同期信号ＲＳＹＮＣを時刻情報に変換してＣＰＵ４６に出力する。
ＣＰＵ４６は、同期信号時刻変換部４５とともに同期信号伝達部として機能する。
この同期信号伝達部として機能するＣＰＵ４６は、遅延時間計算部４４で得られた伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間を求める。
ＣＰＵ４６は、求めた伝送に必要な時間を同期信号の位相差とし、同期信号時刻変換部４５で時刻に変換された基準同期信号ＲＳＹＮＣを、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を位相情報として生成する。
そして、ＣＰＵ４６は、生成した位相情報ＰＨＳを、伝送路５０を通して送信装置３０に伝達する。
これに応答して、送信装置３０の同期信号発生器３３は、時刻の情報を基に時刻情報のパルスを作ることで同期信号ＳＹＮＣを作り出し、発生する同期信号ＳＹＮＣの位相を前倒しした位相となるように設定する。
なお、同期信号時刻変換部４５およびＣＰＵ４６を含む同期信号伝達部は、入力される基準同期信号ＲＳＹＮＣを同期パルス、たとえば映像信号の垂直同期信号ごとに時刻を記録して位相情報として伝送路５０を通して送信装置３０に伝達する。
【００５８】
本実施形態においては、受信装置４０の時刻情報保持部４７は、送信装置３０と独立した時刻情報を持つ。この時刻は世界で統一されている何日何時といった情報である。ＮＴＰ，ＧＰＳ，ＲＴＣなどの技術を用いて正しい時刻に合わせておくことが可能である。これにより、送信装置３０の時刻情報３４と時刻情報４７の時刻が近くなるように調整される。
【００５９】
なお、本実施形態においては、遅延時間計算部４４で得られた伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間を求めているが、伝送遅延許容時間を伝送に必要な時間とすることも可能である。
【００６０】
＜４．起動時の動作例＞
図４は、本実施形態の映像伝送装置の起動時の動作を説明するためのフローチャートである。
【００６１】
［ステップＳＴ１］
まず、ステップＳＴ１において、送信装置３０と受信装置４０間の時刻情報を、時刻情報保持部３４，４７により合わせる。
【００６２】
［ステップＳＴ２］
そして、ステップＳＴ２において、送信装置３０と受信装置４０で時刻があっているか否かを確認する。
【００６３】
［ステップＳＴ３］
ステップＳＴ２において、送信装置３０と受信装置４０で時刻があっていることが確認されると、ステップＳＴ３で次に処理が行われる。
送信装置３０のエンコーダ３１において、入力される映像信号ＶＤＳを符号化データに変換し、この符号化データをタイムスタンプ付加部３２に出力する。
タイムスタンプ付加部３２は、時刻情報保持部３４の時刻情報を参照して、符号化データに伝送路５０に送出される時刻情報をタイムスタンプとして付加し、タイムスタンプを付加した符号化データＤＥＮＣを伝送路５０に送出する。
伝送路５０を伝送された符号化データＤＥＮＣは受信装置４０で受信される。
【００６４】
［ステップＳＴ４］
ステップＳＴ４において、タイムスタンプ取得部４１が、伝送路５０を伝送された符号化データＤＥＮＣを受信して、付加されている送出された時刻を示すタイムスタンプ情報を取得して遅延時間計算部４４およびデコーダ４２に出力する。
そして、遅延時間計算部４４は、時刻情報保持部４７の時刻情報を参照して、符号化データＤＥＮＣに付加された時刻情報および符号化データを受信したときの時刻情報に基づき伝送路５０における遅延時間を測定する。
このように、遅延時間計算部４４は、実際の符号化データを用いて伝送路の遅延時間を測定する。
【００６５】
［ステップＳＴ５］
ステップＳＴ５において、遅延時間計算部４４は、伝送遅延のジッタを把握するために一定時間測定を行う。
一定時間経過すると次のステップＳＴ６の処理に移行する。
【００６６】
［ステップＳＴ６］
ステップＳＴ６において、遅延時間計算部４４は、パケットごとの遅延時間が集まったら、遅延時間の集合に対して統計処理を行い、伝送路５０でかかる遅延時間である伝送遅延許容時間を算出する。
この伝送遅延許容時間は、ＣＰＵ４６に供給される。
【００６７】
［ステップＳＴ７］
ステップＳＴ７において、ＣＰＵ４６は、遅延時間計算部４４で得られた伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間を求める。
ＣＰＵ４６は、求めた伝送に必要な時間を同期信号の位相差とし、次のステップＳＴ８の処理に移行する。
【００６８】
［ステップＳＴ８］
ステップＳＴ８において、同期信号時刻変換部４５が、時刻情報保持部４７の時刻情報を参照して、入力される基準同期信号ＲＳＹＮＣを時刻情報に変換してＣＰＵ４６に出力する。
ＣＰＵ４６は、同期信号時刻変換部４５で時刻に変換された基準同期信号ＲＳＹＮＣを、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を位相情報として生成する。
そして、ＣＰＵ４６は、生成した位相情報ＰＨＳを、伝送路５０を通して送信装置３０に伝達する。
これに応答して、送信装置３０の同期信号発生器３３は、時刻の情報を基に時刻情報のパルスを作ることで同期信号ＳＹＮＣを作り出し、発生する同期信号ＳＹＮＣの位相を前倒しした位相となるように設定する。
なお、同期信号時刻変換部４５およびＣＰＵ４６を含む同期信号伝達部は、入力される基準同期信号ＲＳＹＮＣを同期パルス、たとえば映像信号の垂直同期信号ごとに時刻を記録して位相情報として伝送路５０を通して送信装置３０に伝達する。
【００６９】
［ステップＳＴ９］
ステップＳＴ９において、送信装置３０の同期信号発生器３３は、伝送路５０を伝送された位相情報ＰＨＳを基に、入力される映像信号ＶＤＳを伝送に必要な時間だけ前倒しするように同期信号ＳＹＮＣを発生する。
同期信号発生器３３は、位相情報ＰＨＳに含まれる時刻の情報を基に時刻情報のパルスを作ることで同期信号ＳＹＮＣを作り出し、発生する同期信号ＳＹＮＣの位相を前倒しした位相となるように設定する。
同期信号発生器３３から出力された同期信号ＳＹＮＣを受け、撮像部２０は撮像タイミングを調整する。これにより、撮像部３０は、受信装置４０に入力される基準同期信号ＲＳＹＮＣを、伝送に必要な位相差の時間だけ前倒しした位相に同期した映像信号ＶＤＳをエンコーダ３１に入力させる。
【００７０】
上述したと同様に、送信装置３０のエンコーダ３１において、入力される映像信号ＶＤＳを符号化データに変換し、この符号化データをタイムスタンプ付加部３２に出力する。
タイムスタンプ付加部３２は、時刻情報保持部３４の時刻情報を参照して、符号化データに伝送路５０に送出される時刻情報をタイムスタンプとして付加し、タイムスタンプを付加した符号化データを伝送路５０に送出する。
伝送路５０を伝送された符号化データＤＥＮＣは受信装置４０で受信される。
受信装置４０において、タイムスタンプ取得部４１が、伝送路５０を伝送された符号化データＤＥＮＣを受信して、付加されている送出された時刻を示すタイムスタンプ情報を取得して遅延時間計算部４４およびデコーダ４２に出力する。
デコーダ４２は、受信した符号化データＤＥＮＣをデコードし、デコードされた映像データＤＤＥＣをバッファ４３に出力する。
そして、同期信号出力部としてのバッファ４３は、デコーダ４２でデコードされた映像データＤＤＥＣを、入力される基準同期信号ＲＳＹＮＣに同期させ出力する。
【００７１】
以上説明したように、本実施形態によれば、送信装置３０から同期信号ＳＹＮＣを出力し、その同期信号ＳＹＮＣの位相を制御することにより、送信装置３０に入力される撮像部２０により得られた映像信号ＶＤＳの位相を制御する。
受信装置４０に入力される基準同期信号ＲＳＹＮＣから、伝送に必要な遅延量だけ、送信装置３０で出力する同期信号ＳＹＮＣのタイミングを前にずらすことで、入力映像を伝送に必要な遅延時間だけ前倒しする。
これにより、本実施形態によれば、受信装置４０に入力された基準同期信号ＲＳＹＮＣに同期したデコード映像を得ることができる。
そして、伝送路５０で生じる遅延量を測定する機能と組み合わせ、最低の遅延量を算出することにより、低遅延映像伝送を実現する。
すなわち、本実施形態によれば、非同期伝送路の伝送遅延のジッタに対応可能で、かつ、同期信号入力に同期した映像出力を得ることできる低遅延映像伝送を実現できる。
【００７２】
・第２の実施形態
１．カメラシステムの全体構成
次に、本発明の第２の実施形態について説明する。図５及び図６は、第２の実施形態のシステム構成を示す模式図である。図５及び図６に示すように、第２の実施形態に係るシステムは、撮像部（カメラ）２０、送信装置３０、受信装置４０、および伝送路５０を含んで構成されている。撮像部（カメラ）２０、受信装置４０、および伝送路５０の基本的な構成は、第１の実施形態と同様である。
【００７３】
図５に示すように、送信機と受信機とは、非同期ネットワークを介して接続されている。図５は、カメラと送信機の構成を示しており、図６は受信機の構成を示している。
【００７４】
図５に示すように、撮像部（カメラ）２０は、ＣＣＤ（撮像素子）２２、ＰＬＬ２４、および映像処理部２６を有する。送信装置３０は、第１の実施形態と同様に、エンコーダ３１、タイムスタンプ付加部３２、同期信号発生器３３、時刻情報保持部３４を有する。
【００７５】
受信装置４０は、タイムスタンプ取得部４１、バッファ４００、デコーダ４２、バッファ４３、伝送遅延量計算部４１０、伝送遅延量統計計算部４２０、伝送遅延量統計表示部４３０、位相進み量操作部４４０、位相進み量計算部４５０、位相制御器４６０、同期信号時刻変換部４７０、同期信号周期測定部４８０、時刻情報保持部４７、を有して構成される。伝送遅延量計算部４１０、同期信号時刻変換部４７０は、第１の実施形態の遅延時間計算部４４、同期信号時刻変換部４５にそれぞれ対応するものである。また、バッファ４００は、非同期伝送網において伝送する際に、伝送遅延時間のばらつきを吸収するための伝送遅延ジッター吸収バッファである。なお、第２の実施形態においては、タイムスタンプ取得部４１と伝送遅延量計算部４１０とにより伝送遅延情報取得部が構成される。また、同期信号時刻変換部470と位相制御器４６０とにより同期信号伝達部が構成される。
【００７６】
第２の実施形態では、使用者（ユーザ）が伝送遅延量に基づいて位相進み量を操作することができるようにしている。ここで、伝送遅延量は、上述したように、非同期ネットワークによる伝送遅延時間である。このため、伝送遅延量統計表示部４３０にて伝送遅延量が表示されると、伝送遅延量を視認したユーザは、位相進み量操作部４４０を入力することで、位相進み量を所望の値に調整することができる。
【００７７】
ユーザによる所望の調整を実現するため、位相遅延量統計計算部４３０は、伝送遅延量の分布、伝送遅延量の推移、バッファ使用率の分布、バッファ使用率の推移などの各種統計情報を計算する。位相遅延量統計計算部４３０で計算した結果は、伝送遅延量統計表示部４３０に表示される。
【００７８】
以下、図面に基づいて具体的に説明する。伝送遅延量計算部４１０は、時刻情報保持部４７の時刻情報を参照して、符号化データＤＥＮＣに付加された時刻情報（タイムスタンプ）および符号化データを受信したときの時刻情報に基づき伝送路５０における遅延時間を測定する。伝送遅延統計計算部４２０は、遅延時間を取り込み、統計処理を行う。統計処理の結果は、伝送遅延量統計表示部４３０に表示される。また、統計処理の結果は、位相進み量計算部４５０にも送られる。
【００７９】
２．統計情報の一例
図７〜図１０は、統計処理の結果の一例を示す模式図である。ここで、図７は、ある時刻における伝送遅延量の平均値、標準偏差、最大値、最小値、ヒストグラムを示している。図７に示す例では、伝送遅延量の分布とともに、その平均値、最小値、最大値、標準偏差、限界遅延時間などの各種の値が示されている。また、図８は、伝送遅延量の推移を示す模式図である。図８に示す例では、伝送遅延量の平均値、標準偏差、最大値、最小値の時間的な推移を示している。
【００８０】
また、図９は、ある時刻における伝送遅延ジッター吸収バッファの使用率の平均値、標準偏差、最大値、最小値、ヒストグラムを図示している。図９に示す例では、バッファ４００の使用率がヒストグラムで示されており、バッファ使用率の平均値（＝４２％）、最小値、最大値、標準偏差などの値が示される。また、図１０は、図９に示すバッファ使用率の推移を示す模式図である。図１０に示す例では、伝送遅延ジッター吸収バッファ使用率の平均値、標準偏差、最大値、最小値の時間的な推移を示している。
【００８１】
図７〜図１０に示すような統計処理の結果が遅延量統計表示部４３０に表示されると、ユーザは、手動モードの場合、表示内容に基づいて位相進み量を操作することができる。この場合、ユーザは、位相進み量操作部４４０に操作を入力する。入力された操作量は、位相進み量計算部４５０に送られる。位相進み量計算部４５０は、入力された操作量と、操作入力された位相進み量調節パラメータから適切な位相進み量を計算し、目標となる位相進み量を位相制御器４６０へ送る。
【００８２】
同期信号時刻変換部４７０には、同期信号ＶＳＹＮＣが入力される。同期信号時刻変換部４７０は、時刻情報保持部４７の時刻情報を参照して、入力される基準同期信号ＶＳＹＮＣを時刻情報に変換して位相制御器４６０に入力する。位相制御器４６０は、同期信号時刻変換部４７０で時刻に変換された基準同期信号ＶＳＹＮＣを、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を位相情報として生成する。
【００８３】
また、同期信号周期測定部４８０は、基準同期信号ＶＳＹＮＣの周期Ｔを測定する。周期Ｔは、位相制御器４６０の出力に加算される。これにより、カメラに与えるＶＳＹＮＣの時刻が１周期Ｔだけ遅れることになる。これにより、過去の時刻の信号を制御することなく、次の時刻の信号の位相を制御することができる。そして、カメラに与えるＶＳＹＮＣは、非同期ネットワークを介して送信機３０へ送られる。
【００８４】
送信装置３０における基本的な処理は、第１の実施形態と同様である。送信装置３０の同期信号発生器３３は、時刻の情報を基に時刻情報のパルスを作ることで同期信号ＳＹＮＣ（６０Ｈｚ）を作り出し、発生する同期信号ＳＹＮＣの位相を前倒しした位相となるように設定する。ＰＬＬ２４は、同期信号発生器３３から送られた同期信号ＳＹＮＣに基づいて、撮像素子（ＣＣＤ）２２の駆動信号を出力する。撮像素子２２で撮像して得られた映像信号ＶＤＳは、映像処理部２６にて所定の映像処理（例えば、ホワイトバランス処理、エッジ強調処理など）がなされ、送信装置３０に出力される。
【００８５】
３．統計情報に基づく位相進み量の調整
手動モードの場合、使用者は表示された伝送遅延統計情報に基づいて、位相進み量の調節パラメータを操作することができる。例えば、ユーザは、図７及び図８の統計処理の結果を参照して、伝送遅延量の分布が０に近づいた場合は、位相進み量が小さくするための操作量を位相進み量操作部４４０に入力することができる。これにより、伝送遅延許容時間が小さくなることで総遅延時間が小さくなり、低遅延とすることができる。また、ユーザは、伝送遅延量の分布が限界遅延時間に近づいた場合は、位相進み量を大きくするための操作量を位相進み量操作部４４０に入力することができる。これにより、伝送遅延許容時間が大きくなることで大きな伝送遅延にも対応することができるようになり、バッファのアンダーフローによる映像の乱れが発生しにくくなる。
【００８６】
また、ユーザは、図９及び図１０の統計処理の結果を参照して、バッファ使用率の分布が大きい場合は、位相進み量を小さくするように操作することができる。これにより、伝送遅延許容時間が小さくなり、バッファで待機する時間も減るため、バッファ使用率を低下させると同時に低遅延とすることができる。また、ユーザは、バッファ使用率の分布が小さい場合は、位相進み量を大きくするように操作することができる。これにより、伝送遅延許容時間が大きくなり、バッファで待機する時間も増えるため、バッファ使用率を増加させることができる。好適には、バッファ４００がアンダーフローにならない範囲で、バッファ使用率をできるだけ低下させるように調整する。
【００８７】
位相進み量の調節パラメータとしては、位相進み量そのものの値に加え、トータル遅延時間、遅延パケット破棄率、位相進み量オフセット、最大遅延量マージン、平均バッファ使用率、最大／最小バッファ使用率などを用いることができる。
【００８８】
また、自動モードの場合、位相進み量計算部４５０は、伝送遅延量統計計算部４２０の計算結果に基づいて位相進み量を計算することができる。この場合、位相進み量計算部４５０は、伝送遅延統計計算部４２０から送られた伝送遅延量統計情報に基づいて、位相進み量を計算する。
【００８９】
自動モードの場合において、位相進み量を計算する方法の具体例としては、統計情報から伝送遅延時間の確率分布ｐ（ｔ）を推定し、この分布から、パケットロスがある目標値Ｐ＿ｌｏｓｓ以下になる最小の伝送遅延時間ｔ＿ｄｅｌａｙを求める。この伝送遅延時間ｔ＿ｄｅｌａｙに、映像のエンコード・デコード時間やパケット化時間など伝送以外に必要な時間ｔ＿ｍｉｓｃを加えた時間(ｔ＿ｄｅｌａｙ+ｔ＿ｍｉｓｃ)を、位相進み量として設定する。
【００９０】
以上のように、伝送遅延量またはバッファ使用率の分布に基づいて、伝送遅延許容時間を最適に制御することができる。従って、伝送遅延量が限界遅延時間を超えてしまうこと確実に抑止することが可能となる。また、バッファ使用率がオーバーフローまたはアンダーフローしてしまうことを確実に抑止することが可能となる。
【００９１】
特に品質の要求される放送用機器において、映像の品質が確保できるかどうかをオペレータが確認できるということは非常に重要である。例えばＶＴＲにおいては、テープの再生が正常に行われているかを示すモニタリング機能があり、製品に搭載されている。またカメラにおいては、システムカメラとカメラ・コントロール・ユニット間の光ケーブル伝送の安定度を知るために光レベルモニタリング機能が搭載されている。非同期ネットワークを利用する場合においても、ネットワークを共有する他の機器の通信状態によって伝送品質が左右されるため、本実施形態のようなモニタリング機能を搭載することで、最適な調整を行うことが可能となる。これにより、運用中に伝送路の状況（伝送遅延、そのばらつき等）が変化した場合には、状況に応じて伝送遅延許容時間、バッファ使用率を調整することで、映像の乱れを確実に抑えることが可能である。
【００９２】
図１１及び図１２は、位相を制御する方法の例を示す模式図である。ここで、図１１は、位相進み量を瞬時に変える場合を示している。この場合、図１１に示すように、上段に示す位相から下段に示す位相へ瞬時に位相進み量を変更する。この方法は、素早く位相調整ができるが、カメラ側の同期信号による同期が外れ、映像が乱れることが想定される。図１１の方法は、位相の変化が早い一方、映像が乱れる可能性があるために、同期信号の抜き差し、または映像フォーマットの変更、起動時初期化処理など、撮影前の準備などで主に用いることが好適である。
【００９３】
また、図１２は、位相進み量を徐々に変える場合を示している。この場合、図１２に示すように、最上段に示す位相から再下段に示す位相へ徐々に位相進み量を変更する。この場合、与えられた位相進み量になるように、カメラの同期が外れない範囲内で位相進み量を少しずつ変化させる。この方法は、カメラ２０の動作周波数を変化させることによって位相を動かすため、図１０で説明したようにＣＣＤ２２の駆動周波数が徐々に変化するため、カメラの同期が外れず映像が乱れない。一方、位相進み量の変化は図１１の方法に比べて遅くなる。図１２の方法は、映像の乱れが最小限に抑えられるため、主として撮影中の位相調整などに用いることが好適である。
【００９４】
図１２の場合において、位相進み量を徐々に変える場合の具体的な処理例を以下に示す。
if(t_goal-t_now > Δt_max) then t_next = t_now + Δt_max
else if(t_goal-t_now < -Δt_max) then t_next = t_now - Δt_max
else t_next = t_goal
なお、上式において、
t_goal
: 位相進み量の目標値
t_now
: 現在の位相進み量
t_next
: 次の位相進み量
Δt_max : 位相進み量の微小変化量の最大値
である。
上式により、以下の処理が実現される。
・位相進み量の目標値から現在の位相進み量の差が、微小変化量の最大値以上の場合は、次の位相進み量を現在の位相進み量と微小変化量の最大値の和とする。
・現在の位相進み量から位相進み量の目標値の差が、微小変化量の最大値以上の場合は、次の位相進み量を現在の位相進み量と微小変化量の最大値の差とする。
・それ以外の場合は、位相進み量の目標値を次の位相進み量とする。
【００９５】
図１３は、図６の受信装置４０の各タイミングにおける信号を示すタイミングチャートである。タイミング１は、同期信号時刻変換部４７０にて同期信号ＳＹＮＣが時刻に変換された状態を示している。また、タイミング２は、位相進み量計算部４５０から出力された、目標位相進み量だけ位相を進めた場合の信号（目標値）を示している。
【００９６】
タイミング３は、位相制御器４６０からの出力信号を示しており、位相制御器４６０にて目標位相進み量だけ位相を進めた場合の実際の位相進み量を示している。時刻ｔ０において位相進み量計算部４５０から目標位相進み量ｄ１が与えられると、位相制御器４６０から出力される実際の位相進み量はｄ１だけ進んだ状態となる。この場合は、図１１で説明した、瞬時に位相を切り換える場合に該当する。
【００９７】
また、時刻ｔ５で目標位相進み量がｄ２に変化すると、実際の位相進み量はすぐには変化せず、時刻ｔ５からｔ９の間で時間をかけながら順次に目標に収束し、時刻ｔ９で実際の位相進み量がｄ２に到達する。この場合は、図１２で説明した、次第に位相を切り換える場合に該当する。
【００９８】
図１３に示すタイミング４は、同期信号周期測定部４８０で測定された周期を、位相制御器４６０からの出力（タイミング３の信号）に加算した状態を示している。このように、周期Ｔを加算したことにより、位相制御器４６０の出力が周期Ｔだけ遅くなる。図５に示すように、タイミング４の信号は、送信装置２０に送られ、同期信号発生器３３からカメラ１０のＰＬＬ２４へ送られる。
【００９９】
タイミング５は、ＣＣＤ駆動信号を示しており、ＰＬＬ２４にてタイミング４の信号から生成される。同期信号の間隔が、１フィールドの区間となる。時刻ｔ６以降で実際の位相進み量が変化していくと、目標に収束するまでの間は同期信号の間隔が短くなるため、１フィールドの区間が僅かに短くなる。実際の位相進み量ｄ２が目標値に達すると、同期信号の間隔（１フィールドの区間）は元の状態に戻る。
【０１００】
タイミング６は、映像信号がネットワーク５０から受信装置３０に送られて、バッファ３３から映像として出力された際の信号を示している。タイミング６の信号では、ネットワーク５０による伝送遅延、コーデックによる遅延等が含まれている。
【０１０１】
以上のように、位相進み量計算部４５０から出力された目標位相進み量だけ位相を変化させることで、実際の位相進み量を最適に制御することが可能となる。なお、図１３では、位相を進める場合を例示したが、位相を遅らせる場合も同様に行うことができる。
【０１０２】
４．本実施形態のシステムの処理手順
次に、本実施形態の処理について説明する。図１４は、映像情報の受信から位相進み量を指令するまでの処理を示すフローチャートである。また、図１５は、同期信号入力から位相情報送信までの処理を示すフローチャートである。
【０１０３】
先ず、図１４のステップＳ１０１では、受信装置４０で映像信号を受信すると、タイムスタンプ取得部４１において映像信号に付加されていたタイムスタンプを取得し、伝送遅延量計算部４１０にて伝送遅延量を計算する。
【０１０４】
次のステップＳ１０２では、計算された伝送遅延量の集合から、統計量の計算を行う。ここでは、伝送遅延統計計算部４２０により伝送遅延量統計情報を計算する。統計情報には、伝送遅延量の平均・分散・最大値・最小値・ヒストグラムなどが含まれる。また、ステップＳ１０２では、伝送遅延ジッター吸収バッファの使用量の統計情報も伝送遅延量とともに計算する。上述したように、伝送遅延ジッター吸収バッファとは、非同期伝送網において伝送する際に、伝送遅延時間のばらつきを吸収するためのバッファであり、図５のバッファ４００に相当する。上述したように、バッファ使用量の統計情報には、バッファの平均使用率・分散・最大値・最小値・ヒストグラムなどが含まれる。
【０１０５】
次のステップＳ１０３では、伝送遅延統計計算部４２０により統計のサンプル数が十分であるか、所定数以上であるかを判定し、サンプル数が十分である場合（所定数以上である場合）は、ステップＳ１０４に進む。ステップＳ１０４では、伝送遅延統計表示部４３０に伝送遅延統計情報を表示する。ここでは、図７〜図１０に示したような統計情報を表示する。一方、ステップＳ１０３でサンプル数が十分でない場合（所定数未満である場合）は、処理を終了する。
【０１０６】
ステップＳ１０４の後はステップＳ１０５へ進み、遅延により映像乱れが発生する可能性が高いか否かを判断する。映像乱れが発生する可能性が高い場合は、ステップＳ１０６へ進み、警告を出す。警告は、伝送遅延統計情報に基づき、映像の乱れを起こす可能性が高いと判断される場合は出される。警告を出す基準としては、例えば受信装置４０のジッター吸収バッファ４００に存在するデータが少ない場合、パケットのロス率が設定値以上になったときなどが挙げられる。警告は、伝送遅延統計表示部４３０に表示しても良いし、音声等により発音しても良い。ステップＳ１０６の後は、ステップＳ１０７へ進む。また、ステップＳ１０５にて、映像乱れが発生する可能性が高くない場合は、ステップＳ１０６の警告を発することなく、ステップＳ１０７へ進む。
【０１０７】
ステップＳ１０７では、手動モードであるか否かを判定し、手動モードの場合はステップＳ１０８へ進む。ステップＳ１０８では、位相進み量操作部４４０に入力された操作量を取得する。次のステップＳ１０９では、手動操作量と、伝送遅延量の統計情報とに基づいて、位相進み量を計算する。
【０１０８】
一方、ステップＳ１０７で手動モードではない場合、すなわち自動モードの場合は、ステップＳ１１１へ進む。ステップＳ１１１では、統計情報に基づいて位相進み量を計算する。ステップＳ１０９，Ｓ１１１の後はステップＳ１１０へ進む。ステップＳ１１０では、位相制御器４６０へ位相進み量を指令する。ステップＳ１１０の後は処理を終了する。
【０１０９】
図１５は、同期信号の位相を進める場合に、位相進み量の変換の手法を決める処理を示すフローチャートである。先ず、ステップＳ２０１では、同期信号時刻変換部４７０において、同期信号時刻変換を行い、同期信号ＳＹＮＣを時刻情報に変換する。次のステップＳ２０２では、位相進み量を徐々に変化させるモードか否かを判定し、位相進み量を徐々に変化させるモードの場合は、ステップＳ２０３へ進む。ステップＳ２０３では、上述した式１を用いて位相の進み量の微小変化量を計算する。ステップＳ２０３の後はステップＳ２０４へ進み、次の位相進み量を算出する。次の位相進み量は、現在の位相進み量に微小変化量を加算することによって算出される。
【０１１０】
一方、ステップＳ２０２において、位相進み量を徐々に変化させるモードではない場合、すなわち、位相進み量を瞬時に変化させるモードの場合は、ステップＳ２０７へ進む。ステップＳ２０７では、次の位相進み量として、位相進み量計算部で計算された位相進み量の最終値を指令値とする。
【０１１１】
ステップＳ２０４，Ｓ２０７の後は、ステップＳ２０５へ進む。ステップＳ２０５では、位相制御器４６０により、位相進み量に基づいて同期信号の位相を進ませる。次のステップＳ２０６では、位相に同期信号の周期を加え、送信装置２０へ位相情報を送信する。ステップＳ２０６の後は、処理を終了する。
【０１１２】
送信装置４０は、受け取った位相情報を元に送信機側で同期信号を生成し、カメラ２０に入力する。カメラ２０の内部では、入力された同期信号に位相を合わせて映像を出力するため、撮像素子（ＣＣＤ２２）等の駆動周波数が変化する。
【０１１３】
以上のステップＳ１０１〜Ｓ１１０、ステップＳ２０１〜Ｓ２０６が繰り返し行われることにより、位相進み量の調整を継続的に行うことができる。なお、上述した説明では、ステップＳ１０２〜Ｓ１１０の処理は受信機４０の内部で行われるが、受信装置４０の外部で行っても良い。
【０１１４】
以上説明したように第２の実施形態によれば、使用者が、統計情報の表示を視認することにより、映像の伝送遅延状況やバッファの使用状況を知ることができる。そして、この情報を元に使用者が位相進み量調整パラメータを操作することで、使用者が意図した遅延時間と伝送品質に調整することができる。また、自動で位相進み量を調整することで、伝送遅延量が変化した場合にもバッファがオーバーフロー、またはアンダーフローになることを抑止でき、映像出力を安定させることができる。
【０１１５】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【０１１６】
１０・・・カメラシステム、２０・・・撮像部、３０・・・送信装置、３１・・・エンコーダ（符号化部）、３２・・・タイムスタンプ付加部（時刻情報付加部）、３３・・・同期信号発生器、３４・・・時刻情報保持部、４０・・・受信装置、４１・・・タイムスアンプ取得部、４２、デコーダ（復号部）、４３・・・バッファ（同期出力部）、４４・・・遅延時間計算部（伝送遅延測定部）、４５・・・同期信号時刻変換部（同期信号伝達部）、４６・・・ＣＰＵ（同期信号伝達部、制御部）、４７・・・時刻情報保持部、５０・・・伝送路、４００・・・バッファ、４１０・・・伝送遅延量計算部、４２０・・・伝送遅延量統計計算部、４３０・・・伝送遅延統計表示部、４４０・・・位相進み量操作部、４５０・・・位相進み量計算部、４６０・・・位相制御器、４７０・・・同期信号時刻変換部。
【技術分野】
【０００１】
本発明は、映像を伝送する受信装置およびカメラシステムに関するものである。
【背景技術】
【０００２】
近年、ライブ放送などでは低遅延の映像伝送が求められている。
また、伝送路としてはコストの面などからＬＡＮやインターネット、ＮＧＮ等のＩＰ網など非同期通信回線での伝送が求められている。
このような要求から低遅延コーデックとしてラインベースコーデックが提案されている（たとえば、特許文献１参照）。
【０００３】
マルチカメラが前提となるシステムカメラやＶＴＲでは、各機器の出力位相を合わせるために、受信装置に同期信号入力が設けられており、出力映像信号が同期信号に同期する必要がある。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８-０２８５４１号公報
【特許文献２】特開２００６-３２５０２０号公報
【特許文献３】特開平１１-２７５４６１号公報
【特許文献４】特開平０１−２５５３８２号公報
【特許文献５】特開２００６−２１７３８４号公報
【特許文献６】特開平１１−２７５４６１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、映像の供給元（カメラやＶＴＲなど）となる機器Ａと同期信号入力の入力先となる機器Ｂが一致せず、この２つの機器間で映像を伝送している場合は、伝送遅延を考慮しないと機器Ｂから出力する出力映像信号が正しく同期信号に同期しない。
【０００６】
このような例としては、機器Ａとしてカメラ、機器Ｂとしてカメラ・コントロール・ユニット（ＣＣＵ）からなるシステムが挙げられる。出力映像と同期信号を正しく同期させるため、カメラ・コントロール・ユニットとカメラが接続されているときに、ケーブル等による遅延分だけカメラ内で同期信号の位相を進めることで、カメラ・コントロール・ユニットへ入力された同期信号と映像出力を同期させる技術がある（たとえば、特許文献４，５参照）。
【０００７】
しかし、機器Ａと機器Ｂを非同期伝送路でつなぐ場合においては、これらの技術を使うことができない。非同期伝送路においては、伝送遅延が一定ではなく、ばらつきを有しており、このばらつきを吸収する必要があるからである。伝送遅延のばらつきを考慮しない場合、遅延量が大きくなると映像を出力すべき時間になっても映像情報が機器Ｂに届かず、映像が乱れるという現象が発生する。
【０００８】
ＩＰ網などの非同期通信回線を使ってコーデックデータを伝送する場合、コーデックでのジッタ、伝送路でのジッタなど多くの不安定な遅延要素が含まれる。
このため、安定してデコードするためにデータ領域にバッファを設け、同期をとる技術が提案されている（たとえば、特許文献２参照）。
【０００９】
しかし、上記した特許文献２に開示された技術では、安定した映像の出力は得られるものの、基準同期信号入力に同期した映像を得ることはできない。
そのため、デコーダの出力映像を基準同期信号入力に同期した映像にするために映像をフレームバッファで同期をとる技術が必要となる（たとえば特許文献３参照）。
【００１０】
このように位相信号入力の位相にデコーダの出力位相を合わせるためにフレームバッファを用いる場合、フレームバッファで１フレーム近くの遅延が発生してしまう。
特に、コーデックでの遅延量が数ラインの低遅延コーデックを用いた低遅延映像伝送装置ではフレームバッファでの遅延は無視できない大きな遅延であり、低遅延を最大の特徴とする低遅延伝送システムでは大きな問題である。
【００１１】
また、機器Ａと機器Ｂが非同期伝送路でつながれている場合に同期をとる場合、特許文献３に記載されている方法では、機器Ａの映像出力から機器Ｂの映像出力までの遅延時間を意図した値に調整することができない問題がある。
【００１２】
更に、映像信号をバッファに記憶しておく時間が短すぎると、今度は伝送遅延のばらつきに対応できず、バッファがアンダーフローした場合、若しくはオーバーフローした場合に、出力映像が乱れる原因となる。
【００１３】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、非同期伝送路の伝送遅延のジッタに対応可能で、かつ、同期信号入力に同期した映像出力を得ることのできる低遅延映像伝送を実現することが可能な、新規かつ改良された 受信装置およびカメラシステムを提供することにある。
【課題を解決するための手段】
【００１４】
上記課題を解決するために、本発明のある観点によれば、伝送路を伝送された映像の符号化データを復号する復号部と、上記復号部で復号された映像データを基準同期信号に同期させて出力する同期出力部と、入力される上記符号化データおよび時刻情報により伝送路の遅延に係る情報を取得する伝送遅延情報取得部と、上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御する位相情報を求め、当該位相情報を、上記伝送路を通して伝達する同期信号伝達部と、を有する受信装置が提供される。
【００１５】
また、前記伝送遅延情報取得部は、伝送路の遅延時間を測定する伝送遅延測定部を含み、前記同期信号伝達部は、上記伝送遅延測定部で得られた遅延時間から伝送に必要な時間を求め、入力される上記基準信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための前記位相情報を求めるものであってもよい。
【００１６】
また、上記符号化データは、上記伝送路に送出された時刻情報が付加されており、上記伝送遅延測定部は、上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間を伝送遅延許容時間として求め、上記同期信号伝達部は、上記伝送遅延許容時間を上記伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を生成するための時刻の情報を上記位相情報として上記伝送路を通して伝達するものであってもよい。
【００１７】
また、少なくとも上記伝送路および上記復号部によりコーデック部が形成され、当該コーデック部の遅延量が、コーデック遅延量としてあらかじめ設定され、上記同期信号伝達部は、上記伝送遅延測定部で得られた伝送遅延許容時間と上記コーデック遅延量の総和時間を上記伝送に必要な時間として求め、入力される上記基準同期信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための位相情報を求め、当該位相情報を、上記伝送路を通して伝達するものであってもよい。
【００１８】
また、上記符号化データは、上記伝送路に送出された時刻情報が付加されており、上記伝送遅延測定部は、上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間として伝送遅延許容時間を求め、上記同期信号伝達部は、上記伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を上記位相情報として上記伝送路を通して伝達するものであってもよい。
【００１９】
また、上記同期信号伝達部は、入力される上記基準同期信号を同期パルスごとに時刻を記録して上記伝送路に送出するものであってもよい。
【００２０】
また、上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御するための位相制御量を求める位相制御量計算部を備え、前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御し、制御された位相情報を上記伝送路を通して伝達するものであってもよい。
【００２１】
また、前記伝送路の遅延に係る情報の統計情報を計算する統計計算部を備え、前記位相制御量計算部は、前記統計情報に基づいて前記位相制御量を求めるものであってもよい。
【００２２】
また、前記伝送路の遅延に係る情報の統計情報を計算する統計計算部と、前記統計情報を表示する表示部と、前記表示部の表示に基づいて入力される操作量を取得する操作部と、を備え、前記位相制御量計算部は、前記統計情報と前記操作量とに基づいて前記位相制御量を求めるものであってもよい。
【００２３】
また、前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御する位相制御部を含み、前記位相制御部は、上記基準同期信号の位相を目標となる位相制御量に瞬時に制御するものであってもよい。
【００２４】
また、前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御する位相制御部を含み、前記位相制御部は、上記基準同期信号の位相を目標となる位相制御量に段階的に制御するものであってもよい。
【００２５】
また、前記伝送路の遅延に係る情報は、前記伝送路の遅延時間又は上記符号化データを蓄積するバッファの使用率であってもよい。
【００２６】
また、上記課題を解決するために、本発明の別の観点によれば、撮像して映像信号を得る撮像部と、伝送路と、上記撮像部で撮像して得られた映像信号の符号化データを上記伝送路に送出する送信装置と、上記符号化データを受信する受信装置と、を有し、上記送信装置は、入力される映像信号を符号化データに変換し、当該符号化データを上記伝送路に送出する符号化部と、上記伝送路を伝送された位相情報を基に、上記撮像部により得られ、入力される映像信号の位相を調整する同期信号を発生する同期信号発生部と、を含み、上記位相情報は、伝送に必要な時間だけ、上記同期信号発生部で発生する同期信号のタイミングを前にずらすことを示す情報を含み、上記同期信号発生部は、入力される映像信号を伝送に必要な時間だけ前倒しするように上記同期信号を発生し、上記受信装置は、伝送路を伝送された映像の符号化データを復号する復号部と、上記復号部で復号された映像データを基準同期信号に同期させて出力する同期出力部と、入力される上記符号化データおよび時刻情報により伝送路の遅延に係る情報を取得する伝送遅延情報取得部と、上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御する位相情報を求め、当該位相情報を、上記伝送路を通して伝達する同期信号伝達部と、と、を含む、カメラシステムが提供される。
【００２７】
また、上記位相情報は、伝送に必要な時間だけ、上記同期信号発生部で発生する同期信号のタイミングを前にずらすことを示す情報を含み、上記同期信号発生部は、入力される映像信号を伝送に必要な時間だけ前倒しするように上記同期信号を発生し、前記伝送遅延情報取得部は、伝送路の遅延時間を測定する伝送遅延測定部を含み、前記同期信号伝達部は、上記伝送遅延測定部で得られた遅延時間から伝送に必要な時間を求め、入力される上記基準信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための前記位相情報を求めるものであってもよい。
【００２８】
また、上記送信装置は、上記符号化データに上記伝送路に送出される時刻情報を付加する時刻情報付加部を含み、上記受信装置の上記伝送遅延測定部は、上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間を伝送遅延許容時間として求め、上記同期信号伝達部は、上記伝送遅延許容時間を上記伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を生成するための時刻の情報を上記位相情報として上記伝送路を通して上記送信装置に伝達し、上記送信装置の同期信号発生部は、上記時刻の情報を基に、発生する上記同期信号の位相を前倒しした位相となるように設定するものであってもよい。
【００２９】
また、上記符号化部、上記伝送路、および上記復号部によりコーデック部が形成され、当該コーデック部の遅延量が、コーデック遅延量としてあらかじめ設定され、上記同期信号伝達部は、上記伝送遅延測定部で得られた伝送遅延許容時間と上記コーデック遅延量の総和時間を上記伝送に必要な時間として求め、入力される上記基準同期信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための位相情報を求め、当該位相情報を、上記伝送路を通して上記送信装置に伝達するものであってもよい。
【００３０】
また、上記送信装置は、上記符号化データに上記伝送路に送出される時刻情報を付加する時刻情報付加部を含み、上記受信装置の伝送遅延測定部は、上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間として伝送遅延許容時間を求め、上記同期信号伝達部は、上記伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を上記位相情報として上記伝送路を通して上記送信装置に伝達し、上記送信装置の同期信号発生部は、上記時刻の情報を基に、発生する上記同期信号の位相を前倒しした位相となるように設定するものであってもよい。
【００３１】
また、上記受信装置は、上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御するための位相制御量を求める位相制御量計算部を備え、前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御し、制御された位相情報を上記伝送路を通して伝達するものであってもよい。
【００３２】
また、上記受信装置は、前記伝送路の遅延に係る情報の統計情報を計算する統計計算部を備え、前記位相制御量計算部は、前記統計情報に基づいて前記位相制御量を求めるものであってもよい。
【００３３】
また、上記受信装置は、前記伝送路の遅延に係る情報の統計情報を計算する統計計算部と、前記統計情報を表示する表示部と、前記表示部の表示に基づいて入力される操作量を取得する操作部と、を備え、前記位相制御量計算部は、前記統計情報と前記操作量とに基づいて前記位相制御量を求めるものであってもよい。
【発明の効果】
【００３４】
本発明によれば、非同期伝送路の伝送遅延のジッタに対応可能で、かつ、同期信号入力に同期した映像出力を得ることできる低遅延映像伝送を実現できる。
【図面の簡単な説明】
【００３５】
【図１】本発明の実施形態に係る映像伝送装置を採用したカメラシステムの構成例を示す図である。
【図２】本実施形態において、伝送に必要な時間だけ送信装置側の同期信号の発生を早める基本原理を説明するための図である。
【図３】既存の映像伝送装置の課題を説明するための図である。
【図４】本実施形態の映像伝送装置の起動時の動作を説明するためのフローチャートである。
【図５】第２の実施形態のシステム構成を示す模式図である。
【図６】第２の実施形態のシステム構成を示す模式図である。
【図７】統計処理の結果の一例を示す模式図である。
【図８】統計処理の結果の一例を示す模式図である。
【図９】統計処理の結果の一例を示す模式図である。
【図１０】統計処理の結果の一例を示す模式図である。
【図１１】位相進み量を瞬時に変える場合を示す模式図である。
【図１２】位相進み量を徐々に変える場合を示す模式図である。
【図１３】図６の受信装置４０の各タイミングにおける信号を示すタイミングチャートである。
【図１４】映像情報の受信から位相進み量を指令するまでの処理を示すフローチャートである。
【図１５】同期信号入力から位相情報送信までの処理を示すフローチャートである。
【発明を実施するための形態】
【００３６】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００３７】
なお、説明は以下の順序で行うものとする。
第１の実施形態
１．映像伝送装置を含むカメラシステムの全体構成の概要
２．送信装置の構成例
３．受信装置の構成例
４．起動時の動作例
第２の実施形態
１．カメラシステムの全体構成
２．統計情報の一例
３．統計情報に基づく位相進み量の調整
４．本実施形態のシステムの処理手順
【００３８】
・第１の実施形態
＜１．映像伝送装置を含むカメラシステムの全体構成の概要＞
図１は、本発明の第１の実施形態に係る映像伝送装置を採用したカメラシステムの構成例を示す図である。
【００３９】
本カメラシステム１０は、撮像部２０、送信装置３０、受信装置４０、および伝送路５０を含んで構成されている。
そして、送信装置３０、受信装置４０、および伝送路５０により映像伝送装置が構成される。
【００４０】
伝送路５０は、送信装置３０と受信装置４０間の信号伝送に適用される。
本実施形態において伝送路５０は、ＬＡＮやインターネット、ＮＧＮ等のＩＰ網などの非同期伝送路を想定している。なお、非同期伝送路は伝送にかかる時間に揺らぎがあり、その時間を伝送ジッタと呼ぶ。
また、本実施形態においては、たとえば伝送路５０を伝送される信号はパケット化される。
【００４１】
本実施形態のカメラシステム１０は、以下の特徴をもって構成されている。
カメラシステム１０においては、基本的に図２に示すように、送信装置３０から同期信号ＳＹＮＣを出力し、その同期信号ＳＹＮＣの位相を制御することにより、送信装置３０に入力される撮像部２０により得られた映像信号の位相を制御する。
受信装置４０に入力される基準同期信号ＲＳＹＮＣから、伝送に必要な遅延量だけ、送信装置３０で出力する同期信号ＳＹＮＣのタイミングを前にずらすことで、入力映像を伝送に必要な遅延時間だけ前倒しする。
これにより、本カメラシステム１０は、受信装置４０に入力された基準同期信号ＲＳＹＮＣに同期したデコード映像を得ることができる。
そして、本カメラシステム１０は、伝送路５０で生じる遅延量を測定する機能と組み合わせ、最低の遅延量（伝送遅延許容時間）を算出することにより、低遅延映像伝送を実現する。なお、伝送遅延許容時間は、伝送遅延の許容最大値に相当し、非同期ネットワークによる伝送遅延時間（伝送遅延量）と、非同期ネットワークのジッタを吸収するバッファ４００で待機する時間との和に相当する。
【００４２】
このような構成を採用した理由は以下の通りである。
既存の映像伝送装置では入力映像はフリーの位相であり、その映像をエンコード（符号化）し、伝送し、デコード（復号）する時に生じる遅延時間だけ遅れた映像が受信機の映像出力から出力されるような構造となっている。
このような構造では低遅延の映像を伝送するために低遅延コーデックを使ってエンコードとデコードの遅延量を低く抑えたとしても、非同期伝送路での伝送ジッタを吸収するために、実際に必要なバッファ量よりも多くのバッファを必要としていた。
これはＩＰ網などの非同期伝送路での伝送ジッタがどのくらいの量か不明であるため、余裕を持つ必要があるからである。
また、複数カメラの映像を切り替え器(スイッチャー)に入力する場合など、受信装置からの出力映像を基準同期信号ＲＳＹＮＣに同期させる必要がある場合、図３に示すように、デコーダＤＥＣの後段に映像を同期するためのフレームバッファＦＢＦが必要となる。 このフレームバッファＦＢＦでの遅延は低遅延伝送では無視できない大きなものとなる。
【００４３】
そこで、本実施形態においては、受信装置４０に入力される基準同期信号ＲＳＹＮＣから、伝送に必要な遅延量だけ、送信装置３０で出力する同期信号ＳＹＮＣのタイミングを前にずらすことで、入力映像を伝送に必要な遅延時間だけ前倒しする。
これにより、本カメラシステム１０は、受信装置４０に入力された基準同期信号ＲＳＹＮＣに同期したデコード映像を得ることができ、伝送路５０で生じる遅延量を測定する機能と組み合わせ、最適な遅延量を求めて低遅延映像伝送を実現するように構成される。
【００４４】
以下、以上の特徴を有する本カメラシステム１０を形成する撮像部２０、送信装置３０、および受信装置４０の構成および機能について具体的に説明する。
【００４５】
［１．撮像部２０の構成］
撮像部２０は、ＣＣＤやＣＭＯＳイメージセンサ等の撮像素子と、撮像素子で光電変換された信号に対してカメラ信号処理を施す信号処理回路を含んで構成される。
撮像部２０は、撮像して得られた映像信号ＶＤＳを送信装置３０に出力する。
撮像部２０は、同期信号入力を備えており、イメージセンサの撮像タイミングを調整することで、映像信号ＶＤＳの出力位相を同期信号入力に合わせる機能を有する。
なお、映像信号ＶＤＳにはビデオ信号および音声信号が含まれる。
【００４６】
＜２．送信装置３０の構成例＞
送信装置３０は、符号化部としてのエンコーダ３１、時刻情報付加部としてのタイムスタンプ付加部３２、同期信号発生器３３、および時刻情報保持部３４を有する。
【００４７】
エンコーダ３１は、入力される映像信号ＶＤＳを符号化データに変換し、この符号化データをタイムスタンプ付加部３２に出力する。
タイムスタンプ付加部３２は、時刻情報保持部３４の時刻情報を参照して、符号化データに伝送路５０に送出される時刻情報をタイムスタンプとして付加し、タイムスタンプを付加した符号化データＤＥＮＣを伝送路５０に送出する。
【００４８】
同期信号発生器３３は、受信装置４０から送出され、伝送路５０を伝送された位相情報を基に、時刻情報保持部３４の時刻情報を参照して、撮影部２０に対して同期信号ＳＹＮＣを発生する。撮像部２０は撮像タイミングを調整することで、入力された同期信号ＳＹＮＣに位相の合った映像信号ＶＤＳを送信装置３０に対して出力する。これにより、送信装置３０に入力される映像信号ＶＤＳの位相を調整する。
ここで、位相情報ＰＨＳは、伝送に必要な時間だけ、同期信号発生器３３で発生する同期信号ＳＹＮＣのタイミングを前にずらすことを示す情報を含む。
位相情報ＰＨＳは、受信装置４０に入力される基準同期信号ＲＳＹＮＣを時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号ＳＹＮＣを生成するための時刻の情報として伝送路５０を伝送される。
位相情報については、後でさらに詳述する。
【００４９】
同期信号発生器３３は、このような位相情報ＰＨＳを基に、入力される映像信号ＶＤＳを伝送に必要な時間だけ前倒しするように同期信号ＳＹＮＣを発生する。
同期信号発生器３３は、位相情報ＰＨＳに含まれる時刻の情報を基に時刻情報のパルスを作ることで同期信号ＳＹＮＣを作り出し、発生する同期信号ＳＹＮＣの位相を前倒しした位相となるように設定する。
【００５０】
本実施形態においては、送信装置３０の時刻情報保持部３４は、受信装置４０と独立し
た時刻情報を持つ。この時刻は世界で統一されている何日何時といった情報である。ＮＴＰ（Network Time Protocol），ＧＰＳ(Global Positioning
System)，ＲＴＣ(Real TimeClock)などの技術を用いて正しい時刻に合わせておくことが可能である。これにより、受信装置４０の時刻情報４７と時刻情報３４の時刻が近くなるように調整される。
【００５１】
＜３．受信装置４０の構成例＞
受信装置４０は、タイムスタンプ取得部４１、復号部としてのデコーダ４２、同期出力部としてバッファ４３、遅延時間計算部４４、同期信号時刻変換部４５、制御部であるＣＰＵ４６、および時刻情報保持部４７を有する。
タイムスタンプ取得部４１および遅延時間計算部４４により伝送遅延情報取得部（伝送遅延測定部）が構成される。
また、同期信号時刻変換部４５およびＣＰＵ４６により同期信号伝達部が構成される。
【００５２】
また、本実施形態においては、送信装置３０のエンコーダ３１、タイムスタンプ付加部３２、伝送路５０、タイムスタンプ取得部４１、およびデコーダ４２によりコーデック部が形成される。
なお、タイムスタンプ付加部３２およびタイムスタンプ取得部４１を含まない場合も基本的なコーデック部が形成される。
ＬＬＶＣなどの低遅延コーデックを使うことで低遅延映像伝送を実現できる。コーデック部での遅延量を「コーデック遅延量」と呼び、コーデックの方法や設定によって変化し、伝送映像の絵柄によっても変化する。
本実施形態の受信装置４０においては、コーデック遅延量の最大値をあらかじめ測定してあり、その最大値がコーデック遅延量として設定されている。
【００５３】
タイムスタンプ取得部４１は、送信装置３０から送出され伝送路５０を伝送された符号化データＤＥＮＣを受信して、付加されている送出された時刻を示すタイムスタンプ情報を取得して遅延時間計算部４４に出力する。また符号化データＤＥＮＣをデコーダ４２に出力する。
【００５４】
デコーダ４２は、受信した符号化データＤＥＮＣをデコードし、デコードされた映像データＤＤＥＣをバッファ４３に出力する。
【００５５】
同期信号出力部としてのバッファ４３は、デコーダ４２でデコードされた映像データＤＤＥＣを、入力される基準同期信号ＲＳＹＮＣに同期させ出力する。
本実施形態では、このバッファ４３の量を最低限に抑えることができる。
【００５６】
遅延時間計算部４４は、受信装置４０の伝送遅延測定部として機能する。
遅延時間計算部４４は、時刻情報保持部４７の時刻情報を参照して、符号化データＤＥＮＣに付加された時刻情報および符号化データを受信したときの時刻情報に基づき伝送路５０における遅延時間を測定する。
遅延時間計算部４４は、伝送路５０を通る各パケットの遅延時間を取り込み、統計処理を行うことで伝送に必要な遅延時間を求める。この値を「伝送遅延許容時間」と呼ぶ。
このように、遅延時間計算部４４は、実際の符号化データを用いて伝送路の遅延時間を測定する。遅延時間計算部４４は、伝送遅延のジッタを把握するために一定時間測定を行い、パケットごとの遅延時間が集まったら、遅延時間の集合に対して統計処理を行い、伝送路５０でかかる遅延時間を算出する。
【００５７】
同期信号時刻変換部４５は、時刻情報保持部４７の時刻情報を参照して、入力される基準同期信号ＲＳＹＮＣを時刻情報に変換してＣＰＵ４６に出力する。
ＣＰＵ４６は、同期信号時刻変換部４５とともに同期信号伝達部として機能する。
この同期信号伝達部として機能するＣＰＵ４６は、遅延時間計算部４４で得られた伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間を求める。
ＣＰＵ４６は、求めた伝送に必要な時間を同期信号の位相差とし、同期信号時刻変換部４５で時刻に変換された基準同期信号ＲＳＹＮＣを、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を位相情報として生成する。
そして、ＣＰＵ４６は、生成した位相情報ＰＨＳを、伝送路５０を通して送信装置３０に伝達する。
これに応答して、送信装置３０の同期信号発生器３３は、時刻の情報を基に時刻情報のパルスを作ることで同期信号ＳＹＮＣを作り出し、発生する同期信号ＳＹＮＣの位相を前倒しした位相となるように設定する。
なお、同期信号時刻変換部４５およびＣＰＵ４６を含む同期信号伝達部は、入力される基準同期信号ＲＳＹＮＣを同期パルス、たとえば映像信号の垂直同期信号ごとに時刻を記録して位相情報として伝送路５０を通して送信装置３０に伝達する。
【００５８】
本実施形態においては、受信装置４０の時刻情報保持部４７は、送信装置３０と独立した時刻情報を持つ。この時刻は世界で統一されている何日何時といった情報である。ＮＴＰ，ＧＰＳ，ＲＴＣなどの技術を用いて正しい時刻に合わせておくことが可能である。これにより、送信装置３０の時刻情報３４と時刻情報４７の時刻が近くなるように調整される。
【００５９】
なお、本実施形態においては、遅延時間計算部４４で得られた伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間を求めているが、伝送遅延許容時間を伝送に必要な時間とすることも可能である。
【００６０】
＜４．起動時の動作例＞
図４は、本実施形態の映像伝送装置の起動時の動作を説明するためのフローチャートである。
【００６１】
［ステップＳＴ１］
まず、ステップＳＴ１において、送信装置３０と受信装置４０間の時刻情報を、時刻情報保持部３４，４７により合わせる。
【００６２】
［ステップＳＴ２］
そして、ステップＳＴ２において、送信装置３０と受信装置４０で時刻があっているか否かを確認する。
【００６３】
［ステップＳＴ３］
ステップＳＴ２において、送信装置３０と受信装置４０で時刻があっていることが確認されると、ステップＳＴ３で次に処理が行われる。
送信装置３０のエンコーダ３１において、入力される映像信号ＶＤＳを符号化データに変換し、この符号化データをタイムスタンプ付加部３２に出力する。
タイムスタンプ付加部３２は、時刻情報保持部３４の時刻情報を参照して、符号化データに伝送路５０に送出される時刻情報をタイムスタンプとして付加し、タイムスタンプを付加した符号化データＤＥＮＣを伝送路５０に送出する。
伝送路５０を伝送された符号化データＤＥＮＣは受信装置４０で受信される。
【００６４】
［ステップＳＴ４］
ステップＳＴ４において、タイムスタンプ取得部４１が、伝送路５０を伝送された符号化データＤＥＮＣを受信して、付加されている送出された時刻を示すタイムスタンプ情報を取得して遅延時間計算部４４およびデコーダ４２に出力する。
そして、遅延時間計算部４４は、時刻情報保持部４７の時刻情報を参照して、符号化データＤＥＮＣに付加された時刻情報および符号化データを受信したときの時刻情報に基づき伝送路５０における遅延時間を測定する。
このように、遅延時間計算部４４は、実際の符号化データを用いて伝送路の遅延時間を測定する。
【００６５】
［ステップＳＴ５］
ステップＳＴ５において、遅延時間計算部４４は、伝送遅延のジッタを把握するために一定時間測定を行う。
一定時間経過すると次のステップＳＴ６の処理に移行する。
【００６６】
［ステップＳＴ６］
ステップＳＴ６において、遅延時間計算部４４は、パケットごとの遅延時間が集まったら、遅延時間の集合に対して統計処理を行い、伝送路５０でかかる遅延時間である伝送遅延許容時間を算出する。
この伝送遅延許容時間は、ＣＰＵ４６に供給される。
【００６７】
［ステップＳＴ７］
ステップＳＴ７において、ＣＰＵ４６は、遅延時間計算部４４で得られた伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間を求める。
ＣＰＵ４６は、求めた伝送に必要な時間を同期信号の位相差とし、次のステップＳＴ８の処理に移行する。
【００６８】
［ステップＳＴ８］
ステップＳＴ８において、同期信号時刻変換部４５が、時刻情報保持部４７の時刻情報を参照して、入力される基準同期信号ＲＳＹＮＣを時刻情報に変換してＣＰＵ４６に出力する。
ＣＰＵ４６は、同期信号時刻変換部４５で時刻に変換された基準同期信号ＲＳＹＮＣを、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を位相情報として生成する。
そして、ＣＰＵ４６は、生成した位相情報ＰＨＳを、伝送路５０を通して送信装置３０に伝達する。
これに応答して、送信装置３０の同期信号発生器３３は、時刻の情報を基に時刻情報のパルスを作ることで同期信号ＳＹＮＣを作り出し、発生する同期信号ＳＹＮＣの位相を前倒しした位相となるように設定する。
なお、同期信号時刻変換部４５およびＣＰＵ４６を含む同期信号伝達部は、入力される基準同期信号ＲＳＹＮＣを同期パルス、たとえば映像信号の垂直同期信号ごとに時刻を記録して位相情報として伝送路５０を通して送信装置３０に伝達する。
【００６９】
［ステップＳＴ９］
ステップＳＴ９において、送信装置３０の同期信号発生器３３は、伝送路５０を伝送された位相情報ＰＨＳを基に、入力される映像信号ＶＤＳを伝送に必要な時間だけ前倒しするように同期信号ＳＹＮＣを発生する。
同期信号発生器３３は、位相情報ＰＨＳに含まれる時刻の情報を基に時刻情報のパルスを作ることで同期信号ＳＹＮＣを作り出し、発生する同期信号ＳＹＮＣの位相を前倒しした位相となるように設定する。
同期信号発生器３３から出力された同期信号ＳＹＮＣを受け、撮像部２０は撮像タイミングを調整する。これにより、撮像部３０は、受信装置４０に入力される基準同期信号ＲＳＹＮＣを、伝送に必要な位相差の時間だけ前倒しした位相に同期した映像信号ＶＤＳをエンコーダ３１に入力させる。
【００７０】
上述したと同様に、送信装置３０のエンコーダ３１において、入力される映像信号ＶＤＳを符号化データに変換し、この符号化データをタイムスタンプ付加部３２に出力する。
タイムスタンプ付加部３２は、時刻情報保持部３４の時刻情報を参照して、符号化データに伝送路５０に送出される時刻情報をタイムスタンプとして付加し、タイムスタンプを付加した符号化データを伝送路５０に送出する。
伝送路５０を伝送された符号化データＤＥＮＣは受信装置４０で受信される。
受信装置４０において、タイムスタンプ取得部４１が、伝送路５０を伝送された符号化データＤＥＮＣを受信して、付加されている送出された時刻を示すタイムスタンプ情報を取得して遅延時間計算部４４およびデコーダ４２に出力する。
デコーダ４２は、受信した符号化データＤＥＮＣをデコードし、デコードされた映像データＤＤＥＣをバッファ４３に出力する。
そして、同期信号出力部としてのバッファ４３は、デコーダ４２でデコードされた映像データＤＤＥＣを、入力される基準同期信号ＲＳＹＮＣに同期させ出力する。
【００７１】
以上説明したように、本実施形態によれば、送信装置３０から同期信号ＳＹＮＣを出力し、その同期信号ＳＹＮＣの位相を制御することにより、送信装置３０に入力される撮像部２０により得られた映像信号ＶＤＳの位相を制御する。
受信装置４０に入力される基準同期信号ＲＳＹＮＣから、伝送に必要な遅延量だけ、送信装置３０で出力する同期信号ＳＹＮＣのタイミングを前にずらすことで、入力映像を伝送に必要な遅延時間だけ前倒しする。
これにより、本実施形態によれば、受信装置４０に入力された基準同期信号ＲＳＹＮＣに同期したデコード映像を得ることができる。
そして、伝送路５０で生じる遅延量を測定する機能と組み合わせ、最低の遅延量を算出することにより、低遅延映像伝送を実現する。
すなわち、本実施形態によれば、非同期伝送路の伝送遅延のジッタに対応可能で、かつ、同期信号入力に同期した映像出力を得ることできる低遅延映像伝送を実現できる。
【００７２】
・第２の実施形態
１．カメラシステムの全体構成
次に、本発明の第２の実施形態について説明する。図５及び図６は、第２の実施形態のシステム構成を示す模式図である。図５及び図６に示すように、第２の実施形態に係るシステムは、撮像部（カメラ）２０、送信装置３０、受信装置４０、および伝送路５０を含んで構成されている。撮像部（カメラ）２０、受信装置４０、および伝送路５０の基本的な構成は、第１の実施形態と同様である。
【００７３】
図５に示すように、送信機と受信機とは、非同期ネットワークを介して接続されている。図５は、カメラと送信機の構成を示しており、図６は受信機の構成を示している。
【００７４】
図５に示すように、撮像部（カメラ）２０は、ＣＣＤ（撮像素子）２２、ＰＬＬ２４、および映像処理部２６を有する。送信装置３０は、第１の実施形態と同様に、エンコーダ３１、タイムスタンプ付加部３２、同期信号発生器３３、時刻情報保持部３４を有する。
【００７５】
受信装置４０は、タイムスタンプ取得部４１、バッファ４００、デコーダ４２、バッファ４３、伝送遅延量計算部４１０、伝送遅延量統計計算部４２０、伝送遅延量統計表示部４３０、位相進み量操作部４４０、位相進み量計算部４５０、位相制御器４６０、同期信号時刻変換部４７０、同期信号周期測定部４８０、時刻情報保持部４７、を有して構成される。伝送遅延量計算部４１０、同期信号時刻変換部４７０は、第１の実施形態の遅延時間計算部４４、同期信号時刻変換部４５にそれぞれ対応するものである。また、バッファ４００は、非同期伝送網において伝送する際に、伝送遅延時間のばらつきを吸収するための伝送遅延ジッター吸収バッファである。なお、第２の実施形態においては、タイムスタンプ取得部４１と伝送遅延量計算部４１０とにより伝送遅延情報取得部が構成される。また、同期信号時刻変換部470と位相制御器４６０とにより同期信号伝達部が構成される。
【００７６】
第２の実施形態では、使用者（ユーザ）が伝送遅延量に基づいて位相進み量を操作することができるようにしている。ここで、伝送遅延量は、上述したように、非同期ネットワークによる伝送遅延時間である。このため、伝送遅延量統計表示部４３０にて伝送遅延量が表示されると、伝送遅延量を視認したユーザは、位相進み量操作部４４０を入力することで、位相進み量を所望の値に調整することができる。
【００７７】
ユーザによる所望の調整を実現するため、位相遅延量統計計算部４３０は、伝送遅延量の分布、伝送遅延量の推移、バッファ使用率の分布、バッファ使用率の推移などの各種統計情報を計算する。位相遅延量統計計算部４３０で計算した結果は、伝送遅延量統計表示部４３０に表示される。
【００７８】
以下、図面に基づいて具体的に説明する。伝送遅延量計算部４１０は、時刻情報保持部４７の時刻情報を参照して、符号化データＤＥＮＣに付加された時刻情報（タイムスタンプ）および符号化データを受信したときの時刻情報に基づき伝送路５０における遅延時間を測定する。伝送遅延統計計算部４２０は、遅延時間を取り込み、統計処理を行う。統計処理の結果は、伝送遅延量統計表示部４３０に表示される。また、統計処理の結果は、位相進み量計算部４５０にも送られる。
【００７９】
２．統計情報の一例
図７〜図１０は、統計処理の結果の一例を示す模式図である。ここで、図７は、ある時刻における伝送遅延量の平均値、標準偏差、最大値、最小値、ヒストグラムを示している。図７に示す例では、伝送遅延量の分布とともに、その平均値、最小値、最大値、標準偏差、限界遅延時間などの各種の値が示されている。また、図８は、伝送遅延量の推移を示す模式図である。図８に示す例では、伝送遅延量の平均値、標準偏差、最大値、最小値の時間的な推移を示している。
【００８０】
また、図９は、ある時刻における伝送遅延ジッター吸収バッファの使用率の平均値、標準偏差、最大値、最小値、ヒストグラムを図示している。図９に示す例では、バッファ４００の使用率がヒストグラムで示されており、バッファ使用率の平均値（＝４２％）、最小値、最大値、標準偏差などの値が示される。また、図１０は、図９に示すバッファ使用率の推移を示す模式図である。図１０に示す例では、伝送遅延ジッター吸収バッファ使用率の平均値、標準偏差、最大値、最小値の時間的な推移を示している。
【００８１】
図７〜図１０に示すような統計処理の結果が遅延量統計表示部４３０に表示されると、ユーザは、手動モードの場合、表示内容に基づいて位相進み量を操作することができる。この場合、ユーザは、位相進み量操作部４４０に操作を入力する。入力された操作量は、位相進み量計算部４５０に送られる。位相進み量計算部４５０は、入力された操作量と、操作入力された位相進み量調節パラメータから適切な位相進み量を計算し、目標となる位相進み量を位相制御器４６０へ送る。
【００８２】
同期信号時刻変換部４７０には、同期信号ＶＳＹＮＣが入力される。同期信号時刻変換部４７０は、時刻情報保持部４７の時刻情報を参照して、入力される基準同期信号ＶＳＹＮＣを時刻情報に変換して位相制御器４６０に入力する。位相制御器４６０は、同期信号時刻変換部４７０で時刻に変換された基準同期信号ＶＳＹＮＣを、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を位相情報として生成する。
【００８３】
また、同期信号周期測定部４８０は、基準同期信号ＶＳＹＮＣの周期Ｔを測定する。周期Ｔは、位相制御器４６０の出力に加算される。これにより、カメラに与えるＶＳＹＮＣの時刻が１周期Ｔだけ遅れることになる。これにより、過去の時刻の信号を制御することなく、次の時刻の信号の位相を制御することができる。そして、カメラに与えるＶＳＹＮＣは、非同期ネットワークを介して送信機３０へ送られる。
【００８４】
送信装置３０における基本的な処理は、第１の実施形態と同様である。送信装置３０の同期信号発生器３３は、時刻の情報を基に時刻情報のパルスを作ることで同期信号ＳＹＮＣ（６０Ｈｚ）を作り出し、発生する同期信号ＳＹＮＣの位相を前倒しした位相となるように設定する。ＰＬＬ２４は、同期信号発生器３３から送られた同期信号ＳＹＮＣに基づいて、撮像素子（ＣＣＤ）２２の駆動信号を出力する。撮像素子２２で撮像して得られた映像信号ＶＤＳは、映像処理部２６にて所定の映像処理（例えば、ホワイトバランス処理、エッジ強調処理など）がなされ、送信装置３０に出力される。
【００８５】
３．統計情報に基づく位相進み量の調整
手動モードの場合、使用者は表示された伝送遅延統計情報に基づいて、位相進み量の調節パラメータを操作することができる。例えば、ユーザは、図７及び図８の統計処理の結果を参照して、伝送遅延量の分布が０に近づいた場合は、位相進み量が小さくするための操作量を位相進み量操作部４４０に入力することができる。これにより、伝送遅延許容時間が小さくなることで総遅延時間が小さくなり、低遅延とすることができる。また、ユーザは、伝送遅延量の分布が限界遅延時間に近づいた場合は、位相進み量を大きくするための操作量を位相進み量操作部４４０に入力することができる。これにより、伝送遅延許容時間が大きくなることで大きな伝送遅延にも対応することができるようになり、バッファのアンダーフローによる映像の乱れが発生しにくくなる。
【００８６】
また、ユーザは、図９及び図１０の統計処理の結果を参照して、バッファ使用率の分布が大きい場合は、位相進み量を小さくするように操作することができる。これにより、伝送遅延許容時間が小さくなり、バッファで待機する時間も減るため、バッファ使用率を低下させると同時に低遅延とすることができる。また、ユーザは、バッファ使用率の分布が小さい場合は、位相進み量を大きくするように操作することができる。これにより、伝送遅延許容時間が大きくなり、バッファで待機する時間も増えるため、バッファ使用率を増加させることができる。好適には、バッファ４００がアンダーフローにならない範囲で、バッファ使用率をできるだけ低下させるように調整する。
【００８７】
位相進み量の調節パラメータとしては、位相進み量そのものの値に加え、トータル遅延時間、遅延パケット破棄率、位相進み量オフセット、最大遅延量マージン、平均バッファ使用率、最大／最小バッファ使用率などを用いることができる。
【００８８】
また、自動モードの場合、位相進み量計算部４５０は、伝送遅延量統計計算部４２０の計算結果に基づいて位相進み量を計算することができる。この場合、位相進み量計算部４５０は、伝送遅延統計計算部４２０から送られた伝送遅延量統計情報に基づいて、位相進み量を計算する。
【００８９】
自動モードの場合において、位相進み量を計算する方法の具体例としては、統計情報から伝送遅延時間の確率分布ｐ（ｔ）を推定し、この分布から、パケットロスがある目標値Ｐ＿ｌｏｓｓ以下になる最小の伝送遅延時間ｔ＿ｄｅｌａｙを求める。この伝送遅延時間ｔ＿ｄｅｌａｙに、映像のエンコード・デコード時間やパケット化時間など伝送以外に必要な時間ｔ＿ｍｉｓｃを加えた時間(ｔ＿ｄｅｌａｙ+ｔ＿ｍｉｓｃ)を、位相進み量として設定する。
【００９０】
以上のように、伝送遅延量またはバッファ使用率の分布に基づいて、伝送遅延許容時間を最適に制御することができる。従って、伝送遅延量が限界遅延時間を超えてしまうこと確実に抑止することが可能となる。また、バッファ使用率がオーバーフローまたはアンダーフローしてしまうことを確実に抑止することが可能となる。
【００９１】
特に品質の要求される放送用機器において、映像の品質が確保できるかどうかをオペレータが確認できるということは非常に重要である。例えばＶＴＲにおいては、テープの再生が正常に行われているかを示すモニタリング機能があり、製品に搭載されている。またカメラにおいては、システムカメラとカメラ・コントロール・ユニット間の光ケーブル伝送の安定度を知るために光レベルモニタリング機能が搭載されている。非同期ネットワークを利用する場合においても、ネットワークを共有する他の機器の通信状態によって伝送品質が左右されるため、本実施形態のようなモニタリング機能を搭載することで、最適な調整を行うことが可能となる。これにより、運用中に伝送路の状況（伝送遅延、そのばらつき等）が変化した場合には、状況に応じて伝送遅延許容時間、バッファ使用率を調整することで、映像の乱れを確実に抑えることが可能である。
【００９２】
図１１及び図１２は、位相を制御する方法の例を示す模式図である。ここで、図１１は、位相進み量を瞬時に変える場合を示している。この場合、図１１に示すように、上段に示す位相から下段に示す位相へ瞬時に位相進み量を変更する。この方法は、素早く位相調整ができるが、カメラ側の同期信号による同期が外れ、映像が乱れることが想定される。図１１の方法は、位相の変化が早い一方、映像が乱れる可能性があるために、同期信号の抜き差し、または映像フォーマットの変更、起動時初期化処理など、撮影前の準備などで主に用いることが好適である。
【００９３】
また、図１２は、位相進み量を徐々に変える場合を示している。この場合、図１２に示すように、最上段に示す位相から再下段に示す位相へ徐々に位相進み量を変更する。この場合、与えられた位相進み量になるように、カメラの同期が外れない範囲内で位相進み量を少しずつ変化させる。この方法は、カメラ２０の動作周波数を変化させることによって位相を動かすため、図１０で説明したようにＣＣＤ２２の駆動周波数が徐々に変化するため、カメラの同期が外れず映像が乱れない。一方、位相進み量の変化は図１１の方法に比べて遅くなる。図１２の方法は、映像の乱れが最小限に抑えられるため、主として撮影中の位相調整などに用いることが好適である。
【００９４】
図１２の場合において、位相進み量を徐々に変える場合の具体的な処理例を以下に示す。
if(t_goal-t_now > Δt_max) then t_next = t_now + Δt_max
else if(t_goal-t_now < -Δt_max) then t_next = t_now - Δt_max
else t_next = t_goal
なお、上式において、
t_goal
: 位相進み量の目標値
t_now
: 現在の位相進み量
t_next
: 次の位相進み量
Δt_max : 位相進み量の微小変化量の最大値
である。
上式により、以下の処理が実現される。
・位相進み量の目標値から現在の位相進み量の差が、微小変化量の最大値以上の場合は、次の位相進み量を現在の位相進み量と微小変化量の最大値の和とする。
・現在の位相進み量から位相進み量の目標値の差が、微小変化量の最大値以上の場合は、次の位相進み量を現在の位相進み量と微小変化量の最大値の差とする。
・それ以外の場合は、位相進み量の目標値を次の位相進み量とする。
【００９５】
図１３は、図６の受信装置４０の各タイミングにおける信号を示すタイミングチャートである。タイミング１は、同期信号時刻変換部４７０にて同期信号ＳＹＮＣが時刻に変換された状態を示している。また、タイミング２は、位相進み量計算部４５０から出力された、目標位相進み量だけ位相を進めた場合の信号（目標値）を示している。
【００９６】
タイミング３は、位相制御器４６０からの出力信号を示しており、位相制御器４６０にて目標位相進み量だけ位相を進めた場合の実際の位相進み量を示している。時刻ｔ０において位相進み量計算部４５０から目標位相進み量ｄ１が与えられると、位相制御器４６０から出力される実際の位相進み量はｄ１だけ進んだ状態となる。この場合は、図１１で説明した、瞬時に位相を切り換える場合に該当する。
【００９７】
また、時刻ｔ５で目標位相進み量がｄ２に変化すると、実際の位相進み量はすぐには変化せず、時刻ｔ５からｔ９の間で時間をかけながら順次に目標に収束し、時刻ｔ９で実際の位相進み量がｄ２に到達する。この場合は、図１２で説明した、次第に位相を切り換える場合に該当する。
【００９８】
図１３に示すタイミング４は、同期信号周期測定部４８０で測定された周期を、位相制御器４６０からの出力（タイミング３の信号）に加算した状態を示している。このように、周期Ｔを加算したことにより、位相制御器４６０の出力が周期Ｔだけ遅くなる。図５に示すように、タイミング４の信号は、送信装置２０に送られ、同期信号発生器３３からカメラ１０のＰＬＬ２４へ送られる。
【００９９】
タイミング５は、ＣＣＤ駆動信号を示しており、ＰＬＬ２４にてタイミング４の信号から生成される。同期信号の間隔が、１フィールドの区間となる。時刻ｔ６以降で実際の位相進み量が変化していくと、目標に収束するまでの間は同期信号の間隔が短くなるため、１フィールドの区間が僅かに短くなる。実際の位相進み量ｄ２が目標値に達すると、同期信号の間隔（１フィールドの区間）は元の状態に戻る。
【０１００】
タイミング６は、映像信号がネットワーク５０から受信装置３０に送られて、バッファ３３から映像として出力された際の信号を示している。タイミング６の信号では、ネットワーク５０による伝送遅延、コーデックによる遅延等が含まれている。
【０１０１】
以上のように、位相進み量計算部４５０から出力された目標位相進み量だけ位相を変化させることで、実際の位相進み量を最適に制御することが可能となる。なお、図１３では、位相を進める場合を例示したが、位相を遅らせる場合も同様に行うことができる。
【０１０２】
４．本実施形態のシステムの処理手順
次に、本実施形態の処理について説明する。図１４は、映像情報の受信から位相進み量を指令するまでの処理を示すフローチャートである。また、図１５は、同期信号入力から位相情報送信までの処理を示すフローチャートである。
【０１０３】
先ず、図１４のステップＳ１０１では、受信装置４０で映像信号を受信すると、タイムスタンプ取得部４１において映像信号に付加されていたタイムスタンプを取得し、伝送遅延量計算部４１０にて伝送遅延量を計算する。
【０１０４】
次のステップＳ１０２では、計算された伝送遅延量の集合から、統計量の計算を行う。ここでは、伝送遅延統計計算部４２０により伝送遅延量統計情報を計算する。統計情報には、伝送遅延量の平均・分散・最大値・最小値・ヒストグラムなどが含まれる。また、ステップＳ１０２では、伝送遅延ジッター吸収バッファの使用量の統計情報も伝送遅延量とともに計算する。上述したように、伝送遅延ジッター吸収バッファとは、非同期伝送網において伝送する際に、伝送遅延時間のばらつきを吸収するためのバッファであり、図５のバッファ４００に相当する。上述したように、バッファ使用量の統計情報には、バッファの平均使用率・分散・最大値・最小値・ヒストグラムなどが含まれる。
【０１０５】
次のステップＳ１０３では、伝送遅延統計計算部４２０により統計のサンプル数が十分であるか、所定数以上であるかを判定し、サンプル数が十分である場合（所定数以上である場合）は、ステップＳ１０４に進む。ステップＳ１０４では、伝送遅延統計表示部４３０に伝送遅延統計情報を表示する。ここでは、図７〜図１０に示したような統計情報を表示する。一方、ステップＳ１０３でサンプル数が十分でない場合（所定数未満である場合）は、処理を終了する。
【０１０６】
ステップＳ１０４の後はステップＳ１０５へ進み、遅延により映像乱れが発生する可能性が高いか否かを判断する。映像乱れが発生する可能性が高い場合は、ステップＳ１０６へ進み、警告を出す。警告は、伝送遅延統計情報に基づき、映像の乱れを起こす可能性が高いと判断される場合は出される。警告を出す基準としては、例えば受信装置４０のジッター吸収バッファ４００に存在するデータが少ない場合、パケットのロス率が設定値以上になったときなどが挙げられる。警告は、伝送遅延統計表示部４３０に表示しても良いし、音声等により発音しても良い。ステップＳ１０６の後は、ステップＳ１０７へ進む。また、ステップＳ１０５にて、映像乱れが発生する可能性が高くない場合は、ステップＳ１０６の警告を発することなく、ステップＳ１０７へ進む。
【０１０７】
ステップＳ１０７では、手動モードであるか否かを判定し、手動モードの場合はステップＳ１０８へ進む。ステップＳ１０８では、位相進み量操作部４４０に入力された操作量を取得する。次のステップＳ１０９では、手動操作量と、伝送遅延量の統計情報とに基づいて、位相進み量を計算する。
【０１０８】
一方、ステップＳ１０７で手動モードではない場合、すなわち自動モードの場合は、ステップＳ１１１へ進む。ステップＳ１１１では、統計情報に基づいて位相進み量を計算する。ステップＳ１０９，Ｓ１１１の後はステップＳ１１０へ進む。ステップＳ１１０では、位相制御器４６０へ位相進み量を指令する。ステップＳ１１０の後は処理を終了する。
【０１０９】
図１５は、同期信号の位相を進める場合に、位相進み量の変換の手法を決める処理を示すフローチャートである。先ず、ステップＳ２０１では、同期信号時刻変換部４７０において、同期信号時刻変換を行い、同期信号ＳＹＮＣを時刻情報に変換する。次のステップＳ２０２では、位相進み量を徐々に変化させるモードか否かを判定し、位相進み量を徐々に変化させるモードの場合は、ステップＳ２０３へ進む。ステップＳ２０３では、上述した式１を用いて位相の進み量の微小変化量を計算する。ステップＳ２０３の後はステップＳ２０４へ進み、次の位相進み量を算出する。次の位相進み量は、現在の位相進み量に微小変化量を加算することによって算出される。
【０１１０】
一方、ステップＳ２０２において、位相進み量を徐々に変化させるモードではない場合、すなわち、位相進み量を瞬時に変化させるモードの場合は、ステップＳ２０７へ進む。ステップＳ２０７では、次の位相進み量として、位相進み量計算部で計算された位相進み量の最終値を指令値とする。
【０１１１】
ステップＳ２０４，Ｓ２０７の後は、ステップＳ２０５へ進む。ステップＳ２０５では、位相制御器４６０により、位相進み量に基づいて同期信号の位相を進ませる。次のステップＳ２０６では、位相に同期信号の周期を加え、送信装置２０へ位相情報を送信する。ステップＳ２０６の後は、処理を終了する。
【０１１２】
送信装置４０は、受け取った位相情報を元に送信機側で同期信号を生成し、カメラ２０に入力する。カメラ２０の内部では、入力された同期信号に位相を合わせて映像を出力するため、撮像素子（ＣＣＤ２２）等の駆動周波数が変化する。
【０１１３】
以上のステップＳ１０１〜Ｓ１１０、ステップＳ２０１〜Ｓ２０６が繰り返し行われることにより、位相進み量の調整を継続的に行うことができる。なお、上述した説明では、ステップＳ１０２〜Ｓ１１０の処理は受信機４０の内部で行われるが、受信装置４０の外部で行っても良い。
【０１１４】
以上説明したように第２の実施形態によれば、使用者が、統計情報の表示を視認することにより、映像の伝送遅延状況やバッファの使用状況を知ることができる。そして、この情報を元に使用者が位相進み量調整パラメータを操作することで、使用者が意図した遅延時間と伝送品質に調整することができる。また、自動で位相進み量を調整することで、伝送遅延量が変化した場合にもバッファがオーバーフロー、またはアンダーフローになることを抑止でき、映像出力を安定させることができる。
【０１１５】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【０１１６】
１０・・・カメラシステム、２０・・・撮像部、３０・・・送信装置、３１・・・エンコーダ（符号化部）、３２・・・タイムスタンプ付加部（時刻情報付加部）、３３・・・同期信号発生器、３４・・・時刻情報保持部、４０・・・受信装置、４１・・・タイムスアンプ取得部、４２、デコーダ（復号部）、４３・・・バッファ（同期出力部）、４４・・・遅延時間計算部（伝送遅延測定部）、４５・・・同期信号時刻変換部（同期信号伝達部）、４６・・・ＣＰＵ（同期信号伝達部、制御部）、４７・・・時刻情報保持部、５０・・・伝送路、４００・・・バッファ、４１０・・・伝送遅延量計算部、４２０・・・伝送遅延量統計計算部、４３０・・・伝送遅延統計表示部、４４０・・・位相進み量操作部、４５０・・・位相進み量計算部、４６０・・・位相制御器、４７０・・・同期信号時刻変換部。
【特許請求の範囲】
【請求項１】
伝送路を伝送された映像の符号化データを復号する復号部と、
上記復号部で復号された映像データを基準同期信号に同期させて出力する同期出力部と、
入力される上記符号化データおよび時刻情報により伝送路の遅延に係る情報を取得する伝送遅延情報取得部と、
上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御する位相情報を求め、当該位相情報を、上記伝送路を通して伝達する同期信号伝達部と、
を有する受信装置。
【請求項２】
前記伝送遅延情報取得部は、伝送路の遅延時間を測定する伝送遅延測定部を含み、
前記同期信号伝達部は、上記伝送遅延測定部で得られた遅延時間から伝送に必要な時間を求め、入力される上記基準信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための前記位相情報を求める、請求項１に記載の受信装置。
【請求項３】
上記符号化データは、
上記伝送路に送出された時刻情報が付加されており、
上記伝送遅延測定部は、
上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間を伝送遅延許容時間として求め、
上記同期信号伝達部は、
上記伝送遅延許容時間を上記伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を生成するための時刻の情報を上記位相情報として上記伝送路を通して伝達する
請求項２記載の受信装置。
【請求項４】
少なくとも上記伝送路および上記復号部によりコーデック部が形成され、当該コーデック部の遅延量が、コーデック遅延量としてあらかじめ設定され、
上記同期信号伝達部は、
上記伝送遅延測定部で得られた伝送遅延許容時間と上記コーデック遅延量の総和時間を上記伝送に必要な時間として求め、入力される上記基準同期信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための位相情報を求め、当該位相情報を、上記伝送路を通して伝達する
請求項２または３記載の受信装置。
【請求項５】
上記符号化データは、
上記伝送路に送出された時刻情報が付加されており、
上記伝送遅延測定部は、
上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間として伝送遅延許容時間を求め、
上記同期信号伝達部は、
上記伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を上記位相情報として上記伝送路を通して伝達する
請求項４記載の受信装置。
【請求項６】
上記同期信号伝達部は、
入力される上記基準同期信号を同期パルスごとに時刻を記録して上記伝送路に送出する
請求項２から５のいずれか一に記載の受信装置。
【請求項７】
上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御するための位相制御量を求める位相制御量計算部を備え、
前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御し、制御された位相情報を上記伝送路を通して伝達する、請求項１に記載の受信装置。
【請求項８】
前記伝送路の遅延に係る情報の統計情報を計算する統計計算部を備え、
前記位相制御量計算部は、前記統計情報に基づいて前記位相制御量を求める、請求項７に記載の受信装置。
【請求項９】
前記伝送路の遅延に係る情報の統計情報を計算する統計計算部と、
前記統計情報を表示する表示部と、
前記表示部の表示に基づいて入力される操作量を取得する操作部と、を備え、
前記位相制御量計算部は、前記統計情報と前記操作量とに基づいて前記位相制御量を求める、請求項７に記載の受信装置。
【請求項１０】
前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御する位相制御部を含み、前記位相制御部は、上記基準同期信号の位相を目標となる位相制御量に瞬時に制御する、請求項７に記載の受信装置。
【請求項１１】
前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御する位相制御部を含み、前記位相制御部は、上記基準同期信号の位相を目標となる位相制御量に段階的に制御する、請求項７に記載の受信装置。
【請求項１２】
前記伝送路の遅延に係る情報は、前記伝送路の遅延時間又は上記符号化データを蓄積するバッファの使用率である、請求項７記載の受信装置。
【請求項１３】
撮像して映像信号を得る撮像部と、
伝送路と、
上記撮像部で撮像して得られた映像信号の符号化データを上記伝送路に送出する送信装置と、
上記符号化データを受信する受信装置と、を有し、
上記送信装置は、
入力される映像信号を符号化データに変換し、当該符号化データを上記伝送路に送出する符号化部と、
上記伝送路を伝送された位相情報を基に、上記撮像部により得られ、入力される映像信号の位相を調整する同期信号を発生する同期信号発生部と、を含み、
上記位相情報は、
伝送に必要な時間だけ、上記同期信号発生部で発生する同期信号のタイミングを前にずらすことを示す情報を含み、
上記同期信号発生部は、
入力される映像信号を伝送に必要な時間だけ前倒しするように上記同期信号を発生し、
上記受信装置は、
伝送路を伝送された映像の符号化データを復号する復号部と、
上記復号部で復号された映像データを基準同期信号に同期させて出力する同期出力部と、
入力される上記符号化データおよび時刻情報により伝送路の遅延に係る情報を取得する伝送遅延情報取得部と、
上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御する位相情報を求め、当該位相情報を、上記伝送路を通して伝達する同期信号伝達部と、と、を含む
カメラシステム。
【請求項１４】
上記位相情報は、
伝送に必要な時間だけ、上記同期信号発生部で発生する同期信号のタイミングを前にずらすことを示す情報を含み、
上記同期信号発生部は、
入力される映像信号を伝送に必要な時間だけ前倒しするように上記同期信号を発生し、
前記伝送遅延情報取得部は、伝送路の遅延時間を測定する伝送遅延測定部を含み、
前記同期信号伝達部は、上記伝送遅延測定部で得られた遅延時間から伝送に必要な時間を求め、入力される上記基準信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための前記位相情報を求める、請求項１３に記載のカメラシステム。
【請求項１５】
上記送信装置は、
上記符号化データに上記伝送路に送出される時刻情報を付加する時刻情報付加部を含み、
上記受信装置の上記伝送遅延測定部は、
上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間を伝送遅延許容時間として求め、
上記同期信号伝達部は、
上記伝送遅延許容時間を上記伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を生成するための時刻の情報を上記位相情報として上記伝送路を通して上記送信装置に伝達し、
上記送信装置の同期信号発生部は、
上記時刻の情報を基に、発生する上記同期信号の位相を前倒しした位相となるように設定する
請求項１４記載のカメラシステム。
【請求項１６】
上記符号化部、上記伝送路、および上記復号部によりコーデック部が形成され、当該コーデック部の遅延量が、コーデック遅延量としてあらかじめ設定され、
上記同期信号伝達部は、
上記伝送遅延測定部で得られた伝送遅延許容時間と上記コーデック遅延量の総和時間を上記伝送に必要な時間として求め、入力される上記基準同期信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための位相情報を求め、当該位相情報を、上記伝送路を通して上記送信装置に伝達する
請求項１４または１５記載のカメラシステム。
【請求項１７】
上記送信装置は、
上記符号化データに上記伝送路に送出される時刻情報を付加する時刻情報付加部を含み、
上記受信装置の伝送遅延測定部は、
上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間として伝送遅延許容時間を求め、
上記同期信号伝達部は、
上記伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を上記位相情報として上記伝送路を通して上記送信装置に伝達し、
上記送信装置の同期信号発生部は、
上記時刻の情報を基に、発生する上記同期信号の位相を前倒しした位相となるように設定する
請求項１６記載のカメラシステム。
【請求項１８】
上記受信装置は、
上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御するための位相制御量を求める位相制御量計算部を備え、
前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御し、制御された位相情報を上記伝送路を通して伝達する、請求項１３に記載のカメラシステム。
【請求項１９】
上記受信装置は、
前記伝送路の遅延に係る情報の統計情報を計算する統計計算部を備え、
前記位相制御量計算部は、前記統計情報に基づいて前記位相制御量を求める、請求項１８に記載のカメラシステム。
【請求項２０】
上記受信装置は、
前記伝送路の遅延に係る情報の統計情報を計算する統計計算部と、
前記統計情報を表示する表示部と、
前記表示部の表示に基づいて入力される操作量を取得する操作部と、を備え、
前記位相制御量計算部は、前記統計情報と前記操作量とに基づいて前記位相制御量を求める、請求項１８に記載のカメラシステム。
【請求項１】
伝送路を伝送された映像の符号化データを復号する復号部と、
上記復号部で復号された映像データを基準同期信号に同期させて出力する同期出力部と、
入力される上記符号化データおよび時刻情報により伝送路の遅延に係る情報を取得する伝送遅延情報取得部と、
上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御する位相情報を求め、当該位相情報を、上記伝送路を通して伝達する同期信号伝達部と、
を有する受信装置。
【請求項２】
前記伝送遅延情報取得部は、伝送路の遅延時間を測定する伝送遅延測定部を含み、
前記同期信号伝達部は、上記伝送遅延測定部で得られた遅延時間から伝送に必要な時間を求め、入力される上記基準信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための前記位相情報を求める、請求項１に記載の受信装置。
【請求項３】
上記符号化データは、
上記伝送路に送出された時刻情報が付加されており、
上記伝送遅延測定部は、
上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間を伝送遅延許容時間として求め、
上記同期信号伝達部は、
上記伝送遅延許容時間を上記伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を生成するための時刻の情報を上記位相情報として上記伝送路を通して伝達する
請求項２記載の受信装置。
【請求項４】
少なくとも上記伝送路および上記復号部によりコーデック部が形成され、当該コーデック部の遅延量が、コーデック遅延量としてあらかじめ設定され、
上記同期信号伝達部は、
上記伝送遅延測定部で得られた伝送遅延許容時間と上記コーデック遅延量の総和時間を上記伝送に必要な時間として求め、入力される上記基準同期信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための位相情報を求め、当該位相情報を、上記伝送路を通して伝達する
請求項２または３記載の受信装置。
【請求項５】
上記符号化データは、
上記伝送路に送出された時刻情報が付加されており、
上記伝送遅延測定部は、
上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間として伝送遅延許容時間を求め、
上記同期信号伝達部は、
上記伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を上記位相情報として上記伝送路を通して伝達する
請求項４記載の受信装置。
【請求項６】
上記同期信号伝達部は、
入力される上記基準同期信号を同期パルスごとに時刻を記録して上記伝送路に送出する
請求項２から５のいずれか一に記載の受信装置。
【請求項７】
上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御するための位相制御量を求める位相制御量計算部を備え、
前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御し、制御された位相情報を上記伝送路を通して伝達する、請求項１に記載の受信装置。
【請求項８】
前記伝送路の遅延に係る情報の統計情報を計算する統計計算部を備え、
前記位相制御量計算部は、前記統計情報に基づいて前記位相制御量を求める、請求項７に記載の受信装置。
【請求項９】
前記伝送路の遅延に係る情報の統計情報を計算する統計計算部と、
前記統計情報を表示する表示部と、
前記表示部の表示に基づいて入力される操作量を取得する操作部と、を備え、
前記位相制御量計算部は、前記統計情報と前記操作量とに基づいて前記位相制御量を求める、請求項７に記載の受信装置。
【請求項１０】
前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御する位相制御部を含み、前記位相制御部は、上記基準同期信号の位相を目標となる位相制御量に瞬時に制御する、請求項７に記載の受信装置。
【請求項１１】
前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御する位相制御部を含み、前記位相制御部は、上記基準同期信号の位相を目標となる位相制御量に段階的に制御する、請求項７に記載の受信装置。
【請求項１２】
前記伝送路の遅延に係る情報は、前記伝送路の遅延時間又は上記符号化データを蓄積するバッファの使用率である、請求項７記載の受信装置。
【請求項１３】
撮像して映像信号を得る撮像部と、
伝送路と、
上記撮像部で撮像して得られた映像信号の符号化データを上記伝送路に送出する送信装置と、
上記符号化データを受信する受信装置と、を有し、
上記送信装置は、
入力される映像信号を符号化データに変換し、当該符号化データを上記伝送路に送出する符号化部と、
上記伝送路を伝送された位相情報を基に、上記撮像部により得られ、入力される映像信号の位相を調整する同期信号を発生する同期信号発生部と、を含み、
上記位相情報は、
伝送に必要な時間だけ、上記同期信号発生部で発生する同期信号のタイミングを前にずらすことを示す情報を含み、
上記同期信号発生部は、
入力される映像信号を伝送に必要な時間だけ前倒しするように上記同期信号を発生し、
上記受信装置は、
伝送路を伝送された映像の符号化データを復号する復号部と、
上記復号部で復号された映像データを基準同期信号に同期させて出力する同期出力部と、
入力される上記符号化データおよび時刻情報により伝送路の遅延に係る情報を取得する伝送遅延情報取得部と、
上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御する位相情報を求め、当該位相情報を、上記伝送路を通して伝達する同期信号伝達部と、と、を含む
カメラシステム。
【請求項１４】
上記位相情報は、
伝送に必要な時間だけ、上記同期信号発生部で発生する同期信号のタイミングを前にずらすことを示す情報を含み、
上記同期信号発生部は、
入力される映像信号を伝送に必要な時間だけ前倒しするように上記同期信号を発生し、
前記伝送遅延情報取得部は、伝送路の遅延時間を測定する伝送遅延測定部を含み、
前記同期信号伝達部は、上記伝送遅延測定部で得られた遅延時間から伝送に必要な時間を求め、入力される上記基準信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための前記位相情報を求める、請求項１３に記載のカメラシステム。
【請求項１５】
上記送信装置は、
上記符号化データに上記伝送路に送出される時刻情報を付加する時刻情報付加部を含み、
上記受信装置の上記伝送遅延測定部は、
上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間を伝送遅延許容時間として求め、
上記同期信号伝達部は、
上記伝送遅延許容時間を上記伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を生成するための時刻の情報を上記位相情報として上記伝送路を通して上記送信装置に伝達し、
上記送信装置の同期信号発生部は、
上記時刻の情報を基に、発生する上記同期信号の位相を前倒しした位相となるように設定する
請求項１４記載のカメラシステム。
【請求項１６】
上記符号化部、上記伝送路、および上記復号部によりコーデック部が形成され、当該コーデック部の遅延量が、コーデック遅延量としてあらかじめ設定され、
上記同期信号伝達部は、
上記伝送遅延測定部で得られた伝送遅延許容時間と上記コーデック遅延量の総和時間を上記伝送に必要な時間として求め、入力される上記基準同期信号から伝送に必要な時間分だけ前倒しした同期信号を発生するための位相情報を求め、当該位相情報を、上記伝送路を通して上記送信装置に伝達する
請求項１４または１５記載のカメラシステム。
【請求項１７】
上記送信装置は、
上記符号化データに上記伝送路に送出される時刻情報を付加する時刻情報付加部を含み、
上記受信装置の伝送遅延測定部は、
上記符号化データに付加された時刻情報および当該符号化データを受信したときの時刻情報に基づき上記伝送路における遅延時間を測定する処理を複数回行い、複数の測定された集合的な遅延時間に対して統計処理を行って伝送に必要な時間として伝送遅延許容時間を求め、
上記同期信号伝達部は、
上記伝送遅延許容時間とあらかじめ設定された上記コーデック遅延量の総和の時間を伝送に必要な時間として当該時間を同期信号の位相差とし、入力される上記基準同期信号を時刻に変換し、伝送に必要な位相差の時間だけ前倒しした同期信号を作るための時刻の情報を上記位相情報として上記伝送路を通して上記送信装置に伝達し、
上記送信装置の同期信号発生部は、
上記時刻の情報を基に、発生する上記同期信号の位相を前倒しした位相となるように設定する
請求項１６記載のカメラシステム。
【請求項１８】
上記受信装置は、
上記伝送遅延情報取得部で得られた前記情報に基づいて、入力される上記基準同期信号の位相を制御するための位相制御量を求める位相制御量計算部を備え、
前記同期信号伝達部は、前記位相制御量に基づいて上記基準同期信号の位相を制御し、制御された位相情報を上記伝送路を通して伝達する、請求項１３に記載のカメラシステム。
【請求項１９】
上記受信装置は、
前記伝送路の遅延に係る情報の統計情報を計算する統計計算部を備え、
前記位相制御量計算部は、前記統計情報に基づいて前記位相制御量を求める、請求項１８に記載のカメラシステム。
【請求項２０】
上記受信装置は、
前記伝送路の遅延に係る情報の統計情報を計算する統計計算部と、
前記統計情報を表示する表示部と、
前記表示部の表示に基づいて入力される操作量を取得する操作部と、を備え、
前記位相制御量計算部は、前記統計情報と前記操作量とに基づいて前記位相制御量を求める、請求項１８に記載のカメラシステム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【公開番号】特開２０１１−２３４３４１（Ｐ２０１１−２３４３４１Ａ）
【公開日】平成２３年１１月１７日（２０１１．１１．１７）
【国際特許分類】
【出願番号】特願２０１０−２５１９５７（Ｐ２０１０−２５１９５７）
【出願日】平成２２年１１月１０日（２０１０．１１．１０）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２３年１１月１７日（２０１１．１１．１７）
【国際特許分類】
【出願日】平成２２年１１月１０日（２０１０．１１．１０）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]