遠隔録画用携帯情報端末
【課題】コスト増を招くことなく、リアルタイム性を確保しながら、ＨＤ画像データを外部装置に伝送する遠隔録画用携帯情報端末を提供する。
【解決手段】外部装置１８への記録中、パケットエラーが生じ、１フレーム又は数フレームが消失したような場合、これらのフレームを再送させるために、フレーム毎のエンコードデータ量分のＨＤ動画像データは、常時、ファイルフォーマット変換・逆変換を行うファイル変換／逆変換部１０４→メモリ管理部１０５→カードＩ／Ｆ（１０７）のルートを経由して、汎用のメモリカード１０８に記録する。記録した動画像データをフレーム識別番号に基づいて抽出し、逆フォーマット変換を行い、再送する。
【解決手段】外部装置１８への記録中、パケットエラーが生じ、１フレーム又は数フレームが消失したような場合、これらのフレームを再送させるために、フレーム毎のエンコードデータ量分のＨＤ動画像データは、常時、ファイルフォーマット変換・逆変換を行うファイル変換／逆変換部１０４→メモリ管理部１０５→カードＩ／Ｆ（１０７）のルートを経由して、汎用のメモリカード１０８に記録する。記録した動画像データをフレーム識別番号に基づいて抽出し、逆フォーマット変換を行い、再送する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像した高品質の画像データを遠隔の外部装置に伝送する遠隔録画用携帯情報端末に関する。
【背景技術】
【０００２】
近年、携帯電話等の携帯情報端末で高品質な動画を撮影し、その撮影した動画を記録しておく要望が高まっている。従来、撮影した動画の画像データを記録する場合には、携帯情報端末本体に内蔵するメモリもしくは脱着可能なメモリカードに記録し、保存していた。
【０００３】
しかし、現在の携帯情報端末では長時間の映像記録を実施しようとするとメモリ容量が足りなく、フレームレートを落としたり、画質を落としたりして、画質を犠牲にしてできるだけ長い時間、映像記録が実現できるように工夫していた。
【０００４】
また、高品質なＨＤサイズの動画を撮影し、記録する場合には、必要なメモリ容量がさらに膨大になり、本体のメモリに記録できるのはわずかな時間しかない。近年、大容量メモリカードが市販されるようになり、記録できる時間が長くはなっているが、撮影できる時間は制限され、長時間撮影する場合には、メモリカードを交換しながら、記録する必要がある。したがって、ユーザは、何枚ものメモリカードを持ち歩く必要がある。
さらに、大容量メモリカードは、価格が高く、ユーザに対する費用負担が大きい。
【０００５】
そこで、下記の特許文献１をはじめ、外部の無線通信回線等を含む高速通信回線を介して、携帯情報端末で撮影した動画像等を外部の画像記録再生装置の大規模メモリ装置に記録し、この画像記録再生装置で、再生することが提案されている。
【０００６】
なお、画像記録再生装置に記録されている画像データのうち、再生可能な容量の画像データを携帯情報端末側に転送し、この携帯情報端末で、適宜、再生することも可能である。
【０００７】
しかし、高速通信回線を通してデータを送受する場合、特に、無線データ通信の場合は、通信の環境条件等によって、データレートを変化させるのは当然であり、高速データ通信を維持しながら、リアルタイム性を確保することは困難である。つまり、高速通信回線を介して通信を行う場合、パケット落ちなどでフレーム落ちが発生することは通常起こりえることである。
【０００８】
そこで、従来の携帯情報端末では、送信用のパケットされたデータもしくは画像エンコードされたデータを記録する所定の容量を有する高速バッファを備えて構成されており、このバッファに所定時間分のフレームデータを記録し、フレーム落ちした場合に、フレーム落ちした分のフレームデータを相手先の画像記録再生装置に再送することでフレーム落ちに対処していた（特許文献２参照）。
【特許文献１】特開２０００−３３３１１２号公報
【特許文献２】特開２０００−７８４９２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００９】
しかしながら、フレーム落ちに対処するためには、上記バッファの容量として、フレーム単位で必要となるため、上記従来技術では、高品質動画像データ（ＨＤ画像データ）をバッファした場合、フレーム毎の記憶すべきデータが膨大となることから、必要なバッファメモリ容量が増大し、余分なコスト増を招くという問題点があった。
【００１０】
本発明は、斯かる実情に鑑み、コスト増を招くことなく、リアルタイム性を確保しながら、ＨＤ画像データを外部装置に伝送する遠隔録画用携帯情報端末を提供するものである。
【課題を解決するための手段】
【００１１】
上記のような問題点を解決するために、本発明に係る遠隔録画用携帯情報端末は、以下のような構成とし、特徴を有する。
【００１２】
本発明に係る遠隔録画用携帯情報端末は、ＨＤサイズの動画像を撮像できる撮像部と、汎用メモリカードとのＩ／ＦをとるメモリカードＩ／Ｆと、を備えた遠隔録画用携帯情報端末であって、前記撮像部から出力される動画像データを遠隔にある外部装置に伝送中に、通信経路上における通信エラーが発生した場合、前記外部装置を含む伝送機器からの通信エラー信号を受信し、エラーが発生したフレームの識別番号を記憶する送信制御部を備え、前記送信制御部は、前記汎用メモリカードから該識別番号に相当するフレームデータを抽出し、通信時間に余裕があると判断した場合に、該フレームデータを前記遠隔にある外部装置に再送するように制御したことを特徴とする。
【００１３】
また、本発明に係る遠隔録画用携帯情報端末は、さらに、前記撮像部から出力される動画像データを前記汎用メモリカードに記録する際に、ＭＰＥＧフォーマットを含む汎用のファイルフォーマットに変換するとともに、該ファイルフォーマットで記録されているデータのファイル形式を再送時のデータに逆変換するファイル変換／逆変換部を備えたことを特徴とする。
【発明の効果】
【００１４】
本発明の遠隔録画用携帯情報端末によれば、以下に示す優れた効果を奏し得る。
【００１５】
本発明に係る遠隔録画用携帯情報端末は、大容量・高速の専用メモリのみ使用することなく、汎用のメモリ（メモリカード）を使用することで、製品コスト増を抑え、ＨＤサイズの高品質の映像のまま時間を気にせずに撮影した動画像データを遠隔の記録再生装置に記録保存するようにすることができる。
【発明を実施するための最良の形態】
【００１６】
以下、本発明の一実施形態について図面を参照して説明する。
【００１７】
図１は、本発明の遠隔録画用携帯情報端末から外部装置へのデータ伝送の構成例を示すシステム構成図である。
【００１８】
まず、図１を用いて、本発明の遠隔録画用携帯情報端末（本実施形態では、携帯電話を例に以下説明する）と外部装置とのデータ伝送システムの概略構成及び概略動作について本発明に係る携帯電話の構成・動作の説明を容易にするために、簡単に説明しておく。
【００１９】
図１に示すように、本発明の携帯情報端末装置と外部装置とのデータ伝送システムは、携帯電話１０と、外部装置１８（例えば、パーソナルコンピュータ（ＰＣ）１６、録画機（ＨＤＤ等）１７等）と、携帯電話１０と通信を行うための基地局１２と、携帯電話１０、基地局１２及び外部装置１８間の通信を行うための通信回線１５（インターネット１３、無線通信回線／有線通信回線１４等）とを、備えて構成される。
【００２０】
上記のように構成されたデータ伝送システムにおいて、携帯電話１０は、通信回線１５を介して、撮像された画像データを外部装置１８に伝送し、外部装置１８は、伝送された画像データを内部に備えられている記憶装置にリアルタイムで記録する。そして、外部装置１８では、携帯電話１０による撮影が終了し、記録完了した時点において、記録完了制御データを携帯電話１０に返送し、通信処理を終了する。
【００２１】
ここで、携帯電話機１０からの撮像された画像データを外部装置１８に伝送している最中に、何らかの通信障害によって伝送路上でのフレーム消失が生じ、フレーム落ちが生じた場合に、基地局１２や外部装置１８は、通信エラーを検知し、その通信エラー情報を制御データとして、携帯電話１０に伝送する。一方、この制御データを受信した携帯電話１０は、携帯電話１０に備えられているカメラにより撮影している所定時間Ｔ分の画像データを常時記憶し、画像データの内、フレーム落ちした分の画像データを抽出しパケット化した後、通信の空き時間を利用して、外部装置１８に再送する。外部装置１８では、再送された画像データの並び替えを行い、再生用データとして記録する。
【００２２】
こうすることにより、携帯電話１０に備えられているカメラにより撮影しながら、遠隔の外部装置１８の記憶部にリアルタイム性を確保して、長時間撮影した動画像データを記録することが可能である。
【００２３】
次に、本発明の実施形態に係る携帯電話１０の構成及び動作について以下に詳述する。
【００２４】
図２は、本発明の実施形態に係る携帯電話の構成を示すブロック図である。
【００２５】
図２に示すように、携帯電話１０は、主として、ＣＣＤやＣＭＯＳイメージセンサ等を用いたＨＤ画素の動画撮影が可能なカメラ１００と、撮影された動画を記録可能な圧縮データに変換する画像エンコーダ１０１と、画像データを記憶する外部汎用メモリカード１０８のカードＩ／Ｆ（１０７）と、該画像エンコーダ１０１によりエンコードされた画像データをカードＩ／Ｆ（１０７）を介して、外部汎用メモリカード（例えば、ＳＤカード等）１０８に記録する際に、外部の汎用メモリカード記録用のファイルフォーマット（例えば、．ｍｐｇの形式にすることにより、メモリカードの汎用性を高めることが可能）に変換または、このファイルフォーマットで記録されたデータをもとのデータに逆変換するファイル変換／逆変換部１０４と、エンコードされた画像データを送信用データに変換しパケット化する、または、受信した画像データを受信用データに変換し復号化する送受信データ変換／パケット・復号化部１１０と、パケット化された画像データを一時的に記憶しておく専用の所定小容量・高速バッファである送受信バッファ１１１と、送受信バッファ１１１から出力されるデータを無線通信信号に変換または無線信号から送受信バッファ用データに変換する送受信部１１２と、無線信号として送受信するアンテナ１１５と、伝送路上での何等かの障害による通信エラーが発生し、基地局１２又は外部装置１８からの通信エラーの通知データを送受信部１１２から受け取り、通信エラーを起こしたフレームの識別番号等の記憶や、記憶したフレーム識別番号に基づいて、ファイル変換／逆変換部１０４に対し、メモリカード１０８から対象のフレームを抽出し、再送するように制御等を行う送信制御部１１３と、を備えて構成される。
【００２６】
さらに、画像エンコーダ１０１からの画像データ又は送受信データ変換／パケット・復号化部１１０からの画像データを画像デコードする画像デコーダ１０３と、画像デコーダ１０３にて映像信号に変換された画像データを表示する表示装置１０２と、を備えて構成される。
【００２７】
上記のように構成された携帯電話１０のＨＤカメラ１００により、撮影が開始され、ユーザにより外部装置１８への記録指示が送出されると、ＨＤカメラ１００からのフレーム毎のエンコードデータ量分のＨＤ動画像データは、画像エンコーダ１０１→送受信データ変換／パケット・復号化部１１０→送受信バッファ１１１→送受信部１１２→アンテナ１１５のメインルートを経由して、基地局１２に送信される。そして、撮影をストップし、記録停止指示が送出されるまで、この送信処理が繰りかえされる。
【００２８】
一方、パケットエラーが生じ、１フレーム又は数フレームが消失したような場合に、これらのフレームを記憶・抽出・再送させるために、外部装置１８への記録中に、フレーム毎のエンコードデータ量分のＨＤ動画像データは、常時、ファイルフォーマット変換・逆変換を行うファイル変換／逆変換部１０４→メモリ管理部１０５→カードＩ／Ｆ（１０７）のルートを経由して、安価な汎用のメモリカード１０８に記録される。この際、最初に記憶したファイル変換データから消去しつつ、新たなファイル変換データを追加記憶しながら更新し、メモリカード１０８に所定の時間Ｔ分（例えば、連続した数フレーム分）、常時、リアルタイムで記憶しておく。
【００２９】
パケットエラーが生じた場合に、外部装置１８、基地局１２から送信されるパケットエラー報知データは、アンテナ１１５→送受信部１１２を経由して、送信制御部１１３に入力される。送信制御部１１３は、メモリカード１０８に記憶されている上記識別番号（ＩＤ番号）に相当するファイル変換データを抽出し、ファイル変換／逆変換部１０４による逆変換処理が可能な時間があると判断し、また、送受信部１１２に通信の空き時間があると判断した場合に、上記ＩＤ番号を認識・記憶するとともに、ファイル変換／逆変換部１０４により逆変換処理を行い、逆フォーマット変換されたエンコードデータを再送するように指示する。また、従来では、大容量、高速の専用バッファ（メモリ）を使用して、パケットエラーに対処していたものを本発明の携帯電話１０では、代わりに、小容量の高速バッファである送受信バッファ１１１を採用し、１フレーム内のパケット単位のエラーのみに対処するようにし、装置の製品コストを抑えるようにしている。
【００３０】
なお、従来、メモリカード１０８の全記憶領域に、上記エンコードデータ（ファイル変換データ）を記録し、この記録したファイル変換データをファイル変換／逆変換部１０４により逆変換し、メモリ管理１０５で記録した際の記録開始位置から記録された画像デコーダ１０３に渡し、映像信号に変換し、表示装置１０２で表示し、再生するようにしている。
【００３１】
また、外部装置１８に記録された画像データは、通信回線１５を介して、アンテナ１１５→送受信部１１２→送信バッファ→送受信データ変換／逆変換部１１０→画像デコーダ１０３の経路を経由して、表示装置１０２で表示し、再生している。なお、パケットエラーが発生した場合には、外部装置１８から、エラーに対応するフレームデータを再送するようにしている。
【００３２】
次に、上述した本発明の実施形態に係る携帯電話１０の撮影動作中のフレーム落ち時における動作について、図３、図４の動作フロー図を用いて説明する。
【００３３】
図３、図４は、携帯電話の撮影動作中のフレーム落ち時における動作処理を示す図である。
【００３４】
ＨＤカメラ１００によって撮影が開始され、外部装置１８へ伝送開始指示を受けると、本処理がスタートし、フレーム毎にエンコードデータ量の送信を行う（ステップＳ１００）。ここで、送信制御部１１３は、通信相手（外部装置１８）からパケットエラーの通知を受信したか否かを判断する（ステップＳ１１０）。パケットエラーの通知を受信していなければ（ステップＳ１１０；Ｎｏ）、基地局から通信エラーの通知を受信したか否かを判断し（ステップＳ１２０）、受信していないと判断した場合（ステップＳ１２０；Ｎｏ）、撮影が完了し、全フレームデータが送信完了したかを判断する（ステップＳ１３０）。完了していなければ（ステップＳ１３０；Ｎｏ）、ステップＳ１００の処理に戻し、送信完了したならば（ステップＳ１３０；Ｙｅｓ）、本処理を終了する。
【００３５】
一方、通信相手からパケットエラーの通知を受信した場合には（ステップＳ１１０；Ｙｅｓ）、送受信バッファ１１１の記録範囲内かを判断する（ステップＳ１４０）。
【００３６】
送信制御部１１３は、送受信バッファ１１１の記録範囲内のエラーの場合には（ステップＳ１４０；Ｙｅｓ）、パケットエラーのフレームＡの識別番号を記憶するとともに、そのフレームＡのエラーパケット分を送受信バッファ１１１から抽出し、送受信部１１２に再送を指示し、ステップＳ１３０に処理を移行する（ステップＳ１５０）。
【００３７】
送受信バッファ１１１の記録範囲を超え、フレーム単位のエラーであった場合（ステップＳ１４０；Ｎｏ）、パケットエラーのフレームＡの識別番号を記憶する（ステップＳ１６０）。そして、ファイル変換／逆変換処理、通信時間に空きがあるか否かを判断し（ステップＳ１７０）、空きがあると判断した場合には（ステップＳ１７０；Ｙｅｓ）、フレームＡをメモリカード１０８から抽出し、ファイル変換／逆変換部１０４に対して、逆変換指示を行い、送受信データ変換／パケット・復号化部１１０に対して、パケットデータ送信指示を行い（ステップＳ１８０）、処理をステップＳ１３０に移行する。
【００３８】
また、空きがないと判断した場合には（ステップＳ１７０；Ｎｏ）、撮影が完了し、データ送信完了後に、フレームＡをメモリカード１０８から抽出し、ファイル変換／逆変換部１０４に対して、逆変換指示を行い、送受信データ変換／パケット・復号化部１１０に対して、パケットデータ送信指示を行い（ステップＳ１９０）、ステップＳ１８０の処理と同様に、処理をステップＳ１３０に移行する。
【００３９】
次に、基地局１２と携帯電話１０又は外装装置１８との間でパケットエラーが発生した場合の処理のフローについて、図４を用いて説明する。
【００４０】
ステップＳ１２０の処理において、通信エラーが発生したと判断した場合（ステップＳ１２０；Ｙｅｓ）、図４に示す記号Ａから処理を開始する。
【００４１】
まず、パケットエラー開始前のフレームＢの識別番号を記憶しておく（ステップＳ２００）。基地局１２よりパケットエラーの通知の受信が続行しているか否かを判断し（ステップＳ２１０）、続いているならば（ステップＳ２１０；Ｙｅｓ）、エラーの通知を受信し続ける。
【００４２】
一方、通知受信が終了した場合に（ステップＳ２１０；Ｎｏ）、パケットエラー解消した後のフレームＺの識別番号を記憶する（ステップＳ２２０）。次に、ファイル変換／逆変換処理、通信時間に空きがあるか否かを判断し（ステップＳ２３０）、空きがあると判断した場合には（ステップＳ２３０；Ｙｅｓ）、フレームＢ−Ｚをメモリカード１０８から抽出し、ファイル変換／逆変換部１０４に対して、逆変換指示を行い、送受信データ変換／パケット・復号化部１１０に対して、パケットデータ送信指示を行い（ステップＳ２４０）、処理をステップＳ１３０に移行する。
【００４３】
また、空きがないと判断した場合には（ステップＳ２３０；Ｎｏ）、撮影が完了し、データ送信完了後に、フレームＡ―Ｚをメモリカード１０８から抽出し、ファイル変換／逆変換部１０４に対して、逆変換指示を行い、送受信データ変換／パケット・復号化部１１０に対して、パケットデータ送信指示を行い（ステップＳ２５０）、ステップＳ２４０の処理と同様に、処理をステップＳ１３０に移行する。
【００４４】
以上説明したように、本遠隔録画用携帯情報端末は、汎用のメモリカードを利用することで、製品コスト増を抑え、ＨＤサイズの高品質の映像のまま時間を気にせずに撮影した動画像データを遠隔の記録再生装置に記録保存するようにすることが可能である。
【００４５】
尚、本発明の遠隔録画用携帯情報端末は、上記した実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
【図面の簡単な説明】
【００４６】
【図１】本発明の遠隔録画用携帯情報端末から外部装置へのデータ伝送の構成例を示すシステム構成図である。
【図２】本発明の実施形態に係る携帯電話の構成を示すブロック図である。
【図３】携帯電話の撮影動作中のフレーム落ち時における動作処理を示す図（１／２）である。
【図４】携帯電話の撮影動作中のフレーム落ち時における動作処理を示す図（２／２）である。
【符号の説明】
【００４７】
１００ ＨＤカメラ
１０１ 画像エンコーダ
１０２ 表示装置
１０３ 画像デコーダ
１０４ ファイル変換／逆変換部
１０５ メモリ管理部
１０６ 内蔵メモリ
１０７ メモリカードＩ／Ｆ
１０８ メモリカード
１１０ 送受信データ変換／パケット・復号化部
１１１ 送受信バッファ
１１２ 送受信部
１１３ 送信制御部
１１４ ファイル変換制御部
１１５ アンテナ
【技術分野】
【０００１】
本発明は、撮像した高品質の画像データを遠隔の外部装置に伝送する遠隔録画用携帯情報端末に関する。
【背景技術】
【０００２】
近年、携帯電話等の携帯情報端末で高品質な動画を撮影し、その撮影した動画を記録しておく要望が高まっている。従来、撮影した動画の画像データを記録する場合には、携帯情報端末本体に内蔵するメモリもしくは脱着可能なメモリカードに記録し、保存していた。
【０００３】
しかし、現在の携帯情報端末では長時間の映像記録を実施しようとするとメモリ容量が足りなく、フレームレートを落としたり、画質を落としたりして、画質を犠牲にしてできるだけ長い時間、映像記録が実現できるように工夫していた。
【０００４】
また、高品質なＨＤサイズの動画を撮影し、記録する場合には、必要なメモリ容量がさらに膨大になり、本体のメモリに記録できるのはわずかな時間しかない。近年、大容量メモリカードが市販されるようになり、記録できる時間が長くはなっているが、撮影できる時間は制限され、長時間撮影する場合には、メモリカードを交換しながら、記録する必要がある。したがって、ユーザは、何枚ものメモリカードを持ち歩く必要がある。
さらに、大容量メモリカードは、価格が高く、ユーザに対する費用負担が大きい。
【０００５】
そこで、下記の特許文献１をはじめ、外部の無線通信回線等を含む高速通信回線を介して、携帯情報端末で撮影した動画像等を外部の画像記録再生装置の大規模メモリ装置に記録し、この画像記録再生装置で、再生することが提案されている。
【０００６】
なお、画像記録再生装置に記録されている画像データのうち、再生可能な容量の画像データを携帯情報端末側に転送し、この携帯情報端末で、適宜、再生することも可能である。
【０００７】
しかし、高速通信回線を通してデータを送受する場合、特に、無線データ通信の場合は、通信の環境条件等によって、データレートを変化させるのは当然であり、高速データ通信を維持しながら、リアルタイム性を確保することは困難である。つまり、高速通信回線を介して通信を行う場合、パケット落ちなどでフレーム落ちが発生することは通常起こりえることである。
【０００８】
そこで、従来の携帯情報端末では、送信用のパケットされたデータもしくは画像エンコードされたデータを記録する所定の容量を有する高速バッファを備えて構成されており、このバッファに所定時間分のフレームデータを記録し、フレーム落ちした場合に、フレーム落ちした分のフレームデータを相手先の画像記録再生装置に再送することでフレーム落ちに対処していた（特許文献２参照）。
【特許文献１】特開２０００−３３３１１２号公報
【特許文献２】特開２０００−７８４９２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００９】
しかしながら、フレーム落ちに対処するためには、上記バッファの容量として、フレーム単位で必要となるため、上記従来技術では、高品質動画像データ（ＨＤ画像データ）をバッファした場合、フレーム毎の記憶すべきデータが膨大となることから、必要なバッファメモリ容量が増大し、余分なコスト増を招くという問題点があった。
【００１０】
本発明は、斯かる実情に鑑み、コスト増を招くことなく、リアルタイム性を確保しながら、ＨＤ画像データを外部装置に伝送する遠隔録画用携帯情報端末を提供するものである。
【課題を解決するための手段】
【００１１】
上記のような問題点を解決するために、本発明に係る遠隔録画用携帯情報端末は、以下のような構成とし、特徴を有する。
【００１２】
本発明に係る遠隔録画用携帯情報端末は、ＨＤサイズの動画像を撮像できる撮像部と、汎用メモリカードとのＩ／ＦをとるメモリカードＩ／Ｆと、を備えた遠隔録画用携帯情報端末であって、前記撮像部から出力される動画像データを遠隔にある外部装置に伝送中に、通信経路上における通信エラーが発生した場合、前記外部装置を含む伝送機器からの通信エラー信号を受信し、エラーが発生したフレームの識別番号を記憶する送信制御部を備え、前記送信制御部は、前記汎用メモリカードから該識別番号に相当するフレームデータを抽出し、通信時間に余裕があると判断した場合に、該フレームデータを前記遠隔にある外部装置に再送するように制御したことを特徴とする。
【００１３】
また、本発明に係る遠隔録画用携帯情報端末は、さらに、前記撮像部から出力される動画像データを前記汎用メモリカードに記録する際に、ＭＰＥＧフォーマットを含む汎用のファイルフォーマットに変換するとともに、該ファイルフォーマットで記録されているデータのファイル形式を再送時のデータに逆変換するファイル変換／逆変換部を備えたことを特徴とする。
【発明の効果】
【００１４】
本発明の遠隔録画用携帯情報端末によれば、以下に示す優れた効果を奏し得る。
【００１５】
本発明に係る遠隔録画用携帯情報端末は、大容量・高速の専用メモリのみ使用することなく、汎用のメモリ（メモリカード）を使用することで、製品コスト増を抑え、ＨＤサイズの高品質の映像のまま時間を気にせずに撮影した動画像データを遠隔の記録再生装置に記録保存するようにすることができる。
【発明を実施するための最良の形態】
【００１６】
以下、本発明の一実施形態について図面を参照して説明する。
【００１７】
図１は、本発明の遠隔録画用携帯情報端末から外部装置へのデータ伝送の構成例を示すシステム構成図である。
【００１８】
まず、図１を用いて、本発明の遠隔録画用携帯情報端末（本実施形態では、携帯電話を例に以下説明する）と外部装置とのデータ伝送システムの概略構成及び概略動作について本発明に係る携帯電話の構成・動作の説明を容易にするために、簡単に説明しておく。
【００１９】
図１に示すように、本発明の携帯情報端末装置と外部装置とのデータ伝送システムは、携帯電話１０と、外部装置１８（例えば、パーソナルコンピュータ（ＰＣ）１６、録画機（ＨＤＤ等）１７等）と、携帯電話１０と通信を行うための基地局１２と、携帯電話１０、基地局１２及び外部装置１８間の通信を行うための通信回線１５（インターネット１３、無線通信回線／有線通信回線１４等）とを、備えて構成される。
【００２０】
上記のように構成されたデータ伝送システムにおいて、携帯電話１０は、通信回線１５を介して、撮像された画像データを外部装置１８に伝送し、外部装置１８は、伝送された画像データを内部に備えられている記憶装置にリアルタイムで記録する。そして、外部装置１８では、携帯電話１０による撮影が終了し、記録完了した時点において、記録完了制御データを携帯電話１０に返送し、通信処理を終了する。
【００２１】
ここで、携帯電話機１０からの撮像された画像データを外部装置１８に伝送している最中に、何らかの通信障害によって伝送路上でのフレーム消失が生じ、フレーム落ちが生じた場合に、基地局１２や外部装置１８は、通信エラーを検知し、その通信エラー情報を制御データとして、携帯電話１０に伝送する。一方、この制御データを受信した携帯電話１０は、携帯電話１０に備えられているカメラにより撮影している所定時間Ｔ分の画像データを常時記憶し、画像データの内、フレーム落ちした分の画像データを抽出しパケット化した後、通信の空き時間を利用して、外部装置１８に再送する。外部装置１８では、再送された画像データの並び替えを行い、再生用データとして記録する。
【００２２】
こうすることにより、携帯電話１０に備えられているカメラにより撮影しながら、遠隔の外部装置１８の記憶部にリアルタイム性を確保して、長時間撮影した動画像データを記録することが可能である。
【００２３】
次に、本発明の実施形態に係る携帯電話１０の構成及び動作について以下に詳述する。
【００２４】
図２は、本発明の実施形態に係る携帯電話の構成を示すブロック図である。
【００２５】
図２に示すように、携帯電話１０は、主として、ＣＣＤやＣＭＯＳイメージセンサ等を用いたＨＤ画素の動画撮影が可能なカメラ１００と、撮影された動画を記録可能な圧縮データに変換する画像エンコーダ１０１と、画像データを記憶する外部汎用メモリカード１０８のカードＩ／Ｆ（１０７）と、該画像エンコーダ１０１によりエンコードされた画像データをカードＩ／Ｆ（１０７）を介して、外部汎用メモリカード（例えば、ＳＤカード等）１０８に記録する際に、外部の汎用メモリカード記録用のファイルフォーマット（例えば、．ｍｐｇの形式にすることにより、メモリカードの汎用性を高めることが可能）に変換または、このファイルフォーマットで記録されたデータをもとのデータに逆変換するファイル変換／逆変換部１０４と、エンコードされた画像データを送信用データに変換しパケット化する、または、受信した画像データを受信用データに変換し復号化する送受信データ変換／パケット・復号化部１１０と、パケット化された画像データを一時的に記憶しておく専用の所定小容量・高速バッファである送受信バッファ１１１と、送受信バッファ１１１から出力されるデータを無線通信信号に変換または無線信号から送受信バッファ用データに変換する送受信部１１２と、無線信号として送受信するアンテナ１１５と、伝送路上での何等かの障害による通信エラーが発生し、基地局１２又は外部装置１８からの通信エラーの通知データを送受信部１１２から受け取り、通信エラーを起こしたフレームの識別番号等の記憶や、記憶したフレーム識別番号に基づいて、ファイル変換／逆変換部１０４に対し、メモリカード１０８から対象のフレームを抽出し、再送するように制御等を行う送信制御部１１３と、を備えて構成される。
【００２６】
さらに、画像エンコーダ１０１からの画像データ又は送受信データ変換／パケット・復号化部１１０からの画像データを画像デコードする画像デコーダ１０３と、画像デコーダ１０３にて映像信号に変換された画像データを表示する表示装置１０２と、を備えて構成される。
【００２７】
上記のように構成された携帯電話１０のＨＤカメラ１００により、撮影が開始され、ユーザにより外部装置１８への記録指示が送出されると、ＨＤカメラ１００からのフレーム毎のエンコードデータ量分のＨＤ動画像データは、画像エンコーダ１０１→送受信データ変換／パケット・復号化部１１０→送受信バッファ１１１→送受信部１１２→アンテナ１１５のメインルートを経由して、基地局１２に送信される。そして、撮影をストップし、記録停止指示が送出されるまで、この送信処理が繰りかえされる。
【００２８】
一方、パケットエラーが生じ、１フレーム又は数フレームが消失したような場合に、これらのフレームを記憶・抽出・再送させるために、外部装置１８への記録中に、フレーム毎のエンコードデータ量分のＨＤ動画像データは、常時、ファイルフォーマット変換・逆変換を行うファイル変換／逆変換部１０４→メモリ管理部１０５→カードＩ／Ｆ（１０７）のルートを経由して、安価な汎用のメモリカード１０８に記録される。この際、最初に記憶したファイル変換データから消去しつつ、新たなファイル変換データを追加記憶しながら更新し、メモリカード１０８に所定の時間Ｔ分（例えば、連続した数フレーム分）、常時、リアルタイムで記憶しておく。
【００２９】
パケットエラーが生じた場合に、外部装置１８、基地局１２から送信されるパケットエラー報知データは、アンテナ１１５→送受信部１１２を経由して、送信制御部１１３に入力される。送信制御部１１３は、メモリカード１０８に記憶されている上記識別番号（ＩＤ番号）に相当するファイル変換データを抽出し、ファイル変換／逆変換部１０４による逆変換処理が可能な時間があると判断し、また、送受信部１１２に通信の空き時間があると判断した場合に、上記ＩＤ番号を認識・記憶するとともに、ファイル変換／逆変換部１０４により逆変換処理を行い、逆フォーマット変換されたエンコードデータを再送するように指示する。また、従来では、大容量、高速の専用バッファ（メモリ）を使用して、パケットエラーに対処していたものを本発明の携帯電話１０では、代わりに、小容量の高速バッファである送受信バッファ１１１を採用し、１フレーム内のパケット単位のエラーのみに対処するようにし、装置の製品コストを抑えるようにしている。
【００３０】
なお、従来、メモリカード１０８の全記憶領域に、上記エンコードデータ（ファイル変換データ）を記録し、この記録したファイル変換データをファイル変換／逆変換部１０４により逆変換し、メモリ管理１０５で記録した際の記録開始位置から記録された画像デコーダ１０３に渡し、映像信号に変換し、表示装置１０２で表示し、再生するようにしている。
【００３１】
また、外部装置１８に記録された画像データは、通信回線１５を介して、アンテナ１１５→送受信部１１２→送信バッファ→送受信データ変換／逆変換部１１０→画像デコーダ１０３の経路を経由して、表示装置１０２で表示し、再生している。なお、パケットエラーが発生した場合には、外部装置１８から、エラーに対応するフレームデータを再送するようにしている。
【００３２】
次に、上述した本発明の実施形態に係る携帯電話１０の撮影動作中のフレーム落ち時における動作について、図３、図４の動作フロー図を用いて説明する。
【００３３】
図３、図４は、携帯電話の撮影動作中のフレーム落ち時における動作処理を示す図である。
【００３４】
ＨＤカメラ１００によって撮影が開始され、外部装置１８へ伝送開始指示を受けると、本処理がスタートし、フレーム毎にエンコードデータ量の送信を行う（ステップＳ１００）。ここで、送信制御部１１３は、通信相手（外部装置１８）からパケットエラーの通知を受信したか否かを判断する（ステップＳ１１０）。パケットエラーの通知を受信していなければ（ステップＳ１１０；Ｎｏ）、基地局から通信エラーの通知を受信したか否かを判断し（ステップＳ１２０）、受信していないと判断した場合（ステップＳ１２０；Ｎｏ）、撮影が完了し、全フレームデータが送信完了したかを判断する（ステップＳ１３０）。完了していなければ（ステップＳ１３０；Ｎｏ）、ステップＳ１００の処理に戻し、送信完了したならば（ステップＳ１３０；Ｙｅｓ）、本処理を終了する。
【００３５】
一方、通信相手からパケットエラーの通知を受信した場合には（ステップＳ１１０；Ｙｅｓ）、送受信バッファ１１１の記録範囲内かを判断する（ステップＳ１４０）。
【００３６】
送信制御部１１３は、送受信バッファ１１１の記録範囲内のエラーの場合には（ステップＳ１４０；Ｙｅｓ）、パケットエラーのフレームＡの識別番号を記憶するとともに、そのフレームＡのエラーパケット分を送受信バッファ１１１から抽出し、送受信部１１２に再送を指示し、ステップＳ１３０に処理を移行する（ステップＳ１５０）。
【００３７】
送受信バッファ１１１の記録範囲を超え、フレーム単位のエラーであった場合（ステップＳ１４０；Ｎｏ）、パケットエラーのフレームＡの識別番号を記憶する（ステップＳ１６０）。そして、ファイル変換／逆変換処理、通信時間に空きがあるか否かを判断し（ステップＳ１７０）、空きがあると判断した場合には（ステップＳ１７０；Ｙｅｓ）、フレームＡをメモリカード１０８から抽出し、ファイル変換／逆変換部１０４に対して、逆変換指示を行い、送受信データ変換／パケット・復号化部１１０に対して、パケットデータ送信指示を行い（ステップＳ１８０）、処理をステップＳ１３０に移行する。
【００３８】
また、空きがないと判断した場合には（ステップＳ１７０；Ｎｏ）、撮影が完了し、データ送信完了後に、フレームＡをメモリカード１０８から抽出し、ファイル変換／逆変換部１０４に対して、逆変換指示を行い、送受信データ変換／パケット・復号化部１１０に対して、パケットデータ送信指示を行い（ステップＳ１９０）、ステップＳ１８０の処理と同様に、処理をステップＳ１３０に移行する。
【００３９】
次に、基地局１２と携帯電話１０又は外装装置１８との間でパケットエラーが発生した場合の処理のフローについて、図４を用いて説明する。
【００４０】
ステップＳ１２０の処理において、通信エラーが発生したと判断した場合（ステップＳ１２０；Ｙｅｓ）、図４に示す記号Ａから処理を開始する。
【００４１】
まず、パケットエラー開始前のフレームＢの識別番号を記憶しておく（ステップＳ２００）。基地局１２よりパケットエラーの通知の受信が続行しているか否かを判断し（ステップＳ２１０）、続いているならば（ステップＳ２１０；Ｙｅｓ）、エラーの通知を受信し続ける。
【００４２】
一方、通知受信が終了した場合に（ステップＳ２１０；Ｎｏ）、パケットエラー解消した後のフレームＺの識別番号を記憶する（ステップＳ２２０）。次に、ファイル変換／逆変換処理、通信時間に空きがあるか否かを判断し（ステップＳ２３０）、空きがあると判断した場合には（ステップＳ２３０；Ｙｅｓ）、フレームＢ−Ｚをメモリカード１０８から抽出し、ファイル変換／逆変換部１０４に対して、逆変換指示を行い、送受信データ変換／パケット・復号化部１１０に対して、パケットデータ送信指示を行い（ステップＳ２４０）、処理をステップＳ１３０に移行する。
【００４３】
また、空きがないと判断した場合には（ステップＳ２３０；Ｎｏ）、撮影が完了し、データ送信完了後に、フレームＡ―Ｚをメモリカード１０８から抽出し、ファイル変換／逆変換部１０４に対して、逆変換指示を行い、送受信データ変換／パケット・復号化部１１０に対して、パケットデータ送信指示を行い（ステップＳ２５０）、ステップＳ２４０の処理と同様に、処理をステップＳ１３０に移行する。
【００４４】
以上説明したように、本遠隔録画用携帯情報端末は、汎用のメモリカードを利用することで、製品コスト増を抑え、ＨＤサイズの高品質の映像のまま時間を気にせずに撮影した動画像データを遠隔の記録再生装置に記録保存するようにすることが可能である。
【００４５】
尚、本発明の遠隔録画用携帯情報端末は、上記した実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
【図面の簡単な説明】
【００４６】
【図１】本発明の遠隔録画用携帯情報端末から外部装置へのデータ伝送の構成例を示すシステム構成図である。
【図２】本発明の実施形態に係る携帯電話の構成を示すブロック図である。
【図３】携帯電話の撮影動作中のフレーム落ち時における動作処理を示す図（１／２）である。
【図４】携帯電話の撮影動作中のフレーム落ち時における動作処理を示す図（２／２）である。
【符号の説明】
【００４７】
１００ ＨＤカメラ
１０１ 画像エンコーダ
１０２ 表示装置
１０３ 画像デコーダ
１０４ ファイル変換／逆変換部
１０５ メモリ管理部
１０６ 内蔵メモリ
１０７ メモリカードＩ／Ｆ
１０８ メモリカード
１１０ 送受信データ変換／パケット・復号化部
１１１ 送受信バッファ
１１２ 送受信部
１１３ 送信制御部
１１４ ファイル変換制御部
１１５ アンテナ
【特許請求の範囲】
【請求項１】
ＨＤサイズの動画像を撮像できる撮像部と、汎用メモリカードとのＩ／ＦをとるメモリカードＩ／Ｆと、を備えた遠隔録画用携帯情報端末であって、
前記撮像部から出力される動画像データを遠隔にある外部装置に伝送中に、通信経路上における通信エラーが発生した場合、前記外部装置を含む伝送機器からの通信エラー信号を受信し、エラーが発生したフレームの識別番号を記憶する送信制御部を備え、
前記送信制御部は、前記汎用メモリカードから該識別番号に相当するフレームデータを抽出し、通信時間に余裕があると判断した場合に、該フレームデータを前記遠隔にある外部装置に再送するように制御したことを特徴とする遠隔録画用携帯情報端末。
【請求項２】
さらに、前記撮像部から出力される動画像データを前記汎用メモリカードに記録する際に、ＭＰＥＧフォーマットを含む汎用のファイルフォーマットに変換するとともに、該ファイルフォーマットで記録されているデータのファイル形式を再送時のデータに逆変換するファイル変換／逆変換部を備えたことを特徴とする請求項１に記載の遠隔録画用携帯情報端末。
【請求項１】
ＨＤサイズの動画像を撮像できる撮像部と、汎用メモリカードとのＩ／ＦをとるメモリカードＩ／Ｆと、を備えた遠隔録画用携帯情報端末であって、
前記撮像部から出力される動画像データを遠隔にある外部装置に伝送中に、通信経路上における通信エラーが発生した場合、前記外部装置を含む伝送機器からの通信エラー信号を受信し、エラーが発生したフレームの識別番号を記憶する送信制御部を備え、
前記送信制御部は、前記汎用メモリカードから該識別番号に相当するフレームデータを抽出し、通信時間に余裕があると判断した場合に、該フレームデータを前記遠隔にある外部装置に再送するように制御したことを特徴とする遠隔録画用携帯情報端末。
【請求項２】
さらに、前記撮像部から出力される動画像データを前記汎用メモリカードに記録する際に、ＭＰＥＧフォーマットを含む汎用のファイルフォーマットに変換するとともに、該ファイルフォーマットで記録されているデータのファイル形式を再送時のデータに逆変換するファイル変換／逆変換部を備えたことを特徴とする請求項１に記載の遠隔録画用携帯情報端末。
【図１】
【図２】
【図３】
【図４】
【図２】
【図３】
【図４】
【公開番号】特開２０１０−１３０１６０（Ｐ２０１０−１３０１６０Ａ）
【公開日】平成２２年６月１０日（２０１０．６．１０）
【国際特許分類】
【出願番号】特願２００８−３００８２０（Ｐ２００８−３００８２０）
【出願日】平成２０年１１月２６日（２００８．１１．２６）
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
【公開日】平成２２年６月１０日（２０１０．６．１０）
【国際特許分類】
【出願日】平成２０年１１月２６日（２００８．１１．２６）
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
[ Back to top ]