携帯無線通信端末装置
【課題】効率的なテレビ電話を行うことができる携帯無線通信端末装置を提供すること。
【解決手段】被写体を撮像するカメラ部２３と、画像に対して所定の処理を行う動画処理部４２と、通信を行う無線通信部４５と、無線通信部４５による通信速度に応じて、動画処理部４２の動作を制御し、通信速度が所定の速度以下の場合には、動画処理部４２によりカメラ部２３で撮像された画像に対して所定の処理としてトリミング処理を行い、無線通信部４５により動画処理部４２で処理された後の画像を送信するように制御する制御部４７を備える。
【解決手段】被写体を撮像するカメラ部２３と、画像に対して所定の処理を行う動画処理部４２と、通信を行う無線通信部４５と、無線通信部４５による通信速度に応じて、動画処理部４２の動作を制御し、通信速度が所定の速度以下の場合には、動画処理部４２によりカメラ部２３で撮像された画像に対して所定の処理としてトリミング処理を行い、無線通信部４５により動画処理部４２で処理された後の画像を送信するように制御する制御部４７を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラ部を有する携帯無線通信端末装置に関する。
【背景技術】
【０００２】
ＣＣＤ（ｃｈａｒｇｅ ｃｏｕｐｌｅｄ ｄｅｖｉｃｅ）等により構成されるカメラ部により撮影した画像を、デジタルデータ（画像データ）に変換し、その後、内部のメモリに記憶し、当該画像データを表示部（ＬＣＤ）に表示したり、当該画像データを外部の他の機器に転送したりする電子機器が知られている（例えば、特許文献１を参照。）。
【０００３】
また、近年の通信機能を有する電子機器は、テレビ電話機能を備えたものがある。テレビ電話機能とは、カメラ部によって撮像した自身の動画データを音声と共に通話相手の機器に送信し、同時に、通話相手の機器から送信されてきたデータに基づいて、通信相手の動画データを表示部に表示しつつ通信相手の音声をスピーカから出力することにより通話を行う機能のことである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−７６１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ここで、電子機器のユーザは、テレビ電話機能を利用する場合、自分の顔画像が全体画像において適切な位置（例えば、中心位置）になるように、適切な撮影条件（撮影角度や位置等）を選択して通話を行う必要があった。また、撮影条件は、カメラ部の取り付け位置や、カメラ部の画角や倍率によって左右される。
【０００６】
したがって、ユーザは、テレビ電話機能を利用して通話を行う場合、適切な撮影条件を選択して電子機器を使用（一般的に、手に持って使用）する必要があり、さらに通話中においても、その適切な撮影条件を維持する必要がある。
【０００７】
また、テレビ電話機能を利用する場合、表示部に映る相手の顔を見ながら通話をすることが目的であるため、表示部には顔の画像又は顔を含んだ上半身の画像があれば十分であり、その他の画像（例えば、背景の画像）はあまり必要な情報ではない。
【０００８】
例えば、ユーザがカメラ部から少し離れて通話をする場合、すなわち、電子機器を机等の上に載置し、机から少し離れた位置に立って通話をする場合には、顔の画像がその他の画像に比して小さくなってしまう。このような場合には、不必要な情報が多く含まれた画像を送信することになり、相手側において送信者の顔が判別し辛くなり、効率的なテレビ電話を行うことが困難になる。
【０００９】
本発明は、ユーザが適切な撮影条件を意識しなくても、効率的なテレビ電話を行うことができる携帯無線通信端末装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明に係る携帯無線通信端末装置は、上記課題を解決するために、被写体を撮像するカメラ部と、前記カメラ部により撮像される動画データを用いて動画通信を行う無線通信部と、前記無線通信部での動画通信により通信相手の機器に送信される動画データサイズを変更可能なデータサイズ変更部と、前記動画データに対してトリミング処理を実施可能なトリミング機能部と、を有し、前記データサイズ変更部は、動画通信の際に、前記無線通信部の無線通信状態に応じて前記通信相手の機器に送信される前記動画データに対して前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行う構成である。
【００１１】
また、携帯無線通信端末装置では、前記動画データに含まれている人物の顔を認証する顔認識部を有し、前記データサイズ変更部は、動画通信の際に、無線通信状態に応じて前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行うことが好ましい。
【００１２】
また、携帯無線通信端末装置では、前記無線通信部の無線通信状態をエラーレート及びＲＳＳＩ（Ｒｅｃｅｉｖｅｄ Ｓｉｇｎａｌ Ｓｔｒｅｎｇｔｈ Ｉｎｄｉｃａｔｏｒ）に基づく通信品質により管理する通信品質管理部を備え、前記データサイズ変更部は、動画通信の際に、前記通信品質管理部により前記通信品質が所定の品質以下になったと判断した場合には、前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行うことが好ましい。
【００１３】
また、携帯無線通信端末装置では、電池の残量を管理する電池残量管理部を備え、前記データサイズ変更部は、動画通信の際に、前記電池残量管理部により前記電池の残量が所定量以下になったと判断した場合には、前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行うことが好ましい。
【００１４】
また、携帯無線通信端末装置では、前記顔認識部により顔認識された画像を記憶する記憶部を備え、前記無線通信部は、前記顔認識部による顔認識の処理が不能な状態になった場合、前記トリミング処理を中断し、前記記憶部に記憶されている直近の画像を読み出し、読み出した画像を送信し、再度、顔認識の処理が可能な状態になった場合、前記トリミング処理を再開し、動画データの送信を再開することが好ましい。
【００１５】
また、携帯無線通信端末装置では、前記データサイズ変更部は、前記顔認識部で顔認識された人物以外の情報を前記カメラ部で撮像された動画データに対してトリミング処理を行って、トリミング処理後の動画データが所定のデータサイズよりも小さくなった場合には、当該トリミング処理後の動画データを前記所定のデータサイズまで拡大する処理を行うことが好ましい。
【発明の効果】
【００１６】
本発明によれば、ユーザが適切な撮影条件を意識しなくても、効率的なテレビ電話を行うことができる。
【図面の簡単な説明】
【００１７】
【図１】携帯電話装置の外観斜視図である。
【図２】携帯電話装置を折畳んだ状態の斜視図である。
【図３】携帯電話装置の構成を示す機能ブロック図である。
【図４】テレビ電話を利用する場合の制御部の動作についての説明に供するフローチャートである。
【発明を実施するための形態】
【００１８】
以下、本発明の実施の形態について説明する。図１は、本発明に係る携帯無線通信端末装置の一例である携帯電話装置１の外観斜視図を示す。なお、図１は、いわゆる折り畳み型の携帯電話装置の形態を示しているが、本発明に係る携帯電話装置の形態としては特にこれに限られない。例えば、両筐体を重ね合わせた状態から一方の筐体を一方向にスライドさせるようにしたスライド式や、重ね合せ方向に沿う軸線を中心に一方の筐体を回転させるようにした回転式（ターンタイプ）や、操作部と表示部とが一つの筐体に配置され、連結部を有さない形式（ストレートタイプ、フリップタイプ）でも良い。
【００１９】
携帯電話装置１は、操作部側筐体部２と、表示部側筐体部３と、を備えて構成される。操作部側筐体部２は、表面部１０に、操作部１１と、携帯電話装置１の使用者が通話時に発した音声が入力されるマイク１２と、を備えて構成される。操作部１１は、各種設定や電話帳機能やメール機能等の各種機能を作動させるための機能設定操作キー１３と、電話番号の数字やメール等の文字等を入力するための入力操作キー１４と、各種操作における決定やスクロール等を行う決定操作キー１５と、から構成されている。
【００２０】
また、表示部側筐体部３は、表面部２０に、各種情報を表示するための表示部２１（例えば、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ））と、通話の相手側の音声を出力するスピーカ２２と、被写体を撮像するカメラ部２３と、スピーカ２４を備えて構成されている。カメラ部２３は、主にテレビ電話機能を利用した通話時に利用される。また、スピーカ２４は、スピーカ２２よりも口径が大きく設計されており、スピーカ２２よりも大きな音を出力することができる。スピーカ２４は、例えば、テレビ電話機能を利用した際に相手側の音声を外部に出力するときに利用される。
【００２１】
また、操作部側筐体部２の上端部と表示部側筐体部３の下端部とは、ヒンジ機構４を介して連結されている。また、携帯電話装置１は、ヒンジ機構４を介して連結された操作部側筐体部２と表示部側筐体部３とを相対的に回転することにより、操作部側筐体部２と表示部側筐体部３とを互いに開いた状態（開放状態）にしたり、操作部側筐体部２と表示部側筐体部３とを折り畳んだ状態（折畳み状態）にしたりできる。
【００２２】
また、図２は、携帯電話装置１を折畳んだ状態の斜視図を示している。操作部側筐体部２は、外平面部に、時計やメールの着信等が表示されるサブ表示部３０と、被写体を撮像するカメラ部３１が備えられている。
【００２３】
また、このように構成される携帯電話装置１は、テレビ電話を行うに際して、ユーザが適切な撮影条件を意識しなくても、効率的なテレビ電話を行うことができる機能を有している。以下に当該機能を発揮するための構成と動作の一例について詳細に説明する。
【００２４】
図３は、携帯電話装置１の機能を示す機能ブロック図である。携帯電話装置１は、図３に示すように、マイク１２と、表示部２１と、カメラ部２３と、スピーカ２４と、動画処理部４２（データサイズ変更部、トリミング機能部）と、音声処理部４３と、合成処理部４４と、無線通信部４５と、分離処理部４６と、制御部４７を備える。マイク１２と、表示部２１と、カメラ部２３と、スピーカ２４の構成と動作については、上述したので詳細な説明を省略する。
【００２５】
動画処理部４２は、動画データに対して所定の処理を行う。具体的には、動画処理部４２は、制御部４７の制御にしたがって、無線通信部４５での動画通信により通信相手に送信される動画データサイズを変更可能なデータサイズ変更部として動作し、また、動画データに対してトリミング処理を実施可能なトリミング機能部として動作する。動画処理部４２は、処理後の動画データを動画信号として合成処理部４４に出力する。
【００２６】
音声処理部４３は、マイク１２から入力された音声信号に対して処理（例えば、デジタル変換処理）を行い、処理後の信号を合成処理部４４に供給する。また、音声処理部４３は、分離処理部４６から入力された音声信号に対して処理（例えば、アナログ信号処理）を行い、スピーカ２４に供給する。スピーカ２４は、音声処理部４３から供給された音声信号に基づいて音を外部に出力する。
【００２７】
合成処理部４４は、動画処理部４２から入力された動画信号と、音声処理部４３から入力された音声信号を合成し、合成後の信号（合成信号）を無線通信部４５に出力する。
無線通信部４５は、合成処理部４４から入力された合成信号に対して、所定の信号処理（変調処理であって、例えば、ＣＤＭ（Ｃｏｄｅ Ｄｉｖｉｓｉｏｎ Ｍｕｌｔｉｐｌｅｘ）や、ＦＤＭ（Ｆｒｅｑｕｅｎｃｙ Ｄｉｖｉｓｉｏｎ Ｍｕｌｔｉｐｌｅｘ）等）を行い、処理後の信号を外部（基地局）に出力（放射）する。
【００２８】
また、無線通信部４５は、外部（基地局）から受信した信号に対して、所定の信号処理（復調処理）を行い、処理後の信号を分離処理部４６に出力する。分離処理部４６は、入力された信号を動画信号と音声信号に分離し、動画信号を動画処理部４２に出力し、音声信号を音声処理部４３に出力する。
【００２９】
動画処理部４２は、入力された動画信号に基づく動画データに対して、所定の動画処理を行い、処理後の動画データを表示部２１に出力する。また、音声処理部４３は、入力された音声信号に対して、所定の音声処理を行い、処理後の信号をスピーカ２４に出力する。なお、表示部２１に表示される動画と、スピーカ２４から出力される音は、同期ずれが生じないように同期処理が図られている。
【００３０】
また、制御部４７は、無線通信部４５による通信速度に応じて、動画処理部４２の動作を制御し、特に、通信速度が所定の速度以下の場合には、動画処理部４２によりカメラ部２３で撮像された動画データに対して所定の処理としてトリミング処理を行うように制御する。また、本実施例のトリミング処理とは、動画データの一部を削除したり、動画データに含まれている特定の画像（人物の顔画像）の位置を変更したり、動画データのデータサイズを変更することをいう。したがって、携帯電話装置１は、トリミング処理を行うことにより、テレビ電話を行うに際して、適切な動画データを通話相手の機器に送信することができる。
【００３１】
ここで、通信速度が所定の速度以下の状態で、テレビ電話によるデータ送信が発生すると、スループットが低下しているため、送信したデータが通話相手の機器に届くまでに時間がかかり、円滑な会話が成立しなくなる。このような状況を回避するために、携帯電話装置１は、通信速度が所定の速度以下の場合には、トリミング処理を行うことにより動画データのデータサイズを小さくして送信するので、円滑な会話を成立させることができる。
【００３２】
このようにして、携帯電話装置１は、通信速度が所定の速度以下の場合には、テレビ電話を行うに際して、ユーザが適切な撮影条件を意識しなくても、効率的なテレビ電話を行うことができる。
【００３３】
また、携帯電話装置１は、図３に示すように、カメラ部２３により撮像されている人物の顔を認証する顔認識部４１を備える構成でも良い。
このような構成の場合には、制御部４７は、無線通信部４５による通信速度に応じて、顔認識部４１及び動画処理部４２の動作を制御し、通信速度が所定の速度以下の場合には、顔認識部４１によりカメラ部２３で撮像された画像に含まれている人物に対して顔認識を行い、動画処理部４２により顔認識部４１で顔認識された人物以外の情報の一部又は全部をカメラ部２３で撮像された画像から取り除く処理（トリミング処理）を動画処理部４２に行わせる。
【００３４】
ここで、顔認識部４１の動作について説明する。顔認識部４１は、カメラ部２３で撮像した動画像に対して、所定の分析方法（例えば、顔器官（眉、目、鼻、口、頬等）の局所的なパターンに対する主成分分析方法）を行って人の顔を認証する。また、動画処理部４２は、顔認識された人物以外の情報（背景画像等の情報）を削除する。また、動画処理部４２は、顔認識された人物が画像の隅の方に映っている場合には、その人物の画像部分が画像全体における中心位置に移動するように移動する処理を行い、その人物以外の画像部分を削除する処理を行っても良い。
【００３５】
このようにして、携帯電話装置１は、通信速度が所定の速度以下の場合には、顔認識による結果に基づいて、人物以外の画像部分に対してトリミング処理を行うことにより、動画データのデータサイズを小さくして送信するので、円滑な会話を成立させることができる。
【００３６】
ここで、テレビ電話を利用する場合の携帯電話装置１の動作について、図４のフローチャートを参照しながら説明する。なお、テレビ電話を利用する場合には、マイク１２の感度が上がり、通話相手の声がスピーカ２２ではなく、スピーカ２４から出力される、いわゆるハンズフリー状態となるものとする。また、以下では、所定の操作によって、携帯電話装置１は、通話相手の携帯電話装置に繋がっており、テレビ電話をするための条件が整っているものとする。
【００３７】
ステップＳＴ１において、制御部４７は、カメラ部２３を起動する。
ステップＳＴ２において、制御部４７は、カメラ部２３で撮像された動画データの解析を動画処理部４２に行わせる。ここで、動画処理部４２は、顔認識部４１により動画データに対して顔認識処理を行わせる。
【００３８】
ステップＳＴ３において、制御部４７は、顔認識部４１による顔認識処理によって、動画データにおいて顔の位置や大きさが適切であるかどうかを判断する。具体的には、制御部４７は、動画データの中心位置付近に人物の顔画像がない場合や、画像全体の大きさに比して人物の顔画像が小さい場合等に、顔の位置や大きさが適切でないと判断する。顔の位置や大きさが適切でないと判断した場合（Ｎｏ）には、ステップＳＴ４に進み、顔の位置や大きさが適切であると判断した場合（Ｙｅｓ）には、ステップＳＴ６に進む。
【００３９】
ステップＳＴ４において、制御部４７は、動画処理部４２にトリミング処理を実行させる。動画処理部４２は、顔認識処理の結果に基づいて、動画データに対してトリミング処理を行う。
【００４０】
ステップＳＴ５において、制御部４７は、ステップＳＴ４の工程でトリミング処理された動画データに対して、必要に応じて、動画処理部４２により動画データの拡大処理を行わせる。動画処理部４２は、トリミング処理された後の動画データにおいて、人物が所定のサイズよりも小さかった場合には、一定のサイズまで拡大する処理等を行う。
【００４１】
ステップＳＴ６において、制御部４７は、無線通信部４５に動画データの送信処理を行わせる。具体的には、制御部４７は、合成処理部４４により、処理後の動画データに基づく動画信号と音声処理部４３から入力される音声信号を合成させた後、無線通信部４５により合成信号の送信処理を行わせる。
【００４２】
ステップＳＴ７において、制御部４７は、テレビ電話による通話が継続中であるかどうかを判断する。テレビ電話による通話が継続中であると判断した場合（Ｙｅｓ）には、ステップＳＴ２に戻り、テレビ電話による通話が継続中でない、すなわち終了したと判断した場合（Ｎｏ）には、ステップＳＴ８に進む。
ステップＳＴ８において、制御部４７は、カメラ部２３を停止させる。
【００４３】
また、ステップＳＴ３からステップＳＴ５の工程においては、テレビ電話を効率的に行うために、制御部４７は、複数の適切な画像処理パターンの中から、撮像画像の内容に基づいて、一のパターンを選択し、そのパターンに沿って画像処理を動画処理部４２に行わせても良い。なお、動画処理部４２は、使用者又は通話相手によって選択された画像処理パターンに沿って画像処理を行っても良い。
【００４４】
複数の適切な画像処理パターンとしては、例えば、顔のアップ（拡大）になるような適切な画像処理（アップ画像処理）や、バストアップ（上半身の拡大）になるような適切な画像処理（バストアップ画像処理）や、使用者がカメラ部２３から一定距離離れた場合に、使用者の全身が一画像に納まるような適切な画像処理（全身画像処理）や、撮影画像の中に人物が複数いた場合に、携帯電話装置１の持ち主の顔がアップするような適切な画像処理（複数人画像処理１）、撮影画像の中に人物が複数いた場合に、発言者の顔がアップするような適切な画像処理（複数人画像処理２）や、撮影画像の中に人物が複数いた場合に、全員が一画像に納まるような適切な画像処理（複数人画像処理３）や、撮影画像の中に人物が複数いた場合に、全員のアップ画像に順に映るような適切な画像処理（複数人画像処理４）等がある。なお、複数人画像１においては、予め、使用者の顔画像を登録しておき、動画処理部４２は、この登録された顔画像に一致する顔画像をアップするような適切な画像処理を行う。
【００４５】
ただし、画角の都合で希望するパターン通りの画像処理にならない場合もある。したがって、パターン選択は、送信画像に緩やかに関連し、制御部４７において適切でないと判断した場合は、選択されたパターンを無視しても良い。例えば、制御部４７は、全身画像処理が選択された場合でも、距離が近すぎて全身が写せない場合には、全身画像処理を行わず、例えばアップ画像処理やバストアップ画像処理を代替として実行する。また、制御部４７は、複数人画像処理１乃至４が選択された場合でも、発言者や参加者が正しく判断できない場合には、複数人画像処理１乃至４を行わず、そのままの画像を送信するか、他の処理を実行する。
【００４６】
このようにして、携帯電話装置１は、顔認識による結果に基づいて、人物以外の画像部分に対してトリミング処理を行うことにより、円滑な会話を成立させることができる。
【００４７】
また、携帯電話装置１は、図３に示すように、無線通信部４５の無線通信状態をエラーレート及びＲＳＳＩ（Ｒｅｃｅｉｖｅｄ Ｓｉｇｎａｌ Ｓｔｒｅｎｇｔｈ Ｉｎｄｉｃａｔｏｒ）に基づく通信品質により管理する通信品質管理部４８を備える構成でも良い。
【００４８】
このような構成の場合には、制御部４７は、動画通信の際に、通信品質管理部４８により通信品質が所定の品質以下になったと判断した場合には、顔認識部４１によりカメラ部２３で撮像された動画データに含まれている人物に対して顔認識を行い、動画処理部４２により顔認識部４１で顔認識された人物以外の情報（画像部分）の一部又は全部をカメラ部２３で撮像された動画データからトリミングする処理を行い、無線通信部４５により動画処理部４２で処理された後の動画データを送信するように制御する。
【００４９】
例えば、携帯電話装置１は、地上から地下に移動して基地局との間の通信状況が不安定になると、通信品質が所定の品質以下になり、スループットが低下してしまう。
【００５０】
そこで、携帯電話装置１は、通信品質が所定の品質以下になった場合には、顔認識による結果に基づいて、人物以外の情報（画像部分）に対してトリミング処理を行うことにより、送信するデータサイズを小さくするので、円滑な会話を成立させることができる。
【００５１】
また、携帯電話装置１は、通信品質管理部４８によって把握される通信品質の変化に基づいて、徐々にトリミングする大きさを増やすように動画処理部４２を制御する構成であっても良い。さらに、携帯電話装置１は、通信品質管理部４８によって把握される通信品質の変化に基づいて、徐々に動画自体の縦横比を小さくするように動画処理部４２を制御する構成であっても良い。
【００５２】
また、携帯電話装置１は、図３に示すように、電池４９の残量を管理する電池残量管理部５０を備える構成であっても良い。
【００５３】
制御部４７は、電池残量管理部５０により電池４９の残量が所定量以下になったと判断した場合には、顔認識部４１によりカメラ部２３で撮像された動画データに含まれている人物に対して顔認識を行い、動画処理部４２により顔認識部４１で顔認識された人物以外の情報（画像部分）の一部又は全部をカメラ部２３で撮像された動画データからトリミングする処理を行い、無線通信部４５により動画処理部４２で処理された後の動画データを送信するように制御する。
【００５４】
このようにして、携帯電話装置１は、電池４９の残量が所定量以下になった場合には、顔認識による結果に基づいて、人物以外の情報（画像部分）に対してトリミング処理を行うことにより、送信するデータサイズを小さくするので、円滑な会話を成立させることができる。
【００５５】
また、携帯電話装置１は、電池残量管理部５０によって把握される電池４９の残量の変化に基づいて、徐々にトリミングする大きさを増やすように動画処理部４２を制御する構成であっても良い。さらに、携帯電話装置１は、電池残量管理部５０によって把握される電池４９の残量の変化に基づいて、徐々に動画自体の縦横比を小さくするように動画処理部４２を制御する構成であっても良い。
【００５６】
また、携帯電話装置１は、図３に示すように、顔認識部４１により顔認識された動画データを記憶する記憶部５１を備える構成であっても良い。
このような構成の場合には、制御部４７は、顔認識部４１による顔認識の処理が不能になった場合、動画処理部４２によるトリミング処理を中断し、記憶部５１に記憶されている直近の画像を読み出し、読み出した画像を無線通信部４５により送信し、中断し、記憶部５１に記憶されている直近の画像を読み出し、読み出した画像を送信し、再度、顔認識の処理が可能な状態になった場合、トリミング処理を再開し、動画データの送信を再開する。
【００５７】
例えば、携帯電話装置１は、使用者がテレビ電話中にカメラ部２３の画角から外れた場合には、顔認識ができなくなるので、一旦、トリミング処理を中断して、その直前まで送信していた使用者の顔画像を送信する。そして、携帯電話装置１は、再度、使用者がカメラ部２３の画角に入ってきた場合には、トリミング処理を再開して動画データの送信を継続する。
【００５８】
このようにして、携帯電話装置１は、テレビ電話中に顔認識が行えなくなった場合にトリミング処理を中断するので、無駄な処理を排除して処理負担を軽減することができる。また、携帯電話装置１は、顔認識処理を中断している場合には、直前まで送信していた顔画像の送信を行い、再度、顔認識が行える状況になった場合にトリミング処理を再開して動画データの送信を継続するので、円滑な会話を成立させることができる。
【００５９】
また、制御部４７は、顔認識部４１で顔認識された人物以外の情報（画像部分）の一部又は全部をカメラ部２３で撮像された動画データに対してトリミング処理を行って、トリミング処理後の動画データが所定のデータサイズよりも小さくなった場合には、当該処理後の動画データを所定のデータサイズまで拡大する処理を行う構成であっても良い。
【００６０】
したがって、携帯電話装置１は、テレビ電話を行う際に、動画データにトリミング処理を行って、所定のデータサイズよりも小さくなった場合には、トリミング処理後の画像データサイズを所定のデータサイズまで拡大するので、円滑な会話を成立させることができる。
【００６１】
なお、本実施例では、カメラ部２３で撮像された動画像を動画処理部４２でトリミングの処理を行うこととして説明したが、これに限られず、制御部４７の制御にしたがって、カメラ部２３の望遠機能を利用して人物の画像を拡大処理しても良い。
【００６２】
また、動画処理部４２は、静止画像を処理しても良い。また、動画データは、静止画データの連続画像として構成されていても良い。
【００６３】
また、本実施例では、通常の通話の場合には、通話相手の音声をスピーカ２２から出力し、テレビ電話による通話の場合には、通話相手の音声をスピーカ２４から出力することとしたが、これに限られない。例えば、スピーカ２２がハンズフリー状態でも使用可能であれば、通常の通話の場合及び、テレビ電話による通話の場合に、スピーカ２２から通話相手の音声を出力しても良い。この構成の場合には、スピーカ２４は、不要となる。
【００６４】
また、本実施例では、カメラ部２３（Ｉｎカメラ）を利用してテレビ電話を行う構成について説明したが、カメラ部３１（Ｏｕｔカメラ）を利用してテレビ電話を行っても良い。このような構成の場合には、携帯電話装置１の使用者は、他のモニタを利用して通話相手の顔画像を確認しても良い。
【００６５】
また、携帯電話装置１は、認証された顔画像の情報を利用し、送信する動画像の処理や制御を行うこととしたが、認証された顔の情報から別の制御を行っても良い。
例えば、携帯電話装置１は、認証された顔画像のサイズから距離を判断し、マイク１２の感度を向上したり、スピーカ２４の音量を増加させる制御を行っても良い。また、携帯電話装置１は、認証された顔画像の明るさから周辺の明るさを判断し、補助灯（不図示）を点灯させる制御を行っても良い。
【符号の説明】
【００６６】
１ 携帯電話装置
１２ マイク
２１ 表示部
２３ カメラ部
２４ スピーカ
４１ 顔認識部
４２ 動画処理部（データサイズ変更部、トリミング機能部）
４３ 音声処理部
４４ 合成処理部
４５ 無線通信部
４６ 分離処理部
４７ 制御部
４８ 通信品質管理部
５０ 電池残量管理部
【技術分野】
【０００１】
本発明は、カメラ部を有する携帯無線通信端末装置に関する。
【背景技術】
【０００２】
ＣＣＤ（ｃｈａｒｇｅ ｃｏｕｐｌｅｄ ｄｅｖｉｃｅ）等により構成されるカメラ部により撮影した画像を、デジタルデータ（画像データ）に変換し、その後、内部のメモリに記憶し、当該画像データを表示部（ＬＣＤ）に表示したり、当該画像データを外部の他の機器に転送したりする電子機器が知られている（例えば、特許文献１を参照。）。
【０００３】
また、近年の通信機能を有する電子機器は、テレビ電話機能を備えたものがある。テレビ電話機能とは、カメラ部によって撮像した自身の動画データを音声と共に通話相手の機器に送信し、同時に、通話相手の機器から送信されてきたデータに基づいて、通信相手の動画データを表示部に表示しつつ通信相手の音声をスピーカから出力することにより通話を行う機能のことである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−７６１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ここで、電子機器のユーザは、テレビ電話機能を利用する場合、自分の顔画像が全体画像において適切な位置（例えば、中心位置）になるように、適切な撮影条件（撮影角度や位置等）を選択して通話を行う必要があった。また、撮影条件は、カメラ部の取り付け位置や、カメラ部の画角や倍率によって左右される。
【０００６】
したがって、ユーザは、テレビ電話機能を利用して通話を行う場合、適切な撮影条件を選択して電子機器を使用（一般的に、手に持って使用）する必要があり、さらに通話中においても、その適切な撮影条件を維持する必要がある。
【０００７】
また、テレビ電話機能を利用する場合、表示部に映る相手の顔を見ながら通話をすることが目的であるため、表示部には顔の画像又は顔を含んだ上半身の画像があれば十分であり、その他の画像（例えば、背景の画像）はあまり必要な情報ではない。
【０００８】
例えば、ユーザがカメラ部から少し離れて通話をする場合、すなわち、電子機器を机等の上に載置し、机から少し離れた位置に立って通話をする場合には、顔の画像がその他の画像に比して小さくなってしまう。このような場合には、不必要な情報が多く含まれた画像を送信することになり、相手側において送信者の顔が判別し辛くなり、効率的なテレビ電話を行うことが困難になる。
【０００９】
本発明は、ユーザが適切な撮影条件を意識しなくても、効率的なテレビ電話を行うことができる携帯無線通信端末装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明に係る携帯無線通信端末装置は、上記課題を解決するために、被写体を撮像するカメラ部と、前記カメラ部により撮像される動画データを用いて動画通信を行う無線通信部と、前記無線通信部での動画通信により通信相手の機器に送信される動画データサイズを変更可能なデータサイズ変更部と、前記動画データに対してトリミング処理を実施可能なトリミング機能部と、を有し、前記データサイズ変更部は、動画通信の際に、前記無線通信部の無線通信状態に応じて前記通信相手の機器に送信される前記動画データに対して前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行う構成である。
【００１１】
また、携帯無線通信端末装置では、前記動画データに含まれている人物の顔を認証する顔認識部を有し、前記データサイズ変更部は、動画通信の際に、無線通信状態に応じて前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行うことが好ましい。
【００１２】
また、携帯無線通信端末装置では、前記無線通信部の無線通信状態をエラーレート及びＲＳＳＩ（Ｒｅｃｅｉｖｅｄ Ｓｉｇｎａｌ Ｓｔｒｅｎｇｔｈ Ｉｎｄｉｃａｔｏｒ）に基づく通信品質により管理する通信品質管理部を備え、前記データサイズ変更部は、動画通信の際に、前記通信品質管理部により前記通信品質が所定の品質以下になったと判断した場合には、前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行うことが好ましい。
【００１３】
また、携帯無線通信端末装置では、電池の残量を管理する電池残量管理部を備え、前記データサイズ変更部は、動画通信の際に、前記電池残量管理部により前記電池の残量が所定量以下になったと判断した場合には、前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行うことが好ましい。
【００１４】
また、携帯無線通信端末装置では、前記顔認識部により顔認識された画像を記憶する記憶部を備え、前記無線通信部は、前記顔認識部による顔認識の処理が不能な状態になった場合、前記トリミング処理を中断し、前記記憶部に記憶されている直近の画像を読み出し、読み出した画像を送信し、再度、顔認識の処理が可能な状態になった場合、前記トリミング処理を再開し、動画データの送信を再開することが好ましい。
【００１５】
また、携帯無線通信端末装置では、前記データサイズ変更部は、前記顔認識部で顔認識された人物以外の情報を前記カメラ部で撮像された動画データに対してトリミング処理を行って、トリミング処理後の動画データが所定のデータサイズよりも小さくなった場合には、当該トリミング処理後の動画データを前記所定のデータサイズまで拡大する処理を行うことが好ましい。
【発明の効果】
【００１６】
本発明によれば、ユーザが適切な撮影条件を意識しなくても、効率的なテレビ電話を行うことができる。
【図面の簡単な説明】
【００１７】
【図１】携帯電話装置の外観斜視図である。
【図２】携帯電話装置を折畳んだ状態の斜視図である。
【図３】携帯電話装置の構成を示す機能ブロック図である。
【図４】テレビ電話を利用する場合の制御部の動作についての説明に供するフローチャートである。
【発明を実施するための形態】
【００１８】
以下、本発明の実施の形態について説明する。図１は、本発明に係る携帯無線通信端末装置の一例である携帯電話装置１の外観斜視図を示す。なお、図１は、いわゆる折り畳み型の携帯電話装置の形態を示しているが、本発明に係る携帯電話装置の形態としては特にこれに限られない。例えば、両筐体を重ね合わせた状態から一方の筐体を一方向にスライドさせるようにしたスライド式や、重ね合せ方向に沿う軸線を中心に一方の筐体を回転させるようにした回転式（ターンタイプ）や、操作部と表示部とが一つの筐体に配置され、連結部を有さない形式（ストレートタイプ、フリップタイプ）でも良い。
【００１９】
携帯電話装置１は、操作部側筐体部２と、表示部側筐体部３と、を備えて構成される。操作部側筐体部２は、表面部１０に、操作部１１と、携帯電話装置１の使用者が通話時に発した音声が入力されるマイク１２と、を備えて構成される。操作部１１は、各種設定や電話帳機能やメール機能等の各種機能を作動させるための機能設定操作キー１３と、電話番号の数字やメール等の文字等を入力するための入力操作キー１４と、各種操作における決定やスクロール等を行う決定操作キー１５と、から構成されている。
【００２０】
また、表示部側筐体部３は、表面部２０に、各種情報を表示するための表示部２１（例えば、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ））と、通話の相手側の音声を出力するスピーカ２２と、被写体を撮像するカメラ部２３と、スピーカ２４を備えて構成されている。カメラ部２３は、主にテレビ電話機能を利用した通話時に利用される。また、スピーカ２４は、スピーカ２２よりも口径が大きく設計されており、スピーカ２２よりも大きな音を出力することができる。スピーカ２４は、例えば、テレビ電話機能を利用した際に相手側の音声を外部に出力するときに利用される。
【００２１】
また、操作部側筐体部２の上端部と表示部側筐体部３の下端部とは、ヒンジ機構４を介して連結されている。また、携帯電話装置１は、ヒンジ機構４を介して連結された操作部側筐体部２と表示部側筐体部３とを相対的に回転することにより、操作部側筐体部２と表示部側筐体部３とを互いに開いた状態（開放状態）にしたり、操作部側筐体部２と表示部側筐体部３とを折り畳んだ状態（折畳み状態）にしたりできる。
【００２２】
また、図２は、携帯電話装置１を折畳んだ状態の斜視図を示している。操作部側筐体部２は、外平面部に、時計やメールの着信等が表示されるサブ表示部３０と、被写体を撮像するカメラ部３１が備えられている。
【００２３】
また、このように構成される携帯電話装置１は、テレビ電話を行うに際して、ユーザが適切な撮影条件を意識しなくても、効率的なテレビ電話を行うことができる機能を有している。以下に当該機能を発揮するための構成と動作の一例について詳細に説明する。
【００２４】
図３は、携帯電話装置１の機能を示す機能ブロック図である。携帯電話装置１は、図３に示すように、マイク１２と、表示部２１と、カメラ部２３と、スピーカ２４と、動画処理部４２（データサイズ変更部、トリミング機能部）と、音声処理部４３と、合成処理部４４と、無線通信部４５と、分離処理部４６と、制御部４７を備える。マイク１２と、表示部２１と、カメラ部２３と、スピーカ２４の構成と動作については、上述したので詳細な説明を省略する。
【００２５】
動画処理部４２は、動画データに対して所定の処理を行う。具体的には、動画処理部４２は、制御部４７の制御にしたがって、無線通信部４５での動画通信により通信相手に送信される動画データサイズを変更可能なデータサイズ変更部として動作し、また、動画データに対してトリミング処理を実施可能なトリミング機能部として動作する。動画処理部４２は、処理後の動画データを動画信号として合成処理部４４に出力する。
【００２６】
音声処理部４３は、マイク１２から入力された音声信号に対して処理（例えば、デジタル変換処理）を行い、処理後の信号を合成処理部４４に供給する。また、音声処理部４３は、分離処理部４６から入力された音声信号に対して処理（例えば、アナログ信号処理）を行い、スピーカ２４に供給する。スピーカ２４は、音声処理部４３から供給された音声信号に基づいて音を外部に出力する。
【００２７】
合成処理部４４は、動画処理部４２から入力された動画信号と、音声処理部４３から入力された音声信号を合成し、合成後の信号（合成信号）を無線通信部４５に出力する。
無線通信部４５は、合成処理部４４から入力された合成信号に対して、所定の信号処理（変調処理であって、例えば、ＣＤＭ（Ｃｏｄｅ Ｄｉｖｉｓｉｏｎ Ｍｕｌｔｉｐｌｅｘ）や、ＦＤＭ（Ｆｒｅｑｕｅｎｃｙ Ｄｉｖｉｓｉｏｎ Ｍｕｌｔｉｐｌｅｘ）等）を行い、処理後の信号を外部（基地局）に出力（放射）する。
【００２８】
また、無線通信部４５は、外部（基地局）から受信した信号に対して、所定の信号処理（復調処理）を行い、処理後の信号を分離処理部４６に出力する。分離処理部４６は、入力された信号を動画信号と音声信号に分離し、動画信号を動画処理部４２に出力し、音声信号を音声処理部４３に出力する。
【００２９】
動画処理部４２は、入力された動画信号に基づく動画データに対して、所定の動画処理を行い、処理後の動画データを表示部２１に出力する。また、音声処理部４３は、入力された音声信号に対して、所定の音声処理を行い、処理後の信号をスピーカ２４に出力する。なお、表示部２１に表示される動画と、スピーカ２４から出力される音は、同期ずれが生じないように同期処理が図られている。
【００３０】
また、制御部４７は、無線通信部４５による通信速度に応じて、動画処理部４２の動作を制御し、特に、通信速度が所定の速度以下の場合には、動画処理部４２によりカメラ部２３で撮像された動画データに対して所定の処理としてトリミング処理を行うように制御する。また、本実施例のトリミング処理とは、動画データの一部を削除したり、動画データに含まれている特定の画像（人物の顔画像）の位置を変更したり、動画データのデータサイズを変更することをいう。したがって、携帯電話装置１は、トリミング処理を行うことにより、テレビ電話を行うに際して、適切な動画データを通話相手の機器に送信することができる。
【００３１】
ここで、通信速度が所定の速度以下の状態で、テレビ電話によるデータ送信が発生すると、スループットが低下しているため、送信したデータが通話相手の機器に届くまでに時間がかかり、円滑な会話が成立しなくなる。このような状況を回避するために、携帯電話装置１は、通信速度が所定の速度以下の場合には、トリミング処理を行うことにより動画データのデータサイズを小さくして送信するので、円滑な会話を成立させることができる。
【００３２】
このようにして、携帯電話装置１は、通信速度が所定の速度以下の場合には、テレビ電話を行うに際して、ユーザが適切な撮影条件を意識しなくても、効率的なテレビ電話を行うことができる。
【００３３】
また、携帯電話装置１は、図３に示すように、カメラ部２３により撮像されている人物の顔を認証する顔認識部４１を備える構成でも良い。
このような構成の場合には、制御部４７は、無線通信部４５による通信速度に応じて、顔認識部４１及び動画処理部４２の動作を制御し、通信速度が所定の速度以下の場合には、顔認識部４１によりカメラ部２３で撮像された画像に含まれている人物に対して顔認識を行い、動画処理部４２により顔認識部４１で顔認識された人物以外の情報の一部又は全部をカメラ部２３で撮像された画像から取り除く処理（トリミング処理）を動画処理部４２に行わせる。
【００３４】
ここで、顔認識部４１の動作について説明する。顔認識部４１は、カメラ部２３で撮像した動画像に対して、所定の分析方法（例えば、顔器官（眉、目、鼻、口、頬等）の局所的なパターンに対する主成分分析方法）を行って人の顔を認証する。また、動画処理部４２は、顔認識された人物以外の情報（背景画像等の情報）を削除する。また、動画処理部４２は、顔認識された人物が画像の隅の方に映っている場合には、その人物の画像部分が画像全体における中心位置に移動するように移動する処理を行い、その人物以外の画像部分を削除する処理を行っても良い。
【００３５】
このようにして、携帯電話装置１は、通信速度が所定の速度以下の場合には、顔認識による結果に基づいて、人物以外の画像部分に対してトリミング処理を行うことにより、動画データのデータサイズを小さくして送信するので、円滑な会話を成立させることができる。
【００３６】
ここで、テレビ電話を利用する場合の携帯電話装置１の動作について、図４のフローチャートを参照しながら説明する。なお、テレビ電話を利用する場合には、マイク１２の感度が上がり、通話相手の声がスピーカ２２ではなく、スピーカ２４から出力される、いわゆるハンズフリー状態となるものとする。また、以下では、所定の操作によって、携帯電話装置１は、通話相手の携帯電話装置に繋がっており、テレビ電話をするための条件が整っているものとする。
【００３７】
ステップＳＴ１において、制御部４７は、カメラ部２３を起動する。
ステップＳＴ２において、制御部４７は、カメラ部２３で撮像された動画データの解析を動画処理部４２に行わせる。ここで、動画処理部４２は、顔認識部４１により動画データに対して顔認識処理を行わせる。
【００３８】
ステップＳＴ３において、制御部４７は、顔認識部４１による顔認識処理によって、動画データにおいて顔の位置や大きさが適切であるかどうかを判断する。具体的には、制御部４７は、動画データの中心位置付近に人物の顔画像がない場合や、画像全体の大きさに比して人物の顔画像が小さい場合等に、顔の位置や大きさが適切でないと判断する。顔の位置や大きさが適切でないと判断した場合（Ｎｏ）には、ステップＳＴ４に進み、顔の位置や大きさが適切であると判断した場合（Ｙｅｓ）には、ステップＳＴ６に進む。
【００３９】
ステップＳＴ４において、制御部４７は、動画処理部４２にトリミング処理を実行させる。動画処理部４２は、顔認識処理の結果に基づいて、動画データに対してトリミング処理を行う。
【００４０】
ステップＳＴ５において、制御部４７は、ステップＳＴ４の工程でトリミング処理された動画データに対して、必要に応じて、動画処理部４２により動画データの拡大処理を行わせる。動画処理部４２は、トリミング処理された後の動画データにおいて、人物が所定のサイズよりも小さかった場合には、一定のサイズまで拡大する処理等を行う。
【００４１】
ステップＳＴ６において、制御部４７は、無線通信部４５に動画データの送信処理を行わせる。具体的には、制御部４７は、合成処理部４４により、処理後の動画データに基づく動画信号と音声処理部４３から入力される音声信号を合成させた後、無線通信部４５により合成信号の送信処理を行わせる。
【００４２】
ステップＳＴ７において、制御部４７は、テレビ電話による通話が継続中であるかどうかを判断する。テレビ電話による通話が継続中であると判断した場合（Ｙｅｓ）には、ステップＳＴ２に戻り、テレビ電話による通話が継続中でない、すなわち終了したと判断した場合（Ｎｏ）には、ステップＳＴ８に進む。
ステップＳＴ８において、制御部４７は、カメラ部２３を停止させる。
【００４３】
また、ステップＳＴ３からステップＳＴ５の工程においては、テレビ電話を効率的に行うために、制御部４７は、複数の適切な画像処理パターンの中から、撮像画像の内容に基づいて、一のパターンを選択し、そのパターンに沿って画像処理を動画処理部４２に行わせても良い。なお、動画処理部４２は、使用者又は通話相手によって選択された画像処理パターンに沿って画像処理を行っても良い。
【００４４】
複数の適切な画像処理パターンとしては、例えば、顔のアップ（拡大）になるような適切な画像処理（アップ画像処理）や、バストアップ（上半身の拡大）になるような適切な画像処理（バストアップ画像処理）や、使用者がカメラ部２３から一定距離離れた場合に、使用者の全身が一画像に納まるような適切な画像処理（全身画像処理）や、撮影画像の中に人物が複数いた場合に、携帯電話装置１の持ち主の顔がアップするような適切な画像処理（複数人画像処理１）、撮影画像の中に人物が複数いた場合に、発言者の顔がアップするような適切な画像処理（複数人画像処理２）や、撮影画像の中に人物が複数いた場合に、全員が一画像に納まるような適切な画像処理（複数人画像処理３）や、撮影画像の中に人物が複数いた場合に、全員のアップ画像に順に映るような適切な画像処理（複数人画像処理４）等がある。なお、複数人画像１においては、予め、使用者の顔画像を登録しておき、動画処理部４２は、この登録された顔画像に一致する顔画像をアップするような適切な画像処理を行う。
【００４５】
ただし、画角の都合で希望するパターン通りの画像処理にならない場合もある。したがって、パターン選択は、送信画像に緩やかに関連し、制御部４７において適切でないと判断した場合は、選択されたパターンを無視しても良い。例えば、制御部４７は、全身画像処理が選択された場合でも、距離が近すぎて全身が写せない場合には、全身画像処理を行わず、例えばアップ画像処理やバストアップ画像処理を代替として実行する。また、制御部４７は、複数人画像処理１乃至４が選択された場合でも、発言者や参加者が正しく判断できない場合には、複数人画像処理１乃至４を行わず、そのままの画像を送信するか、他の処理を実行する。
【００４６】
このようにして、携帯電話装置１は、顔認識による結果に基づいて、人物以外の画像部分に対してトリミング処理を行うことにより、円滑な会話を成立させることができる。
【００４７】
また、携帯電話装置１は、図３に示すように、無線通信部４５の無線通信状態をエラーレート及びＲＳＳＩ（Ｒｅｃｅｉｖｅｄ Ｓｉｇｎａｌ Ｓｔｒｅｎｇｔｈ Ｉｎｄｉｃａｔｏｒ）に基づく通信品質により管理する通信品質管理部４８を備える構成でも良い。
【００４８】
このような構成の場合には、制御部４７は、動画通信の際に、通信品質管理部４８により通信品質が所定の品質以下になったと判断した場合には、顔認識部４１によりカメラ部２３で撮像された動画データに含まれている人物に対して顔認識を行い、動画処理部４２により顔認識部４１で顔認識された人物以外の情報（画像部分）の一部又は全部をカメラ部２３で撮像された動画データからトリミングする処理を行い、無線通信部４５により動画処理部４２で処理された後の動画データを送信するように制御する。
【００４９】
例えば、携帯電話装置１は、地上から地下に移動して基地局との間の通信状況が不安定になると、通信品質が所定の品質以下になり、スループットが低下してしまう。
【００５０】
そこで、携帯電話装置１は、通信品質が所定の品質以下になった場合には、顔認識による結果に基づいて、人物以外の情報（画像部分）に対してトリミング処理を行うことにより、送信するデータサイズを小さくするので、円滑な会話を成立させることができる。
【００５１】
また、携帯電話装置１は、通信品質管理部４８によって把握される通信品質の変化に基づいて、徐々にトリミングする大きさを増やすように動画処理部４２を制御する構成であっても良い。さらに、携帯電話装置１は、通信品質管理部４８によって把握される通信品質の変化に基づいて、徐々に動画自体の縦横比を小さくするように動画処理部４２を制御する構成であっても良い。
【００５２】
また、携帯電話装置１は、図３に示すように、電池４９の残量を管理する電池残量管理部５０を備える構成であっても良い。
【００５３】
制御部４７は、電池残量管理部５０により電池４９の残量が所定量以下になったと判断した場合には、顔認識部４１によりカメラ部２３で撮像された動画データに含まれている人物に対して顔認識を行い、動画処理部４２により顔認識部４１で顔認識された人物以外の情報（画像部分）の一部又は全部をカメラ部２３で撮像された動画データからトリミングする処理を行い、無線通信部４５により動画処理部４２で処理された後の動画データを送信するように制御する。
【００５４】
このようにして、携帯電話装置１は、電池４９の残量が所定量以下になった場合には、顔認識による結果に基づいて、人物以外の情報（画像部分）に対してトリミング処理を行うことにより、送信するデータサイズを小さくするので、円滑な会話を成立させることができる。
【００５５】
また、携帯電話装置１は、電池残量管理部５０によって把握される電池４９の残量の変化に基づいて、徐々にトリミングする大きさを増やすように動画処理部４２を制御する構成であっても良い。さらに、携帯電話装置１は、電池残量管理部５０によって把握される電池４９の残量の変化に基づいて、徐々に動画自体の縦横比を小さくするように動画処理部４２を制御する構成であっても良い。
【００５６】
また、携帯電話装置１は、図３に示すように、顔認識部４１により顔認識された動画データを記憶する記憶部５１を備える構成であっても良い。
このような構成の場合には、制御部４７は、顔認識部４１による顔認識の処理が不能になった場合、動画処理部４２によるトリミング処理を中断し、記憶部５１に記憶されている直近の画像を読み出し、読み出した画像を無線通信部４５により送信し、中断し、記憶部５１に記憶されている直近の画像を読み出し、読み出した画像を送信し、再度、顔認識の処理が可能な状態になった場合、トリミング処理を再開し、動画データの送信を再開する。
【００５７】
例えば、携帯電話装置１は、使用者がテレビ電話中にカメラ部２３の画角から外れた場合には、顔認識ができなくなるので、一旦、トリミング処理を中断して、その直前まで送信していた使用者の顔画像を送信する。そして、携帯電話装置１は、再度、使用者がカメラ部２３の画角に入ってきた場合には、トリミング処理を再開して動画データの送信を継続する。
【００５８】
このようにして、携帯電話装置１は、テレビ電話中に顔認識が行えなくなった場合にトリミング処理を中断するので、無駄な処理を排除して処理負担を軽減することができる。また、携帯電話装置１は、顔認識処理を中断している場合には、直前まで送信していた顔画像の送信を行い、再度、顔認識が行える状況になった場合にトリミング処理を再開して動画データの送信を継続するので、円滑な会話を成立させることができる。
【００５９】
また、制御部４７は、顔認識部４１で顔認識された人物以外の情報（画像部分）の一部又は全部をカメラ部２３で撮像された動画データに対してトリミング処理を行って、トリミング処理後の動画データが所定のデータサイズよりも小さくなった場合には、当該処理後の動画データを所定のデータサイズまで拡大する処理を行う構成であっても良い。
【００６０】
したがって、携帯電話装置１は、テレビ電話を行う際に、動画データにトリミング処理を行って、所定のデータサイズよりも小さくなった場合には、トリミング処理後の画像データサイズを所定のデータサイズまで拡大するので、円滑な会話を成立させることができる。
【００６１】
なお、本実施例では、カメラ部２３で撮像された動画像を動画処理部４２でトリミングの処理を行うこととして説明したが、これに限られず、制御部４７の制御にしたがって、カメラ部２３の望遠機能を利用して人物の画像を拡大処理しても良い。
【００６２】
また、動画処理部４２は、静止画像を処理しても良い。また、動画データは、静止画データの連続画像として構成されていても良い。
【００６３】
また、本実施例では、通常の通話の場合には、通話相手の音声をスピーカ２２から出力し、テレビ電話による通話の場合には、通話相手の音声をスピーカ２４から出力することとしたが、これに限られない。例えば、スピーカ２２がハンズフリー状態でも使用可能であれば、通常の通話の場合及び、テレビ電話による通話の場合に、スピーカ２２から通話相手の音声を出力しても良い。この構成の場合には、スピーカ２４は、不要となる。
【００６４】
また、本実施例では、カメラ部２３（Ｉｎカメラ）を利用してテレビ電話を行う構成について説明したが、カメラ部３１（Ｏｕｔカメラ）を利用してテレビ電話を行っても良い。このような構成の場合には、携帯電話装置１の使用者は、他のモニタを利用して通話相手の顔画像を確認しても良い。
【００６５】
また、携帯電話装置１は、認証された顔画像の情報を利用し、送信する動画像の処理や制御を行うこととしたが、認証された顔の情報から別の制御を行っても良い。
例えば、携帯電話装置１は、認証された顔画像のサイズから距離を判断し、マイク１２の感度を向上したり、スピーカ２４の音量を増加させる制御を行っても良い。また、携帯電話装置１は、認証された顔画像の明るさから周辺の明るさを判断し、補助灯（不図示）を点灯させる制御を行っても良い。
【符号の説明】
【００６６】
１ 携帯電話装置
１２ マイク
２１ 表示部
２３ カメラ部
２４ スピーカ
４１ 顔認識部
４２ 動画処理部（データサイズ変更部、トリミング機能部）
４３ 音声処理部
４４ 合成処理部
４５ 無線通信部
４６ 分離処理部
４７ 制御部
４８ 通信品質管理部
５０ 電池残量管理部
【特許請求の範囲】
【請求項１】
被写体を撮像するカメラ部と、
前記カメラ部により撮像される動画データを用いて動画通信を行う無線通信部と、
前記無線通信部での動画通信により通信相手の機器に送信される動画データサイズを変更可能なデータサイズ変更部と、
前記動画データに対してトリミング処理を実施可能なトリミング機能部と、を有し、
前記データサイズ変更部は、動画通信の際に、前記無線通信部の無線通信状態に応じて前記通信相手の機器に送信される前記動画データに対して前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、
前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行う携帯無線通信端末装置。
【請求項２】
前記動画データに含まれている人物の顔を認証する顔認識部を有し、
前記データサイズ変更部は、動画通信の際に、無線通信状態に応じて前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、
前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行う請求項１記載の携帯無線通信端末装置。
【請求項３】
前記無線通信部の無線通信状態をエラーレート及びＲＳＳＩ（Ｒｅｃｅｉｖｅｄ Ｓｉｇｎａｌ Ｓｔｒｅｎｇｔｈ Ｉｎｄｉｃａｔｏｒ）に基づく通信品質により管理する通信品質管理部を備え、
前記データサイズ変更部は、動画通信の際に、前記通信品質管理部により前記通信品質が所定の品質以下になったと判断した場合には、前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、
前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行う請求項２記載の携帯無線通信端末装置。
【請求項４】
電池の残量を管理する電池残量管理部を備え、
前記データサイズ変更部は、動画通信の際に、前記電池残量管理部により前記電池の残量が所定量以下になったと判断した場合には、前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、
前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行う請求項２記載の携帯無線通信端末装置。
【請求項５】
前記顔認識部により顔認識された画像を記憶する記憶部を備え、
前記無線通信部は、前記顔認識部による顔認識の処理が不能な状態になった場合、前記トリミング処理を中断し、前記記憶部に記憶されている直近の画像を読み出し、読み出した画像を送信し、再度、顔認識の処理が可能な状態になった場合、前記トリミング処理を再開し、動画データの送信を再開する請求項２記載の携帯無線通信端末装置。
【請求項６】
前記データサイズ変更部は、前記顔認識部で顔認識された人物以外の情報を前記カメラ部で撮像された動画データに対してトリミング処理を行って、トリミング処理後の動画データが所定のデータサイズよりも小さくなった場合には、当該トリミング処理後の動画データを前記所定のデータサイズまで拡大する処理を行う請求項２記載の携帯無線通信端末装置。
【請求項１】
被写体を撮像するカメラ部と、
前記カメラ部により撮像される動画データを用いて動画通信を行う無線通信部と、
前記無線通信部での動画通信により通信相手の機器に送信される動画データサイズを変更可能なデータサイズ変更部と、
前記動画データに対してトリミング処理を実施可能なトリミング機能部と、を有し、
前記データサイズ変更部は、動画通信の際に、前記無線通信部の無線通信状態に応じて前記通信相手の機器に送信される前記動画データに対して前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、
前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行う携帯無線通信端末装置。
【請求項２】
前記動画データに含まれている人物の顔を認証する顔認識部を有し、
前記データサイズ変更部は、動画通信の際に、無線通信状態に応じて前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、
前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行う請求項１記載の携帯無線通信端末装置。
【請求項３】
前記無線通信部の無線通信状態をエラーレート及びＲＳＳＩ（Ｒｅｃｅｉｖｅｄ Ｓｉｇｎａｌ Ｓｔｒｅｎｇｔｈ Ｉｎｄｉｃａｔｏｒ）に基づく通信品質により管理する通信品質管理部を備え、
前記データサイズ変更部は、動画通信の際に、前記通信品質管理部により前記通信品質が所定の品質以下になったと判断した場合には、前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、
前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行う請求項２記載の携帯無線通信端末装置。
【請求項４】
電池の残量を管理する電池残量管理部を備え、
前記データサイズ変更部は、動画通信の際に、前記電池残量管理部により前記電池の残量が所定量以下になったと判断した場合には、前記通信相手の機器に送信される前記動画データに対して、前記顔認識部による顔認識を行い、顔認識された人物以外の情報を前記動画データから取り除くように前記トリミング機能部にて前記トリミング処理を行って動画データのデータサイズを変更し、
前記無線通信部は、前記データサイズ変更部によりデータサイズが変更された動画データを用いて動画通信を行う請求項２記載の携帯無線通信端末装置。
【請求項５】
前記顔認識部により顔認識された画像を記憶する記憶部を備え、
前記無線通信部は、前記顔認識部による顔認識の処理が不能な状態になった場合、前記トリミング処理を中断し、前記記憶部に記憶されている直近の画像を読み出し、読み出した画像を送信し、再度、顔認識の処理が可能な状態になった場合、前記トリミング処理を再開し、動画データの送信を再開する請求項２記載の携帯無線通信端末装置。
【請求項６】
前記データサイズ変更部は、前記顔認識部で顔認識された人物以外の情報を前記カメラ部で撮像された動画データに対してトリミング処理を行って、トリミング処理後の動画データが所定のデータサイズよりも小さくなった場合には、当該トリミング処理後の動画データを前記所定のデータサイズまで拡大する処理を行う請求項２記載の携帯無線通信端末装置。
【図１】
【図２】
【図３】
【図４】
【図２】
【図３】
【図４】
【公開番号】特開２０１２−１０２２２（Ｐ２０１２−１０２２２Ａ）
【公開日】平成２４年１月１２日（２０１２．１．１２）
【国際特許分類】
【出願番号】特願２０１０−１４５９３６（Ｐ２０１０−１４５９３６）
【出願日】平成２２年６月２８日（２０１０．６．２８）
【出願人】（０００００６６３３）京セラ株式会社 (13,660)
【Ｆターム（参考）】
【公開日】平成２４年１月１２日（２０１２．１．１２）
【国際特許分類】
【出願日】平成２２年６月２８日（２０１０．６．２８）
【出願人】（０００００６６３３）京セラ株式会社 (13,660)
【Ｆターム（参考）】
[ Back to top ]