撮影装置及び画像データ処理方法
【課題】撮影時の状況や雰囲気に応じて撮影画像を自動的に加工するカメラ付き携帯電話端末において、撮影画像に人物の顔が写っておらず、撮影画像から人物の感情が抽出できない場合でも撮影時の状況や雰囲気を反映した適切な画像加工が行えるようにする。
【解決手段】携帯電話端末１００は、無線を介して外部に存在する携帯電話端末を検出する周辺装置検出手段１０と、撮像手段３１が取得した画像データ３０２の加工方法を決定する加工方法決定手段２０を具備し、周辺装置検出手段１０における検出結果である周辺装置情報１０１に基づいて画像データ３０２の加工方法を決定するよう構成した。
【解決手段】携帯電話端末１００は、無線を介して外部に存在する携帯電話端末を検出する周辺装置検出手段１０と、撮像手段３１が取得した画像データ３０２の加工方法を決定する加工方法決定手段２０を具備し、周辺装置検出手段１０における検出結果である周辺装置情報１０１に基づいて画像データ３０２の加工方法を決定するよう構成した。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像データを外部から取得する装置に利用可能な撮影装置及び画像データ処理方法に関する。
【背景技術】
【０００２】
従来より、画像を撮影する撮影装置や、撮影画像を蓄積する画像蓄積装置において、撮影時の状況に基づいて撮影画像を処理する装置が提案されてきた（たとえば特許文献１、特許文献２参照）。これらの発明によれば、撮影が行われた場所や季節等の情報や、撮影画像に写っている人物の表情を認識することにより抽出した撮影時の雰囲気を表す情報に基づいて撮影画像を加工することができるので、撮影画像を見る人が撮影時の状況を感じ取ることができるように表現された撮影画像を得ることができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−２４８０３７号公報（第１０ページ、図２）
【特許文献２】特表２００５−５１２２４８号公報（第８ページ、図２）
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記従来の装置にあっては、撮影の場所や撮影時の季節が同一であっても周囲の賑やかさ等の状況が異なる場合もあり、状況の変化に応じた適切な撮影画像の加工結果が得られないという問題があった。また、撮影画像に人物の顔が写っていない場合、撮影時の状況を表す情報が抽出できないため適切な撮影画像の加工結果が得られないという問題があった。
【０００５】
本発明は、上記従来の課題を解決するものであり、画像データが人物の感情や表情を抽出するための情報を含んでいない場合であっても、画像データ取得時の状況を適切に判断して画像データを加工することができる撮影装置及び画像データ処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
前記従来の課題を解決するために、本発明の撮影装置は、外部を撮影し画像データを取得する撮影手段と、無線を介して外部に存在する周辺装置を検出する周辺装置検出手段と、前記周辺装置の属性情報を提供する装置属性情報提供手段と、前記属性情報に基づいて、前記画像データの加工方法を決定する加工方法決定手段と、前記決定された加工方法に基づいて前記画像データを加工する加工手段と、を有する構成を有する。
【０００７】
この構成により、画像データ取得時の周辺装置の検出結果に基づいて周囲に人物がいるかどうかを判別して、取得した画像データの加工方法を変更することができるので、画像データが人物の感情や表情を抽出するための情報を含んでいない場合であっても、画像データ取得時の状況を適切に判断して画像データを加工することができる。また、撮影した画像に周囲の人物が写っていない場合であっても、利用者と周囲の人物との関係や雰囲気を感じ取れる画像を加工して表示することができる。
【０００８】
また、本発明の撮影装置は、周囲の環境情報を検出する環境検出手段をさらに有し、前記加工方法決定手段は、前記属性情報と前記環境情報と、に基づいて前記画像データの加工方法を決定する構成を有する。
【０００９】
この構成により、周辺装置の属性情報が同一であっても、環境情報が異なる場合を判別することができるので、画像データ取得時の状況をより適切に判断して画像データを加工することができる。
【００１０】
また、本発明の撮影装置は、前記環境情報が、少なくとも周囲の音の音圧レベルを含み、前記加工方法決定手段は、前記属性情報と前記音圧レベルと、に基づいて前記画像データの加工方法を決定する構成を有する。
【００１１】
この構成により、撮影した画像に周囲の人物が写っておらず、同一の場所で周囲の状況が逐次変化する場合であっても、周囲の状況を判別することができるので、撮影した画像を周囲の雰囲気を感じ取れるよう加工して表示することができる。
【００１２】
また、本発明の撮影装置は、前記加工手段が加工した前記画像データを表示する表示部を、更に有する。
【００１３】
また、本発明の画像データ処理方法は、外部を撮影し画像データを取得する第１のステップと、無線を介して外部に存在する周辺装置を検出する第２のステップと、前記第１のステップで検出した周辺装置の属性情報を提供する第３のステップと、前記属性情報に基づいて、前記画像データの加工方法を決定する第４のステップと、を有する。
【００１４】
この方法により、メディアデータ取得時の周辺装置の検出結果に基づいて周囲に人物がいるかどうかを判別して、取得したメディアデータの加工方法を変更することができるので、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であっても、メディアデータ取得時の状況を適切に判断してメディアデータを加工することができる。
【００１５】
また、本発明の画像データ処理方法は、周囲の環境情報を検出する第５のステップを有し、前記第４のステップは、前記属性情報と前記環境情報と、に基づいて前記画像データの加工方法を決定する。
【００１６】
この方法により、周辺装置の属性情報が同一であっても、環境情報が異なる場合を判別することができるので、画像データ取得時の状況をより適切に判断してメディアデータを加工することができる。
【００１７】
また、本発明の画像データ処理方法は、前記環境情報は、少なくとも周囲の音の音圧レベルを含み、前記第４のステップは、前記属性情報と前記音圧レベルと、に基づいて前記画像データの加工方法を決定する。
【００１８】
この方法により、周囲の人物の顔が撮影した画像に写っていない場合であっても、利用者と周囲の人物との関係や雰囲気を感じ取れる画像を加工して表示することができる。
【発明の効果】
【００１９】
本発明によれば、画像データを取得する際に無線を介して周辺装置を検出した結果に基づいて画像データの加工方法を決定することにより、画像データが人物の感情や表情を抽出するための情報を含んでいない場合であっても、画像データ取得時の状況を適切に判断して画像データを加工することができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の実施の形態１におけるメディアデータ処理装置の概略構成図
【図２】本発明の実施の形態１における携帯電話端末の構成図
【図３】（ａ）本発明の実施の形態１における携帯電話端末の第一の外観図、（ｂ）本発明の実施の形態１における携帯電話端末の第二の外観図
【図４】本発明の実施の形態１における携帯電話端末の加工方法決定手段の処理手順を示すフローチャート
【図５】（ａ）本発明の実施の形態１における携帯電話端末を使用する第一の状況を説明する図、（ｂ）本発明の実施の形態１における携帯電話端末を使用する第二の状況を説明する図
【図６】（ａ）本発明の実施の形態１における携帯電話端末の加工方法決定手段が出力する第一の加工指示の内容を説明する図、（ｂ）本発明の実施の形態１における携帯電話端末の加工方法決定手段が出力する第二の加工指示の内容を説明する図
【図７】本発明の実施の形態２におけるメディアデータ処理装置の概略構成図
【図８】本発明の実施の形態２における携帯電話端末の構成図
【図９】（ａ）本発明の実施の形態２における携帯電話端末の電話帳記憶手段が保持している周辺装置属性テーブルの内容を説明する図、（ｂ）本発明の実施の形態２における携帯電話端末の電話帳記憶手段が保持している加工規則テーブルの内容を説明する図
【図１０】本発明の実施の形態２における携帯電話端末の加工方法決定手段の処理手順を示すフローチャート
【図１１】（ａ）本発明の実施の形態２における携帯電話端末を使用する第三の状況を説明する図、（ｂ）本発明の実施の形態２における携帯電話端末の加工手段が出力する第三の加工済画像データの内容を説明する図
【図１２】（ａ）本発明の実施の形態２における携帯電話端末を使用する第四の状況を説明する図、（ｂ）本発明の実施の形態２における携帯電話端末の加工手段が出力する第四の加工済画像データの内容を説明する図
【図１３】（ａ）本発明の実施の形態２における携帯電話端末を使用する第五の状況を説明する図、（ｂ）本発明の実施の形態２における携帯電話端末の加工手段が出力する第五の加工済画像データの内容を説明する図
【図１４】本発明の実施の形態３におけるメディアデータ処理装置の概略構成図
【図１５】本発明の実施の形態３における携帯電話端末の構成図
【図１６】（ａ）本発明の実施の形態３における携帯電話端末の第一の外観図、（ｂ）本発明の実施の形態３における携帯電話端末の第二の外観図
【図１７】本発明の実施の形態３における携帯電話端末の加工方法決定手段の処理手順を示すフローチャート
【図１８】（ａ）本発明の実施の形態３における携帯電話端末を使用する第六の状況を説明する図、（ｂ）本発明の実施の形態３における携帯電話端末の加工手段が出力する第六の加工済画像データの内容を説明する図
【図１９】（ａ）本発明の実施の形態３における携帯電話端末を使用する第七の状況を説明する図、（ｂ）本発明の実施の形態３における携帯電話端末の加工手段が出力する第七の加工済画像データの内容を説明する図
【図２０】（ａ）本発明の実施の形態３における携帯電話端末の蓄積手段が蓄積する第一の蓄積データの内容を説明する図、（ｂ）本発明の実施の形態３における蓄積手段が蓄積する第二の蓄積データの内容を説明する図
【発明を実施するための形態】
【００２１】
以下、本発明を実施するための最良の形態について、図面を参照しながら説明する。なお、実施の形態を説明するための全図（フローチャートも含む）において、同一の構成要素には同一符号を付与し、重複する説明は省略する。
【００２２】
（実施の形態１）
図１は、本発明の実施の形態１におけるメディアデータ処理装置１の概略構成図である。図１において、メディアデータ処理装置１は周辺装置検出手段１０、加工方法決定手段２０、メディアデータ取得手段３０および加工手段４０を備える。
【００２３】
周辺装置検出手段１０は、無線を介してメディアデータ処理装置１の外部に存在する周辺装置を検出し、検出した周辺装置に関する情報である周辺装置情報１０１を出力する。
【００２４】
ここで、周辺装置情報１０１は、周辺装置検出手段１０が検出した携帯電話端末等の周辺装置の装置数、すなわち動作中の周辺装置を所持している人物が何人いるかを表した数値である。周辺装置検出手段１０が周辺装置の装置数を検出して周辺装置情報１０１として出力することにより、携帯電話端末１００は周辺におおよそ何人の周辺装置を所持している人物が居るかを把握することができる。
【００２５】
加工方法決定手段２０は、メディアデータ取得手段３０からメディアデータ３０１を取得し、周辺装置情報１０１に基づいてメディアデータ３０１の加工方法を決定し、加工方法を指示するための加工指示２０１を出力する。
【００２６】
メディアデータ取得手段３０は、外部から画像データや演奏データ等のメディアデータを取得し、加工方法決定手段２０に出力する。
【００２７】
加工手段４０は、加工指示２０１に基づいてメディアデータ３０１を加工する。
【００２８】
なお、周辺装置検出手段１０における検出処理には公知の検出方法（たとえば特開平１０−２６７９７３号公報の第７ページから第９ページの図４〜図８に記載の方法）を用いてよく、従って本明細書中では詳しい説明を省略するものとする。
【００２９】
図２は、本発明の実施の形態１におけるメディアデータ処理装置１を携帯電話端末１００として構成したときの構成図である。図２において携帯電話端末１００は、周辺装置検出手段１０、加工方法決定手段２０、撮像手段３１、加工手段４０、表示手段５０、蓄積手段６０および操作入力手段９０を備える。
【００３０】
撮像手段３１は、外部の被写体を撮像して被写体の画像データ３０２を図１のメディアデータ３０１に相当するデータとして出力する。
【００３１】
加工方法決定手段２０は、画像データ３０２の色温度を増減する加工を施すかどうかを決定し、加工指示２０１を出力する。
【００３２】
蓄積手段６０は、加工方法決定手段２０が出力した加工指示２０１を蓄積し、蓄積している加工指示２０１を加工手段４０へ出力する。
【００３３】
加工手段４０は、加工指示２０１に基づいて画像データ３０２を加工して加工済画像データ４０２を出力する。
【００３４】
表示手段５０は、加工手段４０が出力した加工済画像データ４０２を表示する。
【００３５】
操作入力手段９０は、撮影操作と表示操作の操作入力を検知して蓄積手段６０および加工方法決定手段２０の処理の開始を指示する。
【００３６】
図３は、本発明の実施の形態１における携帯電話端末１００の外観を示す図である。周辺装置検出手段１０は、撮像手段３１と同じ筐体の内部に設置され、被写体近傍に存在する周辺装置が発する無線信号を高感度で検出できるようになっている。
【００３７】
図４は、本発明の実施の形態１における携帯電話端末１００の加工方法決定手段２０の処理手順を表すフローチャートである。操作入力手段９０が撮影操作を検知すると、加工方法決定手段２０は、図４のフローチャートが示す処理を開始する。
【００３８】
加工方法決定手段２０は、まず画像データ３０２を取得し（ステップＳ１０１）、周辺装置情報１０１を取得する（ステップＳ１０２）。
【００３９】
次に加工方法決定手段２０は、周辺装置情報１０１が示す周辺装置の検出装置数が所定の数を越えているかどうかを判断し（ステップＳ１１１）、検出装置数が所定の数を越えている場合（ステップＳ１１１、ＹＥＳ）はステップＳ１１２へ進み、越えていない場合（ステップＳ１１１、ＮＯ）はステップＳ１５１へ進む。
【００４０】
ステップＳ１１２において加工方法決定手段２０は、画像データ３０２の色温度を下降させる加工を施すように加工方法を決定する。ステップＳ１５１において加工方法決定手段２０は、ステップＳ１１２までの処理で決定した加工方法を加工指示２０１として出力する。
【００４１】
加工方法決定手段２０が加工指示２０１を出力すると、蓄積手段６０が加工指示２０１を蓄積する。蓄積手段６０は、操作入力手段９０が表示操作を検知すると蓄積している加工指示２０１を加工手段４０へ出力する。そして加工手段４０が加工指示２０１に従って画像データ３０２を加工して加工済画像データ４０２を出力すると、表示手段５０が加工済画像データ４０２を表示する。
【００４２】
なお、図４のステップＳ１０２が請求項１２に記載の第１のステップに、ステップＳ１１１およびＳ１１２が同じく請求項１２に記載の第２のステップにそれぞれ相当する。また、図４のステップＳ１５１の加工指示２０１に従って、加工手段４０が画像データ３０２を加工する処理が請求項１３に記載の第３のステップに相当する。
【００４３】
以下、本発明の実施の形態１の具体的な動作を説明する。すなわち、周辺装置の装置数に応じて画像データの色調を決定する具体例である。
【００４４】
図５は、本発明の実施の形態１における携帯電話端末１００を用いて撮影を行う際の状況を説明する図である。図５（ａ）は、利用者Ｕが携帯電話端末１００を用いて４人の人物に囲まれた人物Ｕ−Ｆを撮影する第一の状況を示している。また、図５（ｂ）は、利用者Ｕが携帯電話端末１００を用いて周囲に人物がいない状態で人物Ｕ−Ｆを撮影する第二の状況を示している。
【００４５】
図５において、人物Ｕ−Ｆは周辺装置１００−Ｆを、人物Ｕ−Ｆの周囲の人物は周辺装置１００−Ｇ、１００−Ｈ、１００−Ｉ、１００−Ｊをそれぞれ所持している。また、利用者Ｕは人物Ｕ−Ｆの顔の部分のみがアップで写る構図、すなわちＵ−Ｆ以外の人物が写らない構図で撮影を行うものとする。
【００４６】
まず、第一の状況（図５（ａ））における携帯電話端末１００の動作を説明する。第一の状況において利用者Ｕが操作入力手段９０で撮影操作を行うと、加工方法決定手段２０は図４のフローチャートに示す処理を開始する。
【００４７】
まず、ステップＳ１０１において加工方法決定手段２０は画像データ３０２を取得し、ステップＳ１０２において周辺装置情報１０１を取得する。このとき、周辺装置検出手段１０は、５台の周辺装置１００−Ｆ〜１００−Ｊを検出し、周辺装置情報１０１として数値「５」を出力するので、ステップＳ１０２において加工方法決定手段２０は検出装置数「５」を得る。
【００４８】
次に加工方法決定手段２０は、ステップＳ１１１の判断がＹＥＳであるのでステップＳ１１２の処理へ進み、画像データ３０２の色温度を下降させる加工を施すよう加工方法を決定して（ステップＳ１１２）、加工指示２０１を出力する（ステップＳ１５１）。蓄積手段６０は加工方法決定手段２０が出力した加工指示２０１を蓄積する。
【００４９】
一方、第二の状況（図５（ｂ））においては、ステップＳ１０１にて加工方法決定手段２０が画像データ３０２を取得し、ステップＳ１０２において周辺装置情報１０１を取得する。このとき、周辺装置検出手段１０は、１台の周辺装置１００−Ｆを検出し、周辺装置情報１０１として数値「１」出力するので、図４のステップＳ１１１における判断がＮＯとなり、加工方法決定手段２０は画像データ３０２の色温度を変更する加工を施さないよう加工方法を決定する。
【００５０】
図６は、本発明の実施の形態１における携帯電話端末１００の加工方法決定手段２０が出力する加工指示２０１の構造を模式的に示した図である。図６（ａ）は第一の状況（図５（ａ））において加工方法決定手段２０が出力する加工指示２０１−１１を示している。また、図６（ｂ）は第二の状況（図５（ｂ））において加工方法決定手段２０が出力する加工指示２０１−１２を示している。
【００５１】
加工指示２０１−１１および２０１−１２は、いずれもヘッダ、画像データ３０２の内容、および加工方法を指示する加工指示情報から成る。加工指示２０１−１１は、画像データ３０２の内容を表す画像データ３０２−１１と、色温度を下降させることを示す加工指示情報Ｄ１２「色温度調整＝降下」を含んでいる。一方、加工指示２０１−１２は画像データ３０２の内容を表す画像データ３０２−１２と、画像データ３０２−１２を原画像のまま保つことを示す加工指示情報Ｄ１４「色温度調整＝なし」を含んでいる。
【００５２】
なお、本発明の実施の形態１における加工指示２０１の構造は、たとえばＴＩＦＦ（Ｔａｇｇｅｄ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）形式を用いて電子データとして表現することが可能である。
【００５３】
蓄積手段６０が加工指示２０１を蓄積した後、利用者Ｕが操作入力手段９０で表示操作を行うと、蓄積手段６０が蓄積した加工指示２０１を出力し、加工手段４０が加工指示２０１の加工処理を開始する。
【００５４】
加工手段４０が加工指示２０１−１１に従って、画像データ３０２−１１の色温度を下降する加工を行うと、画像データ３０２−１１よりやや赤みがかった色調の加工済画像データ４０２を加工処理の結果として出力する。これに対し、加工手段４０が加工指示２０１−１２を取り込むと第二の画像データ３０２−１２の内容をそのまま加工済画像データ４０２として出力する。その結果、周囲に多くの人物がいる第一の状況（図５（ａ））で撮影した撮影画像は、賑やかな雰囲気を表す赤みがかった温かみのある色調に加工されて表示手段５０に表示されることになる。
【００５５】
以上説明したように、本発明の実施の形態１における携帯電話端末１００では、周辺装置検出手段１０が検出する周辺装置の装置数が所定数より多い場合に加工方法決定手段２０が画像データ３０２の色温度を下げることにより賑やかな雰囲気を表す色調に画像データ３０２を加工するよう加工方法を決定している。このメディアデータ処理方法により、撮影した画像に周囲の人物が写っていない場合であっても、多くの人物が居る賑やかな雰囲気で撮影した画像を、賑やかさを感じ取れるよう加工して表示することができる。
【００５６】
以上の説明から明らかなように、本発明の実施の形態１における携帯電話端末は、メディアデータを取得する際に無線を介して周辺装置を検出した結果に基づいてメディアデータの加工方法を決定するため、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であっても、メディアデータ取得時の状況を適切に判断してメディアデータを加工することができる。
【００５７】
また、本発明の実施の形態１における携帯電話端末は、周辺装置の装置数を判別してディアデータの加工方法を決定するため、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であっても、メディアデータ取得時の状況をより適切に判断してメディアデータを加工することができる。
【００５８】
（実施の形態２）
次に本発明の実施の形態２について説明する。本実施の形態２では、メディアデータの加工方法を決定する際に、周辺装置の属性情報を利用する点に特徴がある。
【００５９】
図７は、本発明の実施の形態２におけるメディアデータ処理装置１の概略構成図である。図７においてメディアデータ処理装置１は、周辺装置検出手段１０、加工方法決定手段２０、メディアデータ取得手段３０、加工手段４０および装置属性情報提供手段８０を備える。上記実施の形態１におけるメディアデータ処理装置１と同様の構成については説明を省略する。
【００６０】
装置属性情報提供手段８０は、周辺装置検出手段１０が検出した周辺装置の属性に関する情報である装置属性情報８０１を出力する。
【００６１】
図８は、本発明の実施の形態２におけるメディアデータ処理装置１を携帯電話端末２００として構成したときの構成図である。図８において携帯電話端末２００は、図２の携帯電話端末１００の構成要素に加え、図７の装置属性情報提供手段８０に対応する構成要素として電話帳記憶手段８１を備える。また、携帯電話端末２００は、図２の携帯電話端末１００とは異なり、加工手段４０が出力する加工済画像データ４０２を蓄積手段６０に蓄積するよう構成されている。
【００６２】
加工方法決定手段２０は、画像データ３０２に別の画像である補助画像を重畳する加工の方法を決定する。また、加工方法決定手段２０は、図２の加工方法決定手段２０とは異なり、加工手段４０が備える処理機能を直接呼び出すことによって加工手段４０に加工指示２０１を与える。
【００６３】
周辺装置情報１０１は、周辺装置検出手段１０が検出した周辺装置を識別する装置識別子を含んでいる。周辺装置検出手段１０が複数の周辺装置を検出した場合は、周辺装置検出手段１０は検出した複数の装置識別子を周辺装置情報１０１として出力する。
【００６４】
加工補助情報８０２は、加工方法決定手段２０において画像データ３０２の加工方法を決定する際に用いる補助的な情報であり、補助画像を識別する情報であるファイル名や画像データ３０２の加工方法を決定する際に適用する規則を含んでいる。
【００６５】
電話帳記憶手段８１は、周辺装置情報１０１が示す周辺装置に対応する装置属性情報８０１および加工補助情報８０２をテーブル形式のデータで保持している。
【００６６】
図９は、本発明の実施の形態２における携帯電話端末２００の電話帳記憶手段８１が保持する周辺装置属性テーブルＴ８１１および加工規則テーブルＴ８１２の具体例を示す図である。
【００６７】
図９（ａ）に示す周辺装置属性テーブルＴ８１１は、装置属性情報８０１および加工補助情報８０２を保持するテーブルである。周辺装置属性テーブルＴ８１１は、周辺装置の装置識別子ごとのレコード（Ｒ８１１１〜Ｒ８１１５）から成り、各レコード（Ｒ８１１１〜Ｒ８１１５）は、装置識別子を表すフィールドＦ８１１１、周辺装置の所有者名を表すフィールドＦ８１１２、所有者が属するグループを表すフィールドＦ８１１３、所有者の似顔絵を表したアイコン画像ファイルのファイル名を表すフィールドＦ８１１４を有している。
【００６８】
ここで、所有者名Ｆ８１１２およびグループＦ８１１３は周辺装置の装置属性情報８０１に相当する情報である。また、アイコン画像ファイルのファイル名Ｆ８１１４は加工補助情報８０２に対応する情報である。
【００６９】
図９（ｂ）に示す加工規則テーブルＴ８１２は、画像データ３０２の加工方法を決定する際に適用する規則を表すテーブルである。加工規則テーブルＴ８１２は、周辺装置の所有者が属するグループごとのレコード（Ｒ８１２１〜Ｒ８１２３）から成り、各レコード（Ｒ８１２１〜Ｒ８１２３）は、グループを表すフィールドＦ８１２１、加工内容が選択される優先度を表すフィールドＦ８１２２、および加工内容を表すフィールドＦ８１２３を有している。
【００７０】
ここで、優先度Ｆ８１２２は、数値が大きいほど加工内容Ｆ８１２３が優先的に適用されることを表している。また、加工内容Ｆ８１２３の値「−」は、加工処理を行わないことを表している。
【００７１】
図１０は、本発明の実施の形態２における携帯電話端末２００の加工方法決定手段２０の処理手順を表すフローチャートである。操作入力手段９０が撮影操作を検知すると、加工方法決定手段２０は、図１０のフローチャートが示す処理を開始する。
【００７２】
まず、ステップＳ１０１において加工方法決定手段２０は画像データ３０２を取得し、ステップＳ１０２において周辺装置情報１０１を取得する。
【００７３】
ステップＳ２０３において加工方法決定手段２０は、図９（ａ）の周辺装置属性テーブルＴ８１１を参照することにより、ステップＳ１０２で取得した周辺装置情報１０１に含まれる周辺装置の装置識別子（フィールドＦ８１１１）ごとに、周辺装置の所有者が属するグループ（フィールドＦ８１１３）の情報を取得する。
【００７４】
ステップＳ２１１において加工方法決定手段２０は、図９（ｂ）の加工規則テーブルＴ８１２を参照することにより、ステップＳ２０３で取得したグループのうち最高優先度のグループ、すなわちフィールドＦ８１２２の数値が最大であるグループ（フィールドＦ８１２１）を求める。そしてステップＳ２１２において加工方法決定手段２０は、ステップＳ２１１で求めたグループの加工内容（フィールドＦ８１２３）を画像データ３０２の加工内容とする。
【００７５】
ステップＳ２１３において加工方法決定手段２０は、ステップＳ２１２で求めた加工内容に基づいて処理を分岐する。加工方法決定手段２０は、加工内容が「なし」の場合、すなわち図９（ｂ）の加工規則テーブルＴ８１２のフィールドＦ８１２３の値が「−」の場合はステップＳ２５１へ進み、加工内容が「個別」の場合はステップＳ２５２へ進み、加工内容に補助画像ファイルのファイル名が指定されている場合はステップＳ２５３へ進む。
【００７６】
ステップＳ２５１において、加工方法決定手段２０は、加工を行わずに画像データ３０２をそのまま加工済画像データ４０２として出力するよう加工手段４０に加工指示２０１を与える。
【００７７】
ステップＳ２５２において、加工方法決定手段２０は、図９（ａ）の周辺装置属性テーブルＴ８１１を参照することにより、ステップＳ１０２で取得した装置識別子をフィールドＦ８１１１に持つレコードのアイコン画像ファイル名（フィールドＦ８１１４）を周辺装置ごとに取得し、画像データ３０２に重畳するよう加工手段４０に加工指示２０１を与える。
【００７８】
ステップＳ２５３において、加工方法決定手段２０は、加工内容が指定する補助画像を画像データ３０２に重畳するよう加工手段４０に加工指示２０１を与える。
【００７９】
加工手段４０が加工指示２０１に従って画像データ３０２を加工し、加工済画像データ４０２を出力すると、蓄積手段６０が加工済画像データ４０２を蓄積する。操作入力手段９０が表示操作を検知すると、蓄積手段６０は加工済画像データ４０２を出力し、表示手段５０がこれを表示する。
【００８０】
なお、図１０のステップＳ１０２が請求項１２に記載の第１のステップに、ステップＳ２１１、ステップＳ２１２、ステップＳ２１３およびステップＳ２５１〜Ｓ２５３が同じく請求項１２に記載の第２のステップにそれぞれ相当する。また、図１０のステップＳ２５１〜Ｓ２５３の加工指示２０１に従って、加工手段４０が画像データ３０２を加工する処理が請求項１３に記載の第３のステップに相当する。さらに、図１０のステップＳ２０３が請求項１６に記載の第５のステップに相当する。
【００８１】
以下、本発明の実施の形態２の具体的な動作を説明する。すなわち、周辺装置の属性情報に応じて画像データに重畳する補助画像を決定する具体例である。
【００８２】
図１１（ａ）は、本発明の実施の形態２における携帯電話端末２００を用いて利用者Ｕが利用者Ｕの仕事仲間である人物Ｕ−Ｅ、および人物Ｕ−Ｅの取引相手である人物Ｕ−Ｋを撮影する第三の状況を示している。図１１（ａ）において、人物Ｕ−Ｅは周辺装置２００−Ｅを、人物Ｕ−Ｋは周辺装置２００−Ｋをそれぞれ所持している。周辺装置２００−Ｅ、２００−Ｋの装置識別子はそれぞれ「０９０１１１１ＥＥＥＥ」、「０９０１１１１ＫＫＫＫ」であるものとする。また、利用者Ｕは人物Ｕ−Ｅと人物Ｕ−Ｋの手の部分がアップで写る構図で撮影を行うものとする。
【００８３】
図１１（ａ）に示す第三の状況において利用者Ｕが操作入力手段９０で撮影操作を行うと、加工方法決定手段２０は図１０のフローチャートに示す処理を開始する。
【００８４】
ステップＳ１０２において加工方法決定手段２０は、装置識別子「０９０１１１１ＥＥＥＥ」および「０９０１１１１ＫＫＫＫ」を取得する。ステップＳ２０３において加工方法決定手段２０は、装置識別子「０９０１１１１ＥＥＥＥ」および「０９０１１１１ＫＫＫＫ」から周辺装置の所有者、すなわち人物Ｕ−Ｅと人物Ｕ−Ｋのグループを取得しようとするが、図９（ａ）の周辺装置属性テーブルＴ８１１には装置識別子「０９０１１１１ＫＫＫＫ」が登録されていないため、装置識別子「０９０１１１１ＥＥＥＥ」をフィールドＦ８１１１に保持するレコードＲ８１１５のフィールドＦ８１１３が示すグループ「仕事」のみを装置属性情報８０１として取得する。
【００８５】
ステップＳ２１１において加工方法決定手段２０は、図９（ｂ）の加工規則テーブルＴ８１２を参照し、フィールドＦ８１２１の値が「仕事」であるレコードＲ８１２１の優先度「３」を得る。ステップＳ２０３で取得したグループは「仕事」のみであるので、加工方法決定手段２０は最高優先度のグループとして「仕事」を得る。
【００８６】
ステップＳ２１２において加工方法決定手段２０は、加工内容としてレコードＲ８１２１のフィールドＦ８１２３の値「−」を得る。ステップＳ２１３の条件判断において、加工内容が「−」のため、加工方法決定手段２０はステップＳ２５１へ進み、画像データ３０２に加工を施さずに加工済画像データ４０２として出力するよう加工手段４０に指示する。
【００８７】
加工手段４０が出力した加工済画像データ４０２は、蓄積手段６０により蓄積される。ここで利用者Ｕが操作入力手段９０で表示操作を行うと、蓄積手段６０が蓄積した加工済画像データ４０２を出力し、表示手段５０が加工済画像データ４０２を表示する。
【００８８】
図１１（ｂ）は、第三の状況（図１１（ａ））における加工済画像データ４０２−２１の内容を示す図である。人物Ｕ−ＥおよびＵ−Ｋの手の画像Ｐ２１に補助画像は重畳されておらず、仕事中の撮影に相応しい真面目な画像となっている。
【００８９】
図１２（ａ）は、本発明の実施の形態２における携帯電話端末２００を用いて利用者Ｕが利用者Ｕと恋人の関係にある人物Ｕ−Ｄを撮影する第四の状況を示している。図１２（ａ）において、人物Ｕ−Ｄは周辺装置２００−Ｄを所持している。周辺装置２００−Ｄの装置識別子は「０９０１１１１ＤＤＤＤ」であるものとする。また、利用者Ｕは人物Ｕ−Ｄと利用者Ｕの手の部分がアップで写る構図で撮影を行うものとする。
【００９０】
第四の状況において加工方法決定手段２０は、第三の状況（図１１（ａ））と同様に処理を行うが、図１０のステップＳ２０３〜Ｓ２１１の処理において加工方法決定手段２０はグループ「恋人」を得て、ステップＳ２１２で加工情報として補助画像ファイルのファイル名「Ｈｅａｒｔ．ｊｐｇ」を得る。このため、ステップＳ２１３における判断は「補助画像ファイル名」となり、加工方法決定手段２０はステップＳ２５３へ進み、補助画像ファイル「Ｈｅａｒｔ．ｊｐｇ」を画像データ３０２に重畳するよう加工方法を決定する。
【００９１】
図１２（ｂ）は、第四の状況（図１２（ａ））における加工済画像データ４０２−２２の内容を示す図である。加工済画像データ４０２−２２は、利用者Ｕおよび人物Ｕ−Ｄの手の画像Ｐ２２に補助画像Ｐ２３が重畳され、利用者Ｕと人物Ｕ−Ｄとがお互いに好意を抱いている雰囲気を表現した画像となっている。
【００９２】
図１３（ａ）は、本発明の実施の形態２における携帯電話端末２００を用いて利用者Ｕが利用者Ｕと恋人の関係にある人物Ｕ−Ｄ、および利用者Ｕと家族の関係にある人物Ｕ−Ａ、Ｕ−Ｂ、Ｕ−Ｃ、Ｕ−Ｌを撮影する第五の状況を示している。図１３（ａ）において、人物Ｕ−Ａ、Ｕ−Ｂ、Ｕ−Ｃ、Ｕ−Ｄはそれぞれ周辺装置２００−Ａ、２００−Ｂ、２００−Ｃ、２００−Ｄを所持している。周辺装置２００−Ａ、２００−Ｂ、２００−Ｃ、２００−Ｄの装置識別子はそれぞれ「０９０１１１１ＡＡＡＡ」、「０９０１１１１ＢＢＢＢ」、「０９０１１１１ＣＣＣＣ」、「０９０１１１１ＤＤＤＤ」であるものとする。また、利用者Ｕは人物Ｕ−Ｃと人物Ｕ−Ｌの手の部分がアップで写る構図で撮影を行うものとする。
【００９３】
第五の状況において加工方法決定手段２０は、第三の状況（図１１（ａ））および第四の状況（図１２（ａ））と同様に処理を行うが、図１０のステップＳ２０３の処理で加工方法決定手段２０はグループ「恋人」および「家族」を得る。
【００９４】
さらに、ステップＳ２１１において加工方法決定手段２０は、グループ「恋人」と「家族」のうち、優先度（図９（ｂ）のフィールドＦ８１２２の数値）が高いグループ「家族」を最高優先度のグループとして得て加工内容「個別」を得る。したがって、加工方法決定手段２０は、ステップＳ２１３の判断でステップＳ２５２へ進み、アイコン画像「ｉｍａｇｅ１．ｊｐｇ」、「ｉｍａｇｅ２．ｊｐｇ」、「ｉｍａｇｅ３．ｊｐｇ」、「ｉｍａｇｅ４．ｊｐｇ」を画像データ３０２に重畳するよう加工方法を決定する。
【００９５】
図１３（ｂ）は、第五の状況（図１３（ａ））における加工済画像データ４０２−２３の内容を示す図である。加工済画像データ４０２−２３は、人物Ｕ−ＣおよびＵ−Ｌの手の画像Ｐ２４に人物Ｕ−Ａ〜Ｕ−Ｄの似顔絵のアイコン画像Ｐ２５〜Ｐ２８が重畳され、人物Ｕ−Ｌが家族愛に包まれている雰囲気を表現した画像となっている。なお、ここでは、加工方法決定手段２０が、画像Ｐ２４と、アイコン画像Ｐ２５〜Ｐ２８とを重畳する位置を決定するものとするが、操作入力手段９０からの入力操作に従って、アイコン画像Ｐ２５〜Ｐ２８を任意の位置に配置するようにしてもよい。
【００９６】
以上説明したとおり、本発明の実施の形態２における携帯電話端末２００は、周辺装置検出手段１０が検出した周辺装置を識別する装置識別子を出力し、加工方法決定手段２０が装置識別子から得られる周辺装置の所有者の属性に基づいてメディアデータ３０１の加工方法を決定している。このメディアデータ処理方法により、周囲の人物の顔が撮影した画像に写っていない場合であっても、利用者と周囲の人物との関係や雰囲気を感じ取れるように画像を加工して表示することができる。
【００９７】
以上の説明から明らかなように、本発明の実施の形態２における携帯電話端末は、メディアデータを取得する際に無線を介して周辺装置を検出した結果に基づいてメディアデータの加工方法を決定するため、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であっても、メディアデータ取得時の状況を適切に判断してメディアデータを加工することができる。
【００９８】
また、本発明の実施の形態２における携帯電話端末は、検出した周辺装置の属性情報に基づいてメディアデータの加工方法を決定するため、利用者と周囲の人物との関係を携帯電話端末が判別できるので、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であって、メディアデータ取得時の状況をより適切に判断してメディアデータを加工することができる。
【００９９】
（実施の形態３）
次に本発明の実施の形態３について説明する。本実施の形態３では、メディアデータの加工方法を決定する際に、無線を介した周辺装置の検出結果と、その他の手段により周囲から取得した環境情報とを組み合わせて利用する点に特徴がある。
【０１００】
図１４は、本発明の実施の形態３におけるメディアデータ処理装置１の概略構成図である。図１４においてメディアデータ処理装置１は、周辺装置検出手段１０、加工方法決定手段２０、メディアデータ取得手段３０、加工手段４０および環境検出手段７０を備える。環境検出手段７０は、メディアデータ処理装置１の周囲の環境の状態を検出して環境情報７０１を出力する。また、加工方法決定手段２０は、周辺装置情報１０１および環境情報７０１に基づいて加工方法を決定するよう構成されている。
【０１０１】
図１５は、本発明の実施の形態３におけるメディアデータ処理装置１を携帯電話端末３００として構成したときの構成図である。図１５において携帯電話端末３００は、図２の携帯電話端末１００の構成要素に加え、環境検出手段７０に対応する構成要素として音声入力手段７１および音声分析手段７２を備える。
【０１０２】
また、携帯電話端末３００は、図２の携帯電話端末１００とは異なり、操作入力手段９０の撮影操作に基づいて蓄積手段６０が画像データ３０２、周辺装置情報１０１、および環境情報７０１に対応する音声情報７０３を蓄積するよう構成されている。さらに、蓄積手段６０は、蓄積した画像データ３０２、周辺装置情報１０１、および音声情報７０３を操作入力手段９０の表示操作に基づいて出力するよう構成されている。
【０１０３】
このように、画像データ３０２を撮影時に未加工の状態で蓄積しておき、蓄積した周辺装置情報１０１に基づいて画像データ３０２の表示時に加工方法を決定する構成とすることにより、画像データ３０２の加工処理が行われた後でも未加工の画像データ３０２を確認することができ、利便性が増す。
【０１０４】
音声入力手段７１は、外部の音声を電気信号である音声信号７０２に変換して出力する。音声分析手段７２は、音声信号７０２の音圧を測定し、測定結果を音声情報７０３として出力する。音声情報７０３は、図１４の環境情報７０１に相当する情報であり、音声信号７０２の音圧レベルを表す情報を含む。
【０１０５】
周辺装置情報１０１は、図２の周辺装置情報１０１と同様、周辺装置の装置数を含んでいる。加工方法決定手段２０は、画像データ３０２に別の画像である補助画像を重畳する加工の方法を決定する。また、加工方法決定手段２０は、図２の加工方法決定手段２０とは異なり、加工手段４０が備える処理機能を直接呼び出すことによって加工手段４０に加工指示２０１を与える。
【０１０６】
図１６は、本発明の実施の形態３における携帯電話端末３００の外観を示す図である。音声入力手段７１は、撮像手段３１とは異なる方向から到達する音声を取得できるよう撮像手段３１と異なる側面に設けられている。上記設置方法により、被写体となる人物が発する音声よりも、撮影時の雰囲気に顕著な影響を与える周囲の人物が発する音声の方をより高感度で捉えることができる。
【０１０７】
図１７は、本発明の実施の形態３における携帯電話端末３００の加工方法決定手段２０の処理手順を表すフローチャートである。操作入力手段９０で撮影操作が行われると、蓄積手段６０が画像データ３０２、周辺装置情報１０１、および音声情報７０３を蓄積する。そして操作入力手段９０が表示操作を検知すると、蓄積手段６０が蓄積した画像データ３０２、周辺装置情報１０１、および音声情報７０３を出力し、加工方法決定手段２０が図１７のフローチャートに示す処理を開始する。
【０１０８】
ステップＳ１０１およびＳ１０２において加工方法決定手段２０は、撮影時に蓄積手段６０が蓄積した画像データ３０２、周辺装置情報１０１を取得する。ステップＳ３０３において加工方法決定手段２０は、音声情報７０３を取得する。
【０１０９】
ステップＳ３１２において加工方法決定手段２０は、ステップＳ３０３で取得した音声情報７０３に含まれる、音声信号７０２の音圧レベルが所定の値を越えているかどうかを判断し、超えている場合（ステップＳ３１２、ＹＥＳ）はステップＳ２５１へ進み、越えていない場合（ステップＳ３１２、ＮＯ）はステップＳ３５２へ進む。
【０１１０】
ステップＳ３５２において加工方法決定手段２０は、所定の補助画像を画像データ３０２に重畳するよう加工手段４０に加工指示２０１を与える。
【０１１１】
加工手段４０が加工指示２０１に従って画像データ３０２を加工し、加工済画像データ４０２を出力すると、表示手段５０がこれを表示する。
【０１１２】
なお、図１７のステップＳ１０２が請求項１２に記載の第１のステップに、ステップＳ１１１、ステップＳ３１２、ステップＳ２５１およびステップＳ３５２が同じく請求項１２に記載の第２のステップにそれぞれ相当する。また、図１０のステップＳ２５１またはステップＳ３５２の加工指示２０１に従って、加工手段４０が画像データ３０２を加工する処理が請求項１３に記載の第３のステップに相当する。さらに、図１７のステップＳ３０３が請求項１５に記載の第４のステップに相当する。
【０１１３】
以下、本発明の実施の形態３の具体的な動作を説明する。すなわち、周辺装置の装置数と周囲で発生する音声の音圧レベルに応じて画像データに重畳する補助画像を決定する具体例である。
【０１１４】
図１８（ａ）は、利用者Ｕが本発明の実施の形態３における携帯電話端末３００を用いて周囲に人物がいない状態で人物Ｕ−Ｍを撮影する第六の状況を示している。図１８（ａ）に示す第六の状況において利用者Ｕが操作入力手段９０で撮影操作を行うと、蓄積手段６０は画像データ３０２、周辺装置情報１０１、および音声情報７０３を蓄積する。
【０１１５】
図２０は、蓄積手段６０が蓄積する蓄積データ６０１の具体例を示す図である。図２０に示すとおり、蓄積手段６０は、画像データ３０２、周辺装置情報１０１および音声情報７０３を互いに関連付けて単一の蓄積データ６０１として蓄積する。図２０（ａ）は、第六の状況において蓄積手段６０が蓄積する蓄積データ６０１−３１を示している。蓄積データ６０１−３１は、ヘッダＤ３１、画像データ３０２の内容を表す画像データ３０２−３１、周辺装置情報１０１の内容を表す検出装置数情報Ｄ３２、音声情報７０３の内容を表す音圧レベル情報Ｄ３３から成る。
【０１１６】
第六の状況においては、周囲に人物がいないので周辺装置検出手段１０が周辺装置を検出しない。従って、検出装置数情報Ｄ３２として値「０」が蓄積されている。音圧レベル情報Ｄ３３の数値「５５」は、音声入力手段７１が取得した周囲の音の音圧レベルが５５デシベルであり、比較的静かな環境にあることを示している。
【０１１７】
なお、蓄積データ６０１−３１は、たとえばＴＩＦＦ（Ｔａｇｇｅｄ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）形式を用いて電子データとして表現することが可能である。
【０１１８】
蓄積データ６０１−３１が蓄積手段６０に蓄積された状態で利用者Ｕが操作入力手段９０で表示操作を行うと、蓄積手段６０が蓄積データ６０１−３１を出力し、加工方法決定手段２０が図１７のフローチャートが示す処理を開始する。
【０１１９】
まず、ステップＳ１０１およびＳ１０２において加工方法決定手段２０は、撮影時に蓄積手段６０が蓄積した画像データ３０２、周辺装置情報１０１を取得する。ステップＳ３０３において加工方法決定手段２０は、音声情報７０３を取得する。
【０１２０】
ステップＳ１１１において加工方法決定手段２０は、蓄積データ６０１−３１の検出装置数情報Ｄ３２を参照し、検出装置数「０」を取得するので判断はＮＯとなり、ステップＳ２５１へ進む。
【０１２１】
ステップＳ２５１において加工方法決定手段は、加工を行わずに画像データ３０２−３１をそのまま加工済画像データ４０２として出力するよう加工手段４０に加工指示２０１を与える。その結果、表示手段５０は、図１８（ｂ）に示すとおり、人物Ｕ−Ｍの画像Ｐ３１のみが写った加工済画像データ４０２−３１を表示する。
【０１２２】
図１９（ａ）は、利用者Ｕが本発明の実施の形態３における携帯電話端末３００を用いて、第六の状況（図１８（ａ））と同一の場所において、周囲の観客が人物Ｕ−Ｍを静かに注視している状態で人物Ｕ−Ｍを撮影する第七の状況を示している。５人の観客はそれぞれ周辺装置３００−Ｎ、３００−Ｏ、３００−Ｐ、３００−Ｑ、３００−Ｒを所持している。また、利用者Ｕは人物Ｕ−Ｍの顔の部分のみがアップで写る構図、すなわち観客が写らない構図で撮影を行うものとする。
【０１２３】
図１９（ａ）に示す第七の状況において利用者Ｕが操作入力手段９０で撮影操作を行うと、蓄積手段６０は画像データ３０２、周辺装置情報１０１、および音声情報７０３を蓄積する。第七の状況において蓄積手段６０が蓄積する蓄積データ６０１−３２の内容を図２０（ｂ）に示す。
【０１２４】
第七の状況においては、５台の周辺装置３００−Ｎ、３００−Ｏ、３００−Ｐ、３００−Ｑ、３００−Ｒを周辺装置検出手段１０が検出する。従って、検出装置数Ｄ３５として値「５」が蓄積されている。音圧レベル情報Ｄ３６の数値「５５」は、図２０（ａ）に示す第六の状況における蓄積データ６０１−３１（図２０（ａ））の数値Ｄ３３と同じく、音声入力手段７１が取得した周囲の音の音圧レベルが５５デシベルであり、周囲が静かであることを示している。
【０１２５】
蓄積データ６０１−３２が蓄積手段６０に蓄積された状態で利用者Ｕが操作入力手段９０で表示操作を行うと、蓄積手段６０が蓄積データ６０１−３２を出力し、加工方法決定手段２０が図１７のフローチャートが示す処理を実行する。
【０１２６】
第七の状況におけるステップＳ１１１の判断は第六の状況における判断とは異なりＹＥＳとなるので加工方法決定手段２０はステップＳ３１２へ進む。音圧レベルの数値Ｄ３６が「５５」であるのでステップＳ３１２の判断はＮＯとなり、加工方法決定手段２０はステップＳ３５２へ進み、補助画像「ｔｅｎｓｉｏｎ．ｊｐｇ」を画像データ３０２−３２に重畳するよう加工方法を決定する。
【０１２７】
図１９（ｂ）に、第七の状況において表示手段５０が表示する加工済画像データ４０２−３２の内容を示す。加工済画像データ４０２−３２は、人物Ｕ−Ｍの画像Ｐ３２に複数の観客の顔を表す画像Ｐ３３が重畳され、緊張した雰囲気を表現した画像となっている。
【０１２８】
なお、人物Ｕ−Ｍの周囲に５人の観客がいて騒がしくしている場合、すなわち観客が人物Ｕ−Ｍを注視していないような状態で撮影を行うと、図１７のステップＳ３１２の判断がＹＥＳとなるので、緊張した雰囲気を表現するための画像Ｐ３３は重畳されない。
【０１２９】
以上説明したとおり、本発明の実施の形態３における携帯電話端末３００は、周辺装置検出手段１０が検出した周辺装置の装置数と音声分析手段７２が測定した周囲の音声の音圧レベルに基き、装置数が所定数より多く、音圧レベルが所定値以下である場合に加工方法決定手段が画像データ３０２に補助画像を重畳することにより緊張した雰囲気を表現した画像となるように加工方法を決定している。このメディアデータ処理方法により、撮影した画像に周囲の人物が写っておらず、同一の場所で周囲の状況が逐次変化する場合であっても、周囲の状況を判別することができ、緊張した雰囲気で撮影した画像を、緊張感を感じ取れるよう加工して表示することができる。
【０１３０】
以上の説明から明らかなように、本発明の実施の形態３における携帯電話端末は、メディアデータを取得する際に無線を介して周辺装置を検出した結果に基づいてメディアデータの加工方法を決定するため、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合あっても、メディアデータ取得時の状況を適切に判断してメディアデータを加工することができる。
【０１３１】
また、本発明の実施の形態３における携帯電話端末は、メディアデータを取得する際に無線を介して周辺装置を検出した結果と、その他の手段により周囲から取得した環境情報とに基づいてメディアデータの加工方法を決定するため、周辺装置の検出結果が同一であっても環境情報が異なる場合を携帯電話端末が判別することができるので、メディアデータ取得時の状況をより適切に判断してメディアデータを加工することができる。
【０１３２】
なお、本発明の実施の形態１、２および３において、画像データは静止画であるものとして説明したが、動画像データであってもよい。
【０１３３】
また、本発明の実施の形態１、２および３において、メディアデータは画像データであるとしたが、これに限るものではなく、外部から取得可能なメディアデータであればどのようなデータであってもよく、たとえば音波形データ、ＭＩＤＩ（Ｍｕｓｉｃａｌ Ｉｎｓｔｒｕｍｅｎｔ Ｄｉｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ）形式等で表現された演奏データとし、周辺装置情報に基づいて音響的な特殊効果等を付与する加工方法を決定するようにしてもよい。
【０１３４】
また、本発明の実施の形態１、２および３において、メディアデータの加工は色温度の変更または補助画像の重畳であるとしたがこれに限るものではなく、サイズや解像度の変更、色相・彩度・明度・コントラスト等の色調変更、変形・ぼかし・シャープ化・ピクセレーション・コラージュ・テクスチャ化等の特殊効果の適用であってもよい。
【０１３５】
また、本発明の実施の形態２および３において、補助画像を重畳する加工方法を決定するものとしたがこれに限るものではなく、アニメーションやテキストや音データ等のオブジェクトを重畳したり、ネットワーク上のコンテンツや実行可能なプログラムへの参照情報を関連づける加工方法を決定するようにしてもよい。
【０１３６】
また、本発明の実施の形態１、２および３において、操作入力手段による表示操作に基づいて加工済画像データを表示手段で表示するようにしたが、撮影時のプレビュー表示のように、利用者が表示操作を行わなくても加工済画像データが表示されるよう構成してもよい。
【０１３７】
また、本発明の実施の形態３において、環境情報は音声情報であるとしたがこれに限るものではなく、たとえば照度、温度、気圧、高度、速度、加速度、振動の大きさや周期、紫外線量、位置情報等であってもよい。また、環境検出手段は音声入力手段および音声分析手段であるとしたが、これに限るものではなく、上記の各種情報を検出するセンサ等であってもよい。
【０１３８】
また、本発明の実施の形態１、２および３において、周辺装置情報または環境情報はメディアデータ取得の際に取得した情報のみを利用するようにしたが、これに限るものではなく、たとえば所定時間前に取得した周辺装置情報または環境情報とメディアデータ取得時に取得した情報とを比較し、比較結果に基づいて加工方法決定手段が加工方法を決定するようにしてもよい。このようにすることにより、たとえば混雑した場所から空いている場所に移動した場合等、状況の時間変化を捉えることが可能となり、メディアデータ取得時の状況をより適切に判断することができる。
【０１３９】
また、本発明の実施の形態２において、装置属性情報提供手段は加工方法決定手段と同一筐体内に具備するものとして説明したが、これに限るものではなく、筐体外部に設けられた装置属性情報提供手段から通信を介して装置属性情報を取得するようにしてもよい。
【０１４０】
また、本発明の実施の形態２において、周辺装置の所有者に関連づけられたアイコン画像を画像データに重畳するようにしたがこれに限るものではなく、利用者に関連づけられた情報を重畳するようにしてもよい。
【０１４１】
また、本発明の実施の形態３において、環境情報として音声信号の分析結果を蓄積手段に蓄積するようにしたが、未分析の音声信号を蓄積しておき、メディアデータの加工時に音声信号を分析するようにしてもよい。
【０１４２】
また、本発明の実施の形態１、２および３において、周辺装置検出手段と加工方法決定手段は同一筐体内に設けたが、互いに分離して別筐体に設けてもよい。
【０１４３】
また、本発明の実施の形態１および３において、周辺装置検出手段は周辺装置の装置数を検出するものとしたが、装置数を正確に検出する必要は必ずしもなく、たとえば特定の周波数帯域の電波の受信強度を測定することにより周囲に存在する周辺装置の多さを判定し、判定結果に基づいてメディアデータの加工方法を決定するようにしてもよい。
【０１４４】
また、本発明の実施の形態１、２および３において、携帯電話端末の例を説明したが、これに限るものではなく、デジタルカメラ、ビデオカメラ、録音装置等、外部からメディアデータを取得する機能を有する電子機器であれば同様の効果が得られる。
【産業上の利用可能性】
【０１４５】
本発明の撮影装置及び画像データ処理方法は、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であっても、メディアデータ取得時の状況を適切に判断してメディアデータを加工することができるという効果を有し、外部からメディアデータを取得する機能を有する電子機器に有用である。
【符号の説明】
【０１４６】
１ メディアデータ処理装置
１０ 周辺装置検出手段
２０ 加工方法決定手段
３０ メディアデータ取得手段
３１ 撮像手段
４０ 加工手段
５０ 表示手段
６０ 蓄積手段
７０ 環境検出手段
７１ 音声入力手段
７２ 音声分析手段
８０ 装置属性情報提供手段
８１ 電話帳記憶手段
９０ 操作入力手段
１００、２００、３００ 携帯電話端末
１００−Ｆ、１００−Ｇ、１００−Ｈ、１００−Ｉ、１００−Ｊ 周辺装置
２００−Ａ、２００−Ｂ、２００−Ｃ、２００−Ｄ、２００−Ｅ、２００−Ｋ 周辺装置
３００−Ｎ、３００−Ｏ、３００−Ｐ、３００−Ｑ、３００−Ｒ 周辺装置
１０１ 周辺装置情報
２０１、２０１−１１、２０１−１２ 加工指示
３０１ メディアデータ
３０２、３０２−１１、３０２−１２ 画像データ
３０２−３１、３０２−３２ 画像データ
４０２、４０２−２１、４０２−２２、４０２−２３ 加工済画像データ
４０２−３１、４０２−３２ 加工済画像データ
６０１−３１、６０１−３２ 蓄積データ
７０１ 環境情報
７０２ 音声信号
７０３ 音声情報
８０１ 装置属性情報
８０２ 加工補助情報
Ｕ 利用者
Ｕ−Ａ、Ｕ−Ｂ、Ｕ−Ｃ、Ｕ−Ｄ、Ｕ−Ｅ、Ｕ−Ｆ、Ｕ−Ｋ、Ｕ−Ｌ、Ｕ−Ｍ 人物
【技術分野】
【０００１】
本発明は、画像データを外部から取得する装置に利用可能な撮影装置及び画像データ処理方法に関する。
【背景技術】
【０００２】
従来より、画像を撮影する撮影装置や、撮影画像を蓄積する画像蓄積装置において、撮影時の状況に基づいて撮影画像を処理する装置が提案されてきた（たとえば特許文献１、特許文献２参照）。これらの発明によれば、撮影が行われた場所や季節等の情報や、撮影画像に写っている人物の表情を認識することにより抽出した撮影時の雰囲気を表す情報に基づいて撮影画像を加工することができるので、撮影画像を見る人が撮影時の状況を感じ取ることができるように表現された撮影画像を得ることができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−２４８０３７号公報（第１０ページ、図２）
【特許文献２】特表２００５−５１２２４８号公報（第８ページ、図２）
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記従来の装置にあっては、撮影の場所や撮影時の季節が同一であっても周囲の賑やかさ等の状況が異なる場合もあり、状況の変化に応じた適切な撮影画像の加工結果が得られないという問題があった。また、撮影画像に人物の顔が写っていない場合、撮影時の状況を表す情報が抽出できないため適切な撮影画像の加工結果が得られないという問題があった。
【０００５】
本発明は、上記従来の課題を解決するものであり、画像データが人物の感情や表情を抽出するための情報を含んでいない場合であっても、画像データ取得時の状況を適切に判断して画像データを加工することができる撮影装置及び画像データ処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
前記従来の課題を解決するために、本発明の撮影装置は、外部を撮影し画像データを取得する撮影手段と、無線を介して外部に存在する周辺装置を検出する周辺装置検出手段と、前記周辺装置の属性情報を提供する装置属性情報提供手段と、前記属性情報に基づいて、前記画像データの加工方法を決定する加工方法決定手段と、前記決定された加工方法に基づいて前記画像データを加工する加工手段と、を有する構成を有する。
【０００７】
この構成により、画像データ取得時の周辺装置の検出結果に基づいて周囲に人物がいるかどうかを判別して、取得した画像データの加工方法を変更することができるので、画像データが人物の感情や表情を抽出するための情報を含んでいない場合であっても、画像データ取得時の状況を適切に判断して画像データを加工することができる。また、撮影した画像に周囲の人物が写っていない場合であっても、利用者と周囲の人物との関係や雰囲気を感じ取れる画像を加工して表示することができる。
【０００８】
また、本発明の撮影装置は、周囲の環境情報を検出する環境検出手段をさらに有し、前記加工方法決定手段は、前記属性情報と前記環境情報と、に基づいて前記画像データの加工方法を決定する構成を有する。
【０００９】
この構成により、周辺装置の属性情報が同一であっても、環境情報が異なる場合を判別することができるので、画像データ取得時の状況をより適切に判断して画像データを加工することができる。
【００１０】
また、本発明の撮影装置は、前記環境情報が、少なくとも周囲の音の音圧レベルを含み、前記加工方法決定手段は、前記属性情報と前記音圧レベルと、に基づいて前記画像データの加工方法を決定する構成を有する。
【００１１】
この構成により、撮影した画像に周囲の人物が写っておらず、同一の場所で周囲の状況が逐次変化する場合であっても、周囲の状況を判別することができるので、撮影した画像を周囲の雰囲気を感じ取れるよう加工して表示することができる。
【００１２】
また、本発明の撮影装置は、前記加工手段が加工した前記画像データを表示する表示部を、更に有する。
【００１３】
また、本発明の画像データ処理方法は、外部を撮影し画像データを取得する第１のステップと、無線を介して外部に存在する周辺装置を検出する第２のステップと、前記第１のステップで検出した周辺装置の属性情報を提供する第３のステップと、前記属性情報に基づいて、前記画像データの加工方法を決定する第４のステップと、を有する。
【００１４】
この方法により、メディアデータ取得時の周辺装置の検出結果に基づいて周囲に人物がいるかどうかを判別して、取得したメディアデータの加工方法を変更することができるので、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であっても、メディアデータ取得時の状況を適切に判断してメディアデータを加工することができる。
【００１５】
また、本発明の画像データ処理方法は、周囲の環境情報を検出する第５のステップを有し、前記第４のステップは、前記属性情報と前記環境情報と、に基づいて前記画像データの加工方法を決定する。
【００１６】
この方法により、周辺装置の属性情報が同一であっても、環境情報が異なる場合を判別することができるので、画像データ取得時の状況をより適切に判断してメディアデータを加工することができる。
【００１７】
また、本発明の画像データ処理方法は、前記環境情報は、少なくとも周囲の音の音圧レベルを含み、前記第４のステップは、前記属性情報と前記音圧レベルと、に基づいて前記画像データの加工方法を決定する。
【００１８】
この方法により、周囲の人物の顔が撮影した画像に写っていない場合であっても、利用者と周囲の人物との関係や雰囲気を感じ取れる画像を加工して表示することができる。
【発明の効果】
【００１９】
本発明によれば、画像データを取得する際に無線を介して周辺装置を検出した結果に基づいて画像データの加工方法を決定することにより、画像データが人物の感情や表情を抽出するための情報を含んでいない場合であっても、画像データ取得時の状況を適切に判断して画像データを加工することができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の実施の形態１におけるメディアデータ処理装置の概略構成図
【図２】本発明の実施の形態１における携帯電話端末の構成図
【図３】（ａ）本発明の実施の形態１における携帯電話端末の第一の外観図、（ｂ）本発明の実施の形態１における携帯電話端末の第二の外観図
【図４】本発明の実施の形態１における携帯電話端末の加工方法決定手段の処理手順を示すフローチャート
【図５】（ａ）本発明の実施の形態１における携帯電話端末を使用する第一の状況を説明する図、（ｂ）本発明の実施の形態１における携帯電話端末を使用する第二の状況を説明する図
【図６】（ａ）本発明の実施の形態１における携帯電話端末の加工方法決定手段が出力する第一の加工指示の内容を説明する図、（ｂ）本発明の実施の形態１における携帯電話端末の加工方法決定手段が出力する第二の加工指示の内容を説明する図
【図７】本発明の実施の形態２におけるメディアデータ処理装置の概略構成図
【図８】本発明の実施の形態２における携帯電話端末の構成図
【図９】（ａ）本発明の実施の形態２における携帯電話端末の電話帳記憶手段が保持している周辺装置属性テーブルの内容を説明する図、（ｂ）本発明の実施の形態２における携帯電話端末の電話帳記憶手段が保持している加工規則テーブルの内容を説明する図
【図１０】本発明の実施の形態２における携帯電話端末の加工方法決定手段の処理手順を示すフローチャート
【図１１】（ａ）本発明の実施の形態２における携帯電話端末を使用する第三の状況を説明する図、（ｂ）本発明の実施の形態２における携帯電話端末の加工手段が出力する第三の加工済画像データの内容を説明する図
【図１２】（ａ）本発明の実施の形態２における携帯電話端末を使用する第四の状況を説明する図、（ｂ）本発明の実施の形態２における携帯電話端末の加工手段が出力する第四の加工済画像データの内容を説明する図
【図１３】（ａ）本発明の実施の形態２における携帯電話端末を使用する第五の状況を説明する図、（ｂ）本発明の実施の形態２における携帯電話端末の加工手段が出力する第五の加工済画像データの内容を説明する図
【図１４】本発明の実施の形態３におけるメディアデータ処理装置の概略構成図
【図１５】本発明の実施の形態３における携帯電話端末の構成図
【図１６】（ａ）本発明の実施の形態３における携帯電話端末の第一の外観図、（ｂ）本発明の実施の形態３における携帯電話端末の第二の外観図
【図１７】本発明の実施の形態３における携帯電話端末の加工方法決定手段の処理手順を示すフローチャート
【図１８】（ａ）本発明の実施の形態３における携帯電話端末を使用する第六の状況を説明する図、（ｂ）本発明の実施の形態３における携帯電話端末の加工手段が出力する第六の加工済画像データの内容を説明する図
【図１９】（ａ）本発明の実施の形態３における携帯電話端末を使用する第七の状況を説明する図、（ｂ）本発明の実施の形態３における携帯電話端末の加工手段が出力する第七の加工済画像データの内容を説明する図
【図２０】（ａ）本発明の実施の形態３における携帯電話端末の蓄積手段が蓄積する第一の蓄積データの内容を説明する図、（ｂ）本発明の実施の形態３における蓄積手段が蓄積する第二の蓄積データの内容を説明する図
【発明を実施するための形態】
【００２１】
以下、本発明を実施するための最良の形態について、図面を参照しながら説明する。なお、実施の形態を説明するための全図（フローチャートも含む）において、同一の構成要素には同一符号を付与し、重複する説明は省略する。
【００２２】
（実施の形態１）
図１は、本発明の実施の形態１におけるメディアデータ処理装置１の概略構成図である。図１において、メディアデータ処理装置１は周辺装置検出手段１０、加工方法決定手段２０、メディアデータ取得手段３０および加工手段４０を備える。
【００２３】
周辺装置検出手段１０は、無線を介してメディアデータ処理装置１の外部に存在する周辺装置を検出し、検出した周辺装置に関する情報である周辺装置情報１０１を出力する。
【００２４】
ここで、周辺装置情報１０１は、周辺装置検出手段１０が検出した携帯電話端末等の周辺装置の装置数、すなわち動作中の周辺装置を所持している人物が何人いるかを表した数値である。周辺装置検出手段１０が周辺装置の装置数を検出して周辺装置情報１０１として出力することにより、携帯電話端末１００は周辺におおよそ何人の周辺装置を所持している人物が居るかを把握することができる。
【００２５】
加工方法決定手段２０は、メディアデータ取得手段３０からメディアデータ３０１を取得し、周辺装置情報１０１に基づいてメディアデータ３０１の加工方法を決定し、加工方法を指示するための加工指示２０１を出力する。
【００２６】
メディアデータ取得手段３０は、外部から画像データや演奏データ等のメディアデータを取得し、加工方法決定手段２０に出力する。
【００２７】
加工手段４０は、加工指示２０１に基づいてメディアデータ３０１を加工する。
【００２８】
なお、周辺装置検出手段１０における検出処理には公知の検出方法（たとえば特開平１０−２６７９７３号公報の第７ページから第９ページの図４〜図８に記載の方法）を用いてよく、従って本明細書中では詳しい説明を省略するものとする。
【００２９】
図２は、本発明の実施の形態１におけるメディアデータ処理装置１を携帯電話端末１００として構成したときの構成図である。図２において携帯電話端末１００は、周辺装置検出手段１０、加工方法決定手段２０、撮像手段３１、加工手段４０、表示手段５０、蓄積手段６０および操作入力手段９０を備える。
【００３０】
撮像手段３１は、外部の被写体を撮像して被写体の画像データ３０２を図１のメディアデータ３０１に相当するデータとして出力する。
【００３１】
加工方法決定手段２０は、画像データ３０２の色温度を増減する加工を施すかどうかを決定し、加工指示２０１を出力する。
【００３２】
蓄積手段６０は、加工方法決定手段２０が出力した加工指示２０１を蓄積し、蓄積している加工指示２０１を加工手段４０へ出力する。
【００３３】
加工手段４０は、加工指示２０１に基づいて画像データ３０２を加工して加工済画像データ４０２を出力する。
【００３４】
表示手段５０は、加工手段４０が出力した加工済画像データ４０２を表示する。
【００３５】
操作入力手段９０は、撮影操作と表示操作の操作入力を検知して蓄積手段６０および加工方法決定手段２０の処理の開始を指示する。
【００３６】
図３は、本発明の実施の形態１における携帯電話端末１００の外観を示す図である。周辺装置検出手段１０は、撮像手段３１と同じ筐体の内部に設置され、被写体近傍に存在する周辺装置が発する無線信号を高感度で検出できるようになっている。
【００３７】
図４は、本発明の実施の形態１における携帯電話端末１００の加工方法決定手段２０の処理手順を表すフローチャートである。操作入力手段９０が撮影操作を検知すると、加工方法決定手段２０は、図４のフローチャートが示す処理を開始する。
【００３８】
加工方法決定手段２０は、まず画像データ３０２を取得し（ステップＳ１０１）、周辺装置情報１０１を取得する（ステップＳ１０２）。
【００３９】
次に加工方法決定手段２０は、周辺装置情報１０１が示す周辺装置の検出装置数が所定の数を越えているかどうかを判断し（ステップＳ１１１）、検出装置数が所定の数を越えている場合（ステップＳ１１１、ＹＥＳ）はステップＳ１１２へ進み、越えていない場合（ステップＳ１１１、ＮＯ）はステップＳ１５１へ進む。
【００４０】
ステップＳ１１２において加工方法決定手段２０は、画像データ３０２の色温度を下降させる加工を施すように加工方法を決定する。ステップＳ１５１において加工方法決定手段２０は、ステップＳ１１２までの処理で決定した加工方法を加工指示２０１として出力する。
【００４１】
加工方法決定手段２０が加工指示２０１を出力すると、蓄積手段６０が加工指示２０１を蓄積する。蓄積手段６０は、操作入力手段９０が表示操作を検知すると蓄積している加工指示２０１を加工手段４０へ出力する。そして加工手段４０が加工指示２０１に従って画像データ３０２を加工して加工済画像データ４０２を出力すると、表示手段５０が加工済画像データ４０２を表示する。
【００４２】
なお、図４のステップＳ１０２が請求項１２に記載の第１のステップに、ステップＳ１１１およびＳ１１２が同じく請求項１２に記載の第２のステップにそれぞれ相当する。また、図４のステップＳ１５１の加工指示２０１に従って、加工手段４０が画像データ３０２を加工する処理が請求項１３に記載の第３のステップに相当する。
【００４３】
以下、本発明の実施の形態１の具体的な動作を説明する。すなわち、周辺装置の装置数に応じて画像データの色調を決定する具体例である。
【００４４】
図５は、本発明の実施の形態１における携帯電話端末１００を用いて撮影を行う際の状況を説明する図である。図５（ａ）は、利用者Ｕが携帯電話端末１００を用いて４人の人物に囲まれた人物Ｕ−Ｆを撮影する第一の状況を示している。また、図５（ｂ）は、利用者Ｕが携帯電話端末１００を用いて周囲に人物がいない状態で人物Ｕ−Ｆを撮影する第二の状況を示している。
【００４５】
図５において、人物Ｕ−Ｆは周辺装置１００−Ｆを、人物Ｕ−Ｆの周囲の人物は周辺装置１００−Ｇ、１００−Ｈ、１００−Ｉ、１００−Ｊをそれぞれ所持している。また、利用者Ｕは人物Ｕ−Ｆの顔の部分のみがアップで写る構図、すなわちＵ−Ｆ以外の人物が写らない構図で撮影を行うものとする。
【００４６】
まず、第一の状況（図５（ａ））における携帯電話端末１００の動作を説明する。第一の状況において利用者Ｕが操作入力手段９０で撮影操作を行うと、加工方法決定手段２０は図４のフローチャートに示す処理を開始する。
【００４７】
まず、ステップＳ１０１において加工方法決定手段２０は画像データ３０２を取得し、ステップＳ１０２において周辺装置情報１０１を取得する。このとき、周辺装置検出手段１０は、５台の周辺装置１００−Ｆ〜１００−Ｊを検出し、周辺装置情報１０１として数値「５」を出力するので、ステップＳ１０２において加工方法決定手段２０は検出装置数「５」を得る。
【００４８】
次に加工方法決定手段２０は、ステップＳ１１１の判断がＹＥＳであるのでステップＳ１１２の処理へ進み、画像データ３０２の色温度を下降させる加工を施すよう加工方法を決定して（ステップＳ１１２）、加工指示２０１を出力する（ステップＳ１５１）。蓄積手段６０は加工方法決定手段２０が出力した加工指示２０１を蓄積する。
【００４９】
一方、第二の状況（図５（ｂ））においては、ステップＳ１０１にて加工方法決定手段２０が画像データ３０２を取得し、ステップＳ１０２において周辺装置情報１０１を取得する。このとき、周辺装置検出手段１０は、１台の周辺装置１００−Ｆを検出し、周辺装置情報１０１として数値「１」出力するので、図４のステップＳ１１１における判断がＮＯとなり、加工方法決定手段２０は画像データ３０２の色温度を変更する加工を施さないよう加工方法を決定する。
【００５０】
図６は、本発明の実施の形態１における携帯電話端末１００の加工方法決定手段２０が出力する加工指示２０１の構造を模式的に示した図である。図６（ａ）は第一の状況（図５（ａ））において加工方法決定手段２０が出力する加工指示２０１−１１を示している。また、図６（ｂ）は第二の状況（図５（ｂ））において加工方法決定手段２０が出力する加工指示２０１−１２を示している。
【００５１】
加工指示２０１−１１および２０１−１２は、いずれもヘッダ、画像データ３０２の内容、および加工方法を指示する加工指示情報から成る。加工指示２０１−１１は、画像データ３０２の内容を表す画像データ３０２−１１と、色温度を下降させることを示す加工指示情報Ｄ１２「色温度調整＝降下」を含んでいる。一方、加工指示２０１−１２は画像データ３０２の内容を表す画像データ３０２−１２と、画像データ３０２−１２を原画像のまま保つことを示す加工指示情報Ｄ１４「色温度調整＝なし」を含んでいる。
【００５２】
なお、本発明の実施の形態１における加工指示２０１の構造は、たとえばＴＩＦＦ（Ｔａｇｇｅｄ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）形式を用いて電子データとして表現することが可能である。
【００５３】
蓄積手段６０が加工指示２０１を蓄積した後、利用者Ｕが操作入力手段９０で表示操作を行うと、蓄積手段６０が蓄積した加工指示２０１を出力し、加工手段４０が加工指示２０１の加工処理を開始する。
【００５４】
加工手段４０が加工指示２０１−１１に従って、画像データ３０２−１１の色温度を下降する加工を行うと、画像データ３０２−１１よりやや赤みがかった色調の加工済画像データ４０２を加工処理の結果として出力する。これに対し、加工手段４０が加工指示２０１−１２を取り込むと第二の画像データ３０２−１２の内容をそのまま加工済画像データ４０２として出力する。その結果、周囲に多くの人物がいる第一の状況（図５（ａ））で撮影した撮影画像は、賑やかな雰囲気を表す赤みがかった温かみのある色調に加工されて表示手段５０に表示されることになる。
【００５５】
以上説明したように、本発明の実施の形態１における携帯電話端末１００では、周辺装置検出手段１０が検出する周辺装置の装置数が所定数より多い場合に加工方法決定手段２０が画像データ３０２の色温度を下げることにより賑やかな雰囲気を表す色調に画像データ３０２を加工するよう加工方法を決定している。このメディアデータ処理方法により、撮影した画像に周囲の人物が写っていない場合であっても、多くの人物が居る賑やかな雰囲気で撮影した画像を、賑やかさを感じ取れるよう加工して表示することができる。
【００５６】
以上の説明から明らかなように、本発明の実施の形態１における携帯電話端末は、メディアデータを取得する際に無線を介して周辺装置を検出した結果に基づいてメディアデータの加工方法を決定するため、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であっても、メディアデータ取得時の状況を適切に判断してメディアデータを加工することができる。
【００５７】
また、本発明の実施の形態１における携帯電話端末は、周辺装置の装置数を判別してディアデータの加工方法を決定するため、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であっても、メディアデータ取得時の状況をより適切に判断してメディアデータを加工することができる。
【００５８】
（実施の形態２）
次に本発明の実施の形態２について説明する。本実施の形態２では、メディアデータの加工方法を決定する際に、周辺装置の属性情報を利用する点に特徴がある。
【００５９】
図７は、本発明の実施の形態２におけるメディアデータ処理装置１の概略構成図である。図７においてメディアデータ処理装置１は、周辺装置検出手段１０、加工方法決定手段２０、メディアデータ取得手段３０、加工手段４０および装置属性情報提供手段８０を備える。上記実施の形態１におけるメディアデータ処理装置１と同様の構成については説明を省略する。
【００６０】
装置属性情報提供手段８０は、周辺装置検出手段１０が検出した周辺装置の属性に関する情報である装置属性情報８０１を出力する。
【００６１】
図８は、本発明の実施の形態２におけるメディアデータ処理装置１を携帯電話端末２００として構成したときの構成図である。図８において携帯電話端末２００は、図２の携帯電話端末１００の構成要素に加え、図７の装置属性情報提供手段８０に対応する構成要素として電話帳記憶手段８１を備える。また、携帯電話端末２００は、図２の携帯電話端末１００とは異なり、加工手段４０が出力する加工済画像データ４０２を蓄積手段６０に蓄積するよう構成されている。
【００６２】
加工方法決定手段２０は、画像データ３０２に別の画像である補助画像を重畳する加工の方法を決定する。また、加工方法決定手段２０は、図２の加工方法決定手段２０とは異なり、加工手段４０が備える処理機能を直接呼び出すことによって加工手段４０に加工指示２０１を与える。
【００６３】
周辺装置情報１０１は、周辺装置検出手段１０が検出した周辺装置を識別する装置識別子を含んでいる。周辺装置検出手段１０が複数の周辺装置を検出した場合は、周辺装置検出手段１０は検出した複数の装置識別子を周辺装置情報１０１として出力する。
【００６４】
加工補助情報８０２は、加工方法決定手段２０において画像データ３０２の加工方法を決定する際に用いる補助的な情報であり、補助画像を識別する情報であるファイル名や画像データ３０２の加工方法を決定する際に適用する規則を含んでいる。
【００６５】
電話帳記憶手段８１は、周辺装置情報１０１が示す周辺装置に対応する装置属性情報８０１および加工補助情報８０２をテーブル形式のデータで保持している。
【００６６】
図９は、本発明の実施の形態２における携帯電話端末２００の電話帳記憶手段８１が保持する周辺装置属性テーブルＴ８１１および加工規則テーブルＴ８１２の具体例を示す図である。
【００６７】
図９（ａ）に示す周辺装置属性テーブルＴ８１１は、装置属性情報８０１および加工補助情報８０２を保持するテーブルである。周辺装置属性テーブルＴ８１１は、周辺装置の装置識別子ごとのレコード（Ｒ８１１１〜Ｒ８１１５）から成り、各レコード（Ｒ８１１１〜Ｒ８１１５）は、装置識別子を表すフィールドＦ８１１１、周辺装置の所有者名を表すフィールドＦ８１１２、所有者が属するグループを表すフィールドＦ８１１３、所有者の似顔絵を表したアイコン画像ファイルのファイル名を表すフィールドＦ８１１４を有している。
【００６８】
ここで、所有者名Ｆ８１１２およびグループＦ８１１３は周辺装置の装置属性情報８０１に相当する情報である。また、アイコン画像ファイルのファイル名Ｆ８１１４は加工補助情報８０２に対応する情報である。
【００６９】
図９（ｂ）に示す加工規則テーブルＴ８１２は、画像データ３０２の加工方法を決定する際に適用する規則を表すテーブルである。加工規則テーブルＴ８１２は、周辺装置の所有者が属するグループごとのレコード（Ｒ８１２１〜Ｒ８１２３）から成り、各レコード（Ｒ８１２１〜Ｒ８１２３）は、グループを表すフィールドＦ８１２１、加工内容が選択される優先度を表すフィールドＦ８１２２、および加工内容を表すフィールドＦ８１２３を有している。
【００７０】
ここで、優先度Ｆ８１２２は、数値が大きいほど加工内容Ｆ８１２３が優先的に適用されることを表している。また、加工内容Ｆ８１２３の値「−」は、加工処理を行わないことを表している。
【００７１】
図１０は、本発明の実施の形態２における携帯電話端末２００の加工方法決定手段２０の処理手順を表すフローチャートである。操作入力手段９０が撮影操作を検知すると、加工方法決定手段２０は、図１０のフローチャートが示す処理を開始する。
【００７２】
まず、ステップＳ１０１において加工方法決定手段２０は画像データ３０２を取得し、ステップＳ１０２において周辺装置情報１０１を取得する。
【００７３】
ステップＳ２０３において加工方法決定手段２０は、図９（ａ）の周辺装置属性テーブルＴ８１１を参照することにより、ステップＳ１０２で取得した周辺装置情報１０１に含まれる周辺装置の装置識別子（フィールドＦ８１１１）ごとに、周辺装置の所有者が属するグループ（フィールドＦ８１１３）の情報を取得する。
【００７４】
ステップＳ２１１において加工方法決定手段２０は、図９（ｂ）の加工規則テーブルＴ８１２を参照することにより、ステップＳ２０３で取得したグループのうち最高優先度のグループ、すなわちフィールドＦ８１２２の数値が最大であるグループ（フィールドＦ８１２１）を求める。そしてステップＳ２１２において加工方法決定手段２０は、ステップＳ２１１で求めたグループの加工内容（フィールドＦ８１２３）を画像データ３０２の加工内容とする。
【００７５】
ステップＳ２１３において加工方法決定手段２０は、ステップＳ２１２で求めた加工内容に基づいて処理を分岐する。加工方法決定手段２０は、加工内容が「なし」の場合、すなわち図９（ｂ）の加工規則テーブルＴ８１２のフィールドＦ８１２３の値が「−」の場合はステップＳ２５１へ進み、加工内容が「個別」の場合はステップＳ２５２へ進み、加工内容に補助画像ファイルのファイル名が指定されている場合はステップＳ２５３へ進む。
【００７６】
ステップＳ２５１において、加工方法決定手段２０は、加工を行わずに画像データ３０２をそのまま加工済画像データ４０２として出力するよう加工手段４０に加工指示２０１を与える。
【００７７】
ステップＳ２５２において、加工方法決定手段２０は、図９（ａ）の周辺装置属性テーブルＴ８１１を参照することにより、ステップＳ１０２で取得した装置識別子をフィールドＦ８１１１に持つレコードのアイコン画像ファイル名（フィールドＦ８１１４）を周辺装置ごとに取得し、画像データ３０２に重畳するよう加工手段４０に加工指示２０１を与える。
【００７８】
ステップＳ２５３において、加工方法決定手段２０は、加工内容が指定する補助画像を画像データ３０２に重畳するよう加工手段４０に加工指示２０１を与える。
【００７９】
加工手段４０が加工指示２０１に従って画像データ３０２を加工し、加工済画像データ４０２を出力すると、蓄積手段６０が加工済画像データ４０２を蓄積する。操作入力手段９０が表示操作を検知すると、蓄積手段６０は加工済画像データ４０２を出力し、表示手段５０がこれを表示する。
【００８０】
なお、図１０のステップＳ１０２が請求項１２に記載の第１のステップに、ステップＳ２１１、ステップＳ２１２、ステップＳ２１３およびステップＳ２５１〜Ｓ２５３が同じく請求項１２に記載の第２のステップにそれぞれ相当する。また、図１０のステップＳ２５１〜Ｓ２５３の加工指示２０１に従って、加工手段４０が画像データ３０２を加工する処理が請求項１３に記載の第３のステップに相当する。さらに、図１０のステップＳ２０３が請求項１６に記載の第５のステップに相当する。
【００８１】
以下、本発明の実施の形態２の具体的な動作を説明する。すなわち、周辺装置の属性情報に応じて画像データに重畳する補助画像を決定する具体例である。
【００８２】
図１１（ａ）は、本発明の実施の形態２における携帯電話端末２００を用いて利用者Ｕが利用者Ｕの仕事仲間である人物Ｕ−Ｅ、および人物Ｕ−Ｅの取引相手である人物Ｕ−Ｋを撮影する第三の状況を示している。図１１（ａ）において、人物Ｕ−Ｅは周辺装置２００−Ｅを、人物Ｕ−Ｋは周辺装置２００−Ｋをそれぞれ所持している。周辺装置２００−Ｅ、２００−Ｋの装置識別子はそれぞれ「０９０１１１１ＥＥＥＥ」、「０９０１１１１ＫＫＫＫ」であるものとする。また、利用者Ｕは人物Ｕ−Ｅと人物Ｕ−Ｋの手の部分がアップで写る構図で撮影を行うものとする。
【００８３】
図１１（ａ）に示す第三の状況において利用者Ｕが操作入力手段９０で撮影操作を行うと、加工方法決定手段２０は図１０のフローチャートに示す処理を開始する。
【００８４】
ステップＳ１０２において加工方法決定手段２０は、装置識別子「０９０１１１１ＥＥＥＥ」および「０９０１１１１ＫＫＫＫ」を取得する。ステップＳ２０３において加工方法決定手段２０は、装置識別子「０９０１１１１ＥＥＥＥ」および「０９０１１１１ＫＫＫＫ」から周辺装置の所有者、すなわち人物Ｕ−Ｅと人物Ｕ−Ｋのグループを取得しようとするが、図９（ａ）の周辺装置属性テーブルＴ８１１には装置識別子「０９０１１１１ＫＫＫＫ」が登録されていないため、装置識別子「０９０１１１１ＥＥＥＥ」をフィールドＦ８１１１に保持するレコードＲ８１１５のフィールドＦ８１１３が示すグループ「仕事」のみを装置属性情報８０１として取得する。
【００８５】
ステップＳ２１１において加工方法決定手段２０は、図９（ｂ）の加工規則テーブルＴ８１２を参照し、フィールドＦ８１２１の値が「仕事」であるレコードＲ８１２１の優先度「３」を得る。ステップＳ２０３で取得したグループは「仕事」のみであるので、加工方法決定手段２０は最高優先度のグループとして「仕事」を得る。
【００８６】
ステップＳ２１２において加工方法決定手段２０は、加工内容としてレコードＲ８１２１のフィールドＦ８１２３の値「−」を得る。ステップＳ２１３の条件判断において、加工内容が「−」のため、加工方法決定手段２０はステップＳ２５１へ進み、画像データ３０２に加工を施さずに加工済画像データ４０２として出力するよう加工手段４０に指示する。
【００８７】
加工手段４０が出力した加工済画像データ４０２は、蓄積手段６０により蓄積される。ここで利用者Ｕが操作入力手段９０で表示操作を行うと、蓄積手段６０が蓄積した加工済画像データ４０２を出力し、表示手段５０が加工済画像データ４０２を表示する。
【００８８】
図１１（ｂ）は、第三の状況（図１１（ａ））における加工済画像データ４０２−２１の内容を示す図である。人物Ｕ−ＥおよびＵ−Ｋの手の画像Ｐ２１に補助画像は重畳されておらず、仕事中の撮影に相応しい真面目な画像となっている。
【００８９】
図１２（ａ）は、本発明の実施の形態２における携帯電話端末２００を用いて利用者Ｕが利用者Ｕと恋人の関係にある人物Ｕ−Ｄを撮影する第四の状況を示している。図１２（ａ）において、人物Ｕ−Ｄは周辺装置２００−Ｄを所持している。周辺装置２００−Ｄの装置識別子は「０９０１１１１ＤＤＤＤ」であるものとする。また、利用者Ｕは人物Ｕ−Ｄと利用者Ｕの手の部分がアップで写る構図で撮影を行うものとする。
【００９０】
第四の状況において加工方法決定手段２０は、第三の状況（図１１（ａ））と同様に処理を行うが、図１０のステップＳ２０３〜Ｓ２１１の処理において加工方法決定手段２０はグループ「恋人」を得て、ステップＳ２１２で加工情報として補助画像ファイルのファイル名「Ｈｅａｒｔ．ｊｐｇ」を得る。このため、ステップＳ２１３における判断は「補助画像ファイル名」となり、加工方法決定手段２０はステップＳ２５３へ進み、補助画像ファイル「Ｈｅａｒｔ．ｊｐｇ」を画像データ３０２に重畳するよう加工方法を決定する。
【００９１】
図１２（ｂ）は、第四の状況（図１２（ａ））における加工済画像データ４０２−２２の内容を示す図である。加工済画像データ４０２−２２は、利用者Ｕおよび人物Ｕ−Ｄの手の画像Ｐ２２に補助画像Ｐ２３が重畳され、利用者Ｕと人物Ｕ−Ｄとがお互いに好意を抱いている雰囲気を表現した画像となっている。
【００９２】
図１３（ａ）は、本発明の実施の形態２における携帯電話端末２００を用いて利用者Ｕが利用者Ｕと恋人の関係にある人物Ｕ−Ｄ、および利用者Ｕと家族の関係にある人物Ｕ−Ａ、Ｕ−Ｂ、Ｕ−Ｃ、Ｕ−Ｌを撮影する第五の状況を示している。図１３（ａ）において、人物Ｕ−Ａ、Ｕ−Ｂ、Ｕ−Ｃ、Ｕ−Ｄはそれぞれ周辺装置２００−Ａ、２００−Ｂ、２００−Ｃ、２００−Ｄを所持している。周辺装置２００−Ａ、２００−Ｂ、２００−Ｃ、２００−Ｄの装置識別子はそれぞれ「０９０１１１１ＡＡＡＡ」、「０９０１１１１ＢＢＢＢ」、「０９０１１１１ＣＣＣＣ」、「０９０１１１１ＤＤＤＤ」であるものとする。また、利用者Ｕは人物Ｕ−Ｃと人物Ｕ−Ｌの手の部分がアップで写る構図で撮影を行うものとする。
【００９３】
第五の状況において加工方法決定手段２０は、第三の状況（図１１（ａ））および第四の状況（図１２（ａ））と同様に処理を行うが、図１０のステップＳ２０３の処理で加工方法決定手段２０はグループ「恋人」および「家族」を得る。
【００９４】
さらに、ステップＳ２１１において加工方法決定手段２０は、グループ「恋人」と「家族」のうち、優先度（図９（ｂ）のフィールドＦ８１２２の数値）が高いグループ「家族」を最高優先度のグループとして得て加工内容「個別」を得る。したがって、加工方法決定手段２０は、ステップＳ２１３の判断でステップＳ２５２へ進み、アイコン画像「ｉｍａｇｅ１．ｊｐｇ」、「ｉｍａｇｅ２．ｊｐｇ」、「ｉｍａｇｅ３．ｊｐｇ」、「ｉｍａｇｅ４．ｊｐｇ」を画像データ３０２に重畳するよう加工方法を決定する。
【００９５】
図１３（ｂ）は、第五の状況（図１３（ａ））における加工済画像データ４０２−２３の内容を示す図である。加工済画像データ４０２−２３は、人物Ｕ−ＣおよびＵ−Ｌの手の画像Ｐ２４に人物Ｕ−Ａ〜Ｕ−Ｄの似顔絵のアイコン画像Ｐ２５〜Ｐ２８が重畳され、人物Ｕ−Ｌが家族愛に包まれている雰囲気を表現した画像となっている。なお、ここでは、加工方法決定手段２０が、画像Ｐ２４と、アイコン画像Ｐ２５〜Ｐ２８とを重畳する位置を決定するものとするが、操作入力手段９０からの入力操作に従って、アイコン画像Ｐ２５〜Ｐ２８を任意の位置に配置するようにしてもよい。
【００９６】
以上説明したとおり、本発明の実施の形態２における携帯電話端末２００は、周辺装置検出手段１０が検出した周辺装置を識別する装置識別子を出力し、加工方法決定手段２０が装置識別子から得られる周辺装置の所有者の属性に基づいてメディアデータ３０１の加工方法を決定している。このメディアデータ処理方法により、周囲の人物の顔が撮影した画像に写っていない場合であっても、利用者と周囲の人物との関係や雰囲気を感じ取れるように画像を加工して表示することができる。
【００９７】
以上の説明から明らかなように、本発明の実施の形態２における携帯電話端末は、メディアデータを取得する際に無線を介して周辺装置を検出した結果に基づいてメディアデータの加工方法を決定するため、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であっても、メディアデータ取得時の状況を適切に判断してメディアデータを加工することができる。
【００９８】
また、本発明の実施の形態２における携帯電話端末は、検出した周辺装置の属性情報に基づいてメディアデータの加工方法を決定するため、利用者と周囲の人物との関係を携帯電話端末が判別できるので、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であって、メディアデータ取得時の状況をより適切に判断してメディアデータを加工することができる。
【００９９】
（実施の形態３）
次に本発明の実施の形態３について説明する。本実施の形態３では、メディアデータの加工方法を決定する際に、無線を介した周辺装置の検出結果と、その他の手段により周囲から取得した環境情報とを組み合わせて利用する点に特徴がある。
【０１００】
図１４は、本発明の実施の形態３におけるメディアデータ処理装置１の概略構成図である。図１４においてメディアデータ処理装置１は、周辺装置検出手段１０、加工方法決定手段２０、メディアデータ取得手段３０、加工手段４０および環境検出手段７０を備える。環境検出手段７０は、メディアデータ処理装置１の周囲の環境の状態を検出して環境情報７０１を出力する。また、加工方法決定手段２０は、周辺装置情報１０１および環境情報７０１に基づいて加工方法を決定するよう構成されている。
【０１０１】
図１５は、本発明の実施の形態３におけるメディアデータ処理装置１を携帯電話端末３００として構成したときの構成図である。図１５において携帯電話端末３００は、図２の携帯電話端末１００の構成要素に加え、環境検出手段７０に対応する構成要素として音声入力手段７１および音声分析手段７２を備える。
【０１０２】
また、携帯電話端末３００は、図２の携帯電話端末１００とは異なり、操作入力手段９０の撮影操作に基づいて蓄積手段６０が画像データ３０２、周辺装置情報１０１、および環境情報７０１に対応する音声情報７０３を蓄積するよう構成されている。さらに、蓄積手段６０は、蓄積した画像データ３０２、周辺装置情報１０１、および音声情報７０３を操作入力手段９０の表示操作に基づいて出力するよう構成されている。
【０１０３】
このように、画像データ３０２を撮影時に未加工の状態で蓄積しておき、蓄積した周辺装置情報１０１に基づいて画像データ３０２の表示時に加工方法を決定する構成とすることにより、画像データ３０２の加工処理が行われた後でも未加工の画像データ３０２を確認することができ、利便性が増す。
【０１０４】
音声入力手段７１は、外部の音声を電気信号である音声信号７０２に変換して出力する。音声分析手段７２は、音声信号７０２の音圧を測定し、測定結果を音声情報７０３として出力する。音声情報７０３は、図１４の環境情報７０１に相当する情報であり、音声信号７０２の音圧レベルを表す情報を含む。
【０１０５】
周辺装置情報１０１は、図２の周辺装置情報１０１と同様、周辺装置の装置数を含んでいる。加工方法決定手段２０は、画像データ３０２に別の画像である補助画像を重畳する加工の方法を決定する。また、加工方法決定手段２０は、図２の加工方法決定手段２０とは異なり、加工手段４０が備える処理機能を直接呼び出すことによって加工手段４０に加工指示２０１を与える。
【０１０６】
図１６は、本発明の実施の形態３における携帯電話端末３００の外観を示す図である。音声入力手段７１は、撮像手段３１とは異なる方向から到達する音声を取得できるよう撮像手段３１と異なる側面に設けられている。上記設置方法により、被写体となる人物が発する音声よりも、撮影時の雰囲気に顕著な影響を与える周囲の人物が発する音声の方をより高感度で捉えることができる。
【０１０７】
図１７は、本発明の実施の形態３における携帯電話端末３００の加工方法決定手段２０の処理手順を表すフローチャートである。操作入力手段９０で撮影操作が行われると、蓄積手段６０が画像データ３０２、周辺装置情報１０１、および音声情報７０３を蓄積する。そして操作入力手段９０が表示操作を検知すると、蓄積手段６０が蓄積した画像データ３０２、周辺装置情報１０１、および音声情報７０３を出力し、加工方法決定手段２０が図１７のフローチャートに示す処理を開始する。
【０１０８】
ステップＳ１０１およびＳ１０２において加工方法決定手段２０は、撮影時に蓄積手段６０が蓄積した画像データ３０２、周辺装置情報１０１を取得する。ステップＳ３０３において加工方法決定手段２０は、音声情報７０３を取得する。
【０１０９】
ステップＳ３１２において加工方法決定手段２０は、ステップＳ３０３で取得した音声情報７０３に含まれる、音声信号７０２の音圧レベルが所定の値を越えているかどうかを判断し、超えている場合（ステップＳ３１２、ＹＥＳ）はステップＳ２５１へ進み、越えていない場合（ステップＳ３１２、ＮＯ）はステップＳ３５２へ進む。
【０１１０】
ステップＳ３５２において加工方法決定手段２０は、所定の補助画像を画像データ３０２に重畳するよう加工手段４０に加工指示２０１を与える。
【０１１１】
加工手段４０が加工指示２０１に従って画像データ３０２を加工し、加工済画像データ４０２を出力すると、表示手段５０がこれを表示する。
【０１１２】
なお、図１７のステップＳ１０２が請求項１２に記載の第１のステップに、ステップＳ１１１、ステップＳ３１２、ステップＳ２５１およびステップＳ３５２が同じく請求項１２に記載の第２のステップにそれぞれ相当する。また、図１０のステップＳ２５１またはステップＳ３５２の加工指示２０１に従って、加工手段４０が画像データ３０２を加工する処理が請求項１３に記載の第３のステップに相当する。さらに、図１７のステップＳ３０３が請求項１５に記載の第４のステップに相当する。
【０１１３】
以下、本発明の実施の形態３の具体的な動作を説明する。すなわち、周辺装置の装置数と周囲で発生する音声の音圧レベルに応じて画像データに重畳する補助画像を決定する具体例である。
【０１１４】
図１８（ａ）は、利用者Ｕが本発明の実施の形態３における携帯電話端末３００を用いて周囲に人物がいない状態で人物Ｕ−Ｍを撮影する第六の状況を示している。図１８（ａ）に示す第六の状況において利用者Ｕが操作入力手段９０で撮影操作を行うと、蓄積手段６０は画像データ３０２、周辺装置情報１０１、および音声情報７０３を蓄積する。
【０１１５】
図２０は、蓄積手段６０が蓄積する蓄積データ６０１の具体例を示す図である。図２０に示すとおり、蓄積手段６０は、画像データ３０２、周辺装置情報１０１および音声情報７０３を互いに関連付けて単一の蓄積データ６０１として蓄積する。図２０（ａ）は、第六の状況において蓄積手段６０が蓄積する蓄積データ６０１−３１を示している。蓄積データ６０１−３１は、ヘッダＤ３１、画像データ３０２の内容を表す画像データ３０２−３１、周辺装置情報１０１の内容を表す検出装置数情報Ｄ３２、音声情報７０３の内容を表す音圧レベル情報Ｄ３３から成る。
【０１１６】
第六の状況においては、周囲に人物がいないので周辺装置検出手段１０が周辺装置を検出しない。従って、検出装置数情報Ｄ３２として値「０」が蓄積されている。音圧レベル情報Ｄ３３の数値「５５」は、音声入力手段７１が取得した周囲の音の音圧レベルが５５デシベルであり、比較的静かな環境にあることを示している。
【０１１７】
なお、蓄積データ６０１−３１は、たとえばＴＩＦＦ（Ｔａｇｇｅｄ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）形式を用いて電子データとして表現することが可能である。
【０１１８】
蓄積データ６０１−３１が蓄積手段６０に蓄積された状態で利用者Ｕが操作入力手段９０で表示操作を行うと、蓄積手段６０が蓄積データ６０１−３１を出力し、加工方法決定手段２０が図１７のフローチャートが示す処理を開始する。
【０１１９】
まず、ステップＳ１０１およびＳ１０２において加工方法決定手段２０は、撮影時に蓄積手段６０が蓄積した画像データ３０２、周辺装置情報１０１を取得する。ステップＳ３０３において加工方法決定手段２０は、音声情報７０３を取得する。
【０１２０】
ステップＳ１１１において加工方法決定手段２０は、蓄積データ６０１−３１の検出装置数情報Ｄ３２を参照し、検出装置数「０」を取得するので判断はＮＯとなり、ステップＳ２５１へ進む。
【０１２１】
ステップＳ２５１において加工方法決定手段は、加工を行わずに画像データ３０２−３１をそのまま加工済画像データ４０２として出力するよう加工手段４０に加工指示２０１を与える。その結果、表示手段５０は、図１８（ｂ）に示すとおり、人物Ｕ−Ｍの画像Ｐ３１のみが写った加工済画像データ４０２−３１を表示する。
【０１２２】
図１９（ａ）は、利用者Ｕが本発明の実施の形態３における携帯電話端末３００を用いて、第六の状況（図１８（ａ））と同一の場所において、周囲の観客が人物Ｕ−Ｍを静かに注視している状態で人物Ｕ−Ｍを撮影する第七の状況を示している。５人の観客はそれぞれ周辺装置３００−Ｎ、３００−Ｏ、３００−Ｐ、３００−Ｑ、３００−Ｒを所持している。また、利用者Ｕは人物Ｕ−Ｍの顔の部分のみがアップで写る構図、すなわち観客が写らない構図で撮影を行うものとする。
【０１２３】
図１９（ａ）に示す第七の状況において利用者Ｕが操作入力手段９０で撮影操作を行うと、蓄積手段６０は画像データ３０２、周辺装置情報１０１、および音声情報７０３を蓄積する。第七の状況において蓄積手段６０が蓄積する蓄積データ６０１−３２の内容を図２０（ｂ）に示す。
【０１２４】
第七の状況においては、５台の周辺装置３００−Ｎ、３００−Ｏ、３００−Ｐ、３００−Ｑ、３００−Ｒを周辺装置検出手段１０が検出する。従って、検出装置数Ｄ３５として値「５」が蓄積されている。音圧レベル情報Ｄ３６の数値「５５」は、図２０（ａ）に示す第六の状況における蓄積データ６０１−３１（図２０（ａ））の数値Ｄ３３と同じく、音声入力手段７１が取得した周囲の音の音圧レベルが５５デシベルであり、周囲が静かであることを示している。
【０１２５】
蓄積データ６０１−３２が蓄積手段６０に蓄積された状態で利用者Ｕが操作入力手段９０で表示操作を行うと、蓄積手段６０が蓄積データ６０１−３２を出力し、加工方法決定手段２０が図１７のフローチャートが示す処理を実行する。
【０１２６】
第七の状況におけるステップＳ１１１の判断は第六の状況における判断とは異なりＹＥＳとなるので加工方法決定手段２０はステップＳ３１２へ進む。音圧レベルの数値Ｄ３６が「５５」であるのでステップＳ３１２の判断はＮＯとなり、加工方法決定手段２０はステップＳ３５２へ進み、補助画像「ｔｅｎｓｉｏｎ．ｊｐｇ」を画像データ３０２−３２に重畳するよう加工方法を決定する。
【０１２７】
図１９（ｂ）に、第七の状況において表示手段５０が表示する加工済画像データ４０２−３２の内容を示す。加工済画像データ４０２−３２は、人物Ｕ−Ｍの画像Ｐ３２に複数の観客の顔を表す画像Ｐ３３が重畳され、緊張した雰囲気を表現した画像となっている。
【０１２８】
なお、人物Ｕ−Ｍの周囲に５人の観客がいて騒がしくしている場合、すなわち観客が人物Ｕ−Ｍを注視していないような状態で撮影を行うと、図１７のステップＳ３１２の判断がＹＥＳとなるので、緊張した雰囲気を表現するための画像Ｐ３３は重畳されない。
【０１２９】
以上説明したとおり、本発明の実施の形態３における携帯電話端末３００は、周辺装置検出手段１０が検出した周辺装置の装置数と音声分析手段７２が測定した周囲の音声の音圧レベルに基き、装置数が所定数より多く、音圧レベルが所定値以下である場合に加工方法決定手段が画像データ３０２に補助画像を重畳することにより緊張した雰囲気を表現した画像となるように加工方法を決定している。このメディアデータ処理方法により、撮影した画像に周囲の人物が写っておらず、同一の場所で周囲の状況が逐次変化する場合であっても、周囲の状況を判別することができ、緊張した雰囲気で撮影した画像を、緊張感を感じ取れるよう加工して表示することができる。
【０１３０】
以上の説明から明らかなように、本発明の実施の形態３における携帯電話端末は、メディアデータを取得する際に無線を介して周辺装置を検出した結果に基づいてメディアデータの加工方法を決定するため、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合あっても、メディアデータ取得時の状況を適切に判断してメディアデータを加工することができる。
【０１３１】
また、本発明の実施の形態３における携帯電話端末は、メディアデータを取得する際に無線を介して周辺装置を検出した結果と、その他の手段により周囲から取得した環境情報とに基づいてメディアデータの加工方法を決定するため、周辺装置の検出結果が同一であっても環境情報が異なる場合を携帯電話端末が判別することができるので、メディアデータ取得時の状況をより適切に判断してメディアデータを加工することができる。
【０１３２】
なお、本発明の実施の形態１、２および３において、画像データは静止画であるものとして説明したが、動画像データであってもよい。
【０１３３】
また、本発明の実施の形態１、２および３において、メディアデータは画像データであるとしたが、これに限るものではなく、外部から取得可能なメディアデータであればどのようなデータであってもよく、たとえば音波形データ、ＭＩＤＩ（Ｍｕｓｉｃａｌ Ｉｎｓｔｒｕｍｅｎｔ Ｄｉｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ）形式等で表現された演奏データとし、周辺装置情報に基づいて音響的な特殊効果等を付与する加工方法を決定するようにしてもよい。
【０１３４】
また、本発明の実施の形態１、２および３において、メディアデータの加工は色温度の変更または補助画像の重畳であるとしたがこれに限るものではなく、サイズや解像度の変更、色相・彩度・明度・コントラスト等の色調変更、変形・ぼかし・シャープ化・ピクセレーション・コラージュ・テクスチャ化等の特殊効果の適用であってもよい。
【０１３５】
また、本発明の実施の形態２および３において、補助画像を重畳する加工方法を決定するものとしたがこれに限るものではなく、アニメーションやテキストや音データ等のオブジェクトを重畳したり、ネットワーク上のコンテンツや実行可能なプログラムへの参照情報を関連づける加工方法を決定するようにしてもよい。
【０１３６】
また、本発明の実施の形態１、２および３において、操作入力手段による表示操作に基づいて加工済画像データを表示手段で表示するようにしたが、撮影時のプレビュー表示のように、利用者が表示操作を行わなくても加工済画像データが表示されるよう構成してもよい。
【０１３７】
また、本発明の実施の形態３において、環境情報は音声情報であるとしたがこれに限るものではなく、たとえば照度、温度、気圧、高度、速度、加速度、振動の大きさや周期、紫外線量、位置情報等であってもよい。また、環境検出手段は音声入力手段および音声分析手段であるとしたが、これに限るものではなく、上記の各種情報を検出するセンサ等であってもよい。
【０１３８】
また、本発明の実施の形態１、２および３において、周辺装置情報または環境情報はメディアデータ取得の際に取得した情報のみを利用するようにしたが、これに限るものではなく、たとえば所定時間前に取得した周辺装置情報または環境情報とメディアデータ取得時に取得した情報とを比較し、比較結果に基づいて加工方法決定手段が加工方法を決定するようにしてもよい。このようにすることにより、たとえば混雑した場所から空いている場所に移動した場合等、状況の時間変化を捉えることが可能となり、メディアデータ取得時の状況をより適切に判断することができる。
【０１３９】
また、本発明の実施の形態２において、装置属性情報提供手段は加工方法決定手段と同一筐体内に具備するものとして説明したが、これに限るものではなく、筐体外部に設けられた装置属性情報提供手段から通信を介して装置属性情報を取得するようにしてもよい。
【０１４０】
また、本発明の実施の形態２において、周辺装置の所有者に関連づけられたアイコン画像を画像データに重畳するようにしたがこれに限るものではなく、利用者に関連づけられた情報を重畳するようにしてもよい。
【０１４１】
また、本発明の実施の形態３において、環境情報として音声信号の分析結果を蓄積手段に蓄積するようにしたが、未分析の音声信号を蓄積しておき、メディアデータの加工時に音声信号を分析するようにしてもよい。
【０１４２】
また、本発明の実施の形態１、２および３において、周辺装置検出手段と加工方法決定手段は同一筐体内に設けたが、互いに分離して別筐体に設けてもよい。
【０１４３】
また、本発明の実施の形態１および３において、周辺装置検出手段は周辺装置の装置数を検出するものとしたが、装置数を正確に検出する必要は必ずしもなく、たとえば特定の周波数帯域の電波の受信強度を測定することにより周囲に存在する周辺装置の多さを判定し、判定結果に基づいてメディアデータの加工方法を決定するようにしてもよい。
【０１４４】
また、本発明の実施の形態１、２および３において、携帯電話端末の例を説明したが、これに限るものではなく、デジタルカメラ、ビデオカメラ、録音装置等、外部からメディアデータを取得する機能を有する電子機器であれば同様の効果が得られる。
【産業上の利用可能性】
【０１４５】
本発明の撮影装置及び画像データ処理方法は、メディアデータが人物の感情や表情を抽出するための情報を含んでいない場合であっても、メディアデータ取得時の状況を適切に判断してメディアデータを加工することができるという効果を有し、外部からメディアデータを取得する機能を有する電子機器に有用である。
【符号の説明】
【０１４６】
１ メディアデータ処理装置
１０ 周辺装置検出手段
２０ 加工方法決定手段
３０ メディアデータ取得手段
３１ 撮像手段
４０ 加工手段
５０ 表示手段
６０ 蓄積手段
７０ 環境検出手段
７１ 音声入力手段
７２ 音声分析手段
８０ 装置属性情報提供手段
８１ 電話帳記憶手段
９０ 操作入力手段
１００、２００、３００ 携帯電話端末
１００−Ｆ、１００−Ｇ、１００−Ｈ、１００−Ｉ、１００−Ｊ 周辺装置
２００−Ａ、２００−Ｂ、２００−Ｃ、２００−Ｄ、２００−Ｅ、２００−Ｋ 周辺装置
３００−Ｎ、３００−Ｏ、３００−Ｐ、３００−Ｑ、３００−Ｒ 周辺装置
１０１ 周辺装置情報
２０１、２０１−１１、２０１−１２ 加工指示
３０１ メディアデータ
３０２、３０２−１１、３０２−１２ 画像データ
３０２−３１、３０２−３２ 画像データ
４０２、４０２−２１、４０２−２２、４０２−２３ 加工済画像データ
４０２−３１、４０２−３２ 加工済画像データ
６０１−３１、６０１−３２ 蓄積データ
７０１ 環境情報
７０２ 音声信号
７０３ 音声情報
８０１ 装置属性情報
８０２ 加工補助情報
Ｕ 利用者
Ｕ−Ａ、Ｕ−Ｂ、Ｕ−Ｃ、Ｕ−Ｄ、Ｕ−Ｅ、Ｕ−Ｆ、Ｕ−Ｋ、Ｕ−Ｌ、Ｕ−Ｍ 人物
【特許請求の範囲】
【請求項１】
外部を撮影し画像データを取得する撮影手段と、
無線を介して外部に存在する周辺装置を検出する周辺装置検出手段と、
前記周辺装置の属性情報を提供する装置属性情報提供手段と、
前記属性情報に基づいて、前記画像データの加工方法を決定する加工方法決定手段と、
前記決定された加工方法に基づいて前記画像データを加工する加工手段と、を有する撮影装置。
【請求項２】
請求項１に記載の撮影装置であって、
周囲の環境情報を検出する環境検出手段をさらに有し、
前記加工方法決定手段は、前記属性情報と前記環境情報と、に基づいて前記画像データの加工方法を決定する撮影装置。
【請求項３】
請求項２に記載の撮影装置であって、
前記環境情報は、少なくとも周囲の音の音圧レベルを含み、
前記加工方法決定手段は、前記属性情報と前記音圧レベルと、に基づいて前記画像データの加工方法を決定する撮影装置。
【請求項４】
請求項１から請求項３のいずれか１項に記載の撮影装置であって、
前記加工手段が加工した前記画像データを表示する表示部を、更に有する撮影装置。
【請求項５】
外部を撮影し画像データを取得する第１のステップと、
無線を介して外部に存在する周辺装置を検出する第２のステップと、
前記第１のステップで検出した周辺装置の属性情報を提供する第３のステップと、
前記属性情報に基づいて、前記画像データの加工方法を決定する第４のステップと、を有する画像データ処理方法。
【請求項６】
請求項５に記載の画像データ処理方法であって、
前記第２のステップと前記第３のステップの間に、周囲の環境情報を検出する第５のステップを有し、
前記第４のステップは、前記属性情報と前記環境情報と、に基づいて前記画像データの加工方法を決定する画像データ処理方法。
【請求項７】
請求項６に記載の画像データ処理方法であって、
前記環境情報は、少なくとも周囲の音の音圧レベルを含み、
前記第４のステップは、前記属性情報と前記音圧レベルと、に基づいて前記画像データの加工方法を決定する画像データ処理方法。
【請求項１】
外部を撮影し画像データを取得する撮影手段と、
無線を介して外部に存在する周辺装置を検出する周辺装置検出手段と、
前記周辺装置の属性情報を提供する装置属性情報提供手段と、
前記属性情報に基づいて、前記画像データの加工方法を決定する加工方法決定手段と、
前記決定された加工方法に基づいて前記画像データを加工する加工手段と、を有する撮影装置。
【請求項２】
請求項１に記載の撮影装置であって、
周囲の環境情報を検出する環境検出手段をさらに有し、
前記加工方法決定手段は、前記属性情報と前記環境情報と、に基づいて前記画像データの加工方法を決定する撮影装置。
【請求項３】
請求項２に記載の撮影装置であって、
前記環境情報は、少なくとも周囲の音の音圧レベルを含み、
前記加工方法決定手段は、前記属性情報と前記音圧レベルと、に基づいて前記画像データの加工方法を決定する撮影装置。
【請求項４】
請求項１から請求項３のいずれか１項に記載の撮影装置であって、
前記加工手段が加工した前記画像データを表示する表示部を、更に有する撮影装置。
【請求項５】
外部を撮影し画像データを取得する第１のステップと、
無線を介して外部に存在する周辺装置を検出する第２のステップと、
前記第１のステップで検出した周辺装置の属性情報を提供する第３のステップと、
前記属性情報に基づいて、前記画像データの加工方法を決定する第４のステップと、を有する画像データ処理方法。
【請求項６】
請求項５に記載の画像データ処理方法であって、
前記第２のステップと前記第３のステップの間に、周囲の環境情報を検出する第５のステップを有し、
前記第４のステップは、前記属性情報と前記環境情報と、に基づいて前記画像データの加工方法を決定する画像データ処理方法。
【請求項７】
請求項６に記載の画像データ処理方法であって、
前記環境情報は、少なくとも周囲の音の音圧レベルを含み、
前記第４のステップは、前記属性情報と前記音圧レベルと、に基づいて前記画像データの加工方法を決定する画像データ処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【公開番号】特開２０１２−１７８８６２（Ｐ２０１２−１７８８６２Ａ）
【公開日】平成２４年９月１３日（２０１２．９．１３）
【国際特許分類】
【出願番号】特願２０１２−１０４８１０（Ｐ２０１２−１０４８１０）
【出願日】平成２４年５月１日（２０１２．５．１）
【分割の表示】特願２００５−３６７７１１（Ｐ２００５−３６７７１１）の分割
【原出願日】平成１７年１２月２１日（２００５．１２．２１）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成２４年９月１３日（２０１２．９．１３）
【国際特許分類】
【出願日】平成２４年５月１日（２０１２．５．１）
【分割の表示】特願２００５−３６７７１１（Ｐ２００５−３６７７１１）の分割
【原出願日】平成１７年１２月２１日（２００５．１２．２１）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]