通信端末装置及びコンピュータプログラム
【課題】メールに対して、添付されるファイルに適した他のファイルを容易に付加可能とする。
【解決手段】通信端末装置は、ファイルを格納したメモリと、処理部と、を備える。処理部は、添付ファイル設定領域と、本文入力領域と、を有するメール編集画面を、表示手段に表示させ、本文入力領域に対するファイルの設定指示を受付けた場合に、添付ファイル設定領域に設定されている第一のファイルに含まれる付加情報を、メモリから抽出し、抽出された付加情報に応じた第二のファイルを、メモリから抽出し、抽出された第二のファイルを本文入力領域に設定する。
【解決手段】通信端末装置は、ファイルを格納したメモリと、処理部と、を備える。処理部は、添付ファイル設定領域と、本文入力領域と、を有するメール編集画面を、表示手段に表示させ、本文入力領域に対するファイルの設定指示を受付けた場合に、添付ファイル設定領域に設定されている第一のファイルに含まれる付加情報を、メモリから抽出し、抽出された付加情報に応じた第二のファイルを、メモリから抽出し、抽出された第二のファイルを本文入力領域に設定する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像等のファイルを添付したメールを送受信する通信端末装置、及びコンピュータプログラムの技術分野に関する。
【背景技術】
【０００２】
この種の通信端末装置として、カメラにより撮影した画像データをメール（例えば、電子メール）に添付して送信可能な機能を有するものがある。このとき、撮影した画像データに何らかの付加情報を付加する機能を有するものがある。
【０００３】
このように撮影した画像データに付加情報を設定する機能として、例えば、人物の顔写真の画像データにおける笑顔度を測定する機能について先行技術文献に説明されている。笑顔度数測定機能として、例えば、人物の笑顔度を推定した上で、該笑顔度の時系列的な推移を判定して、所望のタイミングで画像が撮影されるように撮影タイミングをシフトする、笑顔シャッタと呼ばれる機能が用いられている。また、画像データに対する付加情報を用いた他の例として、撮影した画像データを画像認識することで、画像データを被写体に応じたカテゴリに分類する技術がある。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−２３９５０３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
メールに対して、画像データを添付する他に、絵文字や背景画像等のコンテンツを付加する機能を有する通信端末装置がある。このようなコンテンツをメールに付加することで、ユーザのメールを作成する際の感情などを一層表現しやすくなり、コミュニケーションの円滑化という点で有益である。更に、メールに添付される画像データに応じて、メールの文面に付加する絵文字や背景画像を設定することでその効果は更に顕著なものとなる。
【０００６】
しかしながら、従来の通信端末装置では、メールに添付される画像データと、メール及びメールに付加されるコンテンツとの間の連携について着目したものがなかった。このため、画像データと、メールとの間の連携を図るためには、ユーザは、自らの操作により実行することを求められ、操作性が良好であるとは言い難いという技術的な問題があった。
【０００７】
尚、このような技術的な問題点は、メールに添付される画像データとメール及びメールに付加されるコンテンツとの間の連携に限らず、メールに添付される任意のファイルとメール及びメールに付加される任意のファイルとの間の連携においても同様に生じ得る。
【０００８】
本発明は、上述した技術的な問題点に鑑みてなされたものであり、メールの作成の際に、メールに添付されるファイルと、メールに付加されるファイルとの間の連携をより強化可能な通信端末装置及びコンピュータプログラムを提供することを課題とする。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、開示の通信端末装置は、メモリと、処理部とを備える。メモリは、ファイルを格納している。処理部は、添付ファイル設定領域と、本文入力領域と、を有するメール編集画面を、表示手段に表示させる。更に、処理部は、本文入力領域に対するファイルの設定指示を受付けた場合に、添付ファイル設定領域に設定されている第一のファイルに含まれる付加情報をメモリから抽出する。更に、処理部は、抽出された付加情報に応じた第二のファイルを、メモリから抽出する。更に、処理部は、抽出された第二のファイルを本文入力領域に設定する。
【００１０】
また、開示のコンピュータプログラムは、ファイルを格納したメモリと処理部とを備えた通信端末装置によって実行されるコンピュータプログラムである。コンピュータプログラムは、添付ファイル設定領域と本文入力領域とを有するメール編集画面を表示手段に表示させるように処理部を動作させる。更に、コンピュータプログラムは、本文入力領域に対するファイルの設定指示を受付けた場合に、添付ファイル設定領域に設定されている第一のファイルに含まれる付加情報をメモリから抽出するように処理部を動作させる。更に、コンピュータプログラムは、抽出された付加情報に応じた第二のファイルを、メモリから抽出するように処理部を動作させる。更に、コンピュータプログラムは、抽出された第二のファイルを本文入力領域に設定するように処理部を動作させる。
【発明の効果】
【００１１】
開示の通信端末装置によれば、電子メールの作成時に、ユーザが該電子メールに添付したファイルに応じて、適切な他のファイルを好適に選択可能となる。
【図面の簡単な説明】
【００１２】
【図１】携帯通信端末の構成例を示すブロック図である。
【図２】画像データの取得及び付加情報の設定についての動作の一例を示すフローチャートである。
【図３】画像データに付加される付加情報の一例を示す図である。
【図４】付加情報に応じた背景画像の選択の動作の流れを示すフローチャートである。
【図５】付加情報に含まれる画像のカテゴリに応じた背景画像の表示の態様を決定する動作の流れを示すフローチャートである。
【図６】ディスプレイの表示例を示す平面図である。
【図７】カテゴリ背景テーブルの例を示すデータ構造図である。
【図８】画像データの取得及び付加情報の設定についての動作の一例を示すフローチャートである。
【図９】画像データに付加される付加情報の一例を示す図である。
【図１０】付加情報に応じた絵文字の選択の動作の流れを示すフローチャートである。
【図１１】付加情報に含まれる笑顔度に応じた絵文字の表示の態様を決定する動作の流れを示すフローチャートである。
【図１２】ディスプレイの表示例を示す平面図である。
【図１３】絵文字笑顔テーブルの例を示すデータ構造図である。
【発明を実施するための形態】
【００１３】
以下に、発明を実施するための実施形態について説明する。
【００１４】
（１）構成例
図１を参照して、通信端末装置の実施形態の構成例について説明する。図１は、通信端末装置の実施形態の一例である携帯通信端末１の構成例について示すブロック図である。
【００１５】
図１に示されるように、携帯通信端末１は、アンテナ１０と、無線部２０と、オーディオ入出力部３０と、カメラ４０と、プロセッサ５０と、メモリ６０と、ディスプレイ７０と、操作キー８０とを備える。
【００１６】
尚、これらの構成は、特に記載する点を除いては、一般的な（言い換えれば、公知の）メール送受信機能及びカメラ等の画像取得機能を有する携帯電話等の無線通信端末が備えるものと同様の構成であってよい。
【００１７】
具体的には、携帯通信端末１のアンテナ１０は、少なくとも電子メールの送受信に係る所定のデータ（例えば、電子メール本文のテキストデータ、添付される画像データ（言い換えれば、画像ファイル）及び該電子メールに付属する任意のデータ（言い換えれば、後述する付加コンテンツ等の任意の付属ファイル）等）について、サーバ等を介した無線通信の送受信を行う。
【００１８】
無線部２０は、アンテナ１０とプロセッサ５０との間で送受信されるデータの信号処理を実施する無線信号処理回路である。例えば、無線部２０は、受信した無線信号を整合するフィルタや、増幅するアンプや、復調用の復調回路等を備える。
【００１９】
オーディオ入出力部３０は、携帯通信端末１を使用してユーザが音声通話を実施するための音声の入出力用のマイク及びスピーカである。尚、オーディオ入出力部３０自体は、以下に説明する携帯通信端末１の機能とは比較的関連が薄いため、詳細な説明は省略する。
【００２０】
カメラ４０は、画像又は動画等を撮影可能なカメラである。カメラ４０では、撮影した画像又は動作について、デジタルデータに変換した上でプロセッサ５０を介してメモリ６０内に格納する。
【００２１】
プロセッサ５０は、携帯通信端末１の各部の動作を制御するＣＰＵ（Central Processing Unit）等の演算装置である。プロセッサ５０は、各部に制御信号を入力することで各部の動作を制御し、また、各部から入力される信号について処理、又は他の部位への入力を仲介する。
【００２２】
メモリ６０は、携帯通信端末１の動作に係るデータを格納するための情報記録装置である。メモリ６０は、例えばプロセッサ５０を動作させるためのソフトウェアが予め記録されるＲＯＭ（Read Only Memory）６１と、携帯通信端末１の動作に応じたデータ（例えば、カメラ４０において撮影された画像データや、電子メールに付加される付加コンテンツデータ等）が格納されるＲＡＭ（Random Access Memory）６２とを含む。
【００２３】
本実施形態で説明する各種の処理は、予め用意されたプログラムをプロセッサ５０で実行することによって実現できる。メモリ６０には、これらのプログラムが予め記憶されている。尚、メモリ６０ではなく、図示せぬドライブでコンピュータ読取可能な記録媒体にこれらのプログラムが記録されていても良い。また、記録媒体としては、例えば、ＣＤ−ＲＯＭ、ＤＶＤディスク、ＵＳＢメモリ等の可搬型記録媒体、フラッシュメモリ等の半導体メモリ等でも良い。
【００２４】
ディスプレイ７０は、プロセッサ５０において処理された画像ファイルや電子メールを表示する表示手段である。
【００２５】
操作キー８０は、ユーザからの操作の入力を受けるボタンやタッチパッド等の入力装置である。
【００２６】
このような携帯通信端末１を用いて電子メールを作成する際に、ユーザは、操作キー８０を通じて、電子メールの作成コマンドをプロセッサ５０に入力する。その結果、ディスプレイ７０には、メール編集画面が表示される。メール編集画面は、例えばテキスト等のメール本文を入力する本文入力領域と、例えば画像データ等のファイルを設定する（言い換えれば）添付する添付ファイル設定領域とを含んでいる。続いて、ユーザは、該電子メールに添付する画像データを設定する。言い換えれば、ユーザは、添付ファイル設定領域に対して画像データを設定する。このときの画像データは、カメラ４０により撮影された画像データであってよく、また何らかの手段によりメモリ６０（より具体的には、ＲＡＭ６２）内に格納された画像データであってもよい。
【００２７】
ユーザは、該電子メールについて、メール本文のテキストを、操作キー８０を介して入力する。ユーザが、絵文字や背景画像、背景色等の付加コンテンツを電子メールに対して付加する操作を行う場合、プロセッサ５０は、メモリ６０内に格納される付加コンテンツ（言い換えれば、付加コンテンツを含んでいる付加コンテンツファイル）を参照する。更にプロセッサ５０は、付加可能な付加コンテンツを、一覧形式等のユーザが選択可能な態様でディスプレイ７０に表示する。このとき、プロセッサ５０は、電子メールに添付される画像データに付加される付加情報を参照し、該付加情報に関連する付加コンテンツが優先的にユーザによって選択されるように、付加コンテンツの表示の態様を決定する。優先的に選択される表示の態様とは、所望の付加コンテンツについて、ユーザが選択する際の動作や操作が相対的に軽減される態様等が一例としてあげられる。より具体的には、例えば、付加情報に対して関連性が比較的高い付加コンテンツは、比較的ユーザによって発見され易いような表示形式で表示されることで、優先的に選択されるように表示される。或いは、例えば、付加情報に対して関連性が比較的高い付加コンテンツは、選択用のカーソルの基準位置から相対的に近い位置に表示されることで、優先的に選択されるように表示される。
【００２８】
画像データの付加情報は、例えば、画像データの取得時の状況を示していてもよい。画像データの取得時の状況として、例えば、画像データの撮影時間、撮影場所、又は撮影時の明るさ、フラッシュの有無、焦点距離等の撮影時のカメラ４０の設定等が一例としてあげられる。
【００２９】
或いは、画像データの付加情報は、画像データにおける被写体についての情報であってよい。被写体についての情報として、例えば、被写体に応じてユーザが撮影時又は撮影後に設定する、被写体についての分類を示す情報が一例としてあげられる。被写体についての分類として、例えば、人物という分類や、建築物という分類や、樹木という分類や、風景という分類等が一例としてあげられる。また、画像データが人物の人物画像を含んでいる場合には、画像データの付加情報は、公知の笑顔度測定機能により測定される被写体の人物の笑顔度を示す情報等であってもよい。
【００３０】
このような構成により、携帯通信端末１を用いることでユーザは、従来の携帯電話等を比較してより簡易な操作により、画像データが添付された電子メールに対して、該画像データと関連のある付加コンテンツを付加することが出来る。以下に、より具体的な動作について説明する。
【００３１】
（２）第１動作例
図２乃至図７を参照して、携帯通信端末１における、電子メールに添付される画像データの付加情報に応じた付加コンテンツの表示の態様の決定処理の一の例について説明する。図２、図４及び図５は、電子メールに添付される画像データの付加情報の一例として、画像データの被写体についてのカテゴリを示す情報に応じた、付加コンテンツの表示の態様の決定のための一連の処理の流れについて示すフローチャートである。図３は、画像データに付加される付加情報の一例であるＥＸＩＦデータの例を示すデータ構造図である。図６は、ディスプレイ７０の表示例を示す平面図である。図７は、カテゴリ背景テーブルの例を示すデータ構造図である。
【００３２】
尚、以下に説明する画像データは、ＪＰＥＧ（Joint Photographic Experts Group）等の圧縮方式に応じた画像データであって、例えば、画像データに係る付加情報を記録可能な規格（例えば、ＥＸＩＦ（Exchangeable Image File Format）等）に応じた画像データを一例としている。第１動作例では、画像データに付加される付加情報であるＥＸＩＦデータとして、画像データの被写体を分類するためのカテゴリを用いている。尚、これらの形式に限られず、何らかの画像データと、該画像データと一体で又は関連付けて何らかの付加情報を格納可能な形式であれば適宜採用されていてもよい。
【００３３】
先ず、図２を参照して画像データの撮影と、該画像データについての付加情報の設定処理について説明する。尚、図２に示される一連の動作は、携帯通信端末１の機能とは独立して実施されるものであってもよく、画像を撮影することでデジタル画像データを作成し、該画像データに対して付加情報を設定する処理が実現可能なデジタルカメラ等の何らかの機器を用いて実施されるものであってよい。
【００３４】
図２に示されるように、先ず、画像データを撮影する機器について、画像の被写体についてのカテゴリ記録機能が有効であるか否かが判定される（ステップＳ１０１）。カテゴリ記録機能が有効である機器により、画像データの撮影が実行される場合（ステップＳ１０１：Ｙｅｓ、且つステップＳ１０２：Ｙｅｓ）、機器は、撮影した画像についてパターン認識等、何らかの画像解析処理を行うことで、画像データの被写体について類似するカテゴリを検索する（ステップＳ１０３）。そして、機器は、検索結果を画像データの付加情報であるＥＸＩＦデータに書き込む（ステップＳ１０４）。
【００３５】
図３に画像データに付加される付加情報の一例であるＥＸＩＦデータの例を示す。図３に示されるＥＸＩＦデータは、紅葉を写した写真等の画像データに付加されるものであり、画像データの被写体について類似するカテゴリを格納するものである。図３に示されるＥＸＩＦデータの例では、バイナリ形式の画像データについて、ＥＸＩＦデータのうち、画像データの被写体のカテゴリを示す「ＥＸＩＦ ＩＤ：ｃａｔｅｇｏｒｙ」との項目に対して「紅葉」との値が格納される。
【００３６】
図２に戻り説明を続ける。機器において、カテゴリ記録機能が有効でない場合（ステップＳ１０１：Ｎｏ）、画像の撮影のみ実行される（ステップＳ１０５）。
【００３７】
その後、機器では、画像データ、及び存在する場合には該画像データに付加されるＥＸＩＦデータがメモリに格納される（ステップＳ１０６）。
【００３８】
このような一連の動作により、画像データと、該画像データの被写体について、類似するカテゴリを示すＥＸＩＦデータとがメモリに格納される。
【００３９】
次に、図４を参照して、ユーザが携帯通信端末１を使用して電子メールを作成する場合の該電子メールに対する付加コンテンツである背景画像の設定時の動作について説明する。
【００４０】
図４に示されるように、ディスプレイ１には、電子メールを編集するためのメール編集画面が表示される（ステップＳ２０１）。メール編集画面は、図６（ａ）に示すように、電子メールの宛先となるメールアドレスを入力する宛先アドレス領域と、電子メールのタイトル（サブジェクト：Ｓｕｂｊｅｃｔ）を入力するタイトル領域と、電子メールに添付されている画像データを示す添付ファイル設定領域と、メール本文を入力する本文入力領域とを含んでいる。
【００４１】
再び図４において、ユーザは、このようなメール編集画面を用いて、電子メールの編集（例えば、メール本文の入力や、画像データの添付等）を行う（ステップＳ２０２）。
【００４２】
このとき、プロセッサ５０は、携帯通信端末１を利用するユーザによって、背景画像の設定を指示するコマンドが入力されたか否かを判定する（ステップＳ２０３）。
【００４３】
背景画像の設定の指示は、例えば図６（ｂ）に示す画面（本文編集画面）を用いて行われる。図６（ｂ）に示すように、メール編集画面のうちの本文入力領域をユーザが選択すると、ディスプレイ７０に表示されている画面は、図６（ａ）に示すメール編集画面から図６（ｂ）に示す本文編集画面に切り替わる。本文編集画面は、本文テキストの入力を受け付ける入力領域と、背景画像の設定の指示を受け付ける背景ボタン領域とを含んでいる。ユーザが背景ボタン領域を選択した場合には、ユーザによって、背景画像の設定を指示するコマンドが入力されたと判定される。
【００４４】
再び図４において、背景画像の設定を指示するコマンドが入力された場合（ステップＳ２０３：Ｙｅｓ）、先ず、プロセッサ５０により、電子メール（例えば、現在編集中の電子メール）に画像データが添付されているか否かの判定が行われる（ステップＳ２０４）。
【００４５】
画像データが添付されていない場合（ステップＳ２０４：Ｎｏ）、プロセッサ５０は、携帯通信端末１のメモリ６０（より具体的には、ＲＡＭ６２）内に格納されているカテゴリ背景テーブルに含まれる背景画像の一覧を表示するようにディスプレイ７０を制御する。その結果、ディスプレイ７０は、メモリ６０に格納されている（或いは、図７に示すカテゴリ背景テーブルによってカテゴリが特定される）背景画像の一覧を、予め設定された態様で又は任意の態様で（例えば、シリアル番号順や、名称順等で表示される態様で）表示する（ステップＳ２０６）。
【００４６】
より具体的には、カテゴリ背景テーブルは、図７に示すように、背景画像のファイル名と当該ファイル名によって特定される背景画像のカテゴリとが一体となったレコードを複数含んでいる。例えば、図７に示すカテゴリ背景テーブルは、「山の背景．ｊｐｇ」というファイル名で特定される背景画像のカテゴリが「山」であることを示している。例えば、図７に示すカテゴリ背景テーブルは、「海の背景．ｊｐｇ」というファイル名で特定される背景画像のカテゴリが「海」であることを示している。例えば、図７に示すカテゴリ背景テーブルは、「紅葉の背景１．ｊｐｇ」というファイル名で特定される背景画像のカテゴリが「紅葉」であることを示している。例えば、図７に示すカテゴリ背景テーブルは、「紅葉の背景２．ｊｐｇ」というファイル名で特定される背景画像のカテゴリが「紅葉」であることを示している。例えば、図７に示すカテゴリ背景テーブルは、「竹の背景．ｊｐｇ」というファイル名で特定される背景画像のカテゴリが「竹」であることを示している。
【００４７】
画像データが添付されていない場合（図４のステップＳ２０４：Ｎｏ）、ディスプレイ７０は、メモリ６０に格納されている背景画像の一覧を、背景画像のカテゴリを考慮することなく表示する。例えば、図６（ｃ）に示すように、ディスプレイ７０は、山の背景を選択するためのテキストと、海の背景を選択するためのテキストと、紅葉の背景１を選択するためのテキストと、紅葉の背景２を選択するためのテキストと、竹の背景を選択するためのテキストとを含む背景画像一覧表示画面を表示する。
【００４８】
その後、背景画像一覧表示画面上で背景画像を選択する指示がユーザから入力された場合には、プロセッサ５０は、選択された背景画像をメモリ６０から読み込むと共に、読み込んだ背景画像をディスプレイ７０に表示する。その結果、図６（ｄ）に示すように、ディスプレイ７０の背景（例えば、本文編集画面の背景）が、読み込んだ背景画像に置き換わる。
【００４９】
再び図４において、他方で、画像データが添付されている場合（ステップＳ２０４：Ｙｅｓ）、携帯通信端末１のプロセッサ５０は、該画像データに付加されるＥＸＩＦデータを参照することで、該ＥＸＩＦデータに応じた背景画像を表示するよう、カテゴリ連動背景画像一覧表示処理を実行する（ステップＳ２０５）。
【００５０】
カテゴリ連動背景画像一覧表示処理について、図５を参照して説明する。図５は、携帯通信端末１における、カテゴリ連動背景画像一覧表示処理の流れを示すフローチャートである。図５に示されるように、携帯通信端末１のプロセッサ５０は、先ず、ユーザが作成する電子メールに添付される添付画像のＥＸＩＦデータを参照して、画像データのカテゴリ、つまりＥＸＩＦ ＩＤ：ｃａｔｅｇｏｒｙの値を取得する（ステップＳ３０１）。
【００５１】
画像データの付加情報にカテゴリの設定がある場合（ステップＳ３０２：Ｙｅｓ）、プロセッサ５０は、メモリ６０（より具体的には、ＲＡＭ６２）を参照して、取得したカテゴリに対応する背景画像一覧の読み込みを行う（ステップＳ３０３）。このとき、プロセッサ５０は、カテゴリ背景テーブル（図７参照）に含まれるカテゴリと、画像データの付加情報に設定されているカテゴリとを比較することで、画像データの付加情報から取得したカテゴリに対応する背景画像の一覧の読み込みを行う。例えば、図３に示されるように、取得したカテゴリが「紅葉」である場合、プロセッサ５０は、カテゴリ背景テーブルに含まれるカテゴリが「紅葉」となっている背景画像を読み込む（ステップＳ３０３）。言い換えれば、図３に示されるように、取得したカテゴリが「紅葉」である場合、プロセッサ５０は、カテゴリ背景テーブルに格納される背景画像の内、紅葉と関連のある背景画像（例えば、観念的に関連性を想起するものや、予め「紅葉」に関連するキーワードが設定されるもの）を読み込む（ステップＳ３０３）。その結果、図６（ｅ）に示すように、ディスプレイ７０は、紅葉の背景１を選択するためのテキストと、紅葉の背景２を選択するためのテキストとを含むカテゴリ連動背景画像一覧表示画面を表示する。
【００５２】
尚、このとき、画像データの付加情報にカテゴリの設定がない場合（ステップＳ３０２：Ｎｏ）、プロセッサ５０は、特段の動作をすることなく、メモリ６０内に格納される背景画像を読み込む。そして、プロセッサ５０は、読み込んだ背景画像をディスプレイ７０に表示する（ステップＳ３０４）。
【００５３】
図４に戻り、背景画像設定のための処理について説明を再開する。カテゴリ連動背景画像一覧表示処理（ステップＳ２０５）が実施される場合、ユーザは、紅葉を撮影した画像データを添付した電子メールについて、紅葉と関連性がある背景画像がより選択し易いよう表示されたディスプレイ７０を参照して、背景画像を設定することが出来る。
【００５４】
以上、説明した動作によれば、ユーザが電子メールを作成する際に、電子メールに添付した画像データに応じた背景画像が相対的に選択し易いよう、ディスプレイ７０に表示される。従って、添付した画像データに関連する背景画像を設定する際に、ユーザの操作を低減することが出来る。このため、ユーザは、電子メールを背景画像により装飾することで、よりコミュ二ケーションの円滑化を図ることが出来るとの利点がある。
【００５５】
（３）第２動作例
図８乃至図１３を参照して、携帯通信端末１における、電子メールに添付される画像データの付加情報に応じた付加コンテンツの表示の態様の決定処理の他の例について説明する。図８、図１０及び図１１は、電子メールに添付される画像データの付加情報の一例として、画像データの被写体が人物の表情を含む場合に、該表情について測定される評価値を指標として、付加コンテンツの表示の態様を決定するための一連の処理の流れについて示すフローチャートである。ここでいう評価値とは、人物の表情を解析し、笑顔等のレベルを数値で表したものである。以下では、評価値の一例として笑顔度を用いて説明するものとする。図９は、画像データに付加される付加情報の一例であるＥＸＩＦデータの例を示すデータ構造図である。図１２は、ディスプレイ７０の表示例を示す平面図である。図１３は、絵文字笑顔テーブルの例を示すデータ構造図である。
【００５６】
図８を参照して画像データの撮影と、該画像データに含まれる人物の笑顔度を測定し、測定した笑顔度を付加情報として設定する処理との流れについて説明する。尚、図８に示される一連の動作は、携帯通信端末１の機能とは独立して実施されるものであってもよく、公知の笑顔度測定機能を有するデジタルカメラ等の何らかの機器を用いて実施されるものであってよい。
【００５７】
図８に示されるように、画像データを撮影する機器について、画像の被写体についての笑顔度測定機能が有効であるか否かが判定される（ステップＳ４０１）。笑顔度測定機能が有効である機器により、画像データの撮影が実行される場合（ステップＳ４０１：Ｙｅｓ、）、機器は、撮影した画像における人物の表情について、パターン認識等、何らかの画像解析処理を行うことで、画像データの笑顔度を測定する（ステップＳ４０２）。笑顔度測定機能を有する機器の一例として、例えば、被写体となる人物の表情の笑顔度を測定し、笑顔度が所定の閾値以上となる場合にシャッタを切る機能を有するデジタルカメラ等が用いられてよい。
【００５８】
笑顔度を測定した上で、人物の画像データの撮影が実行される場合（ステップＳ４０２：Ｙｅｓ）、機器では、画像データの付加情報であるＥＸＩＦデータに測定された笑顔度を書き込む（ステップＳ４０４）。
【００５９】
図９に画像データに付加されるＥＸＩＦデータの例を示す。図９に示されるＥＸＩＦデータは、人物の表情を被写体に含む写真等の画像データに付加されるものであり、測定した笑顔度を格納するものである。図９に示されるＥＸＩＦデータの例では、バイナリ形式の画像データについて、ＥＸＩＦデータのうち、画像データの被写体の笑顔度を示す「ＥＸＩＦ ＩＤ：ｓｍｉｌｅ」との項目に対して測定された笑顔度の値が格納される。
【００６０】
図８に戻り説明を続ける。機器において、笑顔度測定機能が有効でない場合（ステップＳ４０１：Ｎｏ）、画像の撮影のみ実行される（ステップＳ４０５）。
【００６１】
その後、機器では、画像データ、及び存在する場合には該画像データに付加されるＥＸＩＦデータがデータとしてメモリに格納される（ステップＳ４０６）。
【００６２】
このような一連の動作により、画像データと、該画像データの被写体である人物の表情について、測定された笑顔度を示すＥＸＩＦデータとがメモリに格納される。
【００６３】
次に、図１０を参照して、ユーザが携帯通信端末１を使用して電子メールを作成する場合の該電子メールに対する付加コンテンツである絵文字の設定時の動作について説明する。
【００６４】
図１０に示されるように、ディスプレイ１には、電子メールを編集するためのメール編集画面が表示される（ステップＳ５０１）。メール編集画面は、図１２（ａ）に示すように、電子メールの宛先となるメールアドレスを入力する宛先アドレス領域と、電子メールのタイトル（サブジェクト：Ｓｕｂｊｅｃｔ）を入力するタイトル領域と、電子メールに添付されている画像データを示す添付ファイル設定領域と、メール本文を入力する本文入力領域とを含んでいる。
【００６５】
再び図１０において、ユーザは、このようなメール編集画面を用いて、電子メールの編集（例えば、メール本文の入力や、画像データの添付等）を行う（ステップＳ５０２）。
【００６６】
このとき、プロセッサ５０は、携帯通信端末１を利用するユーザによって、絵文字の入力を指示するコマンドが入力されたか否かを判定する（ステップＳ５０３）。
【００６７】
絵文字の入力の指示は、例えば図１２（ｂ）に示す画面（本文編集画面）を用いて行われる。図１２（ｂ）に示すように、メール編集画面のうちの本文入力領域をユーザが選択すると、ディスプレイ７０に表示されている画面は、図１２（ａ）に示すメール編集画面から図１２（ｂ）に示す本文編集画面に切り替わる。本文編集画面は、本文テキストの入力を受け付ける入力領域と、絵文字の入力の指示を受け付ける絵文字ボタン領域とを含んでいる。ユーザが絵文字ボタン領域を選択した場合には、ユーザによって、絵文字の入力を指示するコマンドが入力されたと判定される。
【００６８】
再び図１０において、絵文字の入力を指示するコマンドが入力された場合（ステップＳ５０３：Ｙｅｓ）、先ず、プロセッサ５０により、電子メール（例えば、現在編集中の電子メール）に画像データが添付されているか否かの判定が行われる（ステップＳ５０４）。
【００６９】
画像データが添付されていない場合（ステップＳ５０４：Ｎｏ）、プロセッサ５０は、携帯通信端末１のメモリ６０（より具体的には、ＲＡＭ６２）内に格納されている絵文字笑顔テーブルに含まれる絵文字の一覧を表示するようにディスプレイ７０を制御する。その結果、ディスプレイ７０は、メモリ６０に格納されている（或いは、図７に示す絵文字笑顔テーブルによって笑顔度が特定される）絵文字の一覧を、予め設定された態様で又は任意の態様で（例えば、シリアル番号順や、名称順等で表示される態様で）表示する（ステップＳ５０６）。
【００７０】
より具体的には、絵文字笑顔テーブルは、図１３に示すように、絵文字のファイル名と当該ファイル名によって特定される絵文字の笑顔度とが一体となったレコードを複数含んでいる。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字１．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「５０％以下」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字１．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「５０％以下」である画像データに付加されることを示している。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字２．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「５０％以下」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字２．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「５０％以下」である画像データに付加されることを示している。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字３．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「５０％超え」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字３．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「５０％超え」である画像データに付加されることを示している。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字４．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「５０％超え」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字４．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「５０％超え」である画像データに付加されることを示している。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字５．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「８０％超え」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字５．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「８０％超え」である画像データに付加されることを示している。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字６．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「８０％超え」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字６．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「８０％超え」である画像データに付加されることを示している。
【００７１】
画像データが添付されていない場合（図１０のステップＳ５０４：Ｎｏ）、ディスプレイ７０は、メモリ６０に格納されている絵文字の一覧を、絵文字の笑顔度を考慮することなく表示する。例えば、図１２（ｃ）に示すように、ディスプレイ７０は、絵文字１を選択するためのテキストと、絵文字２を選択するためのテキストと、絵文字３を選択するためのテキストと、絵文字４を選択するためのテキストと、絵文字５を選択するためのテキストと、絵文字６を選択するためのテキストとを含む絵文字一覧表示画面を表示する。
【００７２】
その後、絵文字一覧表示画面上で絵文字を選択する指示がユーザから入力された場合には、プロセッサ５０は、選択された絵文字をメモリ６０から読み込むと共に、読み込んだ絵文字をディスプレイ７０に表示する。
【００７３】
再び図１０において、他方で、画像データが添付されている場合（ステップＳ５０４：Ｙｅｓ）、携帯通信端末１のプロセッサ５０は、該画像データに付加されるＥＸＩＦデータを参照することで、該ＥＸＩＦデータに応じた絵文字を表示するよう、笑顔度連動絵文字一覧表示処理を実行する（ステップＳ５０５）。
【００７４】
笑顔度連動絵文字一覧表示処理について、図１１を参照して説明する。図１１は、携帯通信端末１における、笑顔度連動絵文字一覧表示処理の流れを示すフローチャートである。図１１に示されるように、携帯通信端末１のプロセッサ５０は、先ず、ユーザが作成する電子メールに添付される添付画像のＥＸＩＦデータを参照して、画像データの笑顔度、つまりＥＸＩＦ ＩＤ：ｓｍｉｌｅの値を取得する（ステップＳ６０１）。
【００７５】
画像データの付加情報に笑顔度の設定があり、該笑顔度が８０％を上回る場合（ステップＳ６０２：Ｙｅｓ）、プロセッサ５０は、メモリ６０（より具体的には、ＲＡＭ６２）を参照して、笑顔度が８０％を上回る場合に対応する絵文字一覧の読み込みを行う（ステップＳ６０３）。このとき、プロセッサ５０は、絵文字笑顔テーブル（図１３参照）に含まれる笑顔度と、画像データの付加情報に設定されている笑顔度とを比較することで、画像データの付加情報から取得した笑顔度に対応する絵文字の一覧の読み込みを行う。測定される笑顔度が８０％を上回る画像データが添付されている電子メールでは、ユーザは「大喜びしている状態」や「ごく親しい友人に対する感情」を表したいと考えていることが推測出来る。このため、笑顔度が８０％を上回る場合、推測される電子メールの内容に相応しい、楽しげな印象を与える絵文字や、親しい友人に向けられる絵文字等のグループが読み込まれる。より具体的には、画像データの付加情報の笑顔度が８０％を上回る場合には、プロセッサ５０は、絵文字笑顔テーブルに含まれる笑顔度が「８０％超え」となっている絵文字を読み込む（ステップＳ６０３）。その結果、図１２（ｄ）に示すように、ディスプレイ７０は、絵文字５を選択するためのテキストと、絵文字６を選択するためのテキストとを含むカテゴリ連動絵文字一覧表示画面を表示する。
【００７６】
画像データの付加情報に設定される笑顔度が８０％以下であり、５０％を上回る場合（ステップＳ６０２：Ｎｏ、且つステップＳ６０４：Ｙｅｓ）、プロセッサ５０は、メモリ６０を参照して、笑顔度が５０％を上回る場合に対応する絵文字一覧の読み込みを行う（ステップＳ６０５）。このときも、プロセッサ５０は、絵文字笑顔テーブル（図１３参照）に含まれる笑顔度と、画像データの付加情報に設定されている笑顔度とを比較することで、画像データの付加情報から取得した笑顔度に対応する絵文字の一覧の読み込みを行う。測定される笑顔度が５０％乃至８０％である画像データが添付されている電子メールでは、ユーザは「喜んでいる状態」や「友人に対する親しみの感情」を表したいと考えていることが推測出来る。このため、笑顔度が５０％乃至８０％である場合、推測される電子メールの内容に相応しい、親しげな印象を与える絵文字等のグループが読み込まれる。より具体的には、画像データの付加情報の笑顔度が８０％以下であり且つ５０％を上回る場合には、プロセッサ５０は、絵文字笑顔テーブルに含まれる笑顔度が「５０％超え」となっている絵文字を読み込む（ステップＳ６０５）。その結果、図１２（ｅ）に示すように、ディスプレイ７０は、絵文字３を選択するためのテキストと、絵文字４を選択するためのテキストとを含むカテゴリ連動絵文字一覧表示画面を表示する。このとき、更に、プロセッサ５０は、絵文字笑顔テーブルに含まれる笑顔度が「８０％超え」となっている絵文字もまた読み込んでもよい（ステップＳ６０５）。その結果、図１２（ｆ）に示すように、ディスプレイ７０は、絵文字３を選択するためのテキストと、絵文字４を選択するためのテキストと、絵文字５を選択するためのテキストと、絵文字６を選択するためのテキストとを含むカテゴリ連動絵文字一覧表示画面を表示する。
【００７７】
画像データの付加情報に設定される笑顔度が５０％以下である場合（ステップＳ６０２：Ｎｏ、且つステップＳ６０４：Ｎｏ）、プロセッサ５０は、メモリ６０を参照して、笑顔度が５０％以下となる場合に対応する絵文字一覧の読み込みを行う（ステップＳ６０６）。このときも、プロセッサ５０は、絵文字笑顔テーブル（図１３参照）に含まれる笑顔度と、画像データの付加情報に設定されている笑顔度とを比較することで、画像データの付加情報から取得した笑顔度に対応する絵文字の一覧の読み込みを行う。測定される笑顔度が５０％以下である画像データが添付されている電子メールでは、ユーザは「怒っている状態」や「格別親しくない相手への感情」を表したいと考えていることが推測出来る。このため、笑顔度が５０％以下である場合、推測される電子メールの内容に相応しい、怒った印象を与える絵文字や、仕事上の付き合いのある人間に対して向けられる絵文字等のグループが読み込まれる。より具体的には、画像データの付加情報の笑顔度が５０％以下である場合には、プロセッサ５０は、絵文字笑顔テーブルに含まれる笑顔度が「５０％以下」となっている絵文字を読み込む（ステップＳ６０３）。その結果、図１２（ｇ）に示すように、ディスプレイ７０は、絵文字１を選択するためのテキストと、絵文字２を選択するためのテキストとを含むカテゴリ連動絵文字一覧表示画面を表示する。
【００７８】
尚、このとき、画像データの付加情報に笑顔度の設定がない場合、プロセッサ５０は、特段の動作をすることなく、メモリ６０内に格納される絵文字を読み込む。
【００７９】
そして、プロセッサ５０は、読み込んだ絵文字をディスプレイ７０に表示する（ステップＳ６０７）。
【００８０】
図１０に戻り、絵文字設定のための処理について説明を再開する。笑顔度連動絵文字一覧表示処理（ステップＳ５０５）が実施される場合、ユーザは、人物の表情を撮影した画像データを添付した電子メールについて、笑顔度に応じた絵文字がより選択し易いよう表示されたディスプレイ７０を参照して、絵文字を設定することが出来る。他方で、笑顔度連動絵文字一覧表示処理が実施されない場合、笑顔度との関連性とは関係なく、ユーザが入力した文面に応じた絵文字がディスプレイ７０に表示される（ステップＳ５０３）。
【００８１】
以上、説明した動作によれば、ユーザが電子メールを作成する際に、ユーザが入力した文面に応じてディスプレイ７０に表示される、挿入が推奨される絵文字（例えば、「久しぶり」との文面を入力した場合に、該文面の末尾に挿入するよう、連動して表示される絵文字）について、電子メールに添付した画像データに応じた絵文字が相対的に選択し易いよう、ディスプレイ７０に表示される。従って、添付した画像データに関連する絵文字を設定する際に、ユーザの操作を低減することが出来る。このため、ユーザは、電子メールを絵文字により装飾することで、よりコミュ二ケーションの円滑化を図ることが出来るとの利点がある。
【００８２】
上述した第１動作例及び第２動作例では、電子メールに付加する付加コンテンツとして、背景画像及び絵文字を例として説明した。この他、付加コンテンツとして、ユーザによる文面の入力に応じて、文脈の判断によって予測的に表示される入力候補の文面や、その他、電子メールを装飾するための画像、テンプレート等が用いられてもよい。少なくとも、複数の候補の中からユーザにより選択可能であって、電子メールに対して直接的、又は間接的に付加可能な何らかのコンテンツ（言い換えれば、データ）であれば、本発明に係る付加コンテンツとして適宜採用され得る。
【００８３】
本発明は、上述した実施例に限られるものではなく、請求の範囲及び明細書全体から読み取れる発明の要旨或いは思想に反しない範囲で適宜変更可能であり、そのような変更を伴う通信端末装置及びコンピュータプログラム等もまた本発明の技術的範囲に含まれるものである。
【符号の説明】
【００８４】
１ 電子メール端末、
１０ アンテナ、
２０ 無線部、
４０ カメラ、
５０ プロセッサ、
６０ メモリ、
７０ ディスプレイ、
８０ 操作キー。
【技術分野】
【０００１】
本発明は、画像等のファイルを添付したメールを送受信する通信端末装置、及びコンピュータプログラムの技術分野に関する。
【背景技術】
【０００２】
この種の通信端末装置として、カメラにより撮影した画像データをメール（例えば、電子メール）に添付して送信可能な機能を有するものがある。このとき、撮影した画像データに何らかの付加情報を付加する機能を有するものがある。
【０００３】
このように撮影した画像データに付加情報を設定する機能として、例えば、人物の顔写真の画像データにおける笑顔度を測定する機能について先行技術文献に説明されている。笑顔度数測定機能として、例えば、人物の笑顔度を推定した上で、該笑顔度の時系列的な推移を判定して、所望のタイミングで画像が撮影されるように撮影タイミングをシフトする、笑顔シャッタと呼ばれる機能が用いられている。また、画像データに対する付加情報を用いた他の例として、撮影した画像データを画像認識することで、画像データを被写体に応じたカテゴリに分類する技術がある。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−２３９５０３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
メールに対して、画像データを添付する他に、絵文字や背景画像等のコンテンツを付加する機能を有する通信端末装置がある。このようなコンテンツをメールに付加することで、ユーザのメールを作成する際の感情などを一層表現しやすくなり、コミュニケーションの円滑化という点で有益である。更に、メールに添付される画像データに応じて、メールの文面に付加する絵文字や背景画像を設定することでその効果は更に顕著なものとなる。
【０００６】
しかしながら、従来の通信端末装置では、メールに添付される画像データと、メール及びメールに付加されるコンテンツとの間の連携について着目したものがなかった。このため、画像データと、メールとの間の連携を図るためには、ユーザは、自らの操作により実行することを求められ、操作性が良好であるとは言い難いという技術的な問題があった。
【０００７】
尚、このような技術的な問題点は、メールに添付される画像データとメール及びメールに付加されるコンテンツとの間の連携に限らず、メールに添付される任意のファイルとメール及びメールに付加される任意のファイルとの間の連携においても同様に生じ得る。
【０００８】
本発明は、上述した技術的な問題点に鑑みてなされたものであり、メールの作成の際に、メールに添付されるファイルと、メールに付加されるファイルとの間の連携をより強化可能な通信端末装置及びコンピュータプログラムを提供することを課題とする。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、開示の通信端末装置は、メモリと、処理部とを備える。メモリは、ファイルを格納している。処理部は、添付ファイル設定領域と、本文入力領域と、を有するメール編集画面を、表示手段に表示させる。更に、処理部は、本文入力領域に対するファイルの設定指示を受付けた場合に、添付ファイル設定領域に設定されている第一のファイルに含まれる付加情報をメモリから抽出する。更に、処理部は、抽出された付加情報に応じた第二のファイルを、メモリから抽出する。更に、処理部は、抽出された第二のファイルを本文入力領域に設定する。
【００１０】
また、開示のコンピュータプログラムは、ファイルを格納したメモリと処理部とを備えた通信端末装置によって実行されるコンピュータプログラムである。コンピュータプログラムは、添付ファイル設定領域と本文入力領域とを有するメール編集画面を表示手段に表示させるように処理部を動作させる。更に、コンピュータプログラムは、本文入力領域に対するファイルの設定指示を受付けた場合に、添付ファイル設定領域に設定されている第一のファイルに含まれる付加情報をメモリから抽出するように処理部を動作させる。更に、コンピュータプログラムは、抽出された付加情報に応じた第二のファイルを、メモリから抽出するように処理部を動作させる。更に、コンピュータプログラムは、抽出された第二のファイルを本文入力領域に設定するように処理部を動作させる。
【発明の効果】
【００１１】
開示の通信端末装置によれば、電子メールの作成時に、ユーザが該電子メールに添付したファイルに応じて、適切な他のファイルを好適に選択可能となる。
【図面の簡単な説明】
【００１２】
【図１】携帯通信端末の構成例を示すブロック図である。
【図２】画像データの取得及び付加情報の設定についての動作の一例を示すフローチャートである。
【図３】画像データに付加される付加情報の一例を示す図である。
【図４】付加情報に応じた背景画像の選択の動作の流れを示すフローチャートである。
【図５】付加情報に含まれる画像のカテゴリに応じた背景画像の表示の態様を決定する動作の流れを示すフローチャートである。
【図６】ディスプレイの表示例を示す平面図である。
【図７】カテゴリ背景テーブルの例を示すデータ構造図である。
【図８】画像データの取得及び付加情報の設定についての動作の一例を示すフローチャートである。
【図９】画像データに付加される付加情報の一例を示す図である。
【図１０】付加情報に応じた絵文字の選択の動作の流れを示すフローチャートである。
【図１１】付加情報に含まれる笑顔度に応じた絵文字の表示の態様を決定する動作の流れを示すフローチャートである。
【図１２】ディスプレイの表示例を示す平面図である。
【図１３】絵文字笑顔テーブルの例を示すデータ構造図である。
【発明を実施するための形態】
【００１３】
以下に、発明を実施するための実施形態について説明する。
【００１４】
（１）構成例
図１を参照して、通信端末装置の実施形態の構成例について説明する。図１は、通信端末装置の実施形態の一例である携帯通信端末１の構成例について示すブロック図である。
【００１５】
図１に示されるように、携帯通信端末１は、アンテナ１０と、無線部２０と、オーディオ入出力部３０と、カメラ４０と、プロセッサ５０と、メモリ６０と、ディスプレイ７０と、操作キー８０とを備える。
【００１６】
尚、これらの構成は、特に記載する点を除いては、一般的な（言い換えれば、公知の）メール送受信機能及びカメラ等の画像取得機能を有する携帯電話等の無線通信端末が備えるものと同様の構成であってよい。
【００１７】
具体的には、携帯通信端末１のアンテナ１０は、少なくとも電子メールの送受信に係る所定のデータ（例えば、電子メール本文のテキストデータ、添付される画像データ（言い換えれば、画像ファイル）及び該電子メールに付属する任意のデータ（言い換えれば、後述する付加コンテンツ等の任意の付属ファイル）等）について、サーバ等を介した無線通信の送受信を行う。
【００１８】
無線部２０は、アンテナ１０とプロセッサ５０との間で送受信されるデータの信号処理を実施する無線信号処理回路である。例えば、無線部２０は、受信した無線信号を整合するフィルタや、増幅するアンプや、復調用の復調回路等を備える。
【００１９】
オーディオ入出力部３０は、携帯通信端末１を使用してユーザが音声通話を実施するための音声の入出力用のマイク及びスピーカである。尚、オーディオ入出力部３０自体は、以下に説明する携帯通信端末１の機能とは比較的関連が薄いため、詳細な説明は省略する。
【００２０】
カメラ４０は、画像又は動画等を撮影可能なカメラである。カメラ４０では、撮影した画像又は動作について、デジタルデータに変換した上でプロセッサ５０を介してメモリ６０内に格納する。
【００２１】
プロセッサ５０は、携帯通信端末１の各部の動作を制御するＣＰＵ（Central Processing Unit）等の演算装置である。プロセッサ５０は、各部に制御信号を入力することで各部の動作を制御し、また、各部から入力される信号について処理、又は他の部位への入力を仲介する。
【００２２】
メモリ６０は、携帯通信端末１の動作に係るデータを格納するための情報記録装置である。メモリ６０は、例えばプロセッサ５０を動作させるためのソフトウェアが予め記録されるＲＯＭ（Read Only Memory）６１と、携帯通信端末１の動作に応じたデータ（例えば、カメラ４０において撮影された画像データや、電子メールに付加される付加コンテンツデータ等）が格納されるＲＡＭ（Random Access Memory）６２とを含む。
【００２３】
本実施形態で説明する各種の処理は、予め用意されたプログラムをプロセッサ５０で実行することによって実現できる。メモリ６０には、これらのプログラムが予め記憶されている。尚、メモリ６０ではなく、図示せぬドライブでコンピュータ読取可能な記録媒体にこれらのプログラムが記録されていても良い。また、記録媒体としては、例えば、ＣＤ−ＲＯＭ、ＤＶＤディスク、ＵＳＢメモリ等の可搬型記録媒体、フラッシュメモリ等の半導体メモリ等でも良い。
【００２４】
ディスプレイ７０は、プロセッサ５０において処理された画像ファイルや電子メールを表示する表示手段である。
【００２５】
操作キー８０は、ユーザからの操作の入力を受けるボタンやタッチパッド等の入力装置である。
【００２６】
このような携帯通信端末１を用いて電子メールを作成する際に、ユーザは、操作キー８０を通じて、電子メールの作成コマンドをプロセッサ５０に入力する。その結果、ディスプレイ７０には、メール編集画面が表示される。メール編集画面は、例えばテキスト等のメール本文を入力する本文入力領域と、例えば画像データ等のファイルを設定する（言い換えれば）添付する添付ファイル設定領域とを含んでいる。続いて、ユーザは、該電子メールに添付する画像データを設定する。言い換えれば、ユーザは、添付ファイル設定領域に対して画像データを設定する。このときの画像データは、カメラ４０により撮影された画像データであってよく、また何らかの手段によりメモリ６０（より具体的には、ＲＡＭ６２）内に格納された画像データであってもよい。
【００２７】
ユーザは、該電子メールについて、メール本文のテキストを、操作キー８０を介して入力する。ユーザが、絵文字や背景画像、背景色等の付加コンテンツを電子メールに対して付加する操作を行う場合、プロセッサ５０は、メモリ６０内に格納される付加コンテンツ（言い換えれば、付加コンテンツを含んでいる付加コンテンツファイル）を参照する。更にプロセッサ５０は、付加可能な付加コンテンツを、一覧形式等のユーザが選択可能な態様でディスプレイ７０に表示する。このとき、プロセッサ５０は、電子メールに添付される画像データに付加される付加情報を参照し、該付加情報に関連する付加コンテンツが優先的にユーザによって選択されるように、付加コンテンツの表示の態様を決定する。優先的に選択される表示の態様とは、所望の付加コンテンツについて、ユーザが選択する際の動作や操作が相対的に軽減される態様等が一例としてあげられる。より具体的には、例えば、付加情報に対して関連性が比較的高い付加コンテンツは、比較的ユーザによって発見され易いような表示形式で表示されることで、優先的に選択されるように表示される。或いは、例えば、付加情報に対して関連性が比較的高い付加コンテンツは、選択用のカーソルの基準位置から相対的に近い位置に表示されることで、優先的に選択されるように表示される。
【００２８】
画像データの付加情報は、例えば、画像データの取得時の状況を示していてもよい。画像データの取得時の状況として、例えば、画像データの撮影時間、撮影場所、又は撮影時の明るさ、フラッシュの有無、焦点距離等の撮影時のカメラ４０の設定等が一例としてあげられる。
【００２９】
或いは、画像データの付加情報は、画像データにおける被写体についての情報であってよい。被写体についての情報として、例えば、被写体に応じてユーザが撮影時又は撮影後に設定する、被写体についての分類を示す情報が一例としてあげられる。被写体についての分類として、例えば、人物という分類や、建築物という分類や、樹木という分類や、風景という分類等が一例としてあげられる。また、画像データが人物の人物画像を含んでいる場合には、画像データの付加情報は、公知の笑顔度測定機能により測定される被写体の人物の笑顔度を示す情報等であってもよい。
【００３０】
このような構成により、携帯通信端末１を用いることでユーザは、従来の携帯電話等を比較してより簡易な操作により、画像データが添付された電子メールに対して、該画像データと関連のある付加コンテンツを付加することが出来る。以下に、より具体的な動作について説明する。
【００３１】
（２）第１動作例
図２乃至図７を参照して、携帯通信端末１における、電子メールに添付される画像データの付加情報に応じた付加コンテンツの表示の態様の決定処理の一の例について説明する。図２、図４及び図５は、電子メールに添付される画像データの付加情報の一例として、画像データの被写体についてのカテゴリを示す情報に応じた、付加コンテンツの表示の態様の決定のための一連の処理の流れについて示すフローチャートである。図３は、画像データに付加される付加情報の一例であるＥＸＩＦデータの例を示すデータ構造図である。図６は、ディスプレイ７０の表示例を示す平面図である。図７は、カテゴリ背景テーブルの例を示すデータ構造図である。
【００３２】
尚、以下に説明する画像データは、ＪＰＥＧ（Joint Photographic Experts Group）等の圧縮方式に応じた画像データであって、例えば、画像データに係る付加情報を記録可能な規格（例えば、ＥＸＩＦ（Exchangeable Image File Format）等）に応じた画像データを一例としている。第１動作例では、画像データに付加される付加情報であるＥＸＩＦデータとして、画像データの被写体を分類するためのカテゴリを用いている。尚、これらの形式に限られず、何らかの画像データと、該画像データと一体で又は関連付けて何らかの付加情報を格納可能な形式であれば適宜採用されていてもよい。
【００３３】
先ず、図２を参照して画像データの撮影と、該画像データについての付加情報の設定処理について説明する。尚、図２に示される一連の動作は、携帯通信端末１の機能とは独立して実施されるものであってもよく、画像を撮影することでデジタル画像データを作成し、該画像データに対して付加情報を設定する処理が実現可能なデジタルカメラ等の何らかの機器を用いて実施されるものであってよい。
【００３４】
図２に示されるように、先ず、画像データを撮影する機器について、画像の被写体についてのカテゴリ記録機能が有効であるか否かが判定される（ステップＳ１０１）。カテゴリ記録機能が有効である機器により、画像データの撮影が実行される場合（ステップＳ１０１：Ｙｅｓ、且つステップＳ１０２：Ｙｅｓ）、機器は、撮影した画像についてパターン認識等、何らかの画像解析処理を行うことで、画像データの被写体について類似するカテゴリを検索する（ステップＳ１０３）。そして、機器は、検索結果を画像データの付加情報であるＥＸＩＦデータに書き込む（ステップＳ１０４）。
【００３５】
図３に画像データに付加される付加情報の一例であるＥＸＩＦデータの例を示す。図３に示されるＥＸＩＦデータは、紅葉を写した写真等の画像データに付加されるものであり、画像データの被写体について類似するカテゴリを格納するものである。図３に示されるＥＸＩＦデータの例では、バイナリ形式の画像データについて、ＥＸＩＦデータのうち、画像データの被写体のカテゴリを示す「ＥＸＩＦ ＩＤ：ｃａｔｅｇｏｒｙ」との項目に対して「紅葉」との値が格納される。
【００３６】
図２に戻り説明を続ける。機器において、カテゴリ記録機能が有効でない場合（ステップＳ１０１：Ｎｏ）、画像の撮影のみ実行される（ステップＳ１０５）。
【００３７】
その後、機器では、画像データ、及び存在する場合には該画像データに付加されるＥＸＩＦデータがメモリに格納される（ステップＳ１０６）。
【００３８】
このような一連の動作により、画像データと、該画像データの被写体について、類似するカテゴリを示すＥＸＩＦデータとがメモリに格納される。
【００３９】
次に、図４を参照して、ユーザが携帯通信端末１を使用して電子メールを作成する場合の該電子メールに対する付加コンテンツである背景画像の設定時の動作について説明する。
【００４０】
図４に示されるように、ディスプレイ１には、電子メールを編集するためのメール編集画面が表示される（ステップＳ２０１）。メール編集画面は、図６（ａ）に示すように、電子メールの宛先となるメールアドレスを入力する宛先アドレス領域と、電子メールのタイトル（サブジェクト：Ｓｕｂｊｅｃｔ）を入力するタイトル領域と、電子メールに添付されている画像データを示す添付ファイル設定領域と、メール本文を入力する本文入力領域とを含んでいる。
【００４１】
再び図４において、ユーザは、このようなメール編集画面を用いて、電子メールの編集（例えば、メール本文の入力や、画像データの添付等）を行う（ステップＳ２０２）。
【００４２】
このとき、プロセッサ５０は、携帯通信端末１を利用するユーザによって、背景画像の設定を指示するコマンドが入力されたか否かを判定する（ステップＳ２０３）。
【００４３】
背景画像の設定の指示は、例えば図６（ｂ）に示す画面（本文編集画面）を用いて行われる。図６（ｂ）に示すように、メール編集画面のうちの本文入力領域をユーザが選択すると、ディスプレイ７０に表示されている画面は、図６（ａ）に示すメール編集画面から図６（ｂ）に示す本文編集画面に切り替わる。本文編集画面は、本文テキストの入力を受け付ける入力領域と、背景画像の設定の指示を受け付ける背景ボタン領域とを含んでいる。ユーザが背景ボタン領域を選択した場合には、ユーザによって、背景画像の設定を指示するコマンドが入力されたと判定される。
【００４４】
再び図４において、背景画像の設定を指示するコマンドが入力された場合（ステップＳ２０３：Ｙｅｓ）、先ず、プロセッサ５０により、電子メール（例えば、現在編集中の電子メール）に画像データが添付されているか否かの判定が行われる（ステップＳ２０４）。
【００４５】
画像データが添付されていない場合（ステップＳ２０４：Ｎｏ）、プロセッサ５０は、携帯通信端末１のメモリ６０（より具体的には、ＲＡＭ６２）内に格納されているカテゴリ背景テーブルに含まれる背景画像の一覧を表示するようにディスプレイ７０を制御する。その結果、ディスプレイ７０は、メモリ６０に格納されている（或いは、図７に示すカテゴリ背景テーブルによってカテゴリが特定される）背景画像の一覧を、予め設定された態様で又は任意の態様で（例えば、シリアル番号順や、名称順等で表示される態様で）表示する（ステップＳ２０６）。
【００４６】
より具体的には、カテゴリ背景テーブルは、図７に示すように、背景画像のファイル名と当該ファイル名によって特定される背景画像のカテゴリとが一体となったレコードを複数含んでいる。例えば、図７に示すカテゴリ背景テーブルは、「山の背景．ｊｐｇ」というファイル名で特定される背景画像のカテゴリが「山」であることを示している。例えば、図７に示すカテゴリ背景テーブルは、「海の背景．ｊｐｇ」というファイル名で特定される背景画像のカテゴリが「海」であることを示している。例えば、図７に示すカテゴリ背景テーブルは、「紅葉の背景１．ｊｐｇ」というファイル名で特定される背景画像のカテゴリが「紅葉」であることを示している。例えば、図７に示すカテゴリ背景テーブルは、「紅葉の背景２．ｊｐｇ」というファイル名で特定される背景画像のカテゴリが「紅葉」であることを示している。例えば、図７に示すカテゴリ背景テーブルは、「竹の背景．ｊｐｇ」というファイル名で特定される背景画像のカテゴリが「竹」であることを示している。
【００４７】
画像データが添付されていない場合（図４のステップＳ２０４：Ｎｏ）、ディスプレイ７０は、メモリ６０に格納されている背景画像の一覧を、背景画像のカテゴリを考慮することなく表示する。例えば、図６（ｃ）に示すように、ディスプレイ７０は、山の背景を選択するためのテキストと、海の背景を選択するためのテキストと、紅葉の背景１を選択するためのテキストと、紅葉の背景２を選択するためのテキストと、竹の背景を選択するためのテキストとを含む背景画像一覧表示画面を表示する。
【００４８】
その後、背景画像一覧表示画面上で背景画像を選択する指示がユーザから入力された場合には、プロセッサ５０は、選択された背景画像をメモリ６０から読み込むと共に、読み込んだ背景画像をディスプレイ７０に表示する。その結果、図６（ｄ）に示すように、ディスプレイ７０の背景（例えば、本文編集画面の背景）が、読み込んだ背景画像に置き換わる。
【００４９】
再び図４において、他方で、画像データが添付されている場合（ステップＳ２０４：Ｙｅｓ）、携帯通信端末１のプロセッサ５０は、該画像データに付加されるＥＸＩＦデータを参照することで、該ＥＸＩＦデータに応じた背景画像を表示するよう、カテゴリ連動背景画像一覧表示処理を実行する（ステップＳ２０５）。
【００５０】
カテゴリ連動背景画像一覧表示処理について、図５を参照して説明する。図５は、携帯通信端末１における、カテゴリ連動背景画像一覧表示処理の流れを示すフローチャートである。図５に示されるように、携帯通信端末１のプロセッサ５０は、先ず、ユーザが作成する電子メールに添付される添付画像のＥＸＩＦデータを参照して、画像データのカテゴリ、つまりＥＸＩＦ ＩＤ：ｃａｔｅｇｏｒｙの値を取得する（ステップＳ３０１）。
【００５１】
画像データの付加情報にカテゴリの設定がある場合（ステップＳ３０２：Ｙｅｓ）、プロセッサ５０は、メモリ６０（より具体的には、ＲＡＭ６２）を参照して、取得したカテゴリに対応する背景画像一覧の読み込みを行う（ステップＳ３０３）。このとき、プロセッサ５０は、カテゴリ背景テーブル（図７参照）に含まれるカテゴリと、画像データの付加情報に設定されているカテゴリとを比較することで、画像データの付加情報から取得したカテゴリに対応する背景画像の一覧の読み込みを行う。例えば、図３に示されるように、取得したカテゴリが「紅葉」である場合、プロセッサ５０は、カテゴリ背景テーブルに含まれるカテゴリが「紅葉」となっている背景画像を読み込む（ステップＳ３０３）。言い換えれば、図３に示されるように、取得したカテゴリが「紅葉」である場合、プロセッサ５０は、カテゴリ背景テーブルに格納される背景画像の内、紅葉と関連のある背景画像（例えば、観念的に関連性を想起するものや、予め「紅葉」に関連するキーワードが設定されるもの）を読み込む（ステップＳ３０３）。その結果、図６（ｅ）に示すように、ディスプレイ７０は、紅葉の背景１を選択するためのテキストと、紅葉の背景２を選択するためのテキストとを含むカテゴリ連動背景画像一覧表示画面を表示する。
【００５２】
尚、このとき、画像データの付加情報にカテゴリの設定がない場合（ステップＳ３０２：Ｎｏ）、プロセッサ５０は、特段の動作をすることなく、メモリ６０内に格納される背景画像を読み込む。そして、プロセッサ５０は、読み込んだ背景画像をディスプレイ７０に表示する（ステップＳ３０４）。
【００５３】
図４に戻り、背景画像設定のための処理について説明を再開する。カテゴリ連動背景画像一覧表示処理（ステップＳ２０５）が実施される場合、ユーザは、紅葉を撮影した画像データを添付した電子メールについて、紅葉と関連性がある背景画像がより選択し易いよう表示されたディスプレイ７０を参照して、背景画像を設定することが出来る。
【００５４】
以上、説明した動作によれば、ユーザが電子メールを作成する際に、電子メールに添付した画像データに応じた背景画像が相対的に選択し易いよう、ディスプレイ７０に表示される。従って、添付した画像データに関連する背景画像を設定する際に、ユーザの操作を低減することが出来る。このため、ユーザは、電子メールを背景画像により装飾することで、よりコミュ二ケーションの円滑化を図ることが出来るとの利点がある。
【００５５】
（３）第２動作例
図８乃至図１３を参照して、携帯通信端末１における、電子メールに添付される画像データの付加情報に応じた付加コンテンツの表示の態様の決定処理の他の例について説明する。図８、図１０及び図１１は、電子メールに添付される画像データの付加情報の一例として、画像データの被写体が人物の表情を含む場合に、該表情について測定される評価値を指標として、付加コンテンツの表示の態様を決定するための一連の処理の流れについて示すフローチャートである。ここでいう評価値とは、人物の表情を解析し、笑顔等のレベルを数値で表したものである。以下では、評価値の一例として笑顔度を用いて説明するものとする。図９は、画像データに付加される付加情報の一例であるＥＸＩＦデータの例を示すデータ構造図である。図１２は、ディスプレイ７０の表示例を示す平面図である。図１３は、絵文字笑顔テーブルの例を示すデータ構造図である。
【００５６】
図８を参照して画像データの撮影と、該画像データに含まれる人物の笑顔度を測定し、測定した笑顔度を付加情報として設定する処理との流れについて説明する。尚、図８に示される一連の動作は、携帯通信端末１の機能とは独立して実施されるものであってもよく、公知の笑顔度測定機能を有するデジタルカメラ等の何らかの機器を用いて実施されるものであってよい。
【００５７】
図８に示されるように、画像データを撮影する機器について、画像の被写体についての笑顔度測定機能が有効であるか否かが判定される（ステップＳ４０１）。笑顔度測定機能が有効である機器により、画像データの撮影が実行される場合（ステップＳ４０１：Ｙｅｓ、）、機器は、撮影した画像における人物の表情について、パターン認識等、何らかの画像解析処理を行うことで、画像データの笑顔度を測定する（ステップＳ４０２）。笑顔度測定機能を有する機器の一例として、例えば、被写体となる人物の表情の笑顔度を測定し、笑顔度が所定の閾値以上となる場合にシャッタを切る機能を有するデジタルカメラ等が用いられてよい。
【００５８】
笑顔度を測定した上で、人物の画像データの撮影が実行される場合（ステップＳ４０２：Ｙｅｓ）、機器では、画像データの付加情報であるＥＸＩＦデータに測定された笑顔度を書き込む（ステップＳ４０４）。
【００５９】
図９に画像データに付加されるＥＸＩＦデータの例を示す。図９に示されるＥＸＩＦデータは、人物の表情を被写体に含む写真等の画像データに付加されるものであり、測定した笑顔度を格納するものである。図９に示されるＥＸＩＦデータの例では、バイナリ形式の画像データについて、ＥＸＩＦデータのうち、画像データの被写体の笑顔度を示す「ＥＸＩＦ ＩＤ：ｓｍｉｌｅ」との項目に対して測定された笑顔度の値が格納される。
【００６０】
図８に戻り説明を続ける。機器において、笑顔度測定機能が有効でない場合（ステップＳ４０１：Ｎｏ）、画像の撮影のみ実行される（ステップＳ４０５）。
【００６１】
その後、機器では、画像データ、及び存在する場合には該画像データに付加されるＥＸＩＦデータがデータとしてメモリに格納される（ステップＳ４０６）。
【００６２】
このような一連の動作により、画像データと、該画像データの被写体である人物の表情について、測定された笑顔度を示すＥＸＩＦデータとがメモリに格納される。
【００６３】
次に、図１０を参照して、ユーザが携帯通信端末１を使用して電子メールを作成する場合の該電子メールに対する付加コンテンツである絵文字の設定時の動作について説明する。
【００６４】
図１０に示されるように、ディスプレイ１には、電子メールを編集するためのメール編集画面が表示される（ステップＳ５０１）。メール編集画面は、図１２（ａ）に示すように、電子メールの宛先となるメールアドレスを入力する宛先アドレス領域と、電子メールのタイトル（サブジェクト：Ｓｕｂｊｅｃｔ）を入力するタイトル領域と、電子メールに添付されている画像データを示す添付ファイル設定領域と、メール本文を入力する本文入力領域とを含んでいる。
【００６５】
再び図１０において、ユーザは、このようなメール編集画面を用いて、電子メールの編集（例えば、メール本文の入力や、画像データの添付等）を行う（ステップＳ５０２）。
【００６６】
このとき、プロセッサ５０は、携帯通信端末１を利用するユーザによって、絵文字の入力を指示するコマンドが入力されたか否かを判定する（ステップＳ５０３）。
【００６７】
絵文字の入力の指示は、例えば図１２（ｂ）に示す画面（本文編集画面）を用いて行われる。図１２（ｂ）に示すように、メール編集画面のうちの本文入力領域をユーザが選択すると、ディスプレイ７０に表示されている画面は、図１２（ａ）に示すメール編集画面から図１２（ｂ）に示す本文編集画面に切り替わる。本文編集画面は、本文テキストの入力を受け付ける入力領域と、絵文字の入力の指示を受け付ける絵文字ボタン領域とを含んでいる。ユーザが絵文字ボタン領域を選択した場合には、ユーザによって、絵文字の入力を指示するコマンドが入力されたと判定される。
【００６８】
再び図１０において、絵文字の入力を指示するコマンドが入力された場合（ステップＳ５０３：Ｙｅｓ）、先ず、プロセッサ５０により、電子メール（例えば、現在編集中の電子メール）に画像データが添付されているか否かの判定が行われる（ステップＳ５０４）。
【００６９】
画像データが添付されていない場合（ステップＳ５０４：Ｎｏ）、プロセッサ５０は、携帯通信端末１のメモリ６０（より具体的には、ＲＡＭ６２）内に格納されている絵文字笑顔テーブルに含まれる絵文字の一覧を表示するようにディスプレイ７０を制御する。その結果、ディスプレイ７０は、メモリ６０に格納されている（或いは、図７に示す絵文字笑顔テーブルによって笑顔度が特定される）絵文字の一覧を、予め設定された態様で又は任意の態様で（例えば、シリアル番号順や、名称順等で表示される態様で）表示する（ステップＳ５０６）。
【００７０】
より具体的には、絵文字笑顔テーブルは、図１３に示すように、絵文字のファイル名と当該ファイル名によって特定される絵文字の笑顔度とが一体となったレコードを複数含んでいる。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字１．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「５０％以下」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字１．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「５０％以下」である画像データに付加されることを示している。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字２．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「５０％以下」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字２．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「５０％以下」である画像データに付加されることを示している。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字３．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「５０％超え」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字３．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「５０％超え」である画像データに付加されることを示している。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字４．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「５０％超え」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字４．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「５０％超え」である画像データに付加されることを示している。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字５．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「８０％超え」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字５．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「８０％超え」である画像データに付加されることを示している。例えば、図１３に示す絵文字笑顔テーブルは、「絵文字６．ｊｐｇ」というファイル名で特定される絵文字の笑顔度が「８０％超え」であることを示している。言い換えれば、図１３に示す絵文字笑顔テーブルは、「絵文字６．ｊｐｇ」というファイル名で特定される絵文字は、笑顔度が「８０％超え」である画像データに付加されることを示している。
【００７１】
画像データが添付されていない場合（図１０のステップＳ５０４：Ｎｏ）、ディスプレイ７０は、メモリ６０に格納されている絵文字の一覧を、絵文字の笑顔度を考慮することなく表示する。例えば、図１２（ｃ）に示すように、ディスプレイ７０は、絵文字１を選択するためのテキストと、絵文字２を選択するためのテキストと、絵文字３を選択するためのテキストと、絵文字４を選択するためのテキストと、絵文字５を選択するためのテキストと、絵文字６を選択するためのテキストとを含む絵文字一覧表示画面を表示する。
【００７２】
その後、絵文字一覧表示画面上で絵文字を選択する指示がユーザから入力された場合には、プロセッサ５０は、選択された絵文字をメモリ６０から読み込むと共に、読み込んだ絵文字をディスプレイ７０に表示する。
【００７３】
再び図１０において、他方で、画像データが添付されている場合（ステップＳ５０４：Ｙｅｓ）、携帯通信端末１のプロセッサ５０は、該画像データに付加されるＥＸＩＦデータを参照することで、該ＥＸＩＦデータに応じた絵文字を表示するよう、笑顔度連動絵文字一覧表示処理を実行する（ステップＳ５０５）。
【００７４】
笑顔度連動絵文字一覧表示処理について、図１１を参照して説明する。図１１は、携帯通信端末１における、笑顔度連動絵文字一覧表示処理の流れを示すフローチャートである。図１１に示されるように、携帯通信端末１のプロセッサ５０は、先ず、ユーザが作成する電子メールに添付される添付画像のＥＸＩＦデータを参照して、画像データの笑顔度、つまりＥＸＩＦ ＩＤ：ｓｍｉｌｅの値を取得する（ステップＳ６０１）。
【００７５】
画像データの付加情報に笑顔度の設定があり、該笑顔度が８０％を上回る場合（ステップＳ６０２：Ｙｅｓ）、プロセッサ５０は、メモリ６０（より具体的には、ＲＡＭ６２）を参照して、笑顔度が８０％を上回る場合に対応する絵文字一覧の読み込みを行う（ステップＳ６０３）。このとき、プロセッサ５０は、絵文字笑顔テーブル（図１３参照）に含まれる笑顔度と、画像データの付加情報に設定されている笑顔度とを比較することで、画像データの付加情報から取得した笑顔度に対応する絵文字の一覧の読み込みを行う。測定される笑顔度が８０％を上回る画像データが添付されている電子メールでは、ユーザは「大喜びしている状態」や「ごく親しい友人に対する感情」を表したいと考えていることが推測出来る。このため、笑顔度が８０％を上回る場合、推測される電子メールの内容に相応しい、楽しげな印象を与える絵文字や、親しい友人に向けられる絵文字等のグループが読み込まれる。より具体的には、画像データの付加情報の笑顔度が８０％を上回る場合には、プロセッサ５０は、絵文字笑顔テーブルに含まれる笑顔度が「８０％超え」となっている絵文字を読み込む（ステップＳ６０３）。その結果、図１２（ｄ）に示すように、ディスプレイ７０は、絵文字５を選択するためのテキストと、絵文字６を選択するためのテキストとを含むカテゴリ連動絵文字一覧表示画面を表示する。
【００７６】
画像データの付加情報に設定される笑顔度が８０％以下であり、５０％を上回る場合（ステップＳ６０２：Ｎｏ、且つステップＳ６０４：Ｙｅｓ）、プロセッサ５０は、メモリ６０を参照して、笑顔度が５０％を上回る場合に対応する絵文字一覧の読み込みを行う（ステップＳ６０５）。このときも、プロセッサ５０は、絵文字笑顔テーブル（図１３参照）に含まれる笑顔度と、画像データの付加情報に設定されている笑顔度とを比較することで、画像データの付加情報から取得した笑顔度に対応する絵文字の一覧の読み込みを行う。測定される笑顔度が５０％乃至８０％である画像データが添付されている電子メールでは、ユーザは「喜んでいる状態」や「友人に対する親しみの感情」を表したいと考えていることが推測出来る。このため、笑顔度が５０％乃至８０％である場合、推測される電子メールの内容に相応しい、親しげな印象を与える絵文字等のグループが読み込まれる。より具体的には、画像データの付加情報の笑顔度が８０％以下であり且つ５０％を上回る場合には、プロセッサ５０は、絵文字笑顔テーブルに含まれる笑顔度が「５０％超え」となっている絵文字を読み込む（ステップＳ６０５）。その結果、図１２（ｅ）に示すように、ディスプレイ７０は、絵文字３を選択するためのテキストと、絵文字４を選択するためのテキストとを含むカテゴリ連動絵文字一覧表示画面を表示する。このとき、更に、プロセッサ５０は、絵文字笑顔テーブルに含まれる笑顔度が「８０％超え」となっている絵文字もまた読み込んでもよい（ステップＳ６０５）。その結果、図１２（ｆ）に示すように、ディスプレイ７０は、絵文字３を選択するためのテキストと、絵文字４を選択するためのテキストと、絵文字５を選択するためのテキストと、絵文字６を選択するためのテキストとを含むカテゴリ連動絵文字一覧表示画面を表示する。
【００７７】
画像データの付加情報に設定される笑顔度が５０％以下である場合（ステップＳ６０２：Ｎｏ、且つステップＳ６０４：Ｎｏ）、プロセッサ５０は、メモリ６０を参照して、笑顔度が５０％以下となる場合に対応する絵文字一覧の読み込みを行う（ステップＳ６０６）。このときも、プロセッサ５０は、絵文字笑顔テーブル（図１３参照）に含まれる笑顔度と、画像データの付加情報に設定されている笑顔度とを比較することで、画像データの付加情報から取得した笑顔度に対応する絵文字の一覧の読み込みを行う。測定される笑顔度が５０％以下である画像データが添付されている電子メールでは、ユーザは「怒っている状態」や「格別親しくない相手への感情」を表したいと考えていることが推測出来る。このため、笑顔度が５０％以下である場合、推測される電子メールの内容に相応しい、怒った印象を与える絵文字や、仕事上の付き合いのある人間に対して向けられる絵文字等のグループが読み込まれる。より具体的には、画像データの付加情報の笑顔度が５０％以下である場合には、プロセッサ５０は、絵文字笑顔テーブルに含まれる笑顔度が「５０％以下」となっている絵文字を読み込む（ステップＳ６０３）。その結果、図１２（ｇ）に示すように、ディスプレイ７０は、絵文字１を選択するためのテキストと、絵文字２を選択するためのテキストとを含むカテゴリ連動絵文字一覧表示画面を表示する。
【００７８】
尚、このとき、画像データの付加情報に笑顔度の設定がない場合、プロセッサ５０は、特段の動作をすることなく、メモリ６０内に格納される絵文字を読み込む。
【００７９】
そして、プロセッサ５０は、読み込んだ絵文字をディスプレイ７０に表示する（ステップＳ６０７）。
【００８０】
図１０に戻り、絵文字設定のための処理について説明を再開する。笑顔度連動絵文字一覧表示処理（ステップＳ５０５）が実施される場合、ユーザは、人物の表情を撮影した画像データを添付した電子メールについて、笑顔度に応じた絵文字がより選択し易いよう表示されたディスプレイ７０を参照して、絵文字を設定することが出来る。他方で、笑顔度連動絵文字一覧表示処理が実施されない場合、笑顔度との関連性とは関係なく、ユーザが入力した文面に応じた絵文字がディスプレイ７０に表示される（ステップＳ５０３）。
【００８１】
以上、説明した動作によれば、ユーザが電子メールを作成する際に、ユーザが入力した文面に応じてディスプレイ７０に表示される、挿入が推奨される絵文字（例えば、「久しぶり」との文面を入力した場合に、該文面の末尾に挿入するよう、連動して表示される絵文字）について、電子メールに添付した画像データに応じた絵文字が相対的に選択し易いよう、ディスプレイ７０に表示される。従って、添付した画像データに関連する絵文字を設定する際に、ユーザの操作を低減することが出来る。このため、ユーザは、電子メールを絵文字により装飾することで、よりコミュ二ケーションの円滑化を図ることが出来るとの利点がある。
【００８２】
上述した第１動作例及び第２動作例では、電子メールに付加する付加コンテンツとして、背景画像及び絵文字を例として説明した。この他、付加コンテンツとして、ユーザによる文面の入力に応じて、文脈の判断によって予測的に表示される入力候補の文面や、その他、電子メールを装飾するための画像、テンプレート等が用いられてもよい。少なくとも、複数の候補の中からユーザにより選択可能であって、電子メールに対して直接的、又は間接的に付加可能な何らかのコンテンツ（言い換えれば、データ）であれば、本発明に係る付加コンテンツとして適宜採用され得る。
【００８３】
本発明は、上述した実施例に限られるものではなく、請求の範囲及び明細書全体から読み取れる発明の要旨或いは思想に反しない範囲で適宜変更可能であり、そのような変更を伴う通信端末装置及びコンピュータプログラム等もまた本発明の技術的範囲に含まれるものである。
【符号の説明】
【００８４】
１ 電子メール端末、
１０ アンテナ、
２０ 無線部、
４０ カメラ、
５０ プロセッサ、
６０ メモリ、
７０ ディスプレイ、
８０ 操作キー。
【特許請求の範囲】
【請求項１】
ファイルを格納したメモリと、処理部と、を備えた通信端末装置であって、
前記処理部は、
添付ファイル設定領域と、本文入力領域と、を有するメール編集画面を、表示手段に表示させ、
前記本文入力領域に対するファイルの設定指示を受付けた場合に、前記添付ファイル設定領域に設定されている第一のファイルに含まれる付加情報を、前記メモリから抽出し、
抽出された前記付加情報に応じた第二のファイルを、前記メモリから抽出し、
抽出された前記第二のファイルを前記本文入力領域に設定することを特徴とする通信端末装置。
【請求項２】
前記付加情報は、前記第一のファイルを分類するためのカテゴリ情報を含み、
前記処理部は、前記カテゴリ情報に対する関連性に応じて前記第二のファイルを抽出することを特徴とする請求項１に記載の通信端末装置。
【請求項３】
前記カテゴリ情報は、前記第一のファイルにおける人物の表情の評価値を含み、
前記処理部は、前記評価値に対する関連性に応じて前記第二のファイルを抽出することを特徴とする請求項２に記載の通信端末装置。
【請求項４】
ファイルを格納したメモリと、処理部と、を備えた通信端末装置によって実行されるコンピュータプログラムであって、
前記コンピュータプログラムは、
添付ファイル設定領域と、本文入力領域と、を有するメール編集画面を、表示手段に表示させ、
前記本文入力領域に対するファイルの設定指示を受付けた場合に、前記添付ファイル設定領域に設定されている第一のファイルに含まれる付加情報を、前記メモリから抽出させ、
抽出された前記付加情報に応じた第二のファイルを、前記メモリから抽出させ、
抽出された前記第二のファイルを前記本文入力領域に設定させるように前記処理部を動作させることを特徴とするコンピュータプログラム。
【請求項１】
ファイルを格納したメモリと、処理部と、を備えた通信端末装置であって、
前記処理部は、
添付ファイル設定領域と、本文入力領域と、を有するメール編集画面を、表示手段に表示させ、
前記本文入力領域に対するファイルの設定指示を受付けた場合に、前記添付ファイル設定領域に設定されている第一のファイルに含まれる付加情報を、前記メモリから抽出し、
抽出された前記付加情報に応じた第二のファイルを、前記メモリから抽出し、
抽出された前記第二のファイルを前記本文入力領域に設定することを特徴とする通信端末装置。
【請求項２】
前記付加情報は、前記第一のファイルを分類するためのカテゴリ情報を含み、
前記処理部は、前記カテゴリ情報に対する関連性に応じて前記第二のファイルを抽出することを特徴とする請求項１に記載の通信端末装置。
【請求項３】
前記カテゴリ情報は、前記第一のファイルにおける人物の表情の評価値を含み、
前記処理部は、前記評価値に対する関連性に応じて前記第二のファイルを抽出することを特徴とする請求項２に記載の通信端末装置。
【請求項４】
ファイルを格納したメモリと、処理部と、を備えた通信端末装置によって実行されるコンピュータプログラムであって、
前記コンピュータプログラムは、
添付ファイル設定領域と、本文入力領域と、を有するメール編集画面を、表示手段に表示させ、
前記本文入力領域に対するファイルの設定指示を受付けた場合に、前記添付ファイル設定領域に設定されている第一のファイルに含まれる付加情報を、前記メモリから抽出させ、
抽出された前記付加情報に応じた第二のファイルを、前記メモリから抽出させ、
抽出された前記第二のファイルを前記本文入力領域に設定させるように前記処理部を動作させることを特徴とするコンピュータプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２０１３−９２８６６（Ｐ２０１３−９２８６６Ａ）
【公開日】平成２５年５月１６日（２０１３．５．１６）
【国際特許分類】
【出願番号】特願２０１１−２３３７８９（Ｐ２０１１−２３３７８９）
【出願日】平成２３年１０月２５日（２０１１．１０．２５）
【出願人】（０００００５２２３）富士通株式会社 (25,993)
【Ｆターム（参考）】
【公開日】平成２５年５月１６日（２０１３．５．１６）
【国際特許分類】
【出願日】平成２３年１０月２５日（２０１１．１０．２５）
【出願人】（０００００５２２３）富士通株式会社 (25,993)
【Ｆターム（参考）】
[ Back to top ]