通信端末装置、情報制御方法及び制御プログラム
【課題】利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を制御することで、会話の支援を行うことができる通信端末装置を提供する。
【解決手段】
通話中の状態で、利用者の音声を音声信号として検出を開始する（Ｓ６５０）。次に再生指示されたスライドショーＩＤに対応する画像情報の表示を開始する（Ｓ６５１）。そして通話相手装置へ同期信号を送信し（Ｓ６５２）、音声信号を検出されたかどうかを判断する（Ｓ６５３）。そして、音声信号から画像情報に対応した付属情報であるキーワードが検出されたどうかを判断する（Ｓ６５４）。音声信号からキーワードを検出したと判断した場合（Ｓ６５４：ＹＥＳ）、表示条件変更処理を実行する（Ｓ６５６）。
【解決手段】
通話中の状態で、利用者の音声を音声信号として検出を開始する（Ｓ６５０）。次に再生指示されたスライドショーＩＤに対応する画像情報の表示を開始する（Ｓ６５１）。そして通話相手装置へ同期信号を送信し（Ｓ６５２）、音声信号を検出されたかどうかを判断する（Ｓ６５３）。そして、音声信号から画像情報に対応した付属情報であるキーワードが検出されたどうかを判断する（Ｓ６５４）。音声信号からキーワードを検出したと判断した場合（Ｓ６５４：ＹＥＳ）、表示条件変更処理を実行する（Ｓ６５６）。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、他の通信端末装置との間で情報の送受信と通話ができる通信端末装置、通信制御方法、制御プログラムに関する。
【背景技術】
【０００２】
従来、電話回線を介して他の通信端末装置との間で、お互いの表示画面に共通の画像を表示させながら通話することができる通信端末装置が知られている。さらに、特許文献１に記載の情報通信端末では、通話者の音声情報から感情を自動的に推測して、推測した感情に応じた顔画像を表示させることができる技術も開発されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−３５２８９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述の特許文献１に記載の装置では、通話者の感情を検知して、感情に応じた顔画像を表示することで、通話者同士の会話を支援できるようになっているが、会話中に話題が乏しくなり会話が途切れるような場合では、会話を支援することができないという課題がある。
【０００５】
本発明は、上記課題を解決するためになされたものであり、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を制御することで、会話の支援を行うことができる通信端末装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、請求項１に係る発明の通信端末装置は、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置において、前記画像情報を表示する表示領域を備えた表示手段と、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携手段と、前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断手段と、前記音声情報判断手段により前記音声情報が前記所定条件になったと判断した場合、前記連携手段により連携して表示している前記画像情報の表示条件を変更する表示条件変更手段とを備えることを特徴とする。
【０００７】
請求項２に係る発明の通信端末装置では、請求項１に記載の発明の構成に加え、前記音声情報判断手段は、前記音声情報に会話が無い状態である無音状態が所定時間以上含まれているかどうかを前記所定条件として判断し、前記表示条件変更手段は、前記音声情報判断手段により、前記無音状態が所定時間以上含まれていると判断された場合、前記表示手段に表示されている前記画像情報を別の画像情報に切替えることを特徴とする。
【０００８】
請求項３に係る発明の通信端末装置では、請求項１に記載の発明の構成に加え、前記通信端末装置は、前記画像情報と関連する情報である付属情報を、前記画像情報と対応付けて記憶する付属情報記憶手段と、前記通話手段より取得した前記音声情報を文字情報に変換する変換手段とをさらに備え、前記音声情報判断手段は、前記付属情報記憶手段に記憶されている前記付属情報が、前記変換手段により変換された前記文字情報に含まれているかどうかを前記所定条件として判断することを特徴とする。
【０００９】
請求項４に係る発明の通信端末装置では、請求項３に記載の発明の構成に加え、前記表示条件変更手段は、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が、前記連携手段にて連携して表示している前記画像情報の前記付属情報と一致する場合、表示している前記画像情報を別の画像情報に切替えるまでの時間を所定時間長くすることを特徴とする。
【００１０】
請求項５に係る発明の通信端末装置では、請求項３乃至４のいずれかに記載の発明の構成に加え、前記表示条件変更手段は、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が、前記連携手段にて連携して表示している前記画像情報の前記付属情報と一致しない場合、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報に対応した前記画像情報を前記付属情報記憶手段から抽出し、抽出された前記画像情報に表示を切替えることを特徴とする。
【００１１】
請求項６に係る発明の通信端末装置では、請求項５に記載の発明の構成に加え、前記表示条件変更手段は、前記付属情報に対応した前記画像情報を前記付属情報記憶手段から複数抽出した場合、抽出した複数の前記画像情報のみを切替えながら表示することを特徴とする。
【００１２】
請求項７に係る発明の通信端末装置では、請求項６に記載の発明の構成に加え、前記音声情報判断手段は、前記音声情報の音量を計測する音量計測手段を備え、前記音量計測手段により計測された前記音声情報の音量が所定割合以上変化した場合、前記表示条件変更手段は、前記付属情報記憶手段から抽出した複数の前記画像情報の別の画像情報に表示を切替えることを特徴とする。
【００１３】
請求項８に係る発明の通信端末装置では、請求項３乃至７のいずれかに記載の発明の構成に加え、前記表示条件変更手段は、前記画像情報の表示を切替えてから所定時間以内に、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が切替え前の前記画像情報に対応した前記付属情報と一致する場合、切替え前の前記画像情報に表示を戻すことを特徴とする。
【００１４】
請求項９に係る発明においては、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置にて処理する通信制御方法であって、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により、表示領域を備えた表示手段に表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携ステップと、前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断ステップと、前記音声情報判断ステップにより前記音声情報が前記所定条件になったと判断した場合、前記連携ステップにより連携して表示している前記画像情報の表示条件を変更する表示条件変更ステップとを処理することを特徴とする。
【００１５】
請求項１０に係る発明においては、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置を実行させる制御プログラムであって、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により、表示領域を備えた表示手段に表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携ステップと、前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断ステップと、前記音声情報判断ステップにより前記音声情報が前記所定条件になったと判断した場合、前記連携ステップにより連携して表示している前記画像情報の表示条件を変更する表示条件変更ステップとを前記通信端末装置で実行させることを特徴とする。
【発明の効果】
【００１６】
請求項１に係る発明の通信端末装置では、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置において、前記画像情報を表示する表示領域を備えた表示手段と、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる。また、前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する。そして前記音声情報が前記所定条件になったと判断した場合、連携して表示している前記画像情報の表示条件を変更する。よって、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を変更制御することができる。したがって、通話利用者はお互いに、会話に基づいて表示制御された画像情報を確認することで、話題を変えながら円滑な会話を行うことができる。
【００１７】
請求項２に係る発明の通信端末装置では、請求項１に記載の発明の効果に加え、前記音声情報に会話が無い状態である無音状態が所定時間以上含まれているかどうかを前記所定条件として判断し、前記無音状態が所定時間以上含まれていると判断された場合、前記表示手段に表示されている前記画像情報を別の画像情報に切替える。よって、利用者の会話が所定時間の間無音状態になった場合、表示している画像情報を切替えることができるので、利用者は、切替った画像情報を見て、話題を変えながら円滑な会話をすることができる。
【００１８】
請求項３に係る発明の通信端末装置では、請求項１に記載の発明の効果に加え、前記通信端末装置は、前記画像情報と関連する情報である付属情報を、前記画像情報と対応付けて記憶する。また取得した前記音声情報を文字情報に変換する。そして記憶されている前記付属情報が、変換された前記文字情報に含まれているかどうかを前記所定条件として判断する。よって、利用者による会話の音声情報を文字情報に変換し、変換された文字情報に対応付けられている画像情報を表示手段に表示できるので、利用者は、会話の内容に適した画像情報を見ながら、円滑な会話をすることができる。
【００１９】
請求項４に係る発明の通信端末装置では、請求項３に記載の発明の効果に加え、前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が、連携して表示している前記画像情報の前記付属情報と一致する場合、表示している前記画像情報を別の画像情報に切替えるまでの時間を所定時間長くする。よって、利用者による会話の内容に適している画像情報をより長い時間表示することができるので、利用者は、会話に適した画像情報をより長い時間見ながら、円滑な会話をすることができる。
【００２０】
請求項５に係る発明の通信端末装置では、請求項３乃至４のいずれかに記載の発明の効果に加え、前記音声情報に含まれていると判断された前記付属情報が、連携して表示している前記画像情報の前記付属情報と一致しない場合、前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報に対応した前記画像情報を抽出し、抽出された前記画像情報に表示を切替える。よって、利用者による会話に適していない画像情報が表示されている場合、会話に適した画像情報に表示を切替えることができるので、利用者は、会話に適した画像情報を見ながら、円滑な会話をすることができる。
【００２１】
請求項６に係る発明の通信端末装置では、請求項５に記載の発明の効果に加え、前記付属情報に対応した前記画像情報を複数抽出した場合、抽出した複数の前記画像情報のみを切替えながら表示することを特徴とする。よって、利用者の会話に適した画像情報が複数ある場合は、それらの画像情報のみで表示手段へ表示する画像情報を切替えるようにできるので、利用者は、会話に適した複数の画像情報を見ながら、より円滑な会話をすることができる。
【００２２】
請求項７に係る発明の通信端末装置では、請求項６に記載の発明の効果に加え、前記音声情報の音量を計測する。計測された前記音声情報の音量が所定割合以上変化した場合、前記付属情報記憶手段から抽出した複数の前記画像情報の別の画像情報に表示を切替える。よって、利用者による会話の音量が変化した場合、つまり会話の雰囲気が盛り下がってきた状態になった場合、会話に適した別の画像情報に表示を切替えることができるので、利用者は、会話に適した画像情報を見ながら、円滑に会話をすることができる。
【００２３】
請求項８に係る発明の通信端末装置では、請求項３乃至７のいずれかに記載の発明の効果に加え、前記画像情報の表示を切替えてから所定時間以内に、前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が切替え前の前記画像情報に対応した前記付属情報と一致する場合、切替え前の前記画像情報に表示を戻す。よって、利用者の会話の内容が、現在表示している画像情報より、切替え前の画像情報に適していると判断した場合、切替え前の画像情報に表示を切替えることができるので、利用者は、より会話に適した画像を見ながら、円滑な会話をすることができる。
【００２４】
請求項９に係る発明の通信制御方法では、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置において、前記画像情報を表示する表示領域を備えた表示手段と、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる。また、前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する。そして前記音声情報が前記所定条件になったと判断した場合、連携して表示している前記画像情報の表示条件を変更する。よって、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を変更制御することができる。したがって、通話利用者はお互いに、会話に基づいて表示制御された画像情報を確認することで、話題を変えながら円滑な会話を行うことができる。
【００２５】
請求項１０に係る発明の制御プログラムでは、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置において、前記画像情報を表示する表示領域を備えた表示手段と、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる。また、前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する。そして前記音声情報が前記所定条件になったと判断した場合、連携して表示している前記画像情報の表示条件を変更する。よって、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を変更制御することができる。したがって、通話利用者はお互いに、会話に基づいて表示制御された画像情報を確認することで、話題を変えながら円滑な会話を行うことができる。
【図面の簡単な説明】
【００２６】
【図１】概略構成図である。
【図２】通信端末装置４０の物理的構成図である。
【図３】通信端末装置４０の電気的構成図である。
【図４】フラッシュＲＯＭ４０４の説明図である。
【図５】画像情報データベース４０４１Ａの説明図である。
【図６】スライドショー情報データベース４０４２Ａの説明図である。
【図７】通信端末装置４０で実行される送信側処理のフローチャート図である。
【図８】図７の送信側処理のＳ６０６で処理されるスライドショー表示制御処理のフローチャート図である。
【図９】図８のスライドショー表示制御処理のＳ６５６で処理される表示条件変更処理のフローチャート図である。
【図１０】通信端末装置４０で実行される受信側処理のフローチャート図である。
【発明を実施するための形態】
【００２７】
以下、本発明を具体化した通信端末装置の実施の形態について、図面を参照して説明する。なお、これらの図面は、本発明が採用しうる技術的特徴を説明するために用いられるものであり、記載されている装置の構成、各種処理のフローチャートなどは、それのみに限定する趣旨ではなく、単なる説明例である。
【００２８】
まず、図１〜図３を参照して、本実施形態の概略構成１０、及び構成要素である通信端末装置４０の物理的構成、電気的構成について、順に説明する。
【００２９】
図１を参照して、本実施形態の概略構成１０について説明する。図１に示すように、通信端末装置４０が電話回線２０を介して、他の通信端末装置４０と接続されている。よって、利用者は、通信端末装置４０に相手の通信端末装置４０の電話番号を入力して発呼操作をすることにより、お互いの装置間で通話ができる状態となる。また、本実施形態の通信端末装置４０には、子機３０が備えられており、利用者は子機を用いて通話をしながら、通信端末装置４０の後述する表示画面を参照することができる。
【００３０】
次に図２を参照して、通信端末装置４０の物理的構成について説明する。本実施形態の通信端末装置４０は、図２に示すように長方形の筐体の略中央部分に表示手段４１３が備えられている。表示手段４１３は、通信端末装置４０の各種操作画面や、画像データを表示することができる。また、筐体下部には、他の通信端末装置４０と通話する時に使用する音声を入力する機器であるマイク４１１と、音声を出力する機器であるスピーカ４１２が備えられている。
【００３１】
次に図３を参照して、通信端末装置４０の電気的構成について説明する。本実施形態の通信端末装置４０は、図３に示すように、ＣＰＵ４０１、ＲＯＭ４０２、ＲＡＭ４０３、フラッシュＲＯＭ４０４、音量計測手段４１０、マイク４１１、スピーカ４１２、表示手段４１３、操作入力手段４１４、計時手段４１５、子機通信手段４４０、通信手段４５０を備えており、これらはすべてバスで相互に接続されている。
【００３２】
ＣＰＵ４０１は、通信端末装置４０全体の制御を司る。ＲＯＭ４０２は、通信端末装置４０の基本的な動作に必要なプログラムやそのための設定値等を記憶している。ＣＰＵ４０１は、ＲＯＭ４０２に記憶されたプログラムに従って、通信端末装置４０の動作を制御する。ＲＡＭ４０３は、各種データを一時的に記憶するための記憶装置である。また、フラッシュＲＯＭ４０４は、不揮発性の半導体メモリであり、後述する各種記憶エリアを備えている。
【００３３】
マイク４１１は、利用者が通信端末装置４０を用いて電話回線を介した通話を使用する時に、利用者が発する音声情報を入力する機器である。また、スピーカ４１２は、通話相手の通信端末装置４０から取得した音声情報を出力する機器である。音量計測手段４１０は、マイク４１１を介して取得、または通話相手から取得した通話利用者の音声の音量を計測する機器である。また、上記音量計測手段４１０は、ＣＰＵ４０１が処理することで音量を算出するように代用しても良い。本実施形態の通信端末装置４０では、子機３０が備えられているが、子機３０を用いず、通信端末装置４０のマイク４１１と、スピーカ４１２を使用して通話できるようになっている。
【００３４】
表示手段４１３は、利用者が通信端末装置４０の各種操作を行うための操作画面や、他機器から取得した画像データ等を一定時間毎に表示を切替えながら再生するスライドショーとして表示する機器である。また、操作入力手段４１４は、前述の表示手段４１３に重ねて配置された汎用的なタッチパネル機器である。利用者が表示画面４１３を参照しながらタッチすると、操作入力手段４１４はタッチされた位置情報を取得することができる。また、計時手段４１５は、時間を計測する時計機能を備えた機器である。
【００３５】
子機通信手段４４０は、通常の電話機の親機と子機間で使用されているＤＥＣＴ（Ｄｉｇｉｔａｌ Ｅｎｈａｎｃｅｄ Ｃｏｒｄｌｅｓｓ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ）規格に準じた無線通信ができる通信機器である。子機通信手段４４０を介して、利用者は、子機３０で通話ができるようになる。また、通信手段４５０は、汎用的に電話機器等に使用されている公衆電話回線と接続通信できる通信機器である。
【００３６】
次に図４を参照して、フラッシュＲＯＭ４０４の構成について説明する。フラッシュＲＯＭ４０４は、画像情報記憶エリア４０４１、スライドショー情報記憶エリア４０４２等で構成されている。画像情報記憶エリア４０４１には、他機器から取得した写真データ等の画像情報が付属情報と対応付けて画像情報データベース４０４１Ａとして記憶されている。スライドショー情報記憶エリア４０４２には、スライドショーで再生する画像情報のリストがスライドショー情報データベース４０４２Ａとして記憶されている。
【００３７】
ここで、図５を参照して、画像情報データベース４０４１Ａについて説明する。画像情報データベース４０４１Ａは、画像ＩＤ、ファイル名、画像情報、付属情報の項目が対応付けて記憶されている。画像ＩＤの項目には、画像情報を識別する情報が数値情報で記憶されている。また画像ＩＤは、通信端末装置４０が画像情報を取得した時に、自動的に採番されるようになっている。ファイル名の項目には、画像情報のファイル名が記憶されている。画像情報の項目には、例えば、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）、ＰＮＧ（Ｐｏｒｔａｂｌｅ Ｎｅｔｗｏｒｋ Ｇｒａｐｈｉｃｓ）、ＧＩＦ（Ｇｒａｐｈｉｃｓ Ｉｎｔｅｒｃｈａｎｇｅ Ｆｏｒｍａｔ）等のファイル形式の画像情報が、それぞれのファイル名に対応して記憶されている。付属情報の項目には、利用者が画像情報に対して関連したキーワード情報が文字情報として複数記憶されている。キーワード情報は、利用者が通信端末装置４０に備えられたタッチパネル等の操作入力手段４１４を介して入力操作することで、入力することができるようになっている。
【００３８】
次に、図６を参照しながら、スライドショー情報データベース４０４２Ａについて説明をする。スライドショー情報データベース４０４２Ａは、スライドショーＩＤと、画像ＩＤ、表示時間、キーワード検出回数の項目が対応付けて記憶されている。スライドショーＩＤは、スライドショーの情報を識別するための識別情報が記号で記憶されており、利用者により、複数の画像情報を選択してスライドショーを作成された時に自動的に採番されるようになっている。画像ＩＤの項目には、画像情報データベース４０４１Ａに記憶されている複数の画像情報の中から、スライドショーとして表示するために選択された画像情報の画像ＩＤが記憶されている。例えば、スライドショーＩＤがＬ１では、画像ＩＤ００１、００２、００３、００４が対応付けて記憶されている。よって、利用者が通信端末装置４０を操作して、スライドショーＩＤのＬ１を選択すると、画像ＩＤが００１、００２、００３、００４に対応する画像情報を、表示手段４１３にスライドショーで再生表示することができる。また、表示時間の項目には、対応する画像情報を表示してから次の画像情報に切替えるまので再生時間が秒単位の数値情報で記憶されている。例えば、画像ＩＤ００１では、表示時間が３０秒、同様に画像ＩＤ００２では、２０秒と記憶されている。この表示時間は、利用者が通信端末装置４０に備えられたタッチパネル等の操作入力手段４１４を介して入力操作することで、入力することができるようになっている。また、キーワード検出回数は、詳細な説明は後述するが、対応する画像ＩＤの画像情報が表示されている時に、利用者の音声情報に基づいて検出された回数が記憶されている。
【００３９】
次に、図７を参照して、通信端末装置４０において実行される送信側処理について説明する。図７に示す処理は、ＲＯＭ４０２に記憶されたプログラムに従って、ＣＰＵ４０１が実行する。
【００４０】
図７に示す送信側処理は、通信端末装置４０の電源がＯＮにされると開始される。初めに、画像情報の送信指示が有るかどうかを判断する（Ｓ６０１）。具体的に説明すると、利用者が通信端末装置４０を操作して、画像情報データベース４０４１Ａに記憶されている画像情報の中からどれかを指定し、送信先として他の通信端末装置４０の電話番号、またはネットワークアドレス等の情報を入力して、画像情報を送信するよう操作指示があったかどうかを判断する。または、スライドショー情報データベース４０４２Ａに記憶されているスライドショーＩＤを指定して、対応する画像情報を全て指定するようにしても良い。そしてステップＳ６０１の処理で、ＣＰＵ４０１は送信指示があったと判断した場合（Ｓ６０１：ＹＥＳ）、指定された画像情報と、対応する付属情報を送信する処理を実行する（Ｓ６０２）。また、ステップＳ６０１の処理で、ＣＰＵ４０１が画像情報の送信指示が無いと判断した場合（Ｓ６０１：ＮＯ）、後述するステップＳ６０３へ進む。
【００４１】
次に、ＣＰＵ４０１は、利用者の操作により電話の発呼指示があったかどうかを判断する（Ｓ６０３）。ここで言う発呼指示とは、通常の電話機での発信操作方法と同様なので図示は省略するが、相手装置の電話番号を入力し、電話の発信指示を行う操作である。ステップＳ６０３の処理で、ＣＰＵ４０１は発呼指示があったと判断した場合（Ｓ６０３：ＹＥＳ）、相手の通信端末装置４０と通話状態になるよう処理する（Ｓ６０４）。また、ステップＳ６０３の処理で、電話の発呼指示が無いと判断した場合（Ｓ６０３：ＮＯ）、ステップＳ６０１へ戻る。
【００４２】
続いて、通話中の状態で、スライドショー情報の再生指示があったかどうかを判断する（Ｓ６０５）。具体的には、利用者によりスライドショー情報データベース４０４２Ａに記憶されているスライドショーＩＤを表示手段４１３へ再生するような操作指示があったどうかを、ＣＰＵ４０１が判断する。
【００４３】
そして、ステップＳ６０５の処理で、ＣＰＵ４０１はスライドショーの再生指示があったと判断した場合（Ｓ６０５：ＹＥＳ）、指示されたスライドショーＩＤに対応した表示制御処理を実行する（Ｓ６０６）。
【００４４】
ここで、図８を参照しながらステップＳ６０６で実行するスライドショー表示制御処理について説明する。図８は、スライドショー表示制御処理のフローチャート図である。まず、通話中の利用者の音声を音声信号として検出を開始する（Ｓ６５０）。続いて、ステップＳ６０５の処理で再生指示されたスライドショーＩＤに対応する画像情報の表示を開始する（Ｓ６５１）。例えば、本実施形態ではスライドショーＩＤのＬＩを指示されたとすると、スライドショー情報データベース４０４２Ａを参照して、最初に表示すべき画像ＩＤ００１に対応する画像情報ＡＡＡが、表示手段４１３へ表示される。
【００４５】
続いて、通話相手装置へ同期信号を送信する（Ｓ６５２）。ここでは、通話相手装置と表示する画像情報を連携するための手段として、ステップＳ６５１で表示している画像情報に対応した画像ＩＤ情報を含む同期信号を、電話回線を介したトーン信号方式や、またはネットワークを介した信号方式を用いて、通話相手の通信端末装置４０へ送信する。また、上述した同期信号は、ステップＳ６５１の処理で、表示する画像情報が切替る度に送信されるものとする。また、受信する側の通信端末装置４０の受信側処理については後述するが、ステップＳ６５２で送信された同期信号を受信すると、対応する画像ＩＤの画像情報が受信側の表示手段４１３へ表示するようになっている。
【００４６】
そして、次に、音声信号を検出されたかどうかを判断する（Ｓ６５３）。ここでは、通話中の利用者の音声による音声信号を検出されたかどうかを判断する。つまり、通話利用者が会話をしているかどうかを判断していることになる。そして、ステップＳ６５３の処理で、ＣＰＵ４０１が音声信号を検出したと判断した場合（Ｓ６５３：ＹＥＳ）、続いて、検出された音声信号を文字情報に変換する処理を実行し、変換された文字情報の中に、指定されているスライドショーＩＤにて再生される画像情報に対応した付属情報であるキーワードが検出されたどうかを判断する（Ｓ６５４）。上述した音声信号を文字情報に変換する方法としては例えば、特開２００３−２７１６２９号公報にて開示されているような、音声入力によるテキスト検索技術等の方法を用いれば良い。また、ステップＳ６５４の処理で、キーワードが検出されないと判断した場合（Ｓ６５４：ＮＯ）、表示されている画像情報の再生時間の残りがゼロになったかどうかを判断する（Ｓ６５８）。ステップＳ６５８の処理では、表示されている画像情報がステップＳ６５１で表示を開始された時から、計時手段４１５を作動させ、スライドショー情報データベース４０４２Ａに記憶されている再生時間までの残りの時間を判断している。よって、通話利用者間の会話の中に、スライドショーで再生する画像に関連したキーワードが含まれていないと判断できるので、そのような場合では、予め設定された再生時間で画像情報が表示される。
【００４７】
また、ステップＳ６５４の処理で、音声信号からキーワードを検出したと判断した場合（Ｓ６５４：ＹＥＳ）、次に表示条件変更処理を実行する（Ｓ６５６）。
【００４８】
ここで、図９を参照してステップＳ６５６で処理する表示条件変更処理について説明をする。図９は、表示条件変更処理のフローチャート図である。まず、初めに、ステップＳ６５４の処理で検出されたキーワードが、現在表示している画像情報に対応したキーワードかどうかを判断する（Ｓ８００）。具体的には例えば、ステップＳ６５４の処理で、マイク４１１によって取得した通話利用者の音声信号を、上述の公知の文字変換技術を用いて文字情報に変換する。そして変換した文字情報と、再生されているスライドショーＩＤに対応する画像情報の関連情報とを比較し、変換した文字情報の中にキーワードが含まれているかどうかを判断する。そして例えば、「犬」という文字情報が検出されたとすると、現在表示している画像情報がＡＡＡの場合、画像情報ＡＡＡに対応する付属情報の中に「犬」というキーワード情報が記憶されていることが判断できる。よって、ステップＳ８００の処理では、ＣＰＵ４０１は、表示している画像情報に対応したキーワードを検出したと判断し（Ｓ８００：ＹＥＳ）、表示している画像情報の再生時間を所定時間追加する処理を実行する（Ｓ８０１）。具体的には、現在表示している画像情報の再生時間の残りの時間に、所定時間（例えば１０秒）追加する処理が実行される。よって、ここでは、通話利用者の会話の中に、表示している画像情報に関連するキーワードが含まれていたと判断できるので、画像情報に関する会話がなされていると判断でき、画像情報の再生時間を追加することで、利用者の会話を支援することができる。
【００４９】
さらに、ステップＳ８０１の処理の後、ＣＰＵ４０１は通話利用者の会話の音量が所定閾値以下まで減衰したかどうかを判断する（Ｓ８０２）。具体的には、例えば利用者の音声信号の音量が閾値５０ｄｂ以下になったどうかを判断する。つまりここでは、通話利用者の会話の音量が小さくなったことを検出して、利用者同士の会話が盛り下がったかどうかを判断していることになる。または他の方法として、利用者の音量が通話中に所定割合以上変化したかどうかを判断するようにしてもよい。例えば、所定割合を５０％とし、通話利用者の音量が５０％以上の割合で小さくなったことを判断するようにしても良い。そして、ステップＳ８０２の処理で、ＣＰＵ４０１が音量が所定閾値以下まで減衰したと判断した場合（Ｓ８０２：ＹＥＳ）、表示している画像情報の残りの再生時間をゼロに変更する処理を実行し、（Ｓ８０３）、スライドショー情報データベース４０４２Ａの対応する画像ＩＤのキーワード検出回数を１追加する更新処理を実行する。また、ステップＳ８０２の処理で、ＣＰＵ４０１が音量が閾値以下まで減衰していないと判断した場合（Ｓ８０２：ＮＯ）、ステップＳ８０７へ移行する。
【００５０】
また、ステップＳ８００の処理で、ステップＳ６５４の処理で検出したキーワードが、現在表示している画像情報に対応して記憶されているキーワードには無いと判断した場合（Ｓ８００：ＮＯ）、続いて、前回表示していた画像情報に対応して記憶されているキーワードに含まれているかどうかを判断する（Ｓ８０４）。例えば、表示手段４１３に画像情報ＡＡＡを表示している場合に、ステップＳ６５４で検出されたキーワードが「家」とすると、画像情報ＡＡＡはスライドショーＬ１の最初に表示された画像情報なので、前回表示していた画像情報は無く、ステップＳ８０４の処理ではＮＯと判断する（Ｓ８０４：ＮＯ）。そして、ステップＳ６５４で検出されたキーワードに対応して記憶されている他の画像情報に表示を切替える処理を実行する（Ｓ８０６）。例えば、上述した具体例の場合、ステップＳ６５４で検出したキーワードが、「家」とすると、画像情報データベース４０４１Ａを参照し、画像ＩＤ００２に対応した付属情報に「家」というキーワードが記憶されていることを判断するので、表示する画像情報をＢＢＢへ切替えるよう処理をする（Ｓ８０６）。また、ステップＳ８０６の処理の変形例として、キーワードに対応した画像に頻繁に表示が切替るのを防ぐために、ステップＳ８０６の処理で、現在表示している画像情報が表示を開始してから所定時間以上（たとえば３秒）経過していない場合は、ステップＳ８０６の処理をキャンセルして、次ステップへ移行するようにしても良い。
【００５１】
または、ステップＳ８０４の処理で、ステップＳ６５４にて検出されたキーワードが、現在表示している画像情報の前回に表示していた画像情報に対応したキーワードであると、ＣＰＵ４０１が判断した場合（Ｓ８０４：ＹＥＳ）、前回表示していた画像情報に表示を戻すように切替える処理を実行する（Ｓ８０５）。具体的には、例えば現在表示している画像情報がＣＣＣの場合、ステップＳ６５４の処理で検出されたキーワードが「家」とすると、画像情報ＣＣＣの前に表示していた画像ＩＤ００２に対応する付属情報に「家」というキーワードが記憶されていると判断し、画像ＩＤ００２に対応する画像情報ＢＢＢに表示を切替える処理を実行する（Ｓ８０５）。したがって、ここでは、通話利用者の会話の中に、現在表示している画像情報に関連するキーワードが発話されていないと判断でき、前回表示していた情報か、もしくは、その他の画像情報の中から、キーワードに対応した画像情報に表示を切替えることで、利用者の会話を支援することができる。
【００５２】
そして、上述したステップＳ８０３か、またはステップＳ８０５か、またはステップＳ８０６の処理の後、スライドショー情報データベース４０４２Ａのキーワード検出回数の項目の回数を１追加する更新処理を実行し（Ｓ８０７）、本処理である表示条件変更処理を終了する。
【００５３】
そして、図８のスライドショー表示制御処理に戻り、ステップＳ６５６の処理である表示条件変更処理が実行された後、ＣＰＵ４０１は、表示している画像情報の再生時間の残り時間がゼロになったかどうかを判断する（Ｓ６５８）。そして、残り時間がまだゼロになっていないと判断した場合（Ｓ６５８：ＮＯ）、再度ステップＳ６５３の処理へ戻り、繰り返し処理が実行される。また、再生時間の残り時間がゼロになったと判断した場合（Ｓ６５８：ＹＥＳ）、スライドショー情報データベース４０４２Ａを参照して、次に表示すべき画像情報があるかどうかを判断する（Ｓ６５９：ＹＥＳ）。ステップＳ６５９の処理にて、次に表示すべき画像情報があると判断した場合（Ｓ６５９：ＹＥＳ）、再度ステップＳ６５１の処理へ戻り、繰り返し処理が実行される。また、ステップＳ６５９の処理で、次に表示すべき画像情報が無いと判断した場合（Ｓ６５９：ＮＯ）、利用者により別のスライドショーＩＤの再生指示があったかどうかを判断する（Ｓ６６０：ＮＯ）。ステップＳ６６０の処理で、別のスライドショーＩＤの再生処理の指示があったと判断した場合（Ｓ６６０：ＹＥＳ）、ステップＳ６５１の処理へ戻り、指示されたスライドショーＩＤに対応した画像情報の再生が開始される。また、ステップＳ６６０の処理にて、利用者により、別のスライドショーＩＤの再生の指示が無いと判断した場合（Ｓ６６０：ＮＯ）、本処理であるスライドショー表示制御処理を終了する。
【００５４】
また、ステップＳ６５３の処理の説明に戻り、通話利用者の音声信号を検出したかどうかの判断で、検出していないと判断した場合（Ｓ６５３：ＮＯ）、次にＣＰＵ４０１は、通話利用者同士の会話が無い時間である無音時間が所定時間以上経過したかどうかを判断する（Ｓ６５５）。ここで言う、無音時間とはステップＳ６５３の処理で音声信号を検出しなくなってから、計時手段４１５を作動させて経過時間を計測する時間である。また所定時間とは、例えば３〜５秒等ように、会話が途切れたと判断できる時間が設定されているものとする。そして、無音時間が上述の所定時間以上経過していないと判断した場合（Ｓ６５５：ＮＯ）、上述したステップＳ６５８へ移行する。また、ステップＳ６５５の処理で、無音時間が所定時間以上経過したと判断した場合（Ｓ６５５：ＹＥＳ）、上述したステップＳ６５９以降の処理が実行される。
【００５５】
ここで、図７の送信側処理へ戻り、上述したステップＳ６０６の処理であるスライドショー表示制御処理が実行された後、通話終了指示があるかどうかを判断する（Ｓ６０８）。または、ステップＳ６０５の処理にて、ＣＰＵ４０１はスライドショーの再生指示が無いと判断した場合（Ｓ６０５：ＮＯ）、通常の通話処理が継続された後、通話終了指示があるかどうかを判断する（Ｓ６０８）。ステップＳ６０８の処理で、通話終了指示があったと判断した場合（Ｓ６０８：ＹＥＳ）、通話を終了し、画像情報の表示を終了させ（Ｓ６０９）、本処理である送信側処理を終了する。また、ステップＳ６０８の処理で、通話終了指示が無いと判断した場合（Ｓ６０８：ＮＯ）、ステップＳ６０５へ戻り、繰り返し処理を実行する。
【００５６】
上述に説明した本実施形態である送信側処理を実行することにより、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を会話の内容に適するように変更制御することができる。したがって、通話利用者はお互いに、会話に基づいて表示制御された画像情報を確認することで、話題を変えながら円滑な会話を行うことができる。
【００５７】
次に、図１０を参照して、通信端末装置４０において実行される受信側処理について説明する。図１０に示す処理は、ＲＯＭ４０２に記憶されたプログラムに従って、ＣＰＵ４０１が実行する。図１０に示す受信側処理は、通信端末装置４０の電源がＯＮにされると開始される。初めに、画像情報の受信指示が有るかどうかを判断する（Ｓ９０１）。具体的には、他の通信端末装置の送信側処理（図７）でのＳ６０２の送信処理により送信された画像情報と、対応する付属情報を受信したかどうかを判断する。ステップＳ９０１の処理にて、受信していないと判断された場合（Ｓ９０１：ＮＯ）、ステップＳ９０３へ移行する。また、ステップＳ９０１の処理で、画像情報と、対応する付属情報を受信したと判断した場合（Ｓ９０１：ＹＥＳ）、受信した画像情報と付属情報の記憶処理を実行する（Ｓ９０２）。具体的には、フラッシュＲＯＭ４０４の画像情報記憶エリア４０４１の画像情報データベース４０４１Ａに受信した画像情報と付属情報を記憶する。
【００５８】
そして、ＣＰＵ４０１は、電話の着呼があったかどうかを判断する（Ｓ９０３）。ここでは、他の通信端末装置４０の送信側処理（図７）において、Ｓ６０３の処理にて発呼された発呼指示に対応する着呼指示があったかどうかを判断する。ＣＰＵ４０１がステップＳ９０３の処理で、着呼指示が無いと判断した場合（Ｓ９０３：ＮＯ）、ステップＳ９０１の処理へ戻る。また、ステップＳ９０３の処理で着呼指示があったと判断した場合（Ｓ９０３：ＹＥＳ）、発呼指示に対応した他の通信端末装置４０と電話回線を介して通話ができるよう処理を実行する（Ｓ９０４）。
【００５９】
続いて、ステップＳ９０４の処理にて他の通信端末装置４０と通話中になった状態で、通話相手の通信端末装置４０から同期信号を受信したかどうかを判断する（Ｓ９０５）。ここでは、通話相手の通信端末装置４０で実行されるスライドショー表示制御処理のＳ６５２の処理（図８）にて送信された、画像ＩＤ情報を含む同期信号を受信したかどうかを判断する（Ｓ９０５）。ステップＳ９０６の処理で、同期信号を受信したと判断した場合（Ｓ９０６：ＹＥＳ）、受信した同期信号に含まれる画像ＩＤ情報に対応した画像情報を、画像情報データベース４０４１Ａから取得し、表示手段４１３の表示画面に表示する（Ｓ９０６）。ここでは、それまで受信側の通信端末装置４０の表示手段４１３に表示されていた画像情報から、同期信号に対応した画像情報に表示が切替る。また、ステップＳ９０５の処理にて、ＣＰＵ４０１が同期信号を受信していないと判断した場合（Ｓ９０５：ＮＯ）、通常の通話処理を継続する。
【００６０】
そして、ステップＳ９０６の処理後、または、ステップＳ９０７の処理後に、ＣＰＵ４０１は、通話終了指示があるかどうかを判断する（Ｓ９０８）。ステップＳ９０８の処理で、通話終了指示があったと判断した場合（Ｓ９０８：ＹＥＳ）、通話を終了し、画像情報の表示を終了させ（Ｓ９０９）、本処理である受信側処理を終了する。また、ステップＳ９０８の処理で、通話終了指示が無いと判断した場合（Ｓ９０８：ＮＯ）、ステップＳ９０５へ戻り、繰り返し処理を実行する。
【００６１】
上述に説明した本実施形態である受信側処理を実行することにより、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を会話の内容に適するように変更制御することができる。したがって、通話利用者はお互いに、会話に基づいて表示制御された画像情報を確認することで、話題を変えながら円滑な会話を行うことができる。
【００６２】
なお、前述の実施形態に示される構成や処理は例示であり、各種の変形が可能なことはいうまでもない。例えば、図９のステップ８０４の処理で検出されているキーワードに対応した画像情報が複数抽出された場合、次のステップであるＳ８０６の処理では、スライドショー情報データベース４０２２Ａに記憶されているキーワード検出回数を参照して、検出回数の多い順から再生表示するようにしても良い。
【００６３】
また、図９のステップ８０７の処理にて、キーワード検出回数を更新した後、対応するスライドショーＩＤの画像情報を表示する順番を、キーワード検出回数の多い順になるように更新するようにしてもよい。そのようにすれば、次回の通話時にスライドショーを再生する時に、利用者に関係性の高い画像情報から再生表示されるようになるので、より通話による会話を支援することができるようになる。
【００６４】
また、図７のステップＳ６０６のスライドショー表示制御処理を終えた後、ステップＳ６０８での通話終了指示が有るまでは、Ｓ６０５の処理でスライドショー再生指示が無いと判断し（Ｓ６０５：ＮＯ）、通常の通話処理（Ｓ６０７）になるようになっているが、これに限るものではない。例えば、初回のステップＳ６０５、Ｓ６０６の処理の終了後に、次回のステップＳ６０５では、初回指示されたスライドショーを自動的に再度指示するように設定すれば、通話終了指示があるまで繰り返しステップＳ６０６が実行され、継続して会話に適した画像情報を表示させるようにすることもできる。
【００６５】
また、前述の実施形態では、送信側での通信端末装置４０と、受信側とした通話相手の通信端末装置４０とで、表示手段４１３に表示する画像情報を連携して共通の画像情報を表示できるようにするために、図８のステップＳ６５２で処理する同期信号を送受信することで連携できるようにしていたが、これに限るものではない。例えば、送信側から受信側へ予め画像情報データベース４０４１Ａと、スライドショー情報データベース４０４２Ａを、受信側である通話相手の通信端末装置４０へ送信しておき、送信側と受信側による通話が開始されてから、両者で同時に同じスライドショーＩＤを開始する。そして、両者の通信端末装置４０で、図８に示すスライドショー表示制御処理を実行させるようにすれば、上述した同期信号を用いず、通話している通信端末装置４０の間で、表示する画像情報を連携できるようにしてもよい。
【符号の説明】
【００６６】
２０ 電話回線
３０ 子機
４０ 通信端末装置
４１１ マイク
４１２ スピーカ
４１３ 表示手段
４０４１Ａ 画像情報データベース
４０４２Ａ スライドショー情報データベース
【技術分野】
【０００１】
本発明は、他の通信端末装置との間で情報の送受信と通話ができる通信端末装置、通信制御方法、制御プログラムに関する。
【背景技術】
【０００２】
従来、電話回線を介して他の通信端末装置との間で、お互いの表示画面に共通の画像を表示させながら通話することができる通信端末装置が知られている。さらに、特許文献１に記載の情報通信端末では、通話者の音声情報から感情を自動的に推測して、推測した感情に応じた顔画像を表示させることができる技術も開発されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−３５２８９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述の特許文献１に記載の装置では、通話者の感情を検知して、感情に応じた顔画像を表示することで、通話者同士の会話を支援できるようになっているが、会話中に話題が乏しくなり会話が途切れるような場合では、会話を支援することができないという課題がある。
【０００５】
本発明は、上記課題を解決するためになされたものであり、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を制御することで、会話の支援を行うことができる通信端末装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、請求項１に係る発明の通信端末装置は、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置において、前記画像情報を表示する表示領域を備えた表示手段と、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携手段と、前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断手段と、前記音声情報判断手段により前記音声情報が前記所定条件になったと判断した場合、前記連携手段により連携して表示している前記画像情報の表示条件を変更する表示条件変更手段とを備えることを特徴とする。
【０００７】
請求項２に係る発明の通信端末装置では、請求項１に記載の発明の構成に加え、前記音声情報判断手段は、前記音声情報に会話が無い状態である無音状態が所定時間以上含まれているかどうかを前記所定条件として判断し、前記表示条件変更手段は、前記音声情報判断手段により、前記無音状態が所定時間以上含まれていると判断された場合、前記表示手段に表示されている前記画像情報を別の画像情報に切替えることを特徴とする。
【０００８】
請求項３に係る発明の通信端末装置では、請求項１に記載の発明の構成に加え、前記通信端末装置は、前記画像情報と関連する情報である付属情報を、前記画像情報と対応付けて記憶する付属情報記憶手段と、前記通話手段より取得した前記音声情報を文字情報に変換する変換手段とをさらに備え、前記音声情報判断手段は、前記付属情報記憶手段に記憶されている前記付属情報が、前記変換手段により変換された前記文字情報に含まれているかどうかを前記所定条件として判断することを特徴とする。
【０００９】
請求項４に係る発明の通信端末装置では、請求項３に記載の発明の構成に加え、前記表示条件変更手段は、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が、前記連携手段にて連携して表示している前記画像情報の前記付属情報と一致する場合、表示している前記画像情報を別の画像情報に切替えるまでの時間を所定時間長くすることを特徴とする。
【００１０】
請求項５に係る発明の通信端末装置では、請求項３乃至４のいずれかに記載の発明の構成に加え、前記表示条件変更手段は、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が、前記連携手段にて連携して表示している前記画像情報の前記付属情報と一致しない場合、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報に対応した前記画像情報を前記付属情報記憶手段から抽出し、抽出された前記画像情報に表示を切替えることを特徴とする。
【００１１】
請求項６に係る発明の通信端末装置では、請求項５に記載の発明の構成に加え、前記表示条件変更手段は、前記付属情報に対応した前記画像情報を前記付属情報記憶手段から複数抽出した場合、抽出した複数の前記画像情報のみを切替えながら表示することを特徴とする。
【００１２】
請求項７に係る発明の通信端末装置では、請求項６に記載の発明の構成に加え、前記音声情報判断手段は、前記音声情報の音量を計測する音量計測手段を備え、前記音量計測手段により計測された前記音声情報の音量が所定割合以上変化した場合、前記表示条件変更手段は、前記付属情報記憶手段から抽出した複数の前記画像情報の別の画像情報に表示を切替えることを特徴とする。
【００１３】
請求項８に係る発明の通信端末装置では、請求項３乃至７のいずれかに記載の発明の構成に加え、前記表示条件変更手段は、前記画像情報の表示を切替えてから所定時間以内に、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が切替え前の前記画像情報に対応した前記付属情報と一致する場合、切替え前の前記画像情報に表示を戻すことを特徴とする。
【００１４】
請求項９に係る発明においては、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置にて処理する通信制御方法であって、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により、表示領域を備えた表示手段に表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携ステップと、前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断ステップと、前記音声情報判断ステップにより前記音声情報が前記所定条件になったと判断した場合、前記連携ステップにより連携して表示している前記画像情報の表示条件を変更する表示条件変更ステップとを処理することを特徴とする。
【００１５】
請求項１０に係る発明においては、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置を実行させる制御プログラムであって、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により、表示領域を備えた表示手段に表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携ステップと、前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断ステップと、前記音声情報判断ステップにより前記音声情報が前記所定条件になったと判断した場合、前記連携ステップにより連携して表示している前記画像情報の表示条件を変更する表示条件変更ステップとを前記通信端末装置で実行させることを特徴とする。
【発明の効果】
【００１６】
請求項１に係る発明の通信端末装置では、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置において、前記画像情報を表示する表示領域を備えた表示手段と、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる。また、前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する。そして前記音声情報が前記所定条件になったと判断した場合、連携して表示している前記画像情報の表示条件を変更する。よって、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を変更制御することができる。したがって、通話利用者はお互いに、会話に基づいて表示制御された画像情報を確認することで、話題を変えながら円滑な会話を行うことができる。
【００１７】
請求項２に係る発明の通信端末装置では、請求項１に記載の発明の効果に加え、前記音声情報に会話が無い状態である無音状態が所定時間以上含まれているかどうかを前記所定条件として判断し、前記無音状態が所定時間以上含まれていると判断された場合、前記表示手段に表示されている前記画像情報を別の画像情報に切替える。よって、利用者の会話が所定時間の間無音状態になった場合、表示している画像情報を切替えることができるので、利用者は、切替った画像情報を見て、話題を変えながら円滑な会話をすることができる。
【００１８】
請求項３に係る発明の通信端末装置では、請求項１に記載の発明の効果に加え、前記通信端末装置は、前記画像情報と関連する情報である付属情報を、前記画像情報と対応付けて記憶する。また取得した前記音声情報を文字情報に変換する。そして記憶されている前記付属情報が、変換された前記文字情報に含まれているかどうかを前記所定条件として判断する。よって、利用者による会話の音声情報を文字情報に変換し、変換された文字情報に対応付けられている画像情報を表示手段に表示できるので、利用者は、会話の内容に適した画像情報を見ながら、円滑な会話をすることができる。
【００１９】
請求項４に係る発明の通信端末装置では、請求項３に記載の発明の効果に加え、前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が、連携して表示している前記画像情報の前記付属情報と一致する場合、表示している前記画像情報を別の画像情報に切替えるまでの時間を所定時間長くする。よって、利用者による会話の内容に適している画像情報をより長い時間表示することができるので、利用者は、会話に適した画像情報をより長い時間見ながら、円滑な会話をすることができる。
【００２０】
請求項５に係る発明の通信端末装置では、請求項３乃至４のいずれかに記載の発明の効果に加え、前記音声情報に含まれていると判断された前記付属情報が、連携して表示している前記画像情報の前記付属情報と一致しない場合、前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報に対応した前記画像情報を抽出し、抽出された前記画像情報に表示を切替える。よって、利用者による会話に適していない画像情報が表示されている場合、会話に適した画像情報に表示を切替えることができるので、利用者は、会話に適した画像情報を見ながら、円滑な会話をすることができる。
【００２１】
請求項６に係る発明の通信端末装置では、請求項５に記載の発明の効果に加え、前記付属情報に対応した前記画像情報を複数抽出した場合、抽出した複数の前記画像情報のみを切替えながら表示することを特徴とする。よって、利用者の会話に適した画像情報が複数ある場合は、それらの画像情報のみで表示手段へ表示する画像情報を切替えるようにできるので、利用者は、会話に適した複数の画像情報を見ながら、より円滑な会話をすることができる。
【００２２】
請求項７に係る発明の通信端末装置では、請求項６に記載の発明の効果に加え、前記音声情報の音量を計測する。計測された前記音声情報の音量が所定割合以上変化した場合、前記付属情報記憶手段から抽出した複数の前記画像情報の別の画像情報に表示を切替える。よって、利用者による会話の音量が変化した場合、つまり会話の雰囲気が盛り下がってきた状態になった場合、会話に適した別の画像情報に表示を切替えることができるので、利用者は、会話に適した画像情報を見ながら、円滑に会話をすることができる。
【００２３】
請求項８に係る発明の通信端末装置では、請求項３乃至７のいずれかに記載の発明の効果に加え、前記画像情報の表示を切替えてから所定時間以内に、前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が切替え前の前記画像情報に対応した前記付属情報と一致する場合、切替え前の前記画像情報に表示を戻す。よって、利用者の会話の内容が、現在表示している画像情報より、切替え前の画像情報に適していると判断した場合、切替え前の画像情報に表示を切替えることができるので、利用者は、より会話に適した画像を見ながら、円滑な会話をすることができる。
【００２４】
請求項９に係る発明の通信制御方法では、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置において、前記画像情報を表示する表示領域を備えた表示手段と、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる。また、前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する。そして前記音声情報が前記所定条件になったと判断した場合、連携して表示している前記画像情報の表示条件を変更する。よって、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を変更制御することができる。したがって、通話利用者はお互いに、会話に基づいて表示制御された画像情報を確認することで、話題を変えながら円滑な会話を行うことができる。
【００２５】
請求項１０に係る発明の制御プログラムでは、電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置において、前記画像情報を表示する表示領域を備えた表示手段と、利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる。また、前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する。そして前記音声情報が前記所定条件になったと判断した場合、連携して表示している前記画像情報の表示条件を変更する。よって、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を変更制御することができる。したがって、通話利用者はお互いに、会話に基づいて表示制御された画像情報を確認することで、話題を変えながら円滑な会話を行うことができる。
【図面の簡単な説明】
【００２６】
【図１】概略構成図である。
【図２】通信端末装置４０の物理的構成図である。
【図３】通信端末装置４０の電気的構成図である。
【図４】フラッシュＲＯＭ４０４の説明図である。
【図５】画像情報データベース４０４１Ａの説明図である。
【図６】スライドショー情報データベース４０４２Ａの説明図である。
【図７】通信端末装置４０で実行される送信側処理のフローチャート図である。
【図８】図７の送信側処理のＳ６０６で処理されるスライドショー表示制御処理のフローチャート図である。
【図９】図８のスライドショー表示制御処理のＳ６５６で処理される表示条件変更処理のフローチャート図である。
【図１０】通信端末装置４０で実行される受信側処理のフローチャート図である。
【発明を実施するための形態】
【００２７】
以下、本発明を具体化した通信端末装置の実施の形態について、図面を参照して説明する。なお、これらの図面は、本発明が採用しうる技術的特徴を説明するために用いられるものであり、記載されている装置の構成、各種処理のフローチャートなどは、それのみに限定する趣旨ではなく、単なる説明例である。
【００２８】
まず、図１〜図３を参照して、本実施形態の概略構成１０、及び構成要素である通信端末装置４０の物理的構成、電気的構成について、順に説明する。
【００２９】
図１を参照して、本実施形態の概略構成１０について説明する。図１に示すように、通信端末装置４０が電話回線２０を介して、他の通信端末装置４０と接続されている。よって、利用者は、通信端末装置４０に相手の通信端末装置４０の電話番号を入力して発呼操作をすることにより、お互いの装置間で通話ができる状態となる。また、本実施形態の通信端末装置４０には、子機３０が備えられており、利用者は子機を用いて通話をしながら、通信端末装置４０の後述する表示画面を参照することができる。
【００３０】
次に図２を参照して、通信端末装置４０の物理的構成について説明する。本実施形態の通信端末装置４０は、図２に示すように長方形の筐体の略中央部分に表示手段４１３が備えられている。表示手段４１３は、通信端末装置４０の各種操作画面や、画像データを表示することができる。また、筐体下部には、他の通信端末装置４０と通話する時に使用する音声を入力する機器であるマイク４１１と、音声を出力する機器であるスピーカ４１２が備えられている。
【００３１】
次に図３を参照して、通信端末装置４０の電気的構成について説明する。本実施形態の通信端末装置４０は、図３に示すように、ＣＰＵ４０１、ＲＯＭ４０２、ＲＡＭ４０３、フラッシュＲＯＭ４０４、音量計測手段４１０、マイク４１１、スピーカ４１２、表示手段４１３、操作入力手段４１４、計時手段４１５、子機通信手段４４０、通信手段４５０を備えており、これらはすべてバスで相互に接続されている。
【００３２】
ＣＰＵ４０１は、通信端末装置４０全体の制御を司る。ＲＯＭ４０２は、通信端末装置４０の基本的な動作に必要なプログラムやそのための設定値等を記憶している。ＣＰＵ４０１は、ＲＯＭ４０２に記憶されたプログラムに従って、通信端末装置４０の動作を制御する。ＲＡＭ４０３は、各種データを一時的に記憶するための記憶装置である。また、フラッシュＲＯＭ４０４は、不揮発性の半導体メモリであり、後述する各種記憶エリアを備えている。
【００３３】
マイク４１１は、利用者が通信端末装置４０を用いて電話回線を介した通話を使用する時に、利用者が発する音声情報を入力する機器である。また、スピーカ４１２は、通話相手の通信端末装置４０から取得した音声情報を出力する機器である。音量計測手段４１０は、マイク４１１を介して取得、または通話相手から取得した通話利用者の音声の音量を計測する機器である。また、上記音量計測手段４１０は、ＣＰＵ４０１が処理することで音量を算出するように代用しても良い。本実施形態の通信端末装置４０では、子機３０が備えられているが、子機３０を用いず、通信端末装置４０のマイク４１１と、スピーカ４１２を使用して通話できるようになっている。
【００３４】
表示手段４１３は、利用者が通信端末装置４０の各種操作を行うための操作画面や、他機器から取得した画像データ等を一定時間毎に表示を切替えながら再生するスライドショーとして表示する機器である。また、操作入力手段４１４は、前述の表示手段４１３に重ねて配置された汎用的なタッチパネル機器である。利用者が表示画面４１３を参照しながらタッチすると、操作入力手段４１４はタッチされた位置情報を取得することができる。また、計時手段４１５は、時間を計測する時計機能を備えた機器である。
【００３５】
子機通信手段４４０は、通常の電話機の親機と子機間で使用されているＤＥＣＴ（Ｄｉｇｉｔａｌ Ｅｎｈａｎｃｅｄ Ｃｏｒｄｌｅｓｓ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ）規格に準じた無線通信ができる通信機器である。子機通信手段４４０を介して、利用者は、子機３０で通話ができるようになる。また、通信手段４５０は、汎用的に電話機器等に使用されている公衆電話回線と接続通信できる通信機器である。
【００３６】
次に図４を参照して、フラッシュＲＯＭ４０４の構成について説明する。フラッシュＲＯＭ４０４は、画像情報記憶エリア４０４１、スライドショー情報記憶エリア４０４２等で構成されている。画像情報記憶エリア４０４１には、他機器から取得した写真データ等の画像情報が付属情報と対応付けて画像情報データベース４０４１Ａとして記憶されている。スライドショー情報記憶エリア４０４２には、スライドショーで再生する画像情報のリストがスライドショー情報データベース４０４２Ａとして記憶されている。
【００３７】
ここで、図５を参照して、画像情報データベース４０４１Ａについて説明する。画像情報データベース４０４１Ａは、画像ＩＤ、ファイル名、画像情報、付属情報の項目が対応付けて記憶されている。画像ＩＤの項目には、画像情報を識別する情報が数値情報で記憶されている。また画像ＩＤは、通信端末装置４０が画像情報を取得した時に、自動的に採番されるようになっている。ファイル名の項目には、画像情報のファイル名が記憶されている。画像情報の項目には、例えば、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）、ＰＮＧ（Ｐｏｒｔａｂｌｅ Ｎｅｔｗｏｒｋ Ｇｒａｐｈｉｃｓ）、ＧＩＦ（Ｇｒａｐｈｉｃｓ Ｉｎｔｅｒｃｈａｎｇｅ Ｆｏｒｍａｔ）等のファイル形式の画像情報が、それぞれのファイル名に対応して記憶されている。付属情報の項目には、利用者が画像情報に対して関連したキーワード情報が文字情報として複数記憶されている。キーワード情報は、利用者が通信端末装置４０に備えられたタッチパネル等の操作入力手段４１４を介して入力操作することで、入力することができるようになっている。
【００３８】
次に、図６を参照しながら、スライドショー情報データベース４０４２Ａについて説明をする。スライドショー情報データベース４０４２Ａは、スライドショーＩＤと、画像ＩＤ、表示時間、キーワード検出回数の項目が対応付けて記憶されている。スライドショーＩＤは、スライドショーの情報を識別するための識別情報が記号で記憶されており、利用者により、複数の画像情報を選択してスライドショーを作成された時に自動的に採番されるようになっている。画像ＩＤの項目には、画像情報データベース４０４１Ａに記憶されている複数の画像情報の中から、スライドショーとして表示するために選択された画像情報の画像ＩＤが記憶されている。例えば、スライドショーＩＤがＬ１では、画像ＩＤ００１、００２、００３、００４が対応付けて記憶されている。よって、利用者が通信端末装置４０を操作して、スライドショーＩＤのＬ１を選択すると、画像ＩＤが００１、００２、００３、００４に対応する画像情報を、表示手段４１３にスライドショーで再生表示することができる。また、表示時間の項目には、対応する画像情報を表示してから次の画像情報に切替えるまので再生時間が秒単位の数値情報で記憶されている。例えば、画像ＩＤ００１では、表示時間が３０秒、同様に画像ＩＤ００２では、２０秒と記憶されている。この表示時間は、利用者が通信端末装置４０に備えられたタッチパネル等の操作入力手段４１４を介して入力操作することで、入力することができるようになっている。また、キーワード検出回数は、詳細な説明は後述するが、対応する画像ＩＤの画像情報が表示されている時に、利用者の音声情報に基づいて検出された回数が記憶されている。
【００３９】
次に、図７を参照して、通信端末装置４０において実行される送信側処理について説明する。図７に示す処理は、ＲＯＭ４０２に記憶されたプログラムに従って、ＣＰＵ４０１が実行する。
【００４０】
図７に示す送信側処理は、通信端末装置４０の電源がＯＮにされると開始される。初めに、画像情報の送信指示が有るかどうかを判断する（Ｓ６０１）。具体的に説明すると、利用者が通信端末装置４０を操作して、画像情報データベース４０４１Ａに記憶されている画像情報の中からどれかを指定し、送信先として他の通信端末装置４０の電話番号、またはネットワークアドレス等の情報を入力して、画像情報を送信するよう操作指示があったかどうかを判断する。または、スライドショー情報データベース４０４２Ａに記憶されているスライドショーＩＤを指定して、対応する画像情報を全て指定するようにしても良い。そしてステップＳ６０１の処理で、ＣＰＵ４０１は送信指示があったと判断した場合（Ｓ６０１：ＹＥＳ）、指定された画像情報と、対応する付属情報を送信する処理を実行する（Ｓ６０２）。また、ステップＳ６０１の処理で、ＣＰＵ４０１が画像情報の送信指示が無いと判断した場合（Ｓ６０１：ＮＯ）、後述するステップＳ６０３へ進む。
【００４１】
次に、ＣＰＵ４０１は、利用者の操作により電話の発呼指示があったかどうかを判断する（Ｓ６０３）。ここで言う発呼指示とは、通常の電話機での発信操作方法と同様なので図示は省略するが、相手装置の電話番号を入力し、電話の発信指示を行う操作である。ステップＳ６０３の処理で、ＣＰＵ４０１は発呼指示があったと判断した場合（Ｓ６０３：ＹＥＳ）、相手の通信端末装置４０と通話状態になるよう処理する（Ｓ６０４）。また、ステップＳ６０３の処理で、電話の発呼指示が無いと判断した場合（Ｓ６０３：ＮＯ）、ステップＳ６０１へ戻る。
【００４２】
続いて、通話中の状態で、スライドショー情報の再生指示があったかどうかを判断する（Ｓ６０５）。具体的には、利用者によりスライドショー情報データベース４０４２Ａに記憶されているスライドショーＩＤを表示手段４１３へ再生するような操作指示があったどうかを、ＣＰＵ４０１が判断する。
【００４３】
そして、ステップＳ６０５の処理で、ＣＰＵ４０１はスライドショーの再生指示があったと判断した場合（Ｓ６０５：ＹＥＳ）、指示されたスライドショーＩＤに対応した表示制御処理を実行する（Ｓ６０６）。
【００４４】
ここで、図８を参照しながらステップＳ６０６で実行するスライドショー表示制御処理について説明する。図８は、スライドショー表示制御処理のフローチャート図である。まず、通話中の利用者の音声を音声信号として検出を開始する（Ｓ６５０）。続いて、ステップＳ６０５の処理で再生指示されたスライドショーＩＤに対応する画像情報の表示を開始する（Ｓ６５１）。例えば、本実施形態ではスライドショーＩＤのＬＩを指示されたとすると、スライドショー情報データベース４０４２Ａを参照して、最初に表示すべき画像ＩＤ００１に対応する画像情報ＡＡＡが、表示手段４１３へ表示される。
【００４５】
続いて、通話相手装置へ同期信号を送信する（Ｓ６５２）。ここでは、通話相手装置と表示する画像情報を連携するための手段として、ステップＳ６５１で表示している画像情報に対応した画像ＩＤ情報を含む同期信号を、電話回線を介したトーン信号方式や、またはネットワークを介した信号方式を用いて、通話相手の通信端末装置４０へ送信する。また、上述した同期信号は、ステップＳ６５１の処理で、表示する画像情報が切替る度に送信されるものとする。また、受信する側の通信端末装置４０の受信側処理については後述するが、ステップＳ６５２で送信された同期信号を受信すると、対応する画像ＩＤの画像情報が受信側の表示手段４１３へ表示するようになっている。
【００４６】
そして、次に、音声信号を検出されたかどうかを判断する（Ｓ６５３）。ここでは、通話中の利用者の音声による音声信号を検出されたかどうかを判断する。つまり、通話利用者が会話をしているかどうかを判断していることになる。そして、ステップＳ６５３の処理で、ＣＰＵ４０１が音声信号を検出したと判断した場合（Ｓ６５３：ＹＥＳ）、続いて、検出された音声信号を文字情報に変換する処理を実行し、変換された文字情報の中に、指定されているスライドショーＩＤにて再生される画像情報に対応した付属情報であるキーワードが検出されたどうかを判断する（Ｓ６５４）。上述した音声信号を文字情報に変換する方法としては例えば、特開２００３−２７１６２９号公報にて開示されているような、音声入力によるテキスト検索技術等の方法を用いれば良い。また、ステップＳ６５４の処理で、キーワードが検出されないと判断した場合（Ｓ６５４：ＮＯ）、表示されている画像情報の再生時間の残りがゼロになったかどうかを判断する（Ｓ６５８）。ステップＳ６５８の処理では、表示されている画像情報がステップＳ６５１で表示を開始された時から、計時手段４１５を作動させ、スライドショー情報データベース４０４２Ａに記憶されている再生時間までの残りの時間を判断している。よって、通話利用者間の会話の中に、スライドショーで再生する画像に関連したキーワードが含まれていないと判断できるので、そのような場合では、予め設定された再生時間で画像情報が表示される。
【００４７】
また、ステップＳ６５４の処理で、音声信号からキーワードを検出したと判断した場合（Ｓ６５４：ＹＥＳ）、次に表示条件変更処理を実行する（Ｓ６５６）。
【００４８】
ここで、図９を参照してステップＳ６５６で処理する表示条件変更処理について説明をする。図９は、表示条件変更処理のフローチャート図である。まず、初めに、ステップＳ６５４の処理で検出されたキーワードが、現在表示している画像情報に対応したキーワードかどうかを判断する（Ｓ８００）。具体的には例えば、ステップＳ６５４の処理で、マイク４１１によって取得した通話利用者の音声信号を、上述の公知の文字変換技術を用いて文字情報に変換する。そして変換した文字情報と、再生されているスライドショーＩＤに対応する画像情報の関連情報とを比較し、変換した文字情報の中にキーワードが含まれているかどうかを判断する。そして例えば、「犬」という文字情報が検出されたとすると、現在表示している画像情報がＡＡＡの場合、画像情報ＡＡＡに対応する付属情報の中に「犬」というキーワード情報が記憶されていることが判断できる。よって、ステップＳ８００の処理では、ＣＰＵ４０１は、表示している画像情報に対応したキーワードを検出したと判断し（Ｓ８００：ＹＥＳ）、表示している画像情報の再生時間を所定時間追加する処理を実行する（Ｓ８０１）。具体的には、現在表示している画像情報の再生時間の残りの時間に、所定時間（例えば１０秒）追加する処理が実行される。よって、ここでは、通話利用者の会話の中に、表示している画像情報に関連するキーワードが含まれていたと判断できるので、画像情報に関する会話がなされていると判断でき、画像情報の再生時間を追加することで、利用者の会話を支援することができる。
【００４９】
さらに、ステップＳ８０１の処理の後、ＣＰＵ４０１は通話利用者の会話の音量が所定閾値以下まで減衰したかどうかを判断する（Ｓ８０２）。具体的には、例えば利用者の音声信号の音量が閾値５０ｄｂ以下になったどうかを判断する。つまりここでは、通話利用者の会話の音量が小さくなったことを検出して、利用者同士の会話が盛り下がったかどうかを判断していることになる。または他の方法として、利用者の音量が通話中に所定割合以上変化したかどうかを判断するようにしてもよい。例えば、所定割合を５０％とし、通話利用者の音量が５０％以上の割合で小さくなったことを判断するようにしても良い。そして、ステップＳ８０２の処理で、ＣＰＵ４０１が音量が所定閾値以下まで減衰したと判断した場合（Ｓ８０２：ＹＥＳ）、表示している画像情報の残りの再生時間をゼロに変更する処理を実行し、（Ｓ８０３）、スライドショー情報データベース４０４２Ａの対応する画像ＩＤのキーワード検出回数を１追加する更新処理を実行する。また、ステップＳ８０２の処理で、ＣＰＵ４０１が音量が閾値以下まで減衰していないと判断した場合（Ｓ８０２：ＮＯ）、ステップＳ８０７へ移行する。
【００５０】
また、ステップＳ８００の処理で、ステップＳ６５４の処理で検出したキーワードが、現在表示している画像情報に対応して記憶されているキーワードには無いと判断した場合（Ｓ８００：ＮＯ）、続いて、前回表示していた画像情報に対応して記憶されているキーワードに含まれているかどうかを判断する（Ｓ８０４）。例えば、表示手段４１３に画像情報ＡＡＡを表示している場合に、ステップＳ６５４で検出されたキーワードが「家」とすると、画像情報ＡＡＡはスライドショーＬ１の最初に表示された画像情報なので、前回表示していた画像情報は無く、ステップＳ８０４の処理ではＮＯと判断する（Ｓ８０４：ＮＯ）。そして、ステップＳ６５４で検出されたキーワードに対応して記憶されている他の画像情報に表示を切替える処理を実行する（Ｓ８０６）。例えば、上述した具体例の場合、ステップＳ６５４で検出したキーワードが、「家」とすると、画像情報データベース４０４１Ａを参照し、画像ＩＤ００２に対応した付属情報に「家」というキーワードが記憶されていることを判断するので、表示する画像情報をＢＢＢへ切替えるよう処理をする（Ｓ８０６）。また、ステップＳ８０６の処理の変形例として、キーワードに対応した画像に頻繁に表示が切替るのを防ぐために、ステップＳ８０６の処理で、現在表示している画像情報が表示を開始してから所定時間以上（たとえば３秒）経過していない場合は、ステップＳ８０６の処理をキャンセルして、次ステップへ移行するようにしても良い。
【００５１】
または、ステップＳ８０４の処理で、ステップＳ６５４にて検出されたキーワードが、現在表示している画像情報の前回に表示していた画像情報に対応したキーワードであると、ＣＰＵ４０１が判断した場合（Ｓ８０４：ＹＥＳ）、前回表示していた画像情報に表示を戻すように切替える処理を実行する（Ｓ８０５）。具体的には、例えば現在表示している画像情報がＣＣＣの場合、ステップＳ６５４の処理で検出されたキーワードが「家」とすると、画像情報ＣＣＣの前に表示していた画像ＩＤ００２に対応する付属情報に「家」というキーワードが記憶されていると判断し、画像ＩＤ００２に対応する画像情報ＢＢＢに表示を切替える処理を実行する（Ｓ８０５）。したがって、ここでは、通話利用者の会話の中に、現在表示している画像情報に関連するキーワードが発話されていないと判断でき、前回表示していた情報か、もしくは、その他の画像情報の中から、キーワードに対応した画像情報に表示を切替えることで、利用者の会話を支援することができる。
【００５２】
そして、上述したステップＳ８０３か、またはステップＳ８０５か、またはステップＳ８０６の処理の後、スライドショー情報データベース４０４２Ａのキーワード検出回数の項目の回数を１追加する更新処理を実行し（Ｓ８０７）、本処理である表示条件変更処理を終了する。
【００５３】
そして、図８のスライドショー表示制御処理に戻り、ステップＳ６５６の処理である表示条件変更処理が実行された後、ＣＰＵ４０１は、表示している画像情報の再生時間の残り時間がゼロになったかどうかを判断する（Ｓ６５８）。そして、残り時間がまだゼロになっていないと判断した場合（Ｓ６５８：ＮＯ）、再度ステップＳ６５３の処理へ戻り、繰り返し処理が実行される。また、再生時間の残り時間がゼロになったと判断した場合（Ｓ６５８：ＹＥＳ）、スライドショー情報データベース４０４２Ａを参照して、次に表示すべき画像情報があるかどうかを判断する（Ｓ６５９：ＹＥＳ）。ステップＳ６５９の処理にて、次に表示すべき画像情報があると判断した場合（Ｓ６５９：ＹＥＳ）、再度ステップＳ６５１の処理へ戻り、繰り返し処理が実行される。また、ステップＳ６５９の処理で、次に表示すべき画像情報が無いと判断した場合（Ｓ６５９：ＮＯ）、利用者により別のスライドショーＩＤの再生指示があったかどうかを判断する（Ｓ６６０：ＮＯ）。ステップＳ６６０の処理で、別のスライドショーＩＤの再生処理の指示があったと判断した場合（Ｓ６６０：ＹＥＳ）、ステップＳ６５１の処理へ戻り、指示されたスライドショーＩＤに対応した画像情報の再生が開始される。また、ステップＳ６６０の処理にて、利用者により、別のスライドショーＩＤの再生の指示が無いと判断した場合（Ｓ６６０：ＮＯ）、本処理であるスライドショー表示制御処理を終了する。
【００５４】
また、ステップＳ６５３の処理の説明に戻り、通話利用者の音声信号を検出したかどうかの判断で、検出していないと判断した場合（Ｓ６５３：ＮＯ）、次にＣＰＵ４０１は、通話利用者同士の会話が無い時間である無音時間が所定時間以上経過したかどうかを判断する（Ｓ６５５）。ここで言う、無音時間とはステップＳ６５３の処理で音声信号を検出しなくなってから、計時手段４１５を作動させて経過時間を計測する時間である。また所定時間とは、例えば３〜５秒等ように、会話が途切れたと判断できる時間が設定されているものとする。そして、無音時間が上述の所定時間以上経過していないと判断した場合（Ｓ６５５：ＮＯ）、上述したステップＳ６５８へ移行する。また、ステップＳ６５５の処理で、無音時間が所定時間以上経過したと判断した場合（Ｓ６５５：ＹＥＳ）、上述したステップＳ６５９以降の処理が実行される。
【００５５】
ここで、図７の送信側処理へ戻り、上述したステップＳ６０６の処理であるスライドショー表示制御処理が実行された後、通話終了指示があるかどうかを判断する（Ｓ６０８）。または、ステップＳ６０５の処理にて、ＣＰＵ４０１はスライドショーの再生指示が無いと判断した場合（Ｓ６０５：ＮＯ）、通常の通話処理が継続された後、通話終了指示があるかどうかを判断する（Ｓ６０８）。ステップＳ６０８の処理で、通話終了指示があったと判断した場合（Ｓ６０８：ＹＥＳ）、通話を終了し、画像情報の表示を終了させ（Ｓ６０９）、本処理である送信側処理を終了する。また、ステップＳ６０８の処理で、通話終了指示が無いと判断した場合（Ｓ６０８：ＮＯ）、ステップＳ６０５へ戻り、繰り返し処理を実行する。
【００５６】
上述に説明した本実施形態である送信側処理を実行することにより、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を会話の内容に適するように変更制御することができる。したがって、通話利用者はお互いに、会話に基づいて表示制御された画像情報を確認することで、話題を変えながら円滑な会話を行うことができる。
【００５７】
次に、図１０を参照して、通信端末装置４０において実行される受信側処理について説明する。図１０に示す処理は、ＲＯＭ４０２に記憶されたプログラムに従って、ＣＰＵ４０１が実行する。図１０に示す受信側処理は、通信端末装置４０の電源がＯＮにされると開始される。初めに、画像情報の受信指示が有るかどうかを判断する（Ｓ９０１）。具体的には、他の通信端末装置の送信側処理（図７）でのＳ６０２の送信処理により送信された画像情報と、対応する付属情報を受信したかどうかを判断する。ステップＳ９０１の処理にて、受信していないと判断された場合（Ｓ９０１：ＮＯ）、ステップＳ９０３へ移行する。また、ステップＳ９０１の処理で、画像情報と、対応する付属情報を受信したと判断した場合（Ｓ９０１：ＹＥＳ）、受信した画像情報と付属情報の記憶処理を実行する（Ｓ９０２）。具体的には、フラッシュＲＯＭ４０４の画像情報記憶エリア４０４１の画像情報データベース４０４１Ａに受信した画像情報と付属情報を記憶する。
【００５８】
そして、ＣＰＵ４０１は、電話の着呼があったかどうかを判断する（Ｓ９０３）。ここでは、他の通信端末装置４０の送信側処理（図７）において、Ｓ６０３の処理にて発呼された発呼指示に対応する着呼指示があったかどうかを判断する。ＣＰＵ４０１がステップＳ９０３の処理で、着呼指示が無いと判断した場合（Ｓ９０３：ＮＯ）、ステップＳ９０１の処理へ戻る。また、ステップＳ９０３の処理で着呼指示があったと判断した場合（Ｓ９０３：ＹＥＳ）、発呼指示に対応した他の通信端末装置４０と電話回線を介して通話ができるよう処理を実行する（Ｓ９０４）。
【００５９】
続いて、ステップＳ９０４の処理にて他の通信端末装置４０と通話中になった状態で、通話相手の通信端末装置４０から同期信号を受信したかどうかを判断する（Ｓ９０５）。ここでは、通話相手の通信端末装置４０で実行されるスライドショー表示制御処理のＳ６５２の処理（図８）にて送信された、画像ＩＤ情報を含む同期信号を受信したかどうかを判断する（Ｓ９０５）。ステップＳ９０６の処理で、同期信号を受信したと判断した場合（Ｓ９０６：ＹＥＳ）、受信した同期信号に含まれる画像ＩＤ情報に対応した画像情報を、画像情報データベース４０４１Ａから取得し、表示手段４１３の表示画面に表示する（Ｓ９０６）。ここでは、それまで受信側の通信端末装置４０の表示手段４１３に表示されていた画像情報から、同期信号に対応した画像情報に表示が切替る。また、ステップＳ９０５の処理にて、ＣＰＵ４０１が同期信号を受信していないと判断した場合（Ｓ９０５：ＮＯ）、通常の通話処理を継続する。
【００６０】
そして、ステップＳ９０６の処理後、または、ステップＳ９０７の処理後に、ＣＰＵ４０１は、通話終了指示があるかどうかを判断する（Ｓ９０８）。ステップＳ９０８の処理で、通話終了指示があったと判断した場合（Ｓ９０８：ＹＥＳ）、通話を終了し、画像情報の表示を終了させ（Ｓ９０９）、本処理である受信側処理を終了する。また、ステップＳ９０８の処理で、通話終了指示が無いと判断した場合（Ｓ９０８：ＮＯ）、ステップＳ９０５へ戻り、繰り返し処理を実行する。
【００６１】
上述に説明した本実施形態である受信側処理を実行することにより、利用者が電話回線を介した通話手段にて通話中に、利用者の音声情報に基づいて、表示手段に表示する画像情報の表示条件を会話の内容に適するように変更制御することができる。したがって、通話利用者はお互いに、会話に基づいて表示制御された画像情報を確認することで、話題を変えながら円滑な会話を行うことができる。
【００６２】
なお、前述の実施形態に示される構成や処理は例示であり、各種の変形が可能なことはいうまでもない。例えば、図９のステップ８０４の処理で検出されているキーワードに対応した画像情報が複数抽出された場合、次のステップであるＳ８０６の処理では、スライドショー情報データベース４０２２Ａに記憶されているキーワード検出回数を参照して、検出回数の多い順から再生表示するようにしても良い。
【００６３】
また、図９のステップ８０７の処理にて、キーワード検出回数を更新した後、対応するスライドショーＩＤの画像情報を表示する順番を、キーワード検出回数の多い順になるように更新するようにしてもよい。そのようにすれば、次回の通話時にスライドショーを再生する時に、利用者に関係性の高い画像情報から再生表示されるようになるので、より通話による会話を支援することができるようになる。
【００６４】
また、図７のステップＳ６０６のスライドショー表示制御処理を終えた後、ステップＳ６０８での通話終了指示が有るまでは、Ｓ６０５の処理でスライドショー再生指示が無いと判断し（Ｓ６０５：ＮＯ）、通常の通話処理（Ｓ６０７）になるようになっているが、これに限るものではない。例えば、初回のステップＳ６０５、Ｓ６０６の処理の終了後に、次回のステップＳ６０５では、初回指示されたスライドショーを自動的に再度指示するように設定すれば、通話終了指示があるまで繰り返しステップＳ６０６が実行され、継続して会話に適した画像情報を表示させるようにすることもできる。
【００６５】
また、前述の実施形態では、送信側での通信端末装置４０と、受信側とした通話相手の通信端末装置４０とで、表示手段４１３に表示する画像情報を連携して共通の画像情報を表示できるようにするために、図８のステップＳ６５２で処理する同期信号を送受信することで連携できるようにしていたが、これに限るものではない。例えば、送信側から受信側へ予め画像情報データベース４０４１Ａと、スライドショー情報データベース４０４２Ａを、受信側である通話相手の通信端末装置４０へ送信しておき、送信側と受信側による通話が開始されてから、両者で同時に同じスライドショーＩＤを開始する。そして、両者の通信端末装置４０で、図８に示すスライドショー表示制御処理を実行させるようにすれば、上述した同期信号を用いず、通話している通信端末装置４０の間で、表示する画像情報を連携できるようにしてもよい。
【符号の説明】
【００６６】
２０ 電話回線
３０ 子機
４０ 通信端末装置
４１１ マイク
４１２ スピーカ
４１３ 表示手段
４０４１Ａ 画像情報データベース
４０４２Ａ スライドショー情報データベース
【特許請求の範囲】
【請求項１】
電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置において、
前記画像情報を表示する表示領域を備えた表示手段と、
利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携手段と、
前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断手段と、
前記音声情報判断手段により前記音声情報が前記所定条件になったと判断した場合、前記連携手段により連携して表示している前記画像情報の表示条件を変更する表示条件変更手段と、
を備えることを特徴とする通信端末装置。
【請求項２】
前記音声情報判断手段は、前記音声情報に会話が無い状態である無音状態が所定時間以上含まれているかどうかを前記所定条件として判断し、
前記表示条件変更手段は、前記音声情報判断手段により、前記無音状態が所定時間以上含まれていると判断された場合、前記表示手段に表示されている前記画像情報を別の画像情報に切替えることを特徴とする請求項１に記載の通信端末装置。
【請求項３】
前記通信端末装置は、前記画像情報と関連する情報である付属情報を、前記画像情報と対応付けて記憶する付属情報記憶手段と、
前記通話手段より取得した前記音声情報を文字情報に変換する変換手段と、
をさらに備え、
前記音声情報判断手段は、前記付属情報記憶手段に記憶されている前記付属情報が、前記変換手段により変換された前記文字情報に含まれているかどうかを前記所定条件として判断することを特徴とする請求項１に記載の通信端末装置。
【請求項４】
前記表示条件変更手段は、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が、前記連携手段にて連携して表示している前記画像情報の前記付属情報と一致する場合、表示している前記画像情報を別の画像情報に切替えるまでの時間を所定時間長くすることを特徴とする請求項３に記載の通信端末装置。
【請求項５】
前記表示条件変更手段は、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が、前記連携手段にて連携して表示している前記画像情報の前記付属情報と一致しない場合、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報に対応した前記画像情報を前記付属情報記憶手段から抽出し、抽出された前記画像情報に表示を切替えることを特徴とする請求項３乃至４のいずれかに記載の通信端末装置。
【請求項６】
前記表示条件変更手段は、前記付属情報に対応した前記画像情報を前記付属情報記憶手段から複数抽出した場合、抽出した複数の前記画像情報のみを切替えながら表示することを特徴とする請求項５に記載の通信端末装置。
【請求項７】
前記音声情報判断手段は、前記音声情報の音量を計測する音量計測手段を備え、
前記音量計測手段により計測された前記音声情報の音量が所定割合以上変化した場合、
前記表示条件変更手段は、前記付属情報記憶手段から抽出した複数の前記画像情報の別の画像情報に表示を切替えることを特徴とする請求項６に記載の通信端末装置。
【請求項８】
前記表示条件変更手段は、前記画像情報の表示を切替えてから所定時間以内に、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が切替え前の前記画像情報に対応した前記付属情報と一致する場合、切替え前の前記画像情報に表示を戻すことを特徴とする請求項３乃至７のいずれかに記載の通信端末装置。
【請求項９】
電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を一定時間毎に切替えながら表示を制御する表示制御手段とを備えた通信端末装置にて処理する通信制御方法において、
利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により、表示領域を備えた表示手段に表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携ステップと、
前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断ステップと、
前記音声情報判断ステップにより前記音声情報が前記所定条件になったと判断した場合、前記連携ステップにより連携して表示している前記画像情報の表示条件を変更する表示条件変更ステップと、
を処理することを特徴とする通信制御方法。
【請求項１０】
電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を一定時間毎に切替えながら表示を制御する表示制御手段とを備えた通信端末装置を実行させる制御プログラムにおいて、
利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により、表示領域を備えた表示手段に表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携ステップと、
前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断ステップと、
前記音声情報判断ステップにより前記音声情報が前記所定条件になったと判断した場合、前記連携ステップにより連携して表示している前記画像情報の表示条件を変更する表示条件変更ステップと、
を前記通信端末装置で実行させるための制御プログラム。
【請求項１】
電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を切替えながら表示を制御する表示制御手段とを備えた通信端末装置において、
前記画像情報を表示する表示領域を備えた表示手段と、
利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携手段と、
前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断手段と、
前記音声情報判断手段により前記音声情報が前記所定条件になったと判断した場合、前記連携手段により連携して表示している前記画像情報の表示条件を変更する表示条件変更手段と、
を備えることを特徴とする通信端末装置。
【請求項２】
前記音声情報判断手段は、前記音声情報に会話が無い状態である無音状態が所定時間以上含まれているかどうかを前記所定条件として判断し、
前記表示条件変更手段は、前記音声情報判断手段により、前記無音状態が所定時間以上含まれていると判断された場合、前記表示手段に表示されている前記画像情報を別の画像情報に切替えることを特徴とする請求項１に記載の通信端末装置。
【請求項３】
前記通信端末装置は、前記画像情報と関連する情報である付属情報を、前記画像情報と対応付けて記憶する付属情報記憶手段と、
前記通話手段より取得した前記音声情報を文字情報に変換する変換手段と、
をさらに備え、
前記音声情報判断手段は、前記付属情報記憶手段に記憶されている前記付属情報が、前記変換手段により変換された前記文字情報に含まれているかどうかを前記所定条件として判断することを特徴とする請求項１に記載の通信端末装置。
【請求項４】
前記表示条件変更手段は、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が、前記連携手段にて連携して表示している前記画像情報の前記付属情報と一致する場合、表示している前記画像情報を別の画像情報に切替えるまでの時間を所定時間長くすることを特徴とする請求項３に記載の通信端末装置。
【請求項５】
前記表示条件変更手段は、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が、前記連携手段にて連携して表示している前記画像情報の前記付属情報と一致しない場合、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報に対応した前記画像情報を前記付属情報記憶手段から抽出し、抽出された前記画像情報に表示を切替えることを特徴とする請求項３乃至４のいずれかに記載の通信端末装置。
【請求項６】
前記表示条件変更手段は、前記付属情報に対応した前記画像情報を前記付属情報記憶手段から複数抽出した場合、抽出した複数の前記画像情報のみを切替えながら表示することを特徴とする請求項５に記載の通信端末装置。
【請求項７】
前記音声情報判断手段は、前記音声情報の音量を計測する音量計測手段を備え、
前記音量計測手段により計測された前記音声情報の音量が所定割合以上変化した場合、
前記表示条件変更手段は、前記付属情報記憶手段から抽出した複数の前記画像情報の別の画像情報に表示を切替えることを特徴とする請求項６に記載の通信端末装置。
【請求項８】
前記表示条件変更手段は、前記画像情報の表示を切替えてから所定時間以内に、前記音声情報判断手段により前記所定条件であると判断され、かつ前記音声情報に含まれていると判断された前記付属情報が切替え前の前記画像情報に対応した前記付属情報と一致する場合、切替え前の前記画像情報に表示を戻すことを特徴とする請求項３乃至７のいずれかに記載の通信端末装置。
【請求項９】
電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を一定時間毎に切替えながら表示を制御する表示制御手段とを備えた通信端末装置にて処理する通信制御方法において、
利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により、表示領域を備えた表示手段に表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携ステップと、
前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断ステップと、
前記音声情報判断ステップにより前記音声情報が前記所定条件になったと判断した場合、前記連携ステップにより連携して表示している前記画像情報の表示条件を変更する表示条件変更ステップと、
を処理することを特徴とする通信制御方法。
【請求項１０】
電話回線を介して他拠点の装置と通話を行う通話手段と、複数の画像情報を一定時間毎に切替えながら表示を制御する表示制御手段とを備えた通信端末装置を実行させる制御プログラムにおいて、
利用者が前記通話手段にて他拠点の前記通信端末装置と通話中に、前記表示制御手段により、表示領域を備えた表示手段に表示している前記画像情報を、他拠点の前記表示手段に表示するように前記画像情報と連携して表示させる連携ステップと、
前記通話手段にて行われる前記利用者の通話を音声情報として取得し、前記音声情報が所定条件になったかどうかを判断する音声情報判断ステップと、
前記音声情報判断ステップにより前記音声情報が前記所定条件になったと判断した場合、前記連携ステップにより連携して表示している前記画像情報の表示条件を変更する表示条件変更ステップと、
を前記通信端末装置で実行させるための制御プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２０１１−７７８６０（Ｐ２０１１−７７８６０Ａ）
【公開日】平成２３年４月１４日（２０１１．４．１４）
【国際特許分類】
【出願番号】特願２００９−２２７７０５（Ｐ２００９−２２７７０５）
【出願日】平成２１年９月３０日（２００９．９．３０）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
【公開日】平成２３年４月１４日（２０１１．４．１４）
【国際特許分類】
【出願日】平成２１年９月３０日（２００９．９．３０）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
[ Back to top ]