通話端末装置、表示制御方法、表示制御プログラム
【課題】ユーザに不快感を与えることなく、通話端末装置の状態を示す情報を確実にユーザに対して通知することが可能な通話端末装置、表示方法、表示プログラムを提供する。
【解決手段】通話端末装置は、ユーザによって通話が開始された場合（Ｓ１２１：ＹＥＳ）、複数の第一画像を順次切り替えながらディスプレイに表示させるスライドショー表示を行う（Ｓ１２３、Ｓ１２９）。ここで、通話中の通話の通話料金が所定の閾値以上となった場合や、電池残量が所定の閾値以下となった場合であって、ユーザがディスプレイに視線を向けたことが検出された場合（Ｓ１２５：ＹＥＳ）、これらの状態情報をユーザに対して通知する為の第二画像をスライドショー表示の間に挿入させる（Ｓ１３１）。これによって、ユーザに対して確実に状態情報を認識させる。
【解決手段】通話端末装置は、ユーザによって通話が開始された場合（Ｓ１２１：ＹＥＳ）、複数の第一画像を順次切り替えながらディスプレイに表示させるスライドショー表示を行う（Ｓ１２３、Ｓ１２９）。ここで、通話中の通話の通話料金が所定の閾値以上となった場合や、電池残量が所定の閾値以下となった場合であって、ユーザがディスプレイに視線を向けたことが検出された場合（Ｓ１２５：ＹＥＳ）、これらの状態情報をユーザに対して通知する為の第二画像をスライドショー表示の間に挿入させる（Ｓ１３１）。これによって、ユーザに対して確実に状態情報を認識させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通話端末装置、表示制御方法、表示制御プログラムに関する。より詳細には、通話端末装置の状態を示す情報をディスプレイに表示させることによってユーザに通知する通話端末装置、表示制御方法、表示制御プログラムに関する。
【背景技術】
【０００２】
従前より、通話端末装置の状態を示す各種情報をユーザに通知するために、各種情報をディスプレイに表示したり、音を出力したりする通話端末装置が知られている。例えば特許文献１に記載の通話端末装置は、電池残量をディスプレイに表示させる。ユーザは、ディスプレイに表示される電池残量を視認し、通話端末装置を充電する必要があるかを認識する。また、例えば特許文献２に記載の通話端末装置は、通話料金をディスプレイに表示するとともに、ブザーを鳴らす。ユーザは、ディスプレイに表示される通話料金を視認したり、ブザー音を聞いたりすることによって、通話料金を認識する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平９−２３３７１１号公報
【特許文献２】特開平５−４１７５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら上述の通話端末装置のディスプレイには、通話時において、ユーザの興味を惹く画像が表示されないので、通話中のユーザは、常時ディスプレイを視認しない。従って、ユーザがディスプレイに表示される各種情報を見落としてしまう場合があるという問題点がある。また、ブザー音によって各種情報が通知される場合は、ブザー音が通話先のユーザにも聞こえてしまう。このため、通話先のユーザに不快感を与えてしまうという問題点がある。
【０００５】
本発明は上述の問題点を解決するためになされたものであり、ユーザに不快感を与えることなく、通話端末装置の状態を示す情報を確実にユーザに対して通知することが可能な通話端末装置、表示制御方法、表示制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述の問題点を解決するために、請求項１に係る発明の通話端末装置は、他の通話端末装置との通話を行う通話手段と、画像データが表示される表示手段と、複数の前記画像データが記憶される第一記憶手段と、前記通話手段によって前記他の通話端末装置との通話が行われている場合に、前記第一記憶手段に記憶された前記画像データである第一画像データを所定の周期で順次切り替えながら前記表示手段に表示させる制御を行う第一表示制御手段と、前記通話端末装置の状態を示す情報である状態情報を取得する情報取得手段と、前記情報取得手段によって取得される前記状態情報に関連付けられた画像データである第二画像データが記憶される第二記憶手段と、前記情報取得手段によって前記状態情報が取得された場合に、前記第一表示制御手段によって切り替えて表示される一の前記第一画像データと他の前記第一画像データとの間に、前記状態情報に関連付けられた前記第二画像データであって前記第二記憶手段に記憶された前記第二画像データを所定時間表示させる制御を行う第二表示制御手段とを備えている。
【０００７】
また、請求項２に係る発明の通話端末装置は、請求項１に記載の発明の構成に加えて、前記通話手段によって前記他の通話端末装置との通話が行われている場合の通話時間に基づいて、通話中の通話により発生する通話料金を算出する料金算出手段、又は、前記通話端末装置を駆動する電池の電圧に基づいて、前記電池の残量を特定する残量特定手段のうち少なくとも一方を備え、前記情報取得手段は、前記料金算出手段によって前記通話料金が算出された場合であって、前記通話料金の値が、第一閾値記憶手段に記憶された所定の閾値である第一閾値以上である場合に、算出された前記通話料金を前記状態情報として取得し、前記残量特定手段によって前記残量が特定された場合であって、前記残量の値が、第二閾値記憶手段に記憶された所定の閾値である第二閾値以下である場合に、特定された前記残量を前記状態情報として取得することを特徴とする。
【０００８】
また、請求項３に係る発明の通話端末装置は、請求項１又は２に記載の発明の構成に加えて、前記通話端末装置のユーザを撮影する第一撮影手段と、前記第一撮影手段によって撮影された撮影データに基づき、前記ユーザの視線方向を特定する視線特定手段と、前記視線特定手段によって特定された前記ユーザの視線方向から、前記ユーザが前記表示手段を視認しているかを判断する視認判断手段とを備え、前記第二表示制御手段は、前記視認判断手段において前記ユーザが前記表示手段を視認していると判断された場合に、前記第二画像データを表示させることを特徴とする。
【０００９】
また、請求項４に係る発明の通話端末装置は、請求項１又は２に記載の発明の構成に加えて、前記通話手段によって前記他の通話端末装置と通話が行われている場合の通話音声を検出する音声検出手段と、前記音声検出手段において前記通話音声が連続して検出されない場合に、検出されない状態となってからの経過時間を計測する第一時間計測手段とを備え、前記第二表示制御手段は、前記第一時間計測手段によって計測された前記経過時間の値が、第三閾値記憶手段に記憶された所定の閾値である第三閾値以上であった場合に、前記第二画像データを表示させることを特徴とする。
【００１０】
また、請求項５に係る発明の通話端末装置は、請求項１又は２に記載の発明の構成に加えて、情報が入力される入力手段を備え、前記第二表示制御手段は、前記入力手段によって前記情報が入力された場合に、前記第二画像データを表示させることを特徴とする。
【００１１】
また、請求項６に係る発明の通話端末装置は、請求項１又は２に記載の発明の構成に加えて、前記情報取得手段が前記状態情報を取得してからの経過時間を計測する第二時間計測手段を備え、前記第二表示制御手段は、前記第二時間計測手段によって計測された前記経過時間の値が、第四閾値記憶手段に記憶された所定の閾値である第四閾値以上となった場合に、前記第二画像データを表示させることを特徴とする。
【００１２】
また、請求項７に係る発明の通話端末装置は、請求項２に記載の発明の構成に加えて、前記料金算出手段によって前記通話料金が算出された場合であって、前記通話料金の値が、第五閾値記憶手段に記憶された所定の閾値である第五閾値以上である場合に、前記通話料金に関連付けられた前記第二画像データを継続して前記表示手段に表示させる制御を行う第三表示制御手段を備えたことを特徴とする。
【００１３】
また、請求項８に係る発明の通話端末装置は、請求項２に記載の発明の構成に加えて、前記残量特定手段によって前記残量が特定された場合であって、前記残量の値が、第六閾値記憶手段に記憶された所定の閾値である第六閾値以下である場合に、前記残量に関連付けられた前記第二画像データを継続して前記表示手段に表示させる制御を行う第四表示制御手段を備えたことを特徴とする。
【００１４】
また、請求項９に係る発明の通話端末装置は、請求項１乃至８のいずれかに記載の発明の構成に加えて、前記第二画像データは、前記ユーザを特定するユーザ特定情報に対応付けられて前記第二記憶手段に記憶されており、前記通話端末装置のユーザを撮影する第二撮影手段と、前記第二撮影手段によって撮影された撮影データに基づいて、前記ユーザを特定する第一ユーザ特定手段とを備え、前記第二表示制御手段は、前記第一ユーザ特定手段によって特定された前記ユーザのユーザ特定情報に対応付けられた前記第二画像データを表示させることを特徴とする。
【００１５】
また、請求項１０に係る発明の通話端末装置は、請求項１乃至８のいずれかに記載の発明の構成に加えて、前記第二画像データは、前記ユーザを特定するユーザ特定情報に対応付けられて前記第二記憶手段に記憶されており、前記通話端末装置のユーザの音声を取得する音声取得手段と、前記音声取得手段によって取得された前記音声に基づいて、前記ユーザを特定する第二ユーザ特定手段とを備え、前記第二表示制御手段は、前記第二ユーザ特定手段によって特定された前記ユーザのユーザ特定情報に対応付けられた前記第二画像データを表示させることを特徴とする。
【００１６】
また、請求項１１に係る発明の通話端末装置は、請求項２に記載の発明の構成に加えて、前記通話料金と前記残量との両方に関連付けられた画像データである第三画像データが記憶される第三記憶手段を備え、前記情報取得手段は、前記料金算出手段及び前記残量特定手段の両方を備えている場合であって、前記料金算出手段によって算出された前記通話料金の値が前記第一閾値以上であり、且つ、前記残量特定手段によって特定された前記残量が前記第二閾値以下である場合に、前記通話料金と前記残量とを前記状態情報として取得し、前記第二表示制御手段は、前記情報取得手段によって前記通話料金と前記残量とが前記状態情報として取得された場合には、前記通話料金と前記残量との両方に関連付けられた前記第三画像データであって前記第三記憶手段に記憶されている前記第三画像データを表示させることを特徴とする。
【００１７】
また、請求項１２に係る発明の通話端末装置は、請求項２に記載の発明の構成に加えて、前記第一閾値記憶手段には、第二画像データを表示させる回数の情報である第一表示回数と、前記第二画像データを表示させる周期である第一表示周期とが、前記第一閾値に対応付けられて記憶されており、第二表示制御手段は、前記情報取得手段において、前記通話料金が前記第一閾値以上であるとして前記状態情報が取得された場合には、前記第二画像データを前記第一表示周期で前記第一表示回数分繰り返し表示させる制御を行うことを特徴とする。
【００１８】
また、請求項１３に係る発明の通話端末装置は、請求項２に記載の発明の構成に加えて、前記第二閾値記憶手段には、第二画像データを表示させる回数の情報である第二表示回数と、前記第二画像データを表示させる周期である第二表示周期とが、前記第二閾値に対応付けられて記憶されており、第二表示制御手段は、前記情報取得手段において、前記残量が前記第二閾値以下であるとして前記状態情報が取得された場合には、前記第二画像データを前記第二表示周期で前記第二表示回数分繰り返し表示させる制御を行うことを特徴とする。
【００１９】
また、請求項１４に係る発明の表示制御方法は、他の通話端末装置との通話を行う通話ステップと、前記通話ステップによって前記他の通話端末装置との通話が行われている場合に、第一記憶手段に記憶された画像データである第一画像データを所定の周期で順次切り替えながら表示手段に表示させる制御を行う第一表示制御ステップと、前記通話端末装置の状態を示す情報である状態情報を取得する情報取得ステップと、前記情報取得ステップによって前記状態情報が取得された場合に、前記第一表示制御ステップによって切り替えて表示される一の前記第一画像データと他の前記第一画像データとの間に、前記状態情報に関連付けられた画像データであって第二記憶手段に記憶された画像データである前記第二画像データを所定時間表示させる制御を行う第二表示制御ステップとを備えている。
【００２０】
また、請求項１５に係る発明の表示制御プログラムは、請求項１乃至１３のいずれかに記載の通話端末装置の各処理手段としてコンピュータを機能させる。
【発明の効果】
【００２１】
請求項１に係る発明の通話端末装置は、表示手段を備えている。通話中において、第一画像データが所定の周期で順次切り替えられながら表示手段に表示される。通話端末装置の状態を示す状態情報が取得された場合には、一の第一画像データと他の第一画像データとの間に、状態情報をユーザに通知する為の第二画像データが所定時間表示される。表示手段には第一画像データが順次表示されているので、ユーザは通話中であっても表示手段を視認するようになる。ユーザは、第二画像データを視認することによって、状態情報を認識することが可能となる。
【００２２】
また、請求項２に係る発明の通話端末装置は、請求項１に記載の発明の効果に加えて、通話料金が第一閾値以上となった場合に、通話料金が状態情報として取得される。取得された通話料金を通知する為の状態情報に関連づけられた第二画像データが表示手段に表示される。ユーザは、第二画像データを視認することによって、通話料金を認識することが可能となる。電池残量が第二閾値以下となった場合に、電池残量が状態情報として取得される。取得された電池残量を通知する為の状態情報に関連づけられた第二画像データが表示手段に表示される。ユーザは、第二画像データを視認することによって、電池残量を認識することが可能となる。
【００２３】
また、請求項３に係る発明の通話端末装置は、請求項１又は２に記載の発明の効果に加えて、ユーザが表示手段を視認している場合に、取得された状態情報を通知する為の第二画像データが表示手段に表示される。通話端末装置は、表示手段を視認しているユーザに対して、確実に第二画像データを視認させることが可能となる。
【００２４】
また、請求項４に係る発明の通話端末装置は、請求項１又は２に記載の発明の効果に加えて、通話音声が途切れた場合に、取得された状態情報を通知する為の第二画像データが表示手段に表示される。ユーザは表示手段を視認している可能性が高いので、通話端末装置は、ユーザに対してより効果的に第二画像データを視認させることが可能となる。
【００２５】
また、請求項５に係る発明の通話端末装置は、請求項１又は２に記載の発明の効果に加えて、ユーザが何らかの入力操作を行った場合に、取得された状態情報を通知する為の第二画像データが表示手段に表示される。ユーザは表示手段を視認している可能性が高いので、通話端末装置は、ユーザに対してより効果的に第二画像データを視認させることが可能となる。
【００２６】
また、請求項６に係る発明の通話端末装置は、請求項１又は２に記載の発明の効果に加えて、状態情報が取得されてからの経過時間が第四閾値以上となった状態で、未だ表示手段に第二画像データが表示されていない場合には、第二画像データを表示手段に表示させる。通話端末装置は、第二画像データが表示手段に表示されない状態を防止できる。
【００２７】
また、請求項７に係る発明の通話端末装置は、請求項２に記載の発明の効果に加えて、通話料金が第五閾値以上である場合には、通話料金をユーザに通知する為の第二画像データを継続して表示手段に表示させる。通話端末装置は、ユーザに対して確実に第二画像データを視認させることが可能となる。
【００２８】
また、請求項８に係る発明の通話端末装置は、請求項２に記載の発明の効果に加えて、電池残量が第六閾値以下である場合に、電池残量をユーザに通知する為の第二画像データを継続して表示手段に表示させる。通話端末装置は、ユーザに対して確実に第二画像データを視認させることが可能となる。
【００２９】
また、請求項９に係る発明の通話端末装置は、請求項１乃至８のいずれかに記載の発明の効果に加えて、第二撮影手段によって撮影された撮影データに基づいて、ユーザが特定される。特定されたユーザに対応付けられている第二画像データが、表示手段に表示される。通話端末装置は、ユーザに最適な第二画像データを選択して表示手段に表示させることができる。
【００３０】
また、請求項１０に係る発明の通話端末装置は、請求項１乃至８のいずれかに記載の発明の効果に加えて、音声取得手段によって取得された音声に基づいて、ユーザが特定される。特定されたユーザに対応付けられている第二画像データが、表示手段に表示される。通話端末装置は、ユーザに最適な第二画像データを選択して表示手段に表示させることが可能となる。
【００３１】
また、請求項１１に係る発明の通話端末装置は、請求項２に記載の発明の効果に加えて、通話料金が第一閾値以上となり、且つ電池残量が第二閾値以下となった場合に、両方を通知する為の第三画像データが表示手段に表示される。ユーザは、第三画像データを視認することによって、通話料金と電池残量とを認識することが可能となる。
【００３２】
また、請求項１２に係る発明の通話端末装置は、請求項２に記載の発明の効果に加えて、通話料金に対して設定される閾値に応じて、第二画像データを表示させる回数や周期を変化させることが可能となる。これによって、ユーザに対する通知の程度を変化させ、より確実にユーザに通話料金を認識させることが可能となる。
【００３３】
また、請求項１３に係る発明の通話端末装置は、請求項２に記載の発明の効果に加えて、残量に対して設定される閾値に応じて、第二画像データを表示させる回数や周期を変化させることが可能となる。これによって、ユーザに対する通知の程度を変化させ、より確実にユーザに電池残量を認識させることが可能となる。
【００３４】
また、請求項１４に係る発明の表示制御方法では、通話中において、第一画像データが所定の周期で順次切り替えられながら表示手段に表示される。通話端末装置の状態を示す状態情報が取得された場合には、一の第一画像データと他の第一画像データとの間に、状態情報をユーザに通知する為の第二画像データが所定時間表示される。表示手段には第一画像データが順次表示されているので、ユーザは通話中であっても表示手段を視認するようになる。ユーザは、第二画像データを視認することによって、状態情報を認識することが可能となる。
【００３５】
また、請求項１５に係る発明の表示制御プログラムは、請求項１乃至１３のいずれかに記載の通話端末装置の各処理手段としてコンピュータを機能させることができる。
【図面の簡単な説明】
【００３６】
【図１】通話端末装置１の物理的構成を示す模式図である。
【図２】通話端末子機２の物理的構成を示す模式図である。
【図３】通話端末装置１の電気的構成を示す模式図である。
【図４】フラッシュメモリ２５の記憶領域を示す模式図である。
【図５】第一画像テーブル２５２１を示す模式図である。
【図６】第二画像テーブル２５４１を示す模式図である。
【図７】通話端末子機２の電気的構成を示す模式図である。
【図８】メイン処理を示すフローチャートである。
【図９】通話処理を示すフローチャートである。
【図１０】通話処理を示すフローチャートである。
【図１１】ユーザ認識処理を示すフローチャートである。
【図１２】表示タイミング処理を示すフローチャートである。
【図１３】表示処理を示すフローチャートである。
【図１４】子機間通信処理を示すフローチャートである。
【図１５】装置間通信処理を示すフローチャートである。
【図１６】ディスプレイ１４に表示される画像の一例を示す図である。
【図１７】ディスプレイ１４に表示される画像の一例を示す図である。
【図１８】ディスプレイ１４に表示される画像の一例を示す図である。
【図１９】ディスプレイ１４に表示される画像の一例を示す図である。
【図２０】ディスプレイ１４に表示される画像の一例を示す図である。
【図２１】ディスプレイ１４に表示される画像の一例を示す図である。
【発明を実施するための形態】
【００３７】
以下、本発明に係る通話端末装置の一実施の形態について、図面を参照して説明する。なおこれらの図面は、本発明が採用しうる技術的特徴を説明するために用いられるものであり、記載されている装置の構成、各種処理のフローチャートなどは、それのみに限定する趣旨ではなく、単なる説明例である。
【００３８】
図１及び図２を参照し、通話端末装置１及び通話端末子機２の概要について説明する。通話端末装置１及び通話端末子機２は、公衆回線網やインターネット網を介して他者と音声通話を行うための通話端末装置である。通話端末装置１は据置型の機器であり、公衆回線網やインターネット網と直接接続している。通話端末装置１は、例えば壁等に掛けられる。通話端末子機２はモバイル型の機器であり、通話端末装置１との間で無線通信を行う。
【００３９】
図１を参照し、通話端末装置１について説明する。通話端末装置１は、左右方向を長手方向とする正面視略長方形を有しており、略中央にディスプレイ１４を備えている。ディスプレイ１４の上側に、ユーザを撮影可能なカメラ１３を備えている。ディスプレイ１４の下側に、マイク１１、スピーカ１２、及び操作ボタン１５を備えている。ユーザは、マイク１１やスピーカ１２を介して、他のユーザと音声通話を行うことができる。またユーザは、ディスプレイ１４に表示される様々な情報を視認することができる。カメラ１３の使用形態については後述する。通話端末装置１は、内蔵された電池によって駆動する。
【００４０】
ディスプレイ１４には、通話時において、複数の画像や写真が順番に切り替えられて表示される（以下、このような表示を「スライドショー表示」という。）。これによって通話端末装置１は、通話中のユーザの注意をディスプレイ１４に向けさせる。さらに、ユーザがディスプレイ１４を視認している可能性が高い場合には、通話時の通話料金や電池の残量等、通話端末装置１や通話端末子機２の状態を示す情報（以下「状態情報」という。）がスライドショー表示に挿入され表示される。これによって、通話料金や電池の残量等を確実にユーザに認識させる。
【００４１】
図２を参照し、通話端末子機２について説明する。通話端末子機２は、上下方向を長手方向とする正面視略長方形状を有している。通話端末子機２は、スピーカ３２、ディスプレイ３３、操作ボタン３４、及びマイク３１を備えている。ユーザは、例えば通話端末装置１に近づいて音声通話を行うことができない場合に、通話端末子機２のマイク３１及びスピーカ３２を介して、他のユーザと音声通話を行うことができる。
【００４２】
通話端末子機２は、通話端末装置１と無線によって通信を行う。通話端末子機２によって通話が行われる場合、通話端末装置１は、公衆回線網やインターネット網を介して受信した音声のデータを通話端末子機２に対して無線送信する。通話端末子機２は、通話端末装置１から受信した音声のデータを、スピーカ３２から出力する。また通話端末子機２は、マイク３１から入力された音声のデータを通話端末装置１に対して無線送信する。通話端末装置１は、通話端末子機２から受信した音声のデータを、公衆回線網やインターネット網を介して通話相手先の通話端末装置１に送信する。以上のようにして、通話端末子機２を使用した場合の音声通話は行われる。
【００４３】
図３を参照し、通話端末装置１の電気的構成について説明する。通話端末装置１は、通話制御処理や表示制御処理等を司るＣＰＵ２６、ＣＰＵ２６が実行する処理のプログラムが記憶されるＲＯＭ２３、フラグやカウンタ、タイマ等が記憶されるＲＡＭ２４、及び、ディスプレイ１４に表示させる画像のデータや各種設定情報等が記憶されるフラッシュメモリ２５を備えている。ＣＰＵ２６は、ＲＯＭ２３、ＲＡＭ２４、及びフラッシュメモリ２５と電気的に接続している。ＣＰＵ２６は、ＲＯ２３、ＲＡＭ２４、及びフラッシュメモリ２５の記憶領域にアクセスできる。
【００４４】
通話端末装置１は、公衆回線網やインターネット網に接続して通信を行う有線通信部２１を備えている。ＣＰＵ２６は有線通信部２１と電気的に接続している。ＣＰＵ２６は、公衆回線網やインターネット網を介して通信データの送受信を行うことができる。また通話端末装置１は、通話端末子機２と無線通信を行う無線通信部２２を備えている。ＣＰＵ２６は、無線通信部２２と電気的に接続している。ＣＰＵ２６は、通話端末子機２と無線によって通信を行うことができる。
【００４５】
通話端末装置１は、音声が入力されるマイク１１、音声が出力されるスピーカ１２、音声信号と電気信号との間の変換制御を司る音声ドライバ１７を備えている。ＣＰＵ２６は音声ドライバ１７と電気的に接続している。音声ドライバ１７は、マイク１１及びスピーカ１２と電気的に接続している。ＣＰＵ２６は、マイク１１を介して入力された音声を認識することができる。ＣＰＵ２６は、スピーカ１２から所望の音声を出力させることができる。
【００４６】
通話端末装置１は、画像を撮影するカメラ１３と、カメラ１３の駆動制御を司るカメラドライバ１８とを備えている。ＣＰＵ２６はカメラドライバ１８と電気的に接続している。カメラドライバ１８とカメラ１３とは電気的に接続している。ＣＰＵ２６は、カメラ１３によって撮影された画像を認識することができる。
【００４７】
通話端末装置１は、ディスプレイ１４と、ディスプレイ１４の表示駆動制御を司る表示ドライバ１９を備えている。ＣＰＵ２６は表示ドライバ１９と電気的に接続している。表示ドライバ１９とディスプレイ１４とは電気的に接続している。ＣＰＵ２６は、ディスプレイ１４に所望の画像を表示させることができる。
【００４８】
通話端末装置１は、情報が入力される操作ボタン１５を備えている。ＣＰＵ２６は操作ボタン１５と電気的に接続している。ＣＰＵ２６は、操作ボタン１５を介して入力された情報を認識することができる。
【００４９】
通話端末装置１は、電池１６を備えている。上述の各種デバイスは、電池１６によって駆動する。また、電池１６の電圧をＣＰＵ２６が検出可能なように、ＣＰＵ２６は電池１６と電気的に接続している。ＣＰＵ２６は、電池１６の電圧に基づいて電池の残量を特定する。
【００５０】
フラッシュメモリ２５の記憶領域について、図４を参照して説明する。フラッシュメモリ２５は、第一画像記憶領域２５１、第一画像情報記憶領域２５２、第二画像記憶領域２５３、第二画像情報記憶領域２５４、ユーザ画像記憶領域２５５、ユーザ音声記憶領域２５６、撮影画像記憶領域２５７、入力音声記憶領域２５８、閾値情報記憶領域２５９、及びその他の情報記憶領域２６０を少なくとも備えている。以下、其々の領域に記憶されている情報について説明する。
【００５１】
第一画像記憶領域２５１には、通話時においてディスプレイ１４にスライドショー表示される画像や写真（以下「第一画像」という。）が複数記憶される。第一画像情報記憶領域２５２には第一画像テーブル２５２１が記憶されている。第一画像テーブル２５２１には、第一画像記憶領域２５１に記憶されている第一画像を順番に切り替えながらディスプレイ１４に表示させる場合の、第一画像の順番及び切替周期の情報が記憶される。第一画像テーブル２５２１の詳細については、図５を参照して後述する。
【００５２】
第二画像記憶領域２５３には、通話料金や電池残量をユーザに通知するための画像であって、スライドショー表示される第一画像の間に挿入される画像（以下「第二画像」という。）が複数記憶される。第二画像情報記憶領域２５４には第二画像テーブル２５４１が記憶されている。第二画像テーブル２５４１には、第二画像の表示タイミングや表示回数、切替周期等の情報が記憶される。第二画像テーブル２５４１の詳細については、図６を参照して後述する。
【００５３】
ユーザ画像記憶領域２５５には、カメラ１３によって撮影されたユーザの画像（以下「ユーザ画像」という。）が記憶される。通話端末装置１及び通話端末子機２を使用するユーザのユーザ画像が予め撮影される。撮影されたユーザ画像は、各ユーザを特定するための情報に対応付けられ、ユーザ画像記憶領域２５５に記憶される。ユーザ画像は、カメラ１３によって撮影された撮影画像に含まれる者がどのユーザに相当するかを認識する場合に使用される。
【００５４】
ユーザ音声記憶領域２５６には、マイク１１を介して入力されたユーザの音声データ（以下「ユーザ音声」という。）が記憶される。通話端末装置１及び通話端末子機２を使用するユーザのユーザ音声が予め取得される。取得されたユーザ音声は、各ユーザを特定する為の情報に対応付けられ、ユーザ音声記憶領域２５６に記憶される。ユーザ音声は、マイク１１を介して入力された音声を発声した者がどのユーザに相当するかを認識する場合に使用される。
【００５５】
撮影画像記憶領域２５７には、カメラ１３によって撮影された撮影画像が記憶される。入力音声記憶領域２５８には、マイク１１（通話端末装置１）又はマイク３１（通話端末子機２）を介して入力された音声データが記憶される。閾値情報記憶領域２５９には、後述する第三閾値、第四閾値、第五閾値、及び第六閾値が記憶される。
【００５６】
図５を参照し、第一画像テーブル２５２１について説明する。第一画像テーブル２５２１には、複数の第一画像の名称が順番に記憶される。また、第一画像を切り替えてディスプレイ１４に表示させる場合の周期が切替周期として記憶される。図５に示す例では、第一画像の名称が「画像ａ」「画像ｂ」「画像ｃ」の順番で記憶されている。また切替周期として「１０秒」が記憶されている。なお、「画像ａ」「画像ｂ」「画像ｃ」の名称に対応する第一画像自体は、第一画像記憶領域２５１に記憶される。
【００５７】
本実施の形態では、ユーザによって通話が開始されると、第一画像テーブル２５２１に記憶されている第一画像の名称及び順番に基づき、第一画像記憶領域２５１に記憶されている第一画像が順次選択される。また、第一画像テーブル２５２１に記憶されている切替周期に基づいて、選択された第一画像が周期的に順次切り替えられディスプレイ１４に表示される。これによって通話端末装置１はスライドショー表示を実現している。
【００５８】
図６を参照し、第二画像テーブル２５４１について説明する。本実施の形態では、通話中の通話料金が所定の閾値（以下「第一閾値」という。）以上となった場合、又は、通話中に通話端末装置１や通話端末子機２の電池残量が所定の閾値（以下「第二閾値」という。）以下となった場合であって、所定の条件（詳細は後述する。）を満たした場合に、第二画像を第一画像間に挿入して表示する。これによって、通話料金や電池残量を通話中のユーザに通知する。第二画像テーブル２５４１には、上述の第一閾値及び第二閾値に第二画像が対応付けられ記憶される。また第一閾値及び第二閾値に、表示回数や切替周期（表示時間、待機時間）、チェックフラグの情報が対応付けられ記憶される。なおこれらの情報は、通話端末装置１を使用するユーザ毎に記憶される。
【００５９】
チェックフラグは、閾値による判断の結果、第二画像が既に表示対象と判断されたか否かを示す。通話料金が一旦第一閾値以上であると判断された場合や、電池残量が一旦第二閾値以下であると判断された場合、既に判断済みの情報であることを示すために、判断済みである旨の情報がチェックフラグとして記憶される。チェックフラグを参照することによって、最初に通話料金が第一閾値以上となった場合、又は、最初に電池残量が第二閾値以下となった場合にのみ、対応する第二画像を表示させる。以下、判断済みである旨の情報がチェックフラグとして記憶される場合、「チェックフラグがＯＮされる」という。判断が行われていない旨の情報がチェックフラグとして記憶される場合、「チェックフラグがＯＦＦされる」という。
【００６０】
図６に示す例では、第二画像テーブル２５４１には、「ユーザＡ」「ユーザＢ」「その他」及び「複合」に対応する各種情報が記憶される。例えば、通話中のユーザが「ユーザＡ」であると特定された場合、テーブルのうち「ユーザＡ」に対応する各種情報が参照される。通話中のユーザが特定できなかった場合は、「その他」に対応する各種情報が参照される。通話中の通話料金が第一閾値以上となった場合であり、且つ、通話中に電池残量が第二閾値以下となった場合には、「複合」に対応する各種情報が参照される。
【００６１】
上述の各種情報として、「第一閾値」「第二閾値」「表示時間」「待機時間」「表示回数」「第二画像」「チェックフラグ」が記憶されている。「表示時間」は、第二画像をスライドショー表示の間に挿入させて表示させる（以下「挿入表示させる」という。）場合の、第二画像の表示時間を示す。「待機時間」は、一の第二画像を挿入表示させてから、他の第二画像を挿入表示させるまでの間の時間を示す。「表示回数」は、第二画像を挿入表示させる回数を示す。「第二画像」は、挿入表示させる第二画像の名称を示す。なお、第二画像自体は第二画像記憶領域２５３に記憶されている。
【００６２】
図６に示す例では、例えば「ユーザＡ」には、第一閾値として「２００円」「９００円」「１５００円」が記憶されている。通話中の通話料金が「９００円」を超えた場合に表示される第二画像の表示回数は「２回」であり、表示される第二画像は「画像Ｂ」「画像Ｃ」である。表示時間はそれぞれ「３秒」であり、「画像Ｂ」の表示が終了した後、「画像Ｃ」の表示が開始されるまでの待機時間は「６秒」である。従って、ユーザAの通話中に、通話料金が「９００円」を超えた場合であって、所定の条件（詳細は後述する。）を満たした場合、表示中の第一画像に代わって「画像Ｂ」を３秒間表示させる。「画像Ｂ」の表示終了後、第一画像が６秒間表示される。その後、「画像Ｃ」が３秒間表示される。
【００６３】
また例えば、通話中の通話料金が「１５００円」を超えた場合に表示される第二画像は「画像Ｄ」である。図６に示す例では、表示時間、待機時間及び表示回数にはそれぞれ「×」が示されている。このように、表示時間、待機時間及び表示回数に有効な値が記憶されていない場合、通話端末装置１は、一旦「画像Ｄ」を挿入表示させた以降、第一画像に切り替えることなく継続して「画像Ｄ」を表示させる。これによって、通話料金が非常に高くなっている場合や、電池残量が非常に小さくなっている場合に、確実にユーザに第二画像を視認させる。
【００６４】
図７を参照し、通話端末子機２の電気的構成について説明する。通話端末子機２は、通話制御処理や通信制御処理等を司るＣＰＵ４３、ＣＰＵ４３が実行する処理のプログラムが記憶されるＲＯＭ４０、フラグやカウンタ、タイマ情報等が記憶されるＲＡＭ４１、及び、各種設定情報等が記憶されるフラッシュメモリ４２を備えている。ＣＰＵ４３は、ＲＯＭ４０、ＲＡＭ４１、及びフラッシュメモリ４２と電気的に接続している。ＣＰＵ４３は、ＲＯ４０、ＲＡＭ４１、及びフラッシュメモリ４２の記憶領域にアクセスできる。
【００６５】
通話端末子機２は、通話端末装置１と無線通信を行う無線通信部３９を備えている。ＣＰＵ４３は無線通信部３９と電気的に接続している。ＣＰＵ４３は、通話端末装置１と無線によって通信を行うことができる。
【００６６】
通話端末子機２は、音声が入力されるマイク３１、音声が出力されるスピーカ３２、音声信号と電気信号との間の変換制御を司る音声ドライバ３６を備えている。ＣＰＵ４３は音声ドライバ３６と電気的に接続している。音声ドライバ３６は、マイク３１及びスピーカ３２とは電気的に接続している。ＣＰＵ４３は、マイク３１を介して入力された音声を認識することができる。ＣＰＵ４３は、スピーカ３２から所望の音声を出力させることができる。
【００６７】
通話端末子機２は、ディスプレイ３３と、ディスプレイ３３の表示駆動制御を司る表示ドライバ３７とを備えている。ＣＰＵ４３は表示ドライバ３７と電気的に接続している。表示ドライバ３７とディスプレイ３３とは電気的に接続している。ＣＰＵ４３は、ディスプレイ３３に所望の画像を表示させることができる。
【００６８】
通話端末装置１は、情報が入力される操作ボタン３４を備えている。ＣＰＵ４３は操作ボタン３４と電気的に接続している。ＣＰＵ４３は、操作ボタン３４を介して入力された情報を認識することができる。
【００６９】
通話端末子機２は、電池３５を備えている。上述の各種デバイスは、電池３５によって駆動する。また、電池３５の電圧をＣＰＵ４３が検出可能なように、ＣＰＵ４３は電池３５と電気的に接続している。ＣＰＵ４３は、電池３５の電圧に基づいて電池残量を特定する。
【００７０】
図８〜１４を参照し、通話端末装置１のＣＰＵ２６において実行される各種処理（メイン処理、表示処理、子機間通信処理）について説明する。其々の処理は、通話端末装置１に電源が投入されてＣＰＵ２６が駆動開始した場合に、ＣＰＵ２６によって実行開始される。なおこれらの処理は、其々所定の周期で繰り返し起動され実行される。一の処理が処理を実行中に、他の処理の起動タイミングが到来した場合、実行中の処理は中断され、起動タイミングが到来した他の処理の実行が開始される。中断された処理は、次の起動タイミングまで待機する。次の起動タイミングが到来した場合、中断時点から処理を再開する。
【００７１】
各処理において使用されるフラグ情報について説明する。「表示フラグ」は、スライドショー表示の実行の許否を示す。スライドショー表示が許可された場合に「１」が記憶される。スライドショー表示が禁止された場合に「０」が記憶される。「開始フラグ」は、第二画像の挿入表示の実行の許否を示す。第二画像の挿入表示が許可された場合に「１」が記憶される。第二画像の挿入表示が禁止された場合に「０」が記憶される。「音声フラグ」は、通話端末子機２から音声データを受信したか否かを示す。音声データを受信した場合に「１」が記憶される。音声のデータを受信していない場合に「０」が記憶される。以下、上述のフラグに「１」が記憶されることを「ＯＮされる」といい、「０」が記憶されることを「ＯＦＦ」されるという。上述のフラグは、ＲＡＭ２４に記憶される。
【００７２】
図８を参照し、メイン処理について説明する。メイン処理が起動されると、図８に示すように、はじめに、接続している公衆回線網又はインターネット網を介して他の通話端末装置１から、通話の開始を要求するための信号（通話要求信号）を受信することによって着信したかが判断される（Ｓ１１）。着信した場合（Ｓ１１：ＹＥＳ）、通話要求信号を送信した他の通話端末装置１との通話を開始させるために必要な処理（呼び出し音出力、通話応答信号送信など、以下「着信処理」という。）が実行される（Ｓ１７）。着信処理が行われた後、通話要求信号を送信した他の通話端末装置１との通話を行う為の処理（通話処理）が実行される（Ｓ２１）。通話処理では、通話を実行させる処理と併せて、ディスプレイ１４への表示制御が行われる。通話処理の詳細は後述する。通話が終了した場合、Ｓ１１に戻り、上述の処理が繰り返し実行される。
【００７３】
他の通話端末装置１から通話要求信号を受信していない場合（Ｓ１１：ＮＯ）、他の通話端末装置１との通話を開始させるための操作がユーザによってなされたかが判断される（Ｓ１３）。通話開始のための操作がなされた場合（Ｓ１３：ＹＥＳ）、他の通話端末装置１との通話を開始させるために必要な処理（通話要求信号送信など、以下「発信処理」という。）が実行される（Ｓ１９）。発信処理が行われた後、通話を望む他の通話端末装置１と通話を行う通話処理が実行される（Ｓ２１）。通話処理の詳細は後述する。通話が終了した後、Ｓ１１に戻り、上述の処理が繰り返し実行される。
【００７４】
通話開始のための操作がなされていない場合（Ｓ１３：ＮＯ）、各種情報の登録、設定、変更等を行うための操作がユーザによってなされたかが判断される（Ｓ１５）。各種情報とは、例えば第一画像テーブル２５２１に記憶される各種情報や、第二画像テーブル２５４１に記憶される各種情報が該当する。登録、設定、変更等を行うための操作がなされた場合（Ｓ１５：ＹＥＳ）、操作ボタン１５を介して入力された情報が、フラッシュメモリ２５の該当領域に記憶される（Ｓ２３）。そしてＳ１１に戻り、上述の処理が繰り返し実行される。一方、登録、設定、変更等を行うための操作がなされていない場合（Ｓ１５：ＮＯ）、なんら処理を行うことなくＳ１１に戻り、上述の処理が繰り返し実行される。
【００７５】
図９及び図１０を参照し、メイン処理のＳ２１（図８参照）において呼び出される通話処理について説明する。通話処理では、図９に示すように、はじめに、他の通話端末装置１との通話を開始させる（Ｓ３０）。通話状態では、マイク１１を介して受信した音声データが、公衆回線網又はインターネット網を介して他の通話端末装置１に対して送信される。また、公衆回線網又はインターネット網を介して他の通話端末装置１から音声データを受信した場合には、受信した音声データがスピーカ１２から出力される。また、ユーザが通話端末子機２を使用して通話を行っている場合には、無線によって通話端末子機２から受信した音声データが、公衆回線網又はインターネット網を介して他の通話端末装置１に対して送信される。公衆回線網又はインターネット網を介して他の通話端末装置１から受信した音声データが、無線によって通話端末子機２に対して送信される。
【００７６】
次いで、第二画像テーブル２５４１に記憶されているチェックフラグがＯＦＦされ初期化される。また、表示フラグ、開始フラグ、及び音声フラグがＯＦＦされ初期化される（Ｓ３１）。次いで、スライドショー表示を開始させるために、表示フラグがＯＮされる（Ｓ３３）。これによって、スライドショー表示が開始される（図１３参照、後述）。次いで、通話中のユーザを認識して特定する為の処理（ユーザ認識処理、Ｓ３５、図１１参照）が実行される。
【００７７】
図１１を参照し、ユーザ認識処理について説明する。ユーザ認識処理では、はじめに、カメラ１３による撮影が開始される（Ｓ６１）。撮影された撮影画像は、フラッシュメモリ２５の撮影画像記憶領域２５７に記憶される。撮影画像が撮影された場合（Ｓ６３：ＹＥＳ）、次いで、撮影された撮影画像に基づき、通話中のユーザを認識する為の処理が実行される（Ｓ７１）。必要に応じて、ユーザ画像記憶領域２５５に記憶されているユーザ画像が参照される。
【００７８】
撮影画像に基づいてユーザを認識する方法としては、顔認識処理として知られている従来周知の様々な方法が使用可能である。例えば以下に示す方法が使用可能である。撮影画像に含まれるユーザの顔部分の画像から、目・鼻・口などの顔を構成する部品の形状やそれらの配置が特徴点として抽出される。ユーザ画像記憶領域２５５に記憶されているユーザ画像に含まれるユーザの顔部分の画像からも、同様に特徴点が抽出される。そして、抽出された特徴点のパターンマッチングが行われる。なお、パターンを情報圧縮することによって、条件の変動に対して誤差の少ない認識結果を得ることができる。撮影画像に基づく特徴点と、ユーザ画像に基づく特徴点とが良好にマッチングした場合のユーザ画像に対応付けられているユーザが、通話中のユーザとして特定される。そしてＳ７７に移行される。
【００７９】
一方、カメラ１３が稼働しておらず、撮影画像が取得されなかった場合（Ｓ６３：ＮＯ）、マイク１１を介して入力される音声の録音が開始される（Ｓ６５）。録音された音声は、フラッシュメモリ２５の入力音声記憶領域２５８に記憶される。音声が録音された場合（Ｓ６７：ＹＥＳ）、次いで、録音された音声に基づき、通話中のユーザを認識する為の処理が実行される（Ｓ７３）。必要に応じて、ユーザ音声記憶領域２５６に記憶されているユーザ音声が参照される。
【００８０】
音声に基づいてユーザを認識する方法としては、従来周知の様々な方法が使用可能である。例えば以下に示す方法が使用可能である。録音した音声からいくつかの特徴を抽出し、「声紋」「テンプレート」「モデル」等が構築される。ユーザ音声記憶領域２５６に記憶されているユーザ音声からも同様に、「声紋」「テンプレート」「モデル」等が構築される。そして双方の「声紋」「テンプレート」及び「モデル」のマッチングが行われる。録音した音声に基づくパラメータと、ユーザ音声に基づくパラメータとが良好にマッチングした場合のユーザ音声に対応付けられているユーザが、通話中のユーザとして特定される。そしてＳ７７に移行される。
【００８１】
Ｓ７７では、撮影画像又は録音音声に基づいて、通話中のユーザが特定されたかが判断される（Ｓ７７）。通話中のユーザが特定された場合（Ｓ７７：ＹＥＳ）、第二画像情報記憶領域２５４に記憶されている第二画像テーブル２５４１のうち、特定されたユーザに対応する第一閾値及び第二閾値が特定される（Ｓ７９）。特定された第一閾値及び第二閾値のうち、対応するチェックフラグがＯＦＦとなっている第一閾値及び第二閾値が選択される。選択された第一閾値が複数存在する場合には、最も小さい第一閾値が選択される。選択された第二閾値が複数存在する場合には、最も大きい第二閾値が選択される。選択された第一閾値及び第二閾値は、特定されたユーザの情報とともにＲＡＭ２４に一時的に記憶される。
【００８２】
次いで、通話中にユーザが変更されたかが判断される（Ｓ８１）。前回特定されたユーザの情報は、ＲＡＭ２４に記憶されている。今回特定されたユーザの情報と、ＲＡＭ２４に記憶された状態の前回のユーザの情報とが比較される。双方が相違する場合（Ｓ８１：ＹＥＳ）通話中にユーザが変更されているので、ユーザが変更となった旨を示すフラグ情報がＲＡＭ２４に一時的に記憶される（Ｓ８３）。そしてユーザ認識処理は終了し、通話処理（図９参照）に戻る。一方、前回特定されたユーザの情報と、今回特定されたユーザの情報とが一致する場合（Ｓ８１：ＮＯ）、通話中のユーザは変更されていないので、なんら処理を行うことなくユーザ認識処理は終了し、通話処理（図９参照）に戻る。
【００８３】
一方、音声が録音できなかった場合や（Ｓ６７：ＮＯ）、Ｓ７７において、通話中のユーザが特定できなかった場合（Ｓ７７：ＮＯ）、第二画像テーブル２５４１のうち「その他」に対応する第一閾値及び第二閾値が特定される（Ｓ７５）。特定された第一閾値及び第二閾値のうち、対応するチェックフラグがＯＦＦとなっている第一閾値及び第二閾値が選択される。選択された第一閾値が複数存在する場合には、最も小さい第一閾値が選択される。選択された第二閾値が複数存在する場合には、最も大きい第二閾値が選択される。選択された第一閾値及び第二閾値は、特定されたユーザの情報とともにＲＡＭ２４に一時的に記憶される。そしてユーザ認識処理は終了し、通話処理（図９参照）に戻る。
【００８４】
図９において、ユーザ認識処理（Ｓ３５）が終了した後、通話中の通話によって発生した通話料金が算出される（Ｓ３７）。通話料金は、例えば、通話が開始してからの経過時間に所定の料金を乗算することによって算出される。次いで、電池残量が特定される（Ｓ３９）。電池残量は、例えば、現在の電池１６の電圧を、十分充電された状態の電池電圧によって除算することによって算出される。
【００８５】
次いで図１０に示すように、ユーザ認識処理のＳ７５及びＳ７９（図１１参照）においてＲＡＭ２４に記憶された第一閾値及び第二閾値に基づいて、通話料金及び電池残量が判断される。はじめに、第一閾値と、Ｓ３７（図９参照）にて算出された通話料金とが比較される（Ｓ４１）。算出された通話料金が第一閾値未満である場合（Ｓ４１：ＮＯ）、次いで、第二閾値と、Ｓ３９にて特定された電池残量、及び、通話端末子機２から受信した電池残量（Ｓ１６５、図１４参照、後述）とが比較される（Ｓ４３）。両方の電池残量が第二閾値より大きい場合（Ｓ４３：ＮＯ）、Ｓ５５に移行される。
【００８６】
一方、Ｓ３９において特定された電池残量、及び、通話端末子機２から受信した電池残量のうち少なくともいずれかが第二閾値以下となっていた場合（Ｓ４３：ＹＥＳ）、第二画像テーブル２５４１のうち、比較対象とされた第二閾値に対応付けられている表示時間、待機時間、表示回数、第二画像の情報が、比較対象とされた電池残量とともに取得され（Ｓ４７）、ＲＡＭ２４に一時的に記憶される。そしてＳ５３に移行される。
【００８７】
一方、Ｓ３７において算出された通話料金が第一閾値以上であり（Ｓ４１：ＹＥＳ）、電池残量が第二閾値よりも大きい場合（Ｓ４５：ＮＯ）、比較対象とされた第一閾値に対応付けられている表示時間、待機時間、表示回数、第二画像の情報が、比較対象とされた通話料金とともに取得され（Ｓ４９）、ＲＡＭ２４に一時的に記憶される。そしてＳ５３に移行される。
【００８８】
また、Ｓ３７において算出された通話料金が第一閾値以上であって（Ｓ４１：ＹＥＳ）、且つ、Ｓ３９にて特定された電池残量、及び、通話端末子機２から受信した電池残量のうち少なくともいずれかが第二閾値以下である場合（Ｓ４５：ＹＥＳ）、第二画像テーブル２５４１に含まれる情報のうち、「複合」に対応付する表示時間、待機時間、表示回数、及び第二画像の情報が、比較対象とした通話料金及び電池残量とともに取得され（Ｓ５１）、ＲＡＭ２４に一時的に記憶される。そしてＳ５３に移行される。
【００８９】
次いで、第二画像の表示タイミングを判断する表示タイミング処理が実行される（Ｓ５３）。図１２を参照し、表示タイミング処理について説明する。表示タイミング処理では、ユーザがディスプレイ１４を視認している可能性が高い状態が検出される。検出された場合、スライドショー表示されている第一画像に第二画像を挿入表示させる。これによって、ユーザに対して確実に通話料金や電池残量を通知する。
【００９０】
図１２に示すように、初めに、表示タイミングの判断を開始してからの経過時間を判断するために、経過時間の監視処理が開始される（Ｓ９１）。次いで、マイク１１から入力される音声を取得する処理が開始される（Ｓ９３）。次いで、カメラ１３によって撮影された撮影画像が、フラッシュメモリ２５の撮影画像記憶領域２５７から取得される（Ｓ９５）。
【００９１】
撮影された撮影画像に含まれているユーザの視線方向を特定するために、取得された撮影画像の認識処理が行われる（Ｓ９７）。撮影画像から人の視線方向を特定する方法としては、従来周知の様々な方法が使用可能である。例えば、撮影画像中において目の器官の特徴点を検出し、眼球の三次元モデルを利用して視線方向を計測する方法が使用可能である。また、目画像の画素値の分布を利用することにより、視線方向を推定する方法が使用可能である。
【００９２】
特定された視線方向にディスプレイ１４が存在するかが判断される（Ｓ９９）。ユーザの視線方向にディスプレイ１４が存在すると判断された場合（Ｓ９９：ＹＥＳ）、Ｓ１０９に移行する。
【００９３】
特定された視線方向にディスプレイ１４が存在しないと判断された場合（Ｓ９９：ＮＯ）、次いで、入力される音声の有無が判断される。そして、入力される音声のレベルが非常に小さい（無音である）状態が連続して継続した場合の継続時間が特定される（Ｓ１０１）。具体的には、無音である状態となった場合に、ＲＡＭ２４に記憶されたタイマをスタートさせる。タイマは、所定の周期（例えば１ｍｓ）で更新される。この状態で、マイク１１から所定レベル以上の音声が入力された場合や、通話端末子機２から音声のデータを受信し、音声フラグがＯＮされた（図１４参照）場合、タイマはリセットされる。タイマの値が、無音状態の経過時間とされる。無音状態の経過時間が、所定の時間の値である第三閾値（例えば４秒）以上となったと判断された場合（Ｓ１０３：ＹＥＳ）、Ｓ１０９に移行する。
【００９４】
無音状態が第三閾値以上継続していない場合（Ｓ１０３：ＮＯ）、操作ボタン１５を介してユーザによって何らかの操作がなされたかが判断される（Ｓ１０５）。何らかの操作が検出された場合（Ｓ１０５：ＹＥＳ）、Ｓ１０９に移行する。一方、ユーザによって何ら操作がなされていない場合（Ｓ１０５：ＮＯ）、Ｓ９１において監視が開始された経過時間が、所定の時間の値である第四閾値（例えば３０秒）以上となったかが判断される（Ｓ１０７）。経過時間が第四閾値以上となった場合（Ｓ１０７：ＹＥＳ）、Ｓ１０９に移行する。経過時間が第四閾値未満である場合（Ｓ１０９：ＮＯ）、Ｓ９５に戻り、上述の処理が繰り返し実行される。
【００９５】
Ｓ１０９では、ユーザがディスプレイ１４を視認している可能性が高い状態であるので、第二画像の挿入表示を開始させるために開始フラグがＯＮされる（Ｓ１０９）。そして表示タイミング処理は終了し、通話処理（図１０参照）に戻る。
【００９６】
図１０に示すように、表示タイミング処理（Ｓ５３）が終了した後の通話処理では、通話が継続して行われているかが判断される（Ｓ５５）。通話が継続して行われている場合（Ｓ５５：ＹＥＳ）、Ｓ３５（図９参照）に戻り、上述の処理が繰り返し実行される。一方、通話を終了させるための処理がユーザによってなされている場合には（Ｓ５５：ＮＯ）、通話を終了させるための所定の通信を行った後、スライドショー表示を停止させるために表示フラグをＯＦＦする（Ｓ５７）。そして通話処理は終了し、メイン処理に戻る。
【００９７】
ＣＰＵ２６が実行する表示処理について、図１３を参照して説明する。表示処理では、表示フラグ及び開始フラグの状態に基づいて、ディスプレイ１４に所望の画像を表示させる処理が実行される。図１３に示すように、はじめに、表示フラグがＯＮであるかが判断される（Ｓ１２１）。表示フラグがＯＦＦとなっている場合（Ｓ１２１：ＮＯ）、スライドショー表示は禁止されているので、表示処理では何ら処理を行うことなくＳ１２１に戻る。そして継続して表示フラグが監視される。
【００９８】
通話が開始されて表示フラグがＯＮされた場合（Ｓ１２１：ＹＥＳ）、スライドショー表示を行うための処理が実行される。第一画像テーブル２５２１（図５参照）の情報に基づき、第一画像記憶領域２５１に記憶されている第一画像のうち一が選択される。選択された第一画像がディスプレイ１４に表示される（Ｓ１２３）。次いで、開始フラグの状態が判断される（Ｓ１２５）。開始フラグがＯＦＦとなっている場合（Ｓ１２５：ＮＯ）、第一画像テーブル２５２１に記憶されている切替周期に基づき、表示中の第一画像を次の第一画像に切り替えるタイミングが監視される（Ｓ１２７）。切替タイミングが到来していない状態では（Ｓ１２７：ＮＯ）、Ｓ１２５に戻り、継続して開始フラグと切替タイミングが監視される。
【００９９】
一方、切替タイミングが到来した場合（Ｓ１２７：ＹＥＳ）、第一画像テーブル２５２１に記憶されている第一画像の順番に基づいて、表示中の第一画像を次の第一画像に切り替える（Ｓ１２９）。そしてＳ１２５に戻り、上述の処理が繰り返し実行される。以上の処理によって、第一画像を順番に切り替えて表示させるスライドショー表示が実行される。
【０１００】
一方、開始フラグがＯＮとなった場合（Ｓ１２５：ＹＥＳ）、第二画像を挿入表示させる必要がある。Ｓ４７、Ｓ４９、Ｓ５１（図１０参照）においてＲＡＭ２４に記憶された表示時間、待機時間、表示回数、及び第二画像の情報が参照される。そして、ディスプレイ１４に表示中の第一画像を第二画像に切り替える（Ｓ１３１）。なお、ユーザが変更となった旨を示すフラグ情報がＲＡＭ２４に記憶されている（Ｓ８３、図１１参照）場合には、ユーザが変更となった情報を第二画像に付加してディスプレイ１４に表示させる。
【０１０１】
次いで、表示回数が「−１」され更新される（Ｓ１３３）。次いで、更新された後の表示回数が「０」となっているかが判断される（Ｓ１３５）。「０」となった場合（Ｓ１３５：ＹＥＳ）、既定の回数分第二画像を表示させているので、第二画像の挿入表示を終了させるために開始フラグをＯＦＦする（Ｓ１３７）。また、第二画像テーブル２５４１のチェックフラグのうち、表示させた第二画像に対応付けられているチェックフラグをＯＮする。そしてＳ１２１に戻り、上述の処理が繰り返し実行される。
【０１０２】
一方、表示回数が「０」となっていない場合（Ｓ１３５：ＮＯ）、表示させるべき第二画像が残存している。そこで、第二画像を表示開始してからの経過時間が監視される（Ｓ１３９）。第二画像を表示開始してからの経過時間が、ＲＡＭ２４に記憶されている表示時間未満である場合（Ｓ１３９：ＮＯ）、Ｓ１３９に戻り、継続して経過時間が監視される。第二画像を表示開始してからの経過時間が表示時間以上となった場合（Ｓ１３９：ＹＥＳ）、表示中の第二画像を第一画像に切り替える（Ｓ１４１）。
【０１０３】
なお、表示時間として有効な値がＲＡＭ２４に記憶されていない場合には、第一画像に切り替えることなく、表示中の第二画像を継続してディスプレイ１４に表示させる。これによって、確実にユーザに対して通話料金及び電池残量を視認させることができる。
【０１０４】
次いで、第一画像を表示開始してからの待機時間が監視される（Ｓ１４３）。第一表示画像を表示開始してからの経過時間が、ＲＡＭ２４に記憶されている待機時間未満である場合（Ｓ１４３：ＮＯ）、Ｓ１４３に戻り、継続して経過時間が監視される。第一画像を表示させてからの経過時間が待機時間以上となった場合（Ｓ１４３：ＹＥＳ）、Ｓ１３１に戻る。そして、ＲＡＭ２４に記憶されている第二画像のうち、次に表示させる第二画像が選択される。そして表示中の第一画像が、選択された第二画像に切り替えられる（Ｓ１３１）。そして上述の処理が繰り返し実行される。これによって、第二画像が挿入表示される。
【０１０５】
以上のようにして、通話料金の情報、電池残量の情報、及び両方の情報を通話中のユーザに対して通知する第二画像が挿入表示される。通話中のユーザがディスプレイ１４を視認している可能性が高い状態で、第二画像が挿入表示されるので、確実にユーザに対して通話料金や電池残量の情報を通知することが可能となる。
【０１０６】
図１４を参照し、ＣＰＵ２６において実行される子機間通信処理について説明する。子機間通信処理では、はじめに、通話端末子機２から何らかの通信データを受信したかが判断される（Ｓ１５１）。なんら通信データを受信していない場合には（Ｓ１５１：ＮＯ）、Ｓ１５１に戻り、通信データの受信監視が継続して実行される。
【０１０７】
何らかの通信データを受信した場合（Ｓ１５１：ＹＥＳ）、受信した通信データに、各種情報の登録、設定、変更等の情報が含まれているかが判断される（Ｓ１５３）。各種情報の登録、設定、変更等の情報が含まれている場合（Ｓ１５３：ＹＥＳ）、通話端末子機２の操作ボタン３４を介し、ユーザによって各種情報の登録、設定、変更等がなされている。そこで、受信した各種情報の登録、設定、変更等の情報が、フラッシュメモリ２５の該当領域に記憶される（Ｓ１５９）。そしてＳ１５１に戻り、上述の処理が繰り返し実行される。
【０１０８】
受信した通信データが、通話音声データであるかが判断される（Ｓ１５３：ＮＯ、Ｓ１５５）。通話音声データである場合（Ｓ１５５：ＹＥＳ）、受信した通話音声データを、公衆回線網又はインターネット網を介して他の通話端末装置１に対して送信する（Ｓ１６１）。これによって、他の通話端末装置１との間の通話を実現させる。また、音声通話が行われたことを示すために、音声フラグがＯＮされる（Ｓ１６３）。そしてＳ１５１に戻り、上述の処理が繰り返し実行される。
【０１０９】
受信した通信データが、通話端末子機２の電池残量であるかが判断される（１５５：ＮＯ、Ｓ１６５）。電池残量である場合（Ｓ１６５：ＹＥＳ）、第二閾値との比較対象のデータとするために、受信した電池残量をＲＡＭ２４に記憶する（Ｓ１６７）。そしてＳ１５１に戻り、上述の処理が繰り返し実行される。
【０１１０】
一方、受信した通信データが上述のいずれのデータでもない場合には（Ｓ１６５：ＮＯ）、特段処理を行うことなくＳ１５１に戻り、上述の処理が繰り返し実行される。
【０１１１】
以上の処理を行うことによって、通話端末子機２からの通話音声データの受信の有無に基づいて、無音状態の経過時間を判断することが可能となる。また、通話端末子機２の電池残量が小さくなっている場合には、電池残量が小さくなっている旨を通知する第二画像をディスプレイ１４に表示させることが可能となる。
【０１１２】
図１５を参照し、通話端末子機２のＣＰＵ４３において実行される装置間通信処理について説明する。通話端末子機２に電源が投入されてＣＰＵ４３が駆動開始した場合に、ＣＰＵ４３によって起動され実行される。
【０１１３】
図１５に示すように、装置間通信処理が起動されると、はじめに、操作ボタン３４を介してユーザによって各種情報の登録、設定、変更等の情報が入力されたかが判断される（Ｓ１７１）。各種情報の登録、設定、変更等の情報が入力された場合（Ｓ１７１：ＹＥＳ）、入力された情報を含む通信データが、無線通信部３９を介して通話端末装置１に対して送信される（Ｓ１７７）。そしてＳ１８３に移行される。
【０１１４】
各種情報の登録、設定、変更等の情報が入力されていない場合（Ｓ１７１：ＮＯ）、次いで、マイク３１を介して通話音声が入力されたかが判断される（Ｓ１７３）。通話音声が入力された場合には（Ｓ１７３：ＹＥＳ）、通話音声はデータ化されて通話音声データとされ、無線通信部３９を介して通話端末装置１に対して送信される（Ｓ１７９）。そしてＳ１８３に移行される。
【０１１５】
通話音声が入力されていない場合（Ｓ１７３：ＮＯ）、通話端末装置１から通話音声データを受信したかが判断される（Ｓ１７５）。通話音声データを受信した場合（Ｓ１７５：ＹＥＳ）、通話音声データはスピーカ３２を介して音声出力される（Ｓ１８１）。そしてＳ１８３に移行する。一方、通話音声データを受信していない場合（Ｓ１７５：ＮＯ）、特段処理を行うことなくＳ１８３に移行される。
【０１１６】
Ｓ１８３では、所定の周期（例えば５秒）が監視される（Ｓ１８３）。所定の周期が到来した場合（Ｓ１８３：ＹＥＳ）、電池３５の電圧に基づいて電池残量が特定される（Ｓ１８５）。特定された電池残量は、無線通信部３９を介して通話端末装置１に対して送信される（Ｓ１８７）。そしてＳ１７１に戻り、上述の処理が繰り返し実行される。所定の周期が到来していない場合には（Ｓ１８３：ＮＯ）、なんら処理を行うことなくＳ１７１に戻り、上述の処理が繰り返し実行される。
【０１１７】
以上のようにして、通話音声が入力された場合には、通話音声データを通話端末装置１に対して送信する。なお通話端末装置１では、受信した通話音声データに基づいて無音時間の判断が行われる（Ｓ１０１、図１２参照）。また通話端末装置１では、受信した電池残量と第二閾値とが比較されることによって、第二画像の表示の有無が判断される（Ｓ４３、Ｓ４５、図１０参照）。
【０１１８】
図１６〜図２１を参照し、上述の処理の結果通話端末装置１のディスプレイ１４に表示される画像の一例について説明する。通話端末装置１を使用するユーザＡによって通話が開始されると（Ｓ２１、図８参照）、スライドショー表示が開始される（Ｓ３３、図９参照）。ディスプレイ１４には、図１６の１００にて示される第一画像「画像ａ」の他、図１７の１０１にて示される第一画像「画像ｂ」や「画像ｃ」など（図５参照）が順次切り替わりながら表示される（Ｓ１２３〜Ｓ１２９、図１３参照）。
【０１１９】
通話中のユーザＡ（図１７中１１０）が撮影され（Ｓ６１、図１１参照）、身元が特定される（Ｓ７７：ＹＥＳ、図１１参照）。特定されたユーザに対応する第二画像テーブル２５４１が抽出される（Ｓ７９、図１１参照）。また、通話中の通話の通話料金、及び電池残量が取得される（Ｓ３７、Ｓ３９、図９参照）。ここで、取得された通話料金が、抽出された第二画像テーブル２５４１に含まれている第一閾値（例えば９００円）以上となった場合（Ｓ４１：ＹＥＳ、Ｓ４５：ＮＯ、図１０参照）、第二画像を挿入表示させるタイミングが監視される。ここで図１７にて示されるように、ユーザＡの視線がディスプレイ１４を向いていることが検出された場合（Ｓ９９：ＹＥＳ、図１２参照）、第二画像の挿入処理が開始される（Ｓ１０９、図１２参照）。
【０１２０】
挿入表示が開始されると、図１８の１０２にて示されるように、表示中の第一画像に代わって第二画像「画像Ｂ」がディスプレイ１４に表示される（Ｓ１３１、図１３参照）。ユーザＡはディスプレイ１４を視認している状態であるため、通話料金が高い状態となっていることを認識する。ユーザＡが通話を続けた場合、図１９の１０３にて示されるように、一旦第一画像が表示される（Ｓ１４１、図１３参照）。所定の時間が経過した後（Ｓ１４３、図１３参照）、図２０の１０４にて示されるように、第二画像「画像Ｃ」がディスプレイ１４に表示される（Ｓ１３１、図１３参照）。以上のようにして、通話料金が高い状態である旨をユーザＡに対して通知することができる。
【０１２１】
ここで例えば、通話中の通話料金が第一閾値以上であり、且つ、通話端末装置１又は通話端末子機２のうち少なくともいずれかの電池残量が第二閾値以下であった場合には（Ｓ４１：ＹＥＳ、Ｓ４５：ＹＥＳ、図１０参照）、図２１の１０５に示すように、通話料金と電池残量との両方を通知する為の第二画像「画像Ｘ」（図６参照）が選択される（Ｓ５１、図１０参照）。選択された第二画像「画像Ｘ」が挿入表示される。これによって、通話料金が高く且つ電池残量が僅かとなっている旨をユーザＡに対して通知することができる。
【０１２２】
以上説明したように、通話端末装置１では、通話中においてスライドショー表示を行うことによって、ユーザの注意をディスプレイ１４に向けさせることができる。このような状態で、通話料金や電池残量を通知する為の第二画像をスライドショー表示に挿入表示させる。これによって、これらの状態情報を確実にユーザに対して通知することが可能となる。
【０１２３】
また、ユーザがディスプレイ１４を視認している可能性が高い状態を検出し、この状態時に第二画像を表示させる。具体的には、ユーザの視線がディスプレイ１４に向かっている場合、入力音声が無音である状態が所定（第三閾値）以上連続した場合、何らかの操作がなされた場合に、ユーザがディスプレイ１４を視認している可能性が高いと判断し、第二画像を挿入表示させる。これによって、ユーザに対して確実に通話料金や電池残量を認識させることができる。また、これらの条件に合致しない場合であっても、所定時間（第四閾値）経過後には第二画像を挿入表示させるので、第二画像が長時間挿入表示されない状態を防止できる。
【０１２４】
通話端末装置１は、カメラ１３によって撮影された画像や、マイク１１によって入力された音声から、通話中のユーザを特定する。そして、ユーザに対応する第二画像、表示回数及び表示周期（待機時間）に基づいて、ユーザに対応する第二画像を表示させることができる。このようにして、ユーザにとって最適な画像内容や頻度に基づいて第二画像を表示させることができる。
【０１２５】
また第二画像及びその表示態様（表示回数、表示時間、待機時間）は、第一閾値及び第二閾値毎に対応付けて記憶される。これによって、第二画像及びその表示態様を閾値に応じて変化させることができる。例えば、電池残量が０％に近付くに従い、第二画像の表示時間や表示回数を大きく設定することができる。これによって、通話料金や電池残量の通知を効果的に行うことができる。
【０１２６】
図９のＳ３０の処理を行うＣＰＵ２６が本発明の「通話手段」に相当する。図１のディスプレイ１４が本発明の「表示手段」に相当する。第一画像記憶領域２５１を備えたフラッシュメモリ２５が本発明の「第一記憶手段」に相当する。図１３のＳ１２３〜Ｓ１２９の処理を行うＣＰＵ２６が本発明の「第一表示制御手段」に相当する。図１０のＳ４７、Ｓ４９、Ｓ５１の処理を行うＣＰＵ２６が本発明の「情報取得手段」に相当する。第二画像記憶領域２５３を備えたフラッシュメモリ２５が本発明の「第二記憶手段」に相当する。図１３のＳ１３１〜Ｓ１４３の処理を行うＣＰＵ２６が本発明の「第二表示制御手段」に相当する。図９のＳ３７の処理を行うＣＰＵ２６が本発明の「料金算出手段」に相当する。図９のＳ３９の処理を行うＣＰＵ２６が本発明の「残量特定手段」に相当する。
【０１２７】
図１２のＳ９５の処理を行うＣＰＵ２６が本発明の「第一撮影手段」に相当し、Ｓ９７の処理を行うＣＰＵ２６が本発明の「視線特定手段」に相当し、Ｓ９９の処理を行うＣＰＵ２６が本発明の「視認判断手段」に相当する。図１２のＳ９３の処理を行うＣＰＵ２６が本発明の「音声検出手段」に相当し、Ｓ１０３の処理を行うＣＰＵ２６が本発明の「第一時間計測手段」に相当する。図１の操作ボタン１５が本発明の「入力手段」に相当する。図１２のＳ１０７の処理を行うＣＰＵ２６が本発明の「第二時間計測手段」に相当する。「表示時間」「待機時間」「表示回数」に有効な値が記憶されていない情報に基づき、図１３のＳ１３１〜Ｓ１３９の処理を行うＣＰＵ２６が本発明の「第三表示制御手段」「第四表示制御手段」に相当する。
【０１２８】
図１１のＳ６１の処理を行うＣＰＵ２６が本発明の「第二撮影手段」に相当し、Ｓ７１の処理を行うＣＰＵ２６が本発明の「第一ユーザ特定手段」に相当し、Ｓ６５の処理を行うＣＰＵ２６が本発明の「音声取得手段」に相当し、Ｓ７３の処理を行うＣＰＵ２６が本発明の「第二ユーザ特定手段」に相当する。「画像Ｘ」が記憶される第二画像記憶領域２５３を備えたフラッシュメモリ２５が本発明の「第三記憶手段」に相当する。
【０１２９】
図９のＳ３０の処理が本発明の「通話ステップ」に相当する。図１３のＳ１２３〜Ｓ１２９の処理が本発明の「第一表示制御ステップ」に相当する。図１０のＳ４７、Ｓ４９、Ｓ５１の処理が本発明の「情報取得ステップ」に相当する。図１３のＳ１３１〜Ｓ１４３の処理が本発明の「第二表示制御ステップ」に相当する。
【０１３０】
なお、本発明は上記実施の形態に限定されるものではなく、種々の変更が可能である。上述の実施の形態では、通話端末装置１には通話端末子機２が附属されていたが、本発明はこの構成に限定されない。通話端末装置１のみの構成であってもよい。
【０１３１】
上述の実施の形態では、通話料金と電池残量とが閾値と比較され、必要に応じて第二画像を表示させていたが、本発明はこの構成に限定されない。従って、通話端末装置１に例えばＡＣ１００Ｖ電源が接続されている場合には、電池残量は通知対象外としてもかまわない。
【０１３２】
上述の実施の形態では、第二画像をディスプレイ１４に表示させる場合に、異なる第二画像が順次選択され表示されていた。しかしながら本発明はこの構成に限定されず、例えば、第一閾値及び第二閾値の其々に対応付けられた一の第二画像を所定回数繰り返し表示させてもかまわない。
【符号の説明】
【０１３３】
１ 通話端末装置
１１ マイク
１２ スピーカ
１３ カメラ
１４ ディスプレイ
１５ 操作ボタン
１６ 電池
２５ フラッシュメモリ
２６ ＣＰＵ
【技術分野】
【０００１】
本発明は、通話端末装置、表示制御方法、表示制御プログラムに関する。より詳細には、通話端末装置の状態を示す情報をディスプレイに表示させることによってユーザに通知する通話端末装置、表示制御方法、表示制御プログラムに関する。
【背景技術】
【０００２】
従前より、通話端末装置の状態を示す各種情報をユーザに通知するために、各種情報をディスプレイに表示したり、音を出力したりする通話端末装置が知られている。例えば特許文献１に記載の通話端末装置は、電池残量をディスプレイに表示させる。ユーザは、ディスプレイに表示される電池残量を視認し、通話端末装置を充電する必要があるかを認識する。また、例えば特許文献２に記載の通話端末装置は、通話料金をディスプレイに表示するとともに、ブザーを鳴らす。ユーザは、ディスプレイに表示される通話料金を視認したり、ブザー音を聞いたりすることによって、通話料金を認識する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平９−２３３７１１号公報
【特許文献２】特開平５−４１７５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら上述の通話端末装置のディスプレイには、通話時において、ユーザの興味を惹く画像が表示されないので、通話中のユーザは、常時ディスプレイを視認しない。従って、ユーザがディスプレイに表示される各種情報を見落としてしまう場合があるという問題点がある。また、ブザー音によって各種情報が通知される場合は、ブザー音が通話先のユーザにも聞こえてしまう。このため、通話先のユーザに不快感を与えてしまうという問題点がある。
【０００５】
本発明は上述の問題点を解決するためになされたものであり、ユーザに不快感を与えることなく、通話端末装置の状態を示す情報を確実にユーザに対して通知することが可能な通話端末装置、表示制御方法、表示制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述の問題点を解決するために、請求項１に係る発明の通話端末装置は、他の通話端末装置との通話を行う通話手段と、画像データが表示される表示手段と、複数の前記画像データが記憶される第一記憶手段と、前記通話手段によって前記他の通話端末装置との通話が行われている場合に、前記第一記憶手段に記憶された前記画像データである第一画像データを所定の周期で順次切り替えながら前記表示手段に表示させる制御を行う第一表示制御手段と、前記通話端末装置の状態を示す情報である状態情報を取得する情報取得手段と、前記情報取得手段によって取得される前記状態情報に関連付けられた画像データである第二画像データが記憶される第二記憶手段と、前記情報取得手段によって前記状態情報が取得された場合に、前記第一表示制御手段によって切り替えて表示される一の前記第一画像データと他の前記第一画像データとの間に、前記状態情報に関連付けられた前記第二画像データであって前記第二記憶手段に記憶された前記第二画像データを所定時間表示させる制御を行う第二表示制御手段とを備えている。
【０００７】
また、請求項２に係る発明の通話端末装置は、請求項１に記載の発明の構成に加えて、前記通話手段によって前記他の通話端末装置との通話が行われている場合の通話時間に基づいて、通話中の通話により発生する通話料金を算出する料金算出手段、又は、前記通話端末装置を駆動する電池の電圧に基づいて、前記電池の残量を特定する残量特定手段のうち少なくとも一方を備え、前記情報取得手段は、前記料金算出手段によって前記通話料金が算出された場合であって、前記通話料金の値が、第一閾値記憶手段に記憶された所定の閾値である第一閾値以上である場合に、算出された前記通話料金を前記状態情報として取得し、前記残量特定手段によって前記残量が特定された場合であって、前記残量の値が、第二閾値記憶手段に記憶された所定の閾値である第二閾値以下である場合に、特定された前記残量を前記状態情報として取得することを特徴とする。
【０００８】
また、請求項３に係る発明の通話端末装置は、請求項１又は２に記載の発明の構成に加えて、前記通話端末装置のユーザを撮影する第一撮影手段と、前記第一撮影手段によって撮影された撮影データに基づき、前記ユーザの視線方向を特定する視線特定手段と、前記視線特定手段によって特定された前記ユーザの視線方向から、前記ユーザが前記表示手段を視認しているかを判断する視認判断手段とを備え、前記第二表示制御手段は、前記視認判断手段において前記ユーザが前記表示手段を視認していると判断された場合に、前記第二画像データを表示させることを特徴とする。
【０００９】
また、請求項４に係る発明の通話端末装置は、請求項１又は２に記載の発明の構成に加えて、前記通話手段によって前記他の通話端末装置と通話が行われている場合の通話音声を検出する音声検出手段と、前記音声検出手段において前記通話音声が連続して検出されない場合に、検出されない状態となってからの経過時間を計測する第一時間計測手段とを備え、前記第二表示制御手段は、前記第一時間計測手段によって計測された前記経過時間の値が、第三閾値記憶手段に記憶された所定の閾値である第三閾値以上であった場合に、前記第二画像データを表示させることを特徴とする。
【００１０】
また、請求項５に係る発明の通話端末装置は、請求項１又は２に記載の発明の構成に加えて、情報が入力される入力手段を備え、前記第二表示制御手段は、前記入力手段によって前記情報が入力された場合に、前記第二画像データを表示させることを特徴とする。
【００１１】
また、請求項６に係る発明の通話端末装置は、請求項１又は２に記載の発明の構成に加えて、前記情報取得手段が前記状態情報を取得してからの経過時間を計測する第二時間計測手段を備え、前記第二表示制御手段は、前記第二時間計測手段によって計測された前記経過時間の値が、第四閾値記憶手段に記憶された所定の閾値である第四閾値以上となった場合に、前記第二画像データを表示させることを特徴とする。
【００１２】
また、請求項７に係る発明の通話端末装置は、請求項２に記載の発明の構成に加えて、前記料金算出手段によって前記通話料金が算出された場合であって、前記通話料金の値が、第五閾値記憶手段に記憶された所定の閾値である第五閾値以上である場合に、前記通話料金に関連付けられた前記第二画像データを継続して前記表示手段に表示させる制御を行う第三表示制御手段を備えたことを特徴とする。
【００１３】
また、請求項８に係る発明の通話端末装置は、請求項２に記載の発明の構成に加えて、前記残量特定手段によって前記残量が特定された場合であって、前記残量の値が、第六閾値記憶手段に記憶された所定の閾値である第六閾値以下である場合に、前記残量に関連付けられた前記第二画像データを継続して前記表示手段に表示させる制御を行う第四表示制御手段を備えたことを特徴とする。
【００１４】
また、請求項９に係る発明の通話端末装置は、請求項１乃至８のいずれかに記載の発明の構成に加えて、前記第二画像データは、前記ユーザを特定するユーザ特定情報に対応付けられて前記第二記憶手段に記憶されており、前記通話端末装置のユーザを撮影する第二撮影手段と、前記第二撮影手段によって撮影された撮影データに基づいて、前記ユーザを特定する第一ユーザ特定手段とを備え、前記第二表示制御手段は、前記第一ユーザ特定手段によって特定された前記ユーザのユーザ特定情報に対応付けられた前記第二画像データを表示させることを特徴とする。
【００１５】
また、請求項１０に係る発明の通話端末装置は、請求項１乃至８のいずれかに記載の発明の構成に加えて、前記第二画像データは、前記ユーザを特定するユーザ特定情報に対応付けられて前記第二記憶手段に記憶されており、前記通話端末装置のユーザの音声を取得する音声取得手段と、前記音声取得手段によって取得された前記音声に基づいて、前記ユーザを特定する第二ユーザ特定手段とを備え、前記第二表示制御手段は、前記第二ユーザ特定手段によって特定された前記ユーザのユーザ特定情報に対応付けられた前記第二画像データを表示させることを特徴とする。
【００１６】
また、請求項１１に係る発明の通話端末装置は、請求項２に記載の発明の構成に加えて、前記通話料金と前記残量との両方に関連付けられた画像データである第三画像データが記憶される第三記憶手段を備え、前記情報取得手段は、前記料金算出手段及び前記残量特定手段の両方を備えている場合であって、前記料金算出手段によって算出された前記通話料金の値が前記第一閾値以上であり、且つ、前記残量特定手段によって特定された前記残量が前記第二閾値以下である場合に、前記通話料金と前記残量とを前記状態情報として取得し、前記第二表示制御手段は、前記情報取得手段によって前記通話料金と前記残量とが前記状態情報として取得された場合には、前記通話料金と前記残量との両方に関連付けられた前記第三画像データであって前記第三記憶手段に記憶されている前記第三画像データを表示させることを特徴とする。
【００１７】
また、請求項１２に係る発明の通話端末装置は、請求項２に記載の発明の構成に加えて、前記第一閾値記憶手段には、第二画像データを表示させる回数の情報である第一表示回数と、前記第二画像データを表示させる周期である第一表示周期とが、前記第一閾値に対応付けられて記憶されており、第二表示制御手段は、前記情報取得手段において、前記通話料金が前記第一閾値以上であるとして前記状態情報が取得された場合には、前記第二画像データを前記第一表示周期で前記第一表示回数分繰り返し表示させる制御を行うことを特徴とする。
【００１８】
また、請求項１３に係る発明の通話端末装置は、請求項２に記載の発明の構成に加えて、前記第二閾値記憶手段には、第二画像データを表示させる回数の情報である第二表示回数と、前記第二画像データを表示させる周期である第二表示周期とが、前記第二閾値に対応付けられて記憶されており、第二表示制御手段は、前記情報取得手段において、前記残量が前記第二閾値以下であるとして前記状態情報が取得された場合には、前記第二画像データを前記第二表示周期で前記第二表示回数分繰り返し表示させる制御を行うことを特徴とする。
【００１９】
また、請求項１４に係る発明の表示制御方法は、他の通話端末装置との通話を行う通話ステップと、前記通話ステップによって前記他の通話端末装置との通話が行われている場合に、第一記憶手段に記憶された画像データである第一画像データを所定の周期で順次切り替えながら表示手段に表示させる制御を行う第一表示制御ステップと、前記通話端末装置の状態を示す情報である状態情報を取得する情報取得ステップと、前記情報取得ステップによって前記状態情報が取得された場合に、前記第一表示制御ステップによって切り替えて表示される一の前記第一画像データと他の前記第一画像データとの間に、前記状態情報に関連付けられた画像データであって第二記憶手段に記憶された画像データである前記第二画像データを所定時間表示させる制御を行う第二表示制御ステップとを備えている。
【００２０】
また、請求項１５に係る発明の表示制御プログラムは、請求項１乃至１３のいずれかに記載の通話端末装置の各処理手段としてコンピュータを機能させる。
【発明の効果】
【００２１】
請求項１に係る発明の通話端末装置は、表示手段を備えている。通話中において、第一画像データが所定の周期で順次切り替えられながら表示手段に表示される。通話端末装置の状態を示す状態情報が取得された場合には、一の第一画像データと他の第一画像データとの間に、状態情報をユーザに通知する為の第二画像データが所定時間表示される。表示手段には第一画像データが順次表示されているので、ユーザは通話中であっても表示手段を視認するようになる。ユーザは、第二画像データを視認することによって、状態情報を認識することが可能となる。
【００２２】
また、請求項２に係る発明の通話端末装置は、請求項１に記載の発明の効果に加えて、通話料金が第一閾値以上となった場合に、通話料金が状態情報として取得される。取得された通話料金を通知する為の状態情報に関連づけられた第二画像データが表示手段に表示される。ユーザは、第二画像データを視認することによって、通話料金を認識することが可能となる。電池残量が第二閾値以下となった場合に、電池残量が状態情報として取得される。取得された電池残量を通知する為の状態情報に関連づけられた第二画像データが表示手段に表示される。ユーザは、第二画像データを視認することによって、電池残量を認識することが可能となる。
【００２３】
また、請求項３に係る発明の通話端末装置は、請求項１又は２に記載の発明の効果に加えて、ユーザが表示手段を視認している場合に、取得された状態情報を通知する為の第二画像データが表示手段に表示される。通話端末装置は、表示手段を視認しているユーザに対して、確実に第二画像データを視認させることが可能となる。
【００２４】
また、請求項４に係る発明の通話端末装置は、請求項１又は２に記載の発明の効果に加えて、通話音声が途切れた場合に、取得された状態情報を通知する為の第二画像データが表示手段に表示される。ユーザは表示手段を視認している可能性が高いので、通話端末装置は、ユーザに対してより効果的に第二画像データを視認させることが可能となる。
【００２５】
また、請求項５に係る発明の通話端末装置は、請求項１又は２に記載の発明の効果に加えて、ユーザが何らかの入力操作を行った場合に、取得された状態情報を通知する為の第二画像データが表示手段に表示される。ユーザは表示手段を視認している可能性が高いので、通話端末装置は、ユーザに対してより効果的に第二画像データを視認させることが可能となる。
【００２６】
また、請求項６に係る発明の通話端末装置は、請求項１又は２に記載の発明の効果に加えて、状態情報が取得されてからの経過時間が第四閾値以上となった状態で、未だ表示手段に第二画像データが表示されていない場合には、第二画像データを表示手段に表示させる。通話端末装置は、第二画像データが表示手段に表示されない状態を防止できる。
【００２７】
また、請求項７に係る発明の通話端末装置は、請求項２に記載の発明の効果に加えて、通話料金が第五閾値以上である場合には、通話料金をユーザに通知する為の第二画像データを継続して表示手段に表示させる。通話端末装置は、ユーザに対して確実に第二画像データを視認させることが可能となる。
【００２８】
また、請求項８に係る発明の通話端末装置は、請求項２に記載の発明の効果に加えて、電池残量が第六閾値以下である場合に、電池残量をユーザに通知する為の第二画像データを継続して表示手段に表示させる。通話端末装置は、ユーザに対して確実に第二画像データを視認させることが可能となる。
【００２９】
また、請求項９に係る発明の通話端末装置は、請求項１乃至８のいずれかに記載の発明の効果に加えて、第二撮影手段によって撮影された撮影データに基づいて、ユーザが特定される。特定されたユーザに対応付けられている第二画像データが、表示手段に表示される。通話端末装置は、ユーザに最適な第二画像データを選択して表示手段に表示させることができる。
【００３０】
また、請求項１０に係る発明の通話端末装置は、請求項１乃至８のいずれかに記載の発明の効果に加えて、音声取得手段によって取得された音声に基づいて、ユーザが特定される。特定されたユーザに対応付けられている第二画像データが、表示手段に表示される。通話端末装置は、ユーザに最適な第二画像データを選択して表示手段に表示させることが可能となる。
【００３１】
また、請求項１１に係る発明の通話端末装置は、請求項２に記載の発明の効果に加えて、通話料金が第一閾値以上となり、且つ電池残量が第二閾値以下となった場合に、両方を通知する為の第三画像データが表示手段に表示される。ユーザは、第三画像データを視認することによって、通話料金と電池残量とを認識することが可能となる。
【００３２】
また、請求項１２に係る発明の通話端末装置は、請求項２に記載の発明の効果に加えて、通話料金に対して設定される閾値に応じて、第二画像データを表示させる回数や周期を変化させることが可能となる。これによって、ユーザに対する通知の程度を変化させ、より確実にユーザに通話料金を認識させることが可能となる。
【００３３】
また、請求項１３に係る発明の通話端末装置は、請求項２に記載の発明の効果に加えて、残量に対して設定される閾値に応じて、第二画像データを表示させる回数や周期を変化させることが可能となる。これによって、ユーザに対する通知の程度を変化させ、より確実にユーザに電池残量を認識させることが可能となる。
【００３４】
また、請求項１４に係る発明の表示制御方法では、通話中において、第一画像データが所定の周期で順次切り替えられながら表示手段に表示される。通話端末装置の状態を示す状態情報が取得された場合には、一の第一画像データと他の第一画像データとの間に、状態情報をユーザに通知する為の第二画像データが所定時間表示される。表示手段には第一画像データが順次表示されているので、ユーザは通話中であっても表示手段を視認するようになる。ユーザは、第二画像データを視認することによって、状態情報を認識することが可能となる。
【００３５】
また、請求項１５に係る発明の表示制御プログラムは、請求項１乃至１３のいずれかに記載の通話端末装置の各処理手段としてコンピュータを機能させることができる。
【図面の簡単な説明】
【００３６】
【図１】通話端末装置１の物理的構成を示す模式図である。
【図２】通話端末子機２の物理的構成を示す模式図である。
【図３】通話端末装置１の電気的構成を示す模式図である。
【図４】フラッシュメモリ２５の記憶領域を示す模式図である。
【図５】第一画像テーブル２５２１を示す模式図である。
【図６】第二画像テーブル２５４１を示す模式図である。
【図７】通話端末子機２の電気的構成を示す模式図である。
【図８】メイン処理を示すフローチャートである。
【図９】通話処理を示すフローチャートである。
【図１０】通話処理を示すフローチャートである。
【図１１】ユーザ認識処理を示すフローチャートである。
【図１２】表示タイミング処理を示すフローチャートである。
【図１３】表示処理を示すフローチャートである。
【図１４】子機間通信処理を示すフローチャートである。
【図１５】装置間通信処理を示すフローチャートである。
【図１６】ディスプレイ１４に表示される画像の一例を示す図である。
【図１７】ディスプレイ１４に表示される画像の一例を示す図である。
【図１８】ディスプレイ１４に表示される画像の一例を示す図である。
【図１９】ディスプレイ１４に表示される画像の一例を示す図である。
【図２０】ディスプレイ１４に表示される画像の一例を示す図である。
【図２１】ディスプレイ１４に表示される画像の一例を示す図である。
【発明を実施するための形態】
【００３７】
以下、本発明に係る通話端末装置の一実施の形態について、図面を参照して説明する。なおこれらの図面は、本発明が採用しうる技術的特徴を説明するために用いられるものであり、記載されている装置の構成、各種処理のフローチャートなどは、それのみに限定する趣旨ではなく、単なる説明例である。
【００３８】
図１及び図２を参照し、通話端末装置１及び通話端末子機２の概要について説明する。通話端末装置１及び通話端末子機２は、公衆回線網やインターネット網を介して他者と音声通話を行うための通話端末装置である。通話端末装置１は据置型の機器であり、公衆回線網やインターネット網と直接接続している。通話端末装置１は、例えば壁等に掛けられる。通話端末子機２はモバイル型の機器であり、通話端末装置１との間で無線通信を行う。
【００３９】
図１を参照し、通話端末装置１について説明する。通話端末装置１は、左右方向を長手方向とする正面視略長方形を有しており、略中央にディスプレイ１４を備えている。ディスプレイ１４の上側に、ユーザを撮影可能なカメラ１３を備えている。ディスプレイ１４の下側に、マイク１１、スピーカ１２、及び操作ボタン１５を備えている。ユーザは、マイク１１やスピーカ１２を介して、他のユーザと音声通話を行うことができる。またユーザは、ディスプレイ１４に表示される様々な情報を視認することができる。カメラ１３の使用形態については後述する。通話端末装置１は、内蔵された電池によって駆動する。
【００４０】
ディスプレイ１４には、通話時において、複数の画像や写真が順番に切り替えられて表示される（以下、このような表示を「スライドショー表示」という。）。これによって通話端末装置１は、通話中のユーザの注意をディスプレイ１４に向けさせる。さらに、ユーザがディスプレイ１４を視認している可能性が高い場合には、通話時の通話料金や電池の残量等、通話端末装置１や通話端末子機２の状態を示す情報（以下「状態情報」という。）がスライドショー表示に挿入され表示される。これによって、通話料金や電池の残量等を確実にユーザに認識させる。
【００４１】
図２を参照し、通話端末子機２について説明する。通話端末子機２は、上下方向を長手方向とする正面視略長方形状を有している。通話端末子機２は、スピーカ３２、ディスプレイ３３、操作ボタン３４、及びマイク３１を備えている。ユーザは、例えば通話端末装置１に近づいて音声通話を行うことができない場合に、通話端末子機２のマイク３１及びスピーカ３２を介して、他のユーザと音声通話を行うことができる。
【００４２】
通話端末子機２は、通話端末装置１と無線によって通信を行う。通話端末子機２によって通話が行われる場合、通話端末装置１は、公衆回線網やインターネット網を介して受信した音声のデータを通話端末子機２に対して無線送信する。通話端末子機２は、通話端末装置１から受信した音声のデータを、スピーカ３２から出力する。また通話端末子機２は、マイク３１から入力された音声のデータを通話端末装置１に対して無線送信する。通話端末装置１は、通話端末子機２から受信した音声のデータを、公衆回線網やインターネット網を介して通話相手先の通話端末装置１に送信する。以上のようにして、通話端末子機２を使用した場合の音声通話は行われる。
【００４３】
図３を参照し、通話端末装置１の電気的構成について説明する。通話端末装置１は、通話制御処理や表示制御処理等を司るＣＰＵ２６、ＣＰＵ２６が実行する処理のプログラムが記憶されるＲＯＭ２３、フラグやカウンタ、タイマ等が記憶されるＲＡＭ２４、及び、ディスプレイ１４に表示させる画像のデータや各種設定情報等が記憶されるフラッシュメモリ２５を備えている。ＣＰＵ２６は、ＲＯＭ２３、ＲＡＭ２４、及びフラッシュメモリ２５と電気的に接続している。ＣＰＵ２６は、ＲＯ２３、ＲＡＭ２４、及びフラッシュメモリ２５の記憶領域にアクセスできる。
【００４４】
通話端末装置１は、公衆回線網やインターネット網に接続して通信を行う有線通信部２１を備えている。ＣＰＵ２６は有線通信部２１と電気的に接続している。ＣＰＵ２６は、公衆回線網やインターネット網を介して通信データの送受信を行うことができる。また通話端末装置１は、通話端末子機２と無線通信を行う無線通信部２２を備えている。ＣＰＵ２６は、無線通信部２２と電気的に接続している。ＣＰＵ２６は、通話端末子機２と無線によって通信を行うことができる。
【００４５】
通話端末装置１は、音声が入力されるマイク１１、音声が出力されるスピーカ１２、音声信号と電気信号との間の変換制御を司る音声ドライバ１７を備えている。ＣＰＵ２６は音声ドライバ１７と電気的に接続している。音声ドライバ１７は、マイク１１及びスピーカ１２と電気的に接続している。ＣＰＵ２６は、マイク１１を介して入力された音声を認識することができる。ＣＰＵ２６は、スピーカ１２から所望の音声を出力させることができる。
【００４６】
通話端末装置１は、画像を撮影するカメラ１３と、カメラ１３の駆動制御を司るカメラドライバ１８とを備えている。ＣＰＵ２６はカメラドライバ１８と電気的に接続している。カメラドライバ１８とカメラ１３とは電気的に接続している。ＣＰＵ２６は、カメラ１３によって撮影された画像を認識することができる。
【００４７】
通話端末装置１は、ディスプレイ１４と、ディスプレイ１４の表示駆動制御を司る表示ドライバ１９を備えている。ＣＰＵ２６は表示ドライバ１９と電気的に接続している。表示ドライバ１９とディスプレイ１４とは電気的に接続している。ＣＰＵ２６は、ディスプレイ１４に所望の画像を表示させることができる。
【００４８】
通話端末装置１は、情報が入力される操作ボタン１５を備えている。ＣＰＵ２６は操作ボタン１５と電気的に接続している。ＣＰＵ２６は、操作ボタン１５を介して入力された情報を認識することができる。
【００４９】
通話端末装置１は、電池１６を備えている。上述の各種デバイスは、電池１６によって駆動する。また、電池１６の電圧をＣＰＵ２６が検出可能なように、ＣＰＵ２６は電池１６と電気的に接続している。ＣＰＵ２６は、電池１６の電圧に基づいて電池の残量を特定する。
【００５０】
フラッシュメモリ２５の記憶領域について、図４を参照して説明する。フラッシュメモリ２５は、第一画像記憶領域２５１、第一画像情報記憶領域２５２、第二画像記憶領域２５３、第二画像情報記憶領域２５４、ユーザ画像記憶領域２５５、ユーザ音声記憶領域２５６、撮影画像記憶領域２５７、入力音声記憶領域２５８、閾値情報記憶領域２５９、及びその他の情報記憶領域２６０を少なくとも備えている。以下、其々の領域に記憶されている情報について説明する。
【００５１】
第一画像記憶領域２５１には、通話時においてディスプレイ１４にスライドショー表示される画像や写真（以下「第一画像」という。）が複数記憶される。第一画像情報記憶領域２５２には第一画像テーブル２５２１が記憶されている。第一画像テーブル２５２１には、第一画像記憶領域２５１に記憶されている第一画像を順番に切り替えながらディスプレイ１４に表示させる場合の、第一画像の順番及び切替周期の情報が記憶される。第一画像テーブル２５２１の詳細については、図５を参照して後述する。
【００５２】
第二画像記憶領域２５３には、通話料金や電池残量をユーザに通知するための画像であって、スライドショー表示される第一画像の間に挿入される画像（以下「第二画像」という。）が複数記憶される。第二画像情報記憶領域２５４には第二画像テーブル２５４１が記憶されている。第二画像テーブル２５４１には、第二画像の表示タイミングや表示回数、切替周期等の情報が記憶される。第二画像テーブル２５４１の詳細については、図６を参照して後述する。
【００５３】
ユーザ画像記憶領域２５５には、カメラ１３によって撮影されたユーザの画像（以下「ユーザ画像」という。）が記憶される。通話端末装置１及び通話端末子機２を使用するユーザのユーザ画像が予め撮影される。撮影されたユーザ画像は、各ユーザを特定するための情報に対応付けられ、ユーザ画像記憶領域２５５に記憶される。ユーザ画像は、カメラ１３によって撮影された撮影画像に含まれる者がどのユーザに相当するかを認識する場合に使用される。
【００５４】
ユーザ音声記憶領域２５６には、マイク１１を介して入力されたユーザの音声データ（以下「ユーザ音声」という。）が記憶される。通話端末装置１及び通話端末子機２を使用するユーザのユーザ音声が予め取得される。取得されたユーザ音声は、各ユーザを特定する為の情報に対応付けられ、ユーザ音声記憶領域２５６に記憶される。ユーザ音声は、マイク１１を介して入力された音声を発声した者がどのユーザに相当するかを認識する場合に使用される。
【００５５】
撮影画像記憶領域２５７には、カメラ１３によって撮影された撮影画像が記憶される。入力音声記憶領域２５８には、マイク１１（通話端末装置１）又はマイク３１（通話端末子機２）を介して入力された音声データが記憶される。閾値情報記憶領域２５９には、後述する第三閾値、第四閾値、第五閾値、及び第六閾値が記憶される。
【００５６】
図５を参照し、第一画像テーブル２５２１について説明する。第一画像テーブル２５２１には、複数の第一画像の名称が順番に記憶される。また、第一画像を切り替えてディスプレイ１４に表示させる場合の周期が切替周期として記憶される。図５に示す例では、第一画像の名称が「画像ａ」「画像ｂ」「画像ｃ」の順番で記憶されている。また切替周期として「１０秒」が記憶されている。なお、「画像ａ」「画像ｂ」「画像ｃ」の名称に対応する第一画像自体は、第一画像記憶領域２５１に記憶される。
【００５７】
本実施の形態では、ユーザによって通話が開始されると、第一画像テーブル２５２１に記憶されている第一画像の名称及び順番に基づき、第一画像記憶領域２５１に記憶されている第一画像が順次選択される。また、第一画像テーブル２５２１に記憶されている切替周期に基づいて、選択された第一画像が周期的に順次切り替えられディスプレイ１４に表示される。これによって通話端末装置１はスライドショー表示を実現している。
【００５８】
図６を参照し、第二画像テーブル２５４１について説明する。本実施の形態では、通話中の通話料金が所定の閾値（以下「第一閾値」という。）以上となった場合、又は、通話中に通話端末装置１や通話端末子機２の電池残量が所定の閾値（以下「第二閾値」という。）以下となった場合であって、所定の条件（詳細は後述する。）を満たした場合に、第二画像を第一画像間に挿入して表示する。これによって、通話料金や電池残量を通話中のユーザに通知する。第二画像テーブル２５４１には、上述の第一閾値及び第二閾値に第二画像が対応付けられ記憶される。また第一閾値及び第二閾値に、表示回数や切替周期（表示時間、待機時間）、チェックフラグの情報が対応付けられ記憶される。なおこれらの情報は、通話端末装置１を使用するユーザ毎に記憶される。
【００５９】
チェックフラグは、閾値による判断の結果、第二画像が既に表示対象と判断されたか否かを示す。通話料金が一旦第一閾値以上であると判断された場合や、電池残量が一旦第二閾値以下であると判断された場合、既に判断済みの情報であることを示すために、判断済みである旨の情報がチェックフラグとして記憶される。チェックフラグを参照することによって、最初に通話料金が第一閾値以上となった場合、又は、最初に電池残量が第二閾値以下となった場合にのみ、対応する第二画像を表示させる。以下、判断済みである旨の情報がチェックフラグとして記憶される場合、「チェックフラグがＯＮされる」という。判断が行われていない旨の情報がチェックフラグとして記憶される場合、「チェックフラグがＯＦＦされる」という。
【００６０】
図６に示す例では、第二画像テーブル２５４１には、「ユーザＡ」「ユーザＢ」「その他」及び「複合」に対応する各種情報が記憶される。例えば、通話中のユーザが「ユーザＡ」であると特定された場合、テーブルのうち「ユーザＡ」に対応する各種情報が参照される。通話中のユーザが特定できなかった場合は、「その他」に対応する各種情報が参照される。通話中の通話料金が第一閾値以上となった場合であり、且つ、通話中に電池残量が第二閾値以下となった場合には、「複合」に対応する各種情報が参照される。
【００６１】
上述の各種情報として、「第一閾値」「第二閾値」「表示時間」「待機時間」「表示回数」「第二画像」「チェックフラグ」が記憶されている。「表示時間」は、第二画像をスライドショー表示の間に挿入させて表示させる（以下「挿入表示させる」という。）場合の、第二画像の表示時間を示す。「待機時間」は、一の第二画像を挿入表示させてから、他の第二画像を挿入表示させるまでの間の時間を示す。「表示回数」は、第二画像を挿入表示させる回数を示す。「第二画像」は、挿入表示させる第二画像の名称を示す。なお、第二画像自体は第二画像記憶領域２５３に記憶されている。
【００６２】
図６に示す例では、例えば「ユーザＡ」には、第一閾値として「２００円」「９００円」「１５００円」が記憶されている。通話中の通話料金が「９００円」を超えた場合に表示される第二画像の表示回数は「２回」であり、表示される第二画像は「画像Ｂ」「画像Ｃ」である。表示時間はそれぞれ「３秒」であり、「画像Ｂ」の表示が終了した後、「画像Ｃ」の表示が開始されるまでの待機時間は「６秒」である。従って、ユーザAの通話中に、通話料金が「９００円」を超えた場合であって、所定の条件（詳細は後述する。）を満たした場合、表示中の第一画像に代わって「画像Ｂ」を３秒間表示させる。「画像Ｂ」の表示終了後、第一画像が６秒間表示される。その後、「画像Ｃ」が３秒間表示される。
【００６３】
また例えば、通話中の通話料金が「１５００円」を超えた場合に表示される第二画像は「画像Ｄ」である。図６に示す例では、表示時間、待機時間及び表示回数にはそれぞれ「×」が示されている。このように、表示時間、待機時間及び表示回数に有効な値が記憶されていない場合、通話端末装置１は、一旦「画像Ｄ」を挿入表示させた以降、第一画像に切り替えることなく継続して「画像Ｄ」を表示させる。これによって、通話料金が非常に高くなっている場合や、電池残量が非常に小さくなっている場合に、確実にユーザに第二画像を視認させる。
【００６４】
図７を参照し、通話端末子機２の電気的構成について説明する。通話端末子機２は、通話制御処理や通信制御処理等を司るＣＰＵ４３、ＣＰＵ４３が実行する処理のプログラムが記憶されるＲＯＭ４０、フラグやカウンタ、タイマ情報等が記憶されるＲＡＭ４１、及び、各種設定情報等が記憶されるフラッシュメモリ４２を備えている。ＣＰＵ４３は、ＲＯＭ４０、ＲＡＭ４１、及びフラッシュメモリ４２と電気的に接続している。ＣＰＵ４３は、ＲＯ４０、ＲＡＭ４１、及びフラッシュメモリ４２の記憶領域にアクセスできる。
【００６５】
通話端末子機２は、通話端末装置１と無線通信を行う無線通信部３９を備えている。ＣＰＵ４３は無線通信部３９と電気的に接続している。ＣＰＵ４３は、通話端末装置１と無線によって通信を行うことができる。
【００６６】
通話端末子機２は、音声が入力されるマイク３１、音声が出力されるスピーカ３２、音声信号と電気信号との間の変換制御を司る音声ドライバ３６を備えている。ＣＰＵ４３は音声ドライバ３６と電気的に接続している。音声ドライバ３６は、マイク３１及びスピーカ３２とは電気的に接続している。ＣＰＵ４３は、マイク３１を介して入力された音声を認識することができる。ＣＰＵ４３は、スピーカ３２から所望の音声を出力させることができる。
【００６７】
通話端末子機２は、ディスプレイ３３と、ディスプレイ３３の表示駆動制御を司る表示ドライバ３７とを備えている。ＣＰＵ４３は表示ドライバ３７と電気的に接続している。表示ドライバ３７とディスプレイ３３とは電気的に接続している。ＣＰＵ４３は、ディスプレイ３３に所望の画像を表示させることができる。
【００６８】
通話端末装置１は、情報が入力される操作ボタン３４を備えている。ＣＰＵ４３は操作ボタン３４と電気的に接続している。ＣＰＵ４３は、操作ボタン３４を介して入力された情報を認識することができる。
【００６９】
通話端末子機２は、電池３５を備えている。上述の各種デバイスは、電池３５によって駆動する。また、電池３５の電圧をＣＰＵ４３が検出可能なように、ＣＰＵ４３は電池３５と電気的に接続している。ＣＰＵ４３は、電池３５の電圧に基づいて電池残量を特定する。
【００７０】
図８〜１４を参照し、通話端末装置１のＣＰＵ２６において実行される各種処理（メイン処理、表示処理、子機間通信処理）について説明する。其々の処理は、通話端末装置１に電源が投入されてＣＰＵ２６が駆動開始した場合に、ＣＰＵ２６によって実行開始される。なおこれらの処理は、其々所定の周期で繰り返し起動され実行される。一の処理が処理を実行中に、他の処理の起動タイミングが到来した場合、実行中の処理は中断され、起動タイミングが到来した他の処理の実行が開始される。中断された処理は、次の起動タイミングまで待機する。次の起動タイミングが到来した場合、中断時点から処理を再開する。
【００７１】
各処理において使用されるフラグ情報について説明する。「表示フラグ」は、スライドショー表示の実行の許否を示す。スライドショー表示が許可された場合に「１」が記憶される。スライドショー表示が禁止された場合に「０」が記憶される。「開始フラグ」は、第二画像の挿入表示の実行の許否を示す。第二画像の挿入表示が許可された場合に「１」が記憶される。第二画像の挿入表示が禁止された場合に「０」が記憶される。「音声フラグ」は、通話端末子機２から音声データを受信したか否かを示す。音声データを受信した場合に「１」が記憶される。音声のデータを受信していない場合に「０」が記憶される。以下、上述のフラグに「１」が記憶されることを「ＯＮされる」といい、「０」が記憶されることを「ＯＦＦ」されるという。上述のフラグは、ＲＡＭ２４に記憶される。
【００７２】
図８を参照し、メイン処理について説明する。メイン処理が起動されると、図８に示すように、はじめに、接続している公衆回線網又はインターネット網を介して他の通話端末装置１から、通話の開始を要求するための信号（通話要求信号）を受信することによって着信したかが判断される（Ｓ１１）。着信した場合（Ｓ１１：ＹＥＳ）、通話要求信号を送信した他の通話端末装置１との通話を開始させるために必要な処理（呼び出し音出力、通話応答信号送信など、以下「着信処理」という。）が実行される（Ｓ１７）。着信処理が行われた後、通話要求信号を送信した他の通話端末装置１との通話を行う為の処理（通話処理）が実行される（Ｓ２１）。通話処理では、通話を実行させる処理と併せて、ディスプレイ１４への表示制御が行われる。通話処理の詳細は後述する。通話が終了した場合、Ｓ１１に戻り、上述の処理が繰り返し実行される。
【００７３】
他の通話端末装置１から通話要求信号を受信していない場合（Ｓ１１：ＮＯ）、他の通話端末装置１との通話を開始させるための操作がユーザによってなされたかが判断される（Ｓ１３）。通話開始のための操作がなされた場合（Ｓ１３：ＹＥＳ）、他の通話端末装置１との通話を開始させるために必要な処理（通話要求信号送信など、以下「発信処理」という。）が実行される（Ｓ１９）。発信処理が行われた後、通話を望む他の通話端末装置１と通話を行う通話処理が実行される（Ｓ２１）。通話処理の詳細は後述する。通話が終了した後、Ｓ１１に戻り、上述の処理が繰り返し実行される。
【００７４】
通話開始のための操作がなされていない場合（Ｓ１３：ＮＯ）、各種情報の登録、設定、変更等を行うための操作がユーザによってなされたかが判断される（Ｓ１５）。各種情報とは、例えば第一画像テーブル２５２１に記憶される各種情報や、第二画像テーブル２５４１に記憶される各種情報が該当する。登録、設定、変更等を行うための操作がなされた場合（Ｓ１５：ＹＥＳ）、操作ボタン１５を介して入力された情報が、フラッシュメモリ２５の該当領域に記憶される（Ｓ２３）。そしてＳ１１に戻り、上述の処理が繰り返し実行される。一方、登録、設定、変更等を行うための操作がなされていない場合（Ｓ１５：ＮＯ）、なんら処理を行うことなくＳ１１に戻り、上述の処理が繰り返し実行される。
【００７５】
図９及び図１０を参照し、メイン処理のＳ２１（図８参照）において呼び出される通話処理について説明する。通話処理では、図９に示すように、はじめに、他の通話端末装置１との通話を開始させる（Ｓ３０）。通話状態では、マイク１１を介して受信した音声データが、公衆回線網又はインターネット網を介して他の通話端末装置１に対して送信される。また、公衆回線網又はインターネット網を介して他の通話端末装置１から音声データを受信した場合には、受信した音声データがスピーカ１２から出力される。また、ユーザが通話端末子機２を使用して通話を行っている場合には、無線によって通話端末子機２から受信した音声データが、公衆回線網又はインターネット網を介して他の通話端末装置１に対して送信される。公衆回線網又はインターネット網を介して他の通話端末装置１から受信した音声データが、無線によって通話端末子機２に対して送信される。
【００７６】
次いで、第二画像テーブル２５４１に記憶されているチェックフラグがＯＦＦされ初期化される。また、表示フラグ、開始フラグ、及び音声フラグがＯＦＦされ初期化される（Ｓ３１）。次いで、スライドショー表示を開始させるために、表示フラグがＯＮされる（Ｓ３３）。これによって、スライドショー表示が開始される（図１３参照、後述）。次いで、通話中のユーザを認識して特定する為の処理（ユーザ認識処理、Ｓ３５、図１１参照）が実行される。
【００７７】
図１１を参照し、ユーザ認識処理について説明する。ユーザ認識処理では、はじめに、カメラ１３による撮影が開始される（Ｓ６１）。撮影された撮影画像は、フラッシュメモリ２５の撮影画像記憶領域２５７に記憶される。撮影画像が撮影された場合（Ｓ６３：ＹＥＳ）、次いで、撮影された撮影画像に基づき、通話中のユーザを認識する為の処理が実行される（Ｓ７１）。必要に応じて、ユーザ画像記憶領域２５５に記憶されているユーザ画像が参照される。
【００７８】
撮影画像に基づいてユーザを認識する方法としては、顔認識処理として知られている従来周知の様々な方法が使用可能である。例えば以下に示す方法が使用可能である。撮影画像に含まれるユーザの顔部分の画像から、目・鼻・口などの顔を構成する部品の形状やそれらの配置が特徴点として抽出される。ユーザ画像記憶領域２５５に記憶されているユーザ画像に含まれるユーザの顔部分の画像からも、同様に特徴点が抽出される。そして、抽出された特徴点のパターンマッチングが行われる。なお、パターンを情報圧縮することによって、条件の変動に対して誤差の少ない認識結果を得ることができる。撮影画像に基づく特徴点と、ユーザ画像に基づく特徴点とが良好にマッチングした場合のユーザ画像に対応付けられているユーザが、通話中のユーザとして特定される。そしてＳ７７に移行される。
【００７９】
一方、カメラ１３が稼働しておらず、撮影画像が取得されなかった場合（Ｓ６３：ＮＯ）、マイク１１を介して入力される音声の録音が開始される（Ｓ６５）。録音された音声は、フラッシュメモリ２５の入力音声記憶領域２５８に記憶される。音声が録音された場合（Ｓ６７：ＹＥＳ）、次いで、録音された音声に基づき、通話中のユーザを認識する為の処理が実行される（Ｓ７３）。必要に応じて、ユーザ音声記憶領域２５６に記憶されているユーザ音声が参照される。
【００８０】
音声に基づいてユーザを認識する方法としては、従来周知の様々な方法が使用可能である。例えば以下に示す方法が使用可能である。録音した音声からいくつかの特徴を抽出し、「声紋」「テンプレート」「モデル」等が構築される。ユーザ音声記憶領域２５６に記憶されているユーザ音声からも同様に、「声紋」「テンプレート」「モデル」等が構築される。そして双方の「声紋」「テンプレート」及び「モデル」のマッチングが行われる。録音した音声に基づくパラメータと、ユーザ音声に基づくパラメータとが良好にマッチングした場合のユーザ音声に対応付けられているユーザが、通話中のユーザとして特定される。そしてＳ７７に移行される。
【００８１】
Ｓ７７では、撮影画像又は録音音声に基づいて、通話中のユーザが特定されたかが判断される（Ｓ７７）。通話中のユーザが特定された場合（Ｓ７７：ＹＥＳ）、第二画像情報記憶領域２５４に記憶されている第二画像テーブル２５４１のうち、特定されたユーザに対応する第一閾値及び第二閾値が特定される（Ｓ７９）。特定された第一閾値及び第二閾値のうち、対応するチェックフラグがＯＦＦとなっている第一閾値及び第二閾値が選択される。選択された第一閾値が複数存在する場合には、最も小さい第一閾値が選択される。選択された第二閾値が複数存在する場合には、最も大きい第二閾値が選択される。選択された第一閾値及び第二閾値は、特定されたユーザの情報とともにＲＡＭ２４に一時的に記憶される。
【００８２】
次いで、通話中にユーザが変更されたかが判断される（Ｓ８１）。前回特定されたユーザの情報は、ＲＡＭ２４に記憶されている。今回特定されたユーザの情報と、ＲＡＭ２４に記憶された状態の前回のユーザの情報とが比較される。双方が相違する場合（Ｓ８１：ＹＥＳ）通話中にユーザが変更されているので、ユーザが変更となった旨を示すフラグ情報がＲＡＭ２４に一時的に記憶される（Ｓ８３）。そしてユーザ認識処理は終了し、通話処理（図９参照）に戻る。一方、前回特定されたユーザの情報と、今回特定されたユーザの情報とが一致する場合（Ｓ８１：ＮＯ）、通話中のユーザは変更されていないので、なんら処理を行うことなくユーザ認識処理は終了し、通話処理（図９参照）に戻る。
【００８３】
一方、音声が録音できなかった場合や（Ｓ６７：ＮＯ）、Ｓ７７において、通話中のユーザが特定できなかった場合（Ｓ７７：ＮＯ）、第二画像テーブル２５４１のうち「その他」に対応する第一閾値及び第二閾値が特定される（Ｓ７５）。特定された第一閾値及び第二閾値のうち、対応するチェックフラグがＯＦＦとなっている第一閾値及び第二閾値が選択される。選択された第一閾値が複数存在する場合には、最も小さい第一閾値が選択される。選択された第二閾値が複数存在する場合には、最も大きい第二閾値が選択される。選択された第一閾値及び第二閾値は、特定されたユーザの情報とともにＲＡＭ２４に一時的に記憶される。そしてユーザ認識処理は終了し、通話処理（図９参照）に戻る。
【００８４】
図９において、ユーザ認識処理（Ｓ３５）が終了した後、通話中の通話によって発生した通話料金が算出される（Ｓ３７）。通話料金は、例えば、通話が開始してからの経過時間に所定の料金を乗算することによって算出される。次いで、電池残量が特定される（Ｓ３９）。電池残量は、例えば、現在の電池１６の電圧を、十分充電された状態の電池電圧によって除算することによって算出される。
【００８５】
次いで図１０に示すように、ユーザ認識処理のＳ７５及びＳ７９（図１１参照）においてＲＡＭ２４に記憶された第一閾値及び第二閾値に基づいて、通話料金及び電池残量が判断される。はじめに、第一閾値と、Ｓ３７（図９参照）にて算出された通話料金とが比較される（Ｓ４１）。算出された通話料金が第一閾値未満である場合（Ｓ４１：ＮＯ）、次いで、第二閾値と、Ｓ３９にて特定された電池残量、及び、通話端末子機２から受信した電池残量（Ｓ１６５、図１４参照、後述）とが比較される（Ｓ４３）。両方の電池残量が第二閾値より大きい場合（Ｓ４３：ＮＯ）、Ｓ５５に移行される。
【００８６】
一方、Ｓ３９において特定された電池残量、及び、通話端末子機２から受信した電池残量のうち少なくともいずれかが第二閾値以下となっていた場合（Ｓ４３：ＹＥＳ）、第二画像テーブル２５４１のうち、比較対象とされた第二閾値に対応付けられている表示時間、待機時間、表示回数、第二画像の情報が、比較対象とされた電池残量とともに取得され（Ｓ４７）、ＲＡＭ２４に一時的に記憶される。そしてＳ５３に移行される。
【００８７】
一方、Ｓ３７において算出された通話料金が第一閾値以上であり（Ｓ４１：ＹＥＳ）、電池残量が第二閾値よりも大きい場合（Ｓ４５：ＮＯ）、比較対象とされた第一閾値に対応付けられている表示時間、待機時間、表示回数、第二画像の情報が、比較対象とされた通話料金とともに取得され（Ｓ４９）、ＲＡＭ２４に一時的に記憶される。そしてＳ５３に移行される。
【００８８】
また、Ｓ３７において算出された通話料金が第一閾値以上であって（Ｓ４１：ＹＥＳ）、且つ、Ｓ３９にて特定された電池残量、及び、通話端末子機２から受信した電池残量のうち少なくともいずれかが第二閾値以下である場合（Ｓ４５：ＹＥＳ）、第二画像テーブル２５４１に含まれる情報のうち、「複合」に対応付する表示時間、待機時間、表示回数、及び第二画像の情報が、比較対象とした通話料金及び電池残量とともに取得され（Ｓ５１）、ＲＡＭ２４に一時的に記憶される。そしてＳ５３に移行される。
【００８９】
次いで、第二画像の表示タイミングを判断する表示タイミング処理が実行される（Ｓ５３）。図１２を参照し、表示タイミング処理について説明する。表示タイミング処理では、ユーザがディスプレイ１４を視認している可能性が高い状態が検出される。検出された場合、スライドショー表示されている第一画像に第二画像を挿入表示させる。これによって、ユーザに対して確実に通話料金や電池残量を通知する。
【００９０】
図１２に示すように、初めに、表示タイミングの判断を開始してからの経過時間を判断するために、経過時間の監視処理が開始される（Ｓ９１）。次いで、マイク１１から入力される音声を取得する処理が開始される（Ｓ９３）。次いで、カメラ１３によって撮影された撮影画像が、フラッシュメモリ２５の撮影画像記憶領域２５７から取得される（Ｓ９５）。
【００９１】
撮影された撮影画像に含まれているユーザの視線方向を特定するために、取得された撮影画像の認識処理が行われる（Ｓ９７）。撮影画像から人の視線方向を特定する方法としては、従来周知の様々な方法が使用可能である。例えば、撮影画像中において目の器官の特徴点を検出し、眼球の三次元モデルを利用して視線方向を計測する方法が使用可能である。また、目画像の画素値の分布を利用することにより、視線方向を推定する方法が使用可能である。
【００９２】
特定された視線方向にディスプレイ１４が存在するかが判断される（Ｓ９９）。ユーザの視線方向にディスプレイ１４が存在すると判断された場合（Ｓ９９：ＹＥＳ）、Ｓ１０９に移行する。
【００９３】
特定された視線方向にディスプレイ１４が存在しないと判断された場合（Ｓ９９：ＮＯ）、次いで、入力される音声の有無が判断される。そして、入力される音声のレベルが非常に小さい（無音である）状態が連続して継続した場合の継続時間が特定される（Ｓ１０１）。具体的には、無音である状態となった場合に、ＲＡＭ２４に記憶されたタイマをスタートさせる。タイマは、所定の周期（例えば１ｍｓ）で更新される。この状態で、マイク１１から所定レベル以上の音声が入力された場合や、通話端末子機２から音声のデータを受信し、音声フラグがＯＮされた（図１４参照）場合、タイマはリセットされる。タイマの値が、無音状態の経過時間とされる。無音状態の経過時間が、所定の時間の値である第三閾値（例えば４秒）以上となったと判断された場合（Ｓ１０３：ＹＥＳ）、Ｓ１０９に移行する。
【００９４】
無音状態が第三閾値以上継続していない場合（Ｓ１０３：ＮＯ）、操作ボタン１５を介してユーザによって何らかの操作がなされたかが判断される（Ｓ１０５）。何らかの操作が検出された場合（Ｓ１０５：ＹＥＳ）、Ｓ１０９に移行する。一方、ユーザによって何ら操作がなされていない場合（Ｓ１０５：ＮＯ）、Ｓ９１において監視が開始された経過時間が、所定の時間の値である第四閾値（例えば３０秒）以上となったかが判断される（Ｓ１０７）。経過時間が第四閾値以上となった場合（Ｓ１０７：ＹＥＳ）、Ｓ１０９に移行する。経過時間が第四閾値未満である場合（Ｓ１０９：ＮＯ）、Ｓ９５に戻り、上述の処理が繰り返し実行される。
【００９５】
Ｓ１０９では、ユーザがディスプレイ１４を視認している可能性が高い状態であるので、第二画像の挿入表示を開始させるために開始フラグがＯＮされる（Ｓ１０９）。そして表示タイミング処理は終了し、通話処理（図１０参照）に戻る。
【００９６】
図１０に示すように、表示タイミング処理（Ｓ５３）が終了した後の通話処理では、通話が継続して行われているかが判断される（Ｓ５５）。通話が継続して行われている場合（Ｓ５５：ＹＥＳ）、Ｓ３５（図９参照）に戻り、上述の処理が繰り返し実行される。一方、通話を終了させるための処理がユーザによってなされている場合には（Ｓ５５：ＮＯ）、通話を終了させるための所定の通信を行った後、スライドショー表示を停止させるために表示フラグをＯＦＦする（Ｓ５７）。そして通話処理は終了し、メイン処理に戻る。
【００９７】
ＣＰＵ２６が実行する表示処理について、図１３を参照して説明する。表示処理では、表示フラグ及び開始フラグの状態に基づいて、ディスプレイ１４に所望の画像を表示させる処理が実行される。図１３に示すように、はじめに、表示フラグがＯＮであるかが判断される（Ｓ１２１）。表示フラグがＯＦＦとなっている場合（Ｓ１２１：ＮＯ）、スライドショー表示は禁止されているので、表示処理では何ら処理を行うことなくＳ１２１に戻る。そして継続して表示フラグが監視される。
【００９８】
通話が開始されて表示フラグがＯＮされた場合（Ｓ１２１：ＹＥＳ）、スライドショー表示を行うための処理が実行される。第一画像テーブル２５２１（図５参照）の情報に基づき、第一画像記憶領域２５１に記憶されている第一画像のうち一が選択される。選択された第一画像がディスプレイ１４に表示される（Ｓ１２３）。次いで、開始フラグの状態が判断される（Ｓ１２５）。開始フラグがＯＦＦとなっている場合（Ｓ１２５：ＮＯ）、第一画像テーブル２５２１に記憶されている切替周期に基づき、表示中の第一画像を次の第一画像に切り替えるタイミングが監視される（Ｓ１２７）。切替タイミングが到来していない状態では（Ｓ１２７：ＮＯ）、Ｓ１２５に戻り、継続して開始フラグと切替タイミングが監視される。
【００９９】
一方、切替タイミングが到来した場合（Ｓ１２７：ＹＥＳ）、第一画像テーブル２５２１に記憶されている第一画像の順番に基づいて、表示中の第一画像を次の第一画像に切り替える（Ｓ１２９）。そしてＳ１２５に戻り、上述の処理が繰り返し実行される。以上の処理によって、第一画像を順番に切り替えて表示させるスライドショー表示が実行される。
【０１００】
一方、開始フラグがＯＮとなった場合（Ｓ１２５：ＹＥＳ）、第二画像を挿入表示させる必要がある。Ｓ４７、Ｓ４９、Ｓ５１（図１０参照）においてＲＡＭ２４に記憶された表示時間、待機時間、表示回数、及び第二画像の情報が参照される。そして、ディスプレイ１４に表示中の第一画像を第二画像に切り替える（Ｓ１３１）。なお、ユーザが変更となった旨を示すフラグ情報がＲＡＭ２４に記憶されている（Ｓ８３、図１１参照）場合には、ユーザが変更となった情報を第二画像に付加してディスプレイ１４に表示させる。
【０１０１】
次いで、表示回数が「−１」され更新される（Ｓ１３３）。次いで、更新された後の表示回数が「０」となっているかが判断される（Ｓ１３５）。「０」となった場合（Ｓ１３５：ＹＥＳ）、既定の回数分第二画像を表示させているので、第二画像の挿入表示を終了させるために開始フラグをＯＦＦする（Ｓ１３７）。また、第二画像テーブル２５４１のチェックフラグのうち、表示させた第二画像に対応付けられているチェックフラグをＯＮする。そしてＳ１２１に戻り、上述の処理が繰り返し実行される。
【０１０２】
一方、表示回数が「０」となっていない場合（Ｓ１３５：ＮＯ）、表示させるべき第二画像が残存している。そこで、第二画像を表示開始してからの経過時間が監視される（Ｓ１３９）。第二画像を表示開始してからの経過時間が、ＲＡＭ２４に記憶されている表示時間未満である場合（Ｓ１３９：ＮＯ）、Ｓ１３９に戻り、継続して経過時間が監視される。第二画像を表示開始してからの経過時間が表示時間以上となった場合（Ｓ１３９：ＹＥＳ）、表示中の第二画像を第一画像に切り替える（Ｓ１４１）。
【０１０３】
なお、表示時間として有効な値がＲＡＭ２４に記憶されていない場合には、第一画像に切り替えることなく、表示中の第二画像を継続してディスプレイ１４に表示させる。これによって、確実にユーザに対して通話料金及び電池残量を視認させることができる。
【０１０４】
次いで、第一画像を表示開始してからの待機時間が監視される（Ｓ１４３）。第一表示画像を表示開始してからの経過時間が、ＲＡＭ２４に記憶されている待機時間未満である場合（Ｓ１４３：ＮＯ）、Ｓ１４３に戻り、継続して経過時間が監視される。第一画像を表示させてからの経過時間が待機時間以上となった場合（Ｓ１４３：ＹＥＳ）、Ｓ１３１に戻る。そして、ＲＡＭ２４に記憶されている第二画像のうち、次に表示させる第二画像が選択される。そして表示中の第一画像が、選択された第二画像に切り替えられる（Ｓ１３１）。そして上述の処理が繰り返し実行される。これによって、第二画像が挿入表示される。
【０１０５】
以上のようにして、通話料金の情報、電池残量の情報、及び両方の情報を通話中のユーザに対して通知する第二画像が挿入表示される。通話中のユーザがディスプレイ１４を視認している可能性が高い状態で、第二画像が挿入表示されるので、確実にユーザに対して通話料金や電池残量の情報を通知することが可能となる。
【０１０６】
図１４を参照し、ＣＰＵ２６において実行される子機間通信処理について説明する。子機間通信処理では、はじめに、通話端末子機２から何らかの通信データを受信したかが判断される（Ｓ１５１）。なんら通信データを受信していない場合には（Ｓ１５１：ＮＯ）、Ｓ１５１に戻り、通信データの受信監視が継続して実行される。
【０１０７】
何らかの通信データを受信した場合（Ｓ１５１：ＹＥＳ）、受信した通信データに、各種情報の登録、設定、変更等の情報が含まれているかが判断される（Ｓ１５３）。各種情報の登録、設定、変更等の情報が含まれている場合（Ｓ１５３：ＹＥＳ）、通話端末子機２の操作ボタン３４を介し、ユーザによって各種情報の登録、設定、変更等がなされている。そこで、受信した各種情報の登録、設定、変更等の情報が、フラッシュメモリ２５の該当領域に記憶される（Ｓ１５９）。そしてＳ１５１に戻り、上述の処理が繰り返し実行される。
【０１０８】
受信した通信データが、通話音声データであるかが判断される（Ｓ１５３：ＮＯ、Ｓ１５５）。通話音声データである場合（Ｓ１５５：ＹＥＳ）、受信した通話音声データを、公衆回線網又はインターネット網を介して他の通話端末装置１に対して送信する（Ｓ１６１）。これによって、他の通話端末装置１との間の通話を実現させる。また、音声通話が行われたことを示すために、音声フラグがＯＮされる（Ｓ１６３）。そしてＳ１５１に戻り、上述の処理が繰り返し実行される。
【０１０９】
受信した通信データが、通話端末子機２の電池残量であるかが判断される（１５５：ＮＯ、Ｓ１６５）。電池残量である場合（Ｓ１６５：ＹＥＳ）、第二閾値との比較対象のデータとするために、受信した電池残量をＲＡＭ２４に記憶する（Ｓ１６７）。そしてＳ１５１に戻り、上述の処理が繰り返し実行される。
【０１１０】
一方、受信した通信データが上述のいずれのデータでもない場合には（Ｓ１６５：ＮＯ）、特段処理を行うことなくＳ１５１に戻り、上述の処理が繰り返し実行される。
【０１１１】
以上の処理を行うことによって、通話端末子機２からの通話音声データの受信の有無に基づいて、無音状態の経過時間を判断することが可能となる。また、通話端末子機２の電池残量が小さくなっている場合には、電池残量が小さくなっている旨を通知する第二画像をディスプレイ１４に表示させることが可能となる。
【０１１２】
図１５を参照し、通話端末子機２のＣＰＵ４３において実行される装置間通信処理について説明する。通話端末子機２に電源が投入されてＣＰＵ４３が駆動開始した場合に、ＣＰＵ４３によって起動され実行される。
【０１１３】
図１５に示すように、装置間通信処理が起動されると、はじめに、操作ボタン３４を介してユーザによって各種情報の登録、設定、変更等の情報が入力されたかが判断される（Ｓ１７１）。各種情報の登録、設定、変更等の情報が入力された場合（Ｓ１７１：ＹＥＳ）、入力された情報を含む通信データが、無線通信部３９を介して通話端末装置１に対して送信される（Ｓ１７７）。そしてＳ１８３に移行される。
【０１１４】
各種情報の登録、設定、変更等の情報が入力されていない場合（Ｓ１７１：ＮＯ）、次いで、マイク３１を介して通話音声が入力されたかが判断される（Ｓ１７３）。通話音声が入力された場合には（Ｓ１７３：ＹＥＳ）、通話音声はデータ化されて通話音声データとされ、無線通信部３９を介して通話端末装置１に対して送信される（Ｓ１７９）。そしてＳ１８３に移行される。
【０１１５】
通話音声が入力されていない場合（Ｓ１７３：ＮＯ）、通話端末装置１から通話音声データを受信したかが判断される（Ｓ１７５）。通話音声データを受信した場合（Ｓ１７５：ＹＥＳ）、通話音声データはスピーカ３２を介して音声出力される（Ｓ１８１）。そしてＳ１８３に移行する。一方、通話音声データを受信していない場合（Ｓ１７５：ＮＯ）、特段処理を行うことなくＳ１８３に移行される。
【０１１６】
Ｓ１８３では、所定の周期（例えば５秒）が監視される（Ｓ１８３）。所定の周期が到来した場合（Ｓ１８３：ＹＥＳ）、電池３５の電圧に基づいて電池残量が特定される（Ｓ１８５）。特定された電池残量は、無線通信部３９を介して通話端末装置１に対して送信される（Ｓ１８７）。そしてＳ１７１に戻り、上述の処理が繰り返し実行される。所定の周期が到来していない場合には（Ｓ１８３：ＮＯ）、なんら処理を行うことなくＳ１７１に戻り、上述の処理が繰り返し実行される。
【０１１７】
以上のようにして、通話音声が入力された場合には、通話音声データを通話端末装置１に対して送信する。なお通話端末装置１では、受信した通話音声データに基づいて無音時間の判断が行われる（Ｓ１０１、図１２参照）。また通話端末装置１では、受信した電池残量と第二閾値とが比較されることによって、第二画像の表示の有無が判断される（Ｓ４３、Ｓ４５、図１０参照）。
【０１１８】
図１６〜図２１を参照し、上述の処理の結果通話端末装置１のディスプレイ１４に表示される画像の一例について説明する。通話端末装置１を使用するユーザＡによって通話が開始されると（Ｓ２１、図８参照）、スライドショー表示が開始される（Ｓ３３、図９参照）。ディスプレイ１４には、図１６の１００にて示される第一画像「画像ａ」の他、図１７の１０１にて示される第一画像「画像ｂ」や「画像ｃ」など（図５参照）が順次切り替わりながら表示される（Ｓ１２３〜Ｓ１２９、図１３参照）。
【０１１９】
通話中のユーザＡ（図１７中１１０）が撮影され（Ｓ６１、図１１参照）、身元が特定される（Ｓ７７：ＹＥＳ、図１１参照）。特定されたユーザに対応する第二画像テーブル２５４１が抽出される（Ｓ７９、図１１参照）。また、通話中の通話の通話料金、及び電池残量が取得される（Ｓ３７、Ｓ３９、図９参照）。ここで、取得された通話料金が、抽出された第二画像テーブル２５４１に含まれている第一閾値（例えば９００円）以上となった場合（Ｓ４１：ＹＥＳ、Ｓ４５：ＮＯ、図１０参照）、第二画像を挿入表示させるタイミングが監視される。ここで図１７にて示されるように、ユーザＡの視線がディスプレイ１４を向いていることが検出された場合（Ｓ９９：ＹＥＳ、図１２参照）、第二画像の挿入処理が開始される（Ｓ１０９、図１２参照）。
【０１２０】
挿入表示が開始されると、図１８の１０２にて示されるように、表示中の第一画像に代わって第二画像「画像Ｂ」がディスプレイ１４に表示される（Ｓ１３１、図１３参照）。ユーザＡはディスプレイ１４を視認している状態であるため、通話料金が高い状態となっていることを認識する。ユーザＡが通話を続けた場合、図１９の１０３にて示されるように、一旦第一画像が表示される（Ｓ１４１、図１３参照）。所定の時間が経過した後（Ｓ１４３、図１３参照）、図２０の１０４にて示されるように、第二画像「画像Ｃ」がディスプレイ１４に表示される（Ｓ１３１、図１３参照）。以上のようにして、通話料金が高い状態である旨をユーザＡに対して通知することができる。
【０１２１】
ここで例えば、通話中の通話料金が第一閾値以上であり、且つ、通話端末装置１又は通話端末子機２のうち少なくともいずれかの電池残量が第二閾値以下であった場合には（Ｓ４１：ＹＥＳ、Ｓ４５：ＹＥＳ、図１０参照）、図２１の１０５に示すように、通話料金と電池残量との両方を通知する為の第二画像「画像Ｘ」（図６参照）が選択される（Ｓ５１、図１０参照）。選択された第二画像「画像Ｘ」が挿入表示される。これによって、通話料金が高く且つ電池残量が僅かとなっている旨をユーザＡに対して通知することができる。
【０１２２】
以上説明したように、通話端末装置１では、通話中においてスライドショー表示を行うことによって、ユーザの注意をディスプレイ１４に向けさせることができる。このような状態で、通話料金や電池残量を通知する為の第二画像をスライドショー表示に挿入表示させる。これによって、これらの状態情報を確実にユーザに対して通知することが可能となる。
【０１２３】
また、ユーザがディスプレイ１４を視認している可能性が高い状態を検出し、この状態時に第二画像を表示させる。具体的には、ユーザの視線がディスプレイ１４に向かっている場合、入力音声が無音である状態が所定（第三閾値）以上連続した場合、何らかの操作がなされた場合に、ユーザがディスプレイ１４を視認している可能性が高いと判断し、第二画像を挿入表示させる。これによって、ユーザに対して確実に通話料金や電池残量を認識させることができる。また、これらの条件に合致しない場合であっても、所定時間（第四閾値）経過後には第二画像を挿入表示させるので、第二画像が長時間挿入表示されない状態を防止できる。
【０１２４】
通話端末装置１は、カメラ１３によって撮影された画像や、マイク１１によって入力された音声から、通話中のユーザを特定する。そして、ユーザに対応する第二画像、表示回数及び表示周期（待機時間）に基づいて、ユーザに対応する第二画像を表示させることができる。このようにして、ユーザにとって最適な画像内容や頻度に基づいて第二画像を表示させることができる。
【０１２５】
また第二画像及びその表示態様（表示回数、表示時間、待機時間）は、第一閾値及び第二閾値毎に対応付けて記憶される。これによって、第二画像及びその表示態様を閾値に応じて変化させることができる。例えば、電池残量が０％に近付くに従い、第二画像の表示時間や表示回数を大きく設定することができる。これによって、通話料金や電池残量の通知を効果的に行うことができる。
【０１２６】
図９のＳ３０の処理を行うＣＰＵ２６が本発明の「通話手段」に相当する。図１のディスプレイ１４が本発明の「表示手段」に相当する。第一画像記憶領域２５１を備えたフラッシュメモリ２５が本発明の「第一記憶手段」に相当する。図１３のＳ１２３〜Ｓ１２９の処理を行うＣＰＵ２６が本発明の「第一表示制御手段」に相当する。図１０のＳ４７、Ｓ４９、Ｓ５１の処理を行うＣＰＵ２６が本発明の「情報取得手段」に相当する。第二画像記憶領域２５３を備えたフラッシュメモリ２５が本発明の「第二記憶手段」に相当する。図１３のＳ１３１〜Ｓ１４３の処理を行うＣＰＵ２６が本発明の「第二表示制御手段」に相当する。図９のＳ３７の処理を行うＣＰＵ２６が本発明の「料金算出手段」に相当する。図９のＳ３９の処理を行うＣＰＵ２６が本発明の「残量特定手段」に相当する。
【０１２７】
図１２のＳ９５の処理を行うＣＰＵ２６が本発明の「第一撮影手段」に相当し、Ｓ９７の処理を行うＣＰＵ２６が本発明の「視線特定手段」に相当し、Ｓ９９の処理を行うＣＰＵ２６が本発明の「視認判断手段」に相当する。図１２のＳ９３の処理を行うＣＰＵ２６が本発明の「音声検出手段」に相当し、Ｓ１０３の処理を行うＣＰＵ２６が本発明の「第一時間計測手段」に相当する。図１の操作ボタン１５が本発明の「入力手段」に相当する。図１２のＳ１０７の処理を行うＣＰＵ２６が本発明の「第二時間計測手段」に相当する。「表示時間」「待機時間」「表示回数」に有効な値が記憶されていない情報に基づき、図１３のＳ１３１〜Ｓ１３９の処理を行うＣＰＵ２６が本発明の「第三表示制御手段」「第四表示制御手段」に相当する。
【０１２８】
図１１のＳ６１の処理を行うＣＰＵ２６が本発明の「第二撮影手段」に相当し、Ｓ７１の処理を行うＣＰＵ２６が本発明の「第一ユーザ特定手段」に相当し、Ｓ６５の処理を行うＣＰＵ２６が本発明の「音声取得手段」に相当し、Ｓ７３の処理を行うＣＰＵ２６が本発明の「第二ユーザ特定手段」に相当する。「画像Ｘ」が記憶される第二画像記憶領域２５３を備えたフラッシュメモリ２５が本発明の「第三記憶手段」に相当する。
【０１２９】
図９のＳ３０の処理が本発明の「通話ステップ」に相当する。図１３のＳ１２３〜Ｓ１２９の処理が本発明の「第一表示制御ステップ」に相当する。図１０のＳ４７、Ｓ４９、Ｓ５１の処理が本発明の「情報取得ステップ」に相当する。図１３のＳ１３１〜Ｓ１４３の処理が本発明の「第二表示制御ステップ」に相当する。
【０１３０】
なお、本発明は上記実施の形態に限定されるものではなく、種々の変更が可能である。上述の実施の形態では、通話端末装置１には通話端末子機２が附属されていたが、本発明はこの構成に限定されない。通話端末装置１のみの構成であってもよい。
【０１３１】
上述の実施の形態では、通話料金と電池残量とが閾値と比較され、必要に応じて第二画像を表示させていたが、本発明はこの構成に限定されない。従って、通話端末装置１に例えばＡＣ１００Ｖ電源が接続されている場合には、電池残量は通知対象外としてもかまわない。
【０１３２】
上述の実施の形態では、第二画像をディスプレイ１４に表示させる場合に、異なる第二画像が順次選択され表示されていた。しかしながら本発明はこの構成に限定されず、例えば、第一閾値及び第二閾値の其々に対応付けられた一の第二画像を所定回数繰り返し表示させてもかまわない。
【符号の説明】
【０１３３】
１ 通話端末装置
１１ マイク
１２ スピーカ
１３ カメラ
１４ ディスプレイ
１５ 操作ボタン
１６ 電池
２５ フラッシュメモリ
２６ ＣＰＵ
【特許請求の範囲】
【請求項１】
他の通話端末装置との通話を行う通話手段と、
画像データが表示される表示手段と、
複数の前記画像データが記憶される第一記憶手段と、
前記通話手段によって前記他の通話端末装置との通話が行われている場合に、前記第一記憶手段に記憶された前記画像データである第一画像データを所定の周期で順次切り替えながら前記表示手段に表示させる制御を行う第一表示制御手段と、
前記通話端末装置の状態を示す情報である状態情報を取得する情報取得手段と、
前記情報取得手段によって取得される前記状態情報に関連付けられた画像データである第二画像データが記憶される第二記憶手段と、
前記情報取得手段によって前記状態情報が取得された場合に、前記第一表示制御手段によって切り替えて表示される一の前記第一画像データと他の前記第一画像データとの間に、前記状態情報に関連付けられた前記第二画像データであって前記第二記憶手段に記憶された前記第二画像データを所定時間表示させる制御を行う第二表示制御手段と
を備えたことを特徴とする通話端末装置。
【請求項２】
前記通話手段によって前記他の通話端末装置との通話が行われている場合の通話時間に基づいて、通話中の通話により発生する通話料金を算出する料金算出手段、又は、前記通話端末装置を駆動する電池の電圧に基づいて、前記電池の残量を特定する残量特定手段のうち少なくとも一方を備え、
前記情報取得手段は、
前記料金算出手段によって前記通話料金が算出された場合であって、前記通話料金の値が、第一閾値記憶手段に記憶された所定の閾値である第一閾値以上である場合に、算出された前記通話料金を前記状態情報として取得し、
前記残量特定手段によって前記残量が特定された場合であって、前記残量の値が、第二閾値記憶手段に記憶された所定の閾値である第二閾値以下である場合に、特定された前記残量を前記状態情報として取得することを特徴とする請求項１に記載の通話端末装置。
【請求項３】
前記通話端末装置のユーザを撮影する第一撮影手段と、
前記第一撮影手段によって撮影された撮影データに基づき、前記ユーザの視線方向を特定する視線特定手段と、
前記視線特定手段によって特定された前記ユーザの視線方向から、前記ユーザが前記表示手段を視認しているかを判断する視認判断手段と
を備え、
前記第二表示制御手段は、
前記視認判断手段において前記ユーザが前記表示手段を視認していると判断された場合に、前記第二画像データを表示させることを特徴とする請求項１又は２に記載の通話端末装置。
【請求項４】
前記通話手段によって前記他の通話端末装置と通話が行われている場合の通話音声を検出する音声検出手段と、
前記音声検出手段において前記通話音声が連続して検出されない場合に、検出されない状態となってからの経過時間を計測する第一時間計測手段と
を備え、
前記第二表示制御手段は、
前記第一時間計測手段によって計測された前記経過時間の値が、第三閾値記憶手段に記憶された所定の閾値である第三閾値以上であった場合に、前記第二画像データを表示させることを特徴とする請求項１又は２に記載の通話端末装置。
【請求項５】
情報が入力される入力手段を備え、
前記第二表示制御手段は、
前記入力手段によって前記情報が入力された場合に、前記第二画像データを表示させることを特徴とする請求項１又は２に記載の通話端末装置。
【請求項６】
前記情報取得手段が前記状態情報を取得してからの経過時間を計測する第二時間計測手段を備え、
前記第二表示制御手段は、
前記第二時間計測手段によって計測された前記経過時間の値が、第四閾値記憶手段に記憶された所定の閾値である第四閾値以上となった場合に、前記第二画像データを表示させることを特徴とする請求項１又は２に記載の通話端末装置。
【請求項７】
前記料金算出手段によって前記通話料金が算出された場合であって、前記通話料金の値が、第五閾値記憶手段に記憶された所定の閾値である第五閾値以上である場合に、前記通話料金に関連付けられた前記第二画像データを継続して前記表示手段に表示させる制御を行う第三表示制御手段を備えたことを特徴とする請求項２に記載の通話端末装置。
【請求項８】
前記残量特定手段によって前記残量が特定された場合であって、前記残量の値が、第六閾値記憶手段に記憶された所定の閾値である第六閾値以下である場合に、前記残量に関連付けられた前記第二画像データを継続して前記表示手段に表示させる制御を行う第四表示制御手段を備えたことを特徴とする請求項２に記載の通話端末装置。
【請求項９】
前記第二画像データは、前記ユーザを特定するユーザ特定情報に対応付けられて前記第二記憶手段に記憶されており、
前記通話端末装置のユーザを撮影する第二撮影手段と、
前記第二撮影手段によって撮影された撮影データに基づいて、前記ユーザを特定する第一ユーザ特定手段と
を備え、
前記第二表示制御手段は、
前記第一ユーザ特定手段によって特定された前記ユーザのユーザ特定情報に対応付けられた前記第二画像データを表示させることを特徴とする請求項１乃至８のいずれかに記載の通話端末装置。
【請求項１０】
前記第二画像データは、前記ユーザを特定するユーザ特定情報に対応付けられて前記第二記憶手段に記憶されており、
前記通話端末装置のユーザの音声を取得する音声取得手段と、
前記音声取得手段によって取得された前記音声に基づいて、前記ユーザを特定する第二ユーザ特定手段と
を備え、
前記第二表示制御手段は、
前記第二ユーザ特定手段によって特定された前記ユーザのユーザ特定情報に対応付けられた前記第二画像データを表示させることを特徴とする請求項１乃至８のいずれかに記載の通話端末装置。
【請求項１１】
前記通話料金と前記残量との両方に関連付けられた画像データである第三画像データが記憶される第三記憶手段を備え、
前記情報取得手段は、
前記料金算出手段及び前記残量特定手段の両方を備えている場合であって、前記料金算出手段によって算出された前記通話料金の値が前記第一閾値以上であり、且つ、前記残量特定手段によって特定された前記残量が前記第二閾値以下である場合に、前記通話料金と前記残量とを前記状態情報として取得し、
前記第二表示制御手段は、
前記情報取得手段によって前記通話料金と前記残量とが前記状態情報として取得された場合には、前記通話料金と前記残量との両方に関連付けられた前記第三画像データであって前記第三記憶手段に記憶されている前記第三画像データを表示させることを特徴とする請求項２に記載の通話端末装置。
【請求項１２】
前記第一閾値記憶手段には、前記第二画像データを表示させる回数の情報である第一表示回数と、前記第二画像データを表示させる周期である第一表示周期とが、前記第一閾値に対応付けられて記憶されており、
前記第二表示制御手段は、
前記情報取得手段において、前記通話料金が前記第一閾値以上であるとして前記状態情報が取得された場合には、前記第二画像データを前記第一表示周期で前記第一表示回数分繰り返し表示させる制御を行うことを特徴とする請求項２に記載の通話端末装置。
【請求項１３】
前記第二閾値記憶手段には、前記第二画像データを表示させる回数の情報である第二表示回数と、前記第二画像データを表示させる周期である第二表示周期とが、前記第二閾値に対応付けられて記憶されており、
前記第二表示制御手段は、
前記情報取得手段において、前記残量が前記第二閾値以下であるとして前記状態情報が取得された場合には、前記第二画像データを前記第二表示周期で前記第二表示回数分繰り返し表示させる制御を行うことを特徴とする請求項２に記載の通話端末装置。
【請求項１４】
他の通話端末装置との通話を行う通話ステップと、
前記通話ステップによって前記他の通話端末装置との通話が行われている場合に、第一記憶手段に記憶された画像データである第一画像データを所定の周期で順次切り替えながら表示手段に表示させる制御を行う第一表示制御ステップと、
前記通話端末装置の状態を示す情報である状態情報を取得する情報取得ステップと、
前記情報取得ステップによって前記状態情報が取得された場合に、前記第一表示制御ステップによって切り替えて表示される一の前記第一画像データと他の前記第一画像データとの間に、前記状態情報に関連付けられた画像データであって第二記憶手段に記憶された画像データである第二画像データを所定時間表示させる制御を行う第二表示制御ステップと
を備えたことを特徴とする表示制御方法。
【請求項１５】
請求項１乃至１３のいずれかに記載の通話端末装置の各処理手段としてコンピュータを機能させるための表示制御プログラム。
【請求項１】
他の通話端末装置との通話を行う通話手段と、
画像データが表示される表示手段と、
複数の前記画像データが記憶される第一記憶手段と、
前記通話手段によって前記他の通話端末装置との通話が行われている場合に、前記第一記憶手段に記憶された前記画像データである第一画像データを所定の周期で順次切り替えながら前記表示手段に表示させる制御を行う第一表示制御手段と、
前記通話端末装置の状態を示す情報である状態情報を取得する情報取得手段と、
前記情報取得手段によって取得される前記状態情報に関連付けられた画像データである第二画像データが記憶される第二記憶手段と、
前記情報取得手段によって前記状態情報が取得された場合に、前記第一表示制御手段によって切り替えて表示される一の前記第一画像データと他の前記第一画像データとの間に、前記状態情報に関連付けられた前記第二画像データであって前記第二記憶手段に記憶された前記第二画像データを所定時間表示させる制御を行う第二表示制御手段と
を備えたことを特徴とする通話端末装置。
【請求項２】
前記通話手段によって前記他の通話端末装置との通話が行われている場合の通話時間に基づいて、通話中の通話により発生する通話料金を算出する料金算出手段、又は、前記通話端末装置を駆動する電池の電圧に基づいて、前記電池の残量を特定する残量特定手段のうち少なくとも一方を備え、
前記情報取得手段は、
前記料金算出手段によって前記通話料金が算出された場合であって、前記通話料金の値が、第一閾値記憶手段に記憶された所定の閾値である第一閾値以上である場合に、算出された前記通話料金を前記状態情報として取得し、
前記残量特定手段によって前記残量が特定された場合であって、前記残量の値が、第二閾値記憶手段に記憶された所定の閾値である第二閾値以下である場合に、特定された前記残量を前記状態情報として取得することを特徴とする請求項１に記載の通話端末装置。
【請求項３】
前記通話端末装置のユーザを撮影する第一撮影手段と、
前記第一撮影手段によって撮影された撮影データに基づき、前記ユーザの視線方向を特定する視線特定手段と、
前記視線特定手段によって特定された前記ユーザの視線方向から、前記ユーザが前記表示手段を視認しているかを判断する視認判断手段と
を備え、
前記第二表示制御手段は、
前記視認判断手段において前記ユーザが前記表示手段を視認していると判断された場合に、前記第二画像データを表示させることを特徴とする請求項１又は２に記載の通話端末装置。
【請求項４】
前記通話手段によって前記他の通話端末装置と通話が行われている場合の通話音声を検出する音声検出手段と、
前記音声検出手段において前記通話音声が連続して検出されない場合に、検出されない状態となってからの経過時間を計測する第一時間計測手段と
を備え、
前記第二表示制御手段は、
前記第一時間計測手段によって計測された前記経過時間の値が、第三閾値記憶手段に記憶された所定の閾値である第三閾値以上であった場合に、前記第二画像データを表示させることを特徴とする請求項１又は２に記載の通話端末装置。
【請求項５】
情報が入力される入力手段を備え、
前記第二表示制御手段は、
前記入力手段によって前記情報が入力された場合に、前記第二画像データを表示させることを特徴とする請求項１又は２に記載の通話端末装置。
【請求項６】
前記情報取得手段が前記状態情報を取得してからの経過時間を計測する第二時間計測手段を備え、
前記第二表示制御手段は、
前記第二時間計測手段によって計測された前記経過時間の値が、第四閾値記憶手段に記憶された所定の閾値である第四閾値以上となった場合に、前記第二画像データを表示させることを特徴とする請求項１又は２に記載の通話端末装置。
【請求項７】
前記料金算出手段によって前記通話料金が算出された場合であって、前記通話料金の値が、第五閾値記憶手段に記憶された所定の閾値である第五閾値以上である場合に、前記通話料金に関連付けられた前記第二画像データを継続して前記表示手段に表示させる制御を行う第三表示制御手段を備えたことを特徴とする請求項２に記載の通話端末装置。
【請求項８】
前記残量特定手段によって前記残量が特定された場合であって、前記残量の値が、第六閾値記憶手段に記憶された所定の閾値である第六閾値以下である場合に、前記残量に関連付けられた前記第二画像データを継続して前記表示手段に表示させる制御を行う第四表示制御手段を備えたことを特徴とする請求項２に記載の通話端末装置。
【請求項９】
前記第二画像データは、前記ユーザを特定するユーザ特定情報に対応付けられて前記第二記憶手段に記憶されており、
前記通話端末装置のユーザを撮影する第二撮影手段と、
前記第二撮影手段によって撮影された撮影データに基づいて、前記ユーザを特定する第一ユーザ特定手段と
を備え、
前記第二表示制御手段は、
前記第一ユーザ特定手段によって特定された前記ユーザのユーザ特定情報に対応付けられた前記第二画像データを表示させることを特徴とする請求項１乃至８のいずれかに記載の通話端末装置。
【請求項１０】
前記第二画像データは、前記ユーザを特定するユーザ特定情報に対応付けられて前記第二記憶手段に記憶されており、
前記通話端末装置のユーザの音声を取得する音声取得手段と、
前記音声取得手段によって取得された前記音声に基づいて、前記ユーザを特定する第二ユーザ特定手段と
を備え、
前記第二表示制御手段は、
前記第二ユーザ特定手段によって特定された前記ユーザのユーザ特定情報に対応付けられた前記第二画像データを表示させることを特徴とする請求項１乃至８のいずれかに記載の通話端末装置。
【請求項１１】
前記通話料金と前記残量との両方に関連付けられた画像データである第三画像データが記憶される第三記憶手段を備え、
前記情報取得手段は、
前記料金算出手段及び前記残量特定手段の両方を備えている場合であって、前記料金算出手段によって算出された前記通話料金の値が前記第一閾値以上であり、且つ、前記残量特定手段によって特定された前記残量が前記第二閾値以下である場合に、前記通話料金と前記残量とを前記状態情報として取得し、
前記第二表示制御手段は、
前記情報取得手段によって前記通話料金と前記残量とが前記状態情報として取得された場合には、前記通話料金と前記残量との両方に関連付けられた前記第三画像データであって前記第三記憶手段に記憶されている前記第三画像データを表示させることを特徴とする請求項２に記載の通話端末装置。
【請求項１２】
前記第一閾値記憶手段には、前記第二画像データを表示させる回数の情報である第一表示回数と、前記第二画像データを表示させる周期である第一表示周期とが、前記第一閾値に対応付けられて記憶されており、
前記第二表示制御手段は、
前記情報取得手段において、前記通話料金が前記第一閾値以上であるとして前記状態情報が取得された場合には、前記第二画像データを前記第一表示周期で前記第一表示回数分繰り返し表示させる制御を行うことを特徴とする請求項２に記載の通話端末装置。
【請求項１３】
前記第二閾値記憶手段には、前記第二画像データを表示させる回数の情報である第二表示回数と、前記第二画像データを表示させる周期である第二表示周期とが、前記第二閾値に対応付けられて記憶されており、
前記第二表示制御手段は、
前記情報取得手段において、前記残量が前記第二閾値以下であるとして前記状態情報が取得された場合には、前記第二画像データを前記第二表示周期で前記第二表示回数分繰り返し表示させる制御を行うことを特徴とする請求項２に記載の通話端末装置。
【請求項１４】
他の通話端末装置との通話を行う通話ステップと、
前記通話ステップによって前記他の通話端末装置との通話が行われている場合に、第一記憶手段に記憶された画像データである第一画像データを所定の周期で順次切り替えながら表示手段に表示させる制御を行う第一表示制御ステップと、
前記通話端末装置の状態を示す情報である状態情報を取得する情報取得ステップと、
前記情報取得ステップによって前記状態情報が取得された場合に、前記第一表示制御ステップによって切り替えて表示される一の前記第一画像データと他の前記第一画像データとの間に、前記状態情報に関連付けられた画像データであって第二記憶手段に記憶された画像データである第二画像データを所定時間表示させる制御を行う第二表示制御ステップと
を備えたことを特徴とする表示制御方法。
【請求項１５】
請求項１乃至１３のいずれかに記載の通話端末装置の各処理手段としてコンピュータを機能させるための表示制御プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【公開番号】特開２０１０−２４５８０１（Ｐ２０１０−２４５８０１Ａ）
【公開日】平成２２年１０月２８日（２０１０．１０．２８）
【国際特許分類】
【出願番号】特願２００９−９１７７２（Ｐ２００９−９１７７２）
【出願日】平成２１年４月６日（２００９．４．６）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
【公開日】平成２２年１０月２８日（２０１０．１０．２８）
【国際特許分類】
【出願日】平成２１年４月６日（２００９．４．６）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
[ Back to top ]