説明

制御装置、移動通信システム及び通信端末

【課題】娯楽性と安全性の下で、ユーザどうしのコミュニケーションを促進させることにある。
【解決手段】通信端末の間でテレビ電話が開始されたときからの経過時間を計測し、その経過時間に応じて、撮影画像又はその撮影画像の代替となるアバタ画像のいずれかをそれぞれの通信端末に表示させる。例えばお互いよく知らない相手と通話を行う場合、最初はお互いのプライバシーを保護するためにアバタ画像を用い、お互いの会話が弾んで一定期間以上の通話がなされると、アバタ画像から撮影画像に切り替える。また、例えば有名人とテレビ電話を行うことができるサービスを提供する場合、ある一定期間まではその有名人の撮影画像を提供するが、一定期間が経過すると、撮影画像からアバタ画像へと切り替えるようにしてもよい。

【発明の詳細な説明】
【技術分野】
【0001】
本発明は、文字または音声によるメッセージを画像とともに送受信することにより、ユーザ間でコミュニケーションを行うための技術に関する。
【背景技術】
【0002】
携帯電話機は、近年の高機能化に伴い、音声のみによらないコミュニケーションが可能となっている。例えば、付属のカメラで撮影した話者の顔などの画像を音声とともに送受信する、いわゆるテレビ電話機能を有する携帯電話機が普及している。また、音声通話中に所定のキャラクタなどの画像を表示させる携帯電話機も知られている(例えば特許文献1及び2参照)。このような技術を用いることにより、音声のみを用いた場合よりも、より親密で娯楽性の高いコミュニケーションを行うことが可能となる。
【特許文献1】特表2004−537231号公報
【特許文献2】特開2004−297350号公報
【発明の開示】
【発明が解決しようとする課題】
【0003】
ところで、素性があまり明らかでない相手とテレビ電話機能を用いてコミュニケーションを行う場合には、自身の顔などが何の制限もなく知られる可能性があるので、従来のテレビ電話機能だけではプライバシーを十分に保護できないおそれがある。一方、特許文献1,2のように、通話中にキャラクタなどの画像を表示し続けるだけでは、話者同士の親密感が高まらないから、コミュニケーションがあまり促進されないという点が懸念される。
【0004】
本発明はかかる事情に鑑みてなされたものであり、その目的は、話者を撮影した画像の利用を制限しつつも、話者どうしのコミュニケーションを促進させることにある。
【課題を解決するための手段】
【0005】
上述した目的を達成するために、本発明は、画像及びメッセージを送受信して画像を表示する第1の通信端末と、画像及びメッセージを送受信して画像を表示する第2の通信端末とが通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測手段と、前記第1の通信端末又は前記第2の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像の代替となる代替画像を、前記計測手段によって計測された経過時間に応じて表示させる制御手段とを備えることを特徴とする制御装置を提供する。
【0006】
本発明の好ましい態様において、前記制御手段は、前記計測手段によって計測された経過時間が閾値に至るまでは、前記一方の通信端末に前記代替画像を表示させ、前記計測手段によって計測された経過時間が前記閾値を超えると、前記一方の通信端末に前記撮影画像を表示させる。
この態様において、前記第1の通信端末又は前記第2の通信端末から、画像及びメッセージの送受信を開始する要求を取得する取得手段と、前記第1の通信端末及び前記第2の通信端末の間の前記画像又は前記メッセージの送受信の履歴を記憶する履歴記憶手段とを備え、前記制御手段は、前記計測手段によって計測された経過時間が前記閾値に至るまでの期間であっても、前記取得手段によって取得された要求が、前記履歴記憶手段に記憶されている前記第1の通信端末及び前記第2の通信端末の間の画像及びメッセージの送受信を開始する要求である場合には、前記一方の通信端末に前記撮影画像を表示させるようにしてもよい。
【0007】
また、本発明の別の好ましい態様において、前記制御手段は、前記計測手段によって計測された経過時間が閾値に至るまでは、前記一方の通信端末に前記撮影画像を表示させ、前記計測手段によって計測された経過時間が閾値を超えると、前記一方の通信端末に前記代替画像を表示させる。
この場合、前記第1の通信端末又は前記第2の通信端末から、画像及びメッセージの送受信を開始する要求を取得する取得手段と、前記第1の通信端末及び前記第2の通信端末の間の前記画像又は前記メッセージの送受信の履歴を記憶する履歴記憶手段とを備え、前記制御手段は、前記計測手段によって計測された経過時間が閾値を超えたとしても、前記取得手段によって取得された要求が、前記履歴記憶手段に記憶されている前記第1の通信端末及び前記第2の通信端末の間の画像及びメッセージの送受信を開始する要求である場合には、前記一方の通信端末に前記撮影画像を表示させるようにしてもよい。
【0008】
また、本発明の別の好ましい態様において、前記第1の通信端末及び前記第2の通信端末がそれぞれ、自端末からの画像又はメッセージの送信先である相手方の通信端末によって表示される前記代替画像を記憶しており、前記制御手段は、前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、前記一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末が記憶している前記代替画像と前記メッセージとを送信するように、当該他方の通信端末に指示する。
【0009】
また、本発明の別の好ましい態様において、前記第1の通信端末及び前記第2の通信端末がそれぞれ、自端末の記憶手段に、自端末からの画像又はメッセージの送信先である相手方の撮影画像の代替として表示し得る複数の代替画像を記憶しており、前記制御手段は、前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、前記の通信端末に前記代替画像を表示させる場合には、他方の通信端末によって指定された代替画像を前記一方の通信端末に通知して、当該一方の通信端末の前記記憶手段に記憶されている複数の代替画像のうち、通知した代替画像を表示するように当該一方の通信端末に指示する。
【0010】
また、本発明の別の好ましい態様において、前記代替画像を記憶する代替画像記憶手段を備え、前記制御手段は、前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、前記一方の通信端末に前記代替画像を表示させる場合には、前記代替画像記憶手段から前記代替画像を読み出して前記一方の通信端末に送信する。
この態様において、前記代替画像記憶手段は、各々の前記第1の通信端末又は前記第2の通信端末に割り当てられた識別子と、それぞれ異なる前記代替画像とを対応付けて記憶しており、前記制御手段は、前記の通信端末に前記代替画像を表示させる場合には、他方の通信端末に割り当てられた識別子に対応付けられて記憶されている代替画像を、前記代替画像記憶手段から読み出し、前記一方の通信端末に送信するようにしてもよい。
【0011】
また、本発明は、画像及びメッセージを送受信して画像を表示する第1の通信端末と、画像及びメッセージを送受信して画像を表示する第2の通信端末とが通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測装置と、前記第1の通信端末又は前記第2の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像の代替となる代替画像を、前記計測装置によって計測された経過時間に応じて表示させる制御装置とを備えることを特徴とする移動通信システムを提供する。
【0012】
また、本発明は、撮影手段により撮影された撮影画像を取得する取得手段と、前記撮影画像の代替となる代替画像を記憶する記憶手段と、通信先の通信端末との間で画像及びメッセージを送受信する送受信手段と、前記送受信手段によって受信された画像を表示する表示手段と、他の通信端末と通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測手段と、前記計測手段によって計測された経過時間に応じて、前記取得手段により取得された撮影画像又は前記記憶手段に記憶された代替画像のうちのいずれかを、前記送受信手段により送信される画像として選択する選択手段とを備えることを特徴とする通信端末を提供する。
【0013】
また、本発明は、撮影手段により撮影された撮影画像を取得する取得手段と、通信先の通信端末との間で、画像又はデータと、メッセージとを送受信する送受信手段と、前記送受信手段によって受信された画像を表示する表示手段と、他の通信端末と通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測手段と、前記計測手段によって計測された経過時間に応じて、前記取得手段により取得された撮影画像又は当該撮影画像の代替となる代替画像を指定する指定データのうちのいずれかを、前記送受信手段により送信される画像又はデータとして選択する選択手段とを備えることを特徴とする通信端末を提供する。
本発明の好ましい態様において、複数の前記代替画像を記憶する記憶手段を備え、前記表示手段は、前記送受信手段によって受信された画像に代えて、前記記憶手段に記憶されている代替画像のうち、前記送受信手段によって受信した指定データによって指定される代替画像を表示するようにしてもよい。
【発明の効果】
【0014】
本発明によれば、一方の通信端末に、他方の通信端末から送信されてくる撮影画像、又は当該撮影画像の代替となる代替画像を、計測された経過時間に応じて表示させることで、通信端末の話者を撮影した画像の利用を制限しつつも、話者どうしのコミュニケーションを促進させることができる。
【発明を実施するための最良の形態】
【0015】
次に、本発明の実施の形態について、図面を参照しながら説明する。
以下の説明においては、画像を伴う音声通話のことを「テレビ電話」という。
「画像」という用語には、静止画像と動画像の双方の意味が含まれる。
「撮影画像」とは、撮影により得られた画像のことであり、例えば通信端末に付属のカメラで撮影したユーザの顔の画像などが典型的である。
「アバタ」とは、通信端末のユーザを象徴的に表現したものである。このアバタは、例えばインターネット上のチャットや掲示板などの双方向のコミュニケーションサービスにおいて比較的よく用いられているものである。「アバタ画像」とは、アバタを表す画像であり、例えば人間の顔や姿を模した画像のほか、動物やロボット或いは仮想的な生命体の画像などを含む。
【0016】
本実施形態では、2つの通信端末が互いに通信接続されてテレビ電話が開始されたときからの経過時間を計測し、その経過時間に応じて、撮影画像又はその撮影画像の代替となるアバタ画像のいずれかをそれぞれの通信端末に表示させる。例えばお互いよく知らない相手と通話を行う場合、最初はお互いのプライバシーを保護するためにアバタ画像を用いるが、お互いの会話が弾んで一定期間以上の通話がなされると、アバタ画像から撮影画像に切り替える。つまり、経過時間が予め決められた一定時間に至るまでは、アバタ画像を表示させ、経過時間がその一定時間を超えると、撮影画像を表示させるのである。ユーザは、会話を長く続けることで相手の顔を見ることができるようになるので、会話そのものを長引かせようと、話題や話術を工夫したりする。この点でゲーム性や娯楽性が増して、コミュニケーションそのものが促進されることになる。
【0017】
また、例えば有名人とテレビ電話を行うことができるサービスをユーザに提供する場合、ある一定期間まではその有名人の撮影画像をユーザの通信端末に提供するが、一定期間が経過すると、通信端末に表示される画像を撮影画像からアバタ画像へと切り替えるようにしてもよい。つまり、経過時間が予め決められた一定時間に至るまでは、撮影画像を表示させ、経過時間が一定時間を超えると、アバタ画像を表示させるのである。ユーザは、撮影画像が表示されている間に、話題を盛り上げようと、話題や話術を工夫したりする。この点でゲーム性や娯楽性が増して、コミュニケーションそのものが促進されることになる。
【0018】
[構成]
図1は、本発明の一実施形態であるシステムの全体構成を概略的に示す図である。同図に示すように、このシステムは、移動通信端末10A、10Bと、移動通信網20と、制御装置30とを備えている。なお、このシステムにおいて移動通信端末は多数存在し得るが、図1では、通信元と通信先の移動通信端末のみ示す。以下では、移動通信端末10Aを通信元(すなわち発呼する側)の移動通信端末とし、移動通信端末10Bを通信先(すなわち着呼する側)の移動通信端末とするが、両者を特に区別する必要がない場合には、これらを総称して「移動通信端末10」という。
【0019】
移動通信網20は、移動通信端末10に移動通信サービスを提供するためのネットワークシステムであり、キャリアと呼ばれる通信事業者によって管理される。移動通信網20は、図示せぬ基地局、交換局及びサービス制御局などのノードと、これらノード間を接続する通信線とを備えており、所定のプロトコルに準拠して音声データ、映像データ、制御データなどを多重化して伝送する。移動通信網20が準拠するプロトコルとしては、例えば、3GPP(3rd Generation Partnership Project)により規格化された3G−324Mなどが好適である。サービス制御局は、移動通信端末10の位置登録情報や、移動通信端末10のユーザの契約や課金に関する情報や、各移動通信端末10の電話番号などを記憶している。制御装置30は、移動通信網20のサービス制御局や交換局などのノードに接続されている。
【0020】
図2は、制御装置30の構成を示すブロック図である。同図に示すように、制御装置30は、制御部31と、記憶部33と、通信部32とを備える。制御部31は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)などを備え、CPUがRAMをワークエリアとして用いてROMや記憶部33に記憶されたプログラムを実行することによって、制御装置30の各部の動作を制御する。記憶部33は、HDD(Hard Disk Drive)等の記憶装置を備える。記憶部33は、制御部31が実行するプログラムに加えて、移動通信端末10間の通信を実現するための各種データを記憶する。通信部32は、移動通信網20を介して通信を行うためのインタフェース装置である。
【0021】
ここで、記憶部33が記憶するデータを説明する。
記憶部33は、地図ファイルと、複数のアバタの位置データと、アバタID変換テーブルと、通話履歴のほか、アバタ画像データなどの後述する処理を行うための各種のデータを記憶している。地図ファイルは、仮想的な3次元空間(以下「仮想空間」という。)を表すデータの集合であり、オブジェクトデータと、位置情報と、パス情報とを含む。オブジェクトデータは、仮想空間を構成する建造物や道路などのオブジェクトを表すデータである。オブジェクトデータは、それぞれのオブジェクトの形状や色彩、すなわち外観を定義するデータであり、いわゆるポリゴンデータである。このオブジェクトは、静的なオブジェクト、すなわち仮想空間における位置が固定されたオブジェクトのみであって、アバタのような動的なオブジェクトは含まれない。位置情報は、2次元または3次元の座標系に基づいて仮想空間内の位置を表すものである。オブジェクトデータにより表されるオブジェクトのそれぞれは、位置情報と関連付けられている。パス情報は、仮想空間内においてアバタの通路(path)となり得る場所を定義するデータである。パス情報が定義された場所に該当するのは、例えば道路などである。
【0022】
アバタの位置データとは、複数の移動通信端末10から制御装置30に送信されてくるアバタの位置データがそれぞれ記憶されたものである。アバタID変換テーブルとは、図3に示すように、それぞれのアバタに割り当てられたアバタIDと、そのアバタに対応する移動通信端末10の電話番号とが対応付けられて記述されたものである。通話履歴とは、移動通信端末10どうしの通話(画像又は音声メッセージの送受信)の履歴であり、通信元の移動通信端末の電話番号と、通信先の移動通信端末、その通話がなされた時刻などが含まれている。
【0023】
次に、移動通信端末10について説明する。
移動通信端末10は、移動通信網20を介して他の移動通信端末10と通信を行うことが可能な通信端末であり、いわゆる携帯電話機である。この移動通信端末10は、テレビ電話機能を有しており、相手方の移動通信端末と画像及び音声メッセージを送受信しつつ、受信した画像を表示し得るように構成されている。さらに、移動通信端末10は、制御装置30により提供される仮想空間を表示し、ユーザを表すアバタをこの仮想空間内で移動させることによって、仮想空間内の他のアバタを介して他のユーザとコミュニケーションを行い得るように構成されている。
【0024】
図4は、移動通信端末10の構成を示すブロック図である。
同図に示すように、移動通信端末10は、制御部11と、無線通信部12と、操作部13と、表示部14と、音声入出力部15と、撮影部16と、マルチメディア処理部17とを備える。制御部11は、CPU11a、ROM11b、RAM11c及びEEPROM(Electronically Erasable and Programmable ROM)11dを備え、CPU11aがRAM11cをワークエリアとして用いてROM11bやEEPROM11dに記憶されたプログラムを実行し、これにより移動通信端末10の各部の動作を制御する。無線通信部12は、アンテナ12aを備え、移動通信網20とのデータの送受信を無線で行う。操作部13は、ボタン等の操作子を備え、ユーザの操作に応じた操作信号を制御部11に供給する。表示部14は、液晶パネルや液晶駆動回路を備えた表示装置であり、制御部11からの指示に応じて各種の情報を表示する。音声入出力部15は、マイク15a及びスピーカ15bを備え、音声信号の入力及び出力を行う。撮影部16は、いわゆるカメラの機能を有する。撮影部16は、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサ及び信号処理回路を備え、撮影した被写体を表す画像データを生成する。
【0025】
マルチメディア処理部17は、無線通信部12を介して送受信されるデータを処理するためのLSI(Large Scale Integration)を備え、音声及び画像の符号化・復号化処理や多重化処理、分離処理などを実行する。マルチメディア処理部17は、撮影部16により生成された画像データに基づいて動画像データを生成する。この動画像データのことを、以下では「撮影画像データ」という。音声信号の符号化・復号化にはAMR(Adaptive Multi-Rate)を用いればよいし、画像データの符号化・復号化にはMPEG(Moving Picture Experts Group)−4を用いればよい。
【0026】
ここで、操作部13が備える操作子について、図5を参照して説明する。操作部13は、同図に示すように、機能ボタンBsと、移動ボタンBu、Bd、Bl、Brと、確定ボタンBfと、ダイヤルボタンB1〜B0とを備える。機能ボタンBsは、表示部14の画面表示に応じた所定の機能が割り当てられるボタンである。機能ボタンBsに割り当てられる機能は、通信先を選択するための機能であるが、その詳細については後述する。移動ボタンBu、Bd、Bl、Brは、移動対象のオブジェクト(アバタまたはポインタ)を前後左右(または上下左右)に移動させるためのボタンである。確定ボタンBfは、表示部14に表示されたオブジェクトを選択したり、その後の処理の内容を確定させるためのボタンである。ダイヤルボタンB1〜B0は、文字や数字を入力させるためのボタンである。
【0027】
続いて、移動通信端末10が記憶するデータの内容を説明する。ROM11bは、予めいくつかのプログラムを記憶している。以下ではこれを「プリインストールプログラム」という。具体的には、プリインストールプログラムは、マルチタスクオペレーティングシステム(以下「マルチタスクOS」という。)、Java(登録商標)プラットフォーム及びネイティブアプリケーションの各プログラムである。これらのプログラムについて概説すると、まず、マルチタスクOSは、TSS(Time-Sharing System)による複数タスクの擬似的な並列実行を実現するために必要な仮想メモリ空間の割り当てなどの各種機能をサポートしたオペレーティングシステムである。Javaプラットフォームは、マルチタスクOSを搭載した携帯機器において後述するJava実行環境114を実現するためのコンフィギュレーションであるCDC(Connected Device Configuration)にしたがって記述されたプログラム群である。ネイティブアプリケーションは、通話や通信、カメラ撮影などといった移動通信端末10の基本的なサービスを実現するプログラムである。
【0028】
EEPROM11dは、Javaアプリケーションが記憶されるJavaアプリケーション格納領域を有する。Javaアプリケーションは、Java実行環境114の下における処理の手順自体を記述した実体プログラムとその実体プログラムの実行に伴って利用される画像ファイルや音声ファイルとを結合したJAR(Java Archive)ファイルと、そのJARファイルのインストールや起動、各種の属性を記述したADF(Application Descriptor File)とを有している。このJavaアプリケーションは、コンテンツプロバイダまたは通信事業者により作成されて、インターネットや移動通信網20に接続されたサーバ装置などに格納され、移動通信端末10からの要求に応じてそれらの制御装置から適宜ダウンロードされるようになっている。
【0029】
図6は、ROM11b及びEEPROM11dの各種プログラムの実行により移動通信端末10の制御部11に実現される各部の論理的構成を示す図である。同図に示すように、各種プログラムを実行する移動通信端末10には、通信アプリケーション112、カメラ撮影アプリケーション113及びJava実行環境114がOS111上に実現され、また、EEPROM11dには第1ストレージ115と第2ストレージ116とが確保される。通信アプリケーション112及びカメラ撮影アプリケーション113は、ROM11bのネイティブアプリケーションにより実現されるものであり、移動通信網20との通信の確立や撮影部16による画像の撮影などの機能をそれぞれ実現する。
【0030】
Java実行環境114は、ROM11bのJavaプラットフォームにより実現される。Java実行環境114は、クラスライブラリ117、JVM(Java Virtual Machine)118及びJAM(Java Application Manager)119からなる。クラスライブラリ117は、特定の機能を有するプログラムモジュール(クラス)群を1つのファイルに結合したものである。JVM118は、上述のCDCのために最適化されたJava実行環境であり、Javaアプリケーションとして提供されるバイトコードを解釈して実行する機能を有する。JAM119は、Javaアプリケーションのダウンロードやインストール、起動・終了などを管理する機能を有する。第1ストレージ115は、JAM119の管理の下にダウンロードされるJavaアプリケーション(JarファイルとADF)を格納する領域である。第2ストレージ116は、Javaアプリケーションの実行の際に生成されたデータをその終了後に格納しておくための領域であり、インストールされたJavaアプリケーション毎に個別の格納領域が割り当てられるようになっている。そして、あるJavaアプリケーションに割り当てられた格納領域のデータは、そのJavaアプリケーションが実行されている間のみ書き換え可能となっており、別のJavaアプリケーションが書き換えを行い得ないようになっている。
【0031】
Javaアプリケーションには、アバタの移動に応じて仮想空間を表示するとともに、ユーザの指示に応じて他の移動通信端末10と通話及び通信を行うためのアプリケーションが含まれる。このアプリケーションのことを、以下では「テレビ電話アプリ」という。
このテレビ電話アプリは、移動通信端末10にあらかじめ記憶されている。また、EEPROM11dには、テレビ電話アプリの実行の際に必要となるアバタを表す「アバタ画像データ」が含まれている。
【0032】
アバタ画像データを用いてテレビ電話を行う際には、制御部11は、EEPROM11dからアバタ画像データを読み出し、音声入出力部15に入力された音声メッセージと共に移動通信網20へと送信する。移動通信網20は、このアバタ画像データと音声メッセージとを通信先の移動通信端末10へと送信する。通信先の移動通信端末10においては、制御部11が、無線通信部12によって受信したアバタ画像データに基づいて、アバタ画像を表示部14に表示すると共に、受信した音声メッセージを音声入出力部15から出力する。図7(a)は、アバタ画像データが表すアバタ画像が通信先の移動通信端末10の表示部14に表示されている例を示す図である。
【0033】
一方、撮影画像データを用いてテレビ電話を行う際には、制御部11は、撮影部16による撮影によって得られた撮影画像データを、音声入出力部15に入力された音声メッセージと共に移動通信網20へと送信する。移動通信網20は、この撮影画像データと音声メッセージとを通信先の移動通信端末10へと送信する。通信先の移動通信端末10においては、制御部11が、無線通信部12によって受信した撮影画像データに基づいて、撮影画像を表示部14に表示すると共に、受信した音声メッセージを音声入出力部15から出力する。図7(b)は、撮影部16によって撮影された移動通信端末10のユーザの顔が、通信先の移動通信端末10の表示部14に表示されている例を示す図である。
【0034】
[動作]
続いて、上記構成の移動通信システムにおける移動通信端末10と制御装置30の動作を説明する。ここでは、まず、移動通信端末10が上述したテレビ電話アプリを起動したときに実行する処理について説明し、その後、移動通信端末10Aと移動通信端末10Bの間で音声通話を行うときに移動通信端末10A、10B及び制御装置30のそれぞれが実行する処理について説明する。
【0035】
図8は、移動通信端末10Aがテレビ電話アプリを起動したときに実行する処理を示すフローチャートである。ユーザによる所定の操作を契機としてテレビ電話アプリが起動されると、移動通信端末10Aの制御部11は、仮想空間内の所定の位置を示す位置データと、自端末の電話番号を表すデータとを制御装置30に送信する(ステップSa1)。この位置データが示す位置は任意であるが、例えば、あらかじめ決められた位置であってもよいし、以前にテレビ電話アプリの実行が終了したときのアバタの位置であってもよい。
【0036】
位置データを受信した制御装置30においては、制御部31がこれを取得するとともに、記憶部33に記憶された地図ファイルを参照し、取得した位置データに応じたオブジェクトデータを特定する。具体的には、制御部31は、取得した位置データが示す位置から所定の範囲内にあるオブジェクトデータを特定する。このようにしてオブジェクトデータを特定したら、制御部31は、このオブジェクトデータと、それぞれのオブジェクトデータの位置データを移動通信端末10Aに送信する。なお、このとき、上述した所定の範囲内に他のユーザのアバタが存在する場合には、制御部31は、そのアバタに割り当てられたアバタIDと、そのアバタの位置を示す位置データと、このアバタを表すアバタ画像データとを併せてアバタ関連情報として送信する。移動通信端末10Aの制御部11は、制御装置30からオブジェクトデータとアバタ関連情報とを取得し(ステップSa2)、これに基づいて表示部14に仮想空間を表す画像を表示させる(ステップSa3)。
【0037】
図9は、このとき表示部14が表示する画像を例示した図である。同図において、画像D0は、移動通信端末10Aのユーザを表すアバタ画像であり、移動通信端末10Aのユーザの操作に応じて仮想空間内を移動する。また、画像D1、D2及びD3は建造物を表しており、この画像D1、D2及びD3に挟まれた領域P1が道路を表している。画像D4は、移動通信端末10A以外の移動通信端末10Bのユーザを表すアバタ画像であり、移動通信端末10Bのユーザの操作に応じて仮想空間内を移動する。画像D5は機能ボタンBsに割り当てられた機能を表す画像である。
【0038】
この状態でユーザが移動ボタンBu、Bd、Bl、Brを押下すると、制御部11は、仮想空間におけるアバタの位置が変化するように、表示部14の表示を変化させる。例えば、図9に示した状態でユーザが移動ボタンBuを押下すると、制御部11は、オブジェクトデータに基づいて表示している画像D1,D2,D3,D4の表示位置を変化させた画面に表示部14の表示内容を更新することで、画像D0のアバタがあたかも前方に移動しているかのように見せる。
【0039】
また、この状態でユーザが機能ボタンBsを押下すると、制御部11はポインタを表示部14に表示させる。このポインタにより、ユーザは通信先に対応するアバタ画像を選択することができる。なお、ポインタが表示された状態でユーザが機能ボタンBsを押下すると、制御部11はポインタを非表示にし、再びアバタを仮想空間内で移動できるようにする。図10は、表示部14がポインタを表示したときの画像を例示した図である。同図において、矢印状の画像D6がポインタを表している。このように、ポインタが表示された状態でユーザが移動ボタンBu、Bd、Bl、Brを押下すると、制御部11は、ポインタの位置が変化するように表示部14の表示を変化させる。つまり、移動ボタンBu、Bd、Bl、Brは、ポインタが表示されていないときにはアバタを移動させるための操作子として機能し、ポインタが表示されているときにはポインタを移動させるための操作子として機能する。そして、所望の通信先に対応するアバタ画像とポインタとが重なった状態で確定ボタンBfが押下されると、制御部51は、このアバタに対応する通信先とテレビ電話による通話を行う旨の要求を制御装置30に送信する。
【0040】
上述した動作を、図8のフローチャートに沿って説明する。ステップSa3の画像表示を行ったら、制御部11は、ユーザによりアバタの移動が指示されているか否かを判断する(ステップSa4)。具体的には、制御部11は、移動ボタンBu、Bd、BlまたはBrのいずれかに相当する操作信号が供給されたか否かの判断を繰り返す。そして、ユーザによりアバタの移動が指示されたら(ステップSa4:YES)、制御部11は、アバタの位置を示す位置データを制御装置30に送信し(ステップSa5)、既に取得しているオブジェクトデータ以外に新たなオブジェクトデータが必要か否かを判断する(ステップSa6)。新たなオブジェクトデータが不要であれば(ステップSa6;No)、制御部11は、オブジェクトデータに基づいて表示している画像の表示位置をアバタが移動したように見せるために更新して(ステップSa7)、再びステップSa4の処理に戻る。また、新たなオブジェクトデータが必要であれば(ステップSa6;Yes)、制御部11は、位置データに対応するオブジェクトデータ等を再び制御装置30から取得する(ステップSa2)。
制御部11は、ユーザがアバタを移動させている間は以上の処理を繰り返す。
【0041】
一方、ユーザによりアバタの移動が指示されない場合(ステップSa4:NO)、制御部11は、ユーザにより通信先が選択されたか否かを判断する(ステップSa8)。具体的には、制御部11は、アバタ画像とポインタとが重なった状態で確定ボタンBfに相当する操作信号が供給されたか否かを判断する。制御部11は、ユーザにより通信先が選択されなければ(ステップSa8:NO)、再びステップSa4の処理に戻る。一方、通信先が選択されると(ステップSa8:YES)、制御部11は、テレビ電話を行うための処理を実行する(ステップSa9)。この処理(以下「テレビ電話処理」という。)については、後に詳説する。その後、制御部11は、ユーザによりテレビ電話アプリが終了されたか否かを判断し(ステップSa10)、ユーザにより終了の旨が指示されれば(ステップSa10:YES)、テレビ電話アプリを終了させる一方、終了の旨が指示されなければ(ステップSa10:NO)、再び仮想空間を表す画像を表示部14に表示させ、ステップSa3以降の処理を繰り返す。
【0042】
続いて、ステップSa9のテレビ電話処理について説明する。この処理は、制御装置30及び通信先の移動通信端末10Bにおける処理とともに説明する。図11は、このときに移動通信端末10A、10B及び制御装置30が実行する一連の処理を示すシーケンスチャートである。以下、同図に沿って移動通信端末10A、10B及び制御装置30の動作を説明する。
【0043】
まず、移動通信端末10Aの制御部11は、制御装置30にテレビ電話を行うための要求を送信する(ステップSb1)。この要求には、移動通信端末10Aの電話番号と、ポインタD6によって通信先として指定されたアバタのアバタIDが含まれている。制御装置30の制御部31は、通信部32を介してこの要求を取得すると、この要求に含まれるアバタIDを、記憶部33に記憶されたアバタID変換テーブルによって電話番号に変換する(ステップSb2)。そして、制御部31は、移動通信端末10Aの電話番号と通信先の電話番号の組をキーにして記憶部33内の通話履歴を検索し、通話履歴内にその組と一致するものがあるか否かを調べる(ステップSb3)。
【0044】
続いて、制御部31は、ステップSb3における検索結果に基づいて、テレビ電話を行う際に移動通信端末10A及び10Bに表示させる画像データを決定する(ステップSb4)。具体的には、移動通信端末10Aの電話番号と通信先の電話番号の組が通話履歴に含まれていた場合、制御部31は、テレビ電話を行う際に移動通信端末10A及び移動通信端末10Bに表示させる画像データを、互いの撮影画像データとする決定を行う。過去に通話したことがある相手同士なら、互いの撮影画像を表示し合っても、プライバシー保護の観点において大きな問題にはならないからである。一方、移動通信端末10Aの電話番号と通信先の電話番号の組が通話履歴に含まれていない場合、制御部31は、テレビ電話を行う際に移動通信端末10A及び移動通信端末10Bに表示させる画像データを、互いのアバタ画像データとする決定を行う。ここでは、移動通信端末10Aの電話番号と通信先の電話番号の組が通話履歴に含まれていない場合を想定する。
【0045】
この場合、制御部31は、ステップSb4における決定に基づき、送信すべき画像データを指示するデータを移動通信端末10Aに送信する(ステップSb5)。つまり、移動通信端末10Aの電話番号と通信先の電話番号の組が通話履歴に含まれていないから、制御部31は、移動通信端末10Aに対してアバタ画像データを送信する旨の指示を行う。これと並行して、制御部31は、移動通信網20のサービス制御局などの各ノードに指示することで、移動通信端末10Bに対する呼出を行わせる(ステップSb6)。この呼出には、アバタ画像データを用いたテレビ電話の呼びだしである旨と、移動通信端末10Aのユーザを表すアバタ画像データが含まれている。
【0046】
制御装置30から上記の指示を受信した移動通信端末10Aにおいては、制御部11が、図12に示すような画面を表示部14に表示する(ステップSb7)。この画面には、アバタ画像を用いてテレビ電話を行うために通話相手を呼びだし中である旨が記されている。一方、呼び出された移動通信端末10Bにおいては、制御部11が、図13に示すような画面を表示部14に表示する(ステップSb8)。この画面には、通信元のユーザのアバタ画像と、アバタ画像を用いてテレビ電話を行ってよいか否かを問い合わせるメッセージが記されている。このときユーザが「YES」を選択すると、移動通信端末10Bの制御部11は移動通信網20に対して応答を返し、これにより、移動通信端末10A及び移動通信端末10Bの間で通話回線が確立される(ステップSb9)。
【0047】
通話回線が確立された後は、移動通信端末10A,10Bの制御部11は、図7(a)に示すような画像を表示部14に表示した状態に遷移する。そして、この状態でテレビ電話がなされることになる。つまり、移動通信端末10A,10Bの制御部11はそれぞれ、EEPROM11dからアバタ画像データを読み出し、音声入出力部15に入力された音声メッセージと共に移動通信網20へと送信する。移動通信網20は、このアバタ画像データと音声メッセージとを相手方の移動通信端末へと送信する。相手方の移動通信端末10においては、制御部11が、無線通信部12によって受信したアバタ画像データに基づいて、アバタ画像を表示部14に表示すると共に、受信した音声メッセージを音声入出力部15から出力する。
【0048】
そして、通話回線の確立と同時に、制御装置30の制御部31は、時間の計測を開始する(ステップSb10)。なお、ステップSb8で表示された画面において、ユーザが「NO」を選択すると、移動通信端末10Bの制御部11は移動通信網20に対して着呼拒否の応答を返す。このときは移動通信端末10A及び移動通信端末10Bの間の通話回線は確立されない。
【0049】
さて、計測されている経過時間が予め決められた一定期間を超えると(ステップSb11)、制御部31は、アバタ画像を用いたテレビ電話から、撮影画像を用いたテレビ電話に切り替える旨を移動通信端末10A及び移動通信端末10Bに送信する(ステップSb12、Sb13)。制御装置30から上記の指示を受信した移動通信端末10Aにおいては、制御部11が、図14に示すような画面を表示部14に表示する(ステップSb14)。この画面には、撮影画像を用いてテレビ電話を行うか否かを問い合わせるメッセージが記されている。このときユーザが「YES」を選択すると、移動通信端末10Aの制御部11は移動通信網20に対してその旨の応答を返す(ステップSb15)。
【0050】
一方、移動通信端末10Bの制御部11も上記と同様の画面を表示し(ステップSb16)、ユーザが「OK」を選択すると、制御部11は移動通信網20に対してその旨の応答を返す(ステップSb17)。制御部31は、双方の移動通信端末10A,10BからOKの旨の応答を受け取ると、アバタ画像を用いたテレビ電話から撮影画像を用いたテレビ電話に切り替えるよう、移動通信端末10A及び移動通信端末10Bに指示する(ステップSb18,Sb19)。この指示に応じて、移動通信端末10A及び移動通信端末10Bはそれぞれ、図7(b)に示すような撮影画像を用いたテレビ電話を行う(ステップSb20)。つまり、移動通信端末10A及び移動通信端末10Bの制御部11はそれぞれ、撮影部16による撮影によって得られた撮影画像データを、音声入出力部15に入力された音声メッセージと共に移動通信網20へと送信する。移動通信網20は、この撮影画像データと音声メッセージとを相手方の移動通信端末10へと送信する。相手方の移動通信端末10においては、制御部11が、無線通信部12によって受信した撮影画像データに基づいて、撮影画像を表示部14に表示すると共に、受信した音声メッセージを音声入出力部15から出力する。
【0051】
なお、ステップSb14,16で表示された画面において、ユーザが「NO」を選択すると、移動通信端末10の制御部11は移動通信網20に対して着呼拒否の応答を返す。移動通信網20は、この旨を相手方の移動通信端末10に通知する。この通知に応じて、その移動通信端末10の制御部11は、図15に示すような画面を表示部14に表示する。このときは移動通信端末10A及び移動通信端末10Bの間で、撮影画像を用いたテレビ電話は開始されない。
【0052】
また、ステップSb3において、移動通信端末10Aの電話番号と通信先の電話番号の組が通話履歴に含まれていた場合には、制御部31は、移動通信端末10Aに対して撮影画像データを送信する旨の指示を行う。これと並行して、制御部31は、移動通信網20のサービス制御局などの各ノードに指示することで移動通信端末10Bに対する呼出を行わせる。この呼出には、撮影画像データを用いたテレビ電話である旨が含まれている。制御装置30から上記の指示を受信した移動通信端末10Aにおいては、制御部11が、撮影画像を用いてテレビ電話を行うため通話相手を呼びだし中である旨が記された画面(図16参照)を表示する(ステップSb7)。
【0053】
一方、呼び出された移動通信端末10Bにおいては、制御部11が、発呼元の移動通信端末の電話番号と、撮影画像を用いてテレビ電話を行ってよいか否かを問い合わせるメッセージが記されている画面(図17参照)を表示部14に表示する(ステップSb8)。このときユーザが「OK」を選択すると、移動通信端末10Bの制御部11は移動通信網20に対して応答を返し、これにより、移動通信端末10A及び移動通信端末10Bの間で通話回線が確立される。
以降、移動通信端末10A及び移動通信端末10Bの間では、撮影画像が表示された状態で通話がなされる。
【0054】
本実施形態における移動通信端末10A、10B及び制御装置30の動作は以上の通りである。このように動作することで、移動通信端末10のユーザは、アバタを介して仮想空間を自由に移動し、他のアバタを操作する移動通信端末10のユーザとテレビ電話を行うことが可能となる。つまり、本実施形態によれば、通信先の電話番号等を知らなくてもテレビ電話を行うことが可能である。また、移動通信端末10に対しては、通話相手となるユーザに対応するアバタIDのみが提供され、その通話相手の電話番号は提供されないから、電話番号が漏洩するような事態を未然に防止することも可能である。加えて、この実施形態によれば、“アバタを用いて仮想空間を擬似的に歩き回りながら話し相手を探す”という、従来のテレビ電話とはまったく異なる手法で発呼を行うため、テレビ電話に高い娯楽性を付与し、利用の促進を図ることが期待できる。
【0055】
また、上記実施形態では、ある一定時間が経過するまでは相手方のアバタ画像が表示され、その一定時間の経過後には撮影画像が表示される。このように、はじめはアバタ画像を表示させてテレビ電話を行い、ある程度親密になってきたら撮影画像を表示させてテレビ電話を行わせることで、コミュニケーションの態様を段階的に変化させることが可能である。また、このようにすることで、素性があまり明らかでない相手とのコミュニケーションに対するユーザの心理的な障壁を和らげることも期待できる。また、一定期間経過時にアバタ画像から撮影画像に切り替えるかどうかをユーザに確認するので、移動通信端末10のユーザは、意図しない相手に対しては撮影画像を表示させないようにすることもできる。これによりユーザのプライバシを適切に保護することができる。
【0056】
[変形例]
以上の実施形態を次のように変形してもよい。また、以下の各変形例は適宜組み合わせてもよい。
(1)変形例1
上述した実施形態では、経過時間が予め決められた一定時間に至るまでは、アバタ画像を表示させ、経過時間がその一定時間を超えると、撮影画像を表示させていたが、これを逆にしてもよい。つまり、経過時間が予め決められた一定時間に至るまでは、撮影画像を表示させ、経過時間が一定時間を超えると、アバタ画像を表示させてもよい。このような形態は、前述したように、例えば有名人とテレビ電話を行うことができるサービスに用いるのが好適である。また、この例において、通信元の移動通信端末10の電話番号と通信先の移動通信端末10の電話番号の組が、制御装置30が記憶する通話履歴に含まれていた場合には、経過時間が一定時間を超えると、撮影画像からアバタ画像に切り替えて表示するのではなくて、そのまま撮影画像を表示し続けるようにしてもよい。
【0057】
(2)変形例2
上述した実施形態では、テレビ電話の開始時期、つまり2つの移動通信端末10の通信回線が確立されて画像又は音声メッセージの送受信が開始された時期を、時間計測の始期としていたが、時間計測の始期は、実施形態の内容に限らず、通信端末どうしが通信接続されたとき又はそのとき以降の決められた時期であればよい。
この「通信端末どうしが通信接続されたとき」という用語に意味には、実施形態で説明したような2つの移動通信端末10が通信接続されてテレビ電話が開始されたときが含まれるが、さらに以下のような内容も含まれる。
IP(Internet Protocol)電話やテレビ会議或いはチャットを実現するためのプロトコルとして、SIP(Session Initiation Protocol)が知られている。このSIPは、画像やメッセージなどの実データの通信を始める前に、お互いの通信端末が解釈可能なデータ形式や実装しているプロトコルをネゴシエーションすることによって論理的な通信コネクションを確立して相互を通信接続するというプロトコルである。例えば通信端末がP2P(ピアツーピア)で通信を行う際には、その通信端末どうしがSIPを用いたネゴシエーションを経ることで、通信端末間の論理的な通信コネクションが確立されてお互いに通信接続される。また、SIPサーバと呼ばれる中継装置を介して通信端末が通信を行う際には、そのSIPサーバを経由してSIPによるネゴシエーションが行われ、これによって通信端末間の論理的な通信コネクションが確立されてお互いに通信接続される。
例えば、実施形態の制御装置30が提供する仮想世界において、このSIPがどのように利用されるかについて、その一例を説明する。
図10に示したように、自身のアバタの視野に他人のアバタが表示されているときには、それぞれのアバタに対応する移動通信端末10どうしをSIPによって通信接続する。なぜなら、これらのアバタに対応するユーザが所望するときに、直ちにその相手とコミュニケーションを取れるような状態にしておくことが望ましいからである。このとき、移動通信端末10のユーザが他人のアバタを指定して、そのアバタに対応する移動通信端末10とSIPによる通信接続を行うことを指示する操作を行うと、その操作に応じて、移動通信端末10がSIPサーバに相当する制御装置30を介してSIPによるネゴシエーションを行う。また、制御装置30が、上記のようなユーザからの要求を待たずに、それぞれの移動通信端末10に対してSIPによる通信接続を促すようにしてもよい。いずれにしろ、移動通信端末10どうしがSIPを用いたネゴシエーションを経ることで、その端末間の論理的な通信コネクションが確立されてお互いに通信接続された状態となる。このような状態になれば、いずれか一方の移動通信端末10から送信された画像やメッセージが直ちに他方の移動通信末10に転送される。
そして、アバタがお互いに見えない位置に移動したときには、制御装置30が能動的にそのSIPによる通信接続を切断するか又は制御装置30が移動通信端末10に指示してそのSIPによる通信接続を切断させる。
仮想世界においてアバタがお互いに見える位置に長時間滞在するという行為は、お互いの相手のアバタの容姿や行動を観察しただけでもなんとなく親近感を持っていることを意味する。そこで、お互いのアバタが見える位置にいる時間を計測して、その計測時間が短ければアバタ画像を用いたテレビ電話とし、その計測時間が長ければ撮影画像を用いたテレビ電話とする。これが、移動通信端末10どうしをSIPによって通信接続した時点から時間計測を開始する理由である。
なお、上記はSIPを用いた場合の説明であったが、これは単なる例示に過ぎず、他の通信プロトコル、つまり、実データを遣り取りする前にネゴシーションを行ってから通信接続するという通信プロトコルであれば、上記と同様のことが言える。そして、この種のプロトコルを用いて通信端末どうしが通信接続されたときは、それが「画像及びメッセージを遣り取りする通信端末どうしが通信接続されたとき」に相当する。
次に、「通信端末どうしが通信接続されたとき以降の決められた時期」という用語が意味するところについて説明する。
上述したように、テレビ電話を開始する前に、SIPなどの通信プロトコルによって通信端末間の通信接続が完了しているような場合には、その後にテレビ電話が開始されたときが、上記の「通信端末どうしが通信接続されたとき以降の決められた時期」に相当する。つまり、ここでいう「決められたとき」とは、制御装置30が、いずれか一方の通信端末から画像及びメッセージの送受信を開始する要求を取得し、その要求に応じて画像又は前記メッセージの送受信を開始した時期のことである。
また、SIPなどの通信プロトコルを用いない場合には、次のような例が、「通信端末どうしが通信接続されたとき以降の決められた時期」という用語の意味に含まれる。
例えば、お互いのユーザが、テレビ電話が開始されてから少し相手と会話をした段階で、もう少し話をしてみれば相手と気が合うことが確実になるかもしれないので、画像を切り替えるための経過時間の計測を開始してもよいと考えたような場合を想定する。このようなときには、お互いが操作部13を用いて指定したタイミングを、時間計測の始期とすればよい。この場合、移動通信端末10A,10Bの双方又はいずれか一方から、ユーザによって経過時間の計測を開始が指定されたときにその旨の通知が制御装置30に送信され、制御装置30は、その通知を受け取ると、経過時間の計時を開始する。
なお、経過時間には、1回のテレビ電話における経過時間だけでなく、過去に同一の相手と行われた複数回のテレビ電話の経過時間の累計を含むようにしてもよい。この場合、制御装置30の記憶部33に、通信先と通信元が同一の移動通信端末10どうしの通話期間の累積を通話履歴として書き込むようにすればよい。制御部31は、この累積の通話期間を参照して、画像を切り替えるべきか否かを判断する。
【0058】
(3)変形例3
上述した実施形態では、通信元の移動通信端末10の電話番号と通信先の移動通信端末10の電話番号の組が、制御装置30が記憶する通話履歴に含まれていた場合には、テレビ電話を開始するときに移動通信端末10に表示させる画像を撮影画像としていたが、必ずしも通話履歴の有無を考慮する必要はない。
【0059】
(4)変形例4
上述した実施形態は、画像データの送信元の移動通信端末10に指示することで、その相手方の移動通信端末10によって表示される画像を切り替えるという構成であったが、必ずしもそのような構成とは限らない。
例えば通信元の移動通信端末10にアバタ画像データと撮影画像データの双方を送信させておき、制御装置30が、経過時間に応じて、これらのうちの一方を選択して通信先の移動通信端末10に送信するような構成としてもよい。
また、制御装置30が送信先の移動通信端末10にアバタ画像データと撮影画像データの双方を送信するとともに、表示すべき画像データを通信先の移動通信端末10に指示する構成としてもよい。この場合、通信先の移動通信端末10においては、受信したアバタ画像データ及び撮影画像データのうち、制御装置30により指示された方の画像データを用いて表示を行う。
【0060】
(5)変形例5
上述した実施形態は、アバタ画像データを移動通信端末10が記憶する構成であったが、これに限らない。
例えば制御装置30が、記憶部33にアバタ画像データを予め記憶しておいてもよい。この場合、制御装置30は、通信元の移動通信端末10に対して常に撮影画像データ及びメッセージを送信するよう指示する。そして、制御装置30は、通信先の移動通信端末10に送信すべき画像データとして、通信元の移動通信端末10から受け取った撮影画像データ又は自身が記憶しているアバタ画像データを選択して送信する。これを実現するためには、制御装置30は、テレビ電話に係るデータ(音声データ、画像データ等)を中継するとともに、移動通信端末10のマルチメディア処理部に相当する構成を備える必要がある。そして、制御装置30の制御部31は、アバタ画像データを通信先の移動通信端末10に送信する場合には、通信部32を介して多重化された音声データや撮影画像データを取得し、これを個々の音声データや撮影画像データに分離する。そして、制御装置30の制御部31は、取得した撮影画像データを記憶部33から読み出したアバタ画像データに置換し、多重化処理を行った後に通信部32に供給して、通信先の移動通信端末10に宛てて送信する。
【0061】
また、制御装置30が複数のアバタ画像データを記憶しておき、移動通信端末10からはアバタ画像データを識別するアバタIDを含む指定データのみが送信されるような構成であってもよい。このようにすれば、通信元の移動通信端末10におけるデータの送信量を削減することが可能である。これを実現するためには、制御装置30がテレビ電話に係るデータを中継するとともに、記憶部33に複数のアバタ画像データをアバタIDと対応付けて記憶する。通信先の移動通信端末10にアバタ画像を表示させる場合、通信元の移動通信端末10は、アバタIDを含む指定データを音声メッセージともに送信する。制御装置30の制御部31は、通信元の移動通信端末10から指定データを受け取ると、その指定データに含まれるアバタIDに対応するアバタ画像データに多重化処理を行った後に通信部32に供給して、通信先の移動通信端末10に宛てて送信する。一方、通信先の移動通信端末10に撮影画像を表示させる場合には、制御装置30は、通信元の移動通信端末10に対して撮影画像データ及びメッセージを送信するよう指示すればよい。
さらに、制御装置30が、複数のアバタ画像データを、各々の移動通信端末10の電話番号と対応付けて記憶しておいてもよい。通信先の移動通信端末10にアバタ画像を表示させる場合、通信元の移動通信端末10は、自身の電話番号と音声メッセージとを送信する。制御装置30の制御部31は、通信元の移動通信端末10の電話番号に対応するアバタ画像データに多重化処理を行った後に通信部32に供給して、通信先の移動通信端末10に宛てて送信する。一方、通信先の移動通信端末10に撮影画像を表示させる場合には、制御装置30は、通信元の移動通信端末10に対して撮影画像データ及びメッセージを送信するよう指示すればよい。このようにしても、通信元の移動通信端末10におけるデータの送信量を削減することが可能である。
【0062】
また、通信先の移動通信端末10が、通信元のユーザを象徴するアバタ画像として表示し得る複数のアバタ画像データを記憶しておいてもよい。このアバタ画像データは各々のアバタIDと対応付けて記憶されている。通信先の移動通信端末10にアバタ画像を表示させる場合、通信元の移動通信端末10は、アバタIDを含む指定データを音声メッセージともに送信する。制御装置30はその指定データと音声メッセージを通信先の移動通信端末10に送信する。通信先の移動通信端末10は、記憶しているアバタ画像のうち、受信した指定データに含まれるアバタIDに対応するアバタ画像データを読み出してアバタ画像を表示する。一方、通信先の移動通信端末10に撮影画像を表示させる場合には、制御装置30は、通信元の移動通信端末10に対して撮影画像データ及びメッセージを送信するよう指示すればよい。このようにしても、通信元の移動通信端末10におけるデータの送信量を削減することが可能である。
【0063】
(6)変形例6
実施形態では、時間の計測を制御装置30が行う構成であったが、これを移動通信端末10が行ってもよい。
つまり、移動通信端末10が、画像又は音声メッセージの送受信が開始されたとき又はそれ以降の所定の時期からの経過時間を計測する計測手段を備え、制御部11が、計測された経過時間に応じて、撮影画像又はアバタ画像のうちのいずれかを無線通信部12から送信される画像として選択する。このときのアバタ画像は、移動通信端末10によって記憶されていてもよいし、制御装置30によって記憶されていてもよい。制御装置30に記憶されている場合には、移動通信端末10の制御部11は、アバタ画像を指定する指定データを無線通信部12から送信し、制御装置30がこの指定データによって指定されるアバタ画像を通信先の移動通信端末10に送信する。
【0064】
(7)変形例7
上述した実施形態は、テレビ電話、すなわち画像と音声メッセージによるコミュニケーションを行うものであったが、例えば、いわゆるチャットなどのように、音声メッセージの代わりに文字(テキストメッセージ)を用いてもよい。また、このような場合には、仮想空間内に表示されるアバタが上述した特定領域に移動したときに、仮想空間内に表示されるアバタ画像を撮影画像に切り替えるようにしてもよい。なお、画像及びメッセージを送受信する移動通信端末10の数は、2つに限らず、3つ以上であってもよい。
【0065】
(8)変形例8
移動通信端末10の双方に対してアバタ画像と撮影画像の切替を指示する必要はなく、いずれか一方のみでもよい。例えば、通信先となる相手方に常に自分の撮影画像を表示させるとか、通信先となる相手方に撮影画像を見せたくないので、常に代替画像を表示させるなどといった設定がなされている場合には、制御装置30はその相手方の移動通信端末10に対してのみ、経過時間に応じてアバタ画像と撮影画像を切り替えて表示させることになる。
【0066】
(9)その他の変形例
代替画像は、撮影画像の代替となる画像であればよく、実施形態で例示したアバタ画像に限らない。
実施形態では、撮影画像からアバタ画像へ切り替える際とか、アバタ画像から撮影画像へ切り替える際には、移動通信端末10のユーザに対して、画像を切り替えてよいかどうかを確認してから切り替えるようにしていた。この確認は必ずしも必須ではなく、画像を切り替える条件が満たされたときには、直ちに画像を切り替えるようにしてもよい。
また、実施形態では、制御装置30が提供する仮想空間において通話相手を探してテレビ電話を開始するという形態を採っていたが、必ずしもそうである必要はない。通話相手となるユーザの電話番号又はそれに代わるユーザID等をなんらかの手段によってユーザに提供し、ユーザがその電話番号やユーザID等を用いた発呼を行うことで、通話相手との間でテレビ電話を開始するようにしてもよい。
【0067】
上述した実施形態においては、移動通信端末10は携帯電話機であるとしたが、その他の通信端末であってもよい。例えば、PDA(Personal Digital Assistance)等の携帯可能な通信端末であってもよいし、固定電話であってもよいし、パーソナルコンピュータ等のコンピュータ装置であってもよい。なお、通信端末が移動通信網を利用するものでない場合には、移動通信網に代えてインターネット等の他のネットワークを用いればよい。また、通信端末は、撮影部を内蔵する必要はなく、外付けのビデオカメラから撮影画像データが供給されるような構成であってもよい。なお、これは、マイクやスピーカについても同様である。
【0068】
また、移動通信端末10AがステップSa1において送信するデータには、電話番号を表すデータが含まれているとしたが、このデータは電話番号である必要はなく、通信元の移動通信端末10を一意的に特定可能な情報であればよい。この場合、制御装置30は、このような情報に基づいてサービス制御局に問い合わせを行い、電話番号を取得するようにしてもよい。
【0069】
制御装置30の機能を分散化して複数の装置に持たせてもよい。要するに、画像及びメッセージを送受信して画像を表示する第1の通信端末と、画像及びメッセージを送受信して画像を表示する第2の通信端末とが通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測装置と、前記第1の通信端末又は前記第2の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像の代替となる代替画像を、前記計測装置によって計測された経過時間に応じて表示させる制御装置とを移動通信システムに設けておけばよい。
また、制御装置30は、移動通信網のノード装置(サービス制御局や交換局など)と別体の装置であったが、この制御装置30を移動通信網のいずれかのノード装置に内蔵してもよい。
【0070】
また、制御装置30が実現する諸機能は、単一のプログラムとして提供することも可能である。ゆえに、かかるプログラムを記録媒体に記録した形態で提供したり、他の制御装置30からインターネット等のネットワークを介してダウンロードすることにより提供したりすることも可能である。
【図面の簡単な説明】
【0071】
【図1】本発明の一実施形態であるシステムの全体構成を示す図である。
【図2】制御装置の構成を示すブロック図である。
【図3】制御装置が記憶しているアバタID変換テーブルの構成を示す図である。
【図4】移動通信端末の構成を示すブロック図である。
【図5】移動通信端末が備える操作子を示す図である。
【図6】移動通信端末に実現される各部の論理的構成を示す図である。
【図7】(a)はアバタ画像の一例を示す図であり、(b)は撮影画像の一例を示す図である。
【図8】移動通信端末が実行する処理を示すフローチャートである。
【図9】移動通信端末が表示する画像を例示した図である。
【図10】移動通信端末が表示する画像を例示した図である。
【図11】移動通信端末及び制御装置が実行する処理を示すシーケンスチャートである。
【図12】移動通信端末が表示する画像を例示した図である。
【図13】移動通信端末が表示する画像を例示した図である。
【図14】移動通信端末が表示する画像を例示した図である。
【図15】移動通信端末が表示する画像を例示した図である。
【図16】移動通信端末が表示する画像を例示した図である。
【図17】移動通信端末が表示する画像を例示した図である。
【符号の説明】
【0072】
10、10A、10B…移動通信端末、11…制御部、12…無線通信部、13…操作部、14…表示部、15…音声入出力部、16…撮影部、17…マルチメディア処理部、20…移動通信網、30…制御装置、31…制御部、33…記憶部。

【特許請求の範囲】
【請求項1】
画像及びメッセージを送受信して画像を表示する第1の通信端末と、画像及びメッセージを送受信して画像を表示する第2の通信端末とが通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測手段と、
前記第1の通信端末又は前記第2の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像の代替となる代替画像を、前記計測手段によって計測された経過時間に応じて表示させる制御手段と
を備えることを特徴とする制御装置。
【請求項2】
前記制御手段は、
前記計測手段によって計測された経過時間が閾値に至るまでは、前記一方の通信端末に前記代替画像を表示させ、
前記計測手段によって計測された経過時間が前記閾値を超えると、前記一方の通信端末に前記撮影画像を表示させる
ことを特徴とする請求項1記載の制御装置。
【請求項3】
前記第1の通信端末又は前記第2の通信端末から、画像及びメッセージの送受信を開始する要求を取得する取得手段と、
前記第1の通信端末及び前記第2の通信端末の間の前記画像又は前記メッセージの送受信の履歴を記憶する履歴記憶手段とを備え、
前記制御手段は、
前記計測手段によって計測された経過時間が前記閾値に至るまでの期間であっても、前記取得手段によって取得された要求が、前記履歴記憶手段に記憶されている前記第1の通信端末及び前記第2の通信端末の間の画像及びメッセージの送受信を開始する要求である場合には、前記一方の通信端末に前記撮影画像を表示させる
ことを特徴とする請求項2記載の制御装置。
【請求項4】
前記制御手段は、
前記計測手段によって計測された経過時間が閾値に至るまでは、前記一方の通信端末に前記撮影画像を表示させ、
前記計測手段によって計測された経過時間が閾値を超えると、前記一方の通信端末に前記代替画像を表示させる
ことを特徴とする請求項1記載の制御装置。
【請求項5】
前記第1の通信端末又は前記第2の通信端末から、画像及びメッセージの送受信を開始する要求を取得する取得手段と、
前記第1の通信端末及び前記第2の通信端末の間の前記画像又は前記メッセージの送受信の履歴を記憶する履歴記憶手段とを備え、
前記制御手段は、
前記計測手段によって計測された経過時間が閾値を超えたとしても、前記取得手段によって取得された要求が、前記履歴記憶手段に記憶されている前記第1の通信端末及び前記第2の通信端末の間の画像及びメッセージの送受信を開始する要求である場合には、前記一方の通信端末に前記撮影画像を表示させる
ことを特徴とする請求項4記載の制御装置。
【請求項6】
前記第1の通信端末及び前記第2の通信端末がそれぞれ、自端末からの画像又はメッセージの送信先である相手方の通信端末によって表示される前記代替画像を記憶しており、
前記制御手段は、
前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、
前記一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末が記憶している前記代替画像と前記メッセージとを送信するように、当該他方の通信端末に指示する
ことを特徴とする請求項1に記載の制御装置。
【請求項7】
前記第1の通信端末及び前記第2の通信端末がそれぞれ、自端末の記憶手段に、自端末からの画像又はメッセージの送信先である相手方の撮影画像の代替として表示し得る複数の代替画像を記憶しており、
前記制御手段は、
前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、
前記一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末によって指定された代替画像を前記一方の通信端末に通知して、当該一方の通信端末の前記記憶手段に記憶されている複数の代替画像のうち、通知した代替画像を表示するように当該一方の通信端末に指示する
ことを特徴とする請求項1に記載の制御装置。
【請求項8】
前記代替画像を記憶する代替画像記憶手段を備え、
前記制御手段は、
前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、
前記一方の通信端末に前記代替画像を表示させる場合には、前記代替画像記憶手段から前記代替画像を読み出して前記一方の通信端末に送信する
ことを特徴とする請求項1に記載の制御装置。
【請求項9】
前記代替画像記憶手段は、各々の前記第1の通信端末又は前記第2の通信端末に割り当てられた識別子と、それぞれ異なる前記代替画像とを対応付けて記憶しており、
前記制御手段は、前記一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末に割り当てられた識別子に対応付けられて記憶されている代替画像を、前記代替画像記憶手段から読み出し、前記一方の通信端末に送信する
ことを特徴とする請求項8に記載の制御装置。
【請求項10】
画像及びメッセージを送受信して画像を表示する第1の通信端末と、画像及びメッセージを送受信して画像を表示する第2の通信端末とが通信接続されたとき又はそのときの決められた時期からの経過時間を計測する計測装置と、
前記第1の通信端末又は前記第2の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像の代替となる代替画像を、前記計測装置によって計測された経過時間に応じて表示させる制御装置と
を備えることを特徴とする移動通信システム。
【請求項11】
撮影手段により撮影された撮影画像を取得する取得手段と、
前記撮影画像の代替となる代替画像を記憶する記憶手段と、
通信先の通信端末との間で画像及びメッセージを送受信する送受信手段と、
前記送受信手段によって受信された画像を表示する表示手段と、
他の通信端末と通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測手段と、
前記計測手段によって計測された経過時間に応じて、前記取得手段により取得された撮影画像又は前記記憶手段に記憶された代替画像のうちのいずれかを、前記送受信手段により送信される画像として選択する選択手段と
を備えることを特徴とする通信端末。
【請求項12】
撮影手段により撮影された撮影画像を取得する取得手段と、
通信先の通信端末との間で、画像又はデータと、メッセージとを送受信する送受信手段と、
前記送受信手段によって受信された画像を表示する表示手段と、
他の通信端末と通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測手段と、
前記計測手段によって計測された経過時間に応じて、前記取得手段により取得された撮影画像又は当該撮影画像の代替となる代替画像を指定する指定データのうちのいずれかを、前記送受信手段により送信される画像又はデータとして選択する選択手段と
を備えることを特徴とする通信端末。
【請求項13】
複数の前記代替画像を記憶する記憶手段を備え、
前記表示手段は、前記送受信手段によって受信された画像に代えて、前記記憶手段に記憶されている代替画像のうち、前記送受信手段によって受信した指定データによって指定される代替画像を表示する
ことを特徴とする請求項12記載の通信端末。

【図1】
image rotate

【図2】
image rotate

【図3】
image rotate

【図4】
image rotate

【図5】
image rotate

【図6】
image rotate

【図7】
image rotate

【図8】
image rotate

【図9】
image rotate

【図10】
image rotate

【図11】
image rotate

【図12】
image rotate

【図13】
image rotate

【図14】
image rotate

【図15】
image rotate

【図16】
image rotate

【図17】
image rotate


【公開番号】特開2009−33255(P2009−33255A)
【公開日】平成21年2月12日(2009.2.12)
【国際特許分類】
【出願番号】特願2007−192405(P2007−192405)
【出願日】平成19年7月24日(2007.7.24)
【出願人】(392026693)株式会社エヌ・ティ・ティ・ドコモ (5,876)
【Fターム(参考)】