電子機器、電子機器の制御方法、制御プログラム、および、記録媒体
【課題】電子機器の動作状態に応じて、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を出力する。
【解決手段】本発明の携帯電話機１０は、空間的輝度変調によって表示用画像を表示画面に表示する表示制御部２１を制御し、表示制御部２１は、サイド画像の画像データに基づいて、メイン画像の画像データを変調し、変調した画像データを表示用画像の画像データとすることによって、メイン画像とサイド画像とを合成して表示するものであり、携帯電話機１０は、自機の動作状態を判定する判定部５２・５４と、動作状態とサイド画像の表示を表示制御部２１に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部８１と、該記憶部８１において上記判定部によって判定された動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を表示制御部２１に指図する表示指図部５３とを備えていることを特徴とする。
【解決手段】本発明の携帯電話機１０は、空間的輝度変調によって表示用画像を表示画面に表示する表示制御部２１を制御し、表示制御部２１は、サイド画像の画像データに基づいて、メイン画像の画像データを変調し、変調した画像データを表示用画像の画像データとすることによって、メイン画像とサイド画像とを合成して表示するものであり、携帯電話機１０は、自機の動作状態を判定する判定部５２・５４と、動作状態とサイド画像の表示を表示制御部２１に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部８１と、該記憶部８１において上記判定部によって判定された動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を表示制御部２１に指図する表示指図部５３とを備えていることを特徴とする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、空間的輝度変調によって表示用画像を表示するように液晶表示素子を制御する電子機器、電子機器の制御方法、制御プログラム、および、記録媒体に関するものである。
【背景技術】
【０００２】
従来から、携帯電話機、ＰＤＡ（Personal Digital Assistant）などの携帯型情報機器のディスプレイとして液晶ディスプレイ（ＬＣＤ）が広く利用されている。ＬＣＤは、ＣＲＴ（Cathode Ray Tube）、プラズマディスプレイなどに比べて、視野角が狭いことが欠点とされてきたが、近時のＬＣＤ技術の進歩により、視野角の広角化が進められている。
【０００３】
しかしながら、上記携帯型情報機器は、電車やバスの車内などにおいて混雑した状況で利用すると、上記携帯型情報機器の表示画面に表示された内容が周囲の人に覗き見される虞がある。特に、電子メールの作成および閲覧を行う場合には、その内容が周囲の人に覗き見されることはプライバシー上好ましくない。
【０００４】
この問題に対応して、視野角を制御できるＬＣＤが提案されている（例えば、特許文献１参照）。このようなＬＣＤでは、通常の広視野角モード（パブリックモード）と、視野角の狭い狭視野角モード（プライベートモード）との何れか一方から他方に切り替え可能となっている。なお、狭視野角モードとは、ユーザのいる表示画面真正面からは通常どおりの表示画像が視認でき、斜め方向からは無地画像または別の画像が見えるモードである。
【０００５】
特許文献１に記載の表示装置では、液晶表示パネルが、視野角の狭い範囲では線形のデータ値／輝度応答性を有し、視野角の狭い範囲の外では非線形のデータ値／輝度応答性を有することを利用している。
【０００６】
具体的には、原画像における隣接するデータ値を、一方は分割値を加算し、他方は分割値を減算することにより修正（変調）する。修正された画像は、表示画面の法線に平行な軸上で上記表示画面を見た場合、人間の目が空間的平均化を行うため、上記原画像と同等の画像として視認されるが、軸外で上記表示画面を見た場合、上記分割値の要素が追加されることになる。上記分割値が上記修正された画像内でマスキング画像と比例した割合で変化する場合、軸外、すなわち上記表示画面に対して斜め方向では原画像とマスキング画像とがともに視認可能となる。マスキング画像が、格子縞模様や企業のロゴなどの攪乱パターンを有する場合、軸外の観察者に対しては、原画像は実質的に隠される。これにより、プライベートモードが実現され、軸上の観察者は覗き見されることなく原画像を見ることができる。なお、本明細書では、軸外の観察者によってのみ視認される上記マスキング画像をサイド画像と称する。また、上記原画像をサイド画像に対し、メイン画像と称する。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００７−０１７９８８号公報（２００７年０１月２５日公開）
【発明の概要】
【発明が解決しようとする課題】
【０００８】
上述したとおり、サイド画像（マスキング画像）は、軸外観察者から、メイン画像（原画像）が覗き見されることを防止するために合成されるものである。したがって、サイド画像としては、メイン画像に対して、遮蔽効果が高い画像、注目度の高い（目立つ、目に付きやすい）画像が適しているといえる。
【０００９】
携帯電話機の機能によって、メイン画像としては、大小、色、形、様々なオブジェクトが表示されるため、覗き見防止に最も効果的なサイド画像は、メイン画像の内容（オブジェクト）によって異なる、といえる。
【００１０】
しかしながら、メイン画像の内容は、携帯電話機の動作状態によって、すぐに変化するものである。したがって、携帯電話機の動作状態（メイン画像の内容）にかかわらず、常に、覗き見防止の効力を発揮するサイド画像を表示し続けることはできないという問題があった。この問題は、上記携帯電話機に限らず、多機能が搭載された、様々な大きさ、色、形、動きのオブジェクトを表示可能な電子機器において、共通に生じる問題である。
【００１１】
本発明は、上記の問題点に鑑みてなされたものであり、その目的は、電子機器の動作状態に応じて、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を出力する電子機器、電子機器の制御方法、制御プログラム、および、記録媒体を実現することにある。
【課題を解決するための手段】
【００１２】
本発明の電子機器は、上記課題を解決するために、空間的輝度変調によって表示用画像を表示画面に表示するように液晶表示素子を制御する表示制御装置を制御する電子機器であって、上記表示制御装置は、上記液晶表示素子からの輝度に関して、上記表示画面の法線に平行な軸方向に対する輝度と軸外の方向に対する輝度との非線形な対応関係と、当該電子機器が供給するサイド画像の画像データとに基づいて、当該電子機器が動作することによって得られるメイン画像の画像データを変調し、変調した画像データを上記表示用画像の画像データとすることによって、メイン画像とサイド画像とを合成して表示するものであり、当該電子機器は、当該電子機器の動作状態を判定する判定手段と、上記動作状態と、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像の表示を上記表示制御装置に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部と、上記表示指図情報記憶部において上記判定手段によって判定された上記動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する表示指図手段とを備えていることを特徴としている。
【００１３】
上記構成によれば、上記電子機器は、自機の動作結果を表示画面に表示するためのメイン画像と、該メイン画像を軸外の方向からの観察者から遮蔽するためのサイド画像とを表示制御装置に供給して、メイン画像とサイド画像とを合成して表示するよう上記表示制御装置に指図する。そして、上記電子機器は、自機の動作状態と、それに合わせた表示指図情報とを関連付けて記憶する表示指図情報記憶部を備えている。表示指図情報は、電子機器が、上記表示制御装置に対して、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像を合成するよう指図するためのものである。
【００１４】
具体的には、電子機器の上記判定手段は、まず、自機の動作状態を判定する。続いて、上記表示指図手段は、上記判定手段が判定した自機の動作状態に対応する表示指図情報を表示指図情報記憶部から特定する。表示指図手段は、その表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する。
【００１５】
これにより、電子機器が表示制御装置に対して行ったサイド画像表示の指図は、メイン画像が軸外の方向からの観察者から遮蔽されるという目的において、電子機器の動作状態に合わせて行われた適切な指図である。
【００１６】
このような指図にしたがって、表示制御装置は、電子機器の動作によって得られたメイン画像が適切に遮蔽されるようにサイド画像を合成し、表示用画像を出力することができる。
【００１７】
結果として、電子機器の動作状態に応じて、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を出力することが可能となる。
【００１８】
上記電子機器の上記表示指図情報記憶部には、当該電子機器の動作状態と、上記表示制御装置に供給すべきサイド画像を指定する画像指定情報とが関連付けて記憶されており、上記表示指図手段は、上記判定手段によって判定された上記動作状態に関連付けられている画像指定情報が指定するサイド画像を、上記表示制御装置に供給するサイド画像指定手段を含んでいてもよい。
【００１９】
これにより、電子機器は、自機の動作状態に応じて、覗き見防止上適切なサイド画像を選択し、表示させることができる。
【００２０】
上記電子機器の上記表示指図情報記憶部には、当該電子機器の動作状態と、上記サイド画像の加工方法を示す画像加工方法情報とが関連付けて記憶されており、上記表示指図手段は、上記判定手段によって判定された上記動作状態に関連付けられている画像加工方法情報が示す画像加工方法にて上記サイド画像を加工するよう、上記表示制御装置を制御する画像加工指示手段を含んでいてもよい。
【００２１】
これにより、電子機器は、自機の動作状態に応じて、覗き見防止上適切な方法でサイド画像を表示させることができる。
【００２２】
上記電子機器の上記判定手段は、当該電子機器が実行中のアプリケーションを判定するアプリケーション判定手段を含み、上記表示指図情報記憶部には、当該電子機器が実行可能なアプリケーションと、上記表示指図情報とが関連付けて記憶されており、上記表示指図手段は、上記アプリケーション判定手段によって判定されたアプリケーションに関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図してもよい。
【００２３】
これにより、電子機器は、自機が実行するアプリケーションに応じて、覗き見防止上適切なサイド画像表示を実現することができる。
【００２４】
上記電子機器の上記判定手段は、当該電子機器が動作することによって得られるメイン画像に含まれているオブジェクトの種類を判定する表示オブジェクト判定手段を含み、上記表示指図情報記憶部には、上記オブジェクトの種類と、上記表示指図情報とが関連付けて記憶されており、上記表示指図手段は、上記表示オブジェクト判定手段によって判定されたオブジェクトの種類に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図してもよい。
【００２５】
これにより、電子機器は、自機が動作結果を表示中の内容（オブジェクト）に応じて、覗き見防止上適切なサイド画像表示を実現することができる。
【００２６】
上記電子機器の上記表示指図情報記憶部には、上記オブジェクトの種類としての動画に関連付けて、上記サイド画像を動画で表示するように上記表示制御装置に指図する表示指図情報が記憶されており、上記表示指図手段は、上記表示オブジェクト判定手段が、上記メイン画像に動画が含まれていると判定した場合に、上記表示指図情報にしたがって、サイド画像を動画で表示することを上記表示制御装置に対して指図してもよい。
【００２７】
上記構成によれば、上記表示指図情報記憶部には、「オブジェクトの種類：動画」に対応付けて、「サイド画像を動画で表示する」という表示指図情報が記憶されている。
【００２８】
上記電子機器が動作した結果、メイン画像に動きを伴う動画オブジェクトが表示されている場合には、上記表示オブジェクト判定手段が、オブジェクトに動画が含まれていると判定する。この場合、上記表示指図手段は、「オブジェクトの種類：動画」に対応付けられた上記表示指図情報にしたがって、サイド画像を動画で表示することを上記表示制御装置に対して指図する。これにより、メイン画像に動画が表示されている場合に、サイド画像を動画で表示することができ、効果的にメイン画像を隠蔽することができる。
【００２９】
なぜなら、電子機器が動画のオブジェクトを表示している場合、メイン画像は、常に動きのある映像が全画面に映し出される状態になる。このようなメイン画像に対して覗き見防止効果が期待できるサイド画像としては、サイド画像に動画が表示されていることが有効である。メイン画像の動きを攪乱するように動きが付いたサイド画像（例えば、メイン画像の動きと反対の動きを伴うサイド画像）が表示されれば、メイン画像の動画を、軸外観察者から効果的に隠すことが可能である。
【００３０】
上記表示オブジェクト判定手段は、さらに、上記メイン画像に含まれている各種オブジェクトのサイズおよび表示位置を取得するものであり、上記表示指図手段は、上記メイン画像のオブジェクトのサイズ、および、表示位置に基づいて、当該オブジェクトを軸外の方向からサイド画像が遮蔽するように、上記サイド画像を編集するサイド画像編集手段を含むことが好ましい。
【００３１】
上記サイド画像編集手段は、上記表示オブジェクト判定手段が取得した、上記メイン画像のオブジェクトのサイズに合わせて、上記サイド画像のオブジェクトを拡大または縮小することが好ましい。
【００３２】
サイド画像のオブジェクトの注目度が高まり、メイン画像のオブジェクトを実質的に隠すことが可能となる。
【００３３】
本発明の電子機器の制御方法は、上記課題を解決するために、空間的輝度変調によって表示用画像を表示画面に表示するように液晶表示素子を制御する表示制御装置を制御する電子機器の制御方法であって、上記表示制御装置は、上記液晶表示素子からの輝度に関して、上記表示画面の法線に平行な軸方向に対する輝度と軸外の方向に対する輝度との非線形な対応関係と、当該電子機器が供給するサイド画像の画像データとに基づいて、当該電子機器が動作することによって得られるメイン画像の画像データを変調し、変調した画像データを上記表示用画像の画像データとすることによって、メイン画像とサイド画像とを合成して表示するものであり、上記電子機器において、上記電子機器の動作状態を判定する判定ステップと、上記動作状態と、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像の表示を上記表示制御装置に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部において、上記判定ステップにて判定された上記動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する表示指図ステップとを含むことを特徴としている。
【００３４】
なお、上記電子機器は、コンピュータによって実現してもよく、この場合には、コンピュータを上記各手段として動作させることにより上記電子機器をコンピュータにて実現させる電子機器の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。
【００３５】
上述した本発明がどのように課題を解決するのかを、具体例を用いて説明すると、以下のとおりである。上述したとおり、覗き見防止に最も効果的なサイド画像は、メイン画像の内容（オブジェクト）によって異なる。例えば、電子機器がメール作成画面または受信メール表示画面をメイン画像として表示している場合、メイン画像は、文字がたくさん整列して配置されている画像になる。このようなメイン画像に対して覗き見防止効果が期待できるサイド画像としては、チェック柄、水玉模様など上記文字の大きさ程度の絵が敷き詰められた画像が考えられる。このようにオブジェクト（ここでは文字）の大きさに合った、適度に細かい柄の画像は、大きい絵柄の画像にできるような広い隙間（非変調領域）や広範囲に均質な領域がないために、その領域で文字が目に付くということが無く、覗き見される心配がない。一方、均一性の高い細かすぎる画像（網点模様など）は、文字に比べて模様が小さすぎて、模様の下の文字の方が目立ってしまうことになる。また、コントラストの低い配色のサイド画像についても、メイン画像の文字より目立たないので不適切である。
【００３６】
あるいは、電子機器がテレビ機能を実行している場合、メイン画像は、常に動きのある映像が全画面に映し出される状態になる。このようなメイン画像に対して覗き見防止効果が期待できるサイド画像としては、サイド画像が動画であることが有効である。メイン画像の動きを攪乱するように動きが付いたサイド画像（例えば、メイン画像の動きと反対の動きを伴うサイド画像）が表示されれば、メイン画像の動画を、軸外観察者から効果的に隠すことが可能である。
【００３７】
このように、覗き見防止に最も効果的なサイド画像は、メイン画像の内容（オブジェクト）によって異なるが、メイン画像の内容は、電子機器の動作状態によって、忙しく変化するものである。例えば、電子機器で、メールを作成している間は、適度な大きさの格子柄のサイド画像が適していたが、その後すぐにテレビ放送に表示を切り替えると、当該サイド画像が最適であるとは限らないということである。
【００３８】
本発明の電子機器の上記構成によれば、上記不都合を解消することができる。すなわち、電子機器の動作状態を判定し、そのときの動作状態において、適切なサイド画像を適切な方法で合成表示することができる。したがって、電子機器においてメイン画像の内容が激しく変化するような状況でも、常に覗き見防止効果を発揮するようサイド画像を出力することが可能である。
【発明の効果】
【００３９】
本発明の電子機器は、上述したとおり、当該電子機器の動作状態を判定する判定手段と、上記動作状態と、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像の表示を上記表示制御装置に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部と、上記表示指図情報記憶部において上記判定手段によって判定された上記動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する表示指図手段とを備えていることを特徴としている。
【００４０】
したがって、電子機器の動作状態に応じて、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を出力することが可能になるという効果を奏する。
【図面の簡単な説明】
【００４１】
【図１】本発明の実施形態にかかる電子機器としての携帯電話機の要部構成を示す機能ブロック図である。
【図２】本発明の実施形態にかかる電子機器としての携帯電話機の概略構成を示すブロック図である。
【図３】隣接する画素の輝度を示す図である。
【図４】（ａ）および（ｂ）は、階調値に対する輝度の応答性を示すグラフである。
【図５】上記電子機器におけるメイン画像の階調値と、表示用画像の階調値との対応関係を示すグラフである。
【図６】上記電子機器における正面視の画像と側面視の画像とを示す図である。
【図７】本発明の一実施形態である電子機器における表示制御部の概略構成を示すブロック図である。
【図８】（ａ）は、表示制御部の配置パターン記憶部に記憶されている配置パターンの具体例を示す図であり、（ｂ）は、上記配置パターンの一例にしたがってサイド画像が配置されたときの表示部における表示態様を示す図である。
【図９】（ａ）は、表示制御部の配色パターン記憶部３４に記憶されている配色パターンの具体例を示す図であり、（ｂ）は、上記配色パターンの一例にしたがってサイド画像が着色されたときの表示部上での配色のパターンを示す図である。
【図１０】表示制御部の回転・反転情報記憶部に記憶されている回転角の情報および反転方向の情報の具体例を示す図である。
【図１１】表示制御部の拡縮率記憶部に記憶されている拡縮率の情報の具体例を示す図である。
【図１２】携帯電話機のサイド画像記憶部に記憶されているサイド画像の具体例を示す図である。
【図１３】携帯電話機の表示指図情報記憶部に記憶されている表示指図情報の具体例を示す図である。
【図１４】（ａ）および（ｂ）は、上記電子機器における側面視の画像を示す図であり、特に、携帯電話機の動作状態に応じて適切なサイド画像が選択されて、または、適切に加工されて、覗き見防止の効果を発揮している様子を説明する図である。
【図１５】本発明の実施形態における携帯電話機による、サイド画像の合成処理の流れを示す図である。
【図１６】本発明の他の実施形態にかかる携帯電話機の要部構成を示す機能ブロック図である。
【図１７】（ａ）は、本発明の実施形態における携帯電話機の表示指図情報記憶部に記憶されている表示指図情報の一例を示す図であり、（ｂ）は、上記表示指図情報の他の例を示す図である。
【図１８】（ａ）は、メイン画像Ｍの一例を示す図であり、（ｂ）は、サイド画像編集部６２が編集したサイド画像Ｓの一例を示す図であり、（ｃ）は、上記メイン画像Ｍに上記サイド画像Ｓが合成されたときに、上記電子機器において軸外から観察される側面視の画像を示す図である。
【発明を実施するための形態】
【００４２】
≪実施形態１≫
以下、本発明の一実施形態について図１〜図１８を参照して説明する。図２は、本実施形態の電子機器の概略構成を示している。本実施形態では、この電子機器を携帯電話機１０として説明するが、電子機器の例としては、ＰＤＡ（Personal Digital Assistant）、電子辞書、携帯型通信端末などの携帯型電子機器が挙げられる。またこれに限らず、本発明は、ＬＣＤ（Liquid Crystal Display）ユニット（液晶表示装置）を備えた任意の電子機器に適用することができる。
【００４３】
図２に示すように、携帯電話機１０は、主制御部１１、バス１２、記憶部１３、表示装置１４、通信部１５、操作部１６、および、撮像部１７を備える構成である。
【００４４】
主制御部１１は、例えばＲＡＭ（Random Access Memory）やフラッシュメモリなどの記憶素子に記憶されたプログラムを実行することにより、各種の演算を行うと共に、携帯電話機１０内の各種ユニットの統括的な制御を、バス１２を介して行うものであり、例えば、ＣＰＵなどで実現される。本実施形態では、主制御部１１は、バス１２を介して表示装置１４に、メイン画像およびサイド画像の画像データ、各種指示などを送信している。ここで、サイド画像は、覗き見防止などの目的で、メイン画像を撹乱するためにメイン画像に重畳される画像をいう。
【００４５】
バス１２は、携帯電話機１０内の各種構成間でデータの送受信を行うための共通の信号線である。記憶部１３は、各種データおよびプログラムを記憶するものである。記憶部１３の例としては、主制御部１１が動作するときに必要なプログラム等の固定データを記憶する読出し専用の半導体メモリであるＲＯＭ（Read Only Memory）と、演算に使用するデータ及び演算結果等を一時的に記憶するいわゆるワーキングメモリとしてのＲＡＭとが挙げられる。
【００４６】
表示装置１４は、主制御部１１または記憶部１３からバス１２を介して画像データを受信し、受信した画像データに基づいて画像を表示するものである。表示装置１４は、表示部２２および表示制御部２１を備える構成である。
【００４７】
表示部２２は、表示用画像の画像データに基づいて表示素子に文字、記号、図形などの画像を表示させる機能単位であり、表示画素がマトリクス状に配列されたマトリクス型のＬＣＤ素子（液晶表示素子）と、該ＬＣＤ素子を駆動する駆動回路とを備えるものである。上記ＬＣＤ素子は、光源からの入射光の輝度を空間的に変調する空間的輝度変調によって画像を表示するものである。なお、画像には、静止画像および動画像が含まれる。本実施形態では、表示部２２は、以下の構成を備えたＬＣＤモジュールとして実現される。例えば、ＬＣＤモジュールは、光源の洩光を防ぐための反射シート、光源が出す光を伝播させるための導光板、前方（観察者の視点への方向）への集光効果を持つレンズシート、および、光源の光を均一に拡散させ、光の濃淡（ムラ）を取り除くための拡散シートに、上記ＬＣＤ素子と上記駆動回路とを備えるＬＣＤパネルが積層された構成となっている。
【００４８】
表示制御部２１は、表示部２２を制御するものである。具体的には、表示制御部２１は、上記表示用画像の画像データを表示部２２に送信すると共に、表示部２２を表示制御するための複数の制御信号を送信している。この制御信号の例としては、垂直同期信号、水平同期信号、表示用画像の画像データをＬＣＤ素子の各表示画素に転送するための転送クロック信号などが挙げられる。本実施形態では、表示制御部２１として、例えば、上述のＬＣＤモジュールを制御するＬＣＤコントローラを採用することができる。
【００４９】
通信部１５は、携帯電話機１０が通信網（携帯電話網、インターネットなど）を介して、外部の通信装置と通信するためのものである。本実施形態では、電子機器は、携帯電話機１０であるので、例えば、通信部１５は、電波を送受信するアンテナ部、携帯電話機１０が扱うデータと無線信号との形式変換を行う無線処理部、および、データの符号化／復号化を行うデータ処理部などから構成される。
【００５０】
操作部１６は、携帯電話機１０の本体に設けられた操作ボタンなどの入力デバイスをユーザが操作することにより、操作データを作成して主制御部１１に供給するものである。入力デバイスとしては、ボタン（十字キーやテンキーなど）、スイッチ、あるいは、タッチパネルなどが挙げられる。
【００５１】
撮像部１７は、被写体を撮像して、画像、動画などのデータを生成するものである。具体的には、撮像部１７は、被写体からの光を電気信号に変換するＣＣＤ（Charge Coupled Device）、ＣＭＯＳ（Complementary Metal-oxide Semiconductor）などの撮像素子と、撮像素子からの電気信号をＲＧＢ各色のデジタルデータに変換する映像処理回路とを備える構成が挙げられる。例えば、携帯電話機１０にて、テレビ通話を行う場合には、撮像部１７によって撮像中の自分の動画が、通信部１５を介して、テレビ通話の相手に送信される。
【００５２】
〔サイド画像の原理〕
本実施形態では、表示部２２のＬＣＤ素子の表示画面から該表示画面の法線方向に存在する領域（以下、この領域を「軸上の領域」と称する。）Ａｏｎに位置する軸上観察者Ｖｏｎは、メイン画像を視認するようになっている。一方、上記表示画面を視認可能な領域であって、上記軸上の領域以外の領域（以下、この領域を「軸外の領域」と称する。）Ａｏｆｆに位置する軸外観察者Ｖｏｆｆは、メイン画像とサイド画像とが合成された画像を視認するようになっている。この原理について以下に説明する。
【００５３】
一般に、観察者は、表示素子から離れるに従って、該表示素子における隣接する画素同士が判別し難くなり、ついには判別できなくなる。このとき、観察者は、上記隣接する画素における輝度の平均値（平均輝度）を知覚することになる。
【００５４】
このことから、図３に示すことが言える。図３は、隣接する画素の輝度を示している。まず、同図の（ａ）に示すように、隣接する画素ｐ１・ｐ２同士の輝度は等しく、Ｉ０とする。次に、同図の（ｂ）に示すように、一方の画素ｐ１は、元の輝度Ｉ０から或る輝度Ｉ１を減算した輝度に変更し、他方の画素ｐ２は、元の輝度Ｉ０に或る輝度Ｉ１を加算した輝度に変更する。この場合、観察者は、上記隣接する画素ｐ１・ｐ２同士が判別できなくなると、同図の（ｃ）に示すように、上記隣接する画素ｐ１・ｐ２の領域ｐ１２は、画素ｐ１の輝度（Ｉ０−Ｉ１）と画素ｐ２の輝度（Ｉ０＋Ｉ１）との平均輝度、すなわち元の輝度Ｉ０を知覚することになる。
【００５５】
すなわち、隣接する画素の輝度を同図の（ｂ）のように変更しても、隣接する画素同士が判別できない程度に観察者が表示素子から離れると、該観察者にとっては、同図の（ａ）のような元の輝度が知覚されることになる。
【００５６】
ところで、通常の表示素子は、出力される輝度が、入力される階調値（例えば、画像データが８ビットデータの場合、０〜２５５）に比例応答せず、該階調値の定数乗（γ乗）に比例応答している。このため、通常の表示ユニットは、ガンマ補正が行われて、出力される輝度が、入力される階調値に比例応答するようになっている。
【００５７】
図４は、上記階調値に対する上記輝度の応答性を示すグラフである。ガンマ補正後の上記階調値と上記輝度とは、同図の（ａ）に示すように、比例しており、線形性を有している。この場合、階調値（原値）Ｄ０に対応する輝度をＩ０とすると、原値Ｄ０から分割値Ｄ１だけ加算および減算をそれぞれ行った階調値（Ｄ０＋Ｄ１）および階調値（Ｄ０−Ｄ１）に対応する輝度は、それぞれ輝度（Ｉ０＋Ｉ１）および輝度（Ｉ０−Ｉ１）となる。従って、平均輝度はＩ０となり、原値Ｄ０に対応する輝度Ｉ０と同じとなる。
【００５８】
しかしながら、ＬＣＤ素子の場合、軸上の方向に通過する光と、軸外の方向に通過する光とは、液晶を通過する光路長が異なっているのみならず、光の進行方向に対する液晶分子の傾きの違いに起因した複屈折性が異なっている。このため、軸上の方向に通過する光に関しては、図４の（ａ）のように、上記階調値に対する上記輝度の応答性が線形となるようにガンマ補正を行ったとしても、軸外の方向に通過する光に関しては、上記応答性が非線形となる。
【００５９】
図４の（ｂ）は、上記応答性が非線形である場合を示している。同図の（ｂ）を参照すると、この場合、階調値（原値）Ｄ０に対応する輝度Ｉ２は、原値Ｄ０から分割値Ｄ１だけ加算した階調値（Ｄ０＋Ｄ１）に対応する輝度と、原値Ｄ０から分割値Ｄ１だけ減算した階調値（Ｄ０−Ｄ１）に対応する輝度との平均輝度Ｉ３と異なることが理解できる。
【００６０】
そこで、メイン画像に対し、隣接する画素の一方は原値Ｄ０から分割値Ｄ１だけ加算し、他方は原値Ｄ０から分割値Ｄ１だけ減算するように階調値が変調され、変調された画像がＬＣＤ素子に表示される場合を考える。この場合、軸上観察者は、メイン画像と同等の画像（平均輝度Ｉ３）を視認することになるが、軸外観察者は、メイン画像に対し、分割値Ｄ１に対応して変調された画像（輝度Ｉ２）を視認することになる。従って、本実施形態では、メイン画像の上記隣接する画素の分割値Ｄ１を、サイド画像の対応する画素の階調値に対応付けている。これにより、軸外観察者は、メイン画像にサイド画像が合成された画像を視認することになる。
【００６１】
ところで、図４の（ｂ）を参照すると、分割値Ｄ１が大きくなるほど、輝度Ｉ２と平均輝度Ｉ３との差が大きくなることが理解できる。本実施形態の場合、輝度Ｉ２と平均輝度Ｉ３との差が大きいと、軸外観察者はサイド画像をより明確に視認することになるので、メイン画像の覗き見防止の観点から望ましい。従って、分割値Ｄ１は大きい方が望ましい。
【００６２】
一方、階調値は０以上である必要があるので、原値Ｄ０から分割値Ｄ１だけ減算した階調値（Ｄ０−Ｄ１）も０以上である必要がある。このため、階調値（Ｄ０−Ｄ１）は、０または０に近い正数となるような分割値Ｄ１を設定することが望ましい。また、原値Ｄ０から分割値Ｄ１だけ加算した階調値（Ｄ０＋Ｄ１）は、階調値の最大値以下である必要がある。このため、メイン画像は、利用可能な階調値の範囲を圧縮する必要がある。
【００６３】
図５は、本実施形態におけるメイン画像の階調値と、表示用画像の階調値との対応関係を示すグラフであり、分割値Ｄ１に関する上記条件を満たすものである。なお、図５は、サイド画像が２階調（０または２５５）の例を示している。ここで、階調値が０の場合、サイド画像はメイン画像を撹乱する度合が最も高い（最大撹乱）とし、階調値が２５５の場合、サイド画像はメイン画像を撹乱しない（無撹乱）とする。また、図５の例では、実線および破線が直線で表現されているが、実際には曲線であることが多い。
【００６４】
図５の実線は、サイド画像の階調値が２５５（無撹乱）の場合を示している。この場合、表示用画像の階調値は、メイン画像の圧縮された原値Ｄ０’となる。また、図５の破線は、サイド画像の階調値が０（最大撹乱）の場合を示している。この場合、表示用画像における隣接する画素の階調値は、一方が、メイン画像の圧縮された原値Ｄ０’から分割値Ｄ１だけ加算された階調値（Ｄ０’＋Ｄ１）となり、他方が、メイン画像の圧縮された原値Ｄ０’から分割値Ｄ１だけ減算した階調値（Ｄ０’−Ｄ１）となる。なお、サイド画像が多階調である場合は、サイド画像の階調値に応じて図５の２つの破線と同様のグラフが、図５の実線と２つの破線との間に記載されることになる。
【００６５】
従って、本実施形態の表示制御部２１は、図５に示すような、メイン画像の階調値と分割値Ｄ１との対応関係を分割パラメータとして記憶しておき、メイン画像の階調値を、サイド画像の階調値と上記分割パラメータとに基づいて変調し、これを表示用画像の階調値として表示部２２に送信している。これにより、軸上観察者は、メイン画像と同じ画像を視認する一方、軸外観察者は、メイン画像にサイド画像が合成された画像を視認することになる。その結果、軸外観察者は、メイン画像がサイド画像によって撹乱されて視認し難くなるので、メイン画像は、軸上観察者のみが視認できることになる。
【００６６】
図６は、軸外観察者から見てメイン画像がサイド画像によって撹乱される現象を示す図である。上述したとおり、表示画面を正面から見る軸上観察者には、メイン画像（図６の例では四葉のクローバー）のみが視認される。一方、表示画面を側面から見る軸外観察者は、上記メイン画像にサイド画像（図６の例では禁止マーク）が合成された画像を視認することになる。図６に示す例では、禁止マークの着色部分が、上記分割値によって階調値が変調された変調領域となる。禁止マークのサイド画像は、非変調領域（隙間）が広く、小さい文字がたくさん配置されたメール作成画面などのメイン画像であれば、覗き見防止の観点からサイド画像に適していないと判断される。しかしながら、図６に示すようなクローバーのオブジェクトを遮蔽するには、当該オブジェクトとほぼ同じ大きさの禁止マークをサイド画像として採用することが有益である。本発明は、このように、メイン画像の表示内容に合わせて、覗き見防止の観点から最適なサイド画像を出力することが可能である。
【００６７】
具体的には、本実施形態にかかる携帯電話機１０は、携帯電話機１０の動作状態、すなわち、表示部２２にメイン画像として何が表示されているのかに応じて、その状況下で覗き見防止の効力を発揮できるサイド画像を選択し、該サイド画像を表示制御部２１に対して供給するものである。あるいは、本発明の携帯電話機１０は、サイド画像が、上記状況下で覗き見防止の効力を発揮できる態様で出力されるよう、サイド画像の加工方法を表示制御部２１に指図するものである。
【００６８】
〔表示制御部の構成〕
まず、主制御部１１から供給されたサイド画像を、主制御部１１の指図にしたがって合成する表示制御部２１の詳細について説明する。
【００６９】
図７は、本発明の表示制御部２１において、メイン画像およびサイド画像を用いて表示用画像を作成することに関する概略構成を示すブロック図である。図７に示すように、表示制御部２１は、少なくとも、メイン画像用メモリ３０、サイド画像用メモリ３１、分割パラメータ記憶部３８および画像合成部３９を備える構成であり、さらに、表示制御部２１は、サイド画像を加工するための画像加工部としての配色パターン記憶部３４、色切替部３５、拡縮率記憶部３６、画像拡縮部３７、回転・反転情報記憶部４０、回転・反転部４１、配置パターン記憶部４２、および、画像配置部４３を備えていてもよい。
【００７０】
メイン画像用メモリ３０は、主制御部１１（記憶部１３）からのメイン画像Ｍの画像データを取得して記憶するフレームバッファである。メイン画像用メモリ３０に記憶されたメイン画像Ｍの画像データは、所定のタイミングで画像合成部３９に送信される。
【００７１】
サイド画像用メモリ３１は、主制御部１１（記憶部１３）からのサイド画像Ｓの画像データを取得して記憶するものである。本実施形態では、メモリ容量の節約のために、サイド画像用メモリ３１の容量をメイン画像用メモリ３０の４分の１とし、サイド画像Ｓを、メイン画像Ｍの４分の１のサイズで記憶するようになっている。したがって、サイド画像Ｓは、メイン画像Ｍと合成されるときには、画像拡縮部３７によって、縦、横方向のそれぞれに２倍ずつ拡大される。なお、表示制御部２１の構成は、これに限定されるものではない。
【００７２】
配置パターン記憶部４２は、サイド画像Ｓのレイアウトのパターン（配置パターン）を記憶するものである。また、画像配置部４３は、配置パターン記憶部４２に記憶されている配置パターンにしたがって、サイド画像Ｓの配置を決定するものである。本実施形態では、画像配置部４３は、一例として、配置パターン記憶部４２に記憶されているタイル張りの配置パターンに応じて、メイン画像Ｍに重畳するサイド画像Ｓのタイル張りを行う。
【００７３】
図８（ａ）は、配置パターン記憶部４２に記憶されている配置パターンの具体例を示す図であり、（ｂ）は、上記配置パターンの一例にしたがってサイド画像が配置されたときの表示部２２における表示態様を示す図である。図８（ａ）に示すとおり、配置パターン記憶部４２には、複数の配置パターンが記憶されており、各配置パターンには、画像配置部４３が当該配置パターンに従えばよいのか否かを示すフラグが関連付けられている。なお、このデータ構造は一例であって、本発明の構成を限定するものではない。
【００７４】
配置パターンの具体例としては、例えば、サイド画像Ｓ（１枚の画像）を、表示画面に配置することが考えられる（図８（ａ）の“１＊１（タイル張り無し）”）。この配置パターンに従えば、サイド画像Ｓが１枚、メイン画像Ｍに合成されることが決定される。あるいは、サイド画像Ｓを、表示画面に横×縦＝２枚×２枚でタイル張りするパターンが考えられる（図８（ａ）の“２＊２”）。この場合、図８（ｂ）に示すとおり、サイド画像Ｓ（４枚）は、表示部２２の表示画面を２＊２で分割した４つの領域にそれぞれ配置されることになる。なお、サイド画像Ｓを分割した領域に配置するときの、拡縮は、後述の拡縮率記憶部３６および画像拡縮部３７によって行われる。
【００７５】
また、配置パターン記憶部４２において、複数の配置パターンに対してフラグが立っていてもよい。この場合、画像配置部４３は、フラグが立っている配置パターンうち、参照する配置パターンを所定のタイミングで切り替えて、サイド画像Ｓの配置を当該タイミングで切り替える。
【００７６】
配色パターン記憶部３４は、複数の配色パターンのデータを記憶するものである。また、色切替部３５は、配色パターン記憶部３４における上記複数の配色パターンを利用して、サイド画像の配色パターンを所定のタイミングで切り替えるものである。サイド画像の配色パターンを変化させることにより、サイド画像の動画化を実現することができる。
【００７７】
図９（ａ）は、配色パターン記憶部３４に記憶されている配色パターンの具体例を示す図である。図９（ａ）に示すとおり、配色パターン記憶部３４には、あらかじめ登録されてある複数の色情報と、それらの色を用いた配色パターンが複数記憶されている。色情報は、例えば、色合い、階調などの値であって、表示制御部２１が再現可能な色を特定する情報である。各配色パターンには、色切替部３５が当該配色パターンに従えばよいのか否かを示すフラグが関連付けられている。なお、このデータ構造は一例であって、本発明の構成を限定するものではない。
【００７８】
具体的には、色切替部３５は、まず、配色パターン記憶部３４における複数の配色パターンの中から或る配色パターンを選択する。次に、色切替部３５は、選択された配色パターンのデータに基づいて、サイド画像用メモリ３１からのサイド画像の画像データの色情報を変更し、変更後のサイド画像の画像データを回転・反転部４１に送信する。そして、所定のタイミングで、色切替部３５は、上記或る配色パターンとは別の配色パターンを配色パターン記憶部３４における複数の配色パターンの中から選択し、上記動作を繰り返す。
【００７９】
図９（ｂ）は、上記配色パターンの一例にしたがってサイド画像が着色されたときの表示部２２上での配色パターンを示す図である。より詳細には、例えば、サイド画像Ｓ（＝オブジェクト）が、横×縦＝７＊１１で配置される場合であって、図９（ａ）に示す、配色パターン“１２３４５６７”が選択されている場合には、表示部２２の表示画面に表示された７＊１１個のオブジェクトは、以下のような配色パターンで表示される。すなわち、図９（ｂ）に示すとおり、一行目の７つのオブジェクトは、左から順に、１２３４５６７の各色で着色され、以降の行は、２３４５６７１、・・・、７１２３４５６、というように最初の配色から１つずつ左にずれたパターンで繰り返し着色される。
【００８０】
図９（ａ）に示すすべての配色パターンにフラグが立っている場合には、色切替部３５は、各配色パターンにしたがって、７＊１１個のオブジェクトの色を、所定のタイミングで切り替える。これにより、図９（ｂ）に示す配色パターンが、全体に左に１つずつ、ずれていき、軸外の観察者に対して、同色のオブジェクトが所定のタイミングで左に移動していくように見せかけることができる。
【００８１】
回転・反転情報記憶部４０は、回転角の情報と、左右反転、上下反転などの反転方向の情報とを記憶するものである。また、回転・反転部４１は、回転・反転情報記憶部４０における回転角の情報に基づいてサイド画像を所定のタイミングで回転したり、回転・反転情報記憶部４０における反転方向の情報に基づいてサイド画像を所定のタイミングで反転したりするものである。サイド画像を回転または反転することによりサイド画像の動画化を実現することができる。
【００８２】
図１０は、回転・反転情報記憶部４０に記憶されている回転角の情報および反転方向の情報の具体例を示す図である。図１０に示すとおり、回転・反転情報記憶部４０には、複数の回転角の情報、および、複数の反転方向の情報とが記憶されており、各情報には、回転・反転部４１がいずれの情報にしたがえばよいのかを示すフラグが関連付けられている。なお、図１０に示す回転角、反転方向の情報は一例であって、回転・反転情報記憶部４０の構成を限定するものではない。
【００８３】
具体的には、回転・反転部４１は、色切替部３５からのサイド画像の画像データに対し、回転・反転情報記憶部４０における回転角の情報に基づいて回転し、回転したサイド画像の画像データを画像拡縮部３７に送信し、上記動作を繰り返す。或いは、回転・反転部４１は、色切替部３５からのサイド画像の画像データに対し、回転・反転情報記憶部４０における反転方向の情報に基づいて反転し、反転したサイド画像の画像データを画像拡縮部３７に送信し、上記動作を繰り返す。
【００８４】
例えば、回転角の情報のすべてにフラグが立っている場合には、回転・反転部４１は、各回転角の情報にしたがって、サイド画像Ｓを所定のタイミングで順に回転させて表示することが可能となり、これにより、１つのオブジェクトが回転し続けている動画としてのサイド画像Ｓを実現することができる。
【００８５】
拡縮率記憶部３６は、画像サイズの拡大率または縮小率である拡縮率を複数個記憶するものである。また、画像拡縮部３７は、拡縮率記憶部３６における複数の上記拡縮率を利用して、サイド画像の画像サイズを所定のタイミングで拡大または縮小するものである。サイド画像の画像サイズを拡大または縮小することにより、サイド画像の動画化を実現することができる。
【００８６】
図１１は、拡縮率記憶部３６に記憶されている拡縮率の情報の具体例を示す図である。図１１に示すとおり、拡縮率記憶部３６には、複数の拡縮率の情報が記憶されており、各情報には、画像拡縮部３７がいずれの情報にしたがえばよいのかを示すフラグが関連付けられている。なお、図１１に示す拡縮率の情報は一例であって、拡縮率記憶部３６の構成を限定するものではない。
【００８７】
具体的には、画像拡縮部３７は、まず、拡縮率記憶部３６における複数の拡縮率の中から或る拡縮率（フラグによって指定されている拡縮率、例えば、５０％）を選択する。次に、画像拡縮部３７は、回転・反転部４１からのサイド画像の画像データを、上記或る拡縮率で拡大または縮小されたサイド画像の画像データとなるように変更し、変更後のサイド画像の画像データを画像合成部３９に送信する。そして、複数の拡縮率がフラグによって指定されている場合に、所定のタイミングで、画像拡縮部３７は、上記或る拡縮率とは別の拡縮率（例えば、１５０％）を拡縮率記憶部３６における複数の拡縮率の中から選択し、上記動作を繰り返す。これにより、１つのオブジェクトが大きくなったり小さくなったりする動画としてのサイド画像Ｓを実現することができる。
【００８８】
分割パラメータ記憶部３８は、上述の分割パラメータを記憶するものである。また、画像合成部３９は、画像拡縮部３７からのサイド画像の画像データと、分割パラメータ記憶部３８における分割パラメータとに基づいて、メイン画像用メモリ３０からのメイン画像Ｍの画像データを変調するものである。画像合成部３９は、変調した画像データを上記表示用画像の画像データとして表示部２２に送信している。
【００８９】
変調した画像データが表示部２２に表示されると、軸上からは、メイン画像Ｍのみが、軸外からは、メイン画像Ｍに重畳されたサイド画像Ｓが視認される。
【００９０】
上述のとおり、表示制御部２１の各画像加工部は、各記憶部に記憶されている情報にしたがって、サイド画像Ｓを加工する。したがって、携帯電話機１０の主制御部１１は、表示制御部２１の各記憶部のデータを制御して、サイド画像Ｓの画像加工を表示制御部２１に対して指図することが可能となる。
【００９１】
〔主制御部の要部構成〕
次に、表示制御部２１に対して、サイド画像を供給し、該サイド画像の加工方法を指示する携帯電話機１０（主制御部１１）の要部構成について詳細に説明する。
【００９２】
図１は、本発明の実施形態にかかる携帯電話機１０の要部構成を示すブロック図である。
【００９３】
図１に示すとおり、携帯電話機１０の主制御部１１は、アプリケーション実行部５０、アプリケーション制御部５１、アプリケーション判定部５２、および、表示指図部５３を含む構成となっている。
【００９４】
アプリケーション実行部５０は、記憶部１３に記憶されている図示しない各種プログラムを読み出して実行することにより携帯電話機１０の機能（各種アプリケーションなど）を実現するものである。アプリケーションの具体例としては、例えば、外部の機器と電子メールをやり取りする機能であるメールアプリケーション７０、放送波を受信してテレビ放送番組を表示するテレビアプリケーション７１、インターネット上に公開されているウェブサイトを取得して表示するウェブブラウザアプリケーション７２、表計算文書を処理して表計算を実行する表計算アプリケーション７３、外部の通信装置と映像および音声の送受信を行ってテレビ通話を実現するテレビ通話アプリケーション７４、および、携帯電話機１０が外部から取得したまたは内蔵する辞書データを読み出して、辞書機能を実行する辞書アプリケーション７５などが挙げられるが、これらは一例であって、本発明の携帯電話機１０を限定するものではない。アプリケーション実行部５０は、携帯電話機１０を操作するためのメニュー画面や各種設定画面などを表示するプログラムを実行してもよい。
【００９５】
アプリケーション実行部５０の実行結果の情報は、図示しない描画部によってメイン画像Ｍとして成形されて表示制御部２１に出力される。
【００９６】
アプリケーション制御部５１は、携帯電話機１０において発生する所定のイベントをトリガにして、それに応じたアプリケーションを実行するようアプリケーション実行部５０を制御するものである。例えば、ユーザが操作部１６を操作して、メール機能を呼び出した場合には、操作部１６のボタンの押下をトリガにして、アプリケーション制御部５１は、メールアプリケーション７０を起動する。
【００９７】
アプリケーション判定部５２は、アプリケーション制御部５１によって起動された、アプリケーション実行部５０が実行中のアプリケーションを判定するものである。上述の例にしたがえば、メールアプリケーション７０が起動されたとき、アプリケーション判定部５２は、実行中のアプリケーションを「メールアプリケーション７０」と判定する。
【００９８】
表示指図部５３は、携帯電話機１０の動作状態（アプリケーション実行部５０の実行結果としてのメイン画像Ｍの内容）に応じて、サイド画像Ｓの表示を表示制御部２１に対して指図するものである。すなわち、表示指図部５３は、表示制御部２１の画像合成部３９に対して、サイド画像Ｓのメイン画像Ｍへの合成を指図するものである。
【００９９】
具体的には、本実施形態では、表示指図部５３は、サイド画像指定部６０および画像加工指示部６１を含んでいる。サイド画像指定部６０は、メイン画像Ｍに合成するべきサイド画像Ｓを選択し、表示制御部２１に対して指定するものである。サイド画像指定部６０は、記憶部１３に記憶されている各種情報を参照することにより、アプリケーション判定部５２によって判定されたアプリケーションの実行中に、覗き見防止の効果が得られる最適なサイド画像Ｓを選択することができる。
【０１００】
画像加工指示部６１は、メイン画像Ｍに合成するべきサイド画像Ｓについて、該サイド画像Ｓに対し、画像加工（タイル張り、配色、回転、反転、拡大、縮小など）を施す必要がある場合には、その画像加工方法を表示制御部２１に対して指示するものである。画像加工指示部６１は、表示制御部２１の各記憶部に記憶されている情報の内容を更新したり、フラグを変更したりすることによって、画像加工方法を表示制御部２１に指示する。画像加工指示部６１は、記憶部１３に記憶されている各種情報を参照することにより、アプリケーション判定部５２によって判定されたアプリケーションの実行中に、覗き見防止の効果が得られる最適なサイド画像Ｓの画像加工方法を表示制御部２１に対して指示することができる。
【０１０１】
上述した主制御部１１の各部は、ＣＰＵ（central processing unit）が不図示のＲＯＭ（read only memory）等の記憶装置に記憶されているプログラムをＲＡＭ（random access memory）等に読み出して実行することで実現できる。すなわち、上記各部は、上記ＣＰＵが上記記憶装置に格納されたプログラムを実行し、図示しない入出力回路などの周辺回路を制御することによって実現される機能ブロックである。
【０１０２】
次に、表示指図部５３が参照する記憶部１３の各種情報について説明する。記憶部１３は、サイド画像記憶部８０および表示指図情報記憶部８１を含む構成となっている。
【０１０３】
図１２は、サイド画像記憶部８０に記憶されているサイド画像の具体例を示す図である。サイド画像記憶部８０には、１以上のサイド画像が記憶されており、これらの一つがサイド画像指定部６０によって読み出されて表示制御部２１に供給される。本実施形態では、一例として、静止画、動画を含む複数のサイド画像が、サイド画像記憶部８０に格納されている。図１２に示すとおり、各サイド画像には、サイド画像を一意に識別するためのサイド画像ＩＤが関連付けられているとともに、サイド画像ごとの付属情報が関連付けられている。サイド画像の付属情報として、画像の種類やファイル形式などを示す情報、画像サイズ、および、動画の場合には、長さ、フレームレートなどが格納される。
【０１０４】
サイド画像指定部６０は、この付属情報を参照して、現在アプリケーション実行部５０が実行中のアプリケーションに最適なサイド画像を選択することが可能となる。例えば、テレビアプリケーション７１が起動されていると、メイン画像Ｍは、テレビ放送番組などの動画となる。このように動きのある映像が表示されている場合には、同じように動きを伴うサイド画像Ｓで遮蔽することが、メイン画像Ｍの内容の覗き見防止に適していると考えられる。そこで、アプリケーション判定部５２が、実行中のアプリケーションをテレビアプリケーション７１と判定した場合には、サイド画像指定部６０は、サイド画像記憶部８０の付属情報を参照して、動画であるサイド画像（img004またはimg005）を取得し、表示制御部２１に供給する、というように、実行中のアプリケーションに応じて最適なサイド画像Ｓを指定することが可能になる。
【０１０５】
本発明の携帯電話機１０は、単に、選択したサイド画像Ｓを供給するだけでなく、供給するサイド画像Ｓに対してどのような画像加工を施せば、より覗き見防止の効果が高まるのかを判断して、画像加工方法を表示制御部２１に指示することができる。
【０１０６】
図１３は、表示指図情報記憶部８１に記憶されている表示指図情報の具体例を示す図である。表示指図情報記憶部８１には、携帯電話機１０に搭載されているアプリケーションに対応付けて、表示制御部２１にサイド画像Ｓの表示を指図する表示指図情報が記憶されている。表示指図情報とは、主制御部１１が表示制御部２１に対して、サイド画像の表示を指図するための情報である。本実施形態では、表示指図情報として、図１３に示すとおり、いずれのサイド画像Ｓを採用するのかを示す画像指定情報と、該画像指定情報によって指定されたサイド画像Ｓをどのように加工するのかを示す画像加工方法情報とが記憶されている。
【０１０７】
例えば、図１３に示すとおり、「アプリケーション：メール」に関連付けられている表示指図情報によれば、「img003の静止画を等倍のまま、縦×横＝１１×７で配置し、第１色から第７色までの各色の階調値を上げ、すべての配色パターンを切り替えて表示すること」が指図されている。したがって、アプリケーション判定部５２によって、メールアプリケーション７０が実行中と判定された場合、画像加工指示部６１は、上記の表示態様にてimg003の静止画が、メイン画像Ｍに合成されて表示されるように、表示制御部２１に対して画像加工方法を指示する。すなわち、画像加工指示部６１は、配置パターン記憶部４２の「１１＊７」の配置パターンのフラグを立て、配色パターン記憶部３４の各色情報の階調値を上げ、全配色パターンのフラグを立て、拡縮率記憶部３６の拡縮率「１００％」にのみフラグを立てるという処理を行う。
【０１０８】
そして、表示制御部２１は、表示指図部５３から表示指図にしたがって、指定されたサイド画像Ｓを指示された方法にて加工し、メイン画像Ｍに合成する（メイン画像Ｍを変調する）。その結果、例えば、図１４（ｂ）に示すようなチェック柄が軸外から観察され、メール作成中の画面などを、軸外観察者から実質的に隠すことが可能となる。
【０１０９】
図１３に示すその他の表示指図情報によれば、表示指図部５３は、テレビアプリケーション７１実行中には、img005の動画をサイド画像Ｓとして出力し、効果的に覗き見を防止することができる。動画は、例えば、フレームごとにサイド画像用メモリ３１に供給することが考えられる。ウェブブラウザアプリケーション７２実行中には、img004の動画をサイド画像Ｓとして出力する。表示部２２に表示されるウェブサイトには、テキスト、イメージ、アニメなど、大小のオブジェクトが混ざって表示されることが多い。そこで、大きいオブジェクトとそれよりも細かい柄との両方を含むimg004の動画をサイド画像Ｓとすることにより、効果的に覗き見を防止することができる。フレームが４枚程度であれば、表示制御部２１に４枚の画像を格納しておけるサイド画像用メモリ３１を搭載することができるならば、img004の動画をまとめて表示制御部２１に供給することが考えられる。表計算アプリケーション７３実行中には、img002の静止画をサイド画像Ｓとして全画面表示されるように出力する。表計算ソフトでは、大小のオブジェクトが混ざって表示されることが多く、また、グラフやマークなどシンボリックな絵柄が表示される。そこで、メイン画像Ｍのグラフ以上に、認識されやすい、目立った、また、変調領域が広いimg002の静止画をサイド画像Ｓとして全画面表示することにより、効果的に覗き見を防止することができる。テレビ通話アプリケーション７４実行中には、img001の静止画を、２＊２のタイル張りで表示されるように出力する。テレビ会議などでは、会議参加者の映像が参加する数名分表示される。そこで、このような映像のオブジェクトと同じくらいの大きさで、当該オブジェクトを隠せるような表示態様でサイド画像Ｓを表示する。これにより、例えば、図１４（ａ）に示すとおり、参加者の顔が映されたオブジェクトを、軸外観察者から実質的に隠すことが可能となる。結果として、効果的に覗き見を防止することができる。辞書アプリケーション７５実行中には、img003の静止画が大きさとレイアウトとを所定のタイミングで変化させて表示されるように該静止画を出力する。辞書アプリケーションの画面では、見出し語や説明文など、大小さまざまな大きさのフォントで文字がたくさん表示される。そこで、上記チェック柄の大きさを変化させてサイド画像Ｓとして表示することにより、大小さまざまな文字を軸外観察者から隠し、効果的に覗き見を防止することができる。
【０１１０】
これまで述べてきたとおり、本発明の携帯電話機１０の上記構成によれば、アプリケーション判定部５２が、アプリケーション実行部５０が実行中のアプリケーションを判定し、表示指図部５３が、判定されたアプリケーションに応じて、最適なサイド画像Ｓを選択する。また、表示指図部５３は、上記アプリケーションに応じて、サイド画像Ｓを最適な方法にて加工してから表示するように表示制御部２１に対して指示する。ここで、最適なサイド画像Ｓとは、軸外観察者に攪乱パターン視認させてメイン画像Ｍを実質的に隠すのに最も高い効果が得られる絵柄を持つサイド画像Ｓのことを指す。
【０１１１】
以上のことから、電子機器の動作状態に応じて、どのようなアプリケーションを実行中でも、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を常に出力することが可能となる。
【０１１２】
〔サイド画像合成フロー〕
図１５は、本実施形態における携帯電話機１０による、サイド画像Ｓの合成処理の流れを示す図である。
【０１１３】
ユーザの操作部１６の操作などによって、携帯電話機１０のいずれかのアプリケーションが呼び出されると（Ｓ１においてＹＥＳ）、主制御部１１のアプリケーション制御部５１は、指定されたアプリケーションを実行するように、アプリケーション実行部５０に指示する。アプリケーション実行部５０が、指定されたアプリケーションを起動して、該アプリケーションを実行する（Ｓ２）。
【０１１４】
続いて、アプリケーション判定部５２は、起動されたアプリケーションを判定する（Ｓ３）。そして、表示指図部５３は、表示指図情報記憶部８１を参照し、アプリケーション判定部５２によって判定されたアプリケーションに対応付けられている表示指図情報を取得する（Ｓ４）。具体的には、Ｓ３にて、辞書アプリケーション７５が実行中であると判定されたとすると、サイド画像指定部６０は、図１３に示す表示指図情報（画像指定情報）に基づいて、img003の静止画を、表示制御部２１に供給すべきサイド画像Ｓとして特定する。また、画像加工指示部６１は、画像加工方法情報「配置パターン：２＊２〜７＊１１で切り替え／拡縮率：200％〜30％で切り替え」を特定する。
【０１１５】
続いて、表示指図部５３は、特定した表示指図情報にしたがって、表示制御部２１に対して、表示指図を行う（Ｓ５）。具体的には、サイド画像指定部６０は、img003の静止画を、サイド画像記憶部８０から取得して、表示制御部２１に供給する。画像加工指示部６１は、表示制御部２１の各記憶部のフラグを更新する。
【０１１６】
最後に、表示制御部２１は、表示指図部５３からの表示指図にしたがってメイン画像Ｍにサイド画像Ｓを合成して（メイン画像Ｍの階調値を変調して）、変調後のメイン画像Ｍの画像データを表示部２２に出力し、表示する。
【０１１７】
上記方法によれば、Ｓ３にて、Ｓ２で実行中のアプリケーションが判定される。そして、Ｓ４にて、判定されたアプリケーションに応じて、適切なサイド画像Ｓが選択される。また、上記アプリケーションに応じて、サイド画像Ｓを適切な（現在のメイン画像Ｍに対して覗き見防止に効果的な）方法にて加工してから表示するように表示制御部２１を制御する。ここで、適切なサイド画像Ｓとは、軸外観察者に攪乱パターン視認させてメイン画像Ｍを実質的に隠すのに高い効果が得られる絵柄を持つサイド画像Ｓのことを指す。
【０１１８】
以上のことから、電子機器の動作状態に応じて、どのようなアプリケーションを実行中でも、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を常に出力することが可能となる。
【０１１９】
≪実施形態２≫
上述の実施形態では、電子機器の動作状態、特に、実行中のアプリケーションに応じて、適切なサイド画像、画像加工方法を決定する携帯電話機１０の構成について述べてきた。しかし、本発明の携帯電話機１０は、上記構成に限定されず、携帯電話機１０の表示部２２が表示するメイン画像Ｍの内容物（テキスト、静止画、動画などのオブジェクト）に応じて、適切なサイド画像、画像加工方法を決定する構成であってもよい。
【０１２０】
図１６は、本発明の他の実施形態にかかる携帯電話機１０の要部構成を示すブロック図である。なお、図１６の各構成要素に付された符号は、図１の各構成要素に付された符号に対応しており、同じ符号は、同じ構成要素を示している。したがって、上述の各実施形態ですでに説明した構成要素についての説明は繰り返さない。
【０１２１】
図１６に示す携帯電話機１０において、図１に示す実施形態１の携帯電話機１０と異なる点は、主制御部１１が、アプリケーション判定部５２に加えて（あるいは、代えて）、表示オブジェクト判定部５４を備えている点である。
【０１２２】
表示オブジェクト判定部５４は、アプリケーション実行部５０がプログラムを実行した結果得られる情報に基づいて、表示部２２に表示されるメイン画像Ｍに含まれるオブジェクトの種類を判定するものである。メイン画像Ｍに含まれて表示されるオブジェクトの種類としては、例えば、テキスト、イメージ、アニメーション、ビデオ、および、それらの混合が挙げられる。
【０１２３】
さらに、本実施形態では、表示オブジェクト判定部５４は、記憶部１３に含まれる設定情報記憶部８２に記憶されている設定情報に基づいて、オブジェクトのサイズ、色、および、配置を判定することができる。設定情報とは、携帯電話機１０にて表示されるユーザインターフェース画面の基本的なデザインをカスタマイズするために、ユーザが携帯電話機１０の設定登録した各種情報のことである。例えば、ユーザが指定した、画面背景色、文字色、文字フォント、文字サイズ、アイコンサイズ、アイコンのレイアウトなどの各種設定情報が記憶されている。表示オブジェクト判定部５４は、メイン画像Ｍにテキストが含まれていると判定した場合には、上記文字サイズ、および、文字色の情報を設定情報記憶部８２から読み出して、表示指図部５３に供給する。
【０１２４】
上記構成によれば、表示指図部５３のサイド画像指定部６０は、判定されたオブジェクトに応じて適切なサイド画像Ｓを選択できる。例えば、オブジェクトがアニメーション、ビデオなど動きのあるオブジェクト（動画）と判定された場合には、サイド画像指定部６０は、動きを伴うサイド画像Ｓ（img004またはimg005など）を選択することが可能である。
あるいは、画像加工指示部６１は、判定されたオブジェクトに応じて、さらに、当該オブジェクトの色やサイズに応じて、当該オブジェクトの遮蔽に適したサイド画像Ｓとするための画像加工方法を、表示制御部２１に指示することができる。
【０１２５】
図１７（ａ）は、本実施形態における表示指図情報記憶部８１に記憶されている表示指図情報の一例を示す図である。図１７（ａ）に示すのは、表示制御部２１に供給すべきサイド画像Ｓが１つ決定している（例えば、図１２の静止画img003）場合に、当該サイド画像Ｓを、判定されたオブジェクトに応じてどのように加工するのかを示す画像加工方法情報が、表示指図情報として記憶されている例である。図１７（ａ）に示す例では、表示オブジェクトに関連付けて、画像加工方法情報が記憶されている。
【０１２６】
例えば、アプリケーション実行部５０によってメールアプリケーション７０が実行されており、メールアプリケーション７０が受信メールを表示するために実行結果を出力したとする。このとき、表示オブジェクト判定部５４は、実行結果に基づいて、メイン画像Ｍに、テキストのオブジェクトが含まれていると判定する。
【０１２７】
画像加工指示部６１は、表示オブジェクト判定部５４が、表示オブジェクトはテキストであると判定したことを受けて、表示指図情報記憶部８１を参照し、図１７（ａ）に示す表示指図情報から、「オブジェクト：テキスト」に関連付けられている「画像加工方法情報：文字の大きさに最も近い拡縮率で、タイル張りで表示」を取得する。次に、画像加工指示部６１は、取得した画像加工方法情報にしたがって、設定情報記憶部８２の設定情報のうち、設定されている文字サイズを取得して、当該文字サイズと、サイド画像Ｓの静止画img003のイメージサイズとがほぼ同じなる拡縮率を選択して、拡縮率記憶部３６のフラグを更新する。
【０１２８】
以上のとおり、サイド画像記憶部８０にサイド画像が１種類しか記憶されていず、サイド画像指定部６０が備えられていない場合でも、当該サイド画像を、判定されたオブジェクトに応じて、覗き見防止に適したものに加工することを表示制御部２１に指示することができる。もちろん、上記構成は、サイド画像が複数記憶されており、サイド画像指定部６０が備えられた場合にも適用できる。
【０１２９】
図１７（ｂ）は、本実施形態における表示指図情報記憶部８１に記憶されている表示指図情報の他の例を示す図である。図１７（ｂ）に示すのは、サイド画像記憶部８０にサイド画像Ｓが複数記憶されている場合に、表示制御部２１に供給すべきサイド画像を決定するための画像指定情報が、表示指図情報として記憶されている例である。図１７（ｂ）に示す例では、表示オブジェクトに関連付けて、画像指定情報が記憶されている。
【０１３０】
例えば、アプリケーション実行部５０によってテレビアプリケーション７１が実行されており、メールアプリケーション７０がテレビ放送番組を表示するために実行結果を出力したとする。このとき、表示オブジェクト判定部５４は、実行結果に基づいて、メイン画像Ｍに、ビデオのオブジェクトが含まれていると判定する。
【０１３１】
サイド画像指定部６０は、表示オブジェクト判定部５４が、表示オブジェクトはビデオであると判定したことを受けて、表示指図情報記憶部８１を参照し、図１７（ｂ）に示す表示指図情報から、「オブジェクト：ビデオ」に関連付けられている「画像指定情報：img004またはimg005」を取得する。サイド画像指定部６０は、画像指定情報によって特定されたサイド画像をサイド画像記憶部８０から取得して、表示制御部２１に供給する。
【０１３２】
なお、上述の例のように、判定されたオブジェクトに対してサイド画像が複数関連付けられている場合には、両方の動画を交互に出力するように、表示制御部２１に対して供給してもよいし、ランダムでいずれか一方を選択して、一方の動画だけを供給してもよい。
【０１３３】
上記構成によれば、サイド画像記憶部８０に複数のサイド画像が記憶されている場合に、表示されるメイン画像Ｍの内容に応じて、覗き見防止に適したサイド画像を選択し、表示制御部２１に供給することが可能となる。この構成は、画像加工指示部６１と組み合わせて実現することも可能である。これにより、表示部２２の表示内容に応じて適切なサイド画像Ｓを選択した上で、さらに、表示内容に応じてより遮蔽効果が高まるように当該サイド画像Ｓを加工することを表示制御部２１に対して指示することが可能となる。
【０１３４】
結果として、表示制御部２１は、表示部２２に表示される内容に対して適切なサイド画像Ｓを合成、出力し続けることが可能となり、表示内容（メイン画像Ｍの内容）が変化しても、常に覗き見を防止することができる。
【０１３５】
なお、本実施形態の構成は、実施形態１のアプリケーション判定部５２と組み合わせることが可能である。この場合、判定されたアプリケーションおよび判定されたオブジェクトに基づいて、画像指定情報および／または画像加工方法情報が特定される。つまり、表示指図情報記憶部８１には、アプリケーションとオブジェクトとの組み合わせに関連付けて、表示指図情報が記憶されている。
【０１３６】
〔変形例〕
さらに、表示指図部５３は、サイド画像編集部６２を含む構成であってもよい。サイド画像編集部６２は、メイン画像Ｍの各オブジェクトのサイズや表示位置に応じて、当該メイン画像Ｍの遮蔽効果が高まるように、サイド画像指定部６０が選択したサイド画像Ｓ、または、サイド画像記憶部８０に記憶されているサイド画像Ｓを編集するものである。
【０１３７】
以下では、図１８（ａ）〜（ｃ）の具体例を参照しつつ、サイド画像編集部６２を含む主制御部１１の動作について説明する。
【０１３８】
図１８（ａ）は、ウェブブラウザアプリケーション７２の実行結果として出力されるメイン画像Ｍの一例を示す図である。表示オブジェクト判定部５４は、アプリケーション実行部５０が出力する実行結果の情報に基づいて、メイン画像Ｍがイメージ９０、イメージ９１およびテキスト９２の各オブジェクトを含むことを認識し、各オブジェクトの表示位置、各オブジェクトのサイズを取得する。
【０１３９】
表示指図部５３のサイド画像指定部６０は、表示オブジェクト判定部５４が取得した情報に応じて、図１７（ｂ）の表示指図情報にしたがって、サイド画像Ｓに使用する画像を取得する。具体的には、テキストに対応付けられている静止画img003と、イメージに対応付けられている静止画img001とをサイド画像記憶部８０から取得する。
【０１４０】
サイド画像編集部６２は、図１７（ａ）の表示指図情報にしたがって、テキスト遮蔽用の静止画img003については、該静止画img003が文字の大きさに近くなるよう拡大または縮小して、タイル張りにする。そして、イメージ遮蔽用の静止画img001については、禁止マークのオブジェクトが、それぞれのイメージ（９０、９１）の大きさに近くなるように上記オブジェクトを拡大または縮小して、各イメージに重畳する位置にレイアウトする。
【０１４１】
図１８（ｂ）は、サイド画像編集部６２が、静止画img003と、静止画img001と組み合わせて編集した結果得られるサイド画像Ｓの一例を示す図である。図１８（ｂ）に示すサイド画像Ｓにおいて、静止画９３（img003）は、文字サイズに近い大きさでタイル張りされており、静止画９４および静止画９５（img001）は、それぞれ、イメージ９０、９１のサイズに近い大きさで、各イメージオブジェクトの位置に配置されている。
【０１４２】
図１８（ｃ）は、サイド画像編集部６２が生成した図１８（ｂ）のサイド画像Ｓに基づいて、画像合成部３９が、図１８（ａ）のメイン画像Ｍを変調した場合に、その画像データが軸外から観察されたときの様子を説明する図である。メイン画像Ｍのうち、テキスト９２は、静止画９３のタイル張りによって効果的に遮蔽され、イメージ９０、９２は、それよりも注目度の高い静止画９４、９５によってそれぞれ効果的に遮蔽されている。
【０１４３】
このように、サイド画像編集部６２が、オブジェクトの大きさに応じて、サイド画像のオブジェクトを拡大縮小したり、オブジェクトの表示位置に応じて別のサイド画像を組み合わせて配置したりすることによって、メイン画像Ｍの内容に応じて、覗き見防止の観点からより効果的なサイド画像Ｓを生成し、表示制御部２１に供給することが可能となる。
【０１４４】
また、サイド画像編集部６２は、オブジェクトの色に応じて、当該オブジェクトが目立たなくなるような色を用いてサイド画像を編集してもよい。色を編集された後のサイド画像を重ねると、メイン画像Ｍのオブジェクトが目立たなくなり、メイン画像Ｍを軸外観察者から実質的に隠すことが可能となる。また、サイド画像編集部６２は、サイド画像の配色がコントラストの低い配色である場合には、コントラストの高い配色となるように（メイン画像よりも目立つように）サイド画像の色を編集してもよい。
【０１４５】
本発明は上述した実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能である。すなわち、請求項に示した範囲で適宜変更した技術的手段を組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
【０１４６】
最後に、携帯電話機１０における主制御部１１および表示制御部２１の各ブロック、特に、アプリケーション判定部５２および表示指図部５３の各部は、ハードウェアロジックによって構成してもよいし、次のようにＣＰＵを用いてソフトウェアによって実現してもよい。
【０１４７】
すなわち、携帯電話機１０は、各機能を実現する制御プログラムの命令を実行するＣＰＵ（central processing unit）、上記プログラムを格納したＲＯＭ（read only memory）、上記プログラムを展開するＲＡＭ（random access memory）、上記プログラムおよび各種データを格納するメモリ等の記憶装置（記録媒体）などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアである、携帯電話機１０の制御プログラムのプログラムコード（実行形式プログラム、中間コードプログラム、ソースプログラム）をコンピュータで読み取り可能に記録した記録媒体を、上記携帯電話機１０に供給し、そのコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。
【０１４８】
上記記録媒体としては、例えば、磁気テープやカセットテープ等のテープ系、フロッピー（登録商標）ディスク／ハードディスク等の磁気ディスクやＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤ／ＣＤ−Ｒ等の光ディスクを含むディスク系、ＩＣカード（メモリカードを含む）／光カード等のカード系、あるいはマスクＲＯＭ／ＥＰＲＯＭ／ＥＥＰＲＯＭ／フラッシュＲＯＭ等の半導体メモリ系などを用いることができる。
【０１４９】
また、携帯電話機１０を通信ネットワークと接続可能に構成し、上記プログラムコードを、通信ネットワークを介して供給してもよい。この通信ネットワークとしては、特に限定されず、例えば、インターネット、イントラネット、エキストラネット、ＬＡＮ、ＩＳＤＮ、ＶＡＮ、ＣＡＴＶ通信網、仮想専用網（virtual private network）、電話回線網、移動体通信網、衛星通信網等が利用可能である。また、通信ネットワークを構成する伝送媒体としては、特に限定されず、例えば、ＩＥＥＥ１３９４、ＵＳＢ、電力線搬送、ケーブルＴＶ回線、電話線、ＡＤＳＬ回線等の有線でも、ＩｒＤＡやリモコンのような赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）、８０２．１１無線、ＨＤＲ、携帯電話網、衛星回線、地上波デジタル網等の無線でも利用可能である。なお、本発明は、上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
【産業上の利用可能性】
【０１５０】
本発明は、軸外観察者からのメイン画像の覗き見を防止する目的でメイン画像にサイド画像を合成することが可能な電子機器において、上記サイド画像を、覗き見を防止の観点から、該電子機器の動作状態に応じて適切な状態に変更して出力することができる。したがって、空間的輝度変調によってメイン画像とサイド画像とを合成して表示制御を行う表示制御装置を備えた任意の電子機器に適用することができる。
【符号の説明】
【０１５１】
１０ 携帯電話機（電子機器）
１１ 主制御部
１２ バス
１３ 記憶部
１４ 表示装置
１５ 通信部
１６ 操作部
１７ 撮像部
２１ 表示制御部（表示制御装置）
２２ 表示部
３０ メイン画像用メモリ
３１ サイド画像用メモリ
３４ 配色パターン記憶部
３５ 色切替部
３６ 拡縮率記憶部
３７ 画像拡縮部
３８ 分割パラメータ記憶部
３９ 画像合成部
４０ 回転・反転情報記憶部
４１ 回転・反転部
４２ 配置パターン記憶部
４３ 画像配置部
５０ アプリケーション実行部
５１ アプリケーション制御部
５２ アプリケーション判定部（判定手段／アプリケーション判定手段）
５３ 表示指図部（表示指図手段）
５４ 表示オブジェクト判定部（判定手段／表示オブジェクト判定手段）
６０ サイド画像指定部（表示指図手段／サイド画像指定手段）
６１ 画像加工指示部（表示指図手段／画像加工指示手段）
６２ サイド画像編集部（表示指図手段／サイド画像編集手段）
７０ メールアプリケーション
７１ テレビアプリケーション
７２ ウェブブラウザアプリケーション
７３ 表計算アプリケーション
７４ テレビ通話アプリケーション
７５ 辞書アプリケーション
８０ サイド画像記憶部
８１ 表示指図情報記憶部
８２ 設定情報記憶部
９０ イメージ（メイン画像のオブジェクト）
９１ イメージ（メイン画像のオブジェクト）
９２ テキスト（メイン画像のオブジェクト）
９３ 静止画（サイド画像のオブジェクト）
９４ 静止画（サイド画像のオブジェクト）
９５ 静止画（サイド画像のオブジェクト）
【技術分野】
【０００１】
本発明は、空間的輝度変調によって表示用画像を表示するように液晶表示素子を制御する電子機器、電子機器の制御方法、制御プログラム、および、記録媒体に関するものである。
【背景技術】
【０００２】
従来から、携帯電話機、ＰＤＡ（Personal Digital Assistant）などの携帯型情報機器のディスプレイとして液晶ディスプレイ（ＬＣＤ）が広く利用されている。ＬＣＤは、ＣＲＴ（Cathode Ray Tube）、プラズマディスプレイなどに比べて、視野角が狭いことが欠点とされてきたが、近時のＬＣＤ技術の進歩により、視野角の広角化が進められている。
【０００３】
しかしながら、上記携帯型情報機器は、電車やバスの車内などにおいて混雑した状況で利用すると、上記携帯型情報機器の表示画面に表示された内容が周囲の人に覗き見される虞がある。特に、電子メールの作成および閲覧を行う場合には、その内容が周囲の人に覗き見されることはプライバシー上好ましくない。
【０００４】
この問題に対応して、視野角を制御できるＬＣＤが提案されている（例えば、特許文献１参照）。このようなＬＣＤでは、通常の広視野角モード（パブリックモード）と、視野角の狭い狭視野角モード（プライベートモード）との何れか一方から他方に切り替え可能となっている。なお、狭視野角モードとは、ユーザのいる表示画面真正面からは通常どおりの表示画像が視認でき、斜め方向からは無地画像または別の画像が見えるモードである。
【０００５】
特許文献１に記載の表示装置では、液晶表示パネルが、視野角の狭い範囲では線形のデータ値／輝度応答性を有し、視野角の狭い範囲の外では非線形のデータ値／輝度応答性を有することを利用している。
【０００６】
具体的には、原画像における隣接するデータ値を、一方は分割値を加算し、他方は分割値を減算することにより修正（変調）する。修正された画像は、表示画面の法線に平行な軸上で上記表示画面を見た場合、人間の目が空間的平均化を行うため、上記原画像と同等の画像として視認されるが、軸外で上記表示画面を見た場合、上記分割値の要素が追加されることになる。上記分割値が上記修正された画像内でマスキング画像と比例した割合で変化する場合、軸外、すなわち上記表示画面に対して斜め方向では原画像とマスキング画像とがともに視認可能となる。マスキング画像が、格子縞模様や企業のロゴなどの攪乱パターンを有する場合、軸外の観察者に対しては、原画像は実質的に隠される。これにより、プライベートモードが実現され、軸上の観察者は覗き見されることなく原画像を見ることができる。なお、本明細書では、軸外の観察者によってのみ視認される上記マスキング画像をサイド画像と称する。また、上記原画像をサイド画像に対し、メイン画像と称する。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００７−０１７９８８号公報（２００７年０１月２５日公開）
【発明の概要】
【発明が解決しようとする課題】
【０００８】
上述したとおり、サイド画像（マスキング画像）は、軸外観察者から、メイン画像（原画像）が覗き見されることを防止するために合成されるものである。したがって、サイド画像としては、メイン画像に対して、遮蔽効果が高い画像、注目度の高い（目立つ、目に付きやすい）画像が適しているといえる。
【０００９】
携帯電話機の機能によって、メイン画像としては、大小、色、形、様々なオブジェクトが表示されるため、覗き見防止に最も効果的なサイド画像は、メイン画像の内容（オブジェクト）によって異なる、といえる。
【００１０】
しかしながら、メイン画像の内容は、携帯電話機の動作状態によって、すぐに変化するものである。したがって、携帯電話機の動作状態（メイン画像の内容）にかかわらず、常に、覗き見防止の効力を発揮するサイド画像を表示し続けることはできないという問題があった。この問題は、上記携帯電話機に限らず、多機能が搭載された、様々な大きさ、色、形、動きのオブジェクトを表示可能な電子機器において、共通に生じる問題である。
【００１１】
本発明は、上記の問題点に鑑みてなされたものであり、その目的は、電子機器の動作状態に応じて、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を出力する電子機器、電子機器の制御方法、制御プログラム、および、記録媒体を実現することにある。
【課題を解決するための手段】
【００１２】
本発明の電子機器は、上記課題を解決するために、空間的輝度変調によって表示用画像を表示画面に表示するように液晶表示素子を制御する表示制御装置を制御する電子機器であって、上記表示制御装置は、上記液晶表示素子からの輝度に関して、上記表示画面の法線に平行な軸方向に対する輝度と軸外の方向に対する輝度との非線形な対応関係と、当該電子機器が供給するサイド画像の画像データとに基づいて、当該電子機器が動作することによって得られるメイン画像の画像データを変調し、変調した画像データを上記表示用画像の画像データとすることによって、メイン画像とサイド画像とを合成して表示するものであり、当該電子機器は、当該電子機器の動作状態を判定する判定手段と、上記動作状態と、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像の表示を上記表示制御装置に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部と、上記表示指図情報記憶部において上記判定手段によって判定された上記動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する表示指図手段とを備えていることを特徴としている。
【００１３】
上記構成によれば、上記電子機器は、自機の動作結果を表示画面に表示するためのメイン画像と、該メイン画像を軸外の方向からの観察者から遮蔽するためのサイド画像とを表示制御装置に供給して、メイン画像とサイド画像とを合成して表示するよう上記表示制御装置に指図する。そして、上記電子機器は、自機の動作状態と、それに合わせた表示指図情報とを関連付けて記憶する表示指図情報記憶部を備えている。表示指図情報は、電子機器が、上記表示制御装置に対して、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像を合成するよう指図するためのものである。
【００１４】
具体的には、電子機器の上記判定手段は、まず、自機の動作状態を判定する。続いて、上記表示指図手段は、上記判定手段が判定した自機の動作状態に対応する表示指図情報を表示指図情報記憶部から特定する。表示指図手段は、その表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する。
【００１５】
これにより、電子機器が表示制御装置に対して行ったサイド画像表示の指図は、メイン画像が軸外の方向からの観察者から遮蔽されるという目的において、電子機器の動作状態に合わせて行われた適切な指図である。
【００１６】
このような指図にしたがって、表示制御装置は、電子機器の動作によって得られたメイン画像が適切に遮蔽されるようにサイド画像を合成し、表示用画像を出力することができる。
【００１７】
結果として、電子機器の動作状態に応じて、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を出力することが可能となる。
【００１８】
上記電子機器の上記表示指図情報記憶部には、当該電子機器の動作状態と、上記表示制御装置に供給すべきサイド画像を指定する画像指定情報とが関連付けて記憶されており、上記表示指図手段は、上記判定手段によって判定された上記動作状態に関連付けられている画像指定情報が指定するサイド画像を、上記表示制御装置に供給するサイド画像指定手段を含んでいてもよい。
【００１９】
これにより、電子機器は、自機の動作状態に応じて、覗き見防止上適切なサイド画像を選択し、表示させることができる。
【００２０】
上記電子機器の上記表示指図情報記憶部には、当該電子機器の動作状態と、上記サイド画像の加工方法を示す画像加工方法情報とが関連付けて記憶されており、上記表示指図手段は、上記判定手段によって判定された上記動作状態に関連付けられている画像加工方法情報が示す画像加工方法にて上記サイド画像を加工するよう、上記表示制御装置を制御する画像加工指示手段を含んでいてもよい。
【００２１】
これにより、電子機器は、自機の動作状態に応じて、覗き見防止上適切な方法でサイド画像を表示させることができる。
【００２２】
上記電子機器の上記判定手段は、当該電子機器が実行中のアプリケーションを判定するアプリケーション判定手段を含み、上記表示指図情報記憶部には、当該電子機器が実行可能なアプリケーションと、上記表示指図情報とが関連付けて記憶されており、上記表示指図手段は、上記アプリケーション判定手段によって判定されたアプリケーションに関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図してもよい。
【００２３】
これにより、電子機器は、自機が実行するアプリケーションに応じて、覗き見防止上適切なサイド画像表示を実現することができる。
【００２４】
上記電子機器の上記判定手段は、当該電子機器が動作することによって得られるメイン画像に含まれているオブジェクトの種類を判定する表示オブジェクト判定手段を含み、上記表示指図情報記憶部には、上記オブジェクトの種類と、上記表示指図情報とが関連付けて記憶されており、上記表示指図手段は、上記表示オブジェクト判定手段によって判定されたオブジェクトの種類に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図してもよい。
【００２５】
これにより、電子機器は、自機が動作結果を表示中の内容（オブジェクト）に応じて、覗き見防止上適切なサイド画像表示を実現することができる。
【００２６】
上記電子機器の上記表示指図情報記憶部には、上記オブジェクトの種類としての動画に関連付けて、上記サイド画像を動画で表示するように上記表示制御装置に指図する表示指図情報が記憶されており、上記表示指図手段は、上記表示オブジェクト判定手段が、上記メイン画像に動画が含まれていると判定した場合に、上記表示指図情報にしたがって、サイド画像を動画で表示することを上記表示制御装置に対して指図してもよい。
【００２７】
上記構成によれば、上記表示指図情報記憶部には、「オブジェクトの種類：動画」に対応付けて、「サイド画像を動画で表示する」という表示指図情報が記憶されている。
【００２８】
上記電子機器が動作した結果、メイン画像に動きを伴う動画オブジェクトが表示されている場合には、上記表示オブジェクト判定手段が、オブジェクトに動画が含まれていると判定する。この場合、上記表示指図手段は、「オブジェクトの種類：動画」に対応付けられた上記表示指図情報にしたがって、サイド画像を動画で表示することを上記表示制御装置に対して指図する。これにより、メイン画像に動画が表示されている場合に、サイド画像を動画で表示することができ、効果的にメイン画像を隠蔽することができる。
【００２９】
なぜなら、電子機器が動画のオブジェクトを表示している場合、メイン画像は、常に動きのある映像が全画面に映し出される状態になる。このようなメイン画像に対して覗き見防止効果が期待できるサイド画像としては、サイド画像に動画が表示されていることが有効である。メイン画像の動きを攪乱するように動きが付いたサイド画像（例えば、メイン画像の動きと反対の動きを伴うサイド画像）が表示されれば、メイン画像の動画を、軸外観察者から効果的に隠すことが可能である。
【００３０】
上記表示オブジェクト判定手段は、さらに、上記メイン画像に含まれている各種オブジェクトのサイズおよび表示位置を取得するものであり、上記表示指図手段は、上記メイン画像のオブジェクトのサイズ、および、表示位置に基づいて、当該オブジェクトを軸外の方向からサイド画像が遮蔽するように、上記サイド画像を編集するサイド画像編集手段を含むことが好ましい。
【００３１】
上記サイド画像編集手段は、上記表示オブジェクト判定手段が取得した、上記メイン画像のオブジェクトのサイズに合わせて、上記サイド画像のオブジェクトを拡大または縮小することが好ましい。
【００３２】
サイド画像のオブジェクトの注目度が高まり、メイン画像のオブジェクトを実質的に隠すことが可能となる。
【００３３】
本発明の電子機器の制御方法は、上記課題を解決するために、空間的輝度変調によって表示用画像を表示画面に表示するように液晶表示素子を制御する表示制御装置を制御する電子機器の制御方法であって、上記表示制御装置は、上記液晶表示素子からの輝度に関して、上記表示画面の法線に平行な軸方向に対する輝度と軸外の方向に対する輝度との非線形な対応関係と、当該電子機器が供給するサイド画像の画像データとに基づいて、当該電子機器が動作することによって得られるメイン画像の画像データを変調し、変調した画像データを上記表示用画像の画像データとすることによって、メイン画像とサイド画像とを合成して表示するものであり、上記電子機器において、上記電子機器の動作状態を判定する判定ステップと、上記動作状態と、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像の表示を上記表示制御装置に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部において、上記判定ステップにて判定された上記動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する表示指図ステップとを含むことを特徴としている。
【００３４】
なお、上記電子機器は、コンピュータによって実現してもよく、この場合には、コンピュータを上記各手段として動作させることにより上記電子機器をコンピュータにて実現させる電子機器の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。
【００３５】
上述した本発明がどのように課題を解決するのかを、具体例を用いて説明すると、以下のとおりである。上述したとおり、覗き見防止に最も効果的なサイド画像は、メイン画像の内容（オブジェクト）によって異なる。例えば、電子機器がメール作成画面または受信メール表示画面をメイン画像として表示している場合、メイン画像は、文字がたくさん整列して配置されている画像になる。このようなメイン画像に対して覗き見防止効果が期待できるサイド画像としては、チェック柄、水玉模様など上記文字の大きさ程度の絵が敷き詰められた画像が考えられる。このようにオブジェクト（ここでは文字）の大きさに合った、適度に細かい柄の画像は、大きい絵柄の画像にできるような広い隙間（非変調領域）や広範囲に均質な領域がないために、その領域で文字が目に付くということが無く、覗き見される心配がない。一方、均一性の高い細かすぎる画像（網点模様など）は、文字に比べて模様が小さすぎて、模様の下の文字の方が目立ってしまうことになる。また、コントラストの低い配色のサイド画像についても、メイン画像の文字より目立たないので不適切である。
【００３６】
あるいは、電子機器がテレビ機能を実行している場合、メイン画像は、常に動きのある映像が全画面に映し出される状態になる。このようなメイン画像に対して覗き見防止効果が期待できるサイド画像としては、サイド画像が動画であることが有効である。メイン画像の動きを攪乱するように動きが付いたサイド画像（例えば、メイン画像の動きと反対の動きを伴うサイド画像）が表示されれば、メイン画像の動画を、軸外観察者から効果的に隠すことが可能である。
【００３７】
このように、覗き見防止に最も効果的なサイド画像は、メイン画像の内容（オブジェクト）によって異なるが、メイン画像の内容は、電子機器の動作状態によって、忙しく変化するものである。例えば、電子機器で、メールを作成している間は、適度な大きさの格子柄のサイド画像が適していたが、その後すぐにテレビ放送に表示を切り替えると、当該サイド画像が最適であるとは限らないということである。
【００３８】
本発明の電子機器の上記構成によれば、上記不都合を解消することができる。すなわち、電子機器の動作状態を判定し、そのときの動作状態において、適切なサイド画像を適切な方法で合成表示することができる。したがって、電子機器においてメイン画像の内容が激しく変化するような状況でも、常に覗き見防止効果を発揮するようサイド画像を出力することが可能である。
【発明の効果】
【００３９】
本発明の電子機器は、上述したとおり、当該電子機器の動作状態を判定する判定手段と、上記動作状態と、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像の表示を上記表示制御装置に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部と、上記表示指図情報記憶部において上記判定手段によって判定された上記動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する表示指図手段とを備えていることを特徴としている。
【００４０】
したがって、電子機器の動作状態に応じて、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を出力することが可能になるという効果を奏する。
【図面の簡単な説明】
【００４１】
【図１】本発明の実施形態にかかる電子機器としての携帯電話機の要部構成を示す機能ブロック図である。
【図２】本発明の実施形態にかかる電子機器としての携帯電話機の概略構成を示すブロック図である。
【図３】隣接する画素の輝度を示す図である。
【図４】（ａ）および（ｂ）は、階調値に対する輝度の応答性を示すグラフである。
【図５】上記電子機器におけるメイン画像の階調値と、表示用画像の階調値との対応関係を示すグラフである。
【図６】上記電子機器における正面視の画像と側面視の画像とを示す図である。
【図７】本発明の一実施形態である電子機器における表示制御部の概略構成を示すブロック図である。
【図８】（ａ）は、表示制御部の配置パターン記憶部に記憶されている配置パターンの具体例を示す図であり、（ｂ）は、上記配置パターンの一例にしたがってサイド画像が配置されたときの表示部における表示態様を示す図である。
【図９】（ａ）は、表示制御部の配色パターン記憶部３４に記憶されている配色パターンの具体例を示す図であり、（ｂ）は、上記配色パターンの一例にしたがってサイド画像が着色されたときの表示部上での配色のパターンを示す図である。
【図１０】表示制御部の回転・反転情報記憶部に記憶されている回転角の情報および反転方向の情報の具体例を示す図である。
【図１１】表示制御部の拡縮率記憶部に記憶されている拡縮率の情報の具体例を示す図である。
【図１２】携帯電話機のサイド画像記憶部に記憶されているサイド画像の具体例を示す図である。
【図１３】携帯電話機の表示指図情報記憶部に記憶されている表示指図情報の具体例を示す図である。
【図１４】（ａ）および（ｂ）は、上記電子機器における側面視の画像を示す図であり、特に、携帯電話機の動作状態に応じて適切なサイド画像が選択されて、または、適切に加工されて、覗き見防止の効果を発揮している様子を説明する図である。
【図１５】本発明の実施形態における携帯電話機による、サイド画像の合成処理の流れを示す図である。
【図１６】本発明の他の実施形態にかかる携帯電話機の要部構成を示す機能ブロック図である。
【図１７】（ａ）は、本発明の実施形態における携帯電話機の表示指図情報記憶部に記憶されている表示指図情報の一例を示す図であり、（ｂ）は、上記表示指図情報の他の例を示す図である。
【図１８】（ａ）は、メイン画像Ｍの一例を示す図であり、（ｂ）は、サイド画像編集部６２が編集したサイド画像Ｓの一例を示す図であり、（ｃ）は、上記メイン画像Ｍに上記サイド画像Ｓが合成されたときに、上記電子機器において軸外から観察される側面視の画像を示す図である。
【発明を実施するための形態】
【００４２】
≪実施形態１≫
以下、本発明の一実施形態について図１〜図１８を参照して説明する。図２は、本実施形態の電子機器の概略構成を示している。本実施形態では、この電子機器を携帯電話機１０として説明するが、電子機器の例としては、ＰＤＡ（Personal Digital Assistant）、電子辞書、携帯型通信端末などの携帯型電子機器が挙げられる。またこれに限らず、本発明は、ＬＣＤ（Liquid Crystal Display）ユニット（液晶表示装置）を備えた任意の電子機器に適用することができる。
【００４３】
図２に示すように、携帯電話機１０は、主制御部１１、バス１２、記憶部１３、表示装置１４、通信部１５、操作部１６、および、撮像部１７を備える構成である。
【００４４】
主制御部１１は、例えばＲＡＭ（Random Access Memory）やフラッシュメモリなどの記憶素子に記憶されたプログラムを実行することにより、各種の演算を行うと共に、携帯電話機１０内の各種ユニットの統括的な制御を、バス１２を介して行うものであり、例えば、ＣＰＵなどで実現される。本実施形態では、主制御部１１は、バス１２を介して表示装置１４に、メイン画像およびサイド画像の画像データ、各種指示などを送信している。ここで、サイド画像は、覗き見防止などの目的で、メイン画像を撹乱するためにメイン画像に重畳される画像をいう。
【００４５】
バス１２は、携帯電話機１０内の各種構成間でデータの送受信を行うための共通の信号線である。記憶部１３は、各種データおよびプログラムを記憶するものである。記憶部１３の例としては、主制御部１１が動作するときに必要なプログラム等の固定データを記憶する読出し専用の半導体メモリであるＲＯＭ（Read Only Memory）と、演算に使用するデータ及び演算結果等を一時的に記憶するいわゆるワーキングメモリとしてのＲＡＭとが挙げられる。
【００４６】
表示装置１４は、主制御部１１または記憶部１３からバス１２を介して画像データを受信し、受信した画像データに基づいて画像を表示するものである。表示装置１４は、表示部２２および表示制御部２１を備える構成である。
【００４７】
表示部２２は、表示用画像の画像データに基づいて表示素子に文字、記号、図形などの画像を表示させる機能単位であり、表示画素がマトリクス状に配列されたマトリクス型のＬＣＤ素子（液晶表示素子）と、該ＬＣＤ素子を駆動する駆動回路とを備えるものである。上記ＬＣＤ素子は、光源からの入射光の輝度を空間的に変調する空間的輝度変調によって画像を表示するものである。なお、画像には、静止画像および動画像が含まれる。本実施形態では、表示部２２は、以下の構成を備えたＬＣＤモジュールとして実現される。例えば、ＬＣＤモジュールは、光源の洩光を防ぐための反射シート、光源が出す光を伝播させるための導光板、前方（観察者の視点への方向）への集光効果を持つレンズシート、および、光源の光を均一に拡散させ、光の濃淡（ムラ）を取り除くための拡散シートに、上記ＬＣＤ素子と上記駆動回路とを備えるＬＣＤパネルが積層された構成となっている。
【００４８】
表示制御部２１は、表示部２２を制御するものである。具体的には、表示制御部２１は、上記表示用画像の画像データを表示部２２に送信すると共に、表示部２２を表示制御するための複数の制御信号を送信している。この制御信号の例としては、垂直同期信号、水平同期信号、表示用画像の画像データをＬＣＤ素子の各表示画素に転送するための転送クロック信号などが挙げられる。本実施形態では、表示制御部２１として、例えば、上述のＬＣＤモジュールを制御するＬＣＤコントローラを採用することができる。
【００４９】
通信部１５は、携帯電話機１０が通信網（携帯電話網、インターネットなど）を介して、外部の通信装置と通信するためのものである。本実施形態では、電子機器は、携帯電話機１０であるので、例えば、通信部１５は、電波を送受信するアンテナ部、携帯電話機１０が扱うデータと無線信号との形式変換を行う無線処理部、および、データの符号化／復号化を行うデータ処理部などから構成される。
【００５０】
操作部１６は、携帯電話機１０の本体に設けられた操作ボタンなどの入力デバイスをユーザが操作することにより、操作データを作成して主制御部１１に供給するものである。入力デバイスとしては、ボタン（十字キーやテンキーなど）、スイッチ、あるいは、タッチパネルなどが挙げられる。
【００５１】
撮像部１７は、被写体を撮像して、画像、動画などのデータを生成するものである。具体的には、撮像部１７は、被写体からの光を電気信号に変換するＣＣＤ（Charge Coupled Device）、ＣＭＯＳ（Complementary Metal-oxide Semiconductor）などの撮像素子と、撮像素子からの電気信号をＲＧＢ各色のデジタルデータに変換する映像処理回路とを備える構成が挙げられる。例えば、携帯電話機１０にて、テレビ通話を行う場合には、撮像部１７によって撮像中の自分の動画が、通信部１５を介して、テレビ通話の相手に送信される。
【００５２】
〔サイド画像の原理〕
本実施形態では、表示部２２のＬＣＤ素子の表示画面から該表示画面の法線方向に存在する領域（以下、この領域を「軸上の領域」と称する。）Ａｏｎに位置する軸上観察者Ｖｏｎは、メイン画像を視認するようになっている。一方、上記表示画面を視認可能な領域であって、上記軸上の領域以外の領域（以下、この領域を「軸外の領域」と称する。）Ａｏｆｆに位置する軸外観察者Ｖｏｆｆは、メイン画像とサイド画像とが合成された画像を視認するようになっている。この原理について以下に説明する。
【００５３】
一般に、観察者は、表示素子から離れるに従って、該表示素子における隣接する画素同士が判別し難くなり、ついには判別できなくなる。このとき、観察者は、上記隣接する画素における輝度の平均値（平均輝度）を知覚することになる。
【００５４】
このことから、図３に示すことが言える。図３は、隣接する画素の輝度を示している。まず、同図の（ａ）に示すように、隣接する画素ｐ１・ｐ２同士の輝度は等しく、Ｉ０とする。次に、同図の（ｂ）に示すように、一方の画素ｐ１は、元の輝度Ｉ０から或る輝度Ｉ１を減算した輝度に変更し、他方の画素ｐ２は、元の輝度Ｉ０に或る輝度Ｉ１を加算した輝度に変更する。この場合、観察者は、上記隣接する画素ｐ１・ｐ２同士が判別できなくなると、同図の（ｃ）に示すように、上記隣接する画素ｐ１・ｐ２の領域ｐ１２は、画素ｐ１の輝度（Ｉ０−Ｉ１）と画素ｐ２の輝度（Ｉ０＋Ｉ１）との平均輝度、すなわち元の輝度Ｉ０を知覚することになる。
【００５５】
すなわち、隣接する画素の輝度を同図の（ｂ）のように変更しても、隣接する画素同士が判別できない程度に観察者が表示素子から離れると、該観察者にとっては、同図の（ａ）のような元の輝度が知覚されることになる。
【００５６】
ところで、通常の表示素子は、出力される輝度が、入力される階調値（例えば、画像データが８ビットデータの場合、０〜２５５）に比例応答せず、該階調値の定数乗（γ乗）に比例応答している。このため、通常の表示ユニットは、ガンマ補正が行われて、出力される輝度が、入力される階調値に比例応答するようになっている。
【００５７】
図４は、上記階調値に対する上記輝度の応答性を示すグラフである。ガンマ補正後の上記階調値と上記輝度とは、同図の（ａ）に示すように、比例しており、線形性を有している。この場合、階調値（原値）Ｄ０に対応する輝度をＩ０とすると、原値Ｄ０から分割値Ｄ１だけ加算および減算をそれぞれ行った階調値（Ｄ０＋Ｄ１）および階調値（Ｄ０−Ｄ１）に対応する輝度は、それぞれ輝度（Ｉ０＋Ｉ１）および輝度（Ｉ０−Ｉ１）となる。従って、平均輝度はＩ０となり、原値Ｄ０に対応する輝度Ｉ０と同じとなる。
【００５８】
しかしながら、ＬＣＤ素子の場合、軸上の方向に通過する光と、軸外の方向に通過する光とは、液晶を通過する光路長が異なっているのみならず、光の進行方向に対する液晶分子の傾きの違いに起因した複屈折性が異なっている。このため、軸上の方向に通過する光に関しては、図４の（ａ）のように、上記階調値に対する上記輝度の応答性が線形となるようにガンマ補正を行ったとしても、軸外の方向に通過する光に関しては、上記応答性が非線形となる。
【００５９】
図４の（ｂ）は、上記応答性が非線形である場合を示している。同図の（ｂ）を参照すると、この場合、階調値（原値）Ｄ０に対応する輝度Ｉ２は、原値Ｄ０から分割値Ｄ１だけ加算した階調値（Ｄ０＋Ｄ１）に対応する輝度と、原値Ｄ０から分割値Ｄ１だけ減算した階調値（Ｄ０−Ｄ１）に対応する輝度との平均輝度Ｉ３と異なることが理解できる。
【００６０】
そこで、メイン画像に対し、隣接する画素の一方は原値Ｄ０から分割値Ｄ１だけ加算し、他方は原値Ｄ０から分割値Ｄ１だけ減算するように階調値が変調され、変調された画像がＬＣＤ素子に表示される場合を考える。この場合、軸上観察者は、メイン画像と同等の画像（平均輝度Ｉ３）を視認することになるが、軸外観察者は、メイン画像に対し、分割値Ｄ１に対応して変調された画像（輝度Ｉ２）を視認することになる。従って、本実施形態では、メイン画像の上記隣接する画素の分割値Ｄ１を、サイド画像の対応する画素の階調値に対応付けている。これにより、軸外観察者は、メイン画像にサイド画像が合成された画像を視認することになる。
【００６１】
ところで、図４の（ｂ）を参照すると、分割値Ｄ１が大きくなるほど、輝度Ｉ２と平均輝度Ｉ３との差が大きくなることが理解できる。本実施形態の場合、輝度Ｉ２と平均輝度Ｉ３との差が大きいと、軸外観察者はサイド画像をより明確に視認することになるので、メイン画像の覗き見防止の観点から望ましい。従って、分割値Ｄ１は大きい方が望ましい。
【００６２】
一方、階調値は０以上である必要があるので、原値Ｄ０から分割値Ｄ１だけ減算した階調値（Ｄ０−Ｄ１）も０以上である必要がある。このため、階調値（Ｄ０−Ｄ１）は、０または０に近い正数となるような分割値Ｄ１を設定することが望ましい。また、原値Ｄ０から分割値Ｄ１だけ加算した階調値（Ｄ０＋Ｄ１）は、階調値の最大値以下である必要がある。このため、メイン画像は、利用可能な階調値の範囲を圧縮する必要がある。
【００６３】
図５は、本実施形態におけるメイン画像の階調値と、表示用画像の階調値との対応関係を示すグラフであり、分割値Ｄ１に関する上記条件を満たすものである。なお、図５は、サイド画像が２階調（０または２５５）の例を示している。ここで、階調値が０の場合、サイド画像はメイン画像を撹乱する度合が最も高い（最大撹乱）とし、階調値が２５５の場合、サイド画像はメイン画像を撹乱しない（無撹乱）とする。また、図５の例では、実線および破線が直線で表現されているが、実際には曲線であることが多い。
【００６４】
図５の実線は、サイド画像の階調値が２５５（無撹乱）の場合を示している。この場合、表示用画像の階調値は、メイン画像の圧縮された原値Ｄ０’となる。また、図５の破線は、サイド画像の階調値が０（最大撹乱）の場合を示している。この場合、表示用画像における隣接する画素の階調値は、一方が、メイン画像の圧縮された原値Ｄ０’から分割値Ｄ１だけ加算された階調値（Ｄ０’＋Ｄ１）となり、他方が、メイン画像の圧縮された原値Ｄ０’から分割値Ｄ１だけ減算した階調値（Ｄ０’−Ｄ１）となる。なお、サイド画像が多階調である場合は、サイド画像の階調値に応じて図５の２つの破線と同様のグラフが、図５の実線と２つの破線との間に記載されることになる。
【００６５】
従って、本実施形態の表示制御部２１は、図５に示すような、メイン画像の階調値と分割値Ｄ１との対応関係を分割パラメータとして記憶しておき、メイン画像の階調値を、サイド画像の階調値と上記分割パラメータとに基づいて変調し、これを表示用画像の階調値として表示部２２に送信している。これにより、軸上観察者は、メイン画像と同じ画像を視認する一方、軸外観察者は、メイン画像にサイド画像が合成された画像を視認することになる。その結果、軸外観察者は、メイン画像がサイド画像によって撹乱されて視認し難くなるので、メイン画像は、軸上観察者のみが視認できることになる。
【００６６】
図６は、軸外観察者から見てメイン画像がサイド画像によって撹乱される現象を示す図である。上述したとおり、表示画面を正面から見る軸上観察者には、メイン画像（図６の例では四葉のクローバー）のみが視認される。一方、表示画面を側面から見る軸外観察者は、上記メイン画像にサイド画像（図６の例では禁止マーク）が合成された画像を視認することになる。図６に示す例では、禁止マークの着色部分が、上記分割値によって階調値が変調された変調領域となる。禁止マークのサイド画像は、非変調領域（隙間）が広く、小さい文字がたくさん配置されたメール作成画面などのメイン画像であれば、覗き見防止の観点からサイド画像に適していないと判断される。しかしながら、図６に示すようなクローバーのオブジェクトを遮蔽するには、当該オブジェクトとほぼ同じ大きさの禁止マークをサイド画像として採用することが有益である。本発明は、このように、メイン画像の表示内容に合わせて、覗き見防止の観点から最適なサイド画像を出力することが可能である。
【００６７】
具体的には、本実施形態にかかる携帯電話機１０は、携帯電話機１０の動作状態、すなわち、表示部２２にメイン画像として何が表示されているのかに応じて、その状況下で覗き見防止の効力を発揮できるサイド画像を選択し、該サイド画像を表示制御部２１に対して供給するものである。あるいは、本発明の携帯電話機１０は、サイド画像が、上記状況下で覗き見防止の効力を発揮できる態様で出力されるよう、サイド画像の加工方法を表示制御部２１に指図するものである。
【００６８】
〔表示制御部の構成〕
まず、主制御部１１から供給されたサイド画像を、主制御部１１の指図にしたがって合成する表示制御部２１の詳細について説明する。
【００６９】
図７は、本発明の表示制御部２１において、メイン画像およびサイド画像を用いて表示用画像を作成することに関する概略構成を示すブロック図である。図７に示すように、表示制御部２１は、少なくとも、メイン画像用メモリ３０、サイド画像用メモリ３１、分割パラメータ記憶部３８および画像合成部３９を備える構成であり、さらに、表示制御部２１は、サイド画像を加工するための画像加工部としての配色パターン記憶部３４、色切替部３５、拡縮率記憶部３６、画像拡縮部３７、回転・反転情報記憶部４０、回転・反転部４１、配置パターン記憶部４２、および、画像配置部４３を備えていてもよい。
【００７０】
メイン画像用メモリ３０は、主制御部１１（記憶部１３）からのメイン画像Ｍの画像データを取得して記憶するフレームバッファである。メイン画像用メモリ３０に記憶されたメイン画像Ｍの画像データは、所定のタイミングで画像合成部３９に送信される。
【００７１】
サイド画像用メモリ３１は、主制御部１１（記憶部１３）からのサイド画像Ｓの画像データを取得して記憶するものである。本実施形態では、メモリ容量の節約のために、サイド画像用メモリ３１の容量をメイン画像用メモリ３０の４分の１とし、サイド画像Ｓを、メイン画像Ｍの４分の１のサイズで記憶するようになっている。したがって、サイド画像Ｓは、メイン画像Ｍと合成されるときには、画像拡縮部３７によって、縦、横方向のそれぞれに２倍ずつ拡大される。なお、表示制御部２１の構成は、これに限定されるものではない。
【００７２】
配置パターン記憶部４２は、サイド画像Ｓのレイアウトのパターン（配置パターン）を記憶するものである。また、画像配置部４３は、配置パターン記憶部４２に記憶されている配置パターンにしたがって、サイド画像Ｓの配置を決定するものである。本実施形態では、画像配置部４３は、一例として、配置パターン記憶部４２に記憶されているタイル張りの配置パターンに応じて、メイン画像Ｍに重畳するサイド画像Ｓのタイル張りを行う。
【００７３】
図８（ａ）は、配置パターン記憶部４２に記憶されている配置パターンの具体例を示す図であり、（ｂ）は、上記配置パターンの一例にしたがってサイド画像が配置されたときの表示部２２における表示態様を示す図である。図８（ａ）に示すとおり、配置パターン記憶部４２には、複数の配置パターンが記憶されており、各配置パターンには、画像配置部４３が当該配置パターンに従えばよいのか否かを示すフラグが関連付けられている。なお、このデータ構造は一例であって、本発明の構成を限定するものではない。
【００７４】
配置パターンの具体例としては、例えば、サイド画像Ｓ（１枚の画像）を、表示画面に配置することが考えられる（図８（ａ）の“１＊１（タイル張り無し）”）。この配置パターンに従えば、サイド画像Ｓが１枚、メイン画像Ｍに合成されることが決定される。あるいは、サイド画像Ｓを、表示画面に横×縦＝２枚×２枚でタイル張りするパターンが考えられる（図８（ａ）の“２＊２”）。この場合、図８（ｂ）に示すとおり、サイド画像Ｓ（４枚）は、表示部２２の表示画面を２＊２で分割した４つの領域にそれぞれ配置されることになる。なお、サイド画像Ｓを分割した領域に配置するときの、拡縮は、後述の拡縮率記憶部３６および画像拡縮部３７によって行われる。
【００７５】
また、配置パターン記憶部４２において、複数の配置パターンに対してフラグが立っていてもよい。この場合、画像配置部４３は、フラグが立っている配置パターンうち、参照する配置パターンを所定のタイミングで切り替えて、サイド画像Ｓの配置を当該タイミングで切り替える。
【００７６】
配色パターン記憶部３４は、複数の配色パターンのデータを記憶するものである。また、色切替部３５は、配色パターン記憶部３４における上記複数の配色パターンを利用して、サイド画像の配色パターンを所定のタイミングで切り替えるものである。サイド画像の配色パターンを変化させることにより、サイド画像の動画化を実現することができる。
【００７７】
図９（ａ）は、配色パターン記憶部３４に記憶されている配色パターンの具体例を示す図である。図９（ａ）に示すとおり、配色パターン記憶部３４には、あらかじめ登録されてある複数の色情報と、それらの色を用いた配色パターンが複数記憶されている。色情報は、例えば、色合い、階調などの値であって、表示制御部２１が再現可能な色を特定する情報である。各配色パターンには、色切替部３５が当該配色パターンに従えばよいのか否かを示すフラグが関連付けられている。なお、このデータ構造は一例であって、本発明の構成を限定するものではない。
【００７８】
具体的には、色切替部３５は、まず、配色パターン記憶部３４における複数の配色パターンの中から或る配色パターンを選択する。次に、色切替部３５は、選択された配色パターンのデータに基づいて、サイド画像用メモリ３１からのサイド画像の画像データの色情報を変更し、変更後のサイド画像の画像データを回転・反転部４１に送信する。そして、所定のタイミングで、色切替部３５は、上記或る配色パターンとは別の配色パターンを配色パターン記憶部３４における複数の配色パターンの中から選択し、上記動作を繰り返す。
【００７９】
図９（ｂ）は、上記配色パターンの一例にしたがってサイド画像が着色されたときの表示部２２上での配色パターンを示す図である。より詳細には、例えば、サイド画像Ｓ（＝オブジェクト）が、横×縦＝７＊１１で配置される場合であって、図９（ａ）に示す、配色パターン“１２３４５６７”が選択されている場合には、表示部２２の表示画面に表示された７＊１１個のオブジェクトは、以下のような配色パターンで表示される。すなわち、図９（ｂ）に示すとおり、一行目の７つのオブジェクトは、左から順に、１２３４５６７の各色で着色され、以降の行は、２３４５６７１、・・・、７１２３４５６、というように最初の配色から１つずつ左にずれたパターンで繰り返し着色される。
【００８０】
図９（ａ）に示すすべての配色パターンにフラグが立っている場合には、色切替部３５は、各配色パターンにしたがって、７＊１１個のオブジェクトの色を、所定のタイミングで切り替える。これにより、図９（ｂ）に示す配色パターンが、全体に左に１つずつ、ずれていき、軸外の観察者に対して、同色のオブジェクトが所定のタイミングで左に移動していくように見せかけることができる。
【００８１】
回転・反転情報記憶部４０は、回転角の情報と、左右反転、上下反転などの反転方向の情報とを記憶するものである。また、回転・反転部４１は、回転・反転情報記憶部４０における回転角の情報に基づいてサイド画像を所定のタイミングで回転したり、回転・反転情報記憶部４０における反転方向の情報に基づいてサイド画像を所定のタイミングで反転したりするものである。サイド画像を回転または反転することによりサイド画像の動画化を実現することができる。
【００８２】
図１０は、回転・反転情報記憶部４０に記憶されている回転角の情報および反転方向の情報の具体例を示す図である。図１０に示すとおり、回転・反転情報記憶部４０には、複数の回転角の情報、および、複数の反転方向の情報とが記憶されており、各情報には、回転・反転部４１がいずれの情報にしたがえばよいのかを示すフラグが関連付けられている。なお、図１０に示す回転角、反転方向の情報は一例であって、回転・反転情報記憶部４０の構成を限定するものではない。
【００８３】
具体的には、回転・反転部４１は、色切替部３５からのサイド画像の画像データに対し、回転・反転情報記憶部４０における回転角の情報に基づいて回転し、回転したサイド画像の画像データを画像拡縮部３７に送信し、上記動作を繰り返す。或いは、回転・反転部４１は、色切替部３５からのサイド画像の画像データに対し、回転・反転情報記憶部４０における反転方向の情報に基づいて反転し、反転したサイド画像の画像データを画像拡縮部３７に送信し、上記動作を繰り返す。
【００８４】
例えば、回転角の情報のすべてにフラグが立っている場合には、回転・反転部４１は、各回転角の情報にしたがって、サイド画像Ｓを所定のタイミングで順に回転させて表示することが可能となり、これにより、１つのオブジェクトが回転し続けている動画としてのサイド画像Ｓを実現することができる。
【００８５】
拡縮率記憶部３６は、画像サイズの拡大率または縮小率である拡縮率を複数個記憶するものである。また、画像拡縮部３７は、拡縮率記憶部３６における複数の上記拡縮率を利用して、サイド画像の画像サイズを所定のタイミングで拡大または縮小するものである。サイド画像の画像サイズを拡大または縮小することにより、サイド画像の動画化を実現することができる。
【００８６】
図１１は、拡縮率記憶部３６に記憶されている拡縮率の情報の具体例を示す図である。図１１に示すとおり、拡縮率記憶部３６には、複数の拡縮率の情報が記憶されており、各情報には、画像拡縮部３７がいずれの情報にしたがえばよいのかを示すフラグが関連付けられている。なお、図１１に示す拡縮率の情報は一例であって、拡縮率記憶部３６の構成を限定するものではない。
【００８７】
具体的には、画像拡縮部３７は、まず、拡縮率記憶部３６における複数の拡縮率の中から或る拡縮率（フラグによって指定されている拡縮率、例えば、５０％）を選択する。次に、画像拡縮部３７は、回転・反転部４１からのサイド画像の画像データを、上記或る拡縮率で拡大または縮小されたサイド画像の画像データとなるように変更し、変更後のサイド画像の画像データを画像合成部３９に送信する。そして、複数の拡縮率がフラグによって指定されている場合に、所定のタイミングで、画像拡縮部３７は、上記或る拡縮率とは別の拡縮率（例えば、１５０％）を拡縮率記憶部３６における複数の拡縮率の中から選択し、上記動作を繰り返す。これにより、１つのオブジェクトが大きくなったり小さくなったりする動画としてのサイド画像Ｓを実現することができる。
【００８８】
分割パラメータ記憶部３８は、上述の分割パラメータを記憶するものである。また、画像合成部３９は、画像拡縮部３７からのサイド画像の画像データと、分割パラメータ記憶部３８における分割パラメータとに基づいて、メイン画像用メモリ３０からのメイン画像Ｍの画像データを変調するものである。画像合成部３９は、変調した画像データを上記表示用画像の画像データとして表示部２２に送信している。
【００８９】
変調した画像データが表示部２２に表示されると、軸上からは、メイン画像Ｍのみが、軸外からは、メイン画像Ｍに重畳されたサイド画像Ｓが視認される。
【００９０】
上述のとおり、表示制御部２１の各画像加工部は、各記憶部に記憶されている情報にしたがって、サイド画像Ｓを加工する。したがって、携帯電話機１０の主制御部１１は、表示制御部２１の各記憶部のデータを制御して、サイド画像Ｓの画像加工を表示制御部２１に対して指図することが可能となる。
【００９１】
〔主制御部の要部構成〕
次に、表示制御部２１に対して、サイド画像を供給し、該サイド画像の加工方法を指示する携帯電話機１０（主制御部１１）の要部構成について詳細に説明する。
【００９２】
図１は、本発明の実施形態にかかる携帯電話機１０の要部構成を示すブロック図である。
【００９３】
図１に示すとおり、携帯電話機１０の主制御部１１は、アプリケーション実行部５０、アプリケーション制御部５１、アプリケーション判定部５２、および、表示指図部５３を含む構成となっている。
【００９４】
アプリケーション実行部５０は、記憶部１３に記憶されている図示しない各種プログラムを読み出して実行することにより携帯電話機１０の機能（各種アプリケーションなど）を実現するものである。アプリケーションの具体例としては、例えば、外部の機器と電子メールをやり取りする機能であるメールアプリケーション７０、放送波を受信してテレビ放送番組を表示するテレビアプリケーション７１、インターネット上に公開されているウェブサイトを取得して表示するウェブブラウザアプリケーション７２、表計算文書を処理して表計算を実行する表計算アプリケーション７３、外部の通信装置と映像および音声の送受信を行ってテレビ通話を実現するテレビ通話アプリケーション７４、および、携帯電話機１０が外部から取得したまたは内蔵する辞書データを読み出して、辞書機能を実行する辞書アプリケーション７５などが挙げられるが、これらは一例であって、本発明の携帯電話機１０を限定するものではない。アプリケーション実行部５０は、携帯電話機１０を操作するためのメニュー画面や各種設定画面などを表示するプログラムを実行してもよい。
【００９５】
アプリケーション実行部５０の実行結果の情報は、図示しない描画部によってメイン画像Ｍとして成形されて表示制御部２１に出力される。
【００９６】
アプリケーション制御部５１は、携帯電話機１０において発生する所定のイベントをトリガにして、それに応じたアプリケーションを実行するようアプリケーション実行部５０を制御するものである。例えば、ユーザが操作部１６を操作して、メール機能を呼び出した場合には、操作部１６のボタンの押下をトリガにして、アプリケーション制御部５１は、メールアプリケーション７０を起動する。
【００９７】
アプリケーション判定部５２は、アプリケーション制御部５１によって起動された、アプリケーション実行部５０が実行中のアプリケーションを判定するものである。上述の例にしたがえば、メールアプリケーション７０が起動されたとき、アプリケーション判定部５２は、実行中のアプリケーションを「メールアプリケーション７０」と判定する。
【００９８】
表示指図部５３は、携帯電話機１０の動作状態（アプリケーション実行部５０の実行結果としてのメイン画像Ｍの内容）に応じて、サイド画像Ｓの表示を表示制御部２１に対して指図するものである。すなわち、表示指図部５３は、表示制御部２１の画像合成部３９に対して、サイド画像Ｓのメイン画像Ｍへの合成を指図するものである。
【００９９】
具体的には、本実施形態では、表示指図部５３は、サイド画像指定部６０および画像加工指示部６１を含んでいる。サイド画像指定部６０は、メイン画像Ｍに合成するべきサイド画像Ｓを選択し、表示制御部２１に対して指定するものである。サイド画像指定部６０は、記憶部１３に記憶されている各種情報を参照することにより、アプリケーション判定部５２によって判定されたアプリケーションの実行中に、覗き見防止の効果が得られる最適なサイド画像Ｓを選択することができる。
【０１００】
画像加工指示部６１は、メイン画像Ｍに合成するべきサイド画像Ｓについて、該サイド画像Ｓに対し、画像加工（タイル張り、配色、回転、反転、拡大、縮小など）を施す必要がある場合には、その画像加工方法を表示制御部２１に対して指示するものである。画像加工指示部６１は、表示制御部２１の各記憶部に記憶されている情報の内容を更新したり、フラグを変更したりすることによって、画像加工方法を表示制御部２１に指示する。画像加工指示部６１は、記憶部１３に記憶されている各種情報を参照することにより、アプリケーション判定部５２によって判定されたアプリケーションの実行中に、覗き見防止の効果が得られる最適なサイド画像Ｓの画像加工方法を表示制御部２１に対して指示することができる。
【０１０１】
上述した主制御部１１の各部は、ＣＰＵ（central processing unit）が不図示のＲＯＭ（read only memory）等の記憶装置に記憶されているプログラムをＲＡＭ（random access memory）等に読み出して実行することで実現できる。すなわち、上記各部は、上記ＣＰＵが上記記憶装置に格納されたプログラムを実行し、図示しない入出力回路などの周辺回路を制御することによって実現される機能ブロックである。
【０１０２】
次に、表示指図部５３が参照する記憶部１３の各種情報について説明する。記憶部１３は、サイド画像記憶部８０および表示指図情報記憶部８１を含む構成となっている。
【０１０３】
図１２は、サイド画像記憶部８０に記憶されているサイド画像の具体例を示す図である。サイド画像記憶部８０には、１以上のサイド画像が記憶されており、これらの一つがサイド画像指定部６０によって読み出されて表示制御部２１に供給される。本実施形態では、一例として、静止画、動画を含む複数のサイド画像が、サイド画像記憶部８０に格納されている。図１２に示すとおり、各サイド画像には、サイド画像を一意に識別するためのサイド画像ＩＤが関連付けられているとともに、サイド画像ごとの付属情報が関連付けられている。サイド画像の付属情報として、画像の種類やファイル形式などを示す情報、画像サイズ、および、動画の場合には、長さ、フレームレートなどが格納される。
【０１０４】
サイド画像指定部６０は、この付属情報を参照して、現在アプリケーション実行部５０が実行中のアプリケーションに最適なサイド画像を選択することが可能となる。例えば、テレビアプリケーション７１が起動されていると、メイン画像Ｍは、テレビ放送番組などの動画となる。このように動きのある映像が表示されている場合には、同じように動きを伴うサイド画像Ｓで遮蔽することが、メイン画像Ｍの内容の覗き見防止に適していると考えられる。そこで、アプリケーション判定部５２が、実行中のアプリケーションをテレビアプリケーション７１と判定した場合には、サイド画像指定部６０は、サイド画像記憶部８０の付属情報を参照して、動画であるサイド画像（img004またはimg005）を取得し、表示制御部２１に供給する、というように、実行中のアプリケーションに応じて最適なサイド画像Ｓを指定することが可能になる。
【０１０５】
本発明の携帯電話機１０は、単に、選択したサイド画像Ｓを供給するだけでなく、供給するサイド画像Ｓに対してどのような画像加工を施せば、より覗き見防止の効果が高まるのかを判断して、画像加工方法を表示制御部２１に指示することができる。
【０１０６】
図１３は、表示指図情報記憶部８１に記憶されている表示指図情報の具体例を示す図である。表示指図情報記憶部８１には、携帯電話機１０に搭載されているアプリケーションに対応付けて、表示制御部２１にサイド画像Ｓの表示を指図する表示指図情報が記憶されている。表示指図情報とは、主制御部１１が表示制御部２１に対して、サイド画像の表示を指図するための情報である。本実施形態では、表示指図情報として、図１３に示すとおり、いずれのサイド画像Ｓを採用するのかを示す画像指定情報と、該画像指定情報によって指定されたサイド画像Ｓをどのように加工するのかを示す画像加工方法情報とが記憶されている。
【０１０７】
例えば、図１３に示すとおり、「アプリケーション：メール」に関連付けられている表示指図情報によれば、「img003の静止画を等倍のまま、縦×横＝１１×７で配置し、第１色から第７色までの各色の階調値を上げ、すべての配色パターンを切り替えて表示すること」が指図されている。したがって、アプリケーション判定部５２によって、メールアプリケーション７０が実行中と判定された場合、画像加工指示部６１は、上記の表示態様にてimg003の静止画が、メイン画像Ｍに合成されて表示されるように、表示制御部２１に対して画像加工方法を指示する。すなわち、画像加工指示部６１は、配置パターン記憶部４２の「１１＊７」の配置パターンのフラグを立て、配色パターン記憶部３４の各色情報の階調値を上げ、全配色パターンのフラグを立て、拡縮率記憶部３６の拡縮率「１００％」にのみフラグを立てるという処理を行う。
【０１０８】
そして、表示制御部２１は、表示指図部５３から表示指図にしたがって、指定されたサイド画像Ｓを指示された方法にて加工し、メイン画像Ｍに合成する（メイン画像Ｍを変調する）。その結果、例えば、図１４（ｂ）に示すようなチェック柄が軸外から観察され、メール作成中の画面などを、軸外観察者から実質的に隠すことが可能となる。
【０１０９】
図１３に示すその他の表示指図情報によれば、表示指図部５３は、テレビアプリケーション７１実行中には、img005の動画をサイド画像Ｓとして出力し、効果的に覗き見を防止することができる。動画は、例えば、フレームごとにサイド画像用メモリ３１に供給することが考えられる。ウェブブラウザアプリケーション７２実行中には、img004の動画をサイド画像Ｓとして出力する。表示部２２に表示されるウェブサイトには、テキスト、イメージ、アニメなど、大小のオブジェクトが混ざって表示されることが多い。そこで、大きいオブジェクトとそれよりも細かい柄との両方を含むimg004の動画をサイド画像Ｓとすることにより、効果的に覗き見を防止することができる。フレームが４枚程度であれば、表示制御部２１に４枚の画像を格納しておけるサイド画像用メモリ３１を搭載することができるならば、img004の動画をまとめて表示制御部２１に供給することが考えられる。表計算アプリケーション７３実行中には、img002の静止画をサイド画像Ｓとして全画面表示されるように出力する。表計算ソフトでは、大小のオブジェクトが混ざって表示されることが多く、また、グラフやマークなどシンボリックな絵柄が表示される。そこで、メイン画像Ｍのグラフ以上に、認識されやすい、目立った、また、変調領域が広いimg002の静止画をサイド画像Ｓとして全画面表示することにより、効果的に覗き見を防止することができる。テレビ通話アプリケーション７４実行中には、img001の静止画を、２＊２のタイル張りで表示されるように出力する。テレビ会議などでは、会議参加者の映像が参加する数名分表示される。そこで、このような映像のオブジェクトと同じくらいの大きさで、当該オブジェクトを隠せるような表示態様でサイド画像Ｓを表示する。これにより、例えば、図１４（ａ）に示すとおり、参加者の顔が映されたオブジェクトを、軸外観察者から実質的に隠すことが可能となる。結果として、効果的に覗き見を防止することができる。辞書アプリケーション７５実行中には、img003の静止画が大きさとレイアウトとを所定のタイミングで変化させて表示されるように該静止画を出力する。辞書アプリケーションの画面では、見出し語や説明文など、大小さまざまな大きさのフォントで文字がたくさん表示される。そこで、上記チェック柄の大きさを変化させてサイド画像Ｓとして表示することにより、大小さまざまな文字を軸外観察者から隠し、効果的に覗き見を防止することができる。
【０１１０】
これまで述べてきたとおり、本発明の携帯電話機１０の上記構成によれば、アプリケーション判定部５２が、アプリケーション実行部５０が実行中のアプリケーションを判定し、表示指図部５３が、判定されたアプリケーションに応じて、最適なサイド画像Ｓを選択する。また、表示指図部５３は、上記アプリケーションに応じて、サイド画像Ｓを最適な方法にて加工してから表示するように表示制御部２１に対して指示する。ここで、最適なサイド画像Ｓとは、軸外観察者に攪乱パターン視認させてメイン画像Ｍを実質的に隠すのに最も高い効果が得られる絵柄を持つサイド画像Ｓのことを指す。
【０１１１】
以上のことから、電子機器の動作状態に応じて、どのようなアプリケーションを実行中でも、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を常に出力することが可能となる。
【０１１２】
〔サイド画像合成フロー〕
図１５は、本実施形態における携帯電話機１０による、サイド画像Ｓの合成処理の流れを示す図である。
【０１１３】
ユーザの操作部１６の操作などによって、携帯電話機１０のいずれかのアプリケーションが呼び出されると（Ｓ１においてＹＥＳ）、主制御部１１のアプリケーション制御部５１は、指定されたアプリケーションを実行するように、アプリケーション実行部５０に指示する。アプリケーション実行部５０が、指定されたアプリケーションを起動して、該アプリケーションを実行する（Ｓ２）。
【０１１４】
続いて、アプリケーション判定部５２は、起動されたアプリケーションを判定する（Ｓ３）。そして、表示指図部５３は、表示指図情報記憶部８１を参照し、アプリケーション判定部５２によって判定されたアプリケーションに対応付けられている表示指図情報を取得する（Ｓ４）。具体的には、Ｓ３にて、辞書アプリケーション７５が実行中であると判定されたとすると、サイド画像指定部６０は、図１３に示す表示指図情報（画像指定情報）に基づいて、img003の静止画を、表示制御部２１に供給すべきサイド画像Ｓとして特定する。また、画像加工指示部６１は、画像加工方法情報「配置パターン：２＊２〜７＊１１で切り替え／拡縮率：200％〜30％で切り替え」を特定する。
【０１１５】
続いて、表示指図部５３は、特定した表示指図情報にしたがって、表示制御部２１に対して、表示指図を行う（Ｓ５）。具体的には、サイド画像指定部６０は、img003の静止画を、サイド画像記憶部８０から取得して、表示制御部２１に供給する。画像加工指示部６１は、表示制御部２１の各記憶部のフラグを更新する。
【０１１６】
最後に、表示制御部２１は、表示指図部５３からの表示指図にしたがってメイン画像Ｍにサイド画像Ｓを合成して（メイン画像Ｍの階調値を変調して）、変調後のメイン画像Ｍの画像データを表示部２２に出力し、表示する。
【０１１７】
上記方法によれば、Ｓ３にて、Ｓ２で実行中のアプリケーションが判定される。そして、Ｓ４にて、判定されたアプリケーションに応じて、適切なサイド画像Ｓが選択される。また、上記アプリケーションに応じて、サイド画像Ｓを適切な（現在のメイン画像Ｍに対して覗き見防止に効果的な）方法にて加工してから表示するように表示制御部２１を制御する。ここで、適切なサイド画像Ｓとは、軸外観察者に攪乱パターン視認させてメイン画像Ｍを実質的に隠すのに高い効果が得られる絵柄を持つサイド画像Ｓのことを指す。
【０１１８】
以上のことから、電子機器の動作状態に応じて、どのようなアプリケーションを実行中でも、表示中のメイン画像に対して覗き見防止効果の高い、適切なサイド画像を常に出力することが可能となる。
【０１１９】
≪実施形態２≫
上述の実施形態では、電子機器の動作状態、特に、実行中のアプリケーションに応じて、適切なサイド画像、画像加工方法を決定する携帯電話機１０の構成について述べてきた。しかし、本発明の携帯電話機１０は、上記構成に限定されず、携帯電話機１０の表示部２２が表示するメイン画像Ｍの内容物（テキスト、静止画、動画などのオブジェクト）に応じて、適切なサイド画像、画像加工方法を決定する構成であってもよい。
【０１２０】
図１６は、本発明の他の実施形態にかかる携帯電話機１０の要部構成を示すブロック図である。なお、図１６の各構成要素に付された符号は、図１の各構成要素に付された符号に対応しており、同じ符号は、同じ構成要素を示している。したがって、上述の各実施形態ですでに説明した構成要素についての説明は繰り返さない。
【０１２１】
図１６に示す携帯電話機１０において、図１に示す実施形態１の携帯電話機１０と異なる点は、主制御部１１が、アプリケーション判定部５２に加えて（あるいは、代えて）、表示オブジェクト判定部５４を備えている点である。
【０１２２】
表示オブジェクト判定部５４は、アプリケーション実行部５０がプログラムを実行した結果得られる情報に基づいて、表示部２２に表示されるメイン画像Ｍに含まれるオブジェクトの種類を判定するものである。メイン画像Ｍに含まれて表示されるオブジェクトの種類としては、例えば、テキスト、イメージ、アニメーション、ビデオ、および、それらの混合が挙げられる。
【０１２３】
さらに、本実施形態では、表示オブジェクト判定部５４は、記憶部１３に含まれる設定情報記憶部８２に記憶されている設定情報に基づいて、オブジェクトのサイズ、色、および、配置を判定することができる。設定情報とは、携帯電話機１０にて表示されるユーザインターフェース画面の基本的なデザインをカスタマイズするために、ユーザが携帯電話機１０の設定登録した各種情報のことである。例えば、ユーザが指定した、画面背景色、文字色、文字フォント、文字サイズ、アイコンサイズ、アイコンのレイアウトなどの各種設定情報が記憶されている。表示オブジェクト判定部５４は、メイン画像Ｍにテキストが含まれていると判定した場合には、上記文字サイズ、および、文字色の情報を設定情報記憶部８２から読み出して、表示指図部５３に供給する。
【０１２４】
上記構成によれば、表示指図部５３のサイド画像指定部６０は、判定されたオブジェクトに応じて適切なサイド画像Ｓを選択できる。例えば、オブジェクトがアニメーション、ビデオなど動きのあるオブジェクト（動画）と判定された場合には、サイド画像指定部６０は、動きを伴うサイド画像Ｓ（img004またはimg005など）を選択することが可能である。
あるいは、画像加工指示部６１は、判定されたオブジェクトに応じて、さらに、当該オブジェクトの色やサイズに応じて、当該オブジェクトの遮蔽に適したサイド画像Ｓとするための画像加工方法を、表示制御部２１に指示することができる。
【０１２５】
図１７（ａ）は、本実施形態における表示指図情報記憶部８１に記憶されている表示指図情報の一例を示す図である。図１７（ａ）に示すのは、表示制御部２１に供給すべきサイド画像Ｓが１つ決定している（例えば、図１２の静止画img003）場合に、当該サイド画像Ｓを、判定されたオブジェクトに応じてどのように加工するのかを示す画像加工方法情報が、表示指図情報として記憶されている例である。図１７（ａ）に示す例では、表示オブジェクトに関連付けて、画像加工方法情報が記憶されている。
【０１２６】
例えば、アプリケーション実行部５０によってメールアプリケーション７０が実行されており、メールアプリケーション７０が受信メールを表示するために実行結果を出力したとする。このとき、表示オブジェクト判定部５４は、実行結果に基づいて、メイン画像Ｍに、テキストのオブジェクトが含まれていると判定する。
【０１２７】
画像加工指示部６１は、表示オブジェクト判定部５４が、表示オブジェクトはテキストであると判定したことを受けて、表示指図情報記憶部８１を参照し、図１７（ａ）に示す表示指図情報から、「オブジェクト：テキスト」に関連付けられている「画像加工方法情報：文字の大きさに最も近い拡縮率で、タイル張りで表示」を取得する。次に、画像加工指示部６１は、取得した画像加工方法情報にしたがって、設定情報記憶部８２の設定情報のうち、設定されている文字サイズを取得して、当該文字サイズと、サイド画像Ｓの静止画img003のイメージサイズとがほぼ同じなる拡縮率を選択して、拡縮率記憶部３６のフラグを更新する。
【０１２８】
以上のとおり、サイド画像記憶部８０にサイド画像が１種類しか記憶されていず、サイド画像指定部６０が備えられていない場合でも、当該サイド画像を、判定されたオブジェクトに応じて、覗き見防止に適したものに加工することを表示制御部２１に指示することができる。もちろん、上記構成は、サイド画像が複数記憶されており、サイド画像指定部６０が備えられた場合にも適用できる。
【０１２９】
図１７（ｂ）は、本実施形態における表示指図情報記憶部８１に記憶されている表示指図情報の他の例を示す図である。図１７（ｂ）に示すのは、サイド画像記憶部８０にサイド画像Ｓが複数記憶されている場合に、表示制御部２１に供給すべきサイド画像を決定するための画像指定情報が、表示指図情報として記憶されている例である。図１７（ｂ）に示す例では、表示オブジェクトに関連付けて、画像指定情報が記憶されている。
【０１３０】
例えば、アプリケーション実行部５０によってテレビアプリケーション７１が実行されており、メールアプリケーション７０がテレビ放送番組を表示するために実行結果を出力したとする。このとき、表示オブジェクト判定部５４は、実行結果に基づいて、メイン画像Ｍに、ビデオのオブジェクトが含まれていると判定する。
【０１３１】
サイド画像指定部６０は、表示オブジェクト判定部５４が、表示オブジェクトはビデオであると判定したことを受けて、表示指図情報記憶部８１を参照し、図１７（ｂ）に示す表示指図情報から、「オブジェクト：ビデオ」に関連付けられている「画像指定情報：img004またはimg005」を取得する。サイド画像指定部６０は、画像指定情報によって特定されたサイド画像をサイド画像記憶部８０から取得して、表示制御部２１に供給する。
【０１３２】
なお、上述の例のように、判定されたオブジェクトに対してサイド画像が複数関連付けられている場合には、両方の動画を交互に出力するように、表示制御部２１に対して供給してもよいし、ランダムでいずれか一方を選択して、一方の動画だけを供給してもよい。
【０１３３】
上記構成によれば、サイド画像記憶部８０に複数のサイド画像が記憶されている場合に、表示されるメイン画像Ｍの内容に応じて、覗き見防止に適したサイド画像を選択し、表示制御部２１に供給することが可能となる。この構成は、画像加工指示部６１と組み合わせて実現することも可能である。これにより、表示部２２の表示内容に応じて適切なサイド画像Ｓを選択した上で、さらに、表示内容に応じてより遮蔽効果が高まるように当該サイド画像Ｓを加工することを表示制御部２１に対して指示することが可能となる。
【０１３４】
結果として、表示制御部２１は、表示部２２に表示される内容に対して適切なサイド画像Ｓを合成、出力し続けることが可能となり、表示内容（メイン画像Ｍの内容）が変化しても、常に覗き見を防止することができる。
【０１３５】
なお、本実施形態の構成は、実施形態１のアプリケーション判定部５２と組み合わせることが可能である。この場合、判定されたアプリケーションおよび判定されたオブジェクトに基づいて、画像指定情報および／または画像加工方法情報が特定される。つまり、表示指図情報記憶部８１には、アプリケーションとオブジェクトとの組み合わせに関連付けて、表示指図情報が記憶されている。
【０１３６】
〔変形例〕
さらに、表示指図部５３は、サイド画像編集部６２を含む構成であってもよい。サイド画像編集部６２は、メイン画像Ｍの各オブジェクトのサイズや表示位置に応じて、当該メイン画像Ｍの遮蔽効果が高まるように、サイド画像指定部６０が選択したサイド画像Ｓ、または、サイド画像記憶部８０に記憶されているサイド画像Ｓを編集するものである。
【０１３７】
以下では、図１８（ａ）〜（ｃ）の具体例を参照しつつ、サイド画像編集部６２を含む主制御部１１の動作について説明する。
【０１３８】
図１８（ａ）は、ウェブブラウザアプリケーション７２の実行結果として出力されるメイン画像Ｍの一例を示す図である。表示オブジェクト判定部５４は、アプリケーション実行部５０が出力する実行結果の情報に基づいて、メイン画像Ｍがイメージ９０、イメージ９１およびテキスト９２の各オブジェクトを含むことを認識し、各オブジェクトの表示位置、各オブジェクトのサイズを取得する。
【０１３９】
表示指図部５３のサイド画像指定部６０は、表示オブジェクト判定部５４が取得した情報に応じて、図１７（ｂ）の表示指図情報にしたがって、サイド画像Ｓに使用する画像を取得する。具体的には、テキストに対応付けられている静止画img003と、イメージに対応付けられている静止画img001とをサイド画像記憶部８０から取得する。
【０１４０】
サイド画像編集部６２は、図１７（ａ）の表示指図情報にしたがって、テキスト遮蔽用の静止画img003については、該静止画img003が文字の大きさに近くなるよう拡大または縮小して、タイル張りにする。そして、イメージ遮蔽用の静止画img001については、禁止マークのオブジェクトが、それぞれのイメージ（９０、９１）の大きさに近くなるように上記オブジェクトを拡大または縮小して、各イメージに重畳する位置にレイアウトする。
【０１４１】
図１８（ｂ）は、サイド画像編集部６２が、静止画img003と、静止画img001と組み合わせて編集した結果得られるサイド画像Ｓの一例を示す図である。図１８（ｂ）に示すサイド画像Ｓにおいて、静止画９３（img003）は、文字サイズに近い大きさでタイル張りされており、静止画９４および静止画９５（img001）は、それぞれ、イメージ９０、９１のサイズに近い大きさで、各イメージオブジェクトの位置に配置されている。
【０１４２】
図１８（ｃ）は、サイド画像編集部６２が生成した図１８（ｂ）のサイド画像Ｓに基づいて、画像合成部３９が、図１８（ａ）のメイン画像Ｍを変調した場合に、その画像データが軸外から観察されたときの様子を説明する図である。メイン画像Ｍのうち、テキスト９２は、静止画９３のタイル張りによって効果的に遮蔽され、イメージ９０、９２は、それよりも注目度の高い静止画９４、９５によってそれぞれ効果的に遮蔽されている。
【０１４３】
このように、サイド画像編集部６２が、オブジェクトの大きさに応じて、サイド画像のオブジェクトを拡大縮小したり、オブジェクトの表示位置に応じて別のサイド画像を組み合わせて配置したりすることによって、メイン画像Ｍの内容に応じて、覗き見防止の観点からより効果的なサイド画像Ｓを生成し、表示制御部２１に供給することが可能となる。
【０１４４】
また、サイド画像編集部６２は、オブジェクトの色に応じて、当該オブジェクトが目立たなくなるような色を用いてサイド画像を編集してもよい。色を編集された後のサイド画像を重ねると、メイン画像Ｍのオブジェクトが目立たなくなり、メイン画像Ｍを軸外観察者から実質的に隠すことが可能となる。また、サイド画像編集部６２は、サイド画像の配色がコントラストの低い配色である場合には、コントラストの高い配色となるように（メイン画像よりも目立つように）サイド画像の色を編集してもよい。
【０１４５】
本発明は上述した実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能である。すなわち、請求項に示した範囲で適宜変更した技術的手段を組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
【０１４６】
最後に、携帯電話機１０における主制御部１１および表示制御部２１の各ブロック、特に、アプリケーション判定部５２および表示指図部５３の各部は、ハードウェアロジックによって構成してもよいし、次のようにＣＰＵを用いてソフトウェアによって実現してもよい。
【０１４７】
すなわち、携帯電話機１０は、各機能を実現する制御プログラムの命令を実行するＣＰＵ（central processing unit）、上記プログラムを格納したＲＯＭ（read only memory）、上記プログラムを展開するＲＡＭ（random access memory）、上記プログラムおよび各種データを格納するメモリ等の記憶装置（記録媒体）などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアである、携帯電話機１０の制御プログラムのプログラムコード（実行形式プログラム、中間コードプログラム、ソースプログラム）をコンピュータで読み取り可能に記録した記録媒体を、上記携帯電話機１０に供給し、そのコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。
【０１４８】
上記記録媒体としては、例えば、磁気テープやカセットテープ等のテープ系、フロッピー（登録商標）ディスク／ハードディスク等の磁気ディスクやＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤ／ＣＤ−Ｒ等の光ディスクを含むディスク系、ＩＣカード（メモリカードを含む）／光カード等のカード系、あるいはマスクＲＯＭ／ＥＰＲＯＭ／ＥＥＰＲＯＭ／フラッシュＲＯＭ等の半導体メモリ系などを用いることができる。
【０１４９】
また、携帯電話機１０を通信ネットワークと接続可能に構成し、上記プログラムコードを、通信ネットワークを介して供給してもよい。この通信ネットワークとしては、特に限定されず、例えば、インターネット、イントラネット、エキストラネット、ＬＡＮ、ＩＳＤＮ、ＶＡＮ、ＣＡＴＶ通信網、仮想専用網（virtual private network）、電話回線網、移動体通信網、衛星通信網等が利用可能である。また、通信ネットワークを構成する伝送媒体としては、特に限定されず、例えば、ＩＥＥＥ１３９４、ＵＳＢ、電力線搬送、ケーブルＴＶ回線、電話線、ＡＤＳＬ回線等の有線でも、ＩｒＤＡやリモコンのような赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）、８０２．１１無線、ＨＤＲ、携帯電話網、衛星回線、地上波デジタル網等の無線でも利用可能である。なお、本発明は、上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
【産業上の利用可能性】
【０１５０】
本発明は、軸外観察者からのメイン画像の覗き見を防止する目的でメイン画像にサイド画像を合成することが可能な電子機器において、上記サイド画像を、覗き見を防止の観点から、該電子機器の動作状態に応じて適切な状態に変更して出力することができる。したがって、空間的輝度変調によってメイン画像とサイド画像とを合成して表示制御を行う表示制御装置を備えた任意の電子機器に適用することができる。
【符号の説明】
【０１５１】
１０ 携帯電話機（電子機器）
１１ 主制御部
１２ バス
１３ 記憶部
１４ 表示装置
１５ 通信部
１６ 操作部
１７ 撮像部
２１ 表示制御部（表示制御装置）
２２ 表示部
３０ メイン画像用メモリ
３１ サイド画像用メモリ
３４ 配色パターン記憶部
３５ 色切替部
３６ 拡縮率記憶部
３７ 画像拡縮部
３８ 分割パラメータ記憶部
３９ 画像合成部
４０ 回転・反転情報記憶部
４１ 回転・反転部
４２ 配置パターン記憶部
４３ 画像配置部
５０ アプリケーション実行部
５１ アプリケーション制御部
５２ アプリケーション判定部（判定手段／アプリケーション判定手段）
５３ 表示指図部（表示指図手段）
５４ 表示オブジェクト判定部（判定手段／表示オブジェクト判定手段）
６０ サイド画像指定部（表示指図手段／サイド画像指定手段）
６１ 画像加工指示部（表示指図手段／画像加工指示手段）
６２ サイド画像編集部（表示指図手段／サイド画像編集手段）
７０ メールアプリケーション
７１ テレビアプリケーション
７２ ウェブブラウザアプリケーション
７３ 表計算アプリケーション
７４ テレビ通話アプリケーション
７５ 辞書アプリケーション
８０ サイド画像記憶部
８１ 表示指図情報記憶部
８２ 設定情報記憶部
９０ イメージ（メイン画像のオブジェクト）
９１ イメージ（メイン画像のオブジェクト）
９２ テキスト（メイン画像のオブジェクト）
９３ 静止画（サイド画像のオブジェクト）
９４ 静止画（サイド画像のオブジェクト）
９５ 静止画（サイド画像のオブジェクト）
【特許請求の範囲】
【請求項１】
空間的輝度変調によって表示用画像を表示画面に表示するように液晶表示素子を制御する表示制御装置を制御する電子機器であって、
上記表示制御装置は、
上記液晶表示素子からの輝度に関して、上記表示画面の法線に平行な軸方向に対する輝度と軸外の方向に対する輝度との非線形な対応関係と、当該電子機器が供給するサイド画像の画像データとに基づいて、当該電子機器が動作することによって得られるメイン画像の画像データを変調し、変調した画像データを上記表示用画像の画像データとすることによって、メイン画像とサイド画像とを合成して表示するものであり、
当該電子機器は、
当該電子機器の動作状態を判定する判定手段と、
上記動作状態と、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像の表示を上記表示制御装置に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部と、
上記表示指図情報記憶部において上記判定手段によって判定された上記動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する表示指図手段とを備えていることを特徴とする電子機器。
【請求項２】
上記表示指図情報記憶部には、
当該電子機器の動作状態と、上記表示制御装置に供給すべきサイド画像を指定する画像指定情報とが関連付けて記憶されており、
上記表示指図手段は、上記判定手段によって判定された上記動作状態に関連付けられている画像指定情報が指定するサイド画像を、上記表示制御装置に供給するサイド画像指定手段を含むことを特徴とする請求項１に記載の電子機器。
【請求項３】
上記表示指図情報記憶部には、
当該電子機器の動作状態と、上記サイド画像の加工方法を示す画像加工方法情報とが関連付けて記憶されており、
上記表示指図手段は、上記判定手段によって判定された上記動作状態に関連付けられている画像加工方法情報が示す画像加工方法にて上記サイド画像を加工するよう、上記表示制御装置を制御する画像加工指示手段を含むことを特徴とする請求項１または２に記載の電子機器。
【請求項４】
上記判定手段は、当該電子機器が実行中のアプリケーションを判定するアプリケーション判定手段を含み、
上記表示指図情報記憶部には、
当該電子機器が実行可能なアプリケーションと、上記表示指図情報とが関連付けて記憶されており、
上記表示指図手段は、上記アプリケーション判定手段によって判定されたアプリケーションに関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図することを特徴とする請求項１から３までのいずれか１項に記載の電子機器。
【請求項５】
上記判定手段は、当該電子機器が動作することによって得られるメイン画像に含まれているオブジェクトの種類を判定する表示オブジェクト判定手段を含み、
上記表示指図情報記憶部には、
上記オブジェクトの種類と、上記表示指図情報とが関連付けて記憶されており、
上記表示指図手段は、上記表示オブジェクト判定手段によって判定されたオブジェクトの種類に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図することを特徴とする請求項１から４までのいずれか１項に記載の電子機器。
【請求項６】
上記表示指図情報記憶部には、
上記オブジェクトの種類としての動画に関連付けて、上記サイド画像を動画で表示するように上記表示制御装置に指図する表示指図情報が記憶されており、
上記表示指図手段は、
上記表示オブジェクト判定手段が、上記メイン画像に動画が含まれていると判定した場合に、上記表示指図情報にしたがって、サイド画像を動画で表示することを上記表示制御装置に対して指図することを特徴とする請求項５に記載の電子機器。
【請求項７】
上記表示オブジェクト判定手段は、さらに、上記メイン画像に含まれている各種オブジェクトのサイズおよび表示位置を取得するものであり、
上記表示指図手段は、
上記メイン画像のオブジェクトのサイズ、および、表示位置に基づいて、当該オブジェクトを軸外の方向からサイド画像が遮蔽するように、上記サイド画像を編集するサイド画像編集手段を含むことを特徴とする請求項５に記載の電子機器。
【請求項８】
上記サイド画像編集手段は、
上記表示オブジェクト判定手段が取得した、上記メイン画像のオブジェクトのサイズに合わせて、上記サイド画像のオブジェクトを拡大または縮小することを特徴とする請求項７に記載の電子機器。
【請求項９】
空間的輝度変調によって表示用画像を表示画面に表示するように液晶表示素子を制御する表示制御装置を制御する電子機器の制御方法であって、
上記表示制御装置は、上記液晶表示素子からの輝度に関して、上記表示画面の法線に平行な軸方向に対する輝度と軸外の方向に対する輝度との非線形な対応関係と、当該電子機器が供給するサイド画像の画像データとに基づいて、当該電子機器が動作することによって得られるメイン画像の画像データを変調し、変調した画像データを上記表示用画像の画像データとすることによって、メイン画像とサイド画像とを合成して表示するものであり、
上記電子機器において、
上記電子機器の動作状態を判定する判定ステップと、
上記動作状態と、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像の表示を上記表示制御装置に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部において、上記判定ステップにて判定された上記動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する表示指図ステップとを含むことを特徴とする電子機器の制御方法。
【請求項１０】
コンピュータを、請求項１から８までのいずれか１項に記載の電子機器の各手段として機能させるための制御プログラム。
【請求項１１】
請求項１０に記載の制御プログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項１】
空間的輝度変調によって表示用画像を表示画面に表示するように液晶表示素子を制御する表示制御装置を制御する電子機器であって、
上記表示制御装置は、
上記液晶表示素子からの輝度に関して、上記表示画面の法線に平行な軸方向に対する輝度と軸外の方向に対する輝度との非線形な対応関係と、当該電子機器が供給するサイド画像の画像データとに基づいて、当該電子機器が動作することによって得られるメイン画像の画像データを変調し、変調した画像データを上記表示用画像の画像データとすることによって、メイン画像とサイド画像とを合成して表示するものであり、
当該電子機器は、
当該電子機器の動作状態を判定する判定手段と、
上記動作状態と、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像の表示を上記表示制御装置に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部と、
上記表示指図情報記憶部において上記判定手段によって判定された上記動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する表示指図手段とを備えていることを特徴とする電子機器。
【請求項２】
上記表示指図情報記憶部には、
当該電子機器の動作状態と、上記表示制御装置に供給すべきサイド画像を指定する画像指定情報とが関連付けて記憶されており、
上記表示指図手段は、上記判定手段によって判定された上記動作状態に関連付けられている画像指定情報が指定するサイド画像を、上記表示制御装置に供給するサイド画像指定手段を含むことを特徴とする請求項１に記載の電子機器。
【請求項３】
上記表示指図情報記憶部には、
当該電子機器の動作状態と、上記サイド画像の加工方法を示す画像加工方法情報とが関連付けて記憶されており、
上記表示指図手段は、上記判定手段によって判定された上記動作状態に関連付けられている画像加工方法情報が示す画像加工方法にて上記サイド画像を加工するよう、上記表示制御装置を制御する画像加工指示手段を含むことを特徴とする請求項１または２に記載の電子機器。
【請求項４】
上記判定手段は、当該電子機器が実行中のアプリケーションを判定するアプリケーション判定手段を含み、
上記表示指図情報記憶部には、
当該電子機器が実行可能なアプリケーションと、上記表示指図情報とが関連付けて記憶されており、
上記表示指図手段は、上記アプリケーション判定手段によって判定されたアプリケーションに関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図することを特徴とする請求項１から３までのいずれか１項に記載の電子機器。
【請求項５】
上記判定手段は、当該電子機器が動作することによって得られるメイン画像に含まれているオブジェクトの種類を判定する表示オブジェクト判定手段を含み、
上記表示指図情報記憶部には、
上記オブジェクトの種類と、上記表示指図情報とが関連付けて記憶されており、
上記表示指図手段は、上記表示オブジェクト判定手段によって判定されたオブジェクトの種類に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図することを特徴とする請求項１から４までのいずれか１項に記載の電子機器。
【請求項６】
上記表示指図情報記憶部には、
上記オブジェクトの種類としての動画に関連付けて、上記サイド画像を動画で表示するように上記表示制御装置に指図する表示指図情報が記憶されており、
上記表示指図手段は、
上記表示オブジェクト判定手段が、上記メイン画像に動画が含まれていると判定した場合に、上記表示指図情報にしたがって、サイド画像を動画で表示することを上記表示制御装置に対して指図することを特徴とする請求項５に記載の電子機器。
【請求項７】
上記表示オブジェクト判定手段は、さらに、上記メイン画像に含まれている各種オブジェクトのサイズおよび表示位置を取得するものであり、
上記表示指図手段は、
上記メイン画像のオブジェクトのサイズ、および、表示位置に基づいて、当該オブジェクトを軸外の方向からサイド画像が遮蔽するように、上記サイド画像を編集するサイド画像編集手段を含むことを特徴とする請求項５に記載の電子機器。
【請求項８】
上記サイド画像編集手段は、
上記表示オブジェクト判定手段が取得した、上記メイン画像のオブジェクトのサイズに合わせて、上記サイド画像のオブジェクトを拡大または縮小することを特徴とする請求項７に記載の電子機器。
【請求項９】
空間的輝度変調によって表示用画像を表示画面に表示するように液晶表示素子を制御する表示制御装置を制御する電子機器の制御方法であって、
上記表示制御装置は、上記液晶表示素子からの輝度に関して、上記表示画面の法線に平行な軸方向に対する輝度と軸外の方向に対する輝度との非線形な対応関係と、当該電子機器が供給するサイド画像の画像データとに基づいて、当該電子機器が動作することによって得られるメイン画像の画像データを変調し、変調した画像データを上記表示用画像の画像データとすることによって、メイン画像とサイド画像とを合成して表示するものであり、
上記電子機器において、
上記電子機器の動作状態を判定する判定ステップと、
上記動作状態と、上記メイン画像を軸外の方向から遮蔽するように上記サイド画像の表示を上記表示制御装置に指図するための表示指図情報とを関連付けて記憶する表示指図情報記憶部において、上記判定ステップにて判定された上記動作状態に関連付けられている表示指図情報にしたがって、サイド画像の表示を上記表示制御装置に指図する表示指図ステップとを含むことを特徴とする電子機器の制御方法。
【請求項１０】
コンピュータを、請求項１から８までのいずれか１項に記載の電子機器の各手段として機能させるための制御プログラム。
【請求項１１】
請求項１０に記載の制御プログラムを記録したコンピュータ読み取り可能な記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【公開番号】特開２０１１−３３９８３（Ｐ２０１１−３３９８３Ａ）
【公開日】平成２３年２月１７日（２０１１．２．１７）
【国際特許分類】
【出願番号】特願２００９−１８２５０５（Ｐ２００９−１８２５０５）
【出願日】平成２１年８月５日（２００９．８．５）
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
【公開日】平成２３年２月１７日（２０１１．２．１７）
【国際特許分類】
【出願日】平成２１年８月５日（２００９．８．５）
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
[ Back to top ]