表示装置及びプログラム
【課題】複数の画像を、透過型のディスプレイと当該ディスプレイと重なる他のディスプレイとに振り分けて表示できるようにする。
【解決手段】表示装置は、第１ディスプレイと、第１ディスプレイに重ねて設けられる透過型の第２ディスプレイとを備える。表示装置は、表示対象の画像を表す描画オブジェクトを取得すると（Ｓ１）、画像の属性を特定し（Ｓ３）、特定した属性に基づいて前景画像と背景画像とに振り分ける判定を行う（Ｓ４）。そして、表示装置は、この判定結果に応じて、背景画像を第１ディスプレイに表示し、前景画像を第２ディスプレイに表示する（Ｓ５）。
【解決手段】表示装置は、第１ディスプレイと、第１ディスプレイに重ねて設けられる透過型の第２ディスプレイとを備える。表示装置は、表示対象の画像を表す描画オブジェクトを取得すると（Ｓ１）、画像の属性を特定し（Ｓ３）、特定した属性に基づいて前景画像と背景画像とに振り分ける判定を行う（Ｓ４）。そして、表示装置は、この判定結果に応じて、背景画像を第１ディスプレイに表示し、前景画像を第２ディスプレイに表示する（Ｓ５）。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、透過型ディスプレイを用いた情報表示に関する。
【背景技術】
【０００２】
透過型ディスプレイと呼ばれる、向こう側が透けて見えるディスプレイが知られている。かかるディスプレイは、透過ディスプレイ、透明ディスプレイなどとも呼ばれている。特許文献１には、透過型ディスプレイをフリップ部材に設け、この透過型ディスプレイに表示させる画像をフリップ部材の姿勢に応じて修正することが記載されている。しかし、特許文献１に記載された技術は、複数のディスプレイを組み合わせて用いるものではない。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特表２００６−５０４１４４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明の目的は、複数の画像を、透過型のディスプレイと当該ディスプレイと重なる他のディスプレイとに振り分けて表示できるようにすることにある。
【課題を解決するための手段】
【０００５】
本発明の一態様に係る表示装置は、画像を表示する第１ディスプレイと、前記第１ディスプレイと重なる状態で画像を表示し、当該状態において、前記第１ディスプレイに表示されている画像を透過してユーザに視認させ得る第２ディスプレイと、表示対象となる画像の属性を特定する特定部と、前記特定部により特定された画像の属性に基づいて、当該画像が背景画像と前景画像のいずれに属するかを判定する判定部と、前記判定部により前記背景画像に属すると判定された画像を前記第１ディスプレイに表示させ、前記判定部により前記前景画像に属すると判定された画像を前記第２ディスプレイに表示させる表示制御部とを備える構成を有する。
【０００６】
好ましい態様において、前記表示装置は、前記特定部が、画像が静止画又は動画のいずれかに該当するか特定し、前記判定部が、静止画又は動画の一方に該当する画像を前記背景画像に属すると判定し、他方に該当する画像を前記前景画像に属すると判定する。
他の好ましい態様において、前記表示装置は、前記第２ディスプレイに設けられるタッチスクリーンによりユーザの操作を受け付ける操作部を備え、前記特定部が、画像が前記操作を受け付ける操作画像に該当するか特定し、前記判定部が、前記操作画像を前記前景画像であると判定する。
他の好ましい態様において、前記表示装置は、前記第１ディスプレイと前記第２ディスプレイの位置を相対的に移動させる移動機構を備え、前記表示制御部が、前記移動機構による移動に応じて前記第１ディスプレイ又は前記第２ディスプレイの表示態様を変化させる。
他の好ましい態様において、前記表示装置は、前記背景画像と前記前景画像とを合成して合成画像を生成する合成部を備え、前記表示制御部が、前記第１ディスプレイと前記第２ディスプレイとが所定の位置関係になった場合に、前記背景画像及び前記前景画像に代えて前記合成画像を前記第１ディスプレイ又は前記第２ディスプレイに表示させる。
【０００７】
本発明の他の態様に係るプログラムは、画像を表示する第１ディスプレイと、前記第１ディスプレイと重なる状態で画像を表示し、当該状態において前記第１ディスプレイに表示されている画像を透過してユーザに視認させ得る第２ディスプレイとを有する表示装置を制御するコンピュータに、表示対象となる画像の属性を特定するステップと、前記特定された画像の属性に基づいて、当該画像が背景画像と前景画像のいずれに属するかを判定するステップと、前記背景画像に属すると判定された画像を前記第１ディスプレイに表示させ、前記前景画像に属すると判定された画像を前記第２ディスプレイに表示させるステップとを実行させるためのものである。
【発明の効果】
【０００８】
本発明によれば、複数の画像を、透過型のディスプレイと当該ディスプレイと重なる他のディスプレイとに振り分けて表示できることが可能である。
【図面の簡単な説明】
【０００９】
【図１】表示装置の外観を示す三面図（基本形態）
【図２】表示装置の縦スライド形態を示す正面図
【図３】表示装置の横スライド形態を示す正面図
【図４】表示装置移動機構を示す模式図
【図５】表示装置のハードウェア構成を示すブロック図
【図６】制御部の機能的構成を示す機能ブロック図
【図７】表示装置による表示処理を示すフローチャート
【図８】表示装置の第１の表示例を示す図
【図９】第１の表示例における表示の変化を示す図
【図１０】表示装置の第２の表示例を示す図
【図１１】表示装置の第３の表示例を示す図
【図１２】第３の表示例における表示の変化を示す図
【図１３】第３の表示例における表示の変化を示す図
【図１４】表示装置の外観を示す正面図
【図１５】回転によりスライドする移動機構を示す図
【発明を実施するための形態】
【００１０】
［実施形態］
図１は、本発明の一実施形態である表示装置の外観を示す三面図である。本実施形態の表示装置１０は、携帯電話機、スマートフォン等の無線通信端末である。表示装置１０は、図１に示すように、第１ユニット１１０と、第２ユニット１２０とを備える。第２ユニット１２０は、第１ユニット１１０と重なるようになっており、画像を表示する第２ディスプレイ１２１を有している。第１ユニット１１０は、後述する第１ディスプレイ１１１を、この第２ディスプレイ１２１と重なるように有している。また、第２ユニット１２０は、画像を表示しない領域を第２ディスプレイ１２１の周囲に有している。以下においては、ディスプレイの周囲のこのような領域のことを「額縁領域」という。
【００１１】
以下においては、説明の便宜上、第２ユニット１２０の第２ディスプレイ１２１が設けられている側の面を表示装置１０の「正面」といい、後述する第１ユニット１１０の第１ディスプレイ１１１が設けられていない側の面を表示装置１０の「背面」という。また、以下においては、図１中の矢印ａ１の方向のことを上とし、矢印ａ２の方向のことを左とする。さらに、上方向とその反対方向（下方向）とを総称して「縦方向」といい、左方向とその反対方向（右方向）とを総称して「横方向」という。
【００１２】
第２ディスプレイ１２１は、透過型ディスプレイであり、光を背面側から正面側（及び正面側から背面側）に透過する。なお、ここでいう「透過」は、１００％ないしそれに近い透過率で光を通過させることであればより望ましいが、ユーザに画像を視認させ得る程度の透過率で光を通過させれば足りるものである。第２ディスプレイ１２１は、周知の透過型ディスプレイのいずれであってもよいが、例えば、自発光型の有機ＥＬ（electroluminescence）素子を用いたディスプレイである。また、第２ディスプレイ１２１は、表示素子に液晶を用いる場合のように、表示素子自体が発光しない場合にあっては、額縁領域にエッジライト方式のバックライトを有していてもよい。
【００１３】
第１ユニット１１０及び第２ユニット１２０は、その連結部分が移動機構を構成し、一方を他方に対して相対的に移動させることが可能である。表示装置１０は、かかる移動によってその形態を変化させる。第２ユニット１２０は、第１ユニット１１０に対して縦方向及び横方向に移動する。以下においては、図１に示す形態、すなわち第１ディスプレイ１１１と第２ディスプレイ１２１とが重なっている表示装置１０の形態のことを、「基本形態」という。
【００１４】
図２は、第２ユニット１２０を基本形態から上方向にスライドさせた場合の表示装置１０の形態を示す正面図である。また、図３は、第２ユニット１２０を基本形態から左方向にスライドさせた場合の表示装置１０の形態を示す正面図である。表示装置１０は、第２ユニット１２０が基本形態から移動した形態になることによって、第１ディスプレイ１１１が露出した状態（すなわち、第２ユニット１２０に覆われていない状態）になる。以下においては、図２に示す状態のことを「縦スライド形態」といい、図３に示す状態のことを「横スライド形態」という。ここにおいて、スライドとは、ディスプレイの面に沿って移動することをいうものである。
【００１５】
第１ディスプレイ１１１は、本実施形態においては、第２ディスプレイと同面積の表示領域（画像を表示する領域）を有するものとする。第１ディスプレイ１１１は、基本形態において正面（ディスプレイの表面に対して垂直な方向）から視認したとき、第２ディスプレイ１２１とちょうど重なる位置にある。なお、第１ディスプレイ１１１は、透過型ディスプレイである必要はなく、周知のさまざまなディスプレイを用い得る。
【００１６】
基本形態において、第１ディスプレイ１１１は、これを正面側から観察するユーザにより、第２ディスプレイ１２１を介して視認される。一方、縦スライド形態及び横スライド形態において、第１ディスプレイ１１１は、第２ディスプレイ１２１を介さずにユーザに視認される。よって、表示装置１０は、基本形態から縦スライド形態又は横スライド形態に形態を変化させることで、表示領域の面積を２倍に増やすことが可能である。
【００１７】
図４は、表示装置１０の移動機構を示す模式図である。第２ユニット１２０は、レール１２２、１２３、１２４及び１２５を有する。レール１２２、１２３、１２４及び１２５は、第２ユニット１２０の移動を案内するための溝である。また、第１ユニット１１０は、突起部１１２、１１３及び１１４を有する。突起部１１２、１１４は、第２ユニット１２０をレール１２２、１２３に沿って横方向にスライドさせる。なお、第２ユニット１２０が基本形態から左方向にスライドするとき、突起部１１３は、第１ユニット１１０の内部に押し込まれ、レール１２２、１２５から外れるように構成されている。また、突起部１１３は、第２ユニット１２０が横スライド形態から基本形態に戻るときには、突起してレール１２２、１２５に再び嵌るように構成されている。
【００１８】
また、突起部１１２、１１３は、第２ユニット１２０をレール１２４、１２５に沿って縦方向にスライドさせる。なお、第２ユニット１２０が基本形態から上方向にスライドするとき、突起部１１４は、第１ユニット１１０の内部に押し込まれ、レール１２３、１２４から外れるように構成されている。また、突起部１１４は、第２ユニット１２０が縦スライド形態から基本形態に戻るときには、突起してレール１２３、１２４に再び嵌るように構成されている。
【００１９】
図５は、表示装置１０のハードウェア構成を示すブロック図である。表示装置１０は、図５に示すように、制御部１００と、記憶部２００と、表示部３００と、操作部４００と、通信部５００と、音声入出力部６００と、検知部７００と、カメラ部８００とを備える。
【００２０】
制御部１００は、表示装置１０の各部の動作を制御する手段である。制御部１００は、ＣＰＵ（Central Processing Unit）等の演算処理装置や主記憶装置に相当する記憶手段（メインメモリ）を備え、プログラムを実行することによって制御を行う。記憶部２００は、制御部１００が用いるデータを記憶する手段である。記憶部２００は、補助記憶装置に相当する記憶手段（ハードディスク、フラッシュメモリ等）を備えるが、いわゆるメモリカードのような着脱可能な記憶手段（リムーバブルメディア）を含んでもよい。
【００２１】
表示部３００は、第１ディスプレイ１１１及び第２ディスプレイ１２１に画像を表示させる手段である。表示部３００は、第１ディスプレイ１１１及び第２ディスプレイ１２１と、これらのディスプレイを駆動するための駆動回路などを備える。操作部４００は、ユーザの操作を受け付けるための入力手段を備える。操作部４００は、入力手段として、第１ディスプレイ１１１や第２ディスプレイ１２１の正面側に設けられるタッチスクリーンや、額縁領域や正面以外の面にボタン（電源ボタン等）を有することが可能である。操作部４００は、ユーザの操作を表す操作情報を制御部１００に供給する。通信部５００は、外部装置を無線通信を行うための手段である。ここでいう外部装置は、無線通信ネットワークを構成する基地局であってもよいし、表示装置１０と通信する他の無線通信端末であってもよい。つまり、通信部５００は、赤外線通信等の近距離無線通信を行うための手段を含み得る。音声入出力部６００は、音声の入力及び出力を行うための手段であり、スピーカやマイクロホンを備える。
【００２２】
検知部７００は、表示装置１０の形態、すなわち第１ユニット１１０と第２ユニット１２０の相対的な位置関係を検知するための手段である。検知部７００は、例えば、突起部１１３又は１１４が押し込まれ、又は突起したことを検知するセンサや、突起部のレール内における位置を検知するセンサを含み得る。検知部７００は、望ましくは、基本形態、縦スライド形態及び横スライド形態の３形態だけでなく、基本形態から別の形態（あるいはその逆）へと遷移する過渡的な状態をも検知できるように構成される。この場合、検知部７００は、第１ディスプレイ１１１及び第２ディスプレイ１２１の重なり具合（すなわち、重なり合う面積）を検知することが可能である。検知部７００は、これらの検知結果を表す形態情報を制御部１００に供給する。
【００２３】
カメラ部８００は、被写体を撮影する手段である。ここでいう被写体は、ユーザであってもよいし、風景などであってもよい。カメラ部８００は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等の撮像素子を第１ユニット１１０又は第２ユニット１２０に備える。カメラ部８００は、撮影した被写体の画像を表す画像データを制御部１００に供給する。なお、第１ディスプレイ１１１又は第２ディスプレイ１２１は、カメラ部８００による撮影に際し、いわゆるファインダとして機能してもよい。
【００２４】
図６は、制御部１００の機能的構成の一部（特に、画像の表示に関するもの）を示す機能ブロック図である。制御部１００は、プログラムを実行することにより、図６に示すモード判定部１０１、取得部１０２、特定部１０３、振分判定部１０４、表示制御部１０５及び合成部１０６に相当する各機能を実現する。
【００２５】
モード判定部１０１は、検知部７００による検知結果（すなわち形態情報）を用いて、表示装置１０の形態に応じたモードを判定する。ここでいうモードには、基本形態に対応する「基本モード」と、縦スライド形態に対応する「縦モード」と、横スライド形態に対応する「横モード」とが少なくとも含まれる。また、モード判定部１０１は、基本モードから縦モード又は横モードに遷移する過渡的な状態を別のモード（以下「過渡モード」という。）として判定してもよい。
【００２６】
取得部１０２は、表示対象の画像を表す描画オブジェクトを取得する。ここにおいて、「オブジェクト」とは、表示部３００によって表示される画像であって、個々の物体を表すものをいう。描画オブジェクトには、文字、罫線、図形、アイコン、写真などが含まれる。また、描画オブジェクトには、文字に対する装飾（下線等の強調表示）や、図形に対する影なども含まれ得る。なお、描画オブジェクトは、静止画又は動画のいずれであってもよい。取得部１０２は、記憶部２００に記憶されているデータ、通信部５００を介して外部装置から受信されたデータ又はカメラ部８００から供給された画像データの少なくともいずれかを、描画オブジェクトとして取得することが可能である。
【００２７】
特定部１０３は、取得部１０２により取得された描画オブジェクトにより表される画像の属性を特定する。ここにおいて、「属性」とは、画像を特徴付ける性質をいう。属性は、それぞれの画像に対してあらかじめ決められていることもあるが、アプリケーションの動作やユーザの操作に応じて決まることもある。よって、属性は、ある画像について不変であるとは限らず、表示の途中で変わる場合もあり得るものである。特定部１０３は、例えば、画像が所定の機能を有するか否かや、画像のデータ形式によって属性を特定する。
【００２８】
振分判定部１０４は、取得部１０２により取得された描画オブジェクトにより表される画像について、前景画像と背景画像のいずれであるかを判定する。振分判定部１０４は、かかる判定を、特定部１０３により特定された個々の画像の属性に応じて行う。ここにおいて、「前景画像」とは、基本モード、すなわち第１ディスプレイ１１１と第２ディスプレイ１２１とが重なる状態において表示される画像のうちの第２ディスプレイ１２１に表示される画像をいい、「背景画像」とは、かかる状態において表示される画像のうちの第１ディスプレイ１１１に表示される画像をいう。換言すれば、前景画像は、基本形態においてユーザにより近い側（正面側）にある画像であり、背景画像は、基本形態においてユーザにより遠い側にある画像である。
【００２９】
なお、特定部１０３及び振分判定部１０４は、基本モード、すなわち第１ディスプレイ１１１と第２ディスプレイ１２１とが重なる状態において機能すればよく、それ以外の場合（縦モード又は横モードの場合）には機能しなくてもよい。あるいは、振分判定部１０４は、基本モードである場合と縦モード又は横モードである場合とで、画像の振り分けの態様を異ならせてもよい。これらの動作を実現するために、特定部１０３及び振分判定部１０４は、モード判定部１０１による判定結果を用いる。
【００３０】
表示制御部１０５は、表示部３００による表示を制御する。表示制御部１０５は、振分判定部１０４による判定結果に基づいて、表示対象の画像を第１ディスプレイ１１１と第２ディスプレイ１２１のいずれに表示させるのかを判断する。表示制御部１０５は、基本モードにおいては、前景画像を第２ディスプレイ１２１に表示させ、背景画像を第１ディスプレイ１１１に表示させるように表示部３００を制御する。
【００３１】
合成部１０６は、振分判定部１０４により前景画像と背景画像とに振り分けられた画像を、必要に応じて合成する。合成部１０６によって合成され、新たに生成される画像のことを、以下においては「合成画像」という。合成画像は、第１ディスプレイ１１１又は第２ディスプレイ１２１において表示されるほか、電子メールに添付される形態などによって外部装置に送信されることもある。
【００３２】
表示装置１０の構成は、以上のとおりである。表示装置１０は、かかる構成のもと、ユーザの操作や自装置のモードに応じた態様で画像を表示する。表示装置１０は、例えば、基本モードである場合には、第１ディスプレイ１１１と第２ディスプレイ１２１とが重なっていることを利用して、画像の表示に立体感や娯楽性を与えたりする。また、表示装置１０は、必要なアプリケーションを備えることにより、電子メールを送受信する機能（いわゆるメーラ）やＷｅｂページを閲覧する機能（いわゆるＷｅｂブラウザ）を実現することも可能である。以下においては、表示装置１０が実行可能なアプリケーションが複数あるものとする。
【００３３】
図７は、表示装置１０による表示処理を示すフローチャートである。図７に示す表示処理は、所定のイベントの発生を契機に実行されるものである。ここでいう所定のイベントは、典型的には、表示部３００による表示の変更を伴うような動作であり、例えば、アプリケーションを起動し、又は終了する操作などである。また、この表示処理は、表示装置１０の形態（すなわちモード）が変更されたときにも実行される。
【００３４】
かかる表示処理において、表示装置１０の制御部１００は、まず、表示対象の画像を表す描画オブジェクトを取得する（ステップＳ１）。次に、制御部１００は、形態情報に基づき、表示装置１０が基本モードであるか否かを判断する（ステップＳ２）。ここで、表示装置１０が基本モード以外のモードである場合、制御部１００は、そのときのモードに応じた態様で画像を表示するように表示部３００を制御する（ステップＳ６）。
【００３５】
一方、表示装置１０が基本モードで動作している場合、制御部１００は、ステップＳ１において取得された描画オブジェクトにより表される各画像の属性を特定し（ステップＳ３）、画像を前景画像と背景画像とに振り分ける判定を行う（ステップＳ４）。その後、制御部１００は、前景画像を第２ディスプレイ１２１に表示し、背景画像を第１ディスプレイ１１１に表示するように表示部３００を制御する（ステップＳ５）。表示部３００は、ステップＳ５又はＳ６の制御の内容に応じて、第１ディスプレイ１１１及び第２ディスプレイ１２１に画像を表示する。
【００３６】
図８は、基本モードにおける第１の表示例を示す図である。図８は、説明の便宜上、第１ユニット１１０及び第２ユニット１２０が重なっていない状態での画像と、第１ユニット１１０及び第２ユニット１２０が重なっている状態での画像とを併記したものである。この表示例は、アプリケーションを一覧表示するものであり、各アプリケーションはアイコンｉ１１〜ｉ１７によって表現されている。この例において、第２ディスプレイ１２１は、タッチスクリーンによってユーザの操作を受け付けることが可能であるとする。また、この例において、アイコンは、本発明に係る操作画像に相当する。
【００３７】
さらに、この例においては、アプリケーションには実行可能なものと実行不可能なものとがあるものとする。実行不可能なアプリケーションとは、例えば、有効期限を超過したアプリケーションや、特定の条件を満たさないと実行できないアプリケーションなどである。なお、基本モードにおいては実行不可能であるが、縦モード又は横モードにおいては実行可能なアプリケーションも、ここでいう「特定の条件を満たさないと実行できないアプリケーション」に該当する。ここで、アイコンｉ１１、ｉ１２、ｉ１４、ｉ１５、ｉ１６及びｉ１７は、実行可能なアプリケーションを表す画像であり、アイコンｉ１３及びｉ１４は、実行不可能なアプリケーションを表す画像である。
【００３８】
このとき、表示装置１０は、第２ディスプレイ１２１にアイコンｉ１１、ｉ１２、ｉ１４、ｉ１５、ｉ１６及びｉ１７を前景画像として表示し、第１ディスプレイ１１１にアイコンｉ１３及びｉ１４を含む他の画像を背景画像として表示する。ここでいう「他の画像」は、アイコン以外に、操作を受け付けない画像（例えば、電池の残量を表す画像や、電波の受信強度を表す画像など）を含むものである。つまり、この表示例においては、表示装置１０は、「画像が操作を受け付ける画像（すなわちアイコン）であるか否か」と「実行可能なアプリケーションのアイコンであるか否か」とを判断基準に用いて画像の属性を特定している。
【００３９】
この表示例によれば、実行可能なアプリケーションに対応するアイコンは、他の画像に対して浮き上がっているようにユーザに視認される。これにより、ユーザは、かかるアイコンと他の画像とを視覚的に容易に区別することが可能となるため、誤操作や無駄な操作を抑制することが可能となる。
【００４０】
なお、この表示例において、アイコンｉ１１、ｉ１２、ｉ１４、ｉ１５、ｉ１６及びｉ１７は、第１ディスプレイ１１１と第２ディスプレイ１２１の双方に、互いに重なるようにして表示されてもよい。また、これらのアイコンは、いわゆる「ドラッグ・アンド・ドロップ」の操作が行えるようになっていてもよい。このとき、表示装置１０は、ユーザの操作に応じて前景画像と背景画像の表示態様を異ならせてもよい。
【００４１】
図９は、第１の表示例において、ユーザがアイコンをドラッグする場合の表示例を示す図であり、図８に示すアイコンｉ１６をドラッグした場合を示すものである。図９において、アイコンｉ１６ｆは前景画像に相当し、アイコンｉ１６ｂは背景画像に相当する。つまり、この表示例は、同一の画像が前景画像と背景画像の双方に振り分けられている例である。表示装置１０は、アイコンｉ１６ｆをユーザのドラッグする操作（第２ディスプレイ１２１を指でなぞる操作）に追従するようにアニメーション表示させる。このとき、アイコンｉ１６ｂは、元の位置に表示されたままであり、移動しない。その後、ユーザがドロップする操作（指を話す操作）を行うと、表示装置１０は、アイコンｉ１６ｆをその位置から動かないように表示させる。このとき、表示装置１０は、アイコンｉ１６ｂを第１ディスプレイ１１１から消去するか、あるいはアイコンｉ１６ｆと重なる位置まで移動させて表示する。
【００４２】
このようにすれば、ユーザは、アイコンを移動させる操作の最中に、そのアイコンの元の位置を容易に認識することが可能である。また、表示装置１０は、アニメーション表示を第２ディスプレイ１２１のみで行えばよく、これを第１ディスプレイ１１１と第２ディスプレイ１２１の双方で行う必要がないという利点を有する。
【００４３】
図１０は、基本モードにおける第２の表示例を示す図である。図１０に示す表示例は、ある仮想空間にキャラクタ（アバター等）を重ねて表示させるものである。この例において、第１ディスプレイ１１１は、仮想空間の画像ｉ２１を背景画像として表示しており、第２ディスプレイ１２１は、キャラクタの画像ｉ２２を前景画像として表示している。このようにすることで、表示装置１０は、立体感（奥行き感）のある画像表示を実現することができる。
【００４４】
このとき、表示装置１０は、背景画像を静止画とし、前景画像を動画とする、というように、画像が動くか否かによって属性を特定するようにしてもよい。この例によれば、キャラクタの画像ｉ２２は、仮想空間の内部を歩いたりするような適当なアニメーション表示が行われる。このようにすれば、第１ディスプレイ１１１を書き換えることなく、立体感のある動画を表示することが可能となる。なお、表示装置１０は、背景画像を動画とし、前景画像を静止画としてもよい。
【００４５】
図１１は、基本モードにおける第３の表示例を示す図である。図１１に示す表示例は、文字列と、当該文字列の一部を強調するための下線とを重ねて表示させるものである。この例において、第１ディスプレイ１１１は、文字列の画像ｉ３１を背景画像として表示しており、第２ディスプレイ１２１は、下線の画像ｉ３２を前景画像として表示している。この例において、表示装置１０は、「文字」と、これに付随する「文字装飾」とで属性を区別して特定している。このようにすれば、下線を文字から浮き上がっているように表示させることが可能であり、より効果的な態様で強調表示を行うことが可能となる。なお、表示装置１０は、文字を前景画像とし、文字装飾を背景画像としてもよい。
【００４６】
また、表示装置１０は、基本形態から他の形態に変化するときに、第１ユニット１１０又は第２ユニット１２０の移動に応じて、第１ディスプレイ１１１又は第２ディスプレイ１２１の表示態様を変化させてもよい。
【００４７】
図１２は、表示装置１０が基本形態から横スライド形態に遷移するときの表示例を示す図である。この例において、表示装置１０は、図１２（ａ）に示す基本形態においては、図１１と同様の画面を第１ディスプレイ１１１及び第２ディスプレイ１２１に表示しているものとする。また、表示装置１０は、基本形態から横スライド形態へと変化する過渡的な期間（図１１（ｂ）参照）に、その表示態様が第２ユニット１２０の移動に応じて変化する画像を第１ディスプレイ１１１及び第２ディスプレイ１２１に表示する。かかる画像は、第１ディスプレイ１１１の第２ディスプレイ１２１と重なっている領域内に表示されるものであり、当該領域が狭くなるに従って押し潰されるようにアニメーション表示される。このとき、表示装置１０は、下線が同じ文字を装飾し続けるように、文字列の画像ｉ３１ａと同じような変形を施した下線の画像ｉ３２ａを第２ディスプレイ１２１に表示する。
【００４８】
また、表示装置１０は、第１ディスプレイ１１１と第２ディスプレイ１２１とが所定の位置関係になった場合、換言すれば第１ディスプレイ１１１と第２ディスプレイ１２１とが重なる領域の面積が所定の閾値以下になった場合に、背景画像と前景画像を合成し、合成画像を第１ディスプレイ１１１又は第２ディスプレイ１２１に表示させる。
【００４９】
図１３は、第２ディスプレイ１２１に合成画像ｉ３３を表示する表示例を示す図である。このとき、表示装置１０は、第１ディスプレイ１１１に背景画像、前景画像又は合成画像のいずれとも異なる画像を表示してもよいし、何も表示しなくてもよい。また、表示装置１０は、合成画像を第２ディスプレイ１２１ではなく第１ディスプレイ１１１に表示してもよい。
【００５０】
なお、表示装置１０は、上述した第３の表示例と同様の要領によって、例えば、カメラ部８００により撮影された被写体の画像を背景画像として第１ディスプレイ１１１に表示するとともに、他の画像を前景画像として第２ディスプレイ１２１に表示してもよい。ここでいう他の画像は、例えば、ユーザが手書きした文字や絵などである。かかる画像は、タッチスクリーンを介して、ユーザが指やスタイラスによって入力することが可能である。かかる場合において、表示装置１０は、被写体の画像と手書きの画像とを合成した合成画像を生成することも可能である。
【００５１】
以上のとおり、本実施形態の表示装置１０によれば、透過型の第２ディスプレイ１２１を第１ディスプレイ１１１に重ねて設け、表示対象の画像を第１ディスプレイ１１１と第２ディスプレイ１２１とに振り分けることによって、透過型ディスプレイを単体で用いた場合や、透過型でないディスプレイを組み合わせて用いた場合に比べ、多様な画像表示を実現することが可能となる。
【００５２】
［変形例］
上述した実施形態は、本発明の実施の一例にすぎない。本発明は、上述した実施形態に対して以下の変形を適用した態様で実施することも可能である。なお、以下に示す変形例は、必要に応じて、各々を適当に組み合わせて実施されてもよいものである。
【００５３】
（変形例１）
本発明に係る表示装置は、ディスプレイを有するユニットを３以上備える構成であってもよいし、ディスプレイを有するユニットとディスプレイを有しないユニットとを備える構成であってもよい。
【００５４】
図１４は、本例に係る表示装置の外観を示す正面図である。図１４に示す表示装置２０は、図１に示す第１ユニット１１０と第２ユニット１２０とに加え、第３ユニット１３０を備える。第３ユニット１３０は、縦方向にスライド可能な移動機構を有するとともに、入力手段としてキーパッド１３１を有する。キーパッド１３１は、例えばテンキーであるが、ＱＷＥＲＴＹ配列のキーなどであってもよい。この構成においては、第１ディスプレイ１１１及び第２ディスプレイ１２１は、タッチスクリーンによる入力手段を有しなくてもよい。なお、第３ユニット１３０は、図４と同様の移動機構により、縦方向だけでなく横方向にもスライド可能であってもよい。
【００５５】
（変形例２）
本発明に係る移動機構は、回転によりスライドする構成であってもよいし、スライドによる移動以外の移動を含むものであってもよい。また、移動機構は、ユーザが手動で形態を変化させるものであってもよいし、モータ等によって電動で形態を変化させるものであってもよい。
【００５６】
図１５は、回転によりスライドする移動機構を示す図である。図１５に示す表示装置３０は、図４に示す移動機構に代えて、軸部１１５を有する。軸部１１５は、第２ユニット１２０の回転軸として機能するものである。第２ユニット１２０は、第１ユニット１１０と重なる基本形態の位置から、図中の二点鎖線で示す位置に移動可能である。
【００５７】
（変形例３）
図１２及び図１３で説明した表示例は、横スライド形態においてではなく、縦スライド形態において行われてもよいものである。また、表示装置１０は、例えば、横スライド形態と縦スライド形態とで、表示に関して異なる動作を行うようにしてもよい。
【００５８】
（変形例４）
本発明に係る表示装置は、前景画像と背景画像とを組にした第１画像データや合成画像を表す第２画像データを外部装置に送信する機能を有していてもよい。この場合において、表示装置は、受信側の表示装置が第１ディスプレイ１１１及び第２ディスプレイ１２１に相当する表示部を備えるか否かによって、第１画像データと第２画像データのいずれを送信するかを制御してもよい。このようにすれば、受信側の表示装置が自装置と同様の表示部を有する場合には、前景画像と背景画像とを重ね合わせた立体的な表示を可能にしつつ、受信側の表示装置が係る表示部を有しない場合には、代わりに合成画像を表示させることが可能となる。
【００５９】
なお、第１画像データや第２画像データを電子メールの添付ファイルとして送受信する場合、受信側の表示装置が第１ディスプレイ１１１及び第２ディスプレイ１２１に相当する表示部を備えるか否かの判断は、送信側の表示装置ではなくメールサーバによって行われてもよい。この場合、送信側の表示装置は、第１画像データと第２画像データの双方をメールサーバに送信すれば十分である。
【００６０】
（変形例５）
本発明に係る表示装置は、無線通信端末に限定されない。本発明に係る表示装置は、例えば、無線通信ではなく有線通信を行う情報処理装置であってもよいし、さらには通信手段を有しない情報処理装置であってもよい。本発明は、例えば、パーソナルコンピュータ、ゲーム機、デジタルオーディオプレーヤなど、表示部を有するさまざまな情報処理装置に対して適用可能である。
【００６１】
また、本発明は、コンピュータに図６に示した機能（又はその一部）を実現させるためのプログラムとしても把握され得るものである。かかるプログラムは、これを記憶させた光ディスク等の記録媒体の形態で提供されたり、インターネット等のネットワークを介して、コンピュータにダウンロードさせ、これをインストールして利用可能にするなどの形態でも提供されたりすることも可能である。なお、ここでいうコンピュータは、表示装置そのものに備わっている必要はなく、表示装置を制御するための外部装置に備わっているものであってもよい。
【符号の説明】
【００６２】
１０、２０、３０…表示装置、１１０…第１ユニット、１１１…第１ディスプレイ、１２０…第２ユニット、１２１…第２ディスプレイ、１００…制御部、１０１…モード判定部、１０２…取得部、１０３…特定部、１０４…振分判定部、１０５…表示制御部、１０６…合成部、２００…記憶部、３００…表示部、４００…操作部、５００…通信部、６００…音声入出力部、７００…検知部、８００…カメラ部
【技術分野】
【０００１】
本発明は、透過型ディスプレイを用いた情報表示に関する。
【背景技術】
【０００２】
透過型ディスプレイと呼ばれる、向こう側が透けて見えるディスプレイが知られている。かかるディスプレイは、透過ディスプレイ、透明ディスプレイなどとも呼ばれている。特許文献１には、透過型ディスプレイをフリップ部材に設け、この透過型ディスプレイに表示させる画像をフリップ部材の姿勢に応じて修正することが記載されている。しかし、特許文献１に記載された技術は、複数のディスプレイを組み合わせて用いるものではない。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特表２００６−５０４１４４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明の目的は、複数の画像を、透過型のディスプレイと当該ディスプレイと重なる他のディスプレイとに振り分けて表示できるようにすることにある。
【課題を解決するための手段】
【０００５】
本発明の一態様に係る表示装置は、画像を表示する第１ディスプレイと、前記第１ディスプレイと重なる状態で画像を表示し、当該状態において、前記第１ディスプレイに表示されている画像を透過してユーザに視認させ得る第２ディスプレイと、表示対象となる画像の属性を特定する特定部と、前記特定部により特定された画像の属性に基づいて、当該画像が背景画像と前景画像のいずれに属するかを判定する判定部と、前記判定部により前記背景画像に属すると判定された画像を前記第１ディスプレイに表示させ、前記判定部により前記前景画像に属すると判定された画像を前記第２ディスプレイに表示させる表示制御部とを備える構成を有する。
【０００６】
好ましい態様において、前記表示装置は、前記特定部が、画像が静止画又は動画のいずれかに該当するか特定し、前記判定部が、静止画又は動画の一方に該当する画像を前記背景画像に属すると判定し、他方に該当する画像を前記前景画像に属すると判定する。
他の好ましい態様において、前記表示装置は、前記第２ディスプレイに設けられるタッチスクリーンによりユーザの操作を受け付ける操作部を備え、前記特定部が、画像が前記操作を受け付ける操作画像に該当するか特定し、前記判定部が、前記操作画像を前記前景画像であると判定する。
他の好ましい態様において、前記表示装置は、前記第１ディスプレイと前記第２ディスプレイの位置を相対的に移動させる移動機構を備え、前記表示制御部が、前記移動機構による移動に応じて前記第１ディスプレイ又は前記第２ディスプレイの表示態様を変化させる。
他の好ましい態様において、前記表示装置は、前記背景画像と前記前景画像とを合成して合成画像を生成する合成部を備え、前記表示制御部が、前記第１ディスプレイと前記第２ディスプレイとが所定の位置関係になった場合に、前記背景画像及び前記前景画像に代えて前記合成画像を前記第１ディスプレイ又は前記第２ディスプレイに表示させる。
【０００７】
本発明の他の態様に係るプログラムは、画像を表示する第１ディスプレイと、前記第１ディスプレイと重なる状態で画像を表示し、当該状態において前記第１ディスプレイに表示されている画像を透過してユーザに視認させ得る第２ディスプレイとを有する表示装置を制御するコンピュータに、表示対象となる画像の属性を特定するステップと、前記特定された画像の属性に基づいて、当該画像が背景画像と前景画像のいずれに属するかを判定するステップと、前記背景画像に属すると判定された画像を前記第１ディスプレイに表示させ、前記前景画像に属すると判定された画像を前記第２ディスプレイに表示させるステップとを実行させるためのものである。
【発明の効果】
【０００８】
本発明によれば、複数の画像を、透過型のディスプレイと当該ディスプレイと重なる他のディスプレイとに振り分けて表示できることが可能である。
【図面の簡単な説明】
【０００９】
【図１】表示装置の外観を示す三面図（基本形態）
【図２】表示装置の縦スライド形態を示す正面図
【図３】表示装置の横スライド形態を示す正面図
【図４】表示装置移動機構を示す模式図
【図５】表示装置のハードウェア構成を示すブロック図
【図６】制御部の機能的構成を示す機能ブロック図
【図７】表示装置による表示処理を示すフローチャート
【図８】表示装置の第１の表示例を示す図
【図９】第１の表示例における表示の変化を示す図
【図１０】表示装置の第２の表示例を示す図
【図１１】表示装置の第３の表示例を示す図
【図１２】第３の表示例における表示の変化を示す図
【図１３】第３の表示例における表示の変化を示す図
【図１４】表示装置の外観を示す正面図
【図１５】回転によりスライドする移動機構を示す図
【発明を実施するための形態】
【００１０】
［実施形態］
図１は、本発明の一実施形態である表示装置の外観を示す三面図である。本実施形態の表示装置１０は、携帯電話機、スマートフォン等の無線通信端末である。表示装置１０は、図１に示すように、第１ユニット１１０と、第２ユニット１２０とを備える。第２ユニット１２０は、第１ユニット１１０と重なるようになっており、画像を表示する第２ディスプレイ１２１を有している。第１ユニット１１０は、後述する第１ディスプレイ１１１を、この第２ディスプレイ１２１と重なるように有している。また、第２ユニット１２０は、画像を表示しない領域を第２ディスプレイ１２１の周囲に有している。以下においては、ディスプレイの周囲のこのような領域のことを「額縁領域」という。
【００１１】
以下においては、説明の便宜上、第２ユニット１２０の第２ディスプレイ１２１が設けられている側の面を表示装置１０の「正面」といい、後述する第１ユニット１１０の第１ディスプレイ１１１が設けられていない側の面を表示装置１０の「背面」という。また、以下においては、図１中の矢印ａ１の方向のことを上とし、矢印ａ２の方向のことを左とする。さらに、上方向とその反対方向（下方向）とを総称して「縦方向」といい、左方向とその反対方向（右方向）とを総称して「横方向」という。
【００１２】
第２ディスプレイ１２１は、透過型ディスプレイであり、光を背面側から正面側（及び正面側から背面側）に透過する。なお、ここでいう「透過」は、１００％ないしそれに近い透過率で光を通過させることであればより望ましいが、ユーザに画像を視認させ得る程度の透過率で光を通過させれば足りるものである。第２ディスプレイ１２１は、周知の透過型ディスプレイのいずれであってもよいが、例えば、自発光型の有機ＥＬ（electroluminescence）素子を用いたディスプレイである。また、第２ディスプレイ１２１は、表示素子に液晶を用いる場合のように、表示素子自体が発光しない場合にあっては、額縁領域にエッジライト方式のバックライトを有していてもよい。
【００１３】
第１ユニット１１０及び第２ユニット１２０は、その連結部分が移動機構を構成し、一方を他方に対して相対的に移動させることが可能である。表示装置１０は、かかる移動によってその形態を変化させる。第２ユニット１２０は、第１ユニット１１０に対して縦方向及び横方向に移動する。以下においては、図１に示す形態、すなわち第１ディスプレイ１１１と第２ディスプレイ１２１とが重なっている表示装置１０の形態のことを、「基本形態」という。
【００１４】
図２は、第２ユニット１２０を基本形態から上方向にスライドさせた場合の表示装置１０の形態を示す正面図である。また、図３は、第２ユニット１２０を基本形態から左方向にスライドさせた場合の表示装置１０の形態を示す正面図である。表示装置１０は、第２ユニット１２０が基本形態から移動した形態になることによって、第１ディスプレイ１１１が露出した状態（すなわち、第２ユニット１２０に覆われていない状態）になる。以下においては、図２に示す状態のことを「縦スライド形態」といい、図３に示す状態のことを「横スライド形態」という。ここにおいて、スライドとは、ディスプレイの面に沿って移動することをいうものである。
【００１５】
第１ディスプレイ１１１は、本実施形態においては、第２ディスプレイと同面積の表示領域（画像を表示する領域）を有するものとする。第１ディスプレイ１１１は、基本形態において正面（ディスプレイの表面に対して垂直な方向）から視認したとき、第２ディスプレイ１２１とちょうど重なる位置にある。なお、第１ディスプレイ１１１は、透過型ディスプレイである必要はなく、周知のさまざまなディスプレイを用い得る。
【００１６】
基本形態において、第１ディスプレイ１１１は、これを正面側から観察するユーザにより、第２ディスプレイ１２１を介して視認される。一方、縦スライド形態及び横スライド形態において、第１ディスプレイ１１１は、第２ディスプレイ１２１を介さずにユーザに視認される。よって、表示装置１０は、基本形態から縦スライド形態又は横スライド形態に形態を変化させることで、表示領域の面積を２倍に増やすことが可能である。
【００１７】
図４は、表示装置１０の移動機構を示す模式図である。第２ユニット１２０は、レール１２２、１２３、１２４及び１２５を有する。レール１２２、１２３、１２４及び１２５は、第２ユニット１２０の移動を案内するための溝である。また、第１ユニット１１０は、突起部１１２、１１３及び１１４を有する。突起部１１２、１１４は、第２ユニット１２０をレール１２２、１２３に沿って横方向にスライドさせる。なお、第２ユニット１２０が基本形態から左方向にスライドするとき、突起部１１３は、第１ユニット１１０の内部に押し込まれ、レール１２２、１２５から外れるように構成されている。また、突起部１１３は、第２ユニット１２０が横スライド形態から基本形態に戻るときには、突起してレール１２２、１２５に再び嵌るように構成されている。
【００１８】
また、突起部１１２、１１３は、第２ユニット１２０をレール１２４、１２５に沿って縦方向にスライドさせる。なお、第２ユニット１２０が基本形態から上方向にスライドするとき、突起部１１４は、第１ユニット１１０の内部に押し込まれ、レール１２３、１２４から外れるように構成されている。また、突起部１１４は、第２ユニット１２０が縦スライド形態から基本形態に戻るときには、突起してレール１２３、１２４に再び嵌るように構成されている。
【００１９】
図５は、表示装置１０のハードウェア構成を示すブロック図である。表示装置１０は、図５に示すように、制御部１００と、記憶部２００と、表示部３００と、操作部４００と、通信部５００と、音声入出力部６００と、検知部７００と、カメラ部８００とを備える。
【００２０】
制御部１００は、表示装置１０の各部の動作を制御する手段である。制御部１００は、ＣＰＵ（Central Processing Unit）等の演算処理装置や主記憶装置に相当する記憶手段（メインメモリ）を備え、プログラムを実行することによって制御を行う。記憶部２００は、制御部１００が用いるデータを記憶する手段である。記憶部２００は、補助記憶装置に相当する記憶手段（ハードディスク、フラッシュメモリ等）を備えるが、いわゆるメモリカードのような着脱可能な記憶手段（リムーバブルメディア）を含んでもよい。
【００２１】
表示部３００は、第１ディスプレイ１１１及び第２ディスプレイ１２１に画像を表示させる手段である。表示部３００は、第１ディスプレイ１１１及び第２ディスプレイ１２１と、これらのディスプレイを駆動するための駆動回路などを備える。操作部４００は、ユーザの操作を受け付けるための入力手段を備える。操作部４００は、入力手段として、第１ディスプレイ１１１や第２ディスプレイ１２１の正面側に設けられるタッチスクリーンや、額縁領域や正面以外の面にボタン（電源ボタン等）を有することが可能である。操作部４００は、ユーザの操作を表す操作情報を制御部１００に供給する。通信部５００は、外部装置を無線通信を行うための手段である。ここでいう外部装置は、無線通信ネットワークを構成する基地局であってもよいし、表示装置１０と通信する他の無線通信端末であってもよい。つまり、通信部５００は、赤外線通信等の近距離無線通信を行うための手段を含み得る。音声入出力部６００は、音声の入力及び出力を行うための手段であり、スピーカやマイクロホンを備える。
【００２２】
検知部７００は、表示装置１０の形態、すなわち第１ユニット１１０と第２ユニット１２０の相対的な位置関係を検知するための手段である。検知部７００は、例えば、突起部１１３又は１１４が押し込まれ、又は突起したことを検知するセンサや、突起部のレール内における位置を検知するセンサを含み得る。検知部７００は、望ましくは、基本形態、縦スライド形態及び横スライド形態の３形態だけでなく、基本形態から別の形態（あるいはその逆）へと遷移する過渡的な状態をも検知できるように構成される。この場合、検知部７００は、第１ディスプレイ１１１及び第２ディスプレイ１２１の重なり具合（すなわち、重なり合う面積）を検知することが可能である。検知部７００は、これらの検知結果を表す形態情報を制御部１００に供給する。
【００２３】
カメラ部８００は、被写体を撮影する手段である。ここでいう被写体は、ユーザであってもよいし、風景などであってもよい。カメラ部８００は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等の撮像素子を第１ユニット１１０又は第２ユニット１２０に備える。カメラ部８００は、撮影した被写体の画像を表す画像データを制御部１００に供給する。なお、第１ディスプレイ１１１又は第２ディスプレイ１２１は、カメラ部８００による撮影に際し、いわゆるファインダとして機能してもよい。
【００２４】
図６は、制御部１００の機能的構成の一部（特に、画像の表示に関するもの）を示す機能ブロック図である。制御部１００は、プログラムを実行することにより、図６に示すモード判定部１０１、取得部１０２、特定部１０３、振分判定部１０４、表示制御部１０５及び合成部１０６に相当する各機能を実現する。
【００２５】
モード判定部１０１は、検知部７００による検知結果（すなわち形態情報）を用いて、表示装置１０の形態に応じたモードを判定する。ここでいうモードには、基本形態に対応する「基本モード」と、縦スライド形態に対応する「縦モード」と、横スライド形態に対応する「横モード」とが少なくとも含まれる。また、モード判定部１０１は、基本モードから縦モード又は横モードに遷移する過渡的な状態を別のモード（以下「過渡モード」という。）として判定してもよい。
【００２６】
取得部１０２は、表示対象の画像を表す描画オブジェクトを取得する。ここにおいて、「オブジェクト」とは、表示部３００によって表示される画像であって、個々の物体を表すものをいう。描画オブジェクトには、文字、罫線、図形、アイコン、写真などが含まれる。また、描画オブジェクトには、文字に対する装飾（下線等の強調表示）や、図形に対する影なども含まれ得る。なお、描画オブジェクトは、静止画又は動画のいずれであってもよい。取得部１０２は、記憶部２００に記憶されているデータ、通信部５００を介して外部装置から受信されたデータ又はカメラ部８００から供給された画像データの少なくともいずれかを、描画オブジェクトとして取得することが可能である。
【００２７】
特定部１０３は、取得部１０２により取得された描画オブジェクトにより表される画像の属性を特定する。ここにおいて、「属性」とは、画像を特徴付ける性質をいう。属性は、それぞれの画像に対してあらかじめ決められていることもあるが、アプリケーションの動作やユーザの操作に応じて決まることもある。よって、属性は、ある画像について不変であるとは限らず、表示の途中で変わる場合もあり得るものである。特定部１０３は、例えば、画像が所定の機能を有するか否かや、画像のデータ形式によって属性を特定する。
【００２８】
振分判定部１０４は、取得部１０２により取得された描画オブジェクトにより表される画像について、前景画像と背景画像のいずれであるかを判定する。振分判定部１０４は、かかる判定を、特定部１０３により特定された個々の画像の属性に応じて行う。ここにおいて、「前景画像」とは、基本モード、すなわち第１ディスプレイ１１１と第２ディスプレイ１２１とが重なる状態において表示される画像のうちの第２ディスプレイ１２１に表示される画像をいい、「背景画像」とは、かかる状態において表示される画像のうちの第１ディスプレイ１１１に表示される画像をいう。換言すれば、前景画像は、基本形態においてユーザにより近い側（正面側）にある画像であり、背景画像は、基本形態においてユーザにより遠い側にある画像である。
【００２９】
なお、特定部１０３及び振分判定部１０４は、基本モード、すなわち第１ディスプレイ１１１と第２ディスプレイ１２１とが重なる状態において機能すればよく、それ以外の場合（縦モード又は横モードの場合）には機能しなくてもよい。あるいは、振分判定部１０４は、基本モードである場合と縦モード又は横モードである場合とで、画像の振り分けの態様を異ならせてもよい。これらの動作を実現するために、特定部１０３及び振分判定部１０４は、モード判定部１０１による判定結果を用いる。
【００３０】
表示制御部１０５は、表示部３００による表示を制御する。表示制御部１０５は、振分判定部１０４による判定結果に基づいて、表示対象の画像を第１ディスプレイ１１１と第２ディスプレイ１２１のいずれに表示させるのかを判断する。表示制御部１０５は、基本モードにおいては、前景画像を第２ディスプレイ１２１に表示させ、背景画像を第１ディスプレイ１１１に表示させるように表示部３００を制御する。
【００３１】
合成部１０６は、振分判定部１０４により前景画像と背景画像とに振り分けられた画像を、必要に応じて合成する。合成部１０６によって合成され、新たに生成される画像のことを、以下においては「合成画像」という。合成画像は、第１ディスプレイ１１１又は第２ディスプレイ１２１において表示されるほか、電子メールに添付される形態などによって外部装置に送信されることもある。
【００３２】
表示装置１０の構成は、以上のとおりである。表示装置１０は、かかる構成のもと、ユーザの操作や自装置のモードに応じた態様で画像を表示する。表示装置１０は、例えば、基本モードである場合には、第１ディスプレイ１１１と第２ディスプレイ１２１とが重なっていることを利用して、画像の表示に立体感や娯楽性を与えたりする。また、表示装置１０は、必要なアプリケーションを備えることにより、電子メールを送受信する機能（いわゆるメーラ）やＷｅｂページを閲覧する機能（いわゆるＷｅｂブラウザ）を実現することも可能である。以下においては、表示装置１０が実行可能なアプリケーションが複数あるものとする。
【００３３】
図７は、表示装置１０による表示処理を示すフローチャートである。図７に示す表示処理は、所定のイベントの発生を契機に実行されるものである。ここでいう所定のイベントは、典型的には、表示部３００による表示の変更を伴うような動作であり、例えば、アプリケーションを起動し、又は終了する操作などである。また、この表示処理は、表示装置１０の形態（すなわちモード）が変更されたときにも実行される。
【００３４】
かかる表示処理において、表示装置１０の制御部１００は、まず、表示対象の画像を表す描画オブジェクトを取得する（ステップＳ１）。次に、制御部１００は、形態情報に基づき、表示装置１０が基本モードであるか否かを判断する（ステップＳ２）。ここで、表示装置１０が基本モード以外のモードである場合、制御部１００は、そのときのモードに応じた態様で画像を表示するように表示部３００を制御する（ステップＳ６）。
【００３５】
一方、表示装置１０が基本モードで動作している場合、制御部１００は、ステップＳ１において取得された描画オブジェクトにより表される各画像の属性を特定し（ステップＳ３）、画像を前景画像と背景画像とに振り分ける判定を行う（ステップＳ４）。その後、制御部１００は、前景画像を第２ディスプレイ１２１に表示し、背景画像を第１ディスプレイ１１１に表示するように表示部３００を制御する（ステップＳ５）。表示部３００は、ステップＳ５又はＳ６の制御の内容に応じて、第１ディスプレイ１１１及び第２ディスプレイ１２１に画像を表示する。
【００３６】
図８は、基本モードにおける第１の表示例を示す図である。図８は、説明の便宜上、第１ユニット１１０及び第２ユニット１２０が重なっていない状態での画像と、第１ユニット１１０及び第２ユニット１２０が重なっている状態での画像とを併記したものである。この表示例は、アプリケーションを一覧表示するものであり、各アプリケーションはアイコンｉ１１〜ｉ１７によって表現されている。この例において、第２ディスプレイ１２１は、タッチスクリーンによってユーザの操作を受け付けることが可能であるとする。また、この例において、アイコンは、本発明に係る操作画像に相当する。
【００３７】
さらに、この例においては、アプリケーションには実行可能なものと実行不可能なものとがあるものとする。実行不可能なアプリケーションとは、例えば、有効期限を超過したアプリケーションや、特定の条件を満たさないと実行できないアプリケーションなどである。なお、基本モードにおいては実行不可能であるが、縦モード又は横モードにおいては実行可能なアプリケーションも、ここでいう「特定の条件を満たさないと実行できないアプリケーション」に該当する。ここで、アイコンｉ１１、ｉ１２、ｉ１４、ｉ１５、ｉ１６及びｉ１７は、実行可能なアプリケーションを表す画像であり、アイコンｉ１３及びｉ１４は、実行不可能なアプリケーションを表す画像である。
【００３８】
このとき、表示装置１０は、第２ディスプレイ１２１にアイコンｉ１１、ｉ１２、ｉ１４、ｉ１５、ｉ１６及びｉ１７を前景画像として表示し、第１ディスプレイ１１１にアイコンｉ１３及びｉ１４を含む他の画像を背景画像として表示する。ここでいう「他の画像」は、アイコン以外に、操作を受け付けない画像（例えば、電池の残量を表す画像や、電波の受信強度を表す画像など）を含むものである。つまり、この表示例においては、表示装置１０は、「画像が操作を受け付ける画像（すなわちアイコン）であるか否か」と「実行可能なアプリケーションのアイコンであるか否か」とを判断基準に用いて画像の属性を特定している。
【００３９】
この表示例によれば、実行可能なアプリケーションに対応するアイコンは、他の画像に対して浮き上がっているようにユーザに視認される。これにより、ユーザは、かかるアイコンと他の画像とを視覚的に容易に区別することが可能となるため、誤操作や無駄な操作を抑制することが可能となる。
【００４０】
なお、この表示例において、アイコンｉ１１、ｉ１２、ｉ１４、ｉ１５、ｉ１６及びｉ１７は、第１ディスプレイ１１１と第２ディスプレイ１２１の双方に、互いに重なるようにして表示されてもよい。また、これらのアイコンは、いわゆる「ドラッグ・アンド・ドロップ」の操作が行えるようになっていてもよい。このとき、表示装置１０は、ユーザの操作に応じて前景画像と背景画像の表示態様を異ならせてもよい。
【００４１】
図９は、第１の表示例において、ユーザがアイコンをドラッグする場合の表示例を示す図であり、図８に示すアイコンｉ１６をドラッグした場合を示すものである。図９において、アイコンｉ１６ｆは前景画像に相当し、アイコンｉ１６ｂは背景画像に相当する。つまり、この表示例は、同一の画像が前景画像と背景画像の双方に振り分けられている例である。表示装置１０は、アイコンｉ１６ｆをユーザのドラッグする操作（第２ディスプレイ１２１を指でなぞる操作）に追従するようにアニメーション表示させる。このとき、アイコンｉ１６ｂは、元の位置に表示されたままであり、移動しない。その後、ユーザがドロップする操作（指を話す操作）を行うと、表示装置１０は、アイコンｉ１６ｆをその位置から動かないように表示させる。このとき、表示装置１０は、アイコンｉ１６ｂを第１ディスプレイ１１１から消去するか、あるいはアイコンｉ１６ｆと重なる位置まで移動させて表示する。
【００４２】
このようにすれば、ユーザは、アイコンを移動させる操作の最中に、そのアイコンの元の位置を容易に認識することが可能である。また、表示装置１０は、アニメーション表示を第２ディスプレイ１２１のみで行えばよく、これを第１ディスプレイ１１１と第２ディスプレイ１２１の双方で行う必要がないという利点を有する。
【００４３】
図１０は、基本モードにおける第２の表示例を示す図である。図１０に示す表示例は、ある仮想空間にキャラクタ（アバター等）を重ねて表示させるものである。この例において、第１ディスプレイ１１１は、仮想空間の画像ｉ２１を背景画像として表示しており、第２ディスプレイ１２１は、キャラクタの画像ｉ２２を前景画像として表示している。このようにすることで、表示装置１０は、立体感（奥行き感）のある画像表示を実現することができる。
【００４４】
このとき、表示装置１０は、背景画像を静止画とし、前景画像を動画とする、というように、画像が動くか否かによって属性を特定するようにしてもよい。この例によれば、キャラクタの画像ｉ２２は、仮想空間の内部を歩いたりするような適当なアニメーション表示が行われる。このようにすれば、第１ディスプレイ１１１を書き換えることなく、立体感のある動画を表示することが可能となる。なお、表示装置１０は、背景画像を動画とし、前景画像を静止画としてもよい。
【００４５】
図１１は、基本モードにおける第３の表示例を示す図である。図１１に示す表示例は、文字列と、当該文字列の一部を強調するための下線とを重ねて表示させるものである。この例において、第１ディスプレイ１１１は、文字列の画像ｉ３１を背景画像として表示しており、第２ディスプレイ１２１は、下線の画像ｉ３２を前景画像として表示している。この例において、表示装置１０は、「文字」と、これに付随する「文字装飾」とで属性を区別して特定している。このようにすれば、下線を文字から浮き上がっているように表示させることが可能であり、より効果的な態様で強調表示を行うことが可能となる。なお、表示装置１０は、文字を前景画像とし、文字装飾を背景画像としてもよい。
【００４６】
また、表示装置１０は、基本形態から他の形態に変化するときに、第１ユニット１１０又は第２ユニット１２０の移動に応じて、第１ディスプレイ１１１又は第２ディスプレイ１２１の表示態様を変化させてもよい。
【００４７】
図１２は、表示装置１０が基本形態から横スライド形態に遷移するときの表示例を示す図である。この例において、表示装置１０は、図１２（ａ）に示す基本形態においては、図１１と同様の画面を第１ディスプレイ１１１及び第２ディスプレイ１２１に表示しているものとする。また、表示装置１０は、基本形態から横スライド形態へと変化する過渡的な期間（図１１（ｂ）参照）に、その表示態様が第２ユニット１２０の移動に応じて変化する画像を第１ディスプレイ１１１及び第２ディスプレイ１２１に表示する。かかる画像は、第１ディスプレイ１１１の第２ディスプレイ１２１と重なっている領域内に表示されるものであり、当該領域が狭くなるに従って押し潰されるようにアニメーション表示される。このとき、表示装置１０は、下線が同じ文字を装飾し続けるように、文字列の画像ｉ３１ａと同じような変形を施した下線の画像ｉ３２ａを第２ディスプレイ１２１に表示する。
【００４８】
また、表示装置１０は、第１ディスプレイ１１１と第２ディスプレイ１２１とが所定の位置関係になった場合、換言すれば第１ディスプレイ１１１と第２ディスプレイ１２１とが重なる領域の面積が所定の閾値以下になった場合に、背景画像と前景画像を合成し、合成画像を第１ディスプレイ１１１又は第２ディスプレイ１２１に表示させる。
【００４９】
図１３は、第２ディスプレイ１２１に合成画像ｉ３３を表示する表示例を示す図である。このとき、表示装置１０は、第１ディスプレイ１１１に背景画像、前景画像又は合成画像のいずれとも異なる画像を表示してもよいし、何も表示しなくてもよい。また、表示装置１０は、合成画像を第２ディスプレイ１２１ではなく第１ディスプレイ１１１に表示してもよい。
【００５０】
なお、表示装置１０は、上述した第３の表示例と同様の要領によって、例えば、カメラ部８００により撮影された被写体の画像を背景画像として第１ディスプレイ１１１に表示するとともに、他の画像を前景画像として第２ディスプレイ１２１に表示してもよい。ここでいう他の画像は、例えば、ユーザが手書きした文字や絵などである。かかる画像は、タッチスクリーンを介して、ユーザが指やスタイラスによって入力することが可能である。かかる場合において、表示装置１０は、被写体の画像と手書きの画像とを合成した合成画像を生成することも可能である。
【００５１】
以上のとおり、本実施形態の表示装置１０によれば、透過型の第２ディスプレイ１２１を第１ディスプレイ１１１に重ねて設け、表示対象の画像を第１ディスプレイ１１１と第２ディスプレイ１２１とに振り分けることによって、透過型ディスプレイを単体で用いた場合や、透過型でないディスプレイを組み合わせて用いた場合に比べ、多様な画像表示を実現することが可能となる。
【００５２】
［変形例］
上述した実施形態は、本発明の実施の一例にすぎない。本発明は、上述した実施形態に対して以下の変形を適用した態様で実施することも可能である。なお、以下に示す変形例は、必要に応じて、各々を適当に組み合わせて実施されてもよいものである。
【００５３】
（変形例１）
本発明に係る表示装置は、ディスプレイを有するユニットを３以上備える構成であってもよいし、ディスプレイを有するユニットとディスプレイを有しないユニットとを備える構成であってもよい。
【００５４】
図１４は、本例に係る表示装置の外観を示す正面図である。図１４に示す表示装置２０は、図１に示す第１ユニット１１０と第２ユニット１２０とに加え、第３ユニット１３０を備える。第３ユニット１３０は、縦方向にスライド可能な移動機構を有するとともに、入力手段としてキーパッド１３１を有する。キーパッド１３１は、例えばテンキーであるが、ＱＷＥＲＴＹ配列のキーなどであってもよい。この構成においては、第１ディスプレイ１１１及び第２ディスプレイ１２１は、タッチスクリーンによる入力手段を有しなくてもよい。なお、第３ユニット１３０は、図４と同様の移動機構により、縦方向だけでなく横方向にもスライド可能であってもよい。
【００５５】
（変形例２）
本発明に係る移動機構は、回転によりスライドする構成であってもよいし、スライドによる移動以外の移動を含むものであってもよい。また、移動機構は、ユーザが手動で形態を変化させるものであってもよいし、モータ等によって電動で形態を変化させるものであってもよい。
【００５６】
図１５は、回転によりスライドする移動機構を示す図である。図１５に示す表示装置３０は、図４に示す移動機構に代えて、軸部１１５を有する。軸部１１５は、第２ユニット１２０の回転軸として機能するものである。第２ユニット１２０は、第１ユニット１１０と重なる基本形態の位置から、図中の二点鎖線で示す位置に移動可能である。
【００５７】
（変形例３）
図１２及び図１３で説明した表示例は、横スライド形態においてではなく、縦スライド形態において行われてもよいものである。また、表示装置１０は、例えば、横スライド形態と縦スライド形態とで、表示に関して異なる動作を行うようにしてもよい。
【００５８】
（変形例４）
本発明に係る表示装置は、前景画像と背景画像とを組にした第１画像データや合成画像を表す第２画像データを外部装置に送信する機能を有していてもよい。この場合において、表示装置は、受信側の表示装置が第１ディスプレイ１１１及び第２ディスプレイ１２１に相当する表示部を備えるか否かによって、第１画像データと第２画像データのいずれを送信するかを制御してもよい。このようにすれば、受信側の表示装置が自装置と同様の表示部を有する場合には、前景画像と背景画像とを重ね合わせた立体的な表示を可能にしつつ、受信側の表示装置が係る表示部を有しない場合には、代わりに合成画像を表示させることが可能となる。
【００５９】
なお、第１画像データや第２画像データを電子メールの添付ファイルとして送受信する場合、受信側の表示装置が第１ディスプレイ１１１及び第２ディスプレイ１２１に相当する表示部を備えるか否かの判断は、送信側の表示装置ではなくメールサーバによって行われてもよい。この場合、送信側の表示装置は、第１画像データと第２画像データの双方をメールサーバに送信すれば十分である。
【００６０】
（変形例５）
本発明に係る表示装置は、無線通信端末に限定されない。本発明に係る表示装置は、例えば、無線通信ではなく有線通信を行う情報処理装置であってもよいし、さらには通信手段を有しない情報処理装置であってもよい。本発明は、例えば、パーソナルコンピュータ、ゲーム機、デジタルオーディオプレーヤなど、表示部を有するさまざまな情報処理装置に対して適用可能である。
【００６１】
また、本発明は、コンピュータに図６に示した機能（又はその一部）を実現させるためのプログラムとしても把握され得るものである。かかるプログラムは、これを記憶させた光ディスク等の記録媒体の形態で提供されたり、インターネット等のネットワークを介して、コンピュータにダウンロードさせ、これをインストールして利用可能にするなどの形態でも提供されたりすることも可能である。なお、ここでいうコンピュータは、表示装置そのものに備わっている必要はなく、表示装置を制御するための外部装置に備わっているものであってもよい。
【符号の説明】
【００６２】
１０、２０、３０…表示装置、１１０…第１ユニット、１１１…第１ディスプレイ、１２０…第２ユニット、１２１…第２ディスプレイ、１００…制御部、１０１…モード判定部、１０２…取得部、１０３…特定部、１０４…振分判定部、１０５…表示制御部、１０６…合成部、２００…記憶部、３００…表示部、４００…操作部、５００…通信部、６００…音声入出力部、７００…検知部、８００…カメラ部
【特許請求の範囲】
【請求項１】
画像を表示する第１ディスプレイと、
前記第１ディスプレイと重なる状態で画像を表示し、当該状態において、前記第１ディスプレイに表示されている画像を透過してユーザに視認させ得る第２ディスプレイと、
表示対象となる画像の属性を特定する特定部と、
前記特定部により特定された画像の属性に基づいて、当該画像が背景画像と前景画像のいずれに属するかを判定する判定部と、
前記判定部により前記背景画像に属すると判定された画像を前記第１ディスプレイに表示させ、前記判定部により前記前景画像に属すると判定された画像を前記第２ディスプレイに表示させる表示制御部と
を備えることを特徴とする表示装置。
【請求項２】
前記特定部が、画像が静止画又は動画のいずれかに該当するか特定し、
前記判定部が、静止画又は動画の一方に該当する画像を前記背景画像に属すると判定し、他方に該当する画像を前記前景画像に属すると判定する
ことを特徴とする請求項１に記載の表示装置。
【請求項３】
前記第２ディスプレイに設けられるタッチスクリーンによりユーザの操作を受け付ける操作部を備え、
前記特定部が、画像が前記操作を受け付ける操作画像に該当するか特定し、
前記判定部が、前記操作画像を前記前景画像であると判定する
ことを特徴とする請求項１に記載の表示装置。
【請求項４】
前記第１ディスプレイと前記第２ディスプレイの位置を相対的に移動させる移動機構を備え、
前記表示制御部が、前記移動機構による移動に応じて前記第１ディスプレイ又は前記第２ディスプレイの表示態様を変化させる
ことを特徴とする請求項１ないし３のいずれか１項に記載の表示装置。
【請求項５】
前記背景画像と前記前景画像とを合成して合成画像を生成する合成部を備え、
前記表示制御部が、前記第１ディスプレイと前記第２ディスプレイとが所定の位置関係になった場合に、前記背景画像及び前記前景画像に代えて前記合成画像を前記第１ディスプレイ又は前記第２ディスプレイに表示させる
ことを特徴とする請求項４に記載の表示装置。
【請求項６】
画像を表示する第１ディスプレイと、前記第１ディスプレイと重なる状態で画像を表示し、当該状態において前記第１ディスプレイに表示されている画像を透過してユーザに視認させ得る第２ディスプレイとを有する表示装置を制御するコンピュータに、
表示対象となる画像の属性を特定するステップと、
前記特定された画像の属性に基づいて、当該画像が背景画像と前景画像のいずれに属するかを判定するステップと、
前記背景画像に属すると判定された画像を前記第１ディスプレイに表示させ、前記前景画像に属すると判定された画像を前記第２ディスプレイに表示させるステップと
を実行させるためのプログラム。
【請求項１】
画像を表示する第１ディスプレイと、
前記第１ディスプレイと重なる状態で画像を表示し、当該状態において、前記第１ディスプレイに表示されている画像を透過してユーザに視認させ得る第２ディスプレイと、
表示対象となる画像の属性を特定する特定部と、
前記特定部により特定された画像の属性に基づいて、当該画像が背景画像と前景画像のいずれに属するかを判定する判定部と、
前記判定部により前記背景画像に属すると判定された画像を前記第１ディスプレイに表示させ、前記判定部により前記前景画像に属すると判定された画像を前記第２ディスプレイに表示させる表示制御部と
を備えることを特徴とする表示装置。
【請求項２】
前記特定部が、画像が静止画又は動画のいずれかに該当するか特定し、
前記判定部が、静止画又は動画の一方に該当する画像を前記背景画像に属すると判定し、他方に該当する画像を前記前景画像に属すると判定する
ことを特徴とする請求項１に記載の表示装置。
【請求項３】
前記第２ディスプレイに設けられるタッチスクリーンによりユーザの操作を受け付ける操作部を備え、
前記特定部が、画像が前記操作を受け付ける操作画像に該当するか特定し、
前記判定部が、前記操作画像を前記前景画像であると判定する
ことを特徴とする請求項１に記載の表示装置。
【請求項４】
前記第１ディスプレイと前記第２ディスプレイの位置を相対的に移動させる移動機構を備え、
前記表示制御部が、前記移動機構による移動に応じて前記第１ディスプレイ又は前記第２ディスプレイの表示態様を変化させる
ことを特徴とする請求項１ないし３のいずれか１項に記載の表示装置。
【請求項５】
前記背景画像と前記前景画像とを合成して合成画像を生成する合成部を備え、
前記表示制御部が、前記第１ディスプレイと前記第２ディスプレイとが所定の位置関係になった場合に、前記背景画像及び前記前景画像に代えて前記合成画像を前記第１ディスプレイ又は前記第２ディスプレイに表示させる
ことを特徴とする請求項４に記載の表示装置。
【請求項６】
画像を表示する第１ディスプレイと、前記第１ディスプレイと重なる状態で画像を表示し、当該状態において前記第１ディスプレイに表示されている画像を透過してユーザに視認させ得る第２ディスプレイとを有する表示装置を制御するコンピュータに、
表示対象となる画像の属性を特定するステップと、
前記特定された画像の属性に基づいて、当該画像が背景画像と前景画像のいずれに属するかを判定するステップと、
前記背景画像に属すると判定された画像を前記第１ディスプレイに表示させ、前記前景画像に属すると判定された画像を前記第２ディスプレイに表示させるステップと
を実行させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１０】
【公開番号】特開２０１１−２４８２０９（Ｐ２０１１−２４８２０９Ａ）
【公開日】平成２３年１２月８日（２０１１．１２．８）
【国際特許分類】
【出願番号】特願２０１０−１２２８３４（Ｐ２０１０−１２２８３４）
【出願日】平成２２年５月２８日（２０１０．５．２８）
【出願人】（３９２０２６６９３）株式会社エヌ・ティ・ティ・ドコモ (5,876)
【Ｆターム（参考）】
【公開日】平成２３年１２月８日（２０１１．１２．８）
【国際特許分類】
【出願日】平成２２年５月２８日（２０１０．５．２８）
【出願人】（３９２０２６６９３）株式会社エヌ・ティ・ティ・ドコモ (5,876)
【Ｆターム（参考）】
[ Back to top ]