表示入力装置及び表示方法
【課題】使用者が両手で保持した状態で両手での入力操作を可能とし、視認し易い画像の表示を可能にする表示入力装置及び表示方法を提供する。
【解決手段】画像表示パネル１の両面に正面側タッチパネル２及び背面側タッチパネル３が配置してあり、画像表示パネル１の両面からの入力が可能である。不可視領域検出部５が、表示入力装置を保持する使用者の手（指）によって視認し辛い不可視領域を検出し、画像処理部１０が、不可視領域に表示されている画像を、視認可能な領域に移動させて表示させる。
【解決手段】画像表示パネル１の両面に正面側タッチパネル２及び背面側タッチパネル３が配置してあり、画像表示パネル１の両面からの入力が可能である。不可視領域検出部５が、表示入力装置を保持する使用者の手（指）によって視認し辛い不可視領域を検出し、画像処理部１０が、不可視領域に表示されている画像を、視認可能な領域に移動させて表示させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示パネルを備え、画像表示パネル上のいずれかの位置を指定する入力を受け付ける表示入力装置及び表示方法に関する。
【背景技術】
【０００２】
透過型液晶パネルなどの画像表示パネルを用いた表示入力装置が、ＰＤＡなどの携帯端末に広く利用されている（例えば特許文献１，２）。特許文献１，２に開示された装置では、画像表示パネルの背面側からの入力が可能である。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−２１６０８７号公報
【特許文献２】特開２００７−１６４７６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上述したような表示入力装置で情報の入力を行なう場合、使用者は両手で表示入力装置を保持した状態で、表示入力装置の背面側に位置する指で入力の操作を行なうことができる。このような装置では、使用者は指で装置を挟持して使用するので、表示画像において、装置の正面側に位置する指によって隠され、使用者が視認できない領域が発生するという問題がある。
【０００５】
本発明は、斯かる事情に鑑みてなされたものであって、その目的とするところは、使用者が両手で保持した状態で両手での入力操作を行なう場合であっても、使用者の手によって視認できない領域の発生を防止することが可能な表示入力装置及び表示方法を提供することにある。
【課題を解決するための手段】
【０００６】
本発明に係る表示入力装置は、一面側から他面側へ光が透過する画像表示パネルと、該画像表示パネルの両面夫々に設けられ、該両面夫々に対する入力操作を受け付ける受付部と、前記画像表示パネルのいずれかの面の側に存在する物体が、該いずれかの面を被覆又は接触する領域を検出する領域検出部と、該領域検出部が検出した領域に基づいて、前記画像表示パネルに表示させる画像の表示位置を調整する画像調整部とを備えることを特徴とする。
【０００７】
本発明によれば、画像表示パネルの両面からの入力が可能である。表示入力装置は、一面側（背面側）にある物体が他面側（正面側）から見えるように透光性の構造になっており、使用者は、背面側の操作状態を正面側から視認しながら行なうことが可能である。表示入力装置は、画像表示パネルのいずれかの面の近傍に存在する物体によって、画像表示パネルのいずれかの面が被覆又は接触される領域を検出する。例えば、画像表示パネルを保持する使用者の手などの陰となり表示画像が視認し辛い領域、画像表示パネルの背面で使用者の手などと重なる領域などが検出される。表示入力装置は、このような領域があった場合に、この領域の表示位置を調整し、例えば、視認可能な領域、又は使用者の手と重ならない領域に表示させる。これにより、使用者の手（指）によって視認できない領域の発生を防止でき、表示画像によって背面側の操作を視認できないという状況の発生を防止できる。
【０００８】
本発明に係る表示入力装置は、前記画像表示パネルは、予め分割された複数の分割領域毎に画像表示が可能であり、前記画像調整部は、前記領域検出部が検出した領域を含む分割領域の表示位置を調整するようにしてあることを特徴とする。
【０００９】
本発明によれば、画像表示パネルは複数の分割領域に分割されており、分割領域毎に表示制御される。そして、表示画像において、画像表示パネルを保持する使用者の手などの陰となり視認できない領域があった場合、又は、画像表示パネルの背面側において、画像表示パネルを保持する使用者の手などと重なる領域があった場合、このような領域を含む分割領域毎に、表示位置が調整される。よって、上述したような領域を含まない分割領域に表示される画像の表示位置は変更されないので、画像の表示位置の不要な変更が抑制され、処理負担が軽減される。
【００１０】
本発明に係る表示入力装置は、前記領域検出部は、前記受付部が受け付けた前記一面又は他面に対する入力操作に基づいて、前記物体が前記一面又は他面と接触する領域を検出するようにしてあることを特徴とする。
【００１１】
本発明によれば、表示入力装置は、使用者が画像表示パネルの正面側に接触した領域を、画像表示パネルを保持する使用者の手などの陰となり表示画像が視認し辛い領域として検出する。また、表示入力装置は、使用者が画像表示パネルの背面側に接触した領域を、画像表示パネルの背面で使用者の手などと重なる領域として検出する。これにより、タッチパネルの機能によって、画像表示パネルの正面の表示画像が視認し辛い領域、及び画像表示パネルの背面の使用者の手と重なる領域を検出できるので、これらの領域を検出するための構成を新たに設ける必要がなく、コストも増大しない。
【００１２】
本発明に係る表示入力装置は、前記画像調整部は、前記領域検出部が検出した１又は複数の領域に表示される画像を、該領域と、該領域以外の所定領域とに交互的に表示させるようにしてあることを特徴とする。
【００１３】
本発明によれば、画像表示パネルを保持する使用者の手などの陰となり表示画像が視認し辛い領域が発生した場合、このような領域に表示される画像が、元の領域と、元の領域以外の、使用者が視認可能な領域とに交互に表示される。また、画像表示パネルの背面で使用者の手などと重なる領域が発生した場合、このような領域に表示される画像が、元の領域と、元の領域以外の、使用者の手と重ならない領域とに交互に表示される。よって、使用者は表示画像又は背面側の操作状態を確実に視認できると共に、元の画像も視認できる。
【００１４】
本発明に係る表示方法は、一面側から他面側へ光が透過する画像表示パネルを備える表示入力装置での表示方法であって、前記画像表示パネルの両面夫々に対する入力操作を受け付けるステップと、前記画像表示パネルのいずれかの面の側に存在する物体が、該いずれかの面を被覆又は接触する領域を検出するステップと、検出された領域に基づいて、前記画像表示パネルに表示させる画像の表示位置を調整するステップとを含むことを特徴とする。
【００１５】
本発明によれば、画像表示パネルの両面からの入力が可能な表示入力装置において、画像表示パネルを保持する使用者の手などの陰となり視認できない画像の表示位置を調整し、使用者の手によって視認できない領域の発生を防止する。また、画像表示パネルの背面側において、画像表示パネルを保持する使用者の手などと重なる領域の表示画像の表示位置を調整し、使用者の手などによる背面側の操作状態を確実に視認可能とする。
【発明の効果】
【００１６】
本発明では、使用者は、表示入力装置を両手で保持した状態で、表示入力装置の正面及び背面に対する入力操作を行なうことができるので、入力操作の自由度が増し、表示入力装置の利便性が向上する。また、表示画像において、画像表示パネルを保持する使用者の手によって遮られ、視認できない領域の発生を防止できるので、表示入力装置の利便性がより向上する。
【図面の簡単な説明】
【００１７】
【図１】実施形態１の表示入力装置の内部構成を示すブロック図である。
【図２】表示入力装置の使用態様を示す模式図である。
【図３】実施形態１の表示入力装置による表示処理の手順を示すフローチャートである。
【図４】画像の表示位置の調整処理を説明するための説明図である。
【図５】実施形態２の表示入力装置の内部構成を示すブロック図である。
【図６】実施形態２の表示入力装置による表示処理の手順を示すフローチャートである。
【図７】画像の表示位置の調整処理を説明するための説明図である。
【図８】画像の表示位置の調整処理を説明するための説明図である。
【図９】画像の表示位置の調整処理を説明するための説明図である。
【図１０】実施形態４の表示入力装置による表示処理の手順を示すフローチャートである。
【発明を実施するための形態】
【００１８】
以下に、本発明をその実施形態を示す図面を参照して具体的に説明する。
【００１９】
（実施形態１）
図１は実施形態１の表示入力装置の内部構成を示すブロック図、図２は表示入力装置の使用態様を示す模式図である。本発明の表示入力装置は、例えば、携帯型のコンピュータ、携帯型のゲーム機又は携帯電話機である。本実施形態１の表示入力装置は、画像表示パネル１と、正面側タッチパネル２と、背面側タッチパネル３と、主制御部４と、不可視領域検出部５と、画像処理部１０と、画像メモリ２０とを備えている。画像処理部１０は、制御部１１と、表示制御部１２と、画像調整部１３とを有している。画像調整部１３は、メモリ制御部１３ａ及びバッファメモリ１３ｂを含む。
【００２０】
画像表示パネル１は、液晶パネル又はＥＬ（エレクトロルミネセンス）パネルなどである。画像表示パネル１は、背面側から正面側へ光が透過可能な構造となっており、背面側に存在する外部の物体を正面側から画像表示パネル１を通して視認可能である。なお、画像表示パネル１が表示した画像が正常に視認できる面の側を正面側とし、逆の側を背面側とする。画像表示パネル１は、表示した画像が背面側からも視認できる構成であってもよく、画像が背面側からは視認できない構成であってもよい。画像が背面側からも視認できる構成の場合は、背面側からは左右が反転した画像が視認されることとなる。
【００２１】
画像表示パネル１の正面には、使用者によるタッチ操作（入力操作）を受け付ける正面側タッチパネル（受付部）２が設けられ、画像表示パネル１の背面には、使用者によるタッチ操作を受け付ける背面側タッチパネル（受付部）３が設けられている。正面側タッチパネル２及び背面側タッチパネル３は、透光性の構造となっている。従って、画像表示パネル１、正面側タッチパネル２及び背面側タッチパネル３は全体として、背面側に存在する外部の物体を正面側から視認可能となっている。
【００２２】
図２に示すように、表示入力装置の外観は、画像表示パネル１の周縁部を枠状の筐体が支持した構成となっている。見掛け上、正面視で表示入力装置の大部分は画像表示パネル１が占める。上述したように、画像表示パネル１の正面側に正面側タッチパネル２が配置されている。正面側タッチパネル２は使用者が接触できるように表面が露出している。また、画像表示パネル１の背面側に背面側タッチパネル３が配置されている。背面側タッチパネル３は使用者が接触できるように表面が露出している。表示入力装置の背面の外観は、図２に示した正面と同様の外観となっている。
【００２３】
使用者は、両手で表示入力装置を支持（保持）した状態で両手で入力操作を行なう。表示入力装置を支持している手の一部（図２においては親指以外の４指）が、表示入力装置の背面側に存在しており、使用者は、画像表示パネル１、正面側タッチパネル２及び背面側タッチパネル３を通して視認できる。なお、表示入力装置の筐体と重なる手の部分は、筐体で隠れてしまうので表示入力装置の正面側からは視認できない。使用者は、画像表示パネル１に表示された画像を正面側タッチパネル２を通して視認し、指で正面側タッチパネル２に接触することにより、画像表示パネル１上の表示画像に基づくソフトキーに対して入力操作を行なう。また使用者は、画像を視認した上で、画像表示パネル１、正面側タッチパネル２及び背面側タッチパネル３を通して視認される指を用いて背面側タッチパネル３に接触することによっても入力操作を行なうことができる。なお使用者は、指だけでなく、所定のペンを用いて入力操作を行なってもよく、片手で表示入力装置を支持し、もう片方の手で入力操作を行なってもよい。
【００２４】
正面側タッチパネル２及び背面側タッチパネル３には、使用者による入力操作を受け付けるための処理を行なう処理回路（図示せず）が付属している。正面側タッチパネル２及び背面側タッチパネル３は、使用者の操作により、指又はペンなどで接触された箇所（位置）を抵抗膜方式又は静電容量方式などの方法により検出する。正面側タッチパネル２及び背面側タッチパネル３は、主制御部４に接続されており、検出した位置を示すデータを主制御部４へ出力する。
【００２５】
主制御部４は、演算を実行する演算部、並びに演算に必要なデータ及びプログラムを記憶するメモリなどを有するデバイスであり、表示入力装置全体の動作を制御する。主制御部４は、正面側タッチパネル２及び背面側タッチパネル３から取得したデータに基づいて、使用者が入力操作（接触）した箇所（位置）を特定し、特定した箇所に基づいて、実行すべき処理を特定する。そして、主制御部４は、特定した処理に応じて、表示入力装置が備える各部の動作を制御する。
【００２６】
具体的には、表示入力装置において、正面側タッチパネル２上の位置及び背面側タッチパネル３上の位置と、画像表示パネル１上の位置とを対応付けたデータが予め記憶部（図示せず）に記憶されている。主制御部４は、正面側タッチパネル２又は背面側タッチパネル３から入力されたデータが示す、正面側タッチパネル２又は背面側タッチパネル３で入力を受け付けた位置に対応する画像表示パネル１上の位置を、記憶しているデータに基づいて特定する。また、主制御部４は、特定した画像表示パネル１上の位置と、画像表示パネル１上の表示画像に基づく各ソフトキーの表示位置とに基づいて、いずれのソフトキーが操作されたかを判定する。そして、主制御部４は、操作されたソフトキーに対応する処理を実行する。これにより、使用者が入力操作することによって指定した各種処理を表示入力装置に実行させることができる。
【００２７】
ところで、正面側タッチパネル２及び背面側タッチパネル３は、入力操作を行なうために使用者が接触（タッチ）した位置だけでなく、表示入力装置を保持するために使用者の手（指）が接触している位置も検出する。本実施形態１の主制御部４は、上述したように、使用者が入力操作（接触）した箇所に基づいて、接触箇所に対応するソフトキーに基づく処理を行なう。一方、主制御部４は、正面側タッチパネル２に対して使用者が接触した箇所（位置）が、ソフトキーの表示位置ではない場合、即ち、入力操作を行なうためではなく、表示入力装置を保持するために使用者の手が正面側タッチパネル２に接触していた場合、特定した位置（接触位置）を示すデータを不可視領域検出部５へ出力する。
【００２８】
不可視領域検出部（領域検出部）５は、主制御部４から取得したデータに基づいて、表示画面において、使用者が表示入力装置を保持する手の陰となって使用者が見辛くなっている領域（以下、不可視領域という）を検出する。不可視領域検出部５は、検出した領域を示す情報を画像処理部１０へ出力する。不可視領域を示す情報は、例えば、画像表示パネル１の左上角を原点、水平右方向（横方向）をｘ軸方向、鉛直下方向（縦方向）をｙ軸方向とした場合に、矩形の不可視領域の左上角及び右下角をそれぞれ座標（ｘ１，ｙ１）及び座標（ｘ２，ｙ２）で表した情報である。
【００２９】
なお、正面側タッチパネル２に対する使用者の接触位置のそれぞれについて、対応するソフトキーがあるか否かの判断は、主制御部４の代わりに不可視領域検出部５によって行なってもよい。この場合、不可視領域検出部５は、正面側タッチパネル２が出力したデータ（使用者の接触位置を示すデータ）の全てを、正面側タッチパネル２又は主制御部４を介して取得する。そして、不可視領域検出部５は、対応するソフトキーがない接触位置を特定し、特定した接触位置に基づいて不可視領域を検出する。
【００３０】
画像処理部１０には、半導体メモリ又はハードディスクなどの画像メモリ２０が接続されている。画像処理部１０の表示制御部１２は、画像メモリ２０から表示すべき画像データを取得し、表示用の画像情報及び制御信号を画像表示パネル１へ出力して、画像表示パネル１での表示動作を制御する。また、画像処理部１０の画像調整部１３は、不可視領域検出部５から取得した情報に基づいて、画像表示パネル１に表示される画像の表示位置を調整する処理を行なう。画像調整部１３は、表示すべき画像データを一旦バッファメモリ１３ｂに格納し、その読出しアドレスを制御することにより、画像の表示位置を調整する処理を行なう。
【００３１】
バッファメモリ１３ｂへの画像データの書込み及びバッファメモリ１３ｂからの画像データの読出しは、メモリ制御部１３ａにて制御される。なお、読出しアドレスを制御することによって画像の表示位置の調整処理を行なうようにしたが、バッファメモリ１３ｂへの画像データの書込みアドレスを制御して画像の表示位置の調整処理を行なってもよい。制御部１１は、演算を実行する演算部、並びに演算に必要なデータ及びプログラムを記憶するメモリなどからなるデバイスであり、画像の表示位置を調整する処理を行なうべきか否かを判断し、表示位置をどのように調整すべきかを決定する。
【００３２】
本実施形態１では、表示入力装置全体の動作を制御する主制御部４と、画像処理部１０の制御部１１とが別途に設けられているが、画像処理部１０の制御部１１が、主制御部４による処理を行ない、表示入力装置全体の動作を制御するように構成してもよい。
【００３３】
次に、本実施形態１の表示入力装置による画像の表示処理について説明する。図３は実施形態１の表示入力装置による表示処理の手順を示すフローチャートである。画像表示パネル１に画像を表示中の表示入力装置において、主制御部４は、正面側タッチパネル２からの入力を待っており（Ｓ１）、正面側タッチパネル２からの入力があったか否かを判断する（Ｓ２）。入力がない場合（Ｓ２：ＮＯ）、動作がＳ１に戻って、主制御部４は入力待ちとなる。
【００３４】
正面側タッチパネル２からの入力があった場合（Ｓ２：ＹＥＳ）、主制御部４は、入力されたデータに基づいて、正面側タッチパネル２に対して使用者が入力操作（接触）した箇所を特定し、不可視領域検出部５は、特定された箇所に基づいて、使用者の手の陰となり、視認が困難な領域（不可視領域）を検出する（Ｓ３）。なお、不可視領域検出部５は、正面側タッチパネル２に対する使用者の接触位置のうちで、ソフトキーの表示位置に一致しない接触位置、即ち、入力操作のためではなく、表示入力装置を保持するために使用者の手が接触していた位置に基づいて不可視領域を検出する。
【００３５】
画像処理部１０の制御部１１は、不可視領域検出部５によって不可視領域が検出されたか否かを判断し（Ｓ４）、不可視領域が検出されていない場合（Ｓ４：ＮＯ）、即ち、不可視領域がない場合、何も行なわずに処理を終了する。この場合、表示中の画像は、そのまま表示される。不可視領域が検出された場合（Ｓ４：ＹＥＳ）、即ち、不可視領域があった場合、画像処理部１０の制御部１１は、画像調整部１３を制御して画像の表示位置の調整処理を行なわせ、不可視領域の表示位置を変更する（Ｓ５）。
【００３６】
図４は画像の表示位置の調整処理を説明するための説明図である。なお、表示入力装置は、画像表示パネル１の正面側から背面側が視認可能であるが、図４では、背面側の状態の図示を省略する。図４の上側には、ある時点での表示入力装置の使用態様を示しており、使用者の左手親指が表示中のオブジェクト３１を覆う位置で、右手親指が表示中のオブジェクト３２を覆う位置でそれぞれ正面側タッチパネル２に接触している状態を示している。図４の上側に示した状態の場合、表示画像中のオブジェクト３１，３２が見辛くなり、不可視領域検出部５は、不可視領域として、オブジェクト３１，３２を含む領域を検出する。図４に示した例では、不可視領域検出部５は、画像表示パネル１における表示領域の下半分の領域を、不可視領域Ｒ１として検出する。なお厳密には、不可視領域検出部５は、使用者の手（指）と正面側タッチパネル２との接触領域を含む領域を不可視領域とする。
【００３７】
そして、画像処理部１０の制御部１１は、画像調整部１３によって、不可視領域Ｒ１に表示されている画像を、使用者の手（指）の陰にならない箇所、図４に示した例では、画像表示パネル１における表示領域の上半分の領域Ｒ２に表示させる。その結果、図４の下側に示したように、使用者の手の陰になって視認し辛い領域Ｒ１に表示されていた画像が、視認可能な領域Ｒ２に移動されるので、使用者は、適切な表示画像を確実に視認できる。
【００３８】
本実施形態１では、不可視領域Ｒ１が表示領域の下半分の領域であったので、不可視領域Ｒ１の表示画像を、表示領域の上半分の領域Ｒ２に移動させたが、不可視領域が表示領域の上半分の領域であった場合には、不可視領域の表示画像を、表示領域の下半分の領域に移動させればよい。表示入力装置を保持する使用者のそれぞれの手は正面側タッチパネル２に対して１箇所（親指の接触箇所）で接触していることが多いので、上述したように、表示面の縦方向に表示位置をずらすことによって、不可視領域Ｒ１の表示画像を視認可能な領域に表示させることができる。なお、不可視領域Ｒ１の表示画像の移動先としては、使用者の手の陰になっていない領域であればよく、表示面の縦方向にずらす構成に限らない。例えば、不可視領域の横方向に視認可能な領域があれば、横方向にずらしてもよい。
【００３９】
表示入力装置は、正面側タッチパネル２からの入力がある都度、詳細には、正面側タッチパネル２に対して入力操作ではない使用者による接触がある都度、ステップＳ３〜Ｓ５の処理を繰り返す。よって、表示入力装置を保持する使用者の手が邪魔になり、表示画像において視認し辛い箇所が発生する都度、その箇所に表示されていた画像を、視認可能な領域に表示させることができ、より見易い画像を提供することができる。
【００４０】
上述したように、本実施形態１の表示入力装置では、画像表示パネル１の両面（正面側及び背面側）からの入力が可能であり、表示入力装置の利便性が向上する。
また、本実施形態１の表示入力装置では、使用者の手が邪魔で視認し辛い領域の表示画像を視認し易い領域に移動させて表示することにより、入力操作に影響を与えることなく、視認し易い表示画像を表示できる。
【００４１】
（実施形態２）
図５は実施形態２の表示入力装置の内部構成を示すブロック図である。本実施形態２の表示入力装置は、上述した実施形態１の不可視領域検出部５の代わりに、背面被覆領域検出部６を備える。表示入力装置のその他の構成は実施形態１と同様であり、対応する部材には同一符号を付してその説明を省略する。
【００４２】
本実施形態２の主制御部４は、背面側タッチパネル３に対して使用者が接触した箇所（位置）が、ソフトキーの表示位置ではない場合、即ち、入力操作を行なうためではなく、表示入力装置を保持するために使用者の手が背面側タッチパネル３に接触していた場合、特定した位置（接触位置）を示すデータを背面被覆領域検出部６へ出力する。
【００４３】
背面被覆領域検出部（領域検出部）６は、主制御部４から取得したデータに基づいて、表示画像の背面側において、表示入力装置を保持する使用者の手（指）によって覆われている領域、即ち、背面側タッチパネル３に対して使用者の手が接触している領域（背面被覆領域）を検出する。背面被覆領域検出部６は、検出した領域を示す情報を画像処理部１０へ出力する。
【００４４】
なお、背面側タッチパネル３に対する使用者の接触位置のそれぞれについて、対応するソフトキーがあるか否かの判断は、主制御部４の代わりに背面被覆領域検出部６によって行なってもよい。この場合、背面被覆領域検出部６は、背面側タッチパネル３が出力したデータ（使用者の接触位置を示すデータ）の全てを、背面側タッチパネル３又は主制御部４を介して取得する。そして、背面被覆領域検出部６は、対応するソフトキーがない接触位置を特定し、特定した接触位置に基づいて背面被覆領域を検出する。
画像処理部１０の画像調整部１３は、背面被覆領域検出部６から取得した情報に基づいて、画像表示パネル１に表示される画像の表示位置を調整する処理を行なう。画像調整部１３による画像の表示位置の調整処理は、実施形態１で説明した処理と同様の処理である。
【００４５】
次に、本実施形態２の表示入力装置による画像の表示処理について説明する。図６は実施形態２の表示入力装置による表示処理の手順を示すフローチャートである。画像表示パネル１に画像を表示中の表示入力装置において、主制御部４は、背面側タッチパネル３からの入力を待っており（Ｓ１１）、背面側タッチパネル３からの入力があったか否かを判断する（Ｓ１２）。入力がない場合（Ｓ１２：ＮＯ）、動作がＳ１１に戻って、主制御部４は入力待ちとなる。
【００４６】
背面側タッチパネル３からの入力があった場合（Ｓ１２：ＹＥＳ）、主制御部４は、入力されたデータに基づいて、背面側タッチパネル３に対して使用者が接触した箇所を特定し、背面被覆領域検出部６は、特定された箇所に基づいて、表示画面の背面側において使用者の手の陰となっている背面被覆領域を検出する（Ｓ１３）。なお、背面被覆領域検出部６は、背面側タッチパネル３に対する使用者の接触位置のうちで、ソフトキーの表示位置に一致しない接触位置、即ち、入力操作のためではなく、表示入力装置を保持するために使用者の手が接触していた位置に基づいて背面被覆領域を検出する。
【００４７】
画像処理部１０の制御部１１は、背面被覆領域検出部６によって背面被覆領域が検出されたか否かを判断し（Ｓ１４）、背面被覆領域が検出されていない場合（Ｓ１４：ＮＯ）、即ち、背面被覆領域がない場合、何も行なわずに処理を終了する。この場合、表示中の画像は、そのまま表示される。背面被覆領域が検出された場合（Ｓ１４：ＹＥＳ）、即ち、背面被覆領域があった場合、画像処理部１０の制御部１１は、画像調整部１３を制御して画像の表示位置の調整処理を行なわせ、背面被覆領域の表示位置を変更する（Ｓ１５）。
【００４８】
図７は画像の表示位置の調整処理を説明するための説明図である。図７の上側には、ある時点での表示入力装置の使用態様を示しており、上側の図では省略しているが、表示中のオブジェクト３１は、ソフトキーＡ，Ｂと重なる位置に、表示中のオブジェクト３２は、ソフトキーＣ，Ｄと重なる位置にそれぞれ表示されている。
【００４９】
ソフトキーを表示させるためのキー表示用データは、画像表示パネル１に表示される画像データとは別に用意されており、例えば画像メモリ２０に予め記憶されている。そして、画像処理部１０は、主制御部４からの指示に従って、画像表示パネル１に表示すべきキー表示用データと、画像データとを画像メモリ２０から取得し、例えば画像データをキー表示用データの上側に重ね合せて画像表示パネル１に表示させる。従って、本実施形態２では、ソフトキーＡ〜Ｄの上にオブジェクト３１，３２が表示され、ソフトキーＡ〜Ｄが視認できない状況が発生する。
【００５０】
図７の上側に示した状態の場合、使用者はソフトキーＡ〜Ｄを操作しようとするが、表示画像中のオブジェクト３１，３２によってソフトキーＡ〜Ｄが見辛くなっている。そこで、背面被覆領域検出部６は、使用者が背面側タッチパネル３に接触した箇所のうちで、ソフトキーＡ〜Ｄ以外の箇所を含む領域を、背面被覆領域として検出する。図７に示した例では、背面被覆領域検出部６は、オブジェクト３１，３２を含む領域、即ち、画像表示パネル１における表示領域の下半分の領域を背面被覆領域Ｒ３として検出する。
【００５１】
そして、画像処理部１０の制御部１１は、画像調整部１３によって、背面被覆領域Ｒ３に表示されている画像を、使用者の手（指）が背面側タッチパネル３と接触していない箇所、図７に示した例では、画像表示パネル１における表示領域の上半分の領域Ｒ４に表示させる。その結果、図７の下側に示したように、ソフトキーＡ〜Ｄに重なる位置の領域Ｒ３に表示されていた画像（オブジェクト３１，３２）が、ソフトキーＡ〜Ｄに重ならない位置に移動されるので、使用者は、ソフトキーＡ〜Ｄ及び自身の手（指）を確実に視認でき、操作性が向上する。
【００５２】
本実施形態２では、背面被覆領域Ｒ３が表示領域の下半分の領域であったので、背面被覆領域Ｒ３の表示画像を、表示領域の上半分の領域Ｒ４に移動させたが、背面被覆領域が表示領域の上半分の領域であった場合には、背面被覆領域の表示画像を、表示領域の下半分の領域に移動させればよい。表示入力装置を保持する使用者の２つの手（各手の指）は背面側タッチパネル３に対して横方向に並んで接触していることが多いので、上述したように、表示面の縦方向に表示位置をずらすことによって、背面被覆領域Ｒ３の表示画像を、使用者の接触箇所（ソフトキーの表示位置の近傍）と重ならない位置に表示させることができる。なお、背面被覆領域Ｒ３の表示画像の移動先としては、使用者の接触箇所と重ならない位置であればよく、表示面の縦方向にずらす構成に限らない。例えば、背面被覆領域の横方向に、使用者の接触箇所と重ならない領域があれば、横方向にずらしてもよい。
【００５３】
表示入力装置は、背面側タッチパネル３からの入力がある都度、詳細には、背面側タッチパネル３に対して入力操作ではない使用者による接触がある都度、ステップＳ１３〜Ｓ１５の処理を繰り返す。よって、表示画像によって背面側での操作状態が視認し辛い状況の発生を防止し、より操作性の高い表示入力装置を提供できる。
【００５４】
（実施形態３）
本実施形態３の表示入力装置は、上述した実施形態１の表示入力装置と同様の構成によって実現可能であり、表示入力装置が備える各部についての説明を省略する。また、本実施形態３の表示入力装置は、図３に示した表示処理と同様の処理を行なうので、表示処理の詳細についても説明を省略する。
本実施形態３の表示入力装置は、図３に示した表示処理において、ステップＳ５の処理、具体的には、画像の表示位置の調整処理が実施形態１とは相異するので、この処理についてのみ説明する。
【００５５】
本実施形態３の画像表示パネル１は、表示領域が複数の領域（分割領域）に分割されており、分割領域毎に画像表示が可能である。具体的には、画像処理部１０が画像調整部１３を制御し、バッファメモリ１３ｂに格納されている画像データの読出しアドレスを制御することにより、分割領域単位で、画像の表示位置を調整する処理を行なう。
【００５６】
図８は画像の表示位置の調整処理を説明するための説明図である。図８の上側には、ある時点での表示入力装置の使用態様を示しており、図４の上側に示した図と同様の状態を示している。
本実施形態３では、画像表示パネル１が、図８の上側に示した例のように、領域Ｒ１１，Ｒ１２，Ｒ１３，Ｒ２１，Ｒ２２，Ｒ２３の複数（図８では６つ）の領域に分割されて処理される。
【００５７】
図８の上側に示した状態の場合、本実施形態３の不可視領域検出部５は、不可視領域として、オブジェクト３１を含む分割領域Ｒ１１と、オブジェクト３２を含む分割領域Ｒ１３とを検出する。
本実施形態３の画像処理部１０の制御部１１は、画像調整部１３によって、不可視領域として検出された分割領域Ｒ１１及びＲ１３に表示されている画像を、使用者の手（指）の陰にならない箇所、図８に示した例では、分割領域Ｒ２１及びＲ２３に表示させる。その結果、図８の下側に示したように、使用者の手の陰になって視認し辛い領域Ｒ１１，Ｒ１３に表示されていた画像が、視認可能な領域Ｒ２１，Ｒ２３に移動されるので、使用者は、適切な表示画像を確実に視認できる。なお、不可視領域ではない分割領域Ｒ１２の表示画像はそのまま分割領域Ｒ１２に表示される。
【００５８】
本実施形態３では、分割領域Ｒ１１，Ｒ１３が不可視領域として検出されたので、分割領域Ｒ１１，Ｒ１３の表示画像を、それぞれの上に位置する分割領域Ｒ２１，Ｒ２３に移動させたが、このような構成に限らない。例えば、分割領域Ｒ２１〜Ｒ２３のいずれかが不可視領域として検出された場合、不可視領域の表示画像を、それぞれ下に位置する分割領域Ｒ１１〜Ｒ１３に移動させればよい。また例えば、不可視領域の横方向に視認可能な領域があれば、不可視領域の表示画像を横方向にずらしてもよく、分割領域Ｒ１１が不可視領域であった場合に、分割領域Ｒ１１の表示画像を分割領域Ｒ１２にずらしてもよい。不可視領域の表示画像の移動先としては、使用者の手の陰になっていない領域であればよく、使用者の左右の手と正面側タッチパネル２との複数の接触位置に応じて適宜決定すればよい。
【００５９】
本実施形態３では、不可視領域の表示画像を、視認可能な領域に移動させることにより、入力操作に影響を与えることなく、視認し易い表示画像を表示できる。また、表示領域を予め分割した分割領域毎に表示位置の移動が可能であるので、視認し辛くない領域の表示画像を移動させないことにより、不要な移動処理（画像の表示位置の調整処理）を削減できる。よって、不可視領域の移動先の領域に本来表示されるべき画像が、不可視領域の表示画像を移動させることによって欠落する（表示されない）という状況の発生を抑制できる。
【００６０】
本実施形態３は、実施形態１の変形例として説明したが、実施形態２にも同様に適用できる。即ち、実施形態２の表示入力装置において、画像表示パネル１が、複数の分割領域毎に画像表示が可能であり、画像処理部１０が画像調整部１３を制御し、分割領域単位で、画像の表示位置を調整する処理を行なう。図９は画像の表示位置の調整処理を説明するための説明図であり、図９の上側には、図７の上側に示した図と同様の状態を示す。図９の上側に示した状態の場合、使用者の左手が背面側タッチパネル３と接触する領域を含む分割領域Ｒ１１と、使用者の右手が背面側タッチパネル３と接触する領域を含む分割領域Ｒ１３とが背面被覆領域として検出される。そして、分割領域Ｒ１１の表示画像が分割領域Ｒ２１に移動され、分割領域Ｒ１３の表示画像が分割領域Ｒ２３に移動される。なお、分割領域Ｒ１２の表示画像はそのまま分割領域Ｒ１２に表示される。
【００６１】
（実施形態４）
本実施形態４の表示入力装置は、上述した実施形態１の表示入力装置と同様の構成によって実現可能であり、表示入力装置が備える各部についての説明を省略する。なお、本実施形態４の画像処理部１０の制御部１１は、タイマを有する。また、本実施形態４の表示入力装置は、図３に示した表示処理と同様の処理を行なうので、表示処理の詳細についても説明を省略する。
本実施形態４の表示入力装置は、図３に示した表示処理において、ステップＳ５の処理、具体的には、画像の表示位置の調整処理が実施形態１とは相異するので、この処理についてのみ説明する。
【００６２】
本実施形態４の表示入力装置は、不可視領域が検出された場合、不可視領域の表示画像を、この不可視領域と、視認可能な領域とに交互に表示させる。即ち、本実施形態４の表示入力装置は、上述の実施形態１と同様に、不可視領域の表示画像を視認可能な領域に移動させると共に、所定時間経過後には、元の不可視領域に表示させ、これを繰り返す。
【００６３】
図１０は実施形態４の表示入力装置による表示処理の手順を示すフローチャートである。本実施形態４の表示入力装置は、図３に示したステップＳ１〜Ｓ５と同様の処理をステップＳ２１〜Ｓ２５で実行する。
【００６４】
ステップＳ２５の処理によって、図４の上側に示した表示状態から図４の下側に示した表示状態に変更される。画像処理部１０の制御部１１は、不可視領域の表示位置を変更した場合、タイマによって所定時間の計時を開始しており、所定時間が経過したか否かを判断する（Ｓ２６）。なお、所定時間は、切り替えた表示画像を十分確認できる程度の時間であればよく、例えば数秒程度でよい。また所定時間は予め決められて制御部１１のメモリに格納されている。
【００６５】
所定時間が経過していない場合（Ｓ２６：ＮＯ）、制御部１１は、所定時間が経過するまで待機し、所定時間が経過した場合（Ｓ２６：ＹＥＳ）、ステップＳ２５で移動させた不可視領域の表示画像を元の表示位置に戻して表示する（Ｓ２７）。即ち、図４の下側に示した表示状態から図４の上側に示した表示状態に戻される。そして、制御部１１は、タイマによって所定時間の計時を再度開始し、所定時間が経過したか否かを判断する（Ｓ２８）。所定時間が経過していない場合（Ｓ２８：ＮＯ）、制御部１１は、所定時間が経過するまで待機し、所定時間が経過した場合（Ｓ２８：ＹＥＳ）、ステップＳ２５の処理に戻り、不可視領域の表示画像を視認可能な領域に再度移動させる（Ｓ２５）。
【００６６】
表示入力装置は、画像表示パネル１の表示画像が切り替わるまで、ステップＳ２５〜Ｓ２８の処理を繰り返す。これにより、図４の上側に示した表示状態と、図４の下側に示した表示状態とが所定時間間隔で交互に切り替えられる。よって、本実施形態４の表示入力装置では、視認し辛い領域の表示画像を視認し易く表示できると共に、元の画像をそのまま表示できる。
【００６７】
なお、図４の上側に示した表示状態から図４の下側に示した表示状態に切り替える際の時間と、図４の下側に示した表示状態から図４の上側に示した表示状態に切り替える際の時間とは、同一でなくてもよい。例えば、図４の下側に示した表示状態、即ち、不可視領域の表示画像を視認可能な領域に表示している状態の継続時間を、図４の上側に示した表示状態の継続時間よりも長くしてもよい。この場合、不可視領域の表示画像を視認できる時間が、視認できない時間よりも長いので、不可視領域の表示画像を十分確認できる。
【００６８】
本実施形態４は、実施形態１の変形例として説明したが、実施形態２，３にも同様に適用できる。即ち、実施形態２の表示入力装置において、背面被覆領域Ｒ３が検出された場合、背面被覆領域Ｒ３の表示画像を、この背面被覆領域Ｒ３と、ソフトキーの表示位置に重ならない位置の領域Ｒ４とに交互に表示させる。これにより、図７の上側に示した表示状態と、図７の下側に示した表示状態とを交互に切り替えることができる。
【００６９】
また、実施形態３の表示入力装置において、不可視領域Ｒ１１，Ｒ１３が検出された場合、不可視領域Ｒ１１，Ｒ１３の表示画像を、この不可視領域Ｒ１１，Ｒ１３と、視認可能な領域Ｒ２１，Ｒ２３とに交互に表示させる。これにより、図８の上側に示した表示状態と、図８の下側に示した表示状態とを交互に切り替えることができる。また同様に、実施形態３の変形例として示した表示入力装置において、背面被覆領域Ｒ１１，Ｒ１３が検出された場合、背面被覆領域Ｒ１１，Ｒ１３の表示画像を、この背面被覆領域Ｒ１１，Ｒ１３と、使用者の接触箇所と重ならない位置の領域Ｒ２１，Ｒ２３とに交互に表示させる。これにより、図９の上側に示した表示状態と、図９の下側に示した表示状態とを交互に切り替えることができる。
【００７０】
上述した実施形態１，３，４では、画像表示パネル１の正面側に生じる不可視領域に表示される画像の表示位置を変更する構成を示し、実施形態２では、画像表示パネル１の背面側に生じる背面被覆領域に表示される画像の表示位置を変更する構成を示した。本発明の表示入力装置は、これらの構成を組み合わせた装置に適用できる。具体的には、画像表示パネル１の正面側に不可視領域が発生した場合、不可視領域の表示画像を適切な位置に移動させると共に、画像表示パネル１の背面側に背面被覆領域が発生した場合、背面被覆領域の表示画像を適切な位置に移動させる。
【００７１】
上述した実施形態１〜４では、画像表示パネル１の正面側に不可視領域が発生した場合、又は画像表示パネル１の背面側に背面被覆領域が発生した場合に、それぞれ適切な位置に表示画像を移動させる構成であった。しかし、このような構成に限定されない。例えば、表示画像において使用者にとって不要な画像が表示されている領域があり、使用者がその領域に手（指）を接触させて表示入力装置を保持している状況が考えられる。また、ソフトキーが固定位置に表示されており、使用者が各ソフトキーの表示位置を確認せずに操作できる状況が考えられる。これらの状況の場合、不可視領域又は背面被覆領域の表示画像を必ずしも移動させる必要はない。そこで、画像の表示位置の調整処理を行なうか否かを使用者によって選択可能に構成してもよい。
【００７２】
上述した実施形態１〜４では、使用者の手が正面側タッチパネル２又は背面側タッチパネル３と接触する領域を含む矩形の領域を、不可視領域又は背面被覆領域とし、不可視領域又は背面被覆領域単位で表示位置を移動させていた。しかし、このような構成に限定されない。例えば、画像データが、画像中のオブジェクト単位で表示制御可能である場合、オブジェクトを含む領域（例えば、領域Ｒ１，Ｒ３，Ｒ１１，Ｒ１３）単位ではなく、オブジェクト単位で表示位置を移動させてもよい。この場合、表示位置を移動させる画像を最小限とすることができると共に、移動させる領域が小さいので、移動先の領域の確保が容易となる。
【００７３】
上述した実施形態１〜４では、画像表示パネル１の表裏に正面側タッチパネル２及び背面側タッチパネル３を重ねて配置した構成を示したが、表示入力装置は、他の構成で受付部を実現してもよい。例えば、表示入力装置は、受付部として光学式タッチパネルを備えた形態であってもよい。また例えば、表示入力装置は、画像表示パネル１に光センサを内蔵しておき、画像表示パネル１の正面及び背面に対する入力操作を光センサにより検出する形態であってもよい。この場合、使用者の手が正面側タッチパネル２又は背面側タッチパネル３に接触している箇所だけでなく、接触してないが、使用者の手又は用紙などによって表示領域に陰が生じている領域の検出も可能となる。このような領域の表示画像の表示位置を移動させることにより、より見易い画像及びソフトキーの表示が可能となる。
【００７４】
本発明の表示入力装置の例として、携帯型のコンピュータ、携帯型のゲーム機及び携帯電話機を挙げたが、表示入力装置はその他の装置であってもよい。例えば、表示入力装置は、コピー機に設けられた取り外し可能な操作パネルであってもよい。
【００７５】
以上、本発明の好適な実施形態についてそれぞれ具体的に説明したが、各構成及び動作などは適宜変更可能であって、上述の実施形態に限定されることはない。
【符号の説明】
【００７６】
１ 画像表示パネル
２ 正面側タッチパネル（受付部）
３ 背面側タッチパネル（受付部）
４ 主制御部
５ 不可視領域検出部（領域検出部）
６ 背面被覆領域検出部（領域検出部）
１０ 画像処理部
１３ 画像調整部
【技術分野】
【０００１】
本発明は、画像表示パネルを備え、画像表示パネル上のいずれかの位置を指定する入力を受け付ける表示入力装置及び表示方法に関する。
【背景技術】
【０００２】
透過型液晶パネルなどの画像表示パネルを用いた表示入力装置が、ＰＤＡなどの携帯端末に広く利用されている（例えば特許文献１，２）。特許文献１，２に開示された装置では、画像表示パネルの背面側からの入力が可能である。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−２１６０８７号公報
【特許文献２】特開２００７−１６４７６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上述したような表示入力装置で情報の入力を行なう場合、使用者は両手で表示入力装置を保持した状態で、表示入力装置の背面側に位置する指で入力の操作を行なうことができる。このような装置では、使用者は指で装置を挟持して使用するので、表示画像において、装置の正面側に位置する指によって隠され、使用者が視認できない領域が発生するという問題がある。
【０００５】
本発明は、斯かる事情に鑑みてなされたものであって、その目的とするところは、使用者が両手で保持した状態で両手での入力操作を行なう場合であっても、使用者の手によって視認できない領域の発生を防止することが可能な表示入力装置及び表示方法を提供することにある。
【課題を解決するための手段】
【０００６】
本発明に係る表示入力装置は、一面側から他面側へ光が透過する画像表示パネルと、該画像表示パネルの両面夫々に設けられ、該両面夫々に対する入力操作を受け付ける受付部と、前記画像表示パネルのいずれかの面の側に存在する物体が、該いずれかの面を被覆又は接触する領域を検出する領域検出部と、該領域検出部が検出した領域に基づいて、前記画像表示パネルに表示させる画像の表示位置を調整する画像調整部とを備えることを特徴とする。
【０００７】
本発明によれば、画像表示パネルの両面からの入力が可能である。表示入力装置は、一面側（背面側）にある物体が他面側（正面側）から見えるように透光性の構造になっており、使用者は、背面側の操作状態を正面側から視認しながら行なうことが可能である。表示入力装置は、画像表示パネルのいずれかの面の近傍に存在する物体によって、画像表示パネルのいずれかの面が被覆又は接触される領域を検出する。例えば、画像表示パネルを保持する使用者の手などの陰となり表示画像が視認し辛い領域、画像表示パネルの背面で使用者の手などと重なる領域などが検出される。表示入力装置は、このような領域があった場合に、この領域の表示位置を調整し、例えば、視認可能な領域、又は使用者の手と重ならない領域に表示させる。これにより、使用者の手（指）によって視認できない領域の発生を防止でき、表示画像によって背面側の操作を視認できないという状況の発生を防止できる。
【０００８】
本発明に係る表示入力装置は、前記画像表示パネルは、予め分割された複数の分割領域毎に画像表示が可能であり、前記画像調整部は、前記領域検出部が検出した領域を含む分割領域の表示位置を調整するようにしてあることを特徴とする。
【０００９】
本発明によれば、画像表示パネルは複数の分割領域に分割されており、分割領域毎に表示制御される。そして、表示画像において、画像表示パネルを保持する使用者の手などの陰となり視認できない領域があった場合、又は、画像表示パネルの背面側において、画像表示パネルを保持する使用者の手などと重なる領域があった場合、このような領域を含む分割領域毎に、表示位置が調整される。よって、上述したような領域を含まない分割領域に表示される画像の表示位置は変更されないので、画像の表示位置の不要な変更が抑制され、処理負担が軽減される。
【００１０】
本発明に係る表示入力装置は、前記領域検出部は、前記受付部が受け付けた前記一面又は他面に対する入力操作に基づいて、前記物体が前記一面又は他面と接触する領域を検出するようにしてあることを特徴とする。
【００１１】
本発明によれば、表示入力装置は、使用者が画像表示パネルの正面側に接触した領域を、画像表示パネルを保持する使用者の手などの陰となり表示画像が視認し辛い領域として検出する。また、表示入力装置は、使用者が画像表示パネルの背面側に接触した領域を、画像表示パネルの背面で使用者の手などと重なる領域として検出する。これにより、タッチパネルの機能によって、画像表示パネルの正面の表示画像が視認し辛い領域、及び画像表示パネルの背面の使用者の手と重なる領域を検出できるので、これらの領域を検出するための構成を新たに設ける必要がなく、コストも増大しない。
【００１２】
本発明に係る表示入力装置は、前記画像調整部は、前記領域検出部が検出した１又は複数の領域に表示される画像を、該領域と、該領域以外の所定領域とに交互的に表示させるようにしてあることを特徴とする。
【００１３】
本発明によれば、画像表示パネルを保持する使用者の手などの陰となり表示画像が視認し辛い領域が発生した場合、このような領域に表示される画像が、元の領域と、元の領域以外の、使用者が視認可能な領域とに交互に表示される。また、画像表示パネルの背面で使用者の手などと重なる領域が発生した場合、このような領域に表示される画像が、元の領域と、元の領域以外の、使用者の手と重ならない領域とに交互に表示される。よって、使用者は表示画像又は背面側の操作状態を確実に視認できると共に、元の画像も視認できる。
【００１４】
本発明に係る表示方法は、一面側から他面側へ光が透過する画像表示パネルを備える表示入力装置での表示方法であって、前記画像表示パネルの両面夫々に対する入力操作を受け付けるステップと、前記画像表示パネルのいずれかの面の側に存在する物体が、該いずれかの面を被覆又は接触する領域を検出するステップと、検出された領域に基づいて、前記画像表示パネルに表示させる画像の表示位置を調整するステップとを含むことを特徴とする。
【００１５】
本発明によれば、画像表示パネルの両面からの入力が可能な表示入力装置において、画像表示パネルを保持する使用者の手などの陰となり視認できない画像の表示位置を調整し、使用者の手によって視認できない領域の発生を防止する。また、画像表示パネルの背面側において、画像表示パネルを保持する使用者の手などと重なる領域の表示画像の表示位置を調整し、使用者の手などによる背面側の操作状態を確実に視認可能とする。
【発明の効果】
【００１６】
本発明では、使用者は、表示入力装置を両手で保持した状態で、表示入力装置の正面及び背面に対する入力操作を行なうことができるので、入力操作の自由度が増し、表示入力装置の利便性が向上する。また、表示画像において、画像表示パネルを保持する使用者の手によって遮られ、視認できない領域の発生を防止できるので、表示入力装置の利便性がより向上する。
【図面の簡単な説明】
【００１７】
【図１】実施形態１の表示入力装置の内部構成を示すブロック図である。
【図２】表示入力装置の使用態様を示す模式図である。
【図３】実施形態１の表示入力装置による表示処理の手順を示すフローチャートである。
【図４】画像の表示位置の調整処理を説明するための説明図である。
【図５】実施形態２の表示入力装置の内部構成を示すブロック図である。
【図６】実施形態２の表示入力装置による表示処理の手順を示すフローチャートである。
【図７】画像の表示位置の調整処理を説明するための説明図である。
【図８】画像の表示位置の調整処理を説明するための説明図である。
【図９】画像の表示位置の調整処理を説明するための説明図である。
【図１０】実施形態４の表示入力装置による表示処理の手順を示すフローチャートである。
【発明を実施するための形態】
【００１８】
以下に、本発明をその実施形態を示す図面を参照して具体的に説明する。
【００１９】
（実施形態１）
図１は実施形態１の表示入力装置の内部構成を示すブロック図、図２は表示入力装置の使用態様を示す模式図である。本発明の表示入力装置は、例えば、携帯型のコンピュータ、携帯型のゲーム機又は携帯電話機である。本実施形態１の表示入力装置は、画像表示パネル１と、正面側タッチパネル２と、背面側タッチパネル３と、主制御部４と、不可視領域検出部５と、画像処理部１０と、画像メモリ２０とを備えている。画像処理部１０は、制御部１１と、表示制御部１２と、画像調整部１３とを有している。画像調整部１３は、メモリ制御部１３ａ及びバッファメモリ１３ｂを含む。
【００２０】
画像表示パネル１は、液晶パネル又はＥＬ（エレクトロルミネセンス）パネルなどである。画像表示パネル１は、背面側から正面側へ光が透過可能な構造となっており、背面側に存在する外部の物体を正面側から画像表示パネル１を通して視認可能である。なお、画像表示パネル１が表示した画像が正常に視認できる面の側を正面側とし、逆の側を背面側とする。画像表示パネル１は、表示した画像が背面側からも視認できる構成であってもよく、画像が背面側からは視認できない構成であってもよい。画像が背面側からも視認できる構成の場合は、背面側からは左右が反転した画像が視認されることとなる。
【００２１】
画像表示パネル１の正面には、使用者によるタッチ操作（入力操作）を受け付ける正面側タッチパネル（受付部）２が設けられ、画像表示パネル１の背面には、使用者によるタッチ操作を受け付ける背面側タッチパネル（受付部）３が設けられている。正面側タッチパネル２及び背面側タッチパネル３は、透光性の構造となっている。従って、画像表示パネル１、正面側タッチパネル２及び背面側タッチパネル３は全体として、背面側に存在する外部の物体を正面側から視認可能となっている。
【００２２】
図２に示すように、表示入力装置の外観は、画像表示パネル１の周縁部を枠状の筐体が支持した構成となっている。見掛け上、正面視で表示入力装置の大部分は画像表示パネル１が占める。上述したように、画像表示パネル１の正面側に正面側タッチパネル２が配置されている。正面側タッチパネル２は使用者が接触できるように表面が露出している。また、画像表示パネル１の背面側に背面側タッチパネル３が配置されている。背面側タッチパネル３は使用者が接触できるように表面が露出している。表示入力装置の背面の外観は、図２に示した正面と同様の外観となっている。
【００２３】
使用者は、両手で表示入力装置を支持（保持）した状態で両手で入力操作を行なう。表示入力装置を支持している手の一部（図２においては親指以外の４指）が、表示入力装置の背面側に存在しており、使用者は、画像表示パネル１、正面側タッチパネル２及び背面側タッチパネル３を通して視認できる。なお、表示入力装置の筐体と重なる手の部分は、筐体で隠れてしまうので表示入力装置の正面側からは視認できない。使用者は、画像表示パネル１に表示された画像を正面側タッチパネル２を通して視認し、指で正面側タッチパネル２に接触することにより、画像表示パネル１上の表示画像に基づくソフトキーに対して入力操作を行なう。また使用者は、画像を視認した上で、画像表示パネル１、正面側タッチパネル２及び背面側タッチパネル３を通して視認される指を用いて背面側タッチパネル３に接触することによっても入力操作を行なうことができる。なお使用者は、指だけでなく、所定のペンを用いて入力操作を行なってもよく、片手で表示入力装置を支持し、もう片方の手で入力操作を行なってもよい。
【００２４】
正面側タッチパネル２及び背面側タッチパネル３には、使用者による入力操作を受け付けるための処理を行なう処理回路（図示せず）が付属している。正面側タッチパネル２及び背面側タッチパネル３は、使用者の操作により、指又はペンなどで接触された箇所（位置）を抵抗膜方式又は静電容量方式などの方法により検出する。正面側タッチパネル２及び背面側タッチパネル３は、主制御部４に接続されており、検出した位置を示すデータを主制御部４へ出力する。
【００２５】
主制御部４は、演算を実行する演算部、並びに演算に必要なデータ及びプログラムを記憶するメモリなどを有するデバイスであり、表示入力装置全体の動作を制御する。主制御部４は、正面側タッチパネル２及び背面側タッチパネル３から取得したデータに基づいて、使用者が入力操作（接触）した箇所（位置）を特定し、特定した箇所に基づいて、実行すべき処理を特定する。そして、主制御部４は、特定した処理に応じて、表示入力装置が備える各部の動作を制御する。
【００２６】
具体的には、表示入力装置において、正面側タッチパネル２上の位置及び背面側タッチパネル３上の位置と、画像表示パネル１上の位置とを対応付けたデータが予め記憶部（図示せず）に記憶されている。主制御部４は、正面側タッチパネル２又は背面側タッチパネル３から入力されたデータが示す、正面側タッチパネル２又は背面側タッチパネル３で入力を受け付けた位置に対応する画像表示パネル１上の位置を、記憶しているデータに基づいて特定する。また、主制御部４は、特定した画像表示パネル１上の位置と、画像表示パネル１上の表示画像に基づく各ソフトキーの表示位置とに基づいて、いずれのソフトキーが操作されたかを判定する。そして、主制御部４は、操作されたソフトキーに対応する処理を実行する。これにより、使用者が入力操作することによって指定した各種処理を表示入力装置に実行させることができる。
【００２７】
ところで、正面側タッチパネル２及び背面側タッチパネル３は、入力操作を行なうために使用者が接触（タッチ）した位置だけでなく、表示入力装置を保持するために使用者の手（指）が接触している位置も検出する。本実施形態１の主制御部４は、上述したように、使用者が入力操作（接触）した箇所に基づいて、接触箇所に対応するソフトキーに基づく処理を行なう。一方、主制御部４は、正面側タッチパネル２に対して使用者が接触した箇所（位置）が、ソフトキーの表示位置ではない場合、即ち、入力操作を行なうためではなく、表示入力装置を保持するために使用者の手が正面側タッチパネル２に接触していた場合、特定した位置（接触位置）を示すデータを不可視領域検出部５へ出力する。
【００２８】
不可視領域検出部（領域検出部）５は、主制御部４から取得したデータに基づいて、表示画面において、使用者が表示入力装置を保持する手の陰となって使用者が見辛くなっている領域（以下、不可視領域という）を検出する。不可視領域検出部５は、検出した領域を示す情報を画像処理部１０へ出力する。不可視領域を示す情報は、例えば、画像表示パネル１の左上角を原点、水平右方向（横方向）をｘ軸方向、鉛直下方向（縦方向）をｙ軸方向とした場合に、矩形の不可視領域の左上角及び右下角をそれぞれ座標（ｘ１，ｙ１）及び座標（ｘ２，ｙ２）で表した情報である。
【００２９】
なお、正面側タッチパネル２に対する使用者の接触位置のそれぞれについて、対応するソフトキーがあるか否かの判断は、主制御部４の代わりに不可視領域検出部５によって行なってもよい。この場合、不可視領域検出部５は、正面側タッチパネル２が出力したデータ（使用者の接触位置を示すデータ）の全てを、正面側タッチパネル２又は主制御部４を介して取得する。そして、不可視領域検出部５は、対応するソフトキーがない接触位置を特定し、特定した接触位置に基づいて不可視領域を検出する。
【００３０】
画像処理部１０には、半導体メモリ又はハードディスクなどの画像メモリ２０が接続されている。画像処理部１０の表示制御部１２は、画像メモリ２０から表示すべき画像データを取得し、表示用の画像情報及び制御信号を画像表示パネル１へ出力して、画像表示パネル１での表示動作を制御する。また、画像処理部１０の画像調整部１３は、不可視領域検出部５から取得した情報に基づいて、画像表示パネル１に表示される画像の表示位置を調整する処理を行なう。画像調整部１３は、表示すべき画像データを一旦バッファメモリ１３ｂに格納し、その読出しアドレスを制御することにより、画像の表示位置を調整する処理を行なう。
【００３１】
バッファメモリ１３ｂへの画像データの書込み及びバッファメモリ１３ｂからの画像データの読出しは、メモリ制御部１３ａにて制御される。なお、読出しアドレスを制御することによって画像の表示位置の調整処理を行なうようにしたが、バッファメモリ１３ｂへの画像データの書込みアドレスを制御して画像の表示位置の調整処理を行なってもよい。制御部１１は、演算を実行する演算部、並びに演算に必要なデータ及びプログラムを記憶するメモリなどからなるデバイスであり、画像の表示位置を調整する処理を行なうべきか否かを判断し、表示位置をどのように調整すべきかを決定する。
【００３２】
本実施形態１では、表示入力装置全体の動作を制御する主制御部４と、画像処理部１０の制御部１１とが別途に設けられているが、画像処理部１０の制御部１１が、主制御部４による処理を行ない、表示入力装置全体の動作を制御するように構成してもよい。
【００３３】
次に、本実施形態１の表示入力装置による画像の表示処理について説明する。図３は実施形態１の表示入力装置による表示処理の手順を示すフローチャートである。画像表示パネル１に画像を表示中の表示入力装置において、主制御部４は、正面側タッチパネル２からの入力を待っており（Ｓ１）、正面側タッチパネル２からの入力があったか否かを判断する（Ｓ２）。入力がない場合（Ｓ２：ＮＯ）、動作がＳ１に戻って、主制御部４は入力待ちとなる。
【００３４】
正面側タッチパネル２からの入力があった場合（Ｓ２：ＹＥＳ）、主制御部４は、入力されたデータに基づいて、正面側タッチパネル２に対して使用者が入力操作（接触）した箇所を特定し、不可視領域検出部５は、特定された箇所に基づいて、使用者の手の陰となり、視認が困難な領域（不可視領域）を検出する（Ｓ３）。なお、不可視領域検出部５は、正面側タッチパネル２に対する使用者の接触位置のうちで、ソフトキーの表示位置に一致しない接触位置、即ち、入力操作のためではなく、表示入力装置を保持するために使用者の手が接触していた位置に基づいて不可視領域を検出する。
【００３５】
画像処理部１０の制御部１１は、不可視領域検出部５によって不可視領域が検出されたか否かを判断し（Ｓ４）、不可視領域が検出されていない場合（Ｓ４：ＮＯ）、即ち、不可視領域がない場合、何も行なわずに処理を終了する。この場合、表示中の画像は、そのまま表示される。不可視領域が検出された場合（Ｓ４：ＹＥＳ）、即ち、不可視領域があった場合、画像処理部１０の制御部１１は、画像調整部１３を制御して画像の表示位置の調整処理を行なわせ、不可視領域の表示位置を変更する（Ｓ５）。
【００３６】
図４は画像の表示位置の調整処理を説明するための説明図である。なお、表示入力装置は、画像表示パネル１の正面側から背面側が視認可能であるが、図４では、背面側の状態の図示を省略する。図４の上側には、ある時点での表示入力装置の使用態様を示しており、使用者の左手親指が表示中のオブジェクト３１を覆う位置で、右手親指が表示中のオブジェクト３２を覆う位置でそれぞれ正面側タッチパネル２に接触している状態を示している。図４の上側に示した状態の場合、表示画像中のオブジェクト３１，３２が見辛くなり、不可視領域検出部５は、不可視領域として、オブジェクト３１，３２を含む領域を検出する。図４に示した例では、不可視領域検出部５は、画像表示パネル１における表示領域の下半分の領域を、不可視領域Ｒ１として検出する。なお厳密には、不可視領域検出部５は、使用者の手（指）と正面側タッチパネル２との接触領域を含む領域を不可視領域とする。
【００３７】
そして、画像処理部１０の制御部１１は、画像調整部１３によって、不可視領域Ｒ１に表示されている画像を、使用者の手（指）の陰にならない箇所、図４に示した例では、画像表示パネル１における表示領域の上半分の領域Ｒ２に表示させる。その結果、図４の下側に示したように、使用者の手の陰になって視認し辛い領域Ｒ１に表示されていた画像が、視認可能な領域Ｒ２に移動されるので、使用者は、適切な表示画像を確実に視認できる。
【００３８】
本実施形態１では、不可視領域Ｒ１が表示領域の下半分の領域であったので、不可視領域Ｒ１の表示画像を、表示領域の上半分の領域Ｒ２に移動させたが、不可視領域が表示領域の上半分の領域であった場合には、不可視領域の表示画像を、表示領域の下半分の領域に移動させればよい。表示入力装置を保持する使用者のそれぞれの手は正面側タッチパネル２に対して１箇所（親指の接触箇所）で接触していることが多いので、上述したように、表示面の縦方向に表示位置をずらすことによって、不可視領域Ｒ１の表示画像を視認可能な領域に表示させることができる。なお、不可視領域Ｒ１の表示画像の移動先としては、使用者の手の陰になっていない領域であればよく、表示面の縦方向にずらす構成に限らない。例えば、不可視領域の横方向に視認可能な領域があれば、横方向にずらしてもよい。
【００３９】
表示入力装置は、正面側タッチパネル２からの入力がある都度、詳細には、正面側タッチパネル２に対して入力操作ではない使用者による接触がある都度、ステップＳ３〜Ｓ５の処理を繰り返す。よって、表示入力装置を保持する使用者の手が邪魔になり、表示画像において視認し辛い箇所が発生する都度、その箇所に表示されていた画像を、視認可能な領域に表示させることができ、より見易い画像を提供することができる。
【００４０】
上述したように、本実施形態１の表示入力装置では、画像表示パネル１の両面（正面側及び背面側）からの入力が可能であり、表示入力装置の利便性が向上する。
また、本実施形態１の表示入力装置では、使用者の手が邪魔で視認し辛い領域の表示画像を視認し易い領域に移動させて表示することにより、入力操作に影響を与えることなく、視認し易い表示画像を表示できる。
【００４１】
（実施形態２）
図５は実施形態２の表示入力装置の内部構成を示すブロック図である。本実施形態２の表示入力装置は、上述した実施形態１の不可視領域検出部５の代わりに、背面被覆領域検出部６を備える。表示入力装置のその他の構成は実施形態１と同様であり、対応する部材には同一符号を付してその説明を省略する。
【００４２】
本実施形態２の主制御部４は、背面側タッチパネル３に対して使用者が接触した箇所（位置）が、ソフトキーの表示位置ではない場合、即ち、入力操作を行なうためではなく、表示入力装置を保持するために使用者の手が背面側タッチパネル３に接触していた場合、特定した位置（接触位置）を示すデータを背面被覆領域検出部６へ出力する。
【００４３】
背面被覆領域検出部（領域検出部）６は、主制御部４から取得したデータに基づいて、表示画像の背面側において、表示入力装置を保持する使用者の手（指）によって覆われている領域、即ち、背面側タッチパネル３に対して使用者の手が接触している領域（背面被覆領域）を検出する。背面被覆領域検出部６は、検出した領域を示す情報を画像処理部１０へ出力する。
【００４４】
なお、背面側タッチパネル３に対する使用者の接触位置のそれぞれについて、対応するソフトキーがあるか否かの判断は、主制御部４の代わりに背面被覆領域検出部６によって行なってもよい。この場合、背面被覆領域検出部６は、背面側タッチパネル３が出力したデータ（使用者の接触位置を示すデータ）の全てを、背面側タッチパネル３又は主制御部４を介して取得する。そして、背面被覆領域検出部６は、対応するソフトキーがない接触位置を特定し、特定した接触位置に基づいて背面被覆領域を検出する。
画像処理部１０の画像調整部１３は、背面被覆領域検出部６から取得した情報に基づいて、画像表示パネル１に表示される画像の表示位置を調整する処理を行なう。画像調整部１３による画像の表示位置の調整処理は、実施形態１で説明した処理と同様の処理である。
【００４５】
次に、本実施形態２の表示入力装置による画像の表示処理について説明する。図６は実施形態２の表示入力装置による表示処理の手順を示すフローチャートである。画像表示パネル１に画像を表示中の表示入力装置において、主制御部４は、背面側タッチパネル３からの入力を待っており（Ｓ１１）、背面側タッチパネル３からの入力があったか否かを判断する（Ｓ１２）。入力がない場合（Ｓ１２：ＮＯ）、動作がＳ１１に戻って、主制御部４は入力待ちとなる。
【００４６】
背面側タッチパネル３からの入力があった場合（Ｓ１２：ＹＥＳ）、主制御部４は、入力されたデータに基づいて、背面側タッチパネル３に対して使用者が接触した箇所を特定し、背面被覆領域検出部６は、特定された箇所に基づいて、表示画面の背面側において使用者の手の陰となっている背面被覆領域を検出する（Ｓ１３）。なお、背面被覆領域検出部６は、背面側タッチパネル３に対する使用者の接触位置のうちで、ソフトキーの表示位置に一致しない接触位置、即ち、入力操作のためではなく、表示入力装置を保持するために使用者の手が接触していた位置に基づいて背面被覆領域を検出する。
【００４７】
画像処理部１０の制御部１１は、背面被覆領域検出部６によって背面被覆領域が検出されたか否かを判断し（Ｓ１４）、背面被覆領域が検出されていない場合（Ｓ１４：ＮＯ）、即ち、背面被覆領域がない場合、何も行なわずに処理を終了する。この場合、表示中の画像は、そのまま表示される。背面被覆領域が検出された場合（Ｓ１４：ＹＥＳ）、即ち、背面被覆領域があった場合、画像処理部１０の制御部１１は、画像調整部１３を制御して画像の表示位置の調整処理を行なわせ、背面被覆領域の表示位置を変更する（Ｓ１５）。
【００４８】
図７は画像の表示位置の調整処理を説明するための説明図である。図７の上側には、ある時点での表示入力装置の使用態様を示しており、上側の図では省略しているが、表示中のオブジェクト３１は、ソフトキーＡ，Ｂと重なる位置に、表示中のオブジェクト３２は、ソフトキーＣ，Ｄと重なる位置にそれぞれ表示されている。
【００４９】
ソフトキーを表示させるためのキー表示用データは、画像表示パネル１に表示される画像データとは別に用意されており、例えば画像メモリ２０に予め記憶されている。そして、画像処理部１０は、主制御部４からの指示に従って、画像表示パネル１に表示すべきキー表示用データと、画像データとを画像メモリ２０から取得し、例えば画像データをキー表示用データの上側に重ね合せて画像表示パネル１に表示させる。従って、本実施形態２では、ソフトキーＡ〜Ｄの上にオブジェクト３１，３２が表示され、ソフトキーＡ〜Ｄが視認できない状況が発生する。
【００５０】
図７の上側に示した状態の場合、使用者はソフトキーＡ〜Ｄを操作しようとするが、表示画像中のオブジェクト３１，３２によってソフトキーＡ〜Ｄが見辛くなっている。そこで、背面被覆領域検出部６は、使用者が背面側タッチパネル３に接触した箇所のうちで、ソフトキーＡ〜Ｄ以外の箇所を含む領域を、背面被覆領域として検出する。図７に示した例では、背面被覆領域検出部６は、オブジェクト３１，３２を含む領域、即ち、画像表示パネル１における表示領域の下半分の領域を背面被覆領域Ｒ３として検出する。
【００５１】
そして、画像処理部１０の制御部１１は、画像調整部１３によって、背面被覆領域Ｒ３に表示されている画像を、使用者の手（指）が背面側タッチパネル３と接触していない箇所、図７に示した例では、画像表示パネル１における表示領域の上半分の領域Ｒ４に表示させる。その結果、図７の下側に示したように、ソフトキーＡ〜Ｄに重なる位置の領域Ｒ３に表示されていた画像（オブジェクト３１，３２）が、ソフトキーＡ〜Ｄに重ならない位置に移動されるので、使用者は、ソフトキーＡ〜Ｄ及び自身の手（指）を確実に視認でき、操作性が向上する。
【００５２】
本実施形態２では、背面被覆領域Ｒ３が表示領域の下半分の領域であったので、背面被覆領域Ｒ３の表示画像を、表示領域の上半分の領域Ｒ４に移動させたが、背面被覆領域が表示領域の上半分の領域であった場合には、背面被覆領域の表示画像を、表示領域の下半分の領域に移動させればよい。表示入力装置を保持する使用者の２つの手（各手の指）は背面側タッチパネル３に対して横方向に並んで接触していることが多いので、上述したように、表示面の縦方向に表示位置をずらすことによって、背面被覆領域Ｒ３の表示画像を、使用者の接触箇所（ソフトキーの表示位置の近傍）と重ならない位置に表示させることができる。なお、背面被覆領域Ｒ３の表示画像の移動先としては、使用者の接触箇所と重ならない位置であればよく、表示面の縦方向にずらす構成に限らない。例えば、背面被覆領域の横方向に、使用者の接触箇所と重ならない領域があれば、横方向にずらしてもよい。
【００５３】
表示入力装置は、背面側タッチパネル３からの入力がある都度、詳細には、背面側タッチパネル３に対して入力操作ではない使用者による接触がある都度、ステップＳ１３〜Ｓ１５の処理を繰り返す。よって、表示画像によって背面側での操作状態が視認し辛い状況の発生を防止し、より操作性の高い表示入力装置を提供できる。
【００５４】
（実施形態３）
本実施形態３の表示入力装置は、上述した実施形態１の表示入力装置と同様の構成によって実現可能であり、表示入力装置が備える各部についての説明を省略する。また、本実施形態３の表示入力装置は、図３に示した表示処理と同様の処理を行なうので、表示処理の詳細についても説明を省略する。
本実施形態３の表示入力装置は、図３に示した表示処理において、ステップＳ５の処理、具体的には、画像の表示位置の調整処理が実施形態１とは相異するので、この処理についてのみ説明する。
【００５５】
本実施形態３の画像表示パネル１は、表示領域が複数の領域（分割領域）に分割されており、分割領域毎に画像表示が可能である。具体的には、画像処理部１０が画像調整部１３を制御し、バッファメモリ１３ｂに格納されている画像データの読出しアドレスを制御することにより、分割領域単位で、画像の表示位置を調整する処理を行なう。
【００５６】
図８は画像の表示位置の調整処理を説明するための説明図である。図８の上側には、ある時点での表示入力装置の使用態様を示しており、図４の上側に示した図と同様の状態を示している。
本実施形態３では、画像表示パネル１が、図８の上側に示した例のように、領域Ｒ１１，Ｒ１２，Ｒ１３，Ｒ２１，Ｒ２２，Ｒ２３の複数（図８では６つ）の領域に分割されて処理される。
【００５７】
図８の上側に示した状態の場合、本実施形態３の不可視領域検出部５は、不可視領域として、オブジェクト３１を含む分割領域Ｒ１１と、オブジェクト３２を含む分割領域Ｒ１３とを検出する。
本実施形態３の画像処理部１０の制御部１１は、画像調整部１３によって、不可視領域として検出された分割領域Ｒ１１及びＲ１３に表示されている画像を、使用者の手（指）の陰にならない箇所、図８に示した例では、分割領域Ｒ２１及びＲ２３に表示させる。その結果、図８の下側に示したように、使用者の手の陰になって視認し辛い領域Ｒ１１，Ｒ１３に表示されていた画像が、視認可能な領域Ｒ２１，Ｒ２３に移動されるので、使用者は、適切な表示画像を確実に視認できる。なお、不可視領域ではない分割領域Ｒ１２の表示画像はそのまま分割領域Ｒ１２に表示される。
【００５８】
本実施形態３では、分割領域Ｒ１１，Ｒ１３が不可視領域として検出されたので、分割領域Ｒ１１，Ｒ１３の表示画像を、それぞれの上に位置する分割領域Ｒ２１，Ｒ２３に移動させたが、このような構成に限らない。例えば、分割領域Ｒ２１〜Ｒ２３のいずれかが不可視領域として検出された場合、不可視領域の表示画像を、それぞれ下に位置する分割領域Ｒ１１〜Ｒ１３に移動させればよい。また例えば、不可視領域の横方向に視認可能な領域があれば、不可視領域の表示画像を横方向にずらしてもよく、分割領域Ｒ１１が不可視領域であった場合に、分割領域Ｒ１１の表示画像を分割領域Ｒ１２にずらしてもよい。不可視領域の表示画像の移動先としては、使用者の手の陰になっていない領域であればよく、使用者の左右の手と正面側タッチパネル２との複数の接触位置に応じて適宜決定すればよい。
【００５９】
本実施形態３では、不可視領域の表示画像を、視認可能な領域に移動させることにより、入力操作に影響を与えることなく、視認し易い表示画像を表示できる。また、表示領域を予め分割した分割領域毎に表示位置の移動が可能であるので、視認し辛くない領域の表示画像を移動させないことにより、不要な移動処理（画像の表示位置の調整処理）を削減できる。よって、不可視領域の移動先の領域に本来表示されるべき画像が、不可視領域の表示画像を移動させることによって欠落する（表示されない）という状況の発生を抑制できる。
【００６０】
本実施形態３は、実施形態１の変形例として説明したが、実施形態２にも同様に適用できる。即ち、実施形態２の表示入力装置において、画像表示パネル１が、複数の分割領域毎に画像表示が可能であり、画像処理部１０が画像調整部１３を制御し、分割領域単位で、画像の表示位置を調整する処理を行なう。図９は画像の表示位置の調整処理を説明するための説明図であり、図９の上側には、図７の上側に示した図と同様の状態を示す。図９の上側に示した状態の場合、使用者の左手が背面側タッチパネル３と接触する領域を含む分割領域Ｒ１１と、使用者の右手が背面側タッチパネル３と接触する領域を含む分割領域Ｒ１３とが背面被覆領域として検出される。そして、分割領域Ｒ１１の表示画像が分割領域Ｒ２１に移動され、分割領域Ｒ１３の表示画像が分割領域Ｒ２３に移動される。なお、分割領域Ｒ１２の表示画像はそのまま分割領域Ｒ１２に表示される。
【００６１】
（実施形態４）
本実施形態４の表示入力装置は、上述した実施形態１の表示入力装置と同様の構成によって実現可能であり、表示入力装置が備える各部についての説明を省略する。なお、本実施形態４の画像処理部１０の制御部１１は、タイマを有する。また、本実施形態４の表示入力装置は、図３に示した表示処理と同様の処理を行なうので、表示処理の詳細についても説明を省略する。
本実施形態４の表示入力装置は、図３に示した表示処理において、ステップＳ５の処理、具体的には、画像の表示位置の調整処理が実施形態１とは相異するので、この処理についてのみ説明する。
【００６２】
本実施形態４の表示入力装置は、不可視領域が検出された場合、不可視領域の表示画像を、この不可視領域と、視認可能な領域とに交互に表示させる。即ち、本実施形態４の表示入力装置は、上述の実施形態１と同様に、不可視領域の表示画像を視認可能な領域に移動させると共に、所定時間経過後には、元の不可視領域に表示させ、これを繰り返す。
【００６３】
図１０は実施形態４の表示入力装置による表示処理の手順を示すフローチャートである。本実施形態４の表示入力装置は、図３に示したステップＳ１〜Ｓ５と同様の処理をステップＳ２１〜Ｓ２５で実行する。
【００６４】
ステップＳ２５の処理によって、図４の上側に示した表示状態から図４の下側に示した表示状態に変更される。画像処理部１０の制御部１１は、不可視領域の表示位置を変更した場合、タイマによって所定時間の計時を開始しており、所定時間が経過したか否かを判断する（Ｓ２６）。なお、所定時間は、切り替えた表示画像を十分確認できる程度の時間であればよく、例えば数秒程度でよい。また所定時間は予め決められて制御部１１のメモリに格納されている。
【００６５】
所定時間が経過していない場合（Ｓ２６：ＮＯ）、制御部１１は、所定時間が経過するまで待機し、所定時間が経過した場合（Ｓ２６：ＹＥＳ）、ステップＳ２５で移動させた不可視領域の表示画像を元の表示位置に戻して表示する（Ｓ２７）。即ち、図４の下側に示した表示状態から図４の上側に示した表示状態に戻される。そして、制御部１１は、タイマによって所定時間の計時を再度開始し、所定時間が経過したか否かを判断する（Ｓ２８）。所定時間が経過していない場合（Ｓ２８：ＮＯ）、制御部１１は、所定時間が経過するまで待機し、所定時間が経過した場合（Ｓ２８：ＹＥＳ）、ステップＳ２５の処理に戻り、不可視領域の表示画像を視認可能な領域に再度移動させる（Ｓ２５）。
【００６６】
表示入力装置は、画像表示パネル１の表示画像が切り替わるまで、ステップＳ２５〜Ｓ２８の処理を繰り返す。これにより、図４の上側に示した表示状態と、図４の下側に示した表示状態とが所定時間間隔で交互に切り替えられる。よって、本実施形態４の表示入力装置では、視認し辛い領域の表示画像を視認し易く表示できると共に、元の画像をそのまま表示できる。
【００６７】
なお、図４の上側に示した表示状態から図４の下側に示した表示状態に切り替える際の時間と、図４の下側に示した表示状態から図４の上側に示した表示状態に切り替える際の時間とは、同一でなくてもよい。例えば、図４の下側に示した表示状態、即ち、不可視領域の表示画像を視認可能な領域に表示している状態の継続時間を、図４の上側に示した表示状態の継続時間よりも長くしてもよい。この場合、不可視領域の表示画像を視認できる時間が、視認できない時間よりも長いので、不可視領域の表示画像を十分確認できる。
【００６８】
本実施形態４は、実施形態１の変形例として説明したが、実施形態２，３にも同様に適用できる。即ち、実施形態２の表示入力装置において、背面被覆領域Ｒ３が検出された場合、背面被覆領域Ｒ３の表示画像を、この背面被覆領域Ｒ３と、ソフトキーの表示位置に重ならない位置の領域Ｒ４とに交互に表示させる。これにより、図７の上側に示した表示状態と、図７の下側に示した表示状態とを交互に切り替えることができる。
【００６９】
また、実施形態３の表示入力装置において、不可視領域Ｒ１１，Ｒ１３が検出された場合、不可視領域Ｒ１１，Ｒ１３の表示画像を、この不可視領域Ｒ１１，Ｒ１３と、視認可能な領域Ｒ２１，Ｒ２３とに交互に表示させる。これにより、図８の上側に示した表示状態と、図８の下側に示した表示状態とを交互に切り替えることができる。また同様に、実施形態３の変形例として示した表示入力装置において、背面被覆領域Ｒ１１，Ｒ１３が検出された場合、背面被覆領域Ｒ１１，Ｒ１３の表示画像を、この背面被覆領域Ｒ１１，Ｒ１３と、使用者の接触箇所と重ならない位置の領域Ｒ２１，Ｒ２３とに交互に表示させる。これにより、図９の上側に示した表示状態と、図９の下側に示した表示状態とを交互に切り替えることができる。
【００７０】
上述した実施形態１，３，４では、画像表示パネル１の正面側に生じる不可視領域に表示される画像の表示位置を変更する構成を示し、実施形態２では、画像表示パネル１の背面側に生じる背面被覆領域に表示される画像の表示位置を変更する構成を示した。本発明の表示入力装置は、これらの構成を組み合わせた装置に適用できる。具体的には、画像表示パネル１の正面側に不可視領域が発生した場合、不可視領域の表示画像を適切な位置に移動させると共に、画像表示パネル１の背面側に背面被覆領域が発生した場合、背面被覆領域の表示画像を適切な位置に移動させる。
【００７１】
上述した実施形態１〜４では、画像表示パネル１の正面側に不可視領域が発生した場合、又は画像表示パネル１の背面側に背面被覆領域が発生した場合に、それぞれ適切な位置に表示画像を移動させる構成であった。しかし、このような構成に限定されない。例えば、表示画像において使用者にとって不要な画像が表示されている領域があり、使用者がその領域に手（指）を接触させて表示入力装置を保持している状況が考えられる。また、ソフトキーが固定位置に表示されており、使用者が各ソフトキーの表示位置を確認せずに操作できる状況が考えられる。これらの状況の場合、不可視領域又は背面被覆領域の表示画像を必ずしも移動させる必要はない。そこで、画像の表示位置の調整処理を行なうか否かを使用者によって選択可能に構成してもよい。
【００７２】
上述した実施形態１〜４では、使用者の手が正面側タッチパネル２又は背面側タッチパネル３と接触する領域を含む矩形の領域を、不可視領域又は背面被覆領域とし、不可視領域又は背面被覆領域単位で表示位置を移動させていた。しかし、このような構成に限定されない。例えば、画像データが、画像中のオブジェクト単位で表示制御可能である場合、オブジェクトを含む領域（例えば、領域Ｒ１，Ｒ３，Ｒ１１，Ｒ１３）単位ではなく、オブジェクト単位で表示位置を移動させてもよい。この場合、表示位置を移動させる画像を最小限とすることができると共に、移動させる領域が小さいので、移動先の領域の確保が容易となる。
【００７３】
上述した実施形態１〜４では、画像表示パネル１の表裏に正面側タッチパネル２及び背面側タッチパネル３を重ねて配置した構成を示したが、表示入力装置は、他の構成で受付部を実現してもよい。例えば、表示入力装置は、受付部として光学式タッチパネルを備えた形態であってもよい。また例えば、表示入力装置は、画像表示パネル１に光センサを内蔵しておき、画像表示パネル１の正面及び背面に対する入力操作を光センサにより検出する形態であってもよい。この場合、使用者の手が正面側タッチパネル２又は背面側タッチパネル３に接触している箇所だけでなく、接触してないが、使用者の手又は用紙などによって表示領域に陰が生じている領域の検出も可能となる。このような領域の表示画像の表示位置を移動させることにより、より見易い画像及びソフトキーの表示が可能となる。
【００７４】
本発明の表示入力装置の例として、携帯型のコンピュータ、携帯型のゲーム機及び携帯電話機を挙げたが、表示入力装置はその他の装置であってもよい。例えば、表示入力装置は、コピー機に設けられた取り外し可能な操作パネルであってもよい。
【００７５】
以上、本発明の好適な実施形態についてそれぞれ具体的に説明したが、各構成及び動作などは適宜変更可能であって、上述の実施形態に限定されることはない。
【符号の説明】
【００７６】
１ 画像表示パネル
２ 正面側タッチパネル（受付部）
３ 背面側タッチパネル（受付部）
４ 主制御部
５ 不可視領域検出部（領域検出部）
６ 背面被覆領域検出部（領域検出部）
１０ 画像処理部
１３ 画像調整部
【特許請求の範囲】
【請求項１】
一面側から他面側へ光が透過する画像表示パネルと、
該画像表示パネルの両面夫々に設けられ、該両面夫々に対する入力操作を受け付ける受付部と、
前記画像表示パネルのいずれかの面の側に存在する物体が、該いずれかの面を被覆又は接触する領域を検出する領域検出部と、
該領域検出部が検出した領域に基づいて、前記画像表示パネルに表示させる画像の表示位置を調整する画像調整部と
を備えることを特徴とする表示入力装置。
【請求項２】
前記画像表示パネルは、予め分割された複数の分割領域毎に画像表示が可能であり、
前記画像調整部は、前記領域検出部が検出した領域を含む分割領域の表示位置を調整するようにしてあることを特徴とする請求項１に記載の表示入力装置。
【請求項３】
前記領域検出部は、前記受付部が受け付けた前記一面又は他面に対する入力操作に基づいて、前記物体が前記一面又は他面と接触する領域を検出するようにしてあることを特徴とする請求項１又は２に記載の表示入力装置。
【請求項４】
前記画像調整部は、前記領域検出部が検出した１又は複数の領域に表示される画像を、該領域と、該領域以外の所定領域とに交互的に表示させるようにしてあることを特徴とする請求項１から３までのいずれかひとつに記載の表示入力装置。
【請求項５】
一面側から他面側へ光が透過する画像表示パネルを備える表示入力装置での表示方法であって、
前記画像表示パネルの両面夫々に対する入力操作を受け付けるステップと、
前記画像表示パネルのいずれかの面の側に存在する物体が、該いずれかの面を被覆又は接触する領域を検出するステップと、
検出された領域に基づいて、前記画像表示パネルに表示させる画像の表示位置を調整するステップと
を含むことを特徴とする表示方法。
【請求項１】
一面側から他面側へ光が透過する画像表示パネルと、
該画像表示パネルの両面夫々に設けられ、該両面夫々に対する入力操作を受け付ける受付部と、
前記画像表示パネルのいずれかの面の側に存在する物体が、該いずれかの面を被覆又は接触する領域を検出する領域検出部と、
該領域検出部が検出した領域に基づいて、前記画像表示パネルに表示させる画像の表示位置を調整する画像調整部と
を備えることを特徴とする表示入力装置。
【請求項２】
前記画像表示パネルは、予め分割された複数の分割領域毎に画像表示が可能であり、
前記画像調整部は、前記領域検出部が検出した領域を含む分割領域の表示位置を調整するようにしてあることを特徴とする請求項１に記載の表示入力装置。
【請求項３】
前記領域検出部は、前記受付部が受け付けた前記一面又は他面に対する入力操作に基づいて、前記物体が前記一面又は他面と接触する領域を検出するようにしてあることを特徴とする請求項１又は２に記載の表示入力装置。
【請求項４】
前記画像調整部は、前記領域検出部が検出した１又は複数の領域に表示される画像を、該領域と、該領域以外の所定領域とに交互的に表示させるようにしてあることを特徴とする請求項１から３までのいずれかひとつに記載の表示入力装置。
【請求項５】
一面側から他面側へ光が透過する画像表示パネルを備える表示入力装置での表示方法であって、
前記画像表示パネルの両面夫々に対する入力操作を受け付けるステップと、
前記画像表示パネルのいずれかの面の側に存在する物体が、該いずれかの面を被覆又は接触する領域を検出するステップと、
検出された領域に基づいて、前記画像表示パネルに表示させる画像の表示位置を調整するステップと
を含むことを特徴とする表示方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２０１３−８０２７３（Ｐ２０１３−８０２７３Ａ）
【公開日】平成２５年５月２日（２０１３．５．２）
【国際特許分類】
【出願番号】特願２０１１−２１８４８３（Ｐ２０１１−２１８４８３）
【出願日】平成２３年９月３０日（２０１１．９．３０）
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
【公開日】平成２５年５月２日（２０１３．５．２）
【国際特許分類】
【出願日】平成２３年９月３０日（２０１１．９．３０）
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
[ Back to top ]