表示端末
【課題】ユーザが表示位置を明示的に指示することも、特別なセンサを設けることもせずに、ユーザの持ち方に応じた画像を表示させることを可能にする。
【解決手段】表示端末１０は、タッチスクリーンが重ねて設けられた表示領域１０Ａを有する。ユーザは、表示領域１０Ａに対してドラッグ操作やフリック操作を行う。これらの操作は、表示領域１０Ａを直線状に擦る操作であるが、右手で行った場合と左手で行った場合とで軌跡に相違が生じる。なぜならば、これらの操作の軌跡は、関節（図においては、親指の第二関節）を回転中心とした回転運動に近似したものになるためである。したがって、これらの操作の軌跡は、ユーザ自身が直線状に操作しているつもりであっても、実際には円弧状になる。表示端末１０は、このような円弧状の軌跡から平均曲率半径とその曲率中心座標とを算出することにより、持ち手が右手と左手のいずれであるかを判断する。
【解決手段】表示端末１０は、タッチスクリーンが重ねて設けられた表示領域１０Ａを有する。ユーザは、表示領域１０Ａに対してドラッグ操作やフリック操作を行う。これらの操作は、表示領域１０Ａを直線状に擦る操作であるが、右手で行った場合と左手で行った場合とで軌跡に相違が生じる。なぜならば、これらの操作の軌跡は、関節（図においては、親指の第二関節）を回転中心とした回転運動に近似したものになるためである。したがって、これらの操作の軌跡は、ユーザ自身が直線状に操作しているつもりであっても、実際には円弧状になる。表示端末１０は、このような円弧状の軌跡から平均曲率半径とその曲率中心座標とを算出することにより、持ち手が右手と左手のいずれであるかを判断する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、タッチスクリーンを有する表示端末の制御に関する。
【背景技術】
【０００２】
タッチスクリーン（タッチパネルともいう。）を有し、ユーザが片手で操作できるような表示端末に関して、その操作を容易にするための種々の技術がある。例えば、特許文献１には、所定の距離以上のドラッグによって、操作画面をユーザの指に手繰り寄せられるように表示することが記載されている。また、特許文献２には、ユーザに丸等の線図をタッチパネル上に描かせ、この線図の内部に操作キー群が表示されるようにすることが記載されている。また、このような表示制御とは別に、特許文献３には、タッチパネルに加え、手指の把持位置を検出するためのセンサを備える携帯端末について記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−３３０７号公報
【特許文献２】特開２００８−１１３１４８号公報
【特許文献３】特開２０１０−１５４０９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１及び２に記載された技術は、何をどこに表示させたいのかをユーザが明示的に指示するものであるといえる。また、特許文献３は、ユーザの把持位置を検出するために特別なセンサを設けなければならないものである。
一方、本発明は、ユーザが表示位置を明示的に指示することも、特別なセンサを設けることもせずに、ユーザの持ち方に応じた画像を表示させることを可能にすることを目的とするものである。
【課題を解決するための手段】
【０００５】
本発明の一態様に係る表示端末は、タッチスクリーンが表示領域に重ねて設けられた表示部と、前記タッチスクリーンに対するユーザの操作に応じて処理を実行する操作処理部と、前記ユーザによる当該表示端末の把持態様を表す把持情報の記録を管理する情報管理部と、前記操作処理部により実行された処理に従い、前記タッチスクリーンによる操作を受け付けるための操作画像を含む画面の前記表示領域への描画を制御する描画制御部とを備え、前記操作処理部は、前記操作の種別を判定する判定部と、前記判定部により判定された操作の種別が特定の種別である場合に、当該操作の軌跡に基づいてユーザの持ち手とその把持位置とを表す前記把持情報を算出する計算部とを有し、前記描画制御部は、前記計算部により算出され、又は前記情報管理部により記録された把持情報に従い、前記操作画像の配置を決定する構成を有する。
【０００６】
好ましい態様において、前記判定部は、ドラッグ操作又はフリック操作を前記特定の種別として判定し、前記計算部は、前記軌跡の平均曲率半径とその曲率中心座標とを用いて前記把持情報を算出する。
別の好ましい態様において、前記計算部は、前記平均曲率半径が閾値以下である場合に、その前記操作を当該端末の持ち手による操作であると判断し、前記平均曲率半径が前記閾値より大きい場合に、その前記操作を当該端末の持ち手と反対の手による操作であると判断する。
さらに別の好ましい態様において、前記計算部は、前記平均曲率半径が前記閾値以下である場合において、前記曲率中心座標が前記表示領域に対して右寄りであるときには、当該端末の持ち手が右手であると判断し、前記曲率中心座標が前記表示領域に対して左寄りであるときには、当該端末の持ち手が左手であると判断する。あるいは、前記計算部は、前記平均曲率半径が前記閾値より大きい場合において、前記曲率中心座標が前記表示領域に対して右寄りであるときには、当該端末の持ち手が左手であると判断し、前記曲率中心座標が前記表示領域に対して左寄りであるときには、当該端末の持ち手が右手であると判断してもよい。
さらに別の好ましい態様において、前記操作処理部は、前記特定の種別の操作が行われた場合に、当該操作に割り当てられ、前記計算部による前記把持情報の算出と独立した処理を実行するとともに、前記計算部により前記把持情報を算出する。
さらに別の好ましい態様において、前記タッチスクリーンは、前記ユーザの指が接触せずに近接する近接状態を検出し、前記判定部は、前記近接状態を前記特定の種別の操作であると判定し、前記計算部は、前記把持情報が記録されている場合において、前記判定部により前記近接状態の操作が判定されたとき、当該近接状態における前記指の位置の座標に基づいて当該把持情報を再算出し、前記情報管理部は、前記計算部により再算出された把持情報によって記録を更新する。
さらに別の好ましい態様において、前記曲率中心座標は、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で記述される座標であり、前記計算部は、前記曲率中心座標の前記第２軸の座標及び前記平均曲率半径が再算出前と等しく、かつ、前記指の位置の座標が前記平均曲率半径の円弧に含まれるように前記第１軸の座標を変更することによって前記曲率中心座標を再算出する。
さらに別の好ましい態様において、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系の座標で前記操作画像が定義される場合において、前記描画制御部は、前記画面に含まれる前記操作画像の全部又は一部が、再算出された前記曲率中心座標を中心とし、前記平均曲率半径を半径とする円の内側に表示されるように、前記操作画像の前記第１軸方向の描画位置を決定する。
さらに別の好ましい態様において、前記曲率中心座標は、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で記述される座標であり、前記情報管理部は、所定時間の経過後に、前記第２軸の座標を記録から消去せずに前記第１軸の座標を記録から消去する。
さらに別の好ましい態様において、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で前記操作画像の座標が定義される場合において、前記描画制御部は、前記ユーザの持ち手に応じて前記操作画像の前記第２軸方向の描画位置を異ならせ、前記画面に含まれる前記操作画像の全部又は一部が、前記曲率中心座標を中心とし、前記平均曲率半径を半径とする円の内側に表示されるように、前記操作画像の前記第１軸方向の描画位置を決定する。
【０００７】
なお、本発明は、他の態様でも実現可能である。例えば、本発明は、タッチスクリーンが表示領域に重ねて設けられた表示端末の制御装置であって、前記タッチスクリーンに対するユーザの操作に応じて処理を実行する操作処理部と、前記ユーザによる当該表示端末の把持態様を表す把持情報の記録を管理する情報管理部と、前記操作処理部により実行された処理に従い、前記タッチスクリーンによる操作を受け付けるための操作画像を含む画面の前記表示領域への描画を制御する描画制御部とを備え、前記操作処理部は、前記操作の種別を判定する判定部と、前記判定部により判定された操作の種別が特定の種別である場合に、当該操作の軌跡に基づいてユーザの持ち手とその把持位置とを表す前記把持情報を算出する計算部とを有し、前記描画制御部は、前記計算部により算出され、又は前記情報管理部により記録された把持情報に従い、前記操作画像の配置を決定する構成を有するものであってもよいし、かかる制御装置に対応するプログラムや表示端末制御方法の発明としても把握され得るものである。
【発明の効果】
【０００８】
本発明によれば、ユーザが表示位置を明示的に指示することも、特別なセンサを設けることもせずに、ユーザの持ち方に応じた画像を表示することが可能である。
【図面の簡単な説明】
【０００９】
【図１】携帯端末の主要なハードウェア構成を示すブロック図
【図２】制御部の機能的構成を示す機能ブロック図
【図３】携帯端末の把持態様を例示する図
【図４】ユーザによる携帯端末の操作を例示する図
【図５】持ち手の判断の際に実行する処理を示すフローチャート
【図６】座標や数値を説明するための図
【図７】把持情報を例示する図
【図８】把持情報の内容を図解して示す図
【図９】操作画像の表示例を示す模式図
【図１０】描画制御処理を示すフローチャート
【図１１】描画制御処理の結果として表示される操作画像を例示する図
【図１２】描画制御処理を示すフローチャート
【図１３】更新前後の把持位置座標を図解して示す図
【発明を実施するための形態】
【００１０】
［発明の概要］
本発明は、タッチスクリーンを有する表示端末において、ユーザが表示端末を左右のいずれの手で把持しているかを判断し、端末を把持している手（以下「持ち手」という。）に応じた画面表示を実現するものである。具体的には、本発明は、ユーザの持ち手を判断し、操作によく用いられる描画オブジェクトをその持ち手で操作しやすい位置に表示したり、あるいは、いわゆる「閉じるボタン（アイコン）」のような、ユーザが頻繁に操作せず、うっかり操作してしまうことを避けるべき描画オブジェクトを持ち手の指が触れにくい位置に表示したりすることを可能にするものである。なお、本発明において、ユーザの持ち手による操作は、親指（母指、第一指）で行われることが主に想定されている。
【００１１】
また、本発明において、持ち手の判断は、ユーザによって普通に行われる複数種別の操作のうちの特定の種別の操作に基づいて行われる。例えば、持ち手の判断に用いられる操作は、ドラッグ操作やフリック操作のような、タッチスクリーンを直線状に擦る操作である。このような操作は、特に、持ち手の指で行われると、ユーザ自身はタッチスクリーン上を直線的に擦っているつもりであっても、実際には円弧状になり、右手であれば左側、左手であれば右側にそれぞれ膨らむようになる。なぜならば、指の運動は、指のある関節を回転中心とした回転運動になるからである。
【００１２】
本発明においては、このような直線的な（つもりの）操作を左右の手で行った場合の相違に着目し、持ち手の判断が行われる。そのため、本発明は、ユーザの何気ない操作からでも持ち手の判断を行うことが可能である。したがって、ユーザは、明示的に、殊更に自分の持ち手や操作可能な範囲を教示する操作を行わなくても、自身の持ち手に応じた画面を利用することが可能である。
【００１３】
なお、指先の軌跡は、複数の関節（第一関節と第二関節）を同時に動かしながら行われたりすることで、実際には必ずしも（厳密な意味での）円弧にはならない場合もある。しかし、以下に説明する実施形態においては、指先の軌跡を、円弧であるか、あるいは円弧とみなせる程度に近似しているものとして取り扱う。したがって、ここでいう「円弧状」の曲線とは、円弧ないしそれに近似する曲線のことをいう。
【００１４】
［第１実施形態］
図１は、本発明の一実施形態である携帯端末の主要なハードウェア構成を示すブロック図である。図１に示す携帯端末１０は、タッチスクリーンを有する携帯可能な表示端末であり、例えば、携帯電話機や、携帯型の音楽プレーヤやゲーム機などである。携帯端末１０は、図１に示すように、制御部１００と、記憶部２００と、表示部３００と、タッチスクリーン部４００とを少なくとも備える。また、携帯端末１０は、図１に示す構成のほかに、他の携帯電話機と通信するための手段や、音声を再生する手段などを含み得る。
【００１５】
制御部１００は、携帯端末１０の各部の動作を制御する手段である。制御部１００は、ＣＰＵ（Central Processing Unit）等の演算処理装置やメモリ（主記憶装置）を備え、プログラムを実行することによって表示部３００の画面表示などを制御する。また、制御部１００は、リアルタイムクロックを有し、日時（日付及び時刻）を特定可能である。記憶部２００は、補助記憶装置に相当する記憶手段であり、制御部１００が画像を表示するために用いるデータ等を記憶する。
【００１６】
表示部３００は、画像を表示する手段である。表示部３００は、液晶表示素子や有機ＥＬ（Electroluminescence）表示素子を用いた表示パネルとその駆動手段を備え、制御部１００から供給される画面データに応じた画面を表示領域に表示する。タッチスクリーン部４００は、表示部３００の表示パネルに重ねて設けられたタッチスクリーンを備え、ユーザの接触位置を示す座標信号を制御部１００に供給する。
【００１７】
本実施形態において、表示部３００は、長方形の縦長の表示領域を有するものとする。以下においては、この長方形の表示領域の左右方向（短辺方向）をｘ軸方向、上下方向（長辺方向）をｙ軸方向とした２次元直交座標系を接触位置等の座標の説明に用いる。また、説明の便宜上、この座標系は、表示領域の左下の頂点を原点とし、右方向及び上方向を正方向とする。ただし、表示領域の形状は、縦長の長方形に限定されるわけではない。
【００１８】
図２は、制御部１００の機能的構成を示す機能ブロック図である。制御部１００は、プログラムを実行することによって、図２に示す操作処理部１１０、情報管理部１２０、描画制御部１３０及び描画部１４０に相当する機能を実現する。また、操作処理部１１０は、より詳細には、判定部１１１及び計算部１１２を含む。なお、これらの各部の機能は、複数のプログラムの協働によって実現されてもよい。
【００１９】
操作処理部１１０は、タッチスクリーンに対するユーザの操作に応じて処理を実行する手段である。操作処理部１１０は、タッチスクリーン部４００から供給される座標信号を取得することによってユーザの操作を認識し、それぞれの操作に対応する処理を実行する。操作処理部１１０が実行する処理には、判定部１１１及び計算部１１２による処理のほか、計算部１１２による処理とは無関係の（すなわち当該処理と独立した）処理が含まれる。かかる処理は、例えば、あるアイコンがドラッグされた場合にそのアイコンの表示位置を移動させる処理や、あるアイコンがダブルタップされた場合にそのアイコンに対応するアプリケーションを実行する処理である。
【００２０】
判定部１１１は、ユーザの操作の種別を判定する手段である。判定部１１１は、本実施形態においては、「タップ（操作）」、「ダブルタップ（操作）」、「ドラッグ（操作）」及び「フリック（操作）」の４種類の操作を判別するものとする。ただし、判定部１１１が実際に判定可能な操作の種別は、これより多くても少なくてもよい。
【００２１】
ここにおいて、タップ操作とは、タッチスクリーンを軽く叩くような操作をいい、具体的には、ユーザの指が接触してから離れるまでの時間が所定の時間（Ｔ1）以内の操作である。また、ダブルタップ操作とは、タップ操作を同じ位置で素早く２回続ける操作をいい、具体的には、１回目のタップ操作が終了してから所定の時間（Ｔ2）以内に２回目のタップ操作が行われるものである。ただし、判定部１１１は、２回のタップ操作の接触位置が同一視できない程度に異なる場合には、当該操作をダブルタップ操作とは判定しない。
【００２２】
また、ドラッグ操作及びフリック操作とは、いずれも、ユーザがタッチスクリーンを擦るような操作をいう。ドラッグ操作とフリック操作の相違は、ユーザの指（すなわち接触位置）の移動速度にあり、フリック操作の方が早く、ドラッグ操作の方が遅い。判定部１１１は、接触位置の座標が連続的に変化する操作を認識した場合において、その移動量（ユーザの指が接触してから離れるまでの移動量。すなわち軌跡の長さ）に対する所要時間の比（すなわち速度）が所定の閾値（Ｖ1）以下であればドラッグ操作であり、そうでなければフリック操作であると判定する。また、判定部１１１は、接触位置の軌跡が所定の長さに満たない場合には、ドラッグ操作及びフリック操作のいずれでもない（あるいはタップ操作である）と判定してもよい。
【００２３】
なお、時間Ｔ1及びＴ2並びに閾値Ｖ1は、あらかじめ決められた適当な値であるが、ユーザが設定可能であってもよい。また、判定部１１１が判定可能な種別は、上述した４種類のほかにあってもよい。例えば、携帯端末１０がいわゆるマルチタッチ機能（タッチスクリーン上の複数の位置が同時に接触されたこと検出する機能）に対応している場合であれば、２本の指を近づけたり離したりする「ピンチ（操作）」などが判定可能な種別に含まれてもよい。
【００２４】
また、操作処理部１１０は、接触位置の座標を操作の履歴として一時的に記憶する機能を有する。操作処理部１１０により記憶される座標のデータのことを、以下においては「操作データ」という。操作データは、例えば配列を用いて記憶されるが、他のデータ構造を用いることも可能である。なお、操作データは、計算部１１２が必要とする操作についてのみ記憶されれば十分であるが、他の操作についてもあわせて記憶されてもよい。
【００２５】
計算部１１２は、持ち手が判断可能な操作が行われた場合に、当該操作の軌跡に基づいて、ユーザの持ち手に関する情報である把持情報を算出する手段である。ここにおいて、持ち手が判断可能な操作とは、軌跡が円弧状となる操作であり、ドラッグ操作やフリック操作がこれに該当し得る。計算部１１２は、判定部１１１がこれらの操作を判定した場合、すなわち特定の種別の操作を判定した場合に、当該操作の操作データに基づいて把持情報を算出する。
【００２６】
なお、ドラッグ操作は、いわゆるドラッグ・アンド・ドロップを行う場合のように、特定の位置から特定の位置へと指を移動させる場合にも行われることがあり、このような場合の操作は持ち手の判断に適さないこともある。そのため、ここでいう「特定の種別の操作」、すなわち判定部１１１が持ち手の判断を行う操作は、ドラッグ操作及びフリック操作の２種類ではなく、フリック操作のみであってもよい。
【００２７】
情報管理部１２０は、操作処理部１１０（より詳細には計算部１１２）により算出された把持情報の記録を管理する手段である。情報管理部１２０は、算出された把持情報に時刻情報（例えば、持ち手を判断した時刻や、当該判断に用いた操作を検出した時刻）を付加してこれを記録するとともに、必要に応じて消去する。情報管理部１２０は、把持情報を制御部１００のメモリに記憶してもよいし、記憶部２００に記憶してもよい。なお、以下において、「把持情報」という名称は、把持情報とこれに付加された時刻情報の総称としても用いられる。
【００２８】
描画制御部１３０は、操作処理部１１０により実行された処理に従い、表示部３００に表示する画面の描画を制御する手段である。表示部３００に表示される画面には、操作画像が含まれる。ここにおいて、操作画像とは、ユーザのタッチスクリーンによる操作を受け付けるための描画オブジェクトをいい、アイコンや閉じるボタンがこれに該当する。また、ウィンドウも操作画像の一例に相当し、ウィンドウの内部にあるボタンやスクロールバーなども操作画像の一例に相当する。描画制御部１３０は、計算部１１２により算出され、又は情報管理部１２０により記録された把持情報に従い、操作画像の配置を決定する。描画制御部１３０は、ユーザの持ち手に応じた配置になるように操作画像の位置を決定するとともに、操作画像の位置に応じて、操作画像以外の他の画像の位置を調整する。
描画部１４０は、描画制御部１３０により決定された配置に従い、表示部３００に実際に画面を表示させる手段である。
【００２９】
携帯端末１０の構成は、以上のとおりである。この構成のもと、携帯端末１０は、データ通信や音楽の再生などといった処理を実行するとともに、ユーザの持ち手を判断し、その持ち手に応じた画面を表示する。携帯端末１０は、上述したように、特定の種別の操作が行われたことを契機として持ち手の判断を行う。したがって、携帯端末１０は、特定の種別の操作が行われるまでは、あらかじめ決められた表示態様（例えば、持ち手の左右に依存しない表示態様）で操作画像等を表示する。なお、携帯端末１０は、ユーザの過去の持ち手を記憶しておき、直前に持ち手の判断を行ったときの判断結果に応じた表示態様で操作画像等を表示してもよい。
【００３０】
図３は、携帯端末１０の把持態様を例示する図である。図３（ａ）は、携帯端末１０を左手で把持する態様を示す一方、図３（ｂ）は、携帯端末１０を右手で把持する態様を示す。なお、同図において、符号１０Ａは、タッチスクリーンが重ねられている表示領域である。このような把持態様において、ユーザが親指の付け根（第二関節）を回転中心として親指を動かすと、ドラッグ操作又はフリック操作が実現される。ここにおいて、回転中心は、それぞれＰ1、Ｐ2である。このとき、親指の先の接触位置の軌跡は、それぞれＬ1、Ｌ2のような曲線になる。Ｌ1は、Ｐ1を中心とした円の弧に近似可能であり、Ｌ2は、Ｐ2を中心とした円の弧に近似可能である。
【００３１】
以上より、Ｌ1、Ｌ2の平均曲率を算出することができれば、その平均曲率半径も特定可能であり、その曲率中心座標に相当するＰ1、Ｐ2も特定可能であるといえる。そうすると、Ｐ1、Ｐ2が表示領域１０Ａに対して右寄りにあるか左寄りにあるかで、ユーザが把持しながら操作している側の手、すなわち持ち手を判断することが可能になる。そこで、携帯端末１０は、ドラッグ操作又はフリック操作の軌跡から平均曲率半径を算出することで、持ち手の判断を行う。
【００３２】
ここで、図４は、ユーザが持ち手と反対の手（同図では左手）で携帯端末１０を操作する場合を例示する図である。図４に示すように、ユーザが持ち手と反対の手でドラッグ操作又はフリック操作を行う場合であっても、その軌跡（Ｌ0）が円弧状になることがある。このような操作を持ち手による操作であるとみなして持ち手を判断すると、誤りが生じてしまい、ユーザの実際の使用に反した操作画像が表示されるおそれがある。
【００３３】
ただし、持ち手による操作と持ち手の反対の手による操作とでは、回転移動の態様に相違がある。持ち手による操作は、持ち手には「端末を把持する」という制約があるため、必然的に親指の運動のみで行われる。一方、持ち手の反対の手による操作は、このような制約がないため、手首の関節（橈骨手根関節）を回転中心（Ｐ0）とした運動によっても行われるし、肘等の関節も複合的に用いられる可能性がある。それゆえ、持ち手による操作と持ち手の反対の手による操作とには、回転中心に相当する関節の位置と、回転運動の半径とに相違が生じるといえる。本実施形態においては、この相違点を利用し、平均曲率半径が比較的小さい操作を持ち手の操作であるとみなす一方、平均曲率半径が比較的大きい操作については、持ち手の反対の手による操作であるとみなし、持ち手が誤って判断されないようにしている。
【００３４】
図５は、制御部１００が持ち手の判断の際に実行する処理を示すフローチャートである。また、図６は、以下の説明において用いる座標や数値を説明するための図である。図６において、Ｗは、表示領域１０Ａの幅（ｘ軸方向の長さ）であるとする。また、ｒは、平均曲率半径であり、Ｃは、その曲率中心座標である。座標Ｃは、ｃxがｘ座標であり、ｃyがｙ座標である。
【００３５】
図５に示す処理において、制御部１００は、まず、特定の種別の操作が行われたか否かを判別する（ステップＳａ１）。制御部１００は、特定の種別の操作以外の操作が行われた場合には、持ち手の判断を行わない。すなわち、制御部１００は、把持情報の算出や記録を行わない。一方、制御部１００は、特定の種別の操作が行われた場合には、操作データを取得し（ステップＳａ２）、この操作データにより表される軌跡が円弧に近似可能であるか否かを判断する（ステップＳａ３）。
【００３６】
ステップＳａ３の判断は、例えば、１回の操作について接触位置が３点以上あったか否かを判断するものである。なぜならば、接触位置が２点以下では、曲線を求めることができないからである。また、制御部１００は、接触位置が３点以上あっても、その軌跡がほぼ直線であったり、あるいは蛇行したりしている場合においても、円弧に近似できないと判断することができる。制御部１００は、ユーザの操作の軌跡が円弧に近似できないと判断した場合には、持ち手の判断を行わない。
【００３７】
ユーザの操作の軌跡が円弧に近似可能である場合、制御部１００は、平均曲率半径ｒと曲率中心座標Ｃとをそれぞれ算出する（ステップＳａ４）。続いて、制御部１００は、平均曲率半径ｒと所定の閾値Ｒtとを比較し、その大小を判断する（ステップＳａ５）。ここにおいて、閾値Ｒtは、ユーザの操作が持ち手による操作か否かを判断するための閾値であり、あらかじめ統計的に求められているものである。閾値Ｒtは、一般的なユーザの親指の先から付け根（第二関節）までの長さより大きく、かつ、人差し指（示指、第二指）の先から手首の関節までの長さより小さくなるよう、適当な値が設定されている。
【００３８】
制御部１００は、平均曲率半径ｒの判断に次いで、曲率中心座標Ｃのｘ座標ｃxがｗ／２より小さいか否かを判断することにより、曲率中心座標Ｃが表示領域１０Ａに対して右寄りか左寄りかを判断する（ステップＳａ６、Ｓａ７）。制御部１００は、平均曲率半径ｒが閾値Ｒt以下である場合において、ｘ座標ｃxがｗ／２より小さい（すなわち左寄りである）ときには、持ち手が左手であると判定し（ステップＳａ８）、ｘ座標ｃxがｗ／２以上である（すなわち右寄りである）ときには、持ち手が右手であると判定する（ステップＳａ９）。一方、制御部１００は、平均曲率半径ｒが閾値Ｒtより大きい場合において、ｘ座標ｃxがｗ／２より小さい（すなわち左寄りである）ときには、持ち手が右手であると判定し（ステップＳａ１０）、ｘ座標ｃxがｗ／２以上である（すなわち右寄りである）ときには、持ち手が左手であると判定する（ステップＳａ１１）。すなわち、制御部１００は、平均曲率半径ｒが閾値Ｒt以下であるか否かによって、持ち手の判定結果を逆転させている。
【００３９】
制御部１００は、持ち手の操作によって持ち手を判定した場合、すなわちステップＳａ８又はＳａ９において判定を行った場合には、曲率中心座標Ｃを把持位置座標とし、平均曲率半径ｒを操作半径として把持情報を記録する（ステップＳａ１２）。ステップＳａ１２の処理は、把持情報が既に記録されている状態で行われる場合には、把持情報の更新に相当する。また、ステップＳａ１２において、制御部１００は、あわせて時刻情報を記録する。
【００４０】
なお、制御部１００は、持ち手と反対の手の操作によって持ち手を（いわば消去法的に）判定した場合、すなわちステップＳａ１０又はＳａ１１において判定を行った場合には、把持位置座標、操作半径及び時刻情報の記録を行わない。なぜならば、これらのステップによって持ち手を判定した場合には、実際の持ち手がどのような位置にあるかまでは明らかだとはいえないからである。
【００４１】
その後、制御部１００は、持ち手を識別するための識別情報を記録する（ステップＳａ１３）。ステップＳａ１３の処理も、識別情報が既に記録されている状態で行われる場合には、識別情報の更新に相当する。なお、識別情報は、ここでは説明の便宜上「Left（左）」又は「Right（右）」という文字列で表現されるが、実際には「１」又は「０」のようなフラグデータであってもよい。また、識別情報は、これらの２種類のデータに加え、持ち手が左右のいずれであるか不明な場合を含んだ３種類のデータとすることも可能である。
【００４２】
図７は、把持情報を例示する図である。制御部１００は、図５に示した処理を実行することにより、「識別情報」、「把持位置座標」、「操作半径」及び「時刻情報」からなる把持情報を記録することが可能である。なお、識別情報及び時刻情報は、把持情報に必須の情報ではない。例えば、識別情報は、把持位置座標から計算により求めることが可能であるため、あえて記録しておかなくてもよい。しかし、識別情報を記録しておけば、把持位置座標から計算によって持ち手をその都度求める必要がなくなる。
【００４３】
なお、把持情報のうち、特に把持位置座標のｘ座標（ｃx）については、持ち手が変わらない限りは、ほとんど変わらない数値であるといえる（携帯端末１０を左右で支える場合）。そこで、制御部１００は、持ち手のそれぞれについてｘ座標をいったん記録したら、以降は同じ数値を持ち手に応じて用いるようにし、再度の記録（すなわち更新）を省略してもよい。
【００４４】
ところで、ユーザは、携帯端末１０をいつまでも同じ態様で把持し続けるとは限らない。それゆえ、把持情報は、時間とともに信頼性が失われていく情報であるといえる。そこで、制御部１００は、記録済みの把持情報を所定時間の経過後に消去するようにしてもよい。ただし、この場合においても、把持位置座標のｘ座標については、制御部１００が消去しないようにしてもよい。
【００４５】
図８は、把持情報の内容を図解して示す図である。図８は、持ち手が左手であった場合の例である。把持位置座標Ｃと操作半径ｒにより、表示領域１０Ａのうちユーザにとって操作がしやすい領域を特定することが可能である。図８において、表示領域１０Ａのうち、把持位置座標Ｃを中心とし、中心角が９０°の扇形と重なる領域Ａ１は、領域Ａ２、Ａ３に比べ、ユーザが操作しやすい領域である。ユーザは、把持位置座標Ｃから操作半径ｒ以下の範囲の領域（すなわち領域Ａ１）であれば、指を必要以上に伸ばしたり、携帯端末１０の持ち方を変えたりしなくても、当該領域に触れることが容易である。そこで、携帯端末１０は、操作画像（特に、ユーザがよく操作に用いるもの）が領域Ａ１に描画されるように画面表示を制御する。以下においては、図８にハッチングで示す領域Ａ１のことを「特定領域」という。なお、特定領域は、図８に示す扇形に代えて把持位置座標Ｃを中心とする操作半径ｒの円を用い、表示領域１０Ａのうちのこの円と重なる領域であってもよい。
【００４６】
図９は、図８に示した把持情報が用いられる場合における操作画像の表示例を示す模式図である。ここにおいて、操作画像Ｗ１、Ｗ２、Ｗ３は、それぞれウィンドウを表している。なお、ウィンドウ内には、ボタン等の他の操作画像がさらにあってもよい。例えば、携帯端末１０は、図９（ａ）に示すように、操作画像Ｗ１の全体が特定領域内に表示されるように、操作画像Ｗ１の配置やサイズを調整することができる。また、携帯端末１０は、図９（ｂ）に示すように、操作画像Ｗ２の一部が特定領域内に表示されるようにしてもよい。つまり、携帯端末１０は、操作画像の全部又は一部が特定領域内に表示されるようにすればよい。
【００４７】
また、携帯端末１０は、操作画像の一部を特定領域外に表示する場合においては、図９（ｃ）に示すように、閉じるボタンＢ１を特定領域外に表示することも可能である。このようにすれば、ユーザが意図せずに閉じるボタンＢ１を操作してしまう可能性を低減させることが可能である。このような描画制御を行う場合、携帯端末１０は、持ち手が右手である場合と左手である場合とで閉じるボタンＢ１の表示位置を異ならせてもよい。
【００４８】
図１０は、把持情報に応じた描画制御処理を示すフローチャートである。ここでは、ウィンドウを操作画像の一例として用いている。携帯端末１０の制御部１００は、図１０に示すように、ユーザの持ち手に応じてウィンドウのｘ軸方向の描画位置を調整するとともに、特定領域の位置、すなわち把持位置座標（曲率中心座標）及び操作半径（平均曲率半径）に応じてウィンドウのｙ軸方向の描画位置を調整する。具体的には、制御部１００は、まず、識別情報を参照することで持ち手を判断し（ステップＳｂ１）、持ち手が左手であれば、表示領域の左側（すなわち中央よりも左寄り）にウィンドウを配置するとともに、閉じるボタンをウィンドウの右上部分に配置する（ステップＳｂ２、Ｓｂ３）。一方、制御部１００は、持ち手が右手であれば、表示領域の右側（すなわち中央よりも右寄り）にウィンドウを配置するとともに、閉じるボタンをウィンドウの左上部分に配置する（ステップＳｂ４、Ｓｂ５）。
【００４９】
次に、制御部１００は、ウィンドウのｙ軸方向の描画位置を決定する（ステップＳｂ６）。このとき、制御部１００は、閉じるボタンを特定領域外に配置することが可能であれば、閉じるボタンが特定領域外に配置されるようにウィンドウ全体の描画位置を調整する。そして、制御部１００は、このようにして調整された描画位置にウィンドウが描画されるよう、表示部３００に画面を描画させる（ステップＳｂ７）。
【００５０】
図１１は、このような描画制御処理の結果として表示される操作画像を例示する図である。図１１（ａ）は、ユーザが左手で携帯端末１０の下部を把持している場合の例であり、図１１（ｂ）は、ユーザが右手で携帯端末１０の中央部を把持している場合の例である。なお、これらの図において、ウィンドウＷと閉じるボタンＢは、その表示位置が異なるだけであり、画像としては同一のものである。
【００５１】
なお、閉じるボタンは、一般的にはウィンドウの上部に表示されるが、本発明においては、ユーザが意図せず操作してしまわないようにするために、ウィンドウの下部に表示されてもよい。ただし、この場合には、ウィンドウの下部が特定領域外にあることが望ましい。
【００５２】
［第２実施形態］
本実施形態は、タッチスクリーンが、ユーザの指が接触せずに近接している状態（以下「近接状態」という。）を検知可能な場合の実施の形態である。かかるタッチスクリーンとしては、いわゆる静電容量方式のタッチスクリーンなどがある。なお、ここでいう「近接」は、タッチスクリーン自体の性能などにもよるが、一般的には、数ｍｍ〜１ｃｍ程度である。
【００５３】
本実施形態は、タッチスクリーンが近接状態の指を検知可能であり、携帯端末１０がこれを特定の種別の操作の一種として判定してその判定結果に応じた処理を実行する点が上述した第１実施形態との主たる相違点である。また、本実施形態は、主要なハードウェア構成や動作については、第１実施形態と同様の部分を多く含んでいる。そこで、以下においては、第１実施形態と同様の名称及び符号を用いて、本実施形態に特有の処理が重点的に説明される。本実施形態において、第１実施形態と同一の名称又は符号が用いられるものは、第１実施形態において説明したものと同様のものであることを意味する。
【００５４】
図１２は、本実施形態の描画制御処理を示すフローチャートである。図１２に示す描画制御処理は、第１実施形態において説明した要領で把持情報が記録され、当該把持情報に基づいて操作画像が既に表示されている場合において、ユーザの指が近接状態にあることが検知されたときに実行されるものである。ここにおいて、既に記録されている把持情報の把持位置座標を「Ｃold」とし、その操作半径を「ｒ」とする。
【００５５】
本実施形態の描画制御処理において、はじめに携帯端末１０の制御部１００は、指を近接状態にした操作を特定の種別の操作であると判定し、その指の位置の座標を取得する（ステップＳｃ１）。以下においては、このとき取得される座標を「Ｄ」とする。続いて、制御部１００は、更新前の把持情報を読み出し、把持位置座標Ｃoldのｘ座標と操作半径ｒとを取得する（ステップＳｃ２）。次に、制御部１００は、座標Ｄからの距離がｒであり、かつ、そのｘ座標が把持位置座標Ｃoldのｘ座標と等しい点の座標を算出する（ステップＳｃ３）。なお、制御部１００は、かかる点が複数ある場合には、そのうちの把持位置座標Ｃoldにより近い点を新たな座標として選択する。
【００５６】
制御部１００は、このようにして再算出された座標を新たな把持位置座標として記録し、把持情報を更新する（ステップＳｃ４）。このとき、制御部１００は、時刻情報を合わせて更新する。なお、制御部１００は、把持位置座標のｘ座標と操作半径ｒについては、更新前の値をそのまま用いる。把持位置座標のｘ座標と操作半径ｒは、把持情報の再算出前と等しい値のままである。ゆえに、更新後の把持位置座標（以下これを「Ｃnew」とする。）は、更新前の把持位置座標Ｃoldをｙ軸方向に移動させた座標となり、ｘ軸方向には変化しない。
【００５７】
図１３は、更新前後の把持位置座標を図解して示す図である。制御部１００は、このようにして更新された把持情報に基づき、その後に表示される操作画像の描画位置を決定する。制御部１００は、既に表示されている操作画像の描画位置を新たな把持情報に基づいて移動させてもよいし、既に表示されている操作画像の描画位置を変えることなく、その後に新たに表示される別の操作画像の描画位置を制御してもよい。なお、制御部１００は、この場合においても、第１実施形態と同様に、操作画像の全部又は一部が特定領域内に表示されるように、ｙ軸方向の描画位置を調整する。
【００５８】
［変形例］
本発明は、上述した実施形態に限らず、さまざまな形態での実施が可能である。本発明は、例えば、以下に示す変形例に従った実施も可能である。なお、これらの変形例は、必要に応じて、適宜組み合わせて実施されてもよいものである。
【００５９】
（変形例１）
本発明において、特定の種別の操作は、把持情報の算出のためだけに用いられるものであってもよいが、把持情報の算出とは独立した他の処理に割り当てられており、当該操作があった場合に、当該他の処理と把持情報の算出処理とがともに実行されるようになっていることが望ましい。例えば、本発明は、フリック操作がもともと画面のスクロール処理に割り当てられている場合において、スクロール処理がフリック操作で行われることを利用し、いわばスクロール処理のついでに、そのフリック操作に基づいてユーザの持ち手を判断し、把持情報を算出するものであるとよい。このようにすれば、ユーザ自身はスクロール処理を行っているだけのつもりであっても、実際には持ち手の判断までをも行うことが可能になる。
【００６０】
あるいは、本発明は、例えば、タッチスクリーンが所定の時間以上操作を検知しないとロック状態（操作を受け付けない状態）になる場合において、このロック状態を解除するための操作に特定の種別の操作を用いるようにしてもよい。このようにすれば、ユーザが特定の種別の操作を行った場合に、ロック状態を解除する処理と、把持情報の算出等の持ち手を判断するための処理とをあわせて実行することが可能になる。なお、かかる場合においては、タッチスクリーンがロック状態になるのに合わせて記録済みの把持情報が消去されてもよい。
【００６１】
（変形例２）
本発明において、タッチスクリーンの操作に用いられるのは、必ずしも指である必要はない。例えば、本発明は、指先に専用の器具を取り付けたりする場合においても、上述した実施形態と同様の要領で適用可能である。つまり、本発明における「指」とは、「指ないしこれに準ずるもの」と置き換えてもよいものである。
【００６２】
（変形例３）
本発明は、タッチスクリーンを有し、片手で把持できる程度のサイズのあらゆる表示端末に適用可能である。また、本発明は、表示端末による描画を制御するための制御装置やその制御方法のほか、かかる制御装置又は制御方法を実現するためのプログラムとしても提供され得るものである。かかるプログラムは、光ディスク等の記録媒体に記録した形態で提供されたり、インターネット等のネットワークを介して、コンピュータにダウンロードさせ、これをインストールして利用可能にするなどの形態で提供されたりすることも可能である。
【００６３】
また、本発明に係るプログラムは、特定のアプリケーションの一部として実装されるものであってもよいが、種々のアプリケーションが利用可能なライブラリ形式で提供され、実行されるアプリケーションによらずに持ち手の判断が行えるようになっていると好ましい。
【符号の説明】
【００６４】
１０…携帯端末、１０Ａ…表示領域、１００…制御部、１１０…操作処理部、１１１…判定部、１１２…計算部、１２０…情報管理部、１３０…描画制御部、１４０…描画部、２００…記憶部、３００…表示部、４００…タッチスクリーン部
【技術分野】
【０００１】
本発明は、タッチスクリーンを有する表示端末の制御に関する。
【背景技術】
【０００２】
タッチスクリーン（タッチパネルともいう。）を有し、ユーザが片手で操作できるような表示端末に関して、その操作を容易にするための種々の技術がある。例えば、特許文献１には、所定の距離以上のドラッグによって、操作画面をユーザの指に手繰り寄せられるように表示することが記載されている。また、特許文献２には、ユーザに丸等の線図をタッチパネル上に描かせ、この線図の内部に操作キー群が表示されるようにすることが記載されている。また、このような表示制御とは別に、特許文献３には、タッチパネルに加え、手指の把持位置を検出するためのセンサを備える携帯端末について記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−３３０７号公報
【特許文献２】特開２００８−１１３１４８号公報
【特許文献３】特開２０１０−１５４０９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１及び２に記載された技術は、何をどこに表示させたいのかをユーザが明示的に指示するものであるといえる。また、特許文献３は、ユーザの把持位置を検出するために特別なセンサを設けなければならないものである。
一方、本発明は、ユーザが表示位置を明示的に指示することも、特別なセンサを設けることもせずに、ユーザの持ち方に応じた画像を表示させることを可能にすることを目的とするものである。
【課題を解決するための手段】
【０００５】
本発明の一態様に係る表示端末は、タッチスクリーンが表示領域に重ねて設けられた表示部と、前記タッチスクリーンに対するユーザの操作に応じて処理を実行する操作処理部と、前記ユーザによる当該表示端末の把持態様を表す把持情報の記録を管理する情報管理部と、前記操作処理部により実行された処理に従い、前記タッチスクリーンによる操作を受け付けるための操作画像を含む画面の前記表示領域への描画を制御する描画制御部とを備え、前記操作処理部は、前記操作の種別を判定する判定部と、前記判定部により判定された操作の種別が特定の種別である場合に、当該操作の軌跡に基づいてユーザの持ち手とその把持位置とを表す前記把持情報を算出する計算部とを有し、前記描画制御部は、前記計算部により算出され、又は前記情報管理部により記録された把持情報に従い、前記操作画像の配置を決定する構成を有する。
【０００６】
好ましい態様において、前記判定部は、ドラッグ操作又はフリック操作を前記特定の種別として判定し、前記計算部は、前記軌跡の平均曲率半径とその曲率中心座標とを用いて前記把持情報を算出する。
別の好ましい態様において、前記計算部は、前記平均曲率半径が閾値以下である場合に、その前記操作を当該端末の持ち手による操作であると判断し、前記平均曲率半径が前記閾値より大きい場合に、その前記操作を当該端末の持ち手と反対の手による操作であると判断する。
さらに別の好ましい態様において、前記計算部は、前記平均曲率半径が前記閾値以下である場合において、前記曲率中心座標が前記表示領域に対して右寄りであるときには、当該端末の持ち手が右手であると判断し、前記曲率中心座標が前記表示領域に対して左寄りであるときには、当該端末の持ち手が左手であると判断する。あるいは、前記計算部は、前記平均曲率半径が前記閾値より大きい場合において、前記曲率中心座標が前記表示領域に対して右寄りであるときには、当該端末の持ち手が左手であると判断し、前記曲率中心座標が前記表示領域に対して左寄りであるときには、当該端末の持ち手が右手であると判断してもよい。
さらに別の好ましい態様において、前記操作処理部は、前記特定の種別の操作が行われた場合に、当該操作に割り当てられ、前記計算部による前記把持情報の算出と独立した処理を実行するとともに、前記計算部により前記把持情報を算出する。
さらに別の好ましい態様において、前記タッチスクリーンは、前記ユーザの指が接触せずに近接する近接状態を検出し、前記判定部は、前記近接状態を前記特定の種別の操作であると判定し、前記計算部は、前記把持情報が記録されている場合において、前記判定部により前記近接状態の操作が判定されたとき、当該近接状態における前記指の位置の座標に基づいて当該把持情報を再算出し、前記情報管理部は、前記計算部により再算出された把持情報によって記録を更新する。
さらに別の好ましい態様において、前記曲率中心座標は、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で記述される座標であり、前記計算部は、前記曲率中心座標の前記第２軸の座標及び前記平均曲率半径が再算出前と等しく、かつ、前記指の位置の座標が前記平均曲率半径の円弧に含まれるように前記第１軸の座標を変更することによって前記曲率中心座標を再算出する。
さらに別の好ましい態様において、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系の座標で前記操作画像が定義される場合において、前記描画制御部は、前記画面に含まれる前記操作画像の全部又は一部が、再算出された前記曲率中心座標を中心とし、前記平均曲率半径を半径とする円の内側に表示されるように、前記操作画像の前記第１軸方向の描画位置を決定する。
さらに別の好ましい態様において、前記曲率中心座標は、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で記述される座標であり、前記情報管理部は、所定時間の経過後に、前記第２軸の座標を記録から消去せずに前記第１軸の座標を記録から消去する。
さらに別の好ましい態様において、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で前記操作画像の座標が定義される場合において、前記描画制御部は、前記ユーザの持ち手に応じて前記操作画像の前記第２軸方向の描画位置を異ならせ、前記画面に含まれる前記操作画像の全部又は一部が、前記曲率中心座標を中心とし、前記平均曲率半径を半径とする円の内側に表示されるように、前記操作画像の前記第１軸方向の描画位置を決定する。
【０００７】
なお、本発明は、他の態様でも実現可能である。例えば、本発明は、タッチスクリーンが表示領域に重ねて設けられた表示端末の制御装置であって、前記タッチスクリーンに対するユーザの操作に応じて処理を実行する操作処理部と、前記ユーザによる当該表示端末の把持態様を表す把持情報の記録を管理する情報管理部と、前記操作処理部により実行された処理に従い、前記タッチスクリーンによる操作を受け付けるための操作画像を含む画面の前記表示領域への描画を制御する描画制御部とを備え、前記操作処理部は、前記操作の種別を判定する判定部と、前記判定部により判定された操作の種別が特定の種別である場合に、当該操作の軌跡に基づいてユーザの持ち手とその把持位置とを表す前記把持情報を算出する計算部とを有し、前記描画制御部は、前記計算部により算出され、又は前記情報管理部により記録された把持情報に従い、前記操作画像の配置を決定する構成を有するものであってもよいし、かかる制御装置に対応するプログラムや表示端末制御方法の発明としても把握され得るものである。
【発明の効果】
【０００８】
本発明によれば、ユーザが表示位置を明示的に指示することも、特別なセンサを設けることもせずに、ユーザの持ち方に応じた画像を表示することが可能である。
【図面の簡単な説明】
【０００９】
【図１】携帯端末の主要なハードウェア構成を示すブロック図
【図２】制御部の機能的構成を示す機能ブロック図
【図３】携帯端末の把持態様を例示する図
【図４】ユーザによる携帯端末の操作を例示する図
【図５】持ち手の判断の際に実行する処理を示すフローチャート
【図６】座標や数値を説明するための図
【図７】把持情報を例示する図
【図８】把持情報の内容を図解して示す図
【図９】操作画像の表示例を示す模式図
【図１０】描画制御処理を示すフローチャート
【図１１】描画制御処理の結果として表示される操作画像を例示する図
【図１２】描画制御処理を示すフローチャート
【図１３】更新前後の把持位置座標を図解して示す図
【発明を実施するための形態】
【００１０】
［発明の概要］
本発明は、タッチスクリーンを有する表示端末において、ユーザが表示端末を左右のいずれの手で把持しているかを判断し、端末を把持している手（以下「持ち手」という。）に応じた画面表示を実現するものである。具体的には、本発明は、ユーザの持ち手を判断し、操作によく用いられる描画オブジェクトをその持ち手で操作しやすい位置に表示したり、あるいは、いわゆる「閉じるボタン（アイコン）」のような、ユーザが頻繁に操作せず、うっかり操作してしまうことを避けるべき描画オブジェクトを持ち手の指が触れにくい位置に表示したりすることを可能にするものである。なお、本発明において、ユーザの持ち手による操作は、親指（母指、第一指）で行われることが主に想定されている。
【００１１】
また、本発明において、持ち手の判断は、ユーザによって普通に行われる複数種別の操作のうちの特定の種別の操作に基づいて行われる。例えば、持ち手の判断に用いられる操作は、ドラッグ操作やフリック操作のような、タッチスクリーンを直線状に擦る操作である。このような操作は、特に、持ち手の指で行われると、ユーザ自身はタッチスクリーン上を直線的に擦っているつもりであっても、実際には円弧状になり、右手であれば左側、左手であれば右側にそれぞれ膨らむようになる。なぜならば、指の運動は、指のある関節を回転中心とした回転運動になるからである。
【００１２】
本発明においては、このような直線的な（つもりの）操作を左右の手で行った場合の相違に着目し、持ち手の判断が行われる。そのため、本発明は、ユーザの何気ない操作からでも持ち手の判断を行うことが可能である。したがって、ユーザは、明示的に、殊更に自分の持ち手や操作可能な範囲を教示する操作を行わなくても、自身の持ち手に応じた画面を利用することが可能である。
【００１３】
なお、指先の軌跡は、複数の関節（第一関節と第二関節）を同時に動かしながら行われたりすることで、実際には必ずしも（厳密な意味での）円弧にはならない場合もある。しかし、以下に説明する実施形態においては、指先の軌跡を、円弧であるか、あるいは円弧とみなせる程度に近似しているものとして取り扱う。したがって、ここでいう「円弧状」の曲線とは、円弧ないしそれに近似する曲線のことをいう。
【００１４】
［第１実施形態］
図１は、本発明の一実施形態である携帯端末の主要なハードウェア構成を示すブロック図である。図１に示す携帯端末１０は、タッチスクリーンを有する携帯可能な表示端末であり、例えば、携帯電話機や、携帯型の音楽プレーヤやゲーム機などである。携帯端末１０は、図１に示すように、制御部１００と、記憶部２００と、表示部３００と、タッチスクリーン部４００とを少なくとも備える。また、携帯端末１０は、図１に示す構成のほかに、他の携帯電話機と通信するための手段や、音声を再生する手段などを含み得る。
【００１５】
制御部１００は、携帯端末１０の各部の動作を制御する手段である。制御部１００は、ＣＰＵ（Central Processing Unit）等の演算処理装置やメモリ（主記憶装置）を備え、プログラムを実行することによって表示部３００の画面表示などを制御する。また、制御部１００は、リアルタイムクロックを有し、日時（日付及び時刻）を特定可能である。記憶部２００は、補助記憶装置に相当する記憶手段であり、制御部１００が画像を表示するために用いるデータ等を記憶する。
【００１６】
表示部３００は、画像を表示する手段である。表示部３００は、液晶表示素子や有機ＥＬ（Electroluminescence）表示素子を用いた表示パネルとその駆動手段を備え、制御部１００から供給される画面データに応じた画面を表示領域に表示する。タッチスクリーン部４００は、表示部３００の表示パネルに重ねて設けられたタッチスクリーンを備え、ユーザの接触位置を示す座標信号を制御部１００に供給する。
【００１７】
本実施形態において、表示部３００は、長方形の縦長の表示領域を有するものとする。以下においては、この長方形の表示領域の左右方向（短辺方向）をｘ軸方向、上下方向（長辺方向）をｙ軸方向とした２次元直交座標系を接触位置等の座標の説明に用いる。また、説明の便宜上、この座標系は、表示領域の左下の頂点を原点とし、右方向及び上方向を正方向とする。ただし、表示領域の形状は、縦長の長方形に限定されるわけではない。
【００１８】
図２は、制御部１００の機能的構成を示す機能ブロック図である。制御部１００は、プログラムを実行することによって、図２に示す操作処理部１１０、情報管理部１２０、描画制御部１３０及び描画部１４０に相当する機能を実現する。また、操作処理部１１０は、より詳細には、判定部１１１及び計算部１１２を含む。なお、これらの各部の機能は、複数のプログラムの協働によって実現されてもよい。
【００１９】
操作処理部１１０は、タッチスクリーンに対するユーザの操作に応じて処理を実行する手段である。操作処理部１１０は、タッチスクリーン部４００から供給される座標信号を取得することによってユーザの操作を認識し、それぞれの操作に対応する処理を実行する。操作処理部１１０が実行する処理には、判定部１１１及び計算部１１２による処理のほか、計算部１１２による処理とは無関係の（すなわち当該処理と独立した）処理が含まれる。かかる処理は、例えば、あるアイコンがドラッグされた場合にそのアイコンの表示位置を移動させる処理や、あるアイコンがダブルタップされた場合にそのアイコンに対応するアプリケーションを実行する処理である。
【００２０】
判定部１１１は、ユーザの操作の種別を判定する手段である。判定部１１１は、本実施形態においては、「タップ（操作）」、「ダブルタップ（操作）」、「ドラッグ（操作）」及び「フリック（操作）」の４種類の操作を判別するものとする。ただし、判定部１１１が実際に判定可能な操作の種別は、これより多くても少なくてもよい。
【００２１】
ここにおいて、タップ操作とは、タッチスクリーンを軽く叩くような操作をいい、具体的には、ユーザの指が接触してから離れるまでの時間が所定の時間（Ｔ1）以内の操作である。また、ダブルタップ操作とは、タップ操作を同じ位置で素早く２回続ける操作をいい、具体的には、１回目のタップ操作が終了してから所定の時間（Ｔ2）以内に２回目のタップ操作が行われるものである。ただし、判定部１１１は、２回のタップ操作の接触位置が同一視できない程度に異なる場合には、当該操作をダブルタップ操作とは判定しない。
【００２２】
また、ドラッグ操作及びフリック操作とは、いずれも、ユーザがタッチスクリーンを擦るような操作をいう。ドラッグ操作とフリック操作の相違は、ユーザの指（すなわち接触位置）の移動速度にあり、フリック操作の方が早く、ドラッグ操作の方が遅い。判定部１１１は、接触位置の座標が連続的に変化する操作を認識した場合において、その移動量（ユーザの指が接触してから離れるまでの移動量。すなわち軌跡の長さ）に対する所要時間の比（すなわち速度）が所定の閾値（Ｖ1）以下であればドラッグ操作であり、そうでなければフリック操作であると判定する。また、判定部１１１は、接触位置の軌跡が所定の長さに満たない場合には、ドラッグ操作及びフリック操作のいずれでもない（あるいはタップ操作である）と判定してもよい。
【００２３】
なお、時間Ｔ1及びＴ2並びに閾値Ｖ1は、あらかじめ決められた適当な値であるが、ユーザが設定可能であってもよい。また、判定部１１１が判定可能な種別は、上述した４種類のほかにあってもよい。例えば、携帯端末１０がいわゆるマルチタッチ機能（タッチスクリーン上の複数の位置が同時に接触されたこと検出する機能）に対応している場合であれば、２本の指を近づけたり離したりする「ピンチ（操作）」などが判定可能な種別に含まれてもよい。
【００２４】
また、操作処理部１１０は、接触位置の座標を操作の履歴として一時的に記憶する機能を有する。操作処理部１１０により記憶される座標のデータのことを、以下においては「操作データ」という。操作データは、例えば配列を用いて記憶されるが、他のデータ構造を用いることも可能である。なお、操作データは、計算部１１２が必要とする操作についてのみ記憶されれば十分であるが、他の操作についてもあわせて記憶されてもよい。
【００２５】
計算部１１２は、持ち手が判断可能な操作が行われた場合に、当該操作の軌跡に基づいて、ユーザの持ち手に関する情報である把持情報を算出する手段である。ここにおいて、持ち手が判断可能な操作とは、軌跡が円弧状となる操作であり、ドラッグ操作やフリック操作がこれに該当し得る。計算部１１２は、判定部１１１がこれらの操作を判定した場合、すなわち特定の種別の操作を判定した場合に、当該操作の操作データに基づいて把持情報を算出する。
【００２６】
なお、ドラッグ操作は、いわゆるドラッグ・アンド・ドロップを行う場合のように、特定の位置から特定の位置へと指を移動させる場合にも行われることがあり、このような場合の操作は持ち手の判断に適さないこともある。そのため、ここでいう「特定の種別の操作」、すなわち判定部１１１が持ち手の判断を行う操作は、ドラッグ操作及びフリック操作の２種類ではなく、フリック操作のみであってもよい。
【００２７】
情報管理部１２０は、操作処理部１１０（より詳細には計算部１１２）により算出された把持情報の記録を管理する手段である。情報管理部１２０は、算出された把持情報に時刻情報（例えば、持ち手を判断した時刻や、当該判断に用いた操作を検出した時刻）を付加してこれを記録するとともに、必要に応じて消去する。情報管理部１２０は、把持情報を制御部１００のメモリに記憶してもよいし、記憶部２００に記憶してもよい。なお、以下において、「把持情報」という名称は、把持情報とこれに付加された時刻情報の総称としても用いられる。
【００２８】
描画制御部１３０は、操作処理部１１０により実行された処理に従い、表示部３００に表示する画面の描画を制御する手段である。表示部３００に表示される画面には、操作画像が含まれる。ここにおいて、操作画像とは、ユーザのタッチスクリーンによる操作を受け付けるための描画オブジェクトをいい、アイコンや閉じるボタンがこれに該当する。また、ウィンドウも操作画像の一例に相当し、ウィンドウの内部にあるボタンやスクロールバーなども操作画像の一例に相当する。描画制御部１３０は、計算部１１２により算出され、又は情報管理部１２０により記録された把持情報に従い、操作画像の配置を決定する。描画制御部１３０は、ユーザの持ち手に応じた配置になるように操作画像の位置を決定するとともに、操作画像の位置に応じて、操作画像以外の他の画像の位置を調整する。
描画部１４０は、描画制御部１３０により決定された配置に従い、表示部３００に実際に画面を表示させる手段である。
【００２９】
携帯端末１０の構成は、以上のとおりである。この構成のもと、携帯端末１０は、データ通信や音楽の再生などといった処理を実行するとともに、ユーザの持ち手を判断し、その持ち手に応じた画面を表示する。携帯端末１０は、上述したように、特定の種別の操作が行われたことを契機として持ち手の判断を行う。したがって、携帯端末１０は、特定の種別の操作が行われるまでは、あらかじめ決められた表示態様（例えば、持ち手の左右に依存しない表示態様）で操作画像等を表示する。なお、携帯端末１０は、ユーザの過去の持ち手を記憶しておき、直前に持ち手の判断を行ったときの判断結果に応じた表示態様で操作画像等を表示してもよい。
【００３０】
図３は、携帯端末１０の把持態様を例示する図である。図３（ａ）は、携帯端末１０を左手で把持する態様を示す一方、図３（ｂ）は、携帯端末１０を右手で把持する態様を示す。なお、同図において、符号１０Ａは、タッチスクリーンが重ねられている表示領域である。このような把持態様において、ユーザが親指の付け根（第二関節）を回転中心として親指を動かすと、ドラッグ操作又はフリック操作が実現される。ここにおいて、回転中心は、それぞれＰ1、Ｐ2である。このとき、親指の先の接触位置の軌跡は、それぞれＬ1、Ｌ2のような曲線になる。Ｌ1は、Ｐ1を中心とした円の弧に近似可能であり、Ｌ2は、Ｐ2を中心とした円の弧に近似可能である。
【００３１】
以上より、Ｌ1、Ｌ2の平均曲率を算出することができれば、その平均曲率半径も特定可能であり、その曲率中心座標に相当するＰ1、Ｐ2も特定可能であるといえる。そうすると、Ｐ1、Ｐ2が表示領域１０Ａに対して右寄りにあるか左寄りにあるかで、ユーザが把持しながら操作している側の手、すなわち持ち手を判断することが可能になる。そこで、携帯端末１０は、ドラッグ操作又はフリック操作の軌跡から平均曲率半径を算出することで、持ち手の判断を行う。
【００３２】
ここで、図４は、ユーザが持ち手と反対の手（同図では左手）で携帯端末１０を操作する場合を例示する図である。図４に示すように、ユーザが持ち手と反対の手でドラッグ操作又はフリック操作を行う場合であっても、その軌跡（Ｌ0）が円弧状になることがある。このような操作を持ち手による操作であるとみなして持ち手を判断すると、誤りが生じてしまい、ユーザの実際の使用に反した操作画像が表示されるおそれがある。
【００３３】
ただし、持ち手による操作と持ち手の反対の手による操作とでは、回転移動の態様に相違がある。持ち手による操作は、持ち手には「端末を把持する」という制約があるため、必然的に親指の運動のみで行われる。一方、持ち手の反対の手による操作は、このような制約がないため、手首の関節（橈骨手根関節）を回転中心（Ｐ0）とした運動によっても行われるし、肘等の関節も複合的に用いられる可能性がある。それゆえ、持ち手による操作と持ち手の反対の手による操作とには、回転中心に相当する関節の位置と、回転運動の半径とに相違が生じるといえる。本実施形態においては、この相違点を利用し、平均曲率半径が比較的小さい操作を持ち手の操作であるとみなす一方、平均曲率半径が比較的大きい操作については、持ち手の反対の手による操作であるとみなし、持ち手が誤って判断されないようにしている。
【００３４】
図５は、制御部１００が持ち手の判断の際に実行する処理を示すフローチャートである。また、図６は、以下の説明において用いる座標や数値を説明するための図である。図６において、Ｗは、表示領域１０Ａの幅（ｘ軸方向の長さ）であるとする。また、ｒは、平均曲率半径であり、Ｃは、その曲率中心座標である。座標Ｃは、ｃxがｘ座標であり、ｃyがｙ座標である。
【００３５】
図５に示す処理において、制御部１００は、まず、特定の種別の操作が行われたか否かを判別する（ステップＳａ１）。制御部１００は、特定の種別の操作以外の操作が行われた場合には、持ち手の判断を行わない。すなわち、制御部１００は、把持情報の算出や記録を行わない。一方、制御部１００は、特定の種別の操作が行われた場合には、操作データを取得し（ステップＳａ２）、この操作データにより表される軌跡が円弧に近似可能であるか否かを判断する（ステップＳａ３）。
【００３６】
ステップＳａ３の判断は、例えば、１回の操作について接触位置が３点以上あったか否かを判断するものである。なぜならば、接触位置が２点以下では、曲線を求めることができないからである。また、制御部１００は、接触位置が３点以上あっても、その軌跡がほぼ直線であったり、あるいは蛇行したりしている場合においても、円弧に近似できないと判断することができる。制御部１００は、ユーザの操作の軌跡が円弧に近似できないと判断した場合には、持ち手の判断を行わない。
【００３７】
ユーザの操作の軌跡が円弧に近似可能である場合、制御部１００は、平均曲率半径ｒと曲率中心座標Ｃとをそれぞれ算出する（ステップＳａ４）。続いて、制御部１００は、平均曲率半径ｒと所定の閾値Ｒtとを比較し、その大小を判断する（ステップＳａ５）。ここにおいて、閾値Ｒtは、ユーザの操作が持ち手による操作か否かを判断するための閾値であり、あらかじめ統計的に求められているものである。閾値Ｒtは、一般的なユーザの親指の先から付け根（第二関節）までの長さより大きく、かつ、人差し指（示指、第二指）の先から手首の関節までの長さより小さくなるよう、適当な値が設定されている。
【００３８】
制御部１００は、平均曲率半径ｒの判断に次いで、曲率中心座標Ｃのｘ座標ｃxがｗ／２より小さいか否かを判断することにより、曲率中心座標Ｃが表示領域１０Ａに対して右寄りか左寄りかを判断する（ステップＳａ６、Ｓａ７）。制御部１００は、平均曲率半径ｒが閾値Ｒt以下である場合において、ｘ座標ｃxがｗ／２より小さい（すなわち左寄りである）ときには、持ち手が左手であると判定し（ステップＳａ８）、ｘ座標ｃxがｗ／２以上である（すなわち右寄りである）ときには、持ち手が右手であると判定する（ステップＳａ９）。一方、制御部１００は、平均曲率半径ｒが閾値Ｒtより大きい場合において、ｘ座標ｃxがｗ／２より小さい（すなわち左寄りである）ときには、持ち手が右手であると判定し（ステップＳａ１０）、ｘ座標ｃxがｗ／２以上である（すなわち右寄りである）ときには、持ち手が左手であると判定する（ステップＳａ１１）。すなわち、制御部１００は、平均曲率半径ｒが閾値Ｒt以下であるか否かによって、持ち手の判定結果を逆転させている。
【００３９】
制御部１００は、持ち手の操作によって持ち手を判定した場合、すなわちステップＳａ８又はＳａ９において判定を行った場合には、曲率中心座標Ｃを把持位置座標とし、平均曲率半径ｒを操作半径として把持情報を記録する（ステップＳａ１２）。ステップＳａ１２の処理は、把持情報が既に記録されている状態で行われる場合には、把持情報の更新に相当する。また、ステップＳａ１２において、制御部１００は、あわせて時刻情報を記録する。
【００４０】
なお、制御部１００は、持ち手と反対の手の操作によって持ち手を（いわば消去法的に）判定した場合、すなわちステップＳａ１０又はＳａ１１において判定を行った場合には、把持位置座標、操作半径及び時刻情報の記録を行わない。なぜならば、これらのステップによって持ち手を判定した場合には、実際の持ち手がどのような位置にあるかまでは明らかだとはいえないからである。
【００４１】
その後、制御部１００は、持ち手を識別するための識別情報を記録する（ステップＳａ１３）。ステップＳａ１３の処理も、識別情報が既に記録されている状態で行われる場合には、識別情報の更新に相当する。なお、識別情報は、ここでは説明の便宜上「Left（左）」又は「Right（右）」という文字列で表現されるが、実際には「１」又は「０」のようなフラグデータであってもよい。また、識別情報は、これらの２種類のデータに加え、持ち手が左右のいずれであるか不明な場合を含んだ３種類のデータとすることも可能である。
【００４２】
図７は、把持情報を例示する図である。制御部１００は、図５に示した処理を実行することにより、「識別情報」、「把持位置座標」、「操作半径」及び「時刻情報」からなる把持情報を記録することが可能である。なお、識別情報及び時刻情報は、把持情報に必須の情報ではない。例えば、識別情報は、把持位置座標から計算により求めることが可能であるため、あえて記録しておかなくてもよい。しかし、識別情報を記録しておけば、把持位置座標から計算によって持ち手をその都度求める必要がなくなる。
【００４３】
なお、把持情報のうち、特に把持位置座標のｘ座標（ｃx）については、持ち手が変わらない限りは、ほとんど変わらない数値であるといえる（携帯端末１０を左右で支える場合）。そこで、制御部１００は、持ち手のそれぞれについてｘ座標をいったん記録したら、以降は同じ数値を持ち手に応じて用いるようにし、再度の記録（すなわち更新）を省略してもよい。
【００４４】
ところで、ユーザは、携帯端末１０をいつまでも同じ態様で把持し続けるとは限らない。それゆえ、把持情報は、時間とともに信頼性が失われていく情報であるといえる。そこで、制御部１００は、記録済みの把持情報を所定時間の経過後に消去するようにしてもよい。ただし、この場合においても、把持位置座標のｘ座標については、制御部１００が消去しないようにしてもよい。
【００４５】
図８は、把持情報の内容を図解して示す図である。図８は、持ち手が左手であった場合の例である。把持位置座標Ｃと操作半径ｒにより、表示領域１０Ａのうちユーザにとって操作がしやすい領域を特定することが可能である。図８において、表示領域１０Ａのうち、把持位置座標Ｃを中心とし、中心角が９０°の扇形と重なる領域Ａ１は、領域Ａ２、Ａ３に比べ、ユーザが操作しやすい領域である。ユーザは、把持位置座標Ｃから操作半径ｒ以下の範囲の領域（すなわち領域Ａ１）であれば、指を必要以上に伸ばしたり、携帯端末１０の持ち方を変えたりしなくても、当該領域に触れることが容易である。そこで、携帯端末１０は、操作画像（特に、ユーザがよく操作に用いるもの）が領域Ａ１に描画されるように画面表示を制御する。以下においては、図８にハッチングで示す領域Ａ１のことを「特定領域」という。なお、特定領域は、図８に示す扇形に代えて把持位置座標Ｃを中心とする操作半径ｒの円を用い、表示領域１０Ａのうちのこの円と重なる領域であってもよい。
【００４６】
図９は、図８に示した把持情報が用いられる場合における操作画像の表示例を示す模式図である。ここにおいて、操作画像Ｗ１、Ｗ２、Ｗ３は、それぞれウィンドウを表している。なお、ウィンドウ内には、ボタン等の他の操作画像がさらにあってもよい。例えば、携帯端末１０は、図９（ａ）に示すように、操作画像Ｗ１の全体が特定領域内に表示されるように、操作画像Ｗ１の配置やサイズを調整することができる。また、携帯端末１０は、図９（ｂ）に示すように、操作画像Ｗ２の一部が特定領域内に表示されるようにしてもよい。つまり、携帯端末１０は、操作画像の全部又は一部が特定領域内に表示されるようにすればよい。
【００４７】
また、携帯端末１０は、操作画像の一部を特定領域外に表示する場合においては、図９（ｃ）に示すように、閉じるボタンＢ１を特定領域外に表示することも可能である。このようにすれば、ユーザが意図せずに閉じるボタンＢ１を操作してしまう可能性を低減させることが可能である。このような描画制御を行う場合、携帯端末１０は、持ち手が右手である場合と左手である場合とで閉じるボタンＢ１の表示位置を異ならせてもよい。
【００４８】
図１０は、把持情報に応じた描画制御処理を示すフローチャートである。ここでは、ウィンドウを操作画像の一例として用いている。携帯端末１０の制御部１００は、図１０に示すように、ユーザの持ち手に応じてウィンドウのｘ軸方向の描画位置を調整するとともに、特定領域の位置、すなわち把持位置座標（曲率中心座標）及び操作半径（平均曲率半径）に応じてウィンドウのｙ軸方向の描画位置を調整する。具体的には、制御部１００は、まず、識別情報を参照することで持ち手を判断し（ステップＳｂ１）、持ち手が左手であれば、表示領域の左側（すなわち中央よりも左寄り）にウィンドウを配置するとともに、閉じるボタンをウィンドウの右上部分に配置する（ステップＳｂ２、Ｓｂ３）。一方、制御部１００は、持ち手が右手であれば、表示領域の右側（すなわち中央よりも右寄り）にウィンドウを配置するとともに、閉じるボタンをウィンドウの左上部分に配置する（ステップＳｂ４、Ｓｂ５）。
【００４９】
次に、制御部１００は、ウィンドウのｙ軸方向の描画位置を決定する（ステップＳｂ６）。このとき、制御部１００は、閉じるボタンを特定領域外に配置することが可能であれば、閉じるボタンが特定領域外に配置されるようにウィンドウ全体の描画位置を調整する。そして、制御部１００は、このようにして調整された描画位置にウィンドウが描画されるよう、表示部３００に画面を描画させる（ステップＳｂ７）。
【００５０】
図１１は、このような描画制御処理の結果として表示される操作画像を例示する図である。図１１（ａ）は、ユーザが左手で携帯端末１０の下部を把持している場合の例であり、図１１（ｂ）は、ユーザが右手で携帯端末１０の中央部を把持している場合の例である。なお、これらの図において、ウィンドウＷと閉じるボタンＢは、その表示位置が異なるだけであり、画像としては同一のものである。
【００５１】
なお、閉じるボタンは、一般的にはウィンドウの上部に表示されるが、本発明においては、ユーザが意図せず操作してしまわないようにするために、ウィンドウの下部に表示されてもよい。ただし、この場合には、ウィンドウの下部が特定領域外にあることが望ましい。
【００５２】
［第２実施形態］
本実施形態は、タッチスクリーンが、ユーザの指が接触せずに近接している状態（以下「近接状態」という。）を検知可能な場合の実施の形態である。かかるタッチスクリーンとしては、いわゆる静電容量方式のタッチスクリーンなどがある。なお、ここでいう「近接」は、タッチスクリーン自体の性能などにもよるが、一般的には、数ｍｍ〜１ｃｍ程度である。
【００５３】
本実施形態は、タッチスクリーンが近接状態の指を検知可能であり、携帯端末１０がこれを特定の種別の操作の一種として判定してその判定結果に応じた処理を実行する点が上述した第１実施形態との主たる相違点である。また、本実施形態は、主要なハードウェア構成や動作については、第１実施形態と同様の部分を多く含んでいる。そこで、以下においては、第１実施形態と同様の名称及び符号を用いて、本実施形態に特有の処理が重点的に説明される。本実施形態において、第１実施形態と同一の名称又は符号が用いられるものは、第１実施形態において説明したものと同様のものであることを意味する。
【００５４】
図１２は、本実施形態の描画制御処理を示すフローチャートである。図１２に示す描画制御処理は、第１実施形態において説明した要領で把持情報が記録され、当該把持情報に基づいて操作画像が既に表示されている場合において、ユーザの指が近接状態にあることが検知されたときに実行されるものである。ここにおいて、既に記録されている把持情報の把持位置座標を「Ｃold」とし、その操作半径を「ｒ」とする。
【００５５】
本実施形態の描画制御処理において、はじめに携帯端末１０の制御部１００は、指を近接状態にした操作を特定の種別の操作であると判定し、その指の位置の座標を取得する（ステップＳｃ１）。以下においては、このとき取得される座標を「Ｄ」とする。続いて、制御部１００は、更新前の把持情報を読み出し、把持位置座標Ｃoldのｘ座標と操作半径ｒとを取得する（ステップＳｃ２）。次に、制御部１００は、座標Ｄからの距離がｒであり、かつ、そのｘ座標が把持位置座標Ｃoldのｘ座標と等しい点の座標を算出する（ステップＳｃ３）。なお、制御部１００は、かかる点が複数ある場合には、そのうちの把持位置座標Ｃoldにより近い点を新たな座標として選択する。
【００５６】
制御部１００は、このようにして再算出された座標を新たな把持位置座標として記録し、把持情報を更新する（ステップＳｃ４）。このとき、制御部１００は、時刻情報を合わせて更新する。なお、制御部１００は、把持位置座標のｘ座標と操作半径ｒについては、更新前の値をそのまま用いる。把持位置座標のｘ座標と操作半径ｒは、把持情報の再算出前と等しい値のままである。ゆえに、更新後の把持位置座標（以下これを「Ｃnew」とする。）は、更新前の把持位置座標Ｃoldをｙ軸方向に移動させた座標となり、ｘ軸方向には変化しない。
【００５７】
図１３は、更新前後の把持位置座標を図解して示す図である。制御部１００は、このようにして更新された把持情報に基づき、その後に表示される操作画像の描画位置を決定する。制御部１００は、既に表示されている操作画像の描画位置を新たな把持情報に基づいて移動させてもよいし、既に表示されている操作画像の描画位置を変えることなく、その後に新たに表示される別の操作画像の描画位置を制御してもよい。なお、制御部１００は、この場合においても、第１実施形態と同様に、操作画像の全部又は一部が特定領域内に表示されるように、ｙ軸方向の描画位置を調整する。
【００５８】
［変形例］
本発明は、上述した実施形態に限らず、さまざまな形態での実施が可能である。本発明は、例えば、以下に示す変形例に従った実施も可能である。なお、これらの変形例は、必要に応じて、適宜組み合わせて実施されてもよいものである。
【００５９】
（変形例１）
本発明において、特定の種別の操作は、把持情報の算出のためだけに用いられるものであってもよいが、把持情報の算出とは独立した他の処理に割り当てられており、当該操作があった場合に、当該他の処理と把持情報の算出処理とがともに実行されるようになっていることが望ましい。例えば、本発明は、フリック操作がもともと画面のスクロール処理に割り当てられている場合において、スクロール処理がフリック操作で行われることを利用し、いわばスクロール処理のついでに、そのフリック操作に基づいてユーザの持ち手を判断し、把持情報を算出するものであるとよい。このようにすれば、ユーザ自身はスクロール処理を行っているだけのつもりであっても、実際には持ち手の判断までをも行うことが可能になる。
【００６０】
あるいは、本発明は、例えば、タッチスクリーンが所定の時間以上操作を検知しないとロック状態（操作を受け付けない状態）になる場合において、このロック状態を解除するための操作に特定の種別の操作を用いるようにしてもよい。このようにすれば、ユーザが特定の種別の操作を行った場合に、ロック状態を解除する処理と、把持情報の算出等の持ち手を判断するための処理とをあわせて実行することが可能になる。なお、かかる場合においては、タッチスクリーンがロック状態になるのに合わせて記録済みの把持情報が消去されてもよい。
【００６１】
（変形例２）
本発明において、タッチスクリーンの操作に用いられるのは、必ずしも指である必要はない。例えば、本発明は、指先に専用の器具を取り付けたりする場合においても、上述した実施形態と同様の要領で適用可能である。つまり、本発明における「指」とは、「指ないしこれに準ずるもの」と置き換えてもよいものである。
【００６２】
（変形例３）
本発明は、タッチスクリーンを有し、片手で把持できる程度のサイズのあらゆる表示端末に適用可能である。また、本発明は、表示端末による描画を制御するための制御装置やその制御方法のほか、かかる制御装置又は制御方法を実現するためのプログラムとしても提供され得るものである。かかるプログラムは、光ディスク等の記録媒体に記録した形態で提供されたり、インターネット等のネットワークを介して、コンピュータにダウンロードさせ、これをインストールして利用可能にするなどの形態で提供されたりすることも可能である。
【００６３】
また、本発明に係るプログラムは、特定のアプリケーションの一部として実装されるものであってもよいが、種々のアプリケーションが利用可能なライブラリ形式で提供され、実行されるアプリケーションによらずに持ち手の判断が行えるようになっていると好ましい。
【符号の説明】
【００６４】
１０…携帯端末、１０Ａ…表示領域、１００…制御部、１１０…操作処理部、１１１…判定部、１１２…計算部、１２０…情報管理部、１３０…描画制御部、１４０…描画部、２００…記憶部、３００…表示部、４００…タッチスクリーン部
【特許請求の範囲】
【請求項１】
タッチスクリーンが表示領域に重ねて設けられた表示部と、
前記タッチスクリーンに対するユーザの操作に応じて処理を実行する操作処理部と、
前記ユーザによる当該表示端末の把持態様を表す把持情報の記録を管理する情報管理部と、
前記操作処理部により実行された処理に従い、前記タッチスクリーンによる操作を受け付けるための操作画像を含む画面の前記表示領域への描画を制御する描画制御部とを備え、
前記操作処理部は、
前記操作の種別を判定する判定部と、
前記判定部により判定された操作の種別が特定の種別である場合に、当該操作の軌跡に基づいてユーザの持ち手とその把持位置とを表す前記把持情報を算出する計算部とを有し、
前記描画制御部は、
前記計算部により算出され、又は前記情報管理部により記録された把持情報に従い、前記操作画像の配置を決定する
ことを特徴とする表示端末。
【請求項２】
前記判定部は、
ドラッグ操作又はフリック操作を前記特定の種別として判定し、
前記計算部は、
前記軌跡の平均曲率半径とその曲率中心座標とを用いて前記把持情報を算出する
ことを特徴とする請求項１に記載の表示端末。
【請求項３】
前記計算部は、
前記平均曲率半径が閾値以下である場合に、その前記操作を当該端末の持ち手による操作であると判断し、前記平均曲率半径が前記閾値より大きい場合に、その前記操作を当該端末の持ち手と反対の手による操作であると判断する
ことを特徴とする請求項２に記載の表示端末。
【請求項４】
前記計算部は、
前記平均曲率半径が前記閾値以下である場合において、前記曲率中心座標が前記表示領域に対して右寄りであるときには、当該端末の持ち手が右手であると判断し、前記曲率中心座標が前記表示領域に対して左寄りであるときには、当該端末の持ち手が左手であると判断する
ことを特徴とする請求項３に記載の表示端末。
【請求項５】
前記計算部は、
前記平均曲率半径が前記閾値より大きい場合において、前記曲率中心座標が前記表示領域に対して右寄りであるときには、当該端末の持ち手が左手であると判断し、前記曲率中心座標が前記表示領域に対して左寄りであるときには、当該端末の持ち手が右手であると判断する
ことを特徴とする請求項３に記載の表示端末。
【請求項６】
前記操作処理部は、
前記特定の種別の操作が行われた場合に、当該操作に割り当てられ、前記計算部による前記把持情報の算出と独立した処理を実行するとともに、前記計算部により前記把持情報を算出する
ことを特徴とする請求項１ないし５のいずれかに記載の表示端末。
【請求項７】
前記タッチスクリーンは、前記ユーザの指が接触せずに近接する近接状態を検出し、
前記判定部は、
前記近接状態を前記特定の種別の操作であると判定し、
前記計算部は、
前記把持情報が記録されている場合において、前記判定部により前記近接状態の操作が判定されたとき、当該近接状態における前記指の位置の座標に基づいて当該把持情報を再算出し、
前記情報管理部は、
前記計算部により再算出された把持情報によって記録を更新する
ことを特徴とする請求項１ないし６のいずれかに記載の表示端末。
【請求項８】
前記曲率中心座標は、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で記述される座標であり、
前記計算部は、
前記曲率中心座標の前記第２軸の座標及び前記平均曲率半径が再算出前と等しく、かつ、前記指の位置の座標が前記平均曲率半径の円弧に含まれるように前記第１軸の座標を変更することによって前記曲率中心座標を再算出する
ことを特徴とする請求項７に記載の表示端末。
【請求項９】
前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系の座標で前記操作画像が定義される場合において、
前記描画制御部は、
前記画面に含まれる前記操作画像の全部又は一部が、再算出された前記曲率中心座標を中心とし、前記平均曲率半径を半径とする円の内側に表示されるように、前記操作画像の前記第１軸方向の描画位置を決定する
ことを特徴とする請求項７又は８に記載の表示端末。
【請求項１０】
前記曲率中心座標は、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で記述される座標であり、
前記情報管理部は、
所定時間の経過後に、前記第２軸の座標を記録から消去せずに前記第１軸の座標を記録から消去する
ことを特徴とする請求項２ないし６のいずれかに記載の表示端末。
【請求項１１】
前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で前記操作画像の座標が定義される場合において、
前記描画制御部は、
前記ユーザの持ち手に応じて前記操作画像の前記第２軸方向の描画位置を異ならせ、
前記画面に含まれる前記操作画像の全部又は一部が、前記曲率中心座標を中心とし、前記平均曲率半径を半径とする円の内側に表示されるように、前記操作画像の前記第１軸方向の描画位置を決定する
ことを特徴とする請求項２ないし６のいずれかに記載の表示端末。
【請求項１】
タッチスクリーンが表示領域に重ねて設けられた表示部と、
前記タッチスクリーンに対するユーザの操作に応じて処理を実行する操作処理部と、
前記ユーザによる当該表示端末の把持態様を表す把持情報の記録を管理する情報管理部と、
前記操作処理部により実行された処理に従い、前記タッチスクリーンによる操作を受け付けるための操作画像を含む画面の前記表示領域への描画を制御する描画制御部とを備え、
前記操作処理部は、
前記操作の種別を判定する判定部と、
前記判定部により判定された操作の種別が特定の種別である場合に、当該操作の軌跡に基づいてユーザの持ち手とその把持位置とを表す前記把持情報を算出する計算部とを有し、
前記描画制御部は、
前記計算部により算出され、又は前記情報管理部により記録された把持情報に従い、前記操作画像の配置を決定する
ことを特徴とする表示端末。
【請求項２】
前記判定部は、
ドラッグ操作又はフリック操作を前記特定の種別として判定し、
前記計算部は、
前記軌跡の平均曲率半径とその曲率中心座標とを用いて前記把持情報を算出する
ことを特徴とする請求項１に記載の表示端末。
【請求項３】
前記計算部は、
前記平均曲率半径が閾値以下である場合に、その前記操作を当該端末の持ち手による操作であると判断し、前記平均曲率半径が前記閾値より大きい場合に、その前記操作を当該端末の持ち手と反対の手による操作であると判断する
ことを特徴とする請求項２に記載の表示端末。
【請求項４】
前記計算部は、
前記平均曲率半径が前記閾値以下である場合において、前記曲率中心座標が前記表示領域に対して右寄りであるときには、当該端末の持ち手が右手であると判断し、前記曲率中心座標が前記表示領域に対して左寄りであるときには、当該端末の持ち手が左手であると判断する
ことを特徴とする請求項３に記載の表示端末。
【請求項５】
前記計算部は、
前記平均曲率半径が前記閾値より大きい場合において、前記曲率中心座標が前記表示領域に対して右寄りであるときには、当該端末の持ち手が左手であると判断し、前記曲率中心座標が前記表示領域に対して左寄りであるときには、当該端末の持ち手が右手であると判断する
ことを特徴とする請求項３に記載の表示端末。
【請求項６】
前記操作処理部は、
前記特定の種別の操作が行われた場合に、当該操作に割り当てられ、前記計算部による前記把持情報の算出と独立した処理を実行するとともに、前記計算部により前記把持情報を算出する
ことを特徴とする請求項１ないし５のいずれかに記載の表示端末。
【請求項７】
前記タッチスクリーンは、前記ユーザの指が接触せずに近接する近接状態を検出し、
前記判定部は、
前記近接状態を前記特定の種別の操作であると判定し、
前記計算部は、
前記把持情報が記録されている場合において、前記判定部により前記近接状態の操作が判定されたとき、当該近接状態における前記指の位置の座標に基づいて当該把持情報を再算出し、
前記情報管理部は、
前記計算部により再算出された把持情報によって記録を更新する
ことを特徴とする請求項１ないし６のいずれかに記載の表示端末。
【請求項８】
前記曲率中心座標は、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で記述される座標であり、
前記計算部は、
前記曲率中心座標の前記第２軸の座標及び前記平均曲率半径が再算出前と等しく、かつ、前記指の位置の座標が前記平均曲率半径の円弧に含まれるように前記第１軸の座標を変更することによって前記曲率中心座標を再算出する
ことを特徴とする請求項７に記載の表示端末。
【請求項９】
前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系の座標で前記操作画像が定義される場合において、
前記描画制御部は、
前記画面に含まれる前記操作画像の全部又は一部が、再算出された前記曲率中心座標を中心とし、前記平均曲率半径を半径とする円の内側に表示されるように、前記操作画像の前記第１軸方向の描画位置を決定する
ことを特徴とする請求項７又は８に記載の表示端末。
【請求項１０】
前記曲率中心座標は、前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で記述される座標であり、
前記情報管理部は、
所定時間の経過後に、前記第２軸の座標を記録から消去せずに前記第１軸の座標を記録から消去する
ことを特徴とする請求項２ないし６のいずれかに記載の表示端末。
【請求項１１】
前記ユーザが当該表示端末を把持したときの上下方向を第１軸、左右方向を第２軸とする直交座標系で前記操作画像の座標が定義される場合において、
前記描画制御部は、
前記ユーザの持ち手に応じて前記操作画像の前記第２軸方向の描画位置を異ならせ、
前記画面に含まれる前記操作画像の全部又は一部が、前記曲率中心座標を中心とし、前記平均曲率半径を半径とする円の内側に表示されるように、前記操作画像の前記第１軸方向の描画位置を決定する
ことを特徴とする請求項２ないし６のいずれかに記載の表示端末。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２０１２−１０８６７４（Ｐ２０１２−１０８６７４Ａ）
【公開日】平成２４年６月７日（２０１２．６．７）
【国際特許分類】
【出願番号】特願２０１０−２５６２８０（Ｐ２０１０−２５６２８０）
【出願日】平成２２年１１月１６日（２０１０．１１．１６）
【出願人】（３９２０２６６９３）株式会社エヌ・ティ・ティ・ドコモ (5,876)
【Ｆターム（参考）】
【公開日】平成２４年６月７日（２０１２．６．７）
【国際特許分類】
【出願日】平成２２年１１月１６日（２０１０．１１．１６）
【出願人】（３９２０２６６９３）株式会社エヌ・ティ・ティ・ドコモ (5,876)
【Ｆターム（参考）】
[ Back to top ]