文書処理装置及びプログラム
【課題】表示部のサイズによらず、文書全体のレイアウトを維持しながら、レイアウトされた文書要素の各々を拡大表示する。
【解決手段】複数の文書要素を含む文書情報を、処理対象文書として受け入れ、当該受け入れた処理対象文書から、文書要素の各々を検出する。そして当該検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成し、当該文書要素が処理対象文書のうちに占める範囲の中で、対応する文書要素の要素画像を表示するよう制御する。
【解決手段】複数の文書要素を含む文書情報を、処理対象文書として受け入れ、当該受け入れた処理対象文書から、文書要素の各々を検出する。そして当該検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成し、当該文書要素が処理対象文書のうちに占める範囲の中で、対応する文書要素の要素画像を表示するよう制御する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、文書処理装置及びプログラムに関する。
【背景技術】
【０００２】
２画面を有するユーザ端末において、表示部２−１には、コンテンツの作成者が意図した状態で、コンテンツが表示される。この表示されているコンテンツは、複数のブロック毎のコンテンツにより構成されており、そのブロック毎に拡大の処理が行えるようになっている。拡大が指示されたブロックのコンテンツは、表示部２−２に表示される。表示部２−２に表示されるコンテンツは、拡大されたものであるが、その拡大には、規則が定められており、例えば、画像などは、上下左右の比率が変化しないで拡大表示されるように処理される。本発明は、電子書籍を扱う装置に適用できる、という技術が特許文献１に開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１１８４７７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
表示部のサイズによらず、文書全体のレイアウトを維持しながら、レイアウトされた各文書要素の内容を拡大表示できる技術が望まれている。
【課題を解決するための手段】
【０００５】
請求項１に記載の発明は，文書処理装置であって、複数の文書要素を含む文書情報を、処理対象文書として受け入れる手段と、前記受け入れた処理対象文書から、前記文書要素の各々を検出する手段と、前記検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成する手段と、当該文書要素が前記処理対象文書のうちに占める範囲の中で、対応する文書要素の要素画像を表示するよう制御する表示制御手段と、を含むものである。
【０００６】
請求項２記載の発明は、請求項１記載の文書処理装置であって、前記表示制御手段は、前記各文書要素が前記処理対象文書のうちに占める範囲の中で、それぞれ対応する文書要素の要素画像の一部を切り出して表示し、当該切り出し範囲を指定された方向に、指定された速度で移動させて表示するよう制御することとしたものである。
【０００７】
請求項３記載の発明は、プログラムであって、コンピュータを、複数の文書要素を含む文書情報を、処理対象文書として受け入れる手段と、前記受け入れた処理対象文書から、前記文書要素の各々を検出する手段と、前記検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成する手段と、当該文書要素が前記処理対象文書のうちに占める範囲の中で、対応する文書要素の要素画像を表示するよう制御する表示制御手段と、として機能させることとしたものである。
【発明の効果】
【０００８】
請求項１，３記載の発明によると、文書全体のレイアウトを維持しながら、レイアウトされた各文書要素の内容を拡大表示できる。
【０００９】
請求項２記載の発明によると、拡大表示した文書要素の各々を、文書要素の配置されていた領域内でスクロール表示させることができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施の形態に係る文書処理装置の構成例を表すブロック図である。
【図２】本発明の実施の形態に係る文書処理装置における処理対象文書の画像の例を表す説明図である。
【図３】本発明の実施の形態に係る文書処理装置の一例に係る機能ブロック図である。
【図４】本発明の実施の形態に係る文書処理装置による拡大の処理例を表す説明図である。
【図５】本発明の実施の形態に係る文書処理装置の処理例を表す説明図である。
【図６】本発明の実施の形態に係る文書処理装置において処理される処理対象文書の一具体例を表す説明図である。
【図７】本発明の実施の形態に係る文書処理装置の処理例を表すフローチャート図である。
【図８】本発明の実施の形態に係る文書処理装置による文書要素の処理例を表す説明図である。
【図９】本発明の実施の形態に係る文書処理装置により行われる表示制御の例を表す説明図である。
【発明を実施するための形態】
【００１１】
本発明の実施の形態について図面を参照しながら説明する。本発明の実施の形態に係る文書処理装置１は、図１に例示するように、制御部１１と、記憶部１２と、操作部１３と、表示部１４とを含んで構成される。ここに制御部１１は、ＣＰＵ（Central Processing Unit）等のプログラム制御デバイスであり、記憶部１２に格納されたプログラムに従って動作する。
【００１２】
本実施の形態では、この制御部１１は、複数の文書要素を含む文書情報を、処理対象文書として受け入れ、当該受け入れた処理対象文書から、文書要素の各々を検出する。そして当該検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成し、各文書要素について、それぞれが処理対象文書のうちに占める範囲の中で、対応する文書要素の拡大後の要素画像を表示する。この具体的な制御部１１の処理の内容については後に述べる。
【００１３】
記憶部１２は、メモリデバイスなどであり、制御部１１によって実行されるプログラムが保持される。このプログラムは、ＤＶＤ−ＲＯＭ（Digital Versatile Disc Read Only Memory）等のコンピュータ可読な記録媒体に格納された状態で提供され、シリアルインタフェースやネットワークなどの通信手段（不図示）を介して、本実施の形態の文書処理装置１側に転送され、記憶部１２に格納されたものであってもよい。
【００１４】
また、この記憶部１２には、処理の対象となる文書情報が保持される。この文書情報もまた、シリアルインタフェースやネットワークなどの通信手段（不図示）を介して、本実施の形態の文書処理装置１側に転送され、記憶部１２に格納されたものであってもよい。
【００１５】
本実施の形態において処理の対象となる文書情報は、図２に例示するように、文字列が配されたテキスト領域Ｔや、絵柄を配した絵柄領域Ｐなど、空隙Ｗ（少なくとも文字間隔以上の空白部分）で隣接した領域と仕切られた複数の領域を含む。ここでは、これら各領域内のテキストや絵柄のそれぞれを文書要素と呼ぶ。このような文書要素を検出する方法としては、広く知られているレイアウト解析処理等がある。本実施の形態の記憶部１２は、さらに、制御部１１のワークメモリとしても動作する。
【００１６】
操作部１３は、キーパッド等であり、利用者の指示操作を受け入れて、当該指示操作の内容を制御部１１に出力する。表示部１４は、液晶表示デバイスなどであり、制御部１１から入力される指示に従って、指示された画像を表示出力する。
【００１７】
次に制御部１１の動作について述べる。本実施の形態では、この制御部１１が記憶部１２に格納されたプログラムを実行することで、文書処理装置１が機能的に、図３に例示するように、文書情報受入部２１と、文書要素検出部２２と、要素画像生成部２３と、表示制御部２４と、を含むものとして実現される。
【００１８】
ここで文書情報受入部２１は、処理の対象である処理対象文書を受け入れる。具体的にこの文書情報受入部２１は、図示しない通信手段を介して受信した文書情報を記憶部１２に格納し、当該文書情報を処理対象文書として読み出すこととしてもよい。また、記憶部１２に予め格納されている文書情報を処理対象文書として読み出すものであってもよい。
【００１９】
文書要素検出部２２は、文書情報受入部２１が読み出した処理対象文書から文書要素を検出する。この処理としては、広く知られた種々のレイアウト解析処理を用いることができる。
【００２０】
［文書情報が描画命令群である場合］
例えば処理対象となった文書情報がＰＤＦ（Portable Document Format）のデータである場合、各文書要素はそれぞれオブジェクトと呼ばれるデータ部分に区分されているものとする。この場合、文書要素検出部２２は、各オブジェクトによって描画されるべき部分を文書要素として検出する。そしてオブジェクトごとに、その描画範囲（処理対象文書内でどの範囲に描画されるかを表す情報）と、当該オブジェクトに含まれる描画命令とを、要素データとして取り出す。
【００２１】
ここで描画範囲の情報は、例えば処理対象文書の左上隅を原点として、描画範囲の左上隅の位置座標（Ｘlt，Ｙlt）と、右下隅の位置座標（Ｘrb，Ｙrb）とで表すことができる（ここでＸlt、Ｙlt、Ｘrb、Ｙrbはそれぞれセンチメートルやインチなど、表示デバイス等の解像度に依存しない単位で定められる）。
【００２２】
［文書情報がビットマップ画像である場合］
また、処理対象文書がビットマップの画像である場合、文書要素検出部２２は、次の処理を行ってもよい。すなわち、当該処理対象文書画像を白黒二値化して、二値化データを生成する。次に文書要素検出部２２は、二値化データに対してラベリング処理を行い、黒色の画素が連続する部分からなる複数の画素群（連結画素群）を特定する。
【００２３】
そして文書要素検出部２２は、特定した連結画素群ごとに、各連結画素群に外接する矩形を基本矩形として画定する。各基本矩形の座標情報（当該矩形を画定するための座標情報）を生成する。文書要素検出部２２は、画定した基本矩形の各々について固有の識別子を発行し、当該識別子と各基本矩形の座標情報とを関連づけて記憶部１２に格納しておく。
【００２４】
また文書要素検出部２２は、処理対象文書の左上端の画素を初期位置として、処理対象文書の初期位置から、各画素を左から右へと１ライン走査する。そしてラベリング処理において白画素とされた画素が、予め定めた水平方向閾値より多く連続している場合に、当該連続画素部分を水平セパレータとして検出する。文書要素検出部２２は、この水平セパレータを特定する情報（その左端画素の処理対象文書上の座標と右端画素の処理対象文書上の座標など）を生成して記憶部１２に格納する。文書要素検出部２２は、この処理を上から下へ１ラインずつ行う。
【００２５】
また文書要素検出部２２は、処理対象となっている絵柄候補部分データの左上端の画素を初期位置として、当該初期位置から各画素を上から下へと１ライン走査する。そしてラベリング処理において白画素とされた画素が、予め定めた垂直方向閾値より多く連続している場合に、当該連続画素部分を垂直セパレータとして検出する。文書要素検出部２２は、この垂直セパレータを特定する情報（その上端画素の処理対象文書上の座標と下端画素の処理対象文書上の座標など）を生成して記憶部１２に格納する。文書要素検出部２２は、この処理を左から右へ１ラインずつ行う。
【００２６】
なお、例えば多段組のレイアウトにおいて自領域を他の領域から分かつための閾値であり、水平方向閾値は左右に隣接する文字間（基本矩形間）の空隙の幅よりも大きく、左右に隣接する段（隣接する他の領域）までの空隙の幅より小さいものとして予め定めておく。また垂直方向閾値は２行以上の文字列を含むテキスト領域を、その上下に隣接する他の領域と分けるための閾値であり、テキストの行間（上下に隣接する基本矩形間）の空隙幅よりも大きく、上下に隣接する他の領域までの空隙の幅よりも小さいものとして予め定めておく。この設定は、予めユーザの設定によってもよい。一例としてはいくつかの文書情報について、文字間隔、段間隔、文字列行間隔、レイアウト間隔などの統計をとって決定してもよい。
【００２７】
文書要素検出部２２は、記憶部１２に格納されている基本矩形の一つを注目基本矩形として選択しておき、次に記憶部１２に格納されている基本矩形であって、いままでに注目基本矩形として選択されていない基本矩形を処理対象基本矩形として順次選択しながら、次の処理を行う。
【００２８】
すなわち、文書要素検出部２２は、注目基本矩形の中心座標（座標情報が、基本矩形の対角線上にある基本矩形の各頂点の座標を表している場合、その中点座標）と、処理対象基本矩形の中心座標へのベクトルを生成する。そして当該ベクトルの大きさ（各成分の二乗和の平方根）から注目基本矩形と処理対象基本矩形との距離を算出する。そして、この算出した距離が予め定めた距離閾値以下となっている場合は、上記算出したベクトルが、記憶部１２に格納された情報で特定されるセパレータのいずれかと交差するか否かを調べる。この処理は２つの線分が交差するか否かを調べる処理として広く知られたものを用いることができる。ここで、上記算出したベクトルが、検出されたセパレータのいずれとも交差しない場合、注目基本矩形の識別子と、当該処理対象基本矩形の識別子とを関連づけて記憶部１２に格納する。
【００２９】
この処理により、同じ画像要素（セパレータで仕切られる各領域）に含まれるべき文字や図形に対応する基本矩形の識別子は互いに関連づけられることになる。文書要素検出部２２は、互いに関連づけられた複数の基本矩形を少なくとも１セット特定し、特定されたセットの各々に含まれる基本矩形に、さらに外接する矩形を画像要素外接矩形として画定する。
【００３０】
文書要素検出部２２は、こうして画像要素外接矩形を画定すると、元の処理対象文書の画像のうちから、当該画定した個々の画像要素外接矩形内のビットマップ画像部分を抽出する。そして文書要素検出部２２は、画定した各画像要素外接矩形を特定する座標情報（左上隅の座標と右下隅の座標とすればよい）と、当該画像要素外接矩形内から抽出したビットマップ画像部分とを要素データとする。
【００３１】
要素画像生成部２３は、文書要素検出部２２が検出した各要素データに含まれる画像部分に対して、指定された割合で画像の拡大処理を行い、表示対象要素画像を生成する。
【００３２】
具体的にこの要素画像生成部２３は、利用者が操作部１３にて行った操作に応じて、拡大率βを定める。例えばこの要素画像生成部２３は、処理開始時に予めデフォルト値として定められた値（例えば１．０倍）に拡大率βを定めておく。そして、要素画像生成部２３は、利用者から拡大率を上昇させる指示操作（例えば十字キーの上向きボタンの押下操作）があると、拡大率を予め定めた割合Δβだけ増大させる。なお、この場合には上限値βmaxを定めておき、当該上限値を超えて拡大率βを増大できないようにしておいてもよい。また要素画像生成部２３は、利用者から拡大率を下降させる指示操作（例えば十字キーの下向きボタンの押下操作）があると、拡大率βを、β＞１．０の範囲で、予め定めた割合Δβだけ減少させる。
【００３３】
そして要素画像生成部２３は、処理の開始時、及び拡大率βが変更されたときに、その時点での拡大率βに応じて各要素データに含まれる画像部分を拡大した画像を生成する。この画像の生成は、要素データに含まれている情報が、描画範囲の情報及び描画命令である場合（ＰＤＦ等の描画命令から抽出されたものである場合）と、要素データに含まれている情報が、画像要素外接矩形を特定する座標情報及びビットマップ画像部分とである場合とのそれぞれに対応して、次のような処理によって行われる。
【００３４】
［描画命令が含まれる場合］
要素データに含まれている情報が、描画範囲の情報及び描画命令である場合、要素画像生成部２３は、各要素データの描画範囲の情報、処理対象文書のサイズの情報、及び表示部１４の解像度の情報を取得する。
【００３５】
ここで表示部１４の解像度の情報は、表示部１４に含まれる画素数の情報であり、例えば横方向に配列される画素数Ｐxと、縦方向に配列される画素数Ｐyとで規定される。また処理対象文書のサイズの情報は幅Ｗ及び高さＨとすればよい。ここでも幅Ｗや高さＨは、それぞれセンチメートルやインチなど、表示デバイス等の解像度に依存しない単位で定められてよい。
【００３６】
要素画像生成部２３は、画素数Ｐx×Ｐyの範囲に、サイズＷ×Ｈの画像を配することとして、単位長さあたりの画素数αを求める。具体的に要素画像生成部２３は、Ｐx／ＷとＰy／Ｈとを算出し、いずれか小さい方の値をαとする。すなわち、
α＝min［Ｐx／Ｗ，Ｐy／Ｈ］
とする。ここでmin[a,b]は、ａ，ｂのうち小さい方の値を意味する。
【００３７】
そして要素画像生成部２３は、各要素データを順次、注目要素データとして選択しつつ、次の処理を行う。要素画像生成部２３は、注目要素データの描画範囲の情報としてその左上隅の位置座標（Ｘlt，Ｙlt）と、右下隅の位置座標（Ｘrb，Ｙrb）とを読み出す。要素画像生成部２３は、高さα×β×｜Ｙlt−Ｙrb｜、幅α×β×｜Ｘlt−Ｘrb｜（ここで、｜Ｚ｜は、Ｚの絶対値を意味する）画素の記憶領域を記憶部１２に確保する。要素画像生成部２３は、この記憶領域の位置（記憶部１２上の位置、例えばその先頭アドレスなど）を特定する情報を、注目要素データに関連づけて記憶部１２に格納する。
【００３８】
要素画像生成部２３は、注目要素データに含まれる描画命令に従って、記憶部１２に確保した記憶領域に画像を描画する。このとき描画命令において指定された座標の値をβ倍して描画することで、対応して確保した記憶領域のサイズに拡大した画像を得る。要素画像生成部２３は、各要素データについて上記の処理を実行することで、各要素データに対応した拡大処理の結果（拡大ビットマップ画像と呼ぶ）を得る。
【００３９】
［ビットマップ画像が含まれる場合］
要素データに含まれている情報が、画像要素外接矩形を特定する座標情報及びビットマップ画像部分とである場合、要素画像生成部２３は、各要素データに含まれる画像要素外接矩形を特定する情報と、当該特定される画像要素外接矩形内のビットマップ画像部分と、処理対象文書のサイズの情報と、表示部１４の解像度の情報とを取得する。
【００４０】
ここで表示部１４の解像度の情報は、表示部１４に含まれる画素数の情報であり、例えば横方向に配列される画素数Ｐxと、縦方向に配列される画素数Ｐyとで規定されるものでよい。一方、処理対象文書のサイズの情報は、処理対象文書の幅ｗ及び高さｈとすればよい。ここで幅ｗや高さｈは、画素数で定められる。
【００４１】
そして要素画像生成部２３は、画素数Ｐx×Ｐyの範囲に、サイズｗ×ｈの画像を配することとして、次のような値（サイズ比率）α′を求める。すなわち、要素画像生成部２３は、Ｐx／ｗとＰy／ｈとを算出し、いずれか小さい方の値をα′とする。つまり、
α′＝min［Ｐx／ｗ，Ｐy／ｈ］
とする。ここでmin[a,b]は、ａ，ｂのうち小さい方の値を意味する。
【００４２】
要素画像生成部２３は、各要素データを順次、注目要素データとして選択しつつ、次の処理を行う。要素画像生成部２３は、注目要素データの画像要素外接矩形を特定する情報としてその左上隅の位置座標（ｘlt，ｙlt）と、右下隅の位置座標（ｘrb，ｙrb）とを読み出す。これらの位置座標は、処理対象文書の例えば左上隅を原点とした画素数で表される。つまり、位置座標（ｘ，ｙ）は、原点から右（ｘ軸方向）へｘ画素、下（ｙ軸方向）へｙ画素だけ移動した位置を意味する。
【００４３】
要素画像生成部２３は、高さα′×β×｜ｙlt−ｙrb｜、幅α′×β×｜ｘlt−ｘrb｜（ここで｜Ｚ｜は、Ｚの絶対値を意味する）画素の記憶領域を記憶部１２に確保する。要素画像生成部２３は、この記憶領域の位置（記憶部１２上の位置、例えばその先頭アドレスなど）を特定する情報を、注目要素データに関連づけて記憶部１２に格納する。
【００４４】
要素画像生成部２３は、注目要素データに含まれるビットマップ画像部分（このビットマップ画像部分は、もともと画像要素外接矩形のサイズなので、そのサイズは高さ｜ｙlt−ｙrb｜、幅｜ｘlt−ｘrb｜である）を縦横それぞれα′×β倍する拡大処理を行い、その結果を記憶部１２に確保した記憶領域に格納する。これにより対応して確保した記憶領域のサイズに拡大したビットマップの画像を得る。要素画像生成部２３は、各要素データについて上記の処理を実行することで、各要素データに対応した拡大処理後のビットマップ画像（拡大ビットマップ画像）を得る。
【００４５】
表示制御部２４は、表示部１４上の処理対象文書の表示範囲、幅α×Ｐx／Ｗ、高さα×Ｐy／Ｈまたは幅α′×Ｐx／ｗ、高さα′×Ｐy／ｈの範囲に対して、要素画像生成部２３が生成した拡大ビットマップ画像のそれぞれを、もともと当該画像が処理対象文書のうちに占める範囲にクリッピングして表示する。
【００４６】
具体的にこの表示制御部２４は、各要素データを順次選択し、選択した要素データに含まれる描画範囲の情報または画像要素外接矩形を特定する座標情報を取り出す。表示制御部２４は、ｉ番目（ｉ＝１，２，…Ｎ、Ｎは要素データの総数）の要素データに対応して記憶部１２に格納されている拡大ビットマップ画像を読み出す。以下ではｉ番目の要素データに対応する画像が描画される範囲をその左上隅座標（ｕi_lt，ｖi_lt）から右下隅座標（ｕi_rb，ｖi_rb）で表すとする。この座標は、画素数で表される。
【００４７】
例えばｉ番目の要素データに描画範囲の情報が含まれ、表示デバイスの解像度に依存しない左上隅の位置座標（Ｘi_lt，Ｙi_lt）と、右下隅の位置座標（Ｘi_rb，Ｙi_rb）とで表される場合、要素画像生成部２３におけるのと同じ方法で演算された（または要素画像生成部２３から入力された）単位長さあたりの画素数αを用いて、
ｕi_lt＝α×Ｘi_lt、
ｖi_lt＝α×Ｙi_lt、
ｕi_rb＝α×Ｘi_rb、
ｖi_rb＝α×Ｙi_rb、
とする。一方、要素データに含まれている情報が、画像要素外接矩形を特定する座標情報及びビットマップ画像部分とである場合、ｉ番目の要素データにおける画像要素外接矩形を特定する情報としてその左上隅の位置座標（ｘi_lt，ｙi_lt）と、右下隅の位置座標（ｘi_rb，ｙi_rb）とが含まれる場合、サイズ比率α′を用いて、
ｕi_lt＝α′×ｘi_lt、
ｖi_lt＝α′×ｙi_lt、
ｕi_rb＝α′×ｘi_rb、
ｖi_rb＝α′×ｙi_rb、
とする。
【００４８】
また、ｕi＝｜ｕi_rb−ｕi_lt｜、ｖi＝｜ｖi_rb−ｖi_lt｜とする。既に述べたように、ｉ番目の要素データに関連づけて記憶されているビットマップ画像のサイズは、対応するｉ番目の要素データの描画範囲または画像要素外接矩形の幅ｕi、高さｖiにそもそも一致していたものがβ倍に拡大されているのである。従って、ｉ番目の要素データに関連づけて記憶されているビットマップ画像のサイズは幅β×ｕi、高さβ×ｖiとなっている（図４）。
【００４９】
表示制御部２４は、図５に示すように、各要素データに対応する幅β×ｕi、高さβ×ｖi（ただしｉ＝１，２…）のサイズのビットマップ画像のうち、幅ｕi、高さｖiの範囲を切り出して、表示部１４の（ξ＋ｕi_lt，η＋ｖi_lt）から（ξ＋ｕi_rb，η＋ｖi_rb）の範囲（幅ｕi、高さｖi）に描画する。なお（ξ，η）は、表示部１４において表示範囲の左上隅の座標である（図５）。
【００５０】
ここで表示制御部２４は、この幅β×ｕi、高さβ×ｖi（ただしｉ＝１，２…）のサイズの拡大ビットマップ画像のうち、当初は予め定めた基準位置（例えば拡大ビットマップ画像の左上隅（０，０））から幅ｕi、高さｖiの範囲を切り出す。そして表示制御部２４は、利用者からのスクロール指示の操作に応じて、この基準位置を変更して切り出し範囲を変更する。例えば表示制御部２４は、利用者から十字キーの右向きボタンの押下操作がされるごとに、基準位置の座標を予め定めた量Δｘずつｘ軸正の方向にシフトさせる。同様に、利用者から十字キーの下向きボタンの押下操作がされるごとに、基準位置の座標を予め定めた量Δｙずつｙ軸正の方向にシフトさせる。そうして表示制御部２４は、ｎ回だけ右向きボタンが押下され、ｍ回だけ下向きボタンが押下された後では図５に例示するように、基準位置の座標を（Ｒx，Ｒy）＝（ｎ×Δｘ，ｍ×Δｙ）として、拡大ビットマップ画像の（Ｒx，Ｒy）から（Ｒx＋ｕi，Ｒy＋ｖi）までの範囲を切り出すことになる。
【００５１】
さらに表示制御部２４は、利用者から十字キーの左向きボタンの押下操作がされるごとに、基準位置の座標を予め定めた量Δｘずつｘ軸負の方向にシフトさせる。同様に、利用者から十字キーの下向きボタンの押下操作がされるごとに、基準位置の座標を予め定めた量Δｙずつｙ軸負の方向にシフトさせる。なお、表示制御部２４は、利用者の指示操作に応じて基準位置を変更したときに、変更後の基準位置の座標（Ｒx，Ｒy）が、Ｒx＜０であればＲx＝０とし、Ｒy＜０であればＲy＝０とする。また、β×ｕi＞Ｒx＋ｕiであればＲx＝β×ｕi−ｕiとし、β×ｖi＞Ｒy＋ｖiであればＲy＝β×ｖi−ｖiとする。
【００５２】
そして表示制御部２４は、基準位置が変化するごとに、その変化後の座標（Ｒx，Ｒy）から（Ｒx＋ｕi，Ｒy＋ｖi）の範囲を拡大ビットマップ画像から切り出す。
【００５３】
表示制御部２４は、ｉ番目の要素データに対応して切り出して得た拡大ビットマップ画像の一部（部分画像）について、ｉ番目の要素データの配置位置を表す情報（要素データに含まれる描画範囲または画像要素外接矩形を特定する情報）が表す領域に配置する。
【００５４】
すなわち、各要素データ（ｉ＝１，２，…Ｎ）に対応して、表示部１４の（ξ＋ｕi_lt，η＋ｖi_lt）から（ξ＋ｕi_rb，η＋ｖi_rb）の範囲に、拡大ビットマップ画像の座標系で（Ｒx，Ｒy）から（Ｒx＋ｕi，Ｒy＋ｖi）の範囲から切り出された部分画像を配置する。
【００５５】
なお、表示制御部２４は、表示部１４に表示する場合だけでなく、この表示の指示を指定された宛先に対して送信してもよい。この宛先は例えば利用者の携帯端末などでよい。宛先となった装置では、この指示に従って画像を表示する。この場合、表示部１４のサイズとされていた情報は、この携帯端末など、表示を行うデバイス（いわば表示手段）のサイズ（縦横の画素数等）とする。
【００５６】
［動作］
以上のように構成された本実施の形態の文書処理装置１は、次のように動作する。以下の動作例では、説明のため、図６に例示するように、文字による表題部Ａと、サブタイトル部Ｂと、第１の段落部Ｃと、第２の段落部Ｄと、図表部Ｅと、グラフ表題部Ｆと、グラフ部Ｇとを含む文書（ビットマップ画像であるとする）を、処理対象文書とし、この処理対象文書のサイズ（幅ｗ、高さｈ）は、表示部１４の画素数（幅Ｐx、高さＰy）に一致していることとする（この場合、α′＝１となる）。
【００５７】
文書処理装置１は、図７に例示する処理を開始し、レイアウト解析の処理により、上記表題部Ａと、サブタイトル部Ｂと、第１の段落部Ｃと、第２の段落部Ｄと、図表部Ｅと、グラフ表題部Ｆと、グラフ部Ｇとのそれぞれを文書要素として特定し（Ｓ１）、それぞれが占める領域を表す情報と、それぞれの部分の画像とを取り出して互いに関連づけた要素データとして記憶部１２に記録する（Ｓ２）。一例として、表題部Ａについては、図８（ａ）に示すように幅ｕ1、高さｖ1の画像が取り出される。
【００５８】
文書処理装置１は、処理Ｓ２で各文書要素の占める範囲から取り出した画像を指定された拡大率βで拡大した拡大ビットマップ画像（要素画像）を生成する（Ｓ３）。表題部Ａについては、この結果は図８（ｂ）に示すように、幅β×ｕ1、高さβ×ｖ1の画像となる。文書処理装置１は、さらに処理Ｓ３における拡大処理により、文書要素ごとに得られた拡大ビットマップ画像から、それぞれ元の文書要素のサイズの領域の部分画像を切り出す（Ｓ４）。表題部Ａについては、拡大処理により得られた幅β×ｕ1、高さβ×ｖ1の画像から、元の幅ｕ1、高さｖ1の部分画像を切り出す（図８（ｂ）を参照）。なお、この切り出しの範囲は、当初は拡大ビットマップ画像の左上隅を含む部分とすればよい。この結果は、表題部Ａについては、図８（ｃ）に示すようなものとなる。
【００５９】
文書処理装置１は、レイアウト解析により見いだされた文書要素ごとに、この切り出しを行い、切り出して得られた各文書要素ごとの部分画像を、それぞれの文書要素の元の配置位置に配置する（Ｓ５）。この配置の結果は、例えば図８（ｄ）にその一部を示すようなものとなる。
【００６０】
文書処理装置１は、この部分画像をそれぞれ配置した後の画像を、表示部１４に表示する。また、文書処理装置１は、利用者から切り出しの範囲を移動する指示が行われるごとに、処理Ｓ４で切り出す範囲を変化させ（Ｓ６）、処理Ｓ４から繰り返して処理を行う。
【００６１】
本実施の形態によると、利用者が切り出し範囲を右方向に移動させる操作を行うと、すべての文書要素において切り出し範囲が右方向に移動する（ただし既に右端が表示されている文書要素は除く）。つまり、文書処理装置１は、各文書要素が処理対象文書のうちに占める範囲の中で、それぞれ対応する文書要素の要素画像の一部を切り出して表示し、当該切り出し範囲を指定された方向に、指定された速度で移動させることとなる。
【００６２】
また、ここでは利用者の操作により切り出しの範囲を変化させる例としているが、これに限らず、文書処理装置１は、予め定めたタイミングごとに、切り出し範囲を右方向に予め定めた量だけ移動させることとしてもよい。また、切り出し範囲が拡大ビットマップ画像の右端に至った場合は、切り出し範囲を下方向に予め定めた量だけ移動させ、さらに拡大ビットマップ画像の左端を含む位置に移動させてもよい。これによると、各文書要素がラスタスキャン順（一ラインごとに左から右へ、右端に至ると、次のラインの左端へ移動することで、左上隅から右下隅へと至る順）にスクロール表示されることになる。
【００６３】
この例では図９に示すように、文書要素が一斉にスクロール表示される（図９（ａ））。そしてそれぞれ終点（１ラインのみの場合は右端に至ったところ、複数ラインある場合は右下隅に至ったところ）に達した文書要素のスクロールが停止し（図９（ｂ）：サブタイトル部Ｂは終点に達している）、未だ終点に達していない文書要素のスクロールが継続されるということになる（図９（ｃ）：表題部Ａと、第１の段落部Ｃとは未だ終点に達していない）。
【００６４】
［変形例１］
本実施の形態では、すべてのスクロールが同時期に終了することとなるよう、文書要素ごとにスクロールの速度（１回あたり、または単位時間当たりの切り出し範囲の移動量）を異ならせてもよい。具体的にｉ番目の文書要素の総スクロール量をＳiとする。総スクロール量Ｓiは、文書要素がＸ軸方向にのみスクロールする場合（Ｙ軸方向にはスクロールしない場合）は、文書要素の幅ｕiに等しい。また、Ｙ軸方向にもスクロールする場合は、幅ｕiにライン数（Ｙ軸方向への移動回数）を乗じた値となる。ライン数は、Ｙ軸方向へのスクロール量ΔＳy_iで文書要素の高さｖiを除した値を超えない最大の整数とすればよい。なお、ｉ番目の文書要素におけるＹ軸方向へのスクロール量ΔＳy_iは０より大きく文書要素の高さｖi以下の値とする。例えばｖiに０より大きく１以下の定数γを乗じた値γ・ｖiをΔＳy_iとすればよい。
【００６５】
次に、各文書要素の総スクロール量Ｓi（ｉ＝１，２，…Ｎ）のうち、これが最も長いものｍａｘ［Ｓi］（以下この値をＳmaxとする）を選択する。なお、ｍａｘ［Ｑi］は、Ｑi（ｉ＝１，２，…）のうち、最大のＱiを意味する。また、最大ステップ量Δｘmaxを、各文書要素の横幅ｕiのうち最小のものｍｉｎ［ｕi］を選択し、０より大きく当該ｍｉｎ［ｕi］以下の値とする。ここでｍｉｎ［Ｑi］は、Ｑi（ｉ＝１，２，…）のうち、最小のＱiを意味する。例えばｍｉｎ［ｕi］に１以下の定数γを乗じた値γ・ｍｉｎ［ｕi］をΔｘmaxとすればよい。また、このΔｘmaxは、文書要素に含まれる文字のサイズ（フォントサイズ）に応じて調整してもよい。例えば基準となるフォントサイズを予め定めておき、当該基準となるフォントサイズと、実際のフォントサイズとの比εをさらに乗じて、γ・ε・ｍｉｎ［ｕi］をΔｘmaxとすればよい。この場合、Δｘmax＞ｍｉｎ［ｕi］となったときは、Δｘmax＝ｍｉｎ［ｕi］に補正する。
【００６６】
そしてｉ番目の文書要素のスクロール速度（１回あたり、または単位時間あたりの切り出し範囲の移動量）Δｘiを、Δｘi＝（Ｓi／Ｓmax）×Δｘmaxとして求める。これによると、文書要素ごとに定められる総スクロール量の大きさによって１回あたり、ないし単位時間当たりのスクロール量（切り出し範囲の移動量）が、次のような条件を満足するように決定される。
【００６７】
すなわちこの例では、Ｓiまでの移動にかかる総移動回数（総移動時間）は、
Ｓi／Δｘi＝Ｓmax／Δｘmax
となり、ｉに関わらず一定の値となる。つまり、どの文書要素においても同じ回数（同じ時間）でスクロールが完了する。
【００６８】
［変形例２］
また本実施の形態では、文書要素ごとに、文書要素に含まれる画像が文字列であるか文字列でない（線図、絵柄などである）かによって１回あたり、ないし単位時間当たりのスクロール量を異ならせてもよい。なお、文書要素に含まれる画像が文字列であるか否かは、処理対象文書がＰＤＦ等、描画命令を含む場合は、各文書要素に係る描画命令が文字列を描画する命令であるか否かにより判断でき、処理対象文書がビットマップ画像である場合は、広く知られたテキスト・イメージ分離の処理により行うことができる。
【００６９】
［変形例３］
さらに文書要素検出部２２が検出したｉ番目の文書要素のサイズ、つまり幅ｕiまたは高さｖiが、予め定めたしきい値Ｔｈを下回る場合、当該ｉ番目の文書要素を、それに隣接する文書要素と結合してもよい。あるいは、隣接する文書要素に接しない範囲で幅、高さを拡大してもよい。
【００７０】
［実施形態の効果］
本実施の形態によると、各文書要素の内容を拡大し、元の文書要素が配置されていた領域内でそれぞれスクロール表示することで、表示部のサイズによらず、文書全体のレイアウトを維持しながら、レイアウトされた文書要素の各々を拡大表示できる。
【符号の説明】
【００７１】
１ 文書処理装置、１１ 制御部、１２ 記憶部、１３ 操作部、１４ 表示部、２１ 文書情報受入部、２２ 文書要素検出部、２３ 要素画像生成部、２４ 表示制御部。
【技術分野】
【０００１】
本発明は、文書処理装置及びプログラムに関する。
【背景技術】
【０００２】
２画面を有するユーザ端末において、表示部２−１には、コンテンツの作成者が意図した状態で、コンテンツが表示される。この表示されているコンテンツは、複数のブロック毎のコンテンツにより構成されており、そのブロック毎に拡大の処理が行えるようになっている。拡大が指示されたブロックのコンテンツは、表示部２−２に表示される。表示部２−２に表示されるコンテンツは、拡大されたものであるが、その拡大には、規則が定められており、例えば、画像などは、上下左右の比率が変化しないで拡大表示されるように処理される。本発明は、電子書籍を扱う装置に適用できる、という技術が特許文献１に開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１１８４７７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
表示部のサイズによらず、文書全体のレイアウトを維持しながら、レイアウトされた各文書要素の内容を拡大表示できる技術が望まれている。
【課題を解決するための手段】
【０００５】
請求項１に記載の発明は，文書処理装置であって、複数の文書要素を含む文書情報を、処理対象文書として受け入れる手段と、前記受け入れた処理対象文書から、前記文書要素の各々を検出する手段と、前記検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成する手段と、当該文書要素が前記処理対象文書のうちに占める範囲の中で、対応する文書要素の要素画像を表示するよう制御する表示制御手段と、を含むものである。
【０００６】
請求項２記載の発明は、請求項１記載の文書処理装置であって、前記表示制御手段は、前記各文書要素が前記処理対象文書のうちに占める範囲の中で、それぞれ対応する文書要素の要素画像の一部を切り出して表示し、当該切り出し範囲を指定された方向に、指定された速度で移動させて表示するよう制御することとしたものである。
【０００７】
請求項３記載の発明は、プログラムであって、コンピュータを、複数の文書要素を含む文書情報を、処理対象文書として受け入れる手段と、前記受け入れた処理対象文書から、前記文書要素の各々を検出する手段と、前記検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成する手段と、当該文書要素が前記処理対象文書のうちに占める範囲の中で、対応する文書要素の要素画像を表示するよう制御する表示制御手段と、として機能させることとしたものである。
【発明の効果】
【０００８】
請求項１，３記載の発明によると、文書全体のレイアウトを維持しながら、レイアウトされた各文書要素の内容を拡大表示できる。
【０００９】
請求項２記載の発明によると、拡大表示した文書要素の各々を、文書要素の配置されていた領域内でスクロール表示させることができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施の形態に係る文書処理装置の構成例を表すブロック図である。
【図２】本発明の実施の形態に係る文書処理装置における処理対象文書の画像の例を表す説明図である。
【図３】本発明の実施の形態に係る文書処理装置の一例に係る機能ブロック図である。
【図４】本発明の実施の形態に係る文書処理装置による拡大の処理例を表す説明図である。
【図５】本発明の実施の形態に係る文書処理装置の処理例を表す説明図である。
【図６】本発明の実施の形態に係る文書処理装置において処理される処理対象文書の一具体例を表す説明図である。
【図７】本発明の実施の形態に係る文書処理装置の処理例を表すフローチャート図である。
【図８】本発明の実施の形態に係る文書処理装置による文書要素の処理例を表す説明図である。
【図９】本発明の実施の形態に係る文書処理装置により行われる表示制御の例を表す説明図である。
【発明を実施するための形態】
【００１１】
本発明の実施の形態について図面を参照しながら説明する。本発明の実施の形態に係る文書処理装置１は、図１に例示するように、制御部１１と、記憶部１２と、操作部１３と、表示部１４とを含んで構成される。ここに制御部１１は、ＣＰＵ（Central Processing Unit）等のプログラム制御デバイスであり、記憶部１２に格納されたプログラムに従って動作する。
【００１２】
本実施の形態では、この制御部１１は、複数の文書要素を含む文書情報を、処理対象文書として受け入れ、当該受け入れた処理対象文書から、文書要素の各々を検出する。そして当該検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成し、各文書要素について、それぞれが処理対象文書のうちに占める範囲の中で、対応する文書要素の拡大後の要素画像を表示する。この具体的な制御部１１の処理の内容については後に述べる。
【００１３】
記憶部１２は、メモリデバイスなどであり、制御部１１によって実行されるプログラムが保持される。このプログラムは、ＤＶＤ−ＲＯＭ（Digital Versatile Disc Read Only Memory）等のコンピュータ可読な記録媒体に格納された状態で提供され、シリアルインタフェースやネットワークなどの通信手段（不図示）を介して、本実施の形態の文書処理装置１側に転送され、記憶部１２に格納されたものであってもよい。
【００１４】
また、この記憶部１２には、処理の対象となる文書情報が保持される。この文書情報もまた、シリアルインタフェースやネットワークなどの通信手段（不図示）を介して、本実施の形態の文書処理装置１側に転送され、記憶部１２に格納されたものであってもよい。
【００１５】
本実施の形態において処理の対象となる文書情報は、図２に例示するように、文字列が配されたテキスト領域Ｔや、絵柄を配した絵柄領域Ｐなど、空隙Ｗ（少なくとも文字間隔以上の空白部分）で隣接した領域と仕切られた複数の領域を含む。ここでは、これら各領域内のテキストや絵柄のそれぞれを文書要素と呼ぶ。このような文書要素を検出する方法としては、広く知られているレイアウト解析処理等がある。本実施の形態の記憶部１２は、さらに、制御部１１のワークメモリとしても動作する。
【００１６】
操作部１３は、キーパッド等であり、利用者の指示操作を受け入れて、当該指示操作の内容を制御部１１に出力する。表示部１４は、液晶表示デバイスなどであり、制御部１１から入力される指示に従って、指示された画像を表示出力する。
【００１７】
次に制御部１１の動作について述べる。本実施の形態では、この制御部１１が記憶部１２に格納されたプログラムを実行することで、文書処理装置１が機能的に、図３に例示するように、文書情報受入部２１と、文書要素検出部２２と、要素画像生成部２３と、表示制御部２４と、を含むものとして実現される。
【００１８】
ここで文書情報受入部２１は、処理の対象である処理対象文書を受け入れる。具体的にこの文書情報受入部２１は、図示しない通信手段を介して受信した文書情報を記憶部１２に格納し、当該文書情報を処理対象文書として読み出すこととしてもよい。また、記憶部１２に予め格納されている文書情報を処理対象文書として読み出すものであってもよい。
【００１９】
文書要素検出部２２は、文書情報受入部２１が読み出した処理対象文書から文書要素を検出する。この処理としては、広く知られた種々のレイアウト解析処理を用いることができる。
【００２０】
［文書情報が描画命令群である場合］
例えば処理対象となった文書情報がＰＤＦ（Portable Document Format）のデータである場合、各文書要素はそれぞれオブジェクトと呼ばれるデータ部分に区分されているものとする。この場合、文書要素検出部２２は、各オブジェクトによって描画されるべき部分を文書要素として検出する。そしてオブジェクトごとに、その描画範囲（処理対象文書内でどの範囲に描画されるかを表す情報）と、当該オブジェクトに含まれる描画命令とを、要素データとして取り出す。
【００２１】
ここで描画範囲の情報は、例えば処理対象文書の左上隅を原点として、描画範囲の左上隅の位置座標（Ｘlt，Ｙlt）と、右下隅の位置座標（Ｘrb，Ｙrb）とで表すことができる（ここでＸlt、Ｙlt、Ｘrb、Ｙrbはそれぞれセンチメートルやインチなど、表示デバイス等の解像度に依存しない単位で定められる）。
【００２２】
［文書情報がビットマップ画像である場合］
また、処理対象文書がビットマップの画像である場合、文書要素検出部２２は、次の処理を行ってもよい。すなわち、当該処理対象文書画像を白黒二値化して、二値化データを生成する。次に文書要素検出部２２は、二値化データに対してラベリング処理を行い、黒色の画素が連続する部分からなる複数の画素群（連結画素群）を特定する。
【００２３】
そして文書要素検出部２２は、特定した連結画素群ごとに、各連結画素群に外接する矩形を基本矩形として画定する。各基本矩形の座標情報（当該矩形を画定するための座標情報）を生成する。文書要素検出部２２は、画定した基本矩形の各々について固有の識別子を発行し、当該識別子と各基本矩形の座標情報とを関連づけて記憶部１２に格納しておく。
【００２４】
また文書要素検出部２２は、処理対象文書の左上端の画素を初期位置として、処理対象文書の初期位置から、各画素を左から右へと１ライン走査する。そしてラベリング処理において白画素とされた画素が、予め定めた水平方向閾値より多く連続している場合に、当該連続画素部分を水平セパレータとして検出する。文書要素検出部２２は、この水平セパレータを特定する情報（その左端画素の処理対象文書上の座標と右端画素の処理対象文書上の座標など）を生成して記憶部１２に格納する。文書要素検出部２２は、この処理を上から下へ１ラインずつ行う。
【００２５】
また文書要素検出部２２は、処理対象となっている絵柄候補部分データの左上端の画素を初期位置として、当該初期位置から各画素を上から下へと１ライン走査する。そしてラベリング処理において白画素とされた画素が、予め定めた垂直方向閾値より多く連続している場合に、当該連続画素部分を垂直セパレータとして検出する。文書要素検出部２２は、この垂直セパレータを特定する情報（その上端画素の処理対象文書上の座標と下端画素の処理対象文書上の座標など）を生成して記憶部１２に格納する。文書要素検出部２２は、この処理を左から右へ１ラインずつ行う。
【００２６】
なお、例えば多段組のレイアウトにおいて自領域を他の領域から分かつための閾値であり、水平方向閾値は左右に隣接する文字間（基本矩形間）の空隙の幅よりも大きく、左右に隣接する段（隣接する他の領域）までの空隙の幅より小さいものとして予め定めておく。また垂直方向閾値は２行以上の文字列を含むテキスト領域を、その上下に隣接する他の領域と分けるための閾値であり、テキストの行間（上下に隣接する基本矩形間）の空隙幅よりも大きく、上下に隣接する他の領域までの空隙の幅よりも小さいものとして予め定めておく。この設定は、予めユーザの設定によってもよい。一例としてはいくつかの文書情報について、文字間隔、段間隔、文字列行間隔、レイアウト間隔などの統計をとって決定してもよい。
【００２７】
文書要素検出部２２は、記憶部１２に格納されている基本矩形の一つを注目基本矩形として選択しておき、次に記憶部１２に格納されている基本矩形であって、いままでに注目基本矩形として選択されていない基本矩形を処理対象基本矩形として順次選択しながら、次の処理を行う。
【００２８】
すなわち、文書要素検出部２２は、注目基本矩形の中心座標（座標情報が、基本矩形の対角線上にある基本矩形の各頂点の座標を表している場合、その中点座標）と、処理対象基本矩形の中心座標へのベクトルを生成する。そして当該ベクトルの大きさ（各成分の二乗和の平方根）から注目基本矩形と処理対象基本矩形との距離を算出する。そして、この算出した距離が予め定めた距離閾値以下となっている場合は、上記算出したベクトルが、記憶部１２に格納された情報で特定されるセパレータのいずれかと交差するか否かを調べる。この処理は２つの線分が交差するか否かを調べる処理として広く知られたものを用いることができる。ここで、上記算出したベクトルが、検出されたセパレータのいずれとも交差しない場合、注目基本矩形の識別子と、当該処理対象基本矩形の識別子とを関連づけて記憶部１２に格納する。
【００２９】
この処理により、同じ画像要素（セパレータで仕切られる各領域）に含まれるべき文字や図形に対応する基本矩形の識別子は互いに関連づけられることになる。文書要素検出部２２は、互いに関連づけられた複数の基本矩形を少なくとも１セット特定し、特定されたセットの各々に含まれる基本矩形に、さらに外接する矩形を画像要素外接矩形として画定する。
【００３０】
文書要素検出部２２は、こうして画像要素外接矩形を画定すると、元の処理対象文書の画像のうちから、当該画定した個々の画像要素外接矩形内のビットマップ画像部分を抽出する。そして文書要素検出部２２は、画定した各画像要素外接矩形を特定する座標情報（左上隅の座標と右下隅の座標とすればよい）と、当該画像要素外接矩形内から抽出したビットマップ画像部分とを要素データとする。
【００３１】
要素画像生成部２３は、文書要素検出部２２が検出した各要素データに含まれる画像部分に対して、指定された割合で画像の拡大処理を行い、表示対象要素画像を生成する。
【００３２】
具体的にこの要素画像生成部２３は、利用者が操作部１３にて行った操作に応じて、拡大率βを定める。例えばこの要素画像生成部２３は、処理開始時に予めデフォルト値として定められた値（例えば１．０倍）に拡大率βを定めておく。そして、要素画像生成部２３は、利用者から拡大率を上昇させる指示操作（例えば十字キーの上向きボタンの押下操作）があると、拡大率を予め定めた割合Δβだけ増大させる。なお、この場合には上限値βmaxを定めておき、当該上限値を超えて拡大率βを増大できないようにしておいてもよい。また要素画像生成部２３は、利用者から拡大率を下降させる指示操作（例えば十字キーの下向きボタンの押下操作）があると、拡大率βを、β＞１．０の範囲で、予め定めた割合Δβだけ減少させる。
【００３３】
そして要素画像生成部２３は、処理の開始時、及び拡大率βが変更されたときに、その時点での拡大率βに応じて各要素データに含まれる画像部分を拡大した画像を生成する。この画像の生成は、要素データに含まれている情報が、描画範囲の情報及び描画命令である場合（ＰＤＦ等の描画命令から抽出されたものである場合）と、要素データに含まれている情報が、画像要素外接矩形を特定する座標情報及びビットマップ画像部分とである場合とのそれぞれに対応して、次のような処理によって行われる。
【００３４】
［描画命令が含まれる場合］
要素データに含まれている情報が、描画範囲の情報及び描画命令である場合、要素画像生成部２３は、各要素データの描画範囲の情報、処理対象文書のサイズの情報、及び表示部１４の解像度の情報を取得する。
【００３５】
ここで表示部１４の解像度の情報は、表示部１４に含まれる画素数の情報であり、例えば横方向に配列される画素数Ｐxと、縦方向に配列される画素数Ｐyとで規定される。また処理対象文書のサイズの情報は幅Ｗ及び高さＨとすればよい。ここでも幅Ｗや高さＨは、それぞれセンチメートルやインチなど、表示デバイス等の解像度に依存しない単位で定められてよい。
【００３６】
要素画像生成部２３は、画素数Ｐx×Ｐyの範囲に、サイズＷ×Ｈの画像を配することとして、単位長さあたりの画素数αを求める。具体的に要素画像生成部２３は、Ｐx／ＷとＰy／Ｈとを算出し、いずれか小さい方の値をαとする。すなわち、
α＝min［Ｐx／Ｗ，Ｐy／Ｈ］
とする。ここでmin[a,b]は、ａ，ｂのうち小さい方の値を意味する。
【００３７】
そして要素画像生成部２３は、各要素データを順次、注目要素データとして選択しつつ、次の処理を行う。要素画像生成部２３は、注目要素データの描画範囲の情報としてその左上隅の位置座標（Ｘlt，Ｙlt）と、右下隅の位置座標（Ｘrb，Ｙrb）とを読み出す。要素画像生成部２３は、高さα×β×｜Ｙlt−Ｙrb｜、幅α×β×｜Ｘlt−Ｘrb｜（ここで、｜Ｚ｜は、Ｚの絶対値を意味する）画素の記憶領域を記憶部１２に確保する。要素画像生成部２３は、この記憶領域の位置（記憶部１２上の位置、例えばその先頭アドレスなど）を特定する情報を、注目要素データに関連づけて記憶部１２に格納する。
【００３８】
要素画像生成部２３は、注目要素データに含まれる描画命令に従って、記憶部１２に確保した記憶領域に画像を描画する。このとき描画命令において指定された座標の値をβ倍して描画することで、対応して確保した記憶領域のサイズに拡大した画像を得る。要素画像生成部２３は、各要素データについて上記の処理を実行することで、各要素データに対応した拡大処理の結果（拡大ビットマップ画像と呼ぶ）を得る。
【００３９】
［ビットマップ画像が含まれる場合］
要素データに含まれている情報が、画像要素外接矩形を特定する座標情報及びビットマップ画像部分とである場合、要素画像生成部２３は、各要素データに含まれる画像要素外接矩形を特定する情報と、当該特定される画像要素外接矩形内のビットマップ画像部分と、処理対象文書のサイズの情報と、表示部１４の解像度の情報とを取得する。
【００４０】
ここで表示部１４の解像度の情報は、表示部１４に含まれる画素数の情報であり、例えば横方向に配列される画素数Ｐxと、縦方向に配列される画素数Ｐyとで規定されるものでよい。一方、処理対象文書のサイズの情報は、処理対象文書の幅ｗ及び高さｈとすればよい。ここで幅ｗや高さｈは、画素数で定められる。
【００４１】
そして要素画像生成部２３は、画素数Ｐx×Ｐyの範囲に、サイズｗ×ｈの画像を配することとして、次のような値（サイズ比率）α′を求める。すなわち、要素画像生成部２３は、Ｐx／ｗとＰy／ｈとを算出し、いずれか小さい方の値をα′とする。つまり、
α′＝min［Ｐx／ｗ，Ｐy／ｈ］
とする。ここでmin[a,b]は、ａ，ｂのうち小さい方の値を意味する。
【００４２】
要素画像生成部２３は、各要素データを順次、注目要素データとして選択しつつ、次の処理を行う。要素画像生成部２３は、注目要素データの画像要素外接矩形を特定する情報としてその左上隅の位置座標（ｘlt，ｙlt）と、右下隅の位置座標（ｘrb，ｙrb）とを読み出す。これらの位置座標は、処理対象文書の例えば左上隅を原点とした画素数で表される。つまり、位置座標（ｘ，ｙ）は、原点から右（ｘ軸方向）へｘ画素、下（ｙ軸方向）へｙ画素だけ移動した位置を意味する。
【００４３】
要素画像生成部２３は、高さα′×β×｜ｙlt−ｙrb｜、幅α′×β×｜ｘlt−ｘrb｜（ここで｜Ｚ｜は、Ｚの絶対値を意味する）画素の記憶領域を記憶部１２に確保する。要素画像生成部２３は、この記憶領域の位置（記憶部１２上の位置、例えばその先頭アドレスなど）を特定する情報を、注目要素データに関連づけて記憶部１２に格納する。
【００４４】
要素画像生成部２３は、注目要素データに含まれるビットマップ画像部分（このビットマップ画像部分は、もともと画像要素外接矩形のサイズなので、そのサイズは高さ｜ｙlt−ｙrb｜、幅｜ｘlt−ｘrb｜である）を縦横それぞれα′×β倍する拡大処理を行い、その結果を記憶部１２に確保した記憶領域に格納する。これにより対応して確保した記憶領域のサイズに拡大したビットマップの画像を得る。要素画像生成部２３は、各要素データについて上記の処理を実行することで、各要素データに対応した拡大処理後のビットマップ画像（拡大ビットマップ画像）を得る。
【００４５】
表示制御部２４は、表示部１４上の処理対象文書の表示範囲、幅α×Ｐx／Ｗ、高さα×Ｐy／Ｈまたは幅α′×Ｐx／ｗ、高さα′×Ｐy／ｈの範囲に対して、要素画像生成部２３が生成した拡大ビットマップ画像のそれぞれを、もともと当該画像が処理対象文書のうちに占める範囲にクリッピングして表示する。
【００４６】
具体的にこの表示制御部２４は、各要素データを順次選択し、選択した要素データに含まれる描画範囲の情報または画像要素外接矩形を特定する座標情報を取り出す。表示制御部２４は、ｉ番目（ｉ＝１，２，…Ｎ、Ｎは要素データの総数）の要素データに対応して記憶部１２に格納されている拡大ビットマップ画像を読み出す。以下ではｉ番目の要素データに対応する画像が描画される範囲をその左上隅座標（ｕi_lt，ｖi_lt）から右下隅座標（ｕi_rb，ｖi_rb）で表すとする。この座標は、画素数で表される。
【００４７】
例えばｉ番目の要素データに描画範囲の情報が含まれ、表示デバイスの解像度に依存しない左上隅の位置座標（Ｘi_lt，Ｙi_lt）と、右下隅の位置座標（Ｘi_rb，Ｙi_rb）とで表される場合、要素画像生成部２３におけるのと同じ方法で演算された（または要素画像生成部２３から入力された）単位長さあたりの画素数αを用いて、
ｕi_lt＝α×Ｘi_lt、
ｖi_lt＝α×Ｙi_lt、
ｕi_rb＝α×Ｘi_rb、
ｖi_rb＝α×Ｙi_rb、
とする。一方、要素データに含まれている情報が、画像要素外接矩形を特定する座標情報及びビットマップ画像部分とである場合、ｉ番目の要素データにおける画像要素外接矩形を特定する情報としてその左上隅の位置座標（ｘi_lt，ｙi_lt）と、右下隅の位置座標（ｘi_rb，ｙi_rb）とが含まれる場合、サイズ比率α′を用いて、
ｕi_lt＝α′×ｘi_lt、
ｖi_lt＝α′×ｙi_lt、
ｕi_rb＝α′×ｘi_rb、
ｖi_rb＝α′×ｙi_rb、
とする。
【００４８】
また、ｕi＝｜ｕi_rb−ｕi_lt｜、ｖi＝｜ｖi_rb−ｖi_lt｜とする。既に述べたように、ｉ番目の要素データに関連づけて記憶されているビットマップ画像のサイズは、対応するｉ番目の要素データの描画範囲または画像要素外接矩形の幅ｕi、高さｖiにそもそも一致していたものがβ倍に拡大されているのである。従って、ｉ番目の要素データに関連づけて記憶されているビットマップ画像のサイズは幅β×ｕi、高さβ×ｖiとなっている（図４）。
【００４９】
表示制御部２４は、図５に示すように、各要素データに対応する幅β×ｕi、高さβ×ｖi（ただしｉ＝１，２…）のサイズのビットマップ画像のうち、幅ｕi、高さｖiの範囲を切り出して、表示部１４の（ξ＋ｕi_lt，η＋ｖi_lt）から（ξ＋ｕi_rb，η＋ｖi_rb）の範囲（幅ｕi、高さｖi）に描画する。なお（ξ，η）は、表示部１４において表示範囲の左上隅の座標である（図５）。
【００５０】
ここで表示制御部２４は、この幅β×ｕi、高さβ×ｖi（ただしｉ＝１，２…）のサイズの拡大ビットマップ画像のうち、当初は予め定めた基準位置（例えば拡大ビットマップ画像の左上隅（０，０））から幅ｕi、高さｖiの範囲を切り出す。そして表示制御部２４は、利用者からのスクロール指示の操作に応じて、この基準位置を変更して切り出し範囲を変更する。例えば表示制御部２４は、利用者から十字キーの右向きボタンの押下操作がされるごとに、基準位置の座標を予め定めた量Δｘずつｘ軸正の方向にシフトさせる。同様に、利用者から十字キーの下向きボタンの押下操作がされるごとに、基準位置の座標を予め定めた量Δｙずつｙ軸正の方向にシフトさせる。そうして表示制御部２４は、ｎ回だけ右向きボタンが押下され、ｍ回だけ下向きボタンが押下された後では図５に例示するように、基準位置の座標を（Ｒx，Ｒy）＝（ｎ×Δｘ，ｍ×Δｙ）として、拡大ビットマップ画像の（Ｒx，Ｒy）から（Ｒx＋ｕi，Ｒy＋ｖi）までの範囲を切り出すことになる。
【００５１】
さらに表示制御部２４は、利用者から十字キーの左向きボタンの押下操作がされるごとに、基準位置の座標を予め定めた量Δｘずつｘ軸負の方向にシフトさせる。同様に、利用者から十字キーの下向きボタンの押下操作がされるごとに、基準位置の座標を予め定めた量Δｙずつｙ軸負の方向にシフトさせる。なお、表示制御部２４は、利用者の指示操作に応じて基準位置を変更したときに、変更後の基準位置の座標（Ｒx，Ｒy）が、Ｒx＜０であればＲx＝０とし、Ｒy＜０であればＲy＝０とする。また、β×ｕi＞Ｒx＋ｕiであればＲx＝β×ｕi−ｕiとし、β×ｖi＞Ｒy＋ｖiであればＲy＝β×ｖi−ｖiとする。
【００５２】
そして表示制御部２４は、基準位置が変化するごとに、その変化後の座標（Ｒx，Ｒy）から（Ｒx＋ｕi，Ｒy＋ｖi）の範囲を拡大ビットマップ画像から切り出す。
【００５３】
表示制御部２４は、ｉ番目の要素データに対応して切り出して得た拡大ビットマップ画像の一部（部分画像）について、ｉ番目の要素データの配置位置を表す情報（要素データに含まれる描画範囲または画像要素外接矩形を特定する情報）が表す領域に配置する。
【００５４】
すなわち、各要素データ（ｉ＝１，２，…Ｎ）に対応して、表示部１４の（ξ＋ｕi_lt，η＋ｖi_lt）から（ξ＋ｕi_rb，η＋ｖi_rb）の範囲に、拡大ビットマップ画像の座標系で（Ｒx，Ｒy）から（Ｒx＋ｕi，Ｒy＋ｖi）の範囲から切り出された部分画像を配置する。
【００５５】
なお、表示制御部２４は、表示部１４に表示する場合だけでなく、この表示の指示を指定された宛先に対して送信してもよい。この宛先は例えば利用者の携帯端末などでよい。宛先となった装置では、この指示に従って画像を表示する。この場合、表示部１４のサイズとされていた情報は、この携帯端末など、表示を行うデバイス（いわば表示手段）のサイズ（縦横の画素数等）とする。
【００５６】
［動作］
以上のように構成された本実施の形態の文書処理装置１は、次のように動作する。以下の動作例では、説明のため、図６に例示するように、文字による表題部Ａと、サブタイトル部Ｂと、第１の段落部Ｃと、第２の段落部Ｄと、図表部Ｅと、グラフ表題部Ｆと、グラフ部Ｇとを含む文書（ビットマップ画像であるとする）を、処理対象文書とし、この処理対象文書のサイズ（幅ｗ、高さｈ）は、表示部１４の画素数（幅Ｐx、高さＰy）に一致していることとする（この場合、α′＝１となる）。
【００５７】
文書処理装置１は、図７に例示する処理を開始し、レイアウト解析の処理により、上記表題部Ａと、サブタイトル部Ｂと、第１の段落部Ｃと、第２の段落部Ｄと、図表部Ｅと、グラフ表題部Ｆと、グラフ部Ｇとのそれぞれを文書要素として特定し（Ｓ１）、それぞれが占める領域を表す情報と、それぞれの部分の画像とを取り出して互いに関連づけた要素データとして記憶部１２に記録する（Ｓ２）。一例として、表題部Ａについては、図８（ａ）に示すように幅ｕ1、高さｖ1の画像が取り出される。
【００５８】
文書処理装置１は、処理Ｓ２で各文書要素の占める範囲から取り出した画像を指定された拡大率βで拡大した拡大ビットマップ画像（要素画像）を生成する（Ｓ３）。表題部Ａについては、この結果は図８（ｂ）に示すように、幅β×ｕ1、高さβ×ｖ1の画像となる。文書処理装置１は、さらに処理Ｓ３における拡大処理により、文書要素ごとに得られた拡大ビットマップ画像から、それぞれ元の文書要素のサイズの領域の部分画像を切り出す（Ｓ４）。表題部Ａについては、拡大処理により得られた幅β×ｕ1、高さβ×ｖ1の画像から、元の幅ｕ1、高さｖ1の部分画像を切り出す（図８（ｂ）を参照）。なお、この切り出しの範囲は、当初は拡大ビットマップ画像の左上隅を含む部分とすればよい。この結果は、表題部Ａについては、図８（ｃ）に示すようなものとなる。
【００５９】
文書処理装置１は、レイアウト解析により見いだされた文書要素ごとに、この切り出しを行い、切り出して得られた各文書要素ごとの部分画像を、それぞれの文書要素の元の配置位置に配置する（Ｓ５）。この配置の結果は、例えば図８（ｄ）にその一部を示すようなものとなる。
【００６０】
文書処理装置１は、この部分画像をそれぞれ配置した後の画像を、表示部１４に表示する。また、文書処理装置１は、利用者から切り出しの範囲を移動する指示が行われるごとに、処理Ｓ４で切り出す範囲を変化させ（Ｓ６）、処理Ｓ４から繰り返して処理を行う。
【００６１】
本実施の形態によると、利用者が切り出し範囲を右方向に移動させる操作を行うと、すべての文書要素において切り出し範囲が右方向に移動する（ただし既に右端が表示されている文書要素は除く）。つまり、文書処理装置１は、各文書要素が処理対象文書のうちに占める範囲の中で、それぞれ対応する文書要素の要素画像の一部を切り出して表示し、当該切り出し範囲を指定された方向に、指定された速度で移動させることとなる。
【００６２】
また、ここでは利用者の操作により切り出しの範囲を変化させる例としているが、これに限らず、文書処理装置１は、予め定めたタイミングごとに、切り出し範囲を右方向に予め定めた量だけ移動させることとしてもよい。また、切り出し範囲が拡大ビットマップ画像の右端に至った場合は、切り出し範囲を下方向に予め定めた量だけ移動させ、さらに拡大ビットマップ画像の左端を含む位置に移動させてもよい。これによると、各文書要素がラスタスキャン順（一ラインごとに左から右へ、右端に至ると、次のラインの左端へ移動することで、左上隅から右下隅へと至る順）にスクロール表示されることになる。
【００６３】
この例では図９に示すように、文書要素が一斉にスクロール表示される（図９（ａ））。そしてそれぞれ終点（１ラインのみの場合は右端に至ったところ、複数ラインある場合は右下隅に至ったところ）に達した文書要素のスクロールが停止し（図９（ｂ）：サブタイトル部Ｂは終点に達している）、未だ終点に達していない文書要素のスクロールが継続されるということになる（図９（ｃ）：表題部Ａと、第１の段落部Ｃとは未だ終点に達していない）。
【００６４】
［変形例１］
本実施の形態では、すべてのスクロールが同時期に終了することとなるよう、文書要素ごとにスクロールの速度（１回あたり、または単位時間当たりの切り出し範囲の移動量）を異ならせてもよい。具体的にｉ番目の文書要素の総スクロール量をＳiとする。総スクロール量Ｓiは、文書要素がＸ軸方向にのみスクロールする場合（Ｙ軸方向にはスクロールしない場合）は、文書要素の幅ｕiに等しい。また、Ｙ軸方向にもスクロールする場合は、幅ｕiにライン数（Ｙ軸方向への移動回数）を乗じた値となる。ライン数は、Ｙ軸方向へのスクロール量ΔＳy_iで文書要素の高さｖiを除した値を超えない最大の整数とすればよい。なお、ｉ番目の文書要素におけるＹ軸方向へのスクロール量ΔＳy_iは０より大きく文書要素の高さｖi以下の値とする。例えばｖiに０より大きく１以下の定数γを乗じた値γ・ｖiをΔＳy_iとすればよい。
【００６５】
次に、各文書要素の総スクロール量Ｓi（ｉ＝１，２，…Ｎ）のうち、これが最も長いものｍａｘ［Ｓi］（以下この値をＳmaxとする）を選択する。なお、ｍａｘ［Ｑi］は、Ｑi（ｉ＝１，２，…）のうち、最大のＱiを意味する。また、最大ステップ量Δｘmaxを、各文書要素の横幅ｕiのうち最小のものｍｉｎ［ｕi］を選択し、０より大きく当該ｍｉｎ［ｕi］以下の値とする。ここでｍｉｎ［Ｑi］は、Ｑi（ｉ＝１，２，…）のうち、最小のＱiを意味する。例えばｍｉｎ［ｕi］に１以下の定数γを乗じた値γ・ｍｉｎ［ｕi］をΔｘmaxとすればよい。また、このΔｘmaxは、文書要素に含まれる文字のサイズ（フォントサイズ）に応じて調整してもよい。例えば基準となるフォントサイズを予め定めておき、当該基準となるフォントサイズと、実際のフォントサイズとの比εをさらに乗じて、γ・ε・ｍｉｎ［ｕi］をΔｘmaxとすればよい。この場合、Δｘmax＞ｍｉｎ［ｕi］となったときは、Δｘmax＝ｍｉｎ［ｕi］に補正する。
【００６６】
そしてｉ番目の文書要素のスクロール速度（１回あたり、または単位時間あたりの切り出し範囲の移動量）Δｘiを、Δｘi＝（Ｓi／Ｓmax）×Δｘmaxとして求める。これによると、文書要素ごとに定められる総スクロール量の大きさによって１回あたり、ないし単位時間当たりのスクロール量（切り出し範囲の移動量）が、次のような条件を満足するように決定される。
【００６７】
すなわちこの例では、Ｓiまでの移動にかかる総移動回数（総移動時間）は、
Ｓi／Δｘi＝Ｓmax／Δｘmax
となり、ｉに関わらず一定の値となる。つまり、どの文書要素においても同じ回数（同じ時間）でスクロールが完了する。
【００６８】
［変形例２］
また本実施の形態では、文書要素ごとに、文書要素に含まれる画像が文字列であるか文字列でない（線図、絵柄などである）かによって１回あたり、ないし単位時間当たりのスクロール量を異ならせてもよい。なお、文書要素に含まれる画像が文字列であるか否かは、処理対象文書がＰＤＦ等、描画命令を含む場合は、各文書要素に係る描画命令が文字列を描画する命令であるか否かにより判断でき、処理対象文書がビットマップ画像である場合は、広く知られたテキスト・イメージ分離の処理により行うことができる。
【００６９】
［変形例３］
さらに文書要素検出部２２が検出したｉ番目の文書要素のサイズ、つまり幅ｕiまたは高さｖiが、予め定めたしきい値Ｔｈを下回る場合、当該ｉ番目の文書要素を、それに隣接する文書要素と結合してもよい。あるいは、隣接する文書要素に接しない範囲で幅、高さを拡大してもよい。
【００７０】
［実施形態の効果］
本実施の形態によると、各文書要素の内容を拡大し、元の文書要素が配置されていた領域内でそれぞれスクロール表示することで、表示部のサイズによらず、文書全体のレイアウトを維持しながら、レイアウトされた文書要素の各々を拡大表示できる。
【符号の説明】
【００７１】
１ 文書処理装置、１１ 制御部、１２ 記憶部、１３ 操作部、１４ 表示部、２１ 文書情報受入部、２２ 文書要素検出部、２３ 要素画像生成部、２４ 表示制御部。
【特許請求の範囲】
【請求項１】
複数の文書要素を含む文書情報を、処理対象文書として受け入れる手段と、
前記受け入れた処理対象文書から、前記文書要素の各々を検出する手段と、
前記検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成する手段と、
当該文書要素が前記処理対象文書のうちに占める範囲の中で、対応する文書要素の要素画像を表示するよう制御する表示制御手段と、
を含むことを特徴とする文書処理装置。
【請求項２】
前記表示制御手段は、前記各文書要素が前記処理対象文書のうちに占める範囲の中で、それぞれ対応する文書要素の要素画像の一部を切り出して表示し、当該切り出し範囲を指定された方向に、指定された速度で移動させて表示するよう制御する請求項１記載の文書処理装置。
【請求項３】
コンピュータを、
複数の文書要素を含む文書情報を、処理対象文書として受け入れる手段と、
前記受け入れた処理対象文書から、前記文書要素の各々を検出する手段と、
前記検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成する手段と、
当該文書要素が前記処理対象文書のうちに占める範囲の中で、対応する文書要素の要素画像を表示するよう制御する表示制御手段と、
として機能させるプログラム。
【請求項１】
複数の文書要素を含む文書情報を、処理対象文書として受け入れる手段と、
前記受け入れた処理対象文書から、前記文書要素の各々を検出する手段と、
前記検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成する手段と、
当該文書要素が前記処理対象文書のうちに占める範囲の中で、対応する文書要素の要素画像を表示するよう制御する表示制御手段と、
を含むことを特徴とする文書処理装置。
【請求項２】
前記表示制御手段は、前記各文書要素が前記処理対象文書のうちに占める範囲の中で、それぞれ対応する文書要素の要素画像の一部を切り出して表示し、当該切り出し範囲を指定された方向に、指定された速度で移動させて表示するよう制御する請求項１記載の文書処理装置。
【請求項３】
コンピュータを、
複数の文書要素を含む文書情報を、処理対象文書として受け入れる手段と、
前記受け入れた処理対象文書から、前記文書要素の各々を検出する手段と、
前記検出した文書要素の画像のそれぞれを、指定された分だけ拡大した要素画像を生成する手段と、
当該文書要素が前記処理対象文書のうちに占める範囲の中で、対応する文書要素の要素画像を表示するよう制御する表示制御手段と、
として機能させるプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１１−１３７９１（Ｐ２０１１−１３７９１Ａ）
【公開日】平成２３年１月２０日（２０１１．１．２０）
【国際特許分類】
【出願番号】特願２００９−１５５５０４（Ｐ２００９−１５５５０４）
【出願日】平成２１年６月３０日（２００９．６．３０）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
【公開日】平成２３年１月２０日（２０１１．１．２０）
【国際特許分類】
【出願日】平成２１年６月３０日（２００９．６．３０）
【出願人】（０００００５４９６）富士ゼロックス株式会社 (21,908)
【Ｆターム（参考）】
[ Back to top ]