筆記帳の画像を取り込み、表示可能な情報処理端末及びその制御プログラム、並びに筆記帳
【課題】情報処理端末において、手帳やノートのような筆記帳の画像を取り込み、取り込み画像を閲覧する際に、あたかも１冊の筆記帳が存在するような使い勝手を実現する。
【解決手段】実際の筆記帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な情報処理端末は、実際の筆記帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む筆記帳画像データを格納する記録媒体と、実際の筆記帳のページの画像であるページ画像を撮像する撮像手段と、筆記帳画像データに記録されたページ画像を表示する表示手段と、撮像手段により筆記帳のページ画像が撮像されたときに、撮像されたページ画像のページと同じページの筆記帳画像データのページ画像を、当該撮像されたページ画像に置換する制御手段とを備える。
【解決手段】実際の筆記帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な情報処理端末は、実際の筆記帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む筆記帳画像データを格納する記録媒体と、実際の筆記帳のページの画像であるページ画像を撮像する撮像手段と、筆記帳画像データに記録されたページ画像を表示する表示手段と、撮像手段により筆記帳のページ画像が撮像されたときに、撮像されたページ画像のページと同じページの筆記帳画像データのページ画像を、当該撮像されたページ画像に置換する制御手段とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、手帳やノート等の筆記帳の画像を読み取り、読み取った筆記帳の画像を管理する情報処理端末及びそのような情報処理端末によってページの画像が読み取られる筆記帳に関する。
【背景技術】
【０００２】
従来より、手書きされた情報を取り込み、電子的に管理する情報処理装置が知られている（例えば、特許文献１、２参照）。
【０００３】
近年の携帯電話の高機能化やスマートフォンの普及により、種々の情報を小型の情報処理端末で管理し、携帯するという用途が増加している。このため、例えば、メモや手帳の内容をスマートフォンのような情報処理端末で撮影して取り込み、迅速な検索や閲覧を可能とするアプリケーションがある。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−０３４５３２号公報
【特許文献２】特開２００４−０７０５１５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、そのようなアプリケーションでは、取り込んだメモや手帳の画像を表示する際、取り込んだ画像のみが表示され、画像を取り込んでいないメモや手帳のページについて画像は表示されない。このような画像の表示方法では、ユーザは断片的にしかページ画像を閲覧することができず、本来連続してページが存在する手帳の各ページを閲覧する場合に、情報が記録されていないページも含めて連続的にページの内容を閲覧することができない。
【０００６】
本発明は、スマートフォンのような情報処理端末において、手帳やノート等の筆記帳の画像を取り込み、取り込み画像を閲覧する際に、あたかも１冊の筆記帳が存在するような使い勝手を実現することを目的とする。
【課題を解決するための手段】
【０００７】
本発明に係る情報処理端末は、実際の筆記帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な装置である。情報処理端末は、実際の筆記帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む筆記帳画像データを格納する記録媒体と、実際の筆記帳のページの画像であるページ画像を撮像する撮像手段と、筆記帳画像データに記録されたページ画像を表示する表示手段と、撮像手段により筆記帳のページ画像が撮像されたときに、撮像されたページ画像のページと同じページの筆記帳画像データのページ画像を、当該撮像されたページ画像に置換する制御手段とを備える。
【０００８】
本発明に係るプログラムは、情報処理端末を、複数ページを有する実際の筆記帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な筆記帳データ表示装置として機能させるためのプログラムである。ここで、筆記帳データ表示装置は、実際の筆記帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む筆記帳画像データを格納する記録媒体を備える。
【０００９】
そのプログラムは、情報処理端末の撮像手段により実際の筆記帳のページの画像であるページ画像を撮像させる撮像機能と、情報処理端末の表示手段に、筆記帳画像データに記録されたページ画像を表示する表示機能と、を情報処理端末の制御手段に実行させる。記録機能においては、撮像手段により筆記帳のページ画像が撮像されたときに、撮像されたページ画像のページと同じページの筆記帳画像データのページ画像を、当該撮像されたページ画像に置換する。
【００１０】
本発明に係る筆記帳は、上述の情報処理端末によってページの画像が読み取られる筆記帳であって、情報処理端末の筆記帳画像データが管理する全てのページの紙面を含んでいる。
【発明の効果】
【００１１】
本発明によれば、筆記帳のページ画像を取り込み、取り込んだページ画像を閲覧可能な情報処理端末（例えば、スマートフォン）において、画像を取り込んだページのみならず、画像を取り込まなかったページについてもページの画像を表示する。これにより、情報処理端末において、ユーザがあたかも１冊の筆記帳が存在するように感じられる使い勝手を実現できる。
【図面の簡単な説明】
【００１２】
【図１】本実施形態の情報処理端末の構成を示す図
【図２】情報処理端末のデータ格納部に格納される情報を説明した図
【図３】手帳管理情報及びページ画像管理情報を説明した図
【図４】情報処理端末によりページの画像が取り込まれる手帳のページレイアウトの一例を示した図
【図５（ａ）】情報処理端末によりページの画像が取り込まれる手帳のページレイアウトの別の例を示した図
【図５（ｂ）】情報処理端末によりページの画像が取り込まれる手帳のページレイアウトの別の例を示した図
【図５（ｃ）】情報処理端末によりページの画像が取り込まれる手帳のページレイアウトの別の例を示した図
【図６】画像を取り込んだページのページ画像の表示例を示す図
【図７】情報処理端末における画像取り込み処理のフローチャート
【図８】ページ画像撮影時の情報処理端末の表示画面を示した図
【図９（ａ）】撮影したページ画像を保存するか否かをユーザに問い合わせる画面を説明した図
【図９（ｂ）】撮影したページ画像を保存するか否かをユーザに問い合わせる画面を説明した図
【図９（ｃ）】ページ番号の入力画面を説明した図
【図１０】撮影したページ画像、手帳画像データ及びマーカー画像データの関係を説明した図
【図１１】画像を取り込んでないページのページ画像の表示の例を示す図
【図１２】情報処理端末のページ画像表示時の動作のフローチャート
【図１３】情報処理端末のページ切り替え表示時の動作のフローチャート
【図１４】マーカー画像付加のためのペンの設定及びマーカー画像を説明した図
【図１５】マーカー画像データを説明した図
【図１６】しおり機能を説明するための図
【発明を実施するための形態】
【００１３】
以下、添付の図面を参照して、本発明の実施の形態を説明する。
【００１４】
１．概要
以下に説明する情報処理端末は、ユーザによるタッチ操作によりユーザからの指示を受け付け可能であるスマートフォンのような携帯型の情報機器である。その情報処理端末は、手帳ビューワアプリケーション（以下「手帳ビューワアプリ」という）を実装している。この手帳ビューワアプリは、情報処理端末内において、スケジュール帳のような手帳の機能を仮想的に実現するものであり、実際の手帳における所望のページの画像を撮像し、撮像した画像データを、仮想的な手帳の当該ページのデータとして登録する。これにより、実際の手帳に記入された情報を取り込むことができる。そして、情報処理装置は、ユーザの操作にしたがい、取り込んだ画像の中から所望のページの画像を検索し、表示することが可能である（図６参照）。これにより、ユーザは、情報処理端末内において、あたかも１冊の手帳が存在するように操作することができる。以下、この情報処理端末の詳細を説明する。
【００１５】
２．情報処理端末の構成
図１を参照して、本実施形態の情報処理端末の構成を説明する。情報処理端末１０は、画像を撮影する撮像部１１と、画像等の情報を表示するディスプレイ部１３と、タッチパネル部１５ａと、操作ボタン１５ｂとを備えている。さらに、情報処理端末１０は、Ｗｉ−Ｆｉや３Ｇ等の通信方式にしたがい無線通信を可能とする通信部１７と、外部機器とデータ通信を行うための外部インタフェース部１８を備える。さらに、情報処理端末１０は、データ等を格納するデータ格納部１９と、データ格納部１９に対してデータをリード／ライトするデータ／リードライト部２０と、情報処理端末１０の動作を制御するコントローラ２１と、音声を出力する音声出力部１６とを備える。
【００１６】
ディスプレイ部１３は例えば液晶ディスプレイや有機ＥＬディスプレイで構成される。タッチパネル部１５ａは、ディスプレイ部１３の上面に重ねて配置され、ユーザによるタッチ操作を受け付ける。操作ボタン１５ｂは、情報処理端末の操作ボタンであるが、ディスプレイ部１３も、タッチパネル部１５ａを介してユーザにより操作される操作ボタンを表示可能である。
【００１７】
音声出力部１６は、音声を出力するための端子やデバイスであり、スピーカやイヤホンの入力端子が相当する。
【００１８】
外部インタフェース部１８は、外部機器と接続可能であり、ＵＳＢ（Universal Bus）やＨＤＭＩ（High Definition Multimedia Interface）等の所定のインタフェース規格に準拠して外部機器との間でデータ通信を行う。
【００１９】
データ格納部１９は、プログラムや種々のデータを格納する記録媒体であり、ハードディスク、半導体メモリまたは着脱可能なメモリカード等の記録媒体で構成され得る。図２に、データ格納部１９に格納される情報の例を示す。図２に示すように、データ格納部１９は、コントローラ２１により実行されるプログラム（ＯＳ、アプリケーションプログラム）３１と、手帳ビューワアプリによる手帳機能を実現する際に参照される管理情報３３と、手帳画像データ３５と、マーカー画像データ３７とを格納する。手帳画像データ３５は、撮像部１１で撮影されたページ画像のデータを処理した画像データと、ページ毎のデフォルトの画像データとを含む。マーカー画像データ３７は、ページ画像の取り込み後にユーザが任意に付加できるデータである（詳細は後述）。
【００２０】
２．１ 手帳管理情報及び手帳画像データ
図３は、手帳ビューワアプリによる手帳機能を実現する際に参照される手帳管理情報３３と手帳画像データ３５の構成例を説明した図である。
【００２１】
管理情報３３は、前回の手帳ビューワアプリを実行した際に最後に表示されたページを示す情報（最終表示ページ）と、最新に画像データが更新されたページを示す情報（最新更新ページ）と、しおり（詳細は後述）に関する情報とを対応づけて管理する情報である。最終表示ページは、手帳ビューワアプリ終了時に、その時点で表示されているページの値に更新される。
【００２２】
手帳画像データ３５は、情報処理端末１０が画像を取り込み可能な実際の手帳の各ページと、各ページに関連したページ画像を示す画像データと、各ページに付与されたマーカー画像とを対応づけて含む情報である。
【００２３】
これらの情報３３、３５は、手帳機能を実行する際に適宜コントローラ２１により読み出されて参照されたり、更新されたりされる。
【００２４】
２．２ 手帳のレイアウト
図４は、情報処理端末１０が画像を取り込む実際の手帳のページレイアウトの一例を示した図である。図４に示すように、本実施形態では、実際の手帳はスケジュール帳としている。手帳の見開きの左側には、一週間のカレンダーが印刷されており、見開きの右側は白紙のメモスペースとなっている。さらに、見開いたページ全体の四隅には、取り込み画像の切り出し、正規化のために使用されるマーカー２４ａ、２４ｂ、２４ｃ、２４ｄが印刷されている。なお、４つのマーカーのうち１つマーカー２４ａだけが向きが異なっている。これにより、取り込み画像の上下を識別することができる。また、各ページにはページ番号２６が印刷されている。なお、手帳のページのレイアウトは、図４に示す例に限られず、図５（ａ）〜図５（ｃ）に示すようなレイアウトでもよい。なお、本手帳は手帳画像データ３５が管理する全てのページの紙面を含んでいる。
【００２５】
３．情報処理端末の動作
以下、手帳ビューワアプリが実行された時の情報処理端末１０の動作について説明する。
【００２６】
図６は、情報処理端末１０において手帳ビューワアプリが起動されたときにディスプレイ部１３に表示される画面を示した図である。なお、手帳ビューワアプリは、情報処理端末１０上に表示された、手帳ビューワアプリ用の所定のアイコンがタッチされたときに起動される。図６に示すように、手帳ビューワアプリ起動時には、ディスプレイ部１３中央に、あるページのページ画像６１が表示されるとともに、表示画面上端部及び下端部において複数の操作ボタン４１、４１ａ、４１ｂ、…が表示される。ユーザは、これらの操作ボタン４１、…に対応する位置でタッチパネル部１５ａをタッチ操作することで情報処理端末１０に指示を与えることができる。
【００２７】
以下、情報処理端末１０の手帳機能実行時の動作として、ページ画像の取り込み時の動作と、ページ画像の表示時の動作について説明する。
【００２８】
３．１ ページ画像の取り込み
図７のフローチャートを参照して、ページ画像の取り込み時の動作を説明する。
【００２９】
ユーザにより操作ボタン４１ａが操作されると、撮像部１１が起動して、画像の撮影が可能になる。このとき、ディスプレイ部１３に、図８（ａ）に示すような画像撮影用の画面が表示される。画像撮影用の画面には、四隅に枠６５が表示される。ユーザは、この枠６５で囲まれる領域内に見開いた手帳のページの全体が収まるように情報処理端末１０の位置を調整し、シャッタボタン２２を操作する（図８（ｂ）参照）。この操作を受けて、撮像部１１は手帳のページの画像を撮影し、ページ画像データを生成する（Ｓ１１）。
【００３０】
次に、コントローラ２１は、生成したページ画像データから、四隅にあるマーク２４ａ〜２４ｄを検出する（Ｓ１２）。
【００３１】
マーク２４ａ〜２４ｄが検出できた場合（Ｓ１３でＹｅｓ）、検出した４つのマーク２４ａ〜２４ｄに基づき画像の切り出し、正規化を行う（Ｓ１４）。すなわち、コントローラ２１は、撮影された画像全体から４つのマーク２４ａ〜２４ｄで囲まれた領域を切り出す。また、コントローラ２１は、正規化として、４つのマーク２４ａ〜２４ｄに基づき、画像の歪みの補正（台形補正）や、画像サイズのリサイズを行う。さらに、コントローラ２１は、正規化した画像に含まれる「ページ」の値をＯＣＲ（Optical Character Reader）機能で読み取る（Ｓ１５）。具体的には、図４に示す例では、見開きページ下部にあるページの値２６をＯＣＲ機能で読み取る。
【００３２】
ＯＣＲ機能によりページの値がうまく読み取れた場合、図９（ａ）に示すような、ページ画像データを保存するか否かをユーザに問い合わせる画面４３が、ディスプレイ部１３に表示される。問い合わせ画面４３上には、認識されたページ４３ａが表示される。問い合わせ画面４３は、読み取られたページ画像６１上に重ねて表示される。問い合わせ画面４３で保存ボタン４３ｂがタッチされると（Ｓ１６）、読み取られたページ画像６１のデータが保存される（Ｓ１７）。再撮影ボタン４３ｃが選択されると、図８に示す撮影画面に戻り、上記の処理が繰り返される。
【００３３】
一方、ＯＣＲ機能によりページの値がうまく読み取れなかった場合は、図９（ｂ）に示すような、ページの値が表示されていない問い合わせ画面４３が表示される。画像データを保存する場合（Ｓ１６）、ページの値の入力を要求する（Ｓ１９）。ページの値の入力のため、図９（ｃ）に示すようなページ入力画面４４が表示される。入力画面４４は、ピーカと呼ばれる、数字を回転させてページの値を入力できる画面である。本実施形態では、ページの指定は左ページの値のみを入力するようになっている。右ページの値は左ページの値から自動的に求める。ページは、３桁の数字で入力可能であり、左ページの値のみを入力すればよいことから、１の位は奇数のみが選択できるようになっている。ページの値が入力されると、読み取られたページ画像６１のデータがデータ格納部１９に保存される（Ｓ１７）。
【００３４】
ここで、ステップＳ１７におけるページ画像データの保存処理について具体的に説明する。本実施形態では、情報処理端末１０内部で仮想的に手帳を実現する。このため、情報処理端末１０は手帳画像データ３５を内部に格納する。手帳画像データ３５は、情報処理端末１０内部で仮想的に実現される手帳（手帳画像データ）の各ページに対する画像を管理している（図３（ｂ）参照）。すなわち、各ページと、そのページに表示されるべきページ画像データとを対応づけている。
【００３５】
ページ画像データの保存処理は、手帳画像データ３５において管理する、あるページの画像のデータを、読み取ったページ画像のデータに差し替えることにより実施される。例えば、図１０に示すように、第５−６ページ目の画像を撮影して読み取った場合、手帳画像データ３５の第５−６ページについて、現在管理されている画像（一番最初はデフォルト画像）を、読み取った画像（撮影した画像）のデータに置換する。すなわち、手帳画像データ３５において、元のページ画像が新たに撮影されたページ画像に差し替えられる（Ｓ１７）。このように、本実施形態の情報処理端末１０によれば、手帳画像データ３５において、画像が撮影されたページについて、元のページ画像のデータが新たに撮影されたページ画像のデータに置換されていく。
【００３６】
その後、手帳画像データ３５の更新（Ｓ１７）にともない、手帳管理情報３３が更新される（Ｓ１８）。すなわち、手帳管理情報３３において最新更新ページの値が更新される。
【００３７】
以上のようにして、情報処理端末１０は、手帳のページ画像を撮影して記録することにより、手帳画像データ３５を更新する。画像の取り込みが終了すると、取り込まれたばかりのページ画像がディスプレイ部１３に表示される。
【００３８】
３．２ ページ画像表示
前述のように、図６は、手帳ビューワアプリによるページ画像の表示例を示した図である。図６は、撮影されて、取り込まれたページ画像の表示例を示している。ページ画像の取り込みがないページについては、図１１（ａ）に示すように、事前に用意された各ページのデフォルト画像、すなわち、手帳のレイアウトをそのまま示した画像が表示される。なお、図１１（ａ）に示すような画像に代えて、図１１（ｂ）に示すような、白紙の画像、すなわち、ページ番号のみを表示してもよい。
【００３９】
図１２のフローチャートを参照して、ページ画像表示時の動作を説明する。情報処理端末１０において手帳ビューワアプリが起動されると、コントローラ２１は、手帳管理情報３３を参照し、最終表示ページ情報を取得する（Ｓ３１）。そして、コントローラ２１は、手帳画像データ３５で管理される、最終表示ページ情報が示すページのページ画像をディスプレイ部１３に表示する（Ｓ３２）。このように、情報処理端末１０は、手帳ビューワアプリ起動時には、前回の手帳ビューワアプリ起動時において最後に表示されていたページの画像を表示する。なお、手帳ビューワアプリ起動時に表示されるページは、最も新しく撮像されたページの画像を表示するようにしてもよい。
【００４０】
本実施形態の情報処理端末１０では、ユーザによる、タッチパネル部１５ａ上でスライド操作があると、表示されるページが切り替わるように構成される。例えば、ユーザがタッチパネル部１５ａ上で指を左から右へスライドさせたときは、表示するページを前のページに切り替えられ、右から左へスライドさせたときは、表示するページを次のページに切り替えられる。また、スライド操作に加えて、直接的に数値を入力することで切り替え先のページを指定してもよい。
【００４１】
図１３を参照して、ページ切り替え時の動作を説明する。ユーザによるページ切り替えの操作または指示があると（Ｓ４１）、コントローラ２１は、現在のページとユーザのスライド操作または入力されたページ値に基づき、切り替え後のページを認識する。そして、コントローラ２１は、手帳画像データ３５を参照し、切り替え後のページのページ画像データを取得し（Ｓ４２）、そのページ画像データをディスプレイ部１３に表示する（Ｓ４３）。手帳画像データ３５は、全てのページについてページ画像データを有している。ページ画像が取り込まれたページについては、取り込まれたページの画像が表示され、一方、ページ画像がまだ取り込まれていないページについては、デフォルトのページ画像（すなわち、白紙またはページレイアウト画像のみを含むページ画像）が表示される。このように、画像を取り込んでいないページについても、ページ画像が表示されることから、ユーザはあたかも１冊の手帳が存在するように扱うことができ、ユーザの使い勝手を向上できる。
【００４２】
３．３ その他の機能
以下、情報処理端末１０のその他の機能についていくつか説明する。
【００４３】
（１）マーカー機能
本実施形態の情報処理端末１０では、ユーザが、ページ画像の任意の箇所にマーカー（例えば、蛍光ペンにより描かれたように見える画像）を付すことを可能とするための機能（マーカー機能）を有する。
【００４４】
図６に示すように、あるページの画像を表示中に、ユーザにより編集ボタン４１ｆが選択されると、マーカー機能が実行され、図１４に示すような画面が表示される。図１４に示すように、ペンの太さ、色が指定可能となっている。ユーザにより選択されたペンの太さ、色で、ユーザによりタッチパネル部１５ａ上でなされた操作の軌跡がマーカー画像として形成される。
【００４５】
マーカー画像は、図１５に示すように、手帳画像データ３５において、ページ画像と関連づけられる。手帳ビューワー機能で表示される際には、図１５（ｃ）に示すように、ページ画像データにマーカー画像が重畳して表示される。
【００４６】
（２）しおり機能
しおり機能とは、ユーザが、表示させたいページを事前に設定しておく機能である。ユーザにより事前に設定されたしおりが選択されると、そのしおりが示すページのページ画像が表示される。しおりの情報は図３（ａ）に示すように手帳管理情報３３において管理される。情報処理端末１０は３個のしおりを設定可能である。
【００４７】
図６に示すような画面状態で操作ボタン４１ｂがタッチされると、図１６に示す画面が表示される。あるページ画像が表示された状態で、操作ボタン４５ａがタッチされると、そのページにしおりが設定される。すなわち、手帳管理情報３３のしおり情報が更新される。また、操作ボタン４５ｂがタッチされると、しおりの選択が可能になり、ユーザにより一のしおりが選択されると、選択されたしおりが指し示すページのページ画像が表示される。
【００４８】
（３）手帳保存
情報処理端末１０は、現在の手帳データを保存するための機能を有する。この機能は、図６に示すような画面状態で操作ボタン４１ｄが操作されることで実行される。具体的には、操作ボタン４１ｄが操作されると、コントローラ２１は、現在の１冊分の手帳画像データをＰＤＦ形式の１つのファイルに変換して、データ格納部１９に保存する。この保存処理の実行により、変換前の手帳画像データは削除される。
【００４９】
（４）過去手帳のプレビュー
情報処理端末１０は、過去にＰＤＦ形式に変換して保存した手帳データを表示するための機能を有する。この機能は、図６に示すような画面状態で操作ボタン４１ｃが操作されることで実行される。具体的には、操作ボタン４１ｃが操作されると、過去に保存された複数の手帳データを示すアイコンがディスプレイ部１３に表示される。ユーザにより、表示された複数のアイコンの中から１つが選択されると、選択された手帳データの所定ページ（例えば、１ページ目）の画像データが表示される。
【００５０】
（５）ページ画像の削除
情報処理端末１０は、ページ単位でページ画像を削除することが可能である。図６に示すようにページ画像が表示された状態で、操作ボタン４１ｅが操作されると、ページ画像の削除が可能となる。ここで、ページ画像の削除については、現在表示されているページの画像のみを削除してもよいし、全ページの画像を削除するようにしてもよい。ここで、ページ画像の削除とは、取り込まれたページ画像の削除を意味する。取り込まれたページ画像が削除された場合、手帳画像データ３５においてデフォルトのページ画像へ差し替えられる。
【００５１】
４．まとめ
以上のように、本実施形態の情報処理装置１０によれば、実際の手帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な情報処理端末である。情報処理装置１０は、実際の手帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む手帳画像データを格納するデータ格納部１９と、実際の手帳のページの画像であるページ画像を撮像する撮像部１１と、手帳画像データに記録されたページ画像を表示するディスプレイ部１３と、撮像部１１により手帳のページ画像が撮像されたときに、撮像されたページ画像のページと同じページの手帳画像データのページ画像を、当該撮像されたページ画像に置換するコントローラ２１とを備える。
【００５２】
この構成により、情報処理装置１０は、実際の手帳においてユーザが記入した内容を画像データとして取り込み、仮想的な手帳のページ画像と差し替える。これにより、ユーザは、あたかも１冊の手帳が情報処理装置１０内に存在するように取り扱うことができる。
【００５３】
なお、上記の実施形態では、スマートフォンの例を説明したが、本発明の思想は、スマートフォンに限らず、タブレット型やノート型のパーソナルコンピュータや、その他の種々の情報処理機器に対しても適用できることは言うまでもない。
【００５４】
また、上記の実施形態では、ページ画像を取り込み可能な実際の手帳を、スケジュール帳としたが、画像を取り込む対象はこれに限られない。大学ノート、自由帳、メモ帳、その他の帳面を含む種々の種類の筆記帳に対して本発明の思想は適用できる。
【符号の説明】
【００５５】
１０ 情報処理端末
１１ 撮像部
１３ ディスプレイ部
１５ａ タッチパネル部
１５ｂ 操作ボタン
１６ 音声出力部
１８ 外部インタフェース
１７ 通信部
１９ データ格納部
２０ データリード／ライト部
２１ コントローラ
３３ 手帳管理情報
３５ 手帳画像データ
３７ マーカー画像データ
【技術分野】
【０００１】
本発明は、手帳やノート等の筆記帳の画像を読み取り、読み取った筆記帳の画像を管理する情報処理端末及びそのような情報処理端末によってページの画像が読み取られる筆記帳に関する。
【背景技術】
【０００２】
従来より、手書きされた情報を取り込み、電子的に管理する情報処理装置が知られている（例えば、特許文献１、２参照）。
【０００３】
近年の携帯電話の高機能化やスマートフォンの普及により、種々の情報を小型の情報処理端末で管理し、携帯するという用途が増加している。このため、例えば、メモや手帳の内容をスマートフォンのような情報処理端末で撮影して取り込み、迅速な検索や閲覧を可能とするアプリケーションがある。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−０３４５３２号公報
【特許文献２】特開２００４−０７０５１５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、そのようなアプリケーションでは、取り込んだメモや手帳の画像を表示する際、取り込んだ画像のみが表示され、画像を取り込んでいないメモや手帳のページについて画像は表示されない。このような画像の表示方法では、ユーザは断片的にしかページ画像を閲覧することができず、本来連続してページが存在する手帳の各ページを閲覧する場合に、情報が記録されていないページも含めて連続的にページの内容を閲覧することができない。
【０００６】
本発明は、スマートフォンのような情報処理端末において、手帳やノート等の筆記帳の画像を取り込み、取り込み画像を閲覧する際に、あたかも１冊の筆記帳が存在するような使い勝手を実現することを目的とする。
【課題を解決するための手段】
【０００７】
本発明に係る情報処理端末は、実際の筆記帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な装置である。情報処理端末は、実際の筆記帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む筆記帳画像データを格納する記録媒体と、実際の筆記帳のページの画像であるページ画像を撮像する撮像手段と、筆記帳画像データに記録されたページ画像を表示する表示手段と、撮像手段により筆記帳のページ画像が撮像されたときに、撮像されたページ画像のページと同じページの筆記帳画像データのページ画像を、当該撮像されたページ画像に置換する制御手段とを備える。
【０００８】
本発明に係るプログラムは、情報処理端末を、複数ページを有する実際の筆記帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な筆記帳データ表示装置として機能させるためのプログラムである。ここで、筆記帳データ表示装置は、実際の筆記帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む筆記帳画像データを格納する記録媒体を備える。
【０００９】
そのプログラムは、情報処理端末の撮像手段により実際の筆記帳のページの画像であるページ画像を撮像させる撮像機能と、情報処理端末の表示手段に、筆記帳画像データに記録されたページ画像を表示する表示機能と、を情報処理端末の制御手段に実行させる。記録機能においては、撮像手段により筆記帳のページ画像が撮像されたときに、撮像されたページ画像のページと同じページの筆記帳画像データのページ画像を、当該撮像されたページ画像に置換する。
【００１０】
本発明に係る筆記帳は、上述の情報処理端末によってページの画像が読み取られる筆記帳であって、情報処理端末の筆記帳画像データが管理する全てのページの紙面を含んでいる。
【発明の効果】
【００１１】
本発明によれば、筆記帳のページ画像を取り込み、取り込んだページ画像を閲覧可能な情報処理端末（例えば、スマートフォン）において、画像を取り込んだページのみならず、画像を取り込まなかったページについてもページの画像を表示する。これにより、情報処理端末において、ユーザがあたかも１冊の筆記帳が存在するように感じられる使い勝手を実現できる。
【図面の簡単な説明】
【００１２】
【図１】本実施形態の情報処理端末の構成を示す図
【図２】情報処理端末のデータ格納部に格納される情報を説明した図
【図３】手帳管理情報及びページ画像管理情報を説明した図
【図４】情報処理端末によりページの画像が取り込まれる手帳のページレイアウトの一例を示した図
【図５（ａ）】情報処理端末によりページの画像が取り込まれる手帳のページレイアウトの別の例を示した図
【図５（ｂ）】情報処理端末によりページの画像が取り込まれる手帳のページレイアウトの別の例を示した図
【図５（ｃ）】情報処理端末によりページの画像が取り込まれる手帳のページレイアウトの別の例を示した図
【図６】画像を取り込んだページのページ画像の表示例を示す図
【図７】情報処理端末における画像取り込み処理のフローチャート
【図８】ページ画像撮影時の情報処理端末の表示画面を示した図
【図９（ａ）】撮影したページ画像を保存するか否かをユーザに問い合わせる画面を説明した図
【図９（ｂ）】撮影したページ画像を保存するか否かをユーザに問い合わせる画面を説明した図
【図９（ｃ）】ページ番号の入力画面を説明した図
【図１０】撮影したページ画像、手帳画像データ及びマーカー画像データの関係を説明した図
【図１１】画像を取り込んでないページのページ画像の表示の例を示す図
【図１２】情報処理端末のページ画像表示時の動作のフローチャート
【図１３】情報処理端末のページ切り替え表示時の動作のフローチャート
【図１４】マーカー画像付加のためのペンの設定及びマーカー画像を説明した図
【図１５】マーカー画像データを説明した図
【図１６】しおり機能を説明するための図
【発明を実施するための形態】
【００１３】
以下、添付の図面を参照して、本発明の実施の形態を説明する。
【００１４】
１．概要
以下に説明する情報処理端末は、ユーザによるタッチ操作によりユーザからの指示を受け付け可能であるスマートフォンのような携帯型の情報機器である。その情報処理端末は、手帳ビューワアプリケーション（以下「手帳ビューワアプリ」という）を実装している。この手帳ビューワアプリは、情報処理端末内において、スケジュール帳のような手帳の機能を仮想的に実現するものであり、実際の手帳における所望のページの画像を撮像し、撮像した画像データを、仮想的な手帳の当該ページのデータとして登録する。これにより、実際の手帳に記入された情報を取り込むことができる。そして、情報処理装置は、ユーザの操作にしたがい、取り込んだ画像の中から所望のページの画像を検索し、表示することが可能である（図６参照）。これにより、ユーザは、情報処理端末内において、あたかも１冊の手帳が存在するように操作することができる。以下、この情報処理端末の詳細を説明する。
【００１５】
２．情報処理端末の構成
図１を参照して、本実施形態の情報処理端末の構成を説明する。情報処理端末１０は、画像を撮影する撮像部１１と、画像等の情報を表示するディスプレイ部１３と、タッチパネル部１５ａと、操作ボタン１５ｂとを備えている。さらに、情報処理端末１０は、Ｗｉ−Ｆｉや３Ｇ等の通信方式にしたがい無線通信を可能とする通信部１７と、外部機器とデータ通信を行うための外部インタフェース部１８を備える。さらに、情報処理端末１０は、データ等を格納するデータ格納部１９と、データ格納部１９に対してデータをリード／ライトするデータ／リードライト部２０と、情報処理端末１０の動作を制御するコントローラ２１と、音声を出力する音声出力部１６とを備える。
【００１６】
ディスプレイ部１３は例えば液晶ディスプレイや有機ＥＬディスプレイで構成される。タッチパネル部１５ａは、ディスプレイ部１３の上面に重ねて配置され、ユーザによるタッチ操作を受け付ける。操作ボタン１５ｂは、情報処理端末の操作ボタンであるが、ディスプレイ部１３も、タッチパネル部１５ａを介してユーザにより操作される操作ボタンを表示可能である。
【００１７】
音声出力部１６は、音声を出力するための端子やデバイスであり、スピーカやイヤホンの入力端子が相当する。
【００１８】
外部インタフェース部１８は、外部機器と接続可能であり、ＵＳＢ（Universal Bus）やＨＤＭＩ（High Definition Multimedia Interface）等の所定のインタフェース規格に準拠して外部機器との間でデータ通信を行う。
【００１９】
データ格納部１９は、プログラムや種々のデータを格納する記録媒体であり、ハードディスク、半導体メモリまたは着脱可能なメモリカード等の記録媒体で構成され得る。図２に、データ格納部１９に格納される情報の例を示す。図２に示すように、データ格納部１９は、コントローラ２１により実行されるプログラム（ＯＳ、アプリケーションプログラム）３１と、手帳ビューワアプリによる手帳機能を実現する際に参照される管理情報３３と、手帳画像データ３５と、マーカー画像データ３７とを格納する。手帳画像データ３５は、撮像部１１で撮影されたページ画像のデータを処理した画像データと、ページ毎のデフォルトの画像データとを含む。マーカー画像データ３７は、ページ画像の取り込み後にユーザが任意に付加できるデータである（詳細は後述）。
【００２０】
２．１ 手帳管理情報及び手帳画像データ
図３は、手帳ビューワアプリによる手帳機能を実現する際に参照される手帳管理情報３３と手帳画像データ３５の構成例を説明した図である。
【００２１】
管理情報３３は、前回の手帳ビューワアプリを実行した際に最後に表示されたページを示す情報（最終表示ページ）と、最新に画像データが更新されたページを示す情報（最新更新ページ）と、しおり（詳細は後述）に関する情報とを対応づけて管理する情報である。最終表示ページは、手帳ビューワアプリ終了時に、その時点で表示されているページの値に更新される。
【００２２】
手帳画像データ３５は、情報処理端末１０が画像を取り込み可能な実際の手帳の各ページと、各ページに関連したページ画像を示す画像データと、各ページに付与されたマーカー画像とを対応づけて含む情報である。
【００２３】
これらの情報３３、３５は、手帳機能を実行する際に適宜コントローラ２１により読み出されて参照されたり、更新されたりされる。
【００２４】
２．２ 手帳のレイアウト
図４は、情報処理端末１０が画像を取り込む実際の手帳のページレイアウトの一例を示した図である。図４に示すように、本実施形態では、実際の手帳はスケジュール帳としている。手帳の見開きの左側には、一週間のカレンダーが印刷されており、見開きの右側は白紙のメモスペースとなっている。さらに、見開いたページ全体の四隅には、取り込み画像の切り出し、正規化のために使用されるマーカー２４ａ、２４ｂ、２４ｃ、２４ｄが印刷されている。なお、４つのマーカーのうち１つマーカー２４ａだけが向きが異なっている。これにより、取り込み画像の上下を識別することができる。また、各ページにはページ番号２６が印刷されている。なお、手帳のページのレイアウトは、図４に示す例に限られず、図５（ａ）〜図５（ｃ）に示すようなレイアウトでもよい。なお、本手帳は手帳画像データ３５が管理する全てのページの紙面を含んでいる。
【００２５】
３．情報処理端末の動作
以下、手帳ビューワアプリが実行された時の情報処理端末１０の動作について説明する。
【００２６】
図６は、情報処理端末１０において手帳ビューワアプリが起動されたときにディスプレイ部１３に表示される画面を示した図である。なお、手帳ビューワアプリは、情報処理端末１０上に表示された、手帳ビューワアプリ用の所定のアイコンがタッチされたときに起動される。図６に示すように、手帳ビューワアプリ起動時には、ディスプレイ部１３中央に、あるページのページ画像６１が表示されるとともに、表示画面上端部及び下端部において複数の操作ボタン４１、４１ａ、４１ｂ、…が表示される。ユーザは、これらの操作ボタン４１、…に対応する位置でタッチパネル部１５ａをタッチ操作することで情報処理端末１０に指示を与えることができる。
【００２７】
以下、情報処理端末１０の手帳機能実行時の動作として、ページ画像の取り込み時の動作と、ページ画像の表示時の動作について説明する。
【００２８】
３．１ ページ画像の取り込み
図７のフローチャートを参照して、ページ画像の取り込み時の動作を説明する。
【００２９】
ユーザにより操作ボタン４１ａが操作されると、撮像部１１が起動して、画像の撮影が可能になる。このとき、ディスプレイ部１３に、図８（ａ）に示すような画像撮影用の画面が表示される。画像撮影用の画面には、四隅に枠６５が表示される。ユーザは、この枠６５で囲まれる領域内に見開いた手帳のページの全体が収まるように情報処理端末１０の位置を調整し、シャッタボタン２２を操作する（図８（ｂ）参照）。この操作を受けて、撮像部１１は手帳のページの画像を撮影し、ページ画像データを生成する（Ｓ１１）。
【００３０】
次に、コントローラ２１は、生成したページ画像データから、四隅にあるマーク２４ａ〜２４ｄを検出する（Ｓ１２）。
【００３１】
マーク２４ａ〜２４ｄが検出できた場合（Ｓ１３でＹｅｓ）、検出した４つのマーク２４ａ〜２４ｄに基づき画像の切り出し、正規化を行う（Ｓ１４）。すなわち、コントローラ２１は、撮影された画像全体から４つのマーク２４ａ〜２４ｄで囲まれた領域を切り出す。また、コントローラ２１は、正規化として、４つのマーク２４ａ〜２４ｄに基づき、画像の歪みの補正（台形補正）や、画像サイズのリサイズを行う。さらに、コントローラ２１は、正規化した画像に含まれる「ページ」の値をＯＣＲ（Optical Character Reader）機能で読み取る（Ｓ１５）。具体的には、図４に示す例では、見開きページ下部にあるページの値２６をＯＣＲ機能で読み取る。
【００３２】
ＯＣＲ機能によりページの値がうまく読み取れた場合、図９（ａ）に示すような、ページ画像データを保存するか否かをユーザに問い合わせる画面４３が、ディスプレイ部１３に表示される。問い合わせ画面４３上には、認識されたページ４３ａが表示される。問い合わせ画面４３は、読み取られたページ画像６１上に重ねて表示される。問い合わせ画面４３で保存ボタン４３ｂがタッチされると（Ｓ１６）、読み取られたページ画像６１のデータが保存される（Ｓ１７）。再撮影ボタン４３ｃが選択されると、図８に示す撮影画面に戻り、上記の処理が繰り返される。
【００３３】
一方、ＯＣＲ機能によりページの値がうまく読み取れなかった場合は、図９（ｂ）に示すような、ページの値が表示されていない問い合わせ画面４３が表示される。画像データを保存する場合（Ｓ１６）、ページの値の入力を要求する（Ｓ１９）。ページの値の入力のため、図９（ｃ）に示すようなページ入力画面４４が表示される。入力画面４４は、ピーカと呼ばれる、数字を回転させてページの値を入力できる画面である。本実施形態では、ページの指定は左ページの値のみを入力するようになっている。右ページの値は左ページの値から自動的に求める。ページは、３桁の数字で入力可能であり、左ページの値のみを入力すればよいことから、１の位は奇数のみが選択できるようになっている。ページの値が入力されると、読み取られたページ画像６１のデータがデータ格納部１９に保存される（Ｓ１７）。
【００３４】
ここで、ステップＳ１７におけるページ画像データの保存処理について具体的に説明する。本実施形態では、情報処理端末１０内部で仮想的に手帳を実現する。このため、情報処理端末１０は手帳画像データ３５を内部に格納する。手帳画像データ３５は、情報処理端末１０内部で仮想的に実現される手帳（手帳画像データ）の各ページに対する画像を管理している（図３（ｂ）参照）。すなわち、各ページと、そのページに表示されるべきページ画像データとを対応づけている。
【００３５】
ページ画像データの保存処理は、手帳画像データ３５において管理する、あるページの画像のデータを、読み取ったページ画像のデータに差し替えることにより実施される。例えば、図１０に示すように、第５−６ページ目の画像を撮影して読み取った場合、手帳画像データ３５の第５−６ページについて、現在管理されている画像（一番最初はデフォルト画像）を、読み取った画像（撮影した画像）のデータに置換する。すなわち、手帳画像データ３５において、元のページ画像が新たに撮影されたページ画像に差し替えられる（Ｓ１７）。このように、本実施形態の情報処理端末１０によれば、手帳画像データ３５において、画像が撮影されたページについて、元のページ画像のデータが新たに撮影されたページ画像のデータに置換されていく。
【００３６】
その後、手帳画像データ３５の更新（Ｓ１７）にともない、手帳管理情報３３が更新される（Ｓ１８）。すなわち、手帳管理情報３３において最新更新ページの値が更新される。
【００３７】
以上のようにして、情報処理端末１０は、手帳のページ画像を撮影して記録することにより、手帳画像データ３５を更新する。画像の取り込みが終了すると、取り込まれたばかりのページ画像がディスプレイ部１３に表示される。
【００３８】
３．２ ページ画像表示
前述のように、図６は、手帳ビューワアプリによるページ画像の表示例を示した図である。図６は、撮影されて、取り込まれたページ画像の表示例を示している。ページ画像の取り込みがないページについては、図１１（ａ）に示すように、事前に用意された各ページのデフォルト画像、すなわち、手帳のレイアウトをそのまま示した画像が表示される。なお、図１１（ａ）に示すような画像に代えて、図１１（ｂ）に示すような、白紙の画像、すなわち、ページ番号のみを表示してもよい。
【００３９】
図１２のフローチャートを参照して、ページ画像表示時の動作を説明する。情報処理端末１０において手帳ビューワアプリが起動されると、コントローラ２１は、手帳管理情報３３を参照し、最終表示ページ情報を取得する（Ｓ３１）。そして、コントローラ２１は、手帳画像データ３５で管理される、最終表示ページ情報が示すページのページ画像をディスプレイ部１３に表示する（Ｓ３２）。このように、情報処理端末１０は、手帳ビューワアプリ起動時には、前回の手帳ビューワアプリ起動時において最後に表示されていたページの画像を表示する。なお、手帳ビューワアプリ起動時に表示されるページは、最も新しく撮像されたページの画像を表示するようにしてもよい。
【００４０】
本実施形態の情報処理端末１０では、ユーザによる、タッチパネル部１５ａ上でスライド操作があると、表示されるページが切り替わるように構成される。例えば、ユーザがタッチパネル部１５ａ上で指を左から右へスライドさせたときは、表示するページを前のページに切り替えられ、右から左へスライドさせたときは、表示するページを次のページに切り替えられる。また、スライド操作に加えて、直接的に数値を入力することで切り替え先のページを指定してもよい。
【００４１】
図１３を参照して、ページ切り替え時の動作を説明する。ユーザによるページ切り替えの操作または指示があると（Ｓ４１）、コントローラ２１は、現在のページとユーザのスライド操作または入力されたページ値に基づき、切り替え後のページを認識する。そして、コントローラ２１は、手帳画像データ３５を参照し、切り替え後のページのページ画像データを取得し（Ｓ４２）、そのページ画像データをディスプレイ部１３に表示する（Ｓ４３）。手帳画像データ３５は、全てのページについてページ画像データを有している。ページ画像が取り込まれたページについては、取り込まれたページの画像が表示され、一方、ページ画像がまだ取り込まれていないページについては、デフォルトのページ画像（すなわち、白紙またはページレイアウト画像のみを含むページ画像）が表示される。このように、画像を取り込んでいないページについても、ページ画像が表示されることから、ユーザはあたかも１冊の手帳が存在するように扱うことができ、ユーザの使い勝手を向上できる。
【００４２】
３．３ その他の機能
以下、情報処理端末１０のその他の機能についていくつか説明する。
【００４３】
（１）マーカー機能
本実施形態の情報処理端末１０では、ユーザが、ページ画像の任意の箇所にマーカー（例えば、蛍光ペンにより描かれたように見える画像）を付すことを可能とするための機能（マーカー機能）を有する。
【００４４】
図６に示すように、あるページの画像を表示中に、ユーザにより編集ボタン４１ｆが選択されると、マーカー機能が実行され、図１４に示すような画面が表示される。図１４に示すように、ペンの太さ、色が指定可能となっている。ユーザにより選択されたペンの太さ、色で、ユーザによりタッチパネル部１５ａ上でなされた操作の軌跡がマーカー画像として形成される。
【００４５】
マーカー画像は、図１５に示すように、手帳画像データ３５において、ページ画像と関連づけられる。手帳ビューワー機能で表示される際には、図１５（ｃ）に示すように、ページ画像データにマーカー画像が重畳して表示される。
【００４６】
（２）しおり機能
しおり機能とは、ユーザが、表示させたいページを事前に設定しておく機能である。ユーザにより事前に設定されたしおりが選択されると、そのしおりが示すページのページ画像が表示される。しおりの情報は図３（ａ）に示すように手帳管理情報３３において管理される。情報処理端末１０は３個のしおりを設定可能である。
【００４７】
図６に示すような画面状態で操作ボタン４１ｂがタッチされると、図１６に示す画面が表示される。あるページ画像が表示された状態で、操作ボタン４５ａがタッチされると、そのページにしおりが設定される。すなわち、手帳管理情報３３のしおり情報が更新される。また、操作ボタン４５ｂがタッチされると、しおりの選択が可能になり、ユーザにより一のしおりが選択されると、選択されたしおりが指し示すページのページ画像が表示される。
【００４８】
（３）手帳保存
情報処理端末１０は、現在の手帳データを保存するための機能を有する。この機能は、図６に示すような画面状態で操作ボタン４１ｄが操作されることで実行される。具体的には、操作ボタン４１ｄが操作されると、コントローラ２１は、現在の１冊分の手帳画像データをＰＤＦ形式の１つのファイルに変換して、データ格納部１９に保存する。この保存処理の実行により、変換前の手帳画像データは削除される。
【００４９】
（４）過去手帳のプレビュー
情報処理端末１０は、過去にＰＤＦ形式に変換して保存した手帳データを表示するための機能を有する。この機能は、図６に示すような画面状態で操作ボタン４１ｃが操作されることで実行される。具体的には、操作ボタン４１ｃが操作されると、過去に保存された複数の手帳データを示すアイコンがディスプレイ部１３に表示される。ユーザにより、表示された複数のアイコンの中から１つが選択されると、選択された手帳データの所定ページ（例えば、１ページ目）の画像データが表示される。
【００５０】
（５）ページ画像の削除
情報処理端末１０は、ページ単位でページ画像を削除することが可能である。図６に示すようにページ画像が表示された状態で、操作ボタン４１ｅが操作されると、ページ画像の削除が可能となる。ここで、ページ画像の削除については、現在表示されているページの画像のみを削除してもよいし、全ページの画像を削除するようにしてもよい。ここで、ページ画像の削除とは、取り込まれたページ画像の削除を意味する。取り込まれたページ画像が削除された場合、手帳画像データ３５においてデフォルトのページ画像へ差し替えられる。
【００５１】
４．まとめ
以上のように、本実施形態の情報処理装置１０によれば、実際の手帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な情報処理端末である。情報処理装置１０は、実際の手帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む手帳画像データを格納するデータ格納部１９と、実際の手帳のページの画像であるページ画像を撮像する撮像部１１と、手帳画像データに記録されたページ画像を表示するディスプレイ部１３と、撮像部１１により手帳のページ画像が撮像されたときに、撮像されたページ画像のページと同じページの手帳画像データのページ画像を、当該撮像されたページ画像に置換するコントローラ２１とを備える。
【００５２】
この構成により、情報処理装置１０は、実際の手帳においてユーザが記入した内容を画像データとして取り込み、仮想的な手帳のページ画像と差し替える。これにより、ユーザは、あたかも１冊の手帳が情報処理装置１０内に存在するように取り扱うことができる。
【００５３】
なお、上記の実施形態では、スマートフォンの例を説明したが、本発明の思想は、スマートフォンに限らず、タブレット型やノート型のパーソナルコンピュータや、その他の種々の情報処理機器に対しても適用できることは言うまでもない。
【００５４】
また、上記の実施形態では、ページ画像を取り込み可能な実際の手帳を、スケジュール帳としたが、画像を取り込む対象はこれに限られない。大学ノート、自由帳、メモ帳、その他の帳面を含む種々の種類の筆記帳に対して本発明の思想は適用できる。
【符号の説明】
【００５５】
１０ 情報処理端末
１１ 撮像部
１３ ディスプレイ部
１５ａ タッチパネル部
１５ｂ 操作ボタン
１６ 音声出力部
１８ 外部インタフェース
１７ 通信部
１９ データ格納部
２０ データリード／ライト部
２１ コントローラ
３３ 手帳管理情報
３５ 手帳画像データ
３７ マーカー画像データ
【特許請求の範囲】
【請求項１】
複数ページを有する実際の筆記帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な情報処理端末であって、
前記実際の筆記帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む筆記帳画像データを格納する記録媒体と、
前記実際の筆記帳のページの画像であるページ画像を撮像する撮像手段と、
前記筆記帳画像データに記録されたページ画像を表示する表示手段と、
前記撮像手段により前記筆記帳のページ画像が撮像されたときに、前記撮像されたページ画像のページと同じページの前記筆記帳画像データのページ画像を、当該撮像されたページ画像に置換する制御手段と
を備えた
ことを特徴とする、情報処理端末。
【請求項２】
前記表示手段がページ画像を表示する際、前記制御手段は、前記筆記帳画像データにおいて、撮像されたページ画像を有するページについては、撮像されたページ画像を表示し、撮像されたページ画像を有しないページについては、所定のページ画像を表示する、
ことを特徴とする、請求項１記載の情報処理端末。
【請求項３】
前記実際の筆記帳の各ページにはページ番号が印刷されており、
前記制御手段は、前記撮像手段により前記筆記帳のページ画像が撮像されたときに、前記実際の筆記帳のページに印刷されているページの値を、前記撮像されたページ画像からＯＣＲ機能で読み取り、読み取ったページの値に基づき前記ページ画像のページを認識する、
ことを特徴とする、請求項１または２記載の情報処理端末。
【請求項４】
前記実際の筆記帳には、見開いた状態で４角に所定のマークが印刷されており、
前記制御手段は、撮像したページ画像に含まれる前記所定のマークに基づいて、画像の切り出し、画像の形状の補正を行なう、ことを特徴とする、請求項１または２記載の情報処理端末。
【請求項５】
情報処理端末を、複数ページを有する実際の筆記帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な筆記帳データ表示装置として機能させるためのプログラムであって、
前記筆記帳データ表示装置は、前記実際の筆記帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む筆記帳画像データを格納する記録媒体を備え、
前記プログラムは、
前記情報処理端末の撮像手段により前記実際の筆記帳のページの画像であるページ画像を撮像させる撮像機能と、
前記情報処理端末の表示手段に前記筆記帳画像データに記録されたページ画像を表示する表示機能と、
を前記情報処理端末の制御手段に実行させ、
前記記録機能においては、前記撮像手段により前記筆記帳のページ画像が撮像されたときに、前記撮像されたページ画像のページと同じページの前記筆記帳画像データのページ画像を、当該撮像されたページ画像に置換する、
ことを特徴とするプログラム。
【請求項６】
ページ画像を表示する際、前記筆記帳画像データにおいて、撮像されたページ画像を有するページについては、撮像されたページ画像を表示し、撮像されたページ画像を有しないページについては、前記所定のページ画像を表示する機能を、さらに前記制御手段に実行させる、
ことを特徴とする、請求項５記載のプログラム。
【請求項７】
前記実際の筆記帳の各ページにはページ番号が印刷されており、
前記撮像手段により前記筆記帳のページ画像が撮像されたときに、前記実際の筆記帳のページに印刷されているページの値を、前記撮像されたページ画像からＯＣＲ機能で読み取り、読み取ったページの値に基づき前記ページ画像のページを認識する機能を、さらに前記制御手段に実行させる、ことを特徴とする請求項５または６記載のプログラム。
【請求項８】
前記実際の筆記帳には、見開いた状態で４角に所定のマークが印刷されており、
撮像したページ画像に含まれる前記所定のマークに基づいて、画像の切り出し、画像の形状の補正を行なう機能をさらに前記制御手段に実行させる、ことを特徴とする請求項５または６記載のプログラム。
【請求項９】
当該プログラム起動時において、前回の起動時において最後に表示されていたページのページ画像を表示する機能をさらに前記制御手段に実行させる、ことを特徴とする請求項５ないし８のいずれか１つに記載のプログラム。
【請求項１０】
当該プログラム起動時において、最新に撮像されたページ画像を表示する機能をさらに前記制御手段に実行させる、ことを特徴とする請求項５ないし８のいずれか１つに記載のプログラム。
【請求項１１】
請求項１ないし４のいずれか１つに記載の情報処理端末によってページの画像が読み取られる筆記帳であって、
前記筆記帳画像データが管理する全てのページの紙面を含む、
ことを特徴とする、筆記帳。
【請求項１】
複数ページを有する実際の筆記帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な情報処理端末であって、
前記実際の筆記帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む筆記帳画像データを格納する記録媒体と、
前記実際の筆記帳のページの画像であるページ画像を撮像する撮像手段と、
前記筆記帳画像データに記録されたページ画像を表示する表示手段と、
前記撮像手段により前記筆記帳のページ画像が撮像されたときに、前記撮像されたページ画像のページと同じページの前記筆記帳画像データのページ画像を、当該撮像されたページ画像に置換する制御手段と
を備えた
ことを特徴とする、情報処理端末。
【請求項２】
前記表示手段がページ画像を表示する際、前記制御手段は、前記筆記帳画像データにおいて、撮像されたページ画像を有するページについては、撮像されたページ画像を表示し、撮像されたページ画像を有しないページについては、所定のページ画像を表示する、
ことを特徴とする、請求項１記載の情報処理端末。
【請求項３】
前記実際の筆記帳の各ページにはページ番号が印刷されており、
前記制御手段は、前記撮像手段により前記筆記帳のページ画像が撮像されたときに、前記実際の筆記帳のページに印刷されているページの値を、前記撮像されたページ画像からＯＣＲ機能で読み取り、読み取ったページの値に基づき前記ページ画像のページを認識する、
ことを特徴とする、請求項１または２記載の情報処理端末。
【請求項４】
前記実際の筆記帳には、見開いた状態で４角に所定のマークが印刷されており、
前記制御手段は、撮像したページ画像に含まれる前記所定のマークに基づいて、画像の切り出し、画像の形状の補正を行なう、ことを特徴とする、請求項１または２記載の情報処理端末。
【請求項５】
情報処理端末を、複数ページを有する実際の筆記帳のページを撮影し、ページ画像として取り込み、取り込んだページ画像を表示可能な筆記帳データ表示装置として機能させるためのプログラムであって、
前記筆記帳データ表示装置は、前記実際の筆記帳に含まれる各ページに対応して、ページ毎に所定のページ画像を含む筆記帳画像データを格納する記録媒体を備え、
前記プログラムは、
前記情報処理端末の撮像手段により前記実際の筆記帳のページの画像であるページ画像を撮像させる撮像機能と、
前記情報処理端末の表示手段に前記筆記帳画像データに記録されたページ画像を表示する表示機能と、
を前記情報処理端末の制御手段に実行させ、
前記記録機能においては、前記撮像手段により前記筆記帳のページ画像が撮像されたときに、前記撮像されたページ画像のページと同じページの前記筆記帳画像データのページ画像を、当該撮像されたページ画像に置換する、
ことを特徴とするプログラム。
【請求項６】
ページ画像を表示する際、前記筆記帳画像データにおいて、撮像されたページ画像を有するページについては、撮像されたページ画像を表示し、撮像されたページ画像を有しないページについては、前記所定のページ画像を表示する機能を、さらに前記制御手段に実行させる、
ことを特徴とする、請求項５記載のプログラム。
【請求項７】
前記実際の筆記帳の各ページにはページ番号が印刷されており、
前記撮像手段により前記筆記帳のページ画像が撮像されたときに、前記実際の筆記帳のページに印刷されているページの値を、前記撮像されたページ画像からＯＣＲ機能で読み取り、読み取ったページの値に基づき前記ページ画像のページを認識する機能を、さらに前記制御手段に実行させる、ことを特徴とする請求項５または６記載のプログラム。
【請求項８】
前記実際の筆記帳には、見開いた状態で４角に所定のマークが印刷されており、
撮像したページ画像に含まれる前記所定のマークに基づいて、画像の切り出し、画像の形状の補正を行なう機能をさらに前記制御手段に実行させる、ことを特徴とする請求項５または６記載のプログラム。
【請求項９】
当該プログラム起動時において、前回の起動時において最後に表示されていたページのページ画像を表示する機能をさらに前記制御手段に実行させる、ことを特徴とする請求項５ないし８のいずれか１つに記載のプログラム。
【請求項１０】
当該プログラム起動時において、最新に撮像されたページ画像を表示する機能をさらに前記制御手段に実行させる、ことを特徴とする請求項５ないし８のいずれか１つに記載のプログラム。
【請求項１１】
請求項１ないし４のいずれか１つに記載の情報処理端末によってページの画像が読み取られる筆記帳であって、
前記筆記帳画像データが管理する全てのページの紙面を含む、
ことを特徴とする、筆記帳。
【図１】
【図２】
【図３】
【図４】
【図５（ａ）】
【図５（ｂ）】
【図５（ｃ）】
【図７】
【図９（ａ）】
【図９（ｂ）】
【図９（ｃ）】
【図１２】
【図１３】
【図１６】
【図６】
【図８】
【図１０】
【図１１】
【図１４】
【図１５】
【図２】
【図３】
【図４】
【図５（ａ）】
【図５（ｂ）】
【図５（ｃ）】
【図７】
【図９（ａ）】
【図９（ｂ）】
【図９（ｃ）】
【図１２】
【図１３】
【図１６】
【図６】
【図８】
【図１０】
【図１１】
【図１４】
【図１５】
【公開番号】特開２０１３−９８９１４（Ｐ２０１３−９８９１４Ａ）
【公開日】平成２５年５月２０日（２０１３．５．２０）
【国際特許分類】
【出願番号】特願２０１１−２４２４３０（Ｐ２０１１−２４２４３０）
【出願日】平成２３年１１月４日（２０１１．１１．４）
【出願人】（０００１０９０３７）ダイニック株式会社 (55)
【Ｆターム（参考）】
【公開日】平成２５年５月２０日（２０１３．５．２０）
【国際特許分類】
【出願日】平成２３年１１月４日（２０１１．１１．４）
【出願人】（０００１０９０３７）ダイニック株式会社 (55)
【Ｆターム（参考）】
[ Back to top ]