電子機器システム
【課題】 表示装置を有する表示電子機器とそれに接続された多様な外部電子機器の制御を、接続の方式に左右されることなく、表示電子機器付属のリモコンもしくは表示電子機器を介した操作で、統一的に行うことができる電子機器システムを提供する。
【解決手段】 外部電子機器２１〜２４で作られた２次元正極同期信号と機器制御のための制御コードとそのアイコンデータが映像信号に合成されテレビジョン受像機１に転送される。テレビジョン受像機１では映像信号から制御コードを分離し、メニュー画面として再合成して表示する。操作者はメニュー画面に対しテレビジョン受像機１用のリモコンにて制御の選択動作を行う。テレビジョン受像機１は選択された制御内容のリモコンコードを生成し、接続された外部リモートコントローラ６１〜６４に供給する。これにより外部電子機器２１〜２４の制御が行われる。
【解決手段】 外部電子機器２１〜２４で作られた２次元正極同期信号と機器制御のための制御コードとそのアイコンデータが映像信号に合成されテレビジョン受像機１に転送される。テレビジョン受像機１では映像信号から制御コードを分離し、メニュー画面として再合成して表示する。操作者はメニュー画面に対しテレビジョン受像機１用のリモコンにて制御の選択動作を行う。テレビジョン受像機１は選択された制御内容のリモコンコードを生成し、接続された外部リモートコントローラ６１〜６４に供給する。これにより外部電子機器２１〜２４の制御が行われる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テレビジョン受像機やパーソナルコンピュータのような表示装置を有する電子機器を含む複数の電子機器からなる電子機器システムに関し、特に表示装置を有する電子機器を介してそれに接続される電子機器の遠隔操作を行うことができる電子機器システムに関する。
【背景技術】
【０００２】
１９８０年代に赤外線リモートコントローラ（通称リモコン）がテレビジョン受像機をはじめとする家電機器に付属するようになり、手元で制御できるユーザインターフェースが広く普及し、家電製品の利用形態を大きく変貌させた。現在においてもこの操作形態が主流であり、リモコン操作は１機能を１押しで実行する仕組みが基本となっている。テレビジョン受像機用リモコンを例に取れば「電源」「チャンネル」「音量」「入力切替」などのキーがそれに該当する。リモコンはこれまでのテレビジョン受像機及びそれに接続される外部電子機器にとって大変便利な遠隔の操作方法であった。
【０００３】
しかしながら、最近始まったデータ放送では、所望のメニュー画面を選択するためにはリモコンの「上下左右」や「決定」キーを何度も押下する必要がある。またＥＰＧ（電子プログラムガイド）では、マトリクスに配列された案内画面から所望の位置を選択し、録画予約をするためにはさらに何度もキーを押下する必要があり、データ放送での操作と同様リモコン操作は煩雑で使いづらくなっている。
【０００４】
特許文献１には、このような課題を解決するために、マウスまたはこれに類似する位置指定操作装置により得られる位置指定情報を、キー押下信号の時系列パターンであるキー押下時系列符号に符号化し、そのキー押下時系列符号をテレビジョン受像機に送信するようにした制御装置が提案されている。
【０００５】
【特許文献１】特開２００３−２８３８６６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
特許文献１に示された制御装置は、パーソナルコンピュータ（パソコン）の操作と酷似したポインティングの操作により、テレビジョン受像機を遠隔操作するものである。したがって、パソコンを利用しない人にとっては使いづらいもので、情報リテラシー（情報を使いこなす能力）の観点から、パソコンの使い勝手をそのまま導入することは無理がある。遠隔操作が求められる今日のテレビジョン受像機の利用形態にマッチした新たな操作手段が必要になっている。
【０００７】
さらにネットワーク化の進展は、宅内のストレージメディアや宅外のインターネットから得られる多様な情報を、テレビジョン受像機やパソコンのディスプレイに表示することで情報を受容することになる。この場合の操作形態は情報源に依存するため、多様な操作形態に対応する必要があり、家電機器に付属する現状のリモコンでは充分な対応が出来なかった。
【０００８】
このような状況において、多様な電子機器に対応できる柔軟性と遠隔操作の利便性を両立させ、手元で利用するリモコンのような遠隔操作用機器を不要とした電子機器の制御装置を本出願人は既に提案している。この装置はテレビジョン受像機上に作り出されるグラフィカルなユーザインターフェース（以下ＧＵＩ：Graphical User Interface）に対しての遠隔からのポインティング操作を効果的に改善したものである。
【０００９】
この新たな制御装置によるネットワーク機器の制御は、電子機器同士の双方向通信のためのデジタルインターフェース（以下「デジタルＩＦ」という）での接続が前提となる。テレビジョン受像機に接続されているネットワーク機器の操作は、デジタルＩＦを介してテレビジョン受像機に表示されるネットワーク機器の操作メニューを選択操作し、その制御情報がネットワーク機器へフィードバックされることでなされる。しかしながら、デジタルＩＦは方式が多様化しており全てのデジタルＩＦと上位の制御プロトコルにわたって対応することは、コストや開発工数の面で困難になっている。また従来のアナログ機器の接続は片方向通信であり、テレビジョン受像機がその接続を介して制御情報を取得することは困難な問題であった。
【００１０】
デジタルＩＦの開発分野では電子機器同士の相互接続を図る目的で、ネットワークにつながる機器を制御するための統一された上位プロトコル策定の取り組みが活発に進められている。しかし、現実にはそれを利用したホームネットワークを形成するまでには至っていない。現状における一般家庭でのオーディオとビデオ機器の利用形態を踏まえ、低廉で簡単に実現できるネットワークの制御方式及び制御装置が必要になっている。
【００１１】
テレビジョン受像機の操作については、本出願人が提案した前述の制御装置により、ポインティング機能を有する遠隔操作が可能な操作手段を導入することでテレビジョン放送の多様化と複雑化に対して使い勝手の面で改善がなされている。しかしながら、テレビジョン受像機に接続されているネットワーク機器を制御するためには、さまざまなデジタルネットワークの制御プロトコルに対応する必要がある。このネットワーク機器の制御に関して長年業界で取り組んではいるがその統一化ならびに普及には至っていないのが現状である。図２９は現状でのテレビジョン受像機とテレビジョン受像機に接続されている電子機器の操作方法にある問題点を説明するための図である。テレビジョン受像機１には４台の外部電子機器２がアナログもしくはデジタルＩＦで接続されており、外部電子機器２の操作には、従来から使われているそれぞれの外部電子機器２に対応するリモコン４が活用されている。そしてここにはデジタル及びアナログの両接続方式を含めて、つながる機器の数に合わせてリモコンの数が増える問題がある。この問題は、テレビジョン受像機につながるＶＴＲ、ビデオディスク、その他オーディオ機器などを操作するときにどのリモコンが該当のリモコンであるか判別がつかなくなるようなことで、現状でもよく経験している現象である。
【００１２】
図３０には現状におけるテレビジョン受像機とそれを取りまく外部電子機器及びその接続方式が示されている。デジタルＩＦのｉＬｉｎｋ（IEEE1394）は、セキュリティ（5C−DTCP）やストリームのリアルタイム転送（Isochronous）に対応でき、接続しているどの機器もホストになりえて機器同士が対等につながることを前提としており、制御仕様であるＡＶＣプロトコルで扱われるＡＶ機器を中心に発展している。さらに制御方式としてｉＬｉｎｋ（IEEE1394）上で相互接続性を図ることを目的としたＨＡＶｉ（Home Audio / Video interoperability）と呼ばれる上位プロトコルとミドルウェアが規定されてはいるが、普及するまでに至っていない。またコンピュータではＬＡＮを利用したイーサネット（登録商標）（Ethernet（登録商標））、既設の電話線を利用したＨｏｍｅＰＮＡ（Home Phone line Networking Alliance）、パーソナルコンピュータ系で発展してきたＵＳＢ（Universal Serial Bus）などがあるが、これらはＡＶ機器にも利用されてきている。また最近ではＨＤＭＩ（High-Definition Multimedia Interface）をＡＶ機器に採用することが活発化している。これには制御プロトコルを転送するＣＥＣ（Consumer Electronics Control）と呼ばれるラインが設けられているが、まだプロトコル自体の規定には至っていない。さらに携帯端末（ノートＰＣ、携帯電話、ＰＤＡなど）の接続方式ではケーブルを嫌う性質上、免許なしで使用できる２．４ＧＨｚバンドのＢｌｕｅｔｏｏｔｈが注目されている。さらに無線による接続方式ではＵＷＢ（Ultra Wide Band）がＢｌｕｅｔｏｏｔｈや無線ＬＡＮ（IEEE 802.11b）などよりも高速であるため家庭用のＡＶ機器への応用が期待されている。
【００１３】
このようにさまざまな接続方式が乱立すると異種接続方式間の相互接続問題が出てくる。これは映像や音声の転送方式間での乗せ換え機能や制御プロトコルの変換機能をＡＶ機器に搭載しなければならないといった問題である。これはＡＶ機器の価格を押し上げることに他ならず、民生ＡＶ機器及び家電製品全般において使い勝手と価格の両面を満足するものとは言えなくなり、真のユーザの利益になりうるものではない。現状のデジタルＩＦを総括すると、ビデオとオーディオのリアルタイムでの転送は可能になり、制御プロトコルについては統一規格の策定に向けて関係各方面で努力はなされているが、いまだに統一化と普及にまでは至っていない。その結果として接続機器の数だけリモコンが必要となっている。
【００１４】
一方アナログ接続ではビデオ信号とオーディオ信号については複数のピンジャックケーブルで接続する方式が早くから定着し、今日においてもこれが接続方式の主流を占めている。またデータの転送においてはＶＩＢ（Vertical Interval Blanking：垂直帰線期間を使用する伝送方式）が策定されている。しかし、データの転送方向が一方向だけであり、双方向的な制御をするためには、やはりリモコンが必要となる。結果としてデジタルＩＦと同様に接続機器の数だけリモコンが必要になっている。
【００１５】
現状は前記したとおり、デジタルＩＦにおいては双方向での制御データの転送の仕組みは盛り込まれているが、規格が乱立し制御プロトコルについても規格統一がなされておらず、これがデジタルＩＦの普及に至っていない理由となっている。また現状のデジタルＩＦにおいては従来のアナログ方式との連続性も考えられていない。テレビジョン受像機やストレージメディアと言った一般民生用ＡＶ機器に関して、テレビジョン受像機とこれにつながる外部電子機器に付属するリモコンが氾濫し、統一されたスタイルでこれらの機器を制御することがいつまで経っても実現できないという課題が存在している。
【００１６】
本発明は上述した点に着目してなされたものであり、表示装置を有する表示電子機器とそれに接続された多様な外部電子機器の制御を、接続の方式に左右されることなく、表示電子機器付属のリモコンもしくは表示電子機器を介した操作で、統一的に行うことができる電子機器システムを提供することを目的とする。
【課題を解決するための手段】
【００１７】
上記目的を達成するため請求項１に記載の発明は、表示装置を有する少なくとも１つの表示電子機器と、該表示電子機器に接続された少なくとも１つの他の電子機器からなる電子機器システムにおいて、前記他の電子機器は、前記表示電子機器へ伝送する映像信号の所定領域に、所定の同期信号及び前記他の電子機器の制御に必要な情報を含む付加情報を付加する情報付加手段を備え、前記表示電子機器は、前記他の電子機器から供給される映像信号から前記付加情報を抽出する抽出手段と、該抽出手段により抽出された付加情報に基づいて、前記他の電子機器を制御するための制御情報を前記表示装置に表示する制御情報表示手段と、前記表示装置に表示された制御情報の中から操作者が所望の制御情報を選択したとき、該選択された制御情報を前記他の電子機器に転送する転送手段とを備え、前記他の電子機器は、前記転送手段により転送された制御情報に応じた制御動作を行うことを特徴とする。
【００１８】
請求項２に記載の発明は、前記転送手段は、前記選択された制御情報を、赤外線リモートコントローラを介して前記他の電子機器に転送することを特徴とする。
【００１９】
請求項３に記載の発明は、前記情報付加手段は、前記映像信号の前記所定領域以外の領域において、前記同期信号と同一パターンの検出を行い、前記同一パターンが検出されたときは、該同一パターンが検出された信号の一部を変更することを特徴とする。
【００２０】
請求項４に記載の発明は、前記情報付加手段が付加する付加情報は、前記制御情報としてアイコンを前記表示装置に表示するためのアイコン情報を含み、前記制御情報表示手段は、前記アイコン情報に基づいて、前記制御情報に対応するアイコンを前記表示装置に表示することを特徴とする。
【発明の効果】
【００２１】
請求項１に記載の発明によれば、表示電子機器に接続されている他の電子機器の制御に必要な情報を含む付加情報が所定の同期信号とともに映像信号の所定領域に付加されて表示電子機器に伝送される。表示電子機器では送られた映像信号から付加情報が抽出され、抽出された付加情報に基づいて他の電子機器を制御するための制御情報が表示装置に表示される。操作者はメニュー画面に示されている操作項目を表示電子機器に付属するリモコンなどによって選択する。そして操作者が所望の制御情報を選択すると、選択された制御情報が表示電子機器から他の電子機器に転送され、他の電子機器の制御が行われる。したがって、付属のリモコンもしくは表示電子機器を介した操作で他の電子機器の制御を行うことができる。その結果他の電子機器に付属しているリモコンが不要になり、電子機器システム全体の操作性を向上させることができる。
【００２２】
請求項２に記載の発明によれば、操作者により選択された制御情報が赤外線リモートコントローラを介して他の電子機器に転送される。したがって、既に市場で使用されているリモコンコードで他の電子機器を制御することができる。これにより、新たな規格を策定する必要がなく容易にこのシステムを導入することができる。
【００２３】
請求項３に記載の発明によれば、映像信号の所定の領域以外の領域において同期信号と同一パターンの検出が行われ、同一パターンが検出されたときは、その信号の一部が変更される。これにより、映像信号の一部が同期信号として間違って検出されることを防止し、付加情報を表示電子機器に確実に伝送することができる。
【００２４】
請求項４に記載の発明によれば、付加情報にアイコン情報が含まれ、アイコン情報に基づいて制御情報に対応するアイコンが表示装置に表示される。したがって、制御情報を選択するための画面の見栄えが良くなり、且つ操作の誘導を容易に行うことができる。
【発明を実施するための最良の形態】
【００２５】
以下本発明の実施の形態を図面を参照して説明する。
家庭内の機器の統一操作を実現するためには、テレビジョン受像機やパーソナルコンピュータと言った表示装置を有する機器から接続先の電子機器の操作情報が見えることが必要である。ＡＶ機器に限って考えた時、テレビジョン受像機を家庭内ＡＶ機器のセンター機器として据えて、テレビを中心とした統一操作を実現することが、新規な接続機器も努力することなく扱える家電感覚のホームネットワークを実現することに他ならない。それを実現する方策が家電感覚のＧＵＩである。何がつながるか分からないテレビジョン受像機がつながる電子機器のすべての操作方式を担うのではなく、またこれは不可能でもある。テレビジョン受像機には接続先の電子機器の操作情報がメニュー画面として展開され、それに向けて遠隔操作する。つまり操作対象をテレビジョン受像機に統合し、接続される機器のすべての機能をユーザが享受することにより電子機器の使い勝手を向上させる。したがって本発明は、ＧＵＩを実現する仕組みを備えた電子機器システムを提供するものであり、例えばテレビジョン受像機に接続される外部電子機器から、制御画面がリアルタイムで転送されて、その制御画面から所望の制御ボタンを選択し、その制御情報が逆に外部電子機器に転送されて外部電子機器の制御がなされるといった双方向の接続を、方式間の壁を越えて実現するものである。
【００２６】
ここで第１の実施形態では、従来からのアナログ接続方式との連続性、乱立する各種デジタルＩＦとの親和性、制御プロトコル規格からの独立性及び１台のリモコンによる統合制御の５つの要件を満たすことで、あらゆる接続方式との親和性を持つ接続を可能とするインターフェースをユニバーサル・ネットワーク・グイ（UNIVERSAL NETWORK Graphical User Interface）と呼称して説明する。このユニバーサル・ネット・グイが本発明の特徴的部分を構成する。また第２の実施形態では上記要件の内、アナログ方式との連続性を外して接続方式をデジタルＩＦに限定した場合について説明する。
【００２７】
図１は従来の一般家庭での接続例を示す図である。同図にはテレビジョン受像機１とそれに接続された４台の外部電子機器２がラックに設置されており、その外部電子機器２及びテレビジョン受像機１を操作するためのそれぞれのリモコン４が描かれている。外部電子機器２としては、ビデオテープレコーダ、ビデオディスクレコーダ、ハードディスクレコーダ、ＣＡＴＶのターミナルアダプタなどが該当する。テレビジョン受像機１には、地上波、ＣＳ、ＢＳのＲＦ信号（変調信号）に対応するチューナが搭載されている。またテレビジョン受像機１と外部電子機器２の接続は、第１の実施形態ではアナログ接続でもデジタルＩＦの何れであってもよく、第２の実施形態ではデジタルＩＦであればどのようなデジタルＩＦでもよい。また無線接続であるかまたは有線接続であるかについても本実施形態では何れでも実現可能であり、ここで特に問うものではない。但し、アナログまたはデジタルで映像データが伝送されることが接続の必須条件である。この条件は図３０に示した全ての接続例において該当しており、現在存在するすべてのＡＶ関係の接続方式に対応するものである。
【００２８】
図２はテレビジョン受像機１に表示されたテレビジョン受像機１を制御するためのメニュー画面を表している。表示されているメニュー画面は「ビデオ」「地上」「ＢＳ」「ＣＳ」「設定」の各画面から成り、同図は接続されている外部電子機器２を選択するための「ビデオ」の画面が前面にきている。「地上」「ＢＳ」「ＣＳ」の画面はチャンネル切替の制御画面であり、これはテレビジョン受像機１に内蔵されているチューナを制御するためのものであるから、テレビジョン受像機内で閉じており、ＧＵＩによる制御上の課題はここでは存在しない。また「設定」についてもテレビジョン受像機の各種設定をする画面であり、同様にここにもＧＵＩによる制御上の課題はない。
【００２９】
ＧＵＩによる制御上の課題は外部電子機器２を選択する「ビデオ」画面にある。本実施形態のテレビジョン受像機１は４つのビデオ入力を持っており、各ビデオ入力に図１に示した４つの外部電子機器２が接続されている。ここで外部電子機器２を選択するまでは操作の対象がテレビジョン受像機内にあるので問題はない。しかしビデオ入力１〜４のいずれかを選択した後は操作の対象が各接続先の電子機器に移る。テレビジョン受像機内で閉じているときはテレビジョン受像機１に付属するリモコンで操作し、ビデオ入力選択後は選択された外部電子機器２に付属するのリモコンに制御が移るため、それまで使用していたリモコンを持ち替えなければならないことになる。本実施形態では４つの外部電子機器２が接続されているので、操作者は４つのリモコンの中から該当するリモコンを選択する。ここにはテレビのリモコンを含めトータル５つのリモコンが存在している。本発明は、これら外部電子機器付属のリモコン操作を、テレビジョン受像機付属のリモコンの操作またはテレビジョン受像機を経由した操作で行うことを可能にし、図１に示したのシステム全体を統一的に制御するものである。
【００３０】
図３は図２に示されているメニュー画面でビデオ入力１を選択した際のメニュー画面例を示している。図に示した「ビデオ入力１→ＶＨＳ」はビデオ入力１にはＶＨＳのビデオテープレコーダが接続されていることを示しており、その下にはビデオテープレコーダの再生画面を含む操作画面（「電源ＯＮ／ＯＦＦ」「プレイ（記号）」「ストップ（記号）」などとさらに深く詳細な設定画面である「番組予約」への展開ボタン）が描かれている。またテレビ画面の左下には前のメニュー画面への「戻る」ための操作ボタン及び再生画面を「拡大」するための操作ボタンが描かれている。この画面の情報は選択したビデオ１につながっているビデオテープレコーダのみが認識している情報であり、アナログ接続ではビデオケーブルを介して、デジタルＩＦでは画像データから得られるものである。このように画像については全てのアナログ接続及びデジタルＩＦでテレビジョン受像機１への転送が可能である。しかしながら、制御情報がメニュー画面のどのポジションに表示されているか、また制御情報が何であるのかということについてはこのままでは認識することができない。またたとえ制御情報を認識することができても外部電子機器２へ制御をフィードバックする仕組みがここにはない。本発明のユニバーサル・ネットワーク・グイはこの課題を解決するものである。
【００３１】
図４にはテレビジョン受像機１の裏側の接続パネルが示されている。４つの外部電子機器２が接続できるように接続端子のビデオ１〜４を装備している。ビデオ１及びビデオ２はそれぞれアナログ接続用で入力映像端子４１、４２、入力音声右と音声入力左用にそれぞれオーディオのピンジャックケーブル端子４３〜４６と輝度信号と搬送色信号を独立させたＳケーブルでの接続用の入力Ｓ映像端子４７、４８が備えられている。ビデオ３はデジタルＩＦ用でｉＬｉｎｋとの愛称で呼ばれているＩＥＥＥ１３９４接続端子４９が備えられている。ビデオ４もデジタルＩＦ用でＨＤＭｉ接続端子５０が備えられている。ビデオ１〜４のすべてに外部リモートコントローラ端子５１〜５４が備えられている。
【００３２】
図５にはテレビジョン受像機１に接続されている外部電子機器２としてのビデオデッキとテレビジョン受像機１の外部リモートコントローラ端子に接続されている外部装置用リモートコントローラ５が描かれている。これはすでに一般的に活用されており、リモコンの補助的役割として外部電子機器の制御に使われている。例えば単体のＣＳデジタルチューナから行うビデオテープレコーダの留守録予約などに活用されている。同図には外部装置用リモートコントローラ５の先端から赤外線を放射して外部電子機器のリモコン受光部２０１にてそれを受けて制御情報が転送されている様子が描かれている。
【００３３】
図６は本実施形態で外部装置用リモートコントローラを装備したシステムの構成を示すブロック図である。前記図３のメニュー画面は図６の第１の外部電子機器２１からテレビジョン受像機１に画像信号として転送されたものである。第２〜４の外部電子機器２２、２３、２４もテレビジョン受像機のそれぞれの接続端子に同様に接続されている。但し前記のとおり第３の外部電子機器２３と第４の外部電子機器２４の接続はデジタルＩＦとなっており、本発明が多様な接続方式に対して有効であることを明示している。
【００３４】
図６には４つの外部装置用リモートコントローラ６１〜６４が描かれている。４つの外部電子機器２１、２２、２３、２４は図４に示したテレビジョン受像機裏のパネルの端子４１、４２、４９、５０にそれぞれ接続されており、４つの外部装置用リモートコントローラ６１〜６４は端子５１〜５４にそれぞれ接続されている。
【００３５】
このようにテレビジョン受像機１に接続されている外部電子機器２１〜２４へのテレビジョン受像機１からの制御は、赤外線を使った外部装置用リモートコントローラ６１〜６４を活用することで可能である。すなわちテレビジョン受像機１に表示されているメニュー画面に対して行うテレビジョン受像機付属の赤外線リモコンの操作でテレビジョン受像機１の制御と同様に外部電子機器２１〜２４の制御ができる。接続されている外部電子機器２１〜２４のリモコンで操作できる全ての機能がテレビジョン受像機付属のリモコンで制御できることになる。本発明のユニバーサル・ネットワーク・グイはこの制御の仕組みを実施形態として活用する。尚、ここでは外部装置用リモートコントローラ６１〜６４を４つ設置しているが、赤外線照射の指向性の問題が無ければ１つあればよい。しかし本実施形態では図１に示すテレビジョン受像機１と外部電子機器２とがラックに設置された形態で説明するため、各外部電子機器に図５に示す外部装置用リモートコントローラをそれぞれ取り付けて利用する。
【００３６】
図６に示しているテレビジョン受像機１と外部電子機器２１〜２４とはアナログ接続またはデジタルＩＦにより接続されており、各外部電子機器２１〜２４からの画像がテレビジョン受像機１に表示されるとともに、テレビジョン受像機１からの外部電子機器２１〜２４への制御は外部装置用リモートコントローラ６１〜６４を経由して行われる。この仕組みの中で外部電子機器２１〜２４のメニュー画面は画像と共にテレビジョン受像機１に伝送することができる。しかし、外部電子機器２１〜２４の制御情報についてはこれを如何にして外部電子機器２１〜２４からテレビジョン受像機１に伝達するかが課題となっている。一般にアナログ接続におけるテレビジョン受像機へのデータ転送は、垂直のブランキングにデータを多重する方式で考えられている。これは例えば、社団法人電波産業会（ＡＲＩＢ：Association of Radio Industries and Businesses）のＳＴＤ−Ｂ５（垂直帰線期間を使用する標準テレビジョン・データ多重放送）や社団法人電子情報技術産業協会（ＪＥＩＴＡ：Japan Electronics and Information Technology Industries Association）のＣＰＲ−１２０４ ＶＢＩを用いたビデオＩＤ信号伝送方法（５２５ラインシステム）、ＣＰＲ−１２０４−１ ＶＢＩを用いたビデオＩＤ信号伝送方法（５２５Ｐ システム）、ＣＰＲ−１２０４−２ ＶＢＩを用いたビデオＩＤ信号伝送方法（７５０Ｐ，１１２５ｉシステム）などで標準規格として定められている。これらは、ファクシミリ信号やテレソフトウェア信号、静止画信号、文字信号、時刻信号、表示装置制御データ信号などの規格となっている。またコピーガードシステムで同期信号を変動させる方式もある。これはデータの転送ではないが垂直のブランキングにデータを挿入した場合の妨害になる。したがって、これらと競合することが考えられる垂直ブランキングに多重する方式は好ましくない。また新たな規格を設けることは、業界の合意にもとづくものであり、時間と労力がかかる。したがって、独自の方式で映像信号に制御信号を盛り込むことが、早期実現をもってユーザに使い勝手の良さを享受していただくための方策となる。
【００３７】
図７は映像信号の有効エリア内（ブランキングでない部分）に制御情報を埋め込んだ状態を示すイメージ図である。同図テレビ画面Ａはデータがそのまま見えている状態で、同期信号と制御コードなどが表示されている。同図テレビ画面Ｂでは制御コードの内容を解読してそれを適切なアイコン（icon）に置き換えて表示している。ここでのアイコンはパーソナルコンピュータのＧＵＩで使われているものと同じ概念のもので、操作を誘導するための適切な画像であり、ユーザーインターフェースの重要な役割を担っている。しかし、図７のテレビ画面Ａのように「再生」などコードの内容を言葉で表記していれば、アイコンがなくても操作する上で不都合をきたすものではない。
【００３８】
図７のテレビ画面Ａのように画面内に制御コードを表示するためには、コード表示の位置情報が必要になる。通常の位置情報を得るための同期信号は負極同期と呼ばれるもので、映像信号とレベル方向で区別できるため、レベルスライスで同期抽出が行われている。図８（Ａ）に示したアナログ接続での映像信号には、この負極同期がもちいられているので、本実施形態ではこれと同様の同期形式を採用することはできない。また、図８（Ｂ）に示すデジタルＩＦまたはデジタル放送やパッケージメディアでのデジタルコンポーネント映像信号ではデジタル信号のダイナミックレンジに対して黒レベルと白ピークレベルが規定されていて、負極同期信号は配慮されていない。これを踏まえて本発明のユニバーサル・ネットワーク・グイで採用する同期形式は２次元正極同期方式とする。この方式では２次元正極同期信号を映像信号やその他の信号と区別できないのため、統計的性質の違いを見分けて分離する。
【００３９】
図９は画像の相関性について説明するための図である。同図（Ａ）は第１ライン（ライン：水平周期）と第２ラインの一般的な振幅変化を表したもので、振幅のセンターを０レベルとしてピーク振幅を＋１、−１としている。ここで垂直方向については隣り合うライン間で、水平方向は隣り合う画素または数画素離れた画素間の相関性を考える。垂直方向の相関値は第１のライン上と第２のライン上の同じ位置の画素の振幅を乗算したものとし、水平方向は隣り合う画素もしくは数画素離れた画素の振幅を乗算したものとする。同図（Ｂ）はこのように算出された垂直及び水平の相関値をプロットした相関マップである。画像の統計的性質として、近い画素は相関性が高く、画素間が離れるに従い相関性が失われる傾向がある。この場合一般画像の相関値は同図（Ｂ）の第１象限の領域Ａに位置する頻度が多く、相関性のない波形は第３象限の原点から離れたところの領域Ｂに位置する。本実施形態ではこの第３象限のＢ領域に位置する波形を２次元正極同期信号とし、一般画像と区別できるようにしている。
【００４０】
コードの内容を詳細に表したものが図１０及び図１１である。図１０の第１ライン（１）から第８ライン（８）までが一般画像と区別するための２次元正極同期信号である。２次元正極同期信号の垂直方向は、インターレース信号の場合はライン間で反転し、順次走査信号の場合は２ライン間で反転する信号である。図１０は奇数フィールドである奇数ラインと偶数フィールドである偶数ラインが重ね合わされたフレーム信号として描写している。
【００４１】
図１０及び図１１の水平の目盛りは基準周期を表し、１基準周期は１画素または複数画素で構成される。水平の相関性を低くするためには１基準周期の画素数はできるだけ小さい方がよく、本実施形態では基準周期を１画素とし、水平相関は４画素間での相関と８画素間での相関を評価する。
【００４２】
ここで相関性を有する一般画像と２次元正極同期信号の区別のためには、２次元正極同期信号はできるだけ相関性がない隣り合う画素間の相関性を評価すべきである。しかし、機器同士の接続がアナログの場合、同期再生の不完全さや伝送路での歪みの画素信号への影響も考慮しなければならない。同期再生については位相ロックがかからず残留位相誤差が状況によって変化すること、伝送路についてはビデオテープレコーダに記録再生されても耐えられることを前提とする。すなわちアナログ接続では伝送路の周波数特性のロールオフ率などが厳しく管理されていないため、あまりにも厳しい同期信号は検出が難しくなる。また伝送路での影響を配慮しすぎて離れた画素間の相関を評価した場合には、相関性が無くなり、誤検出を招きかねないことも配慮すべき重要な事項である。
【００４３】
この考え方を踏まえて水平方向については、４画素間で反転と８画素間で反転の異なる繰り返し周期での相関を考慮する。垂直方向はこの水平方向の波形を４ライン間にわたってインターレース信号ではライン毎、順次走査では２ライン間毎に排他的論理和を取ったとき、水平８画素間で周期的に反転するようにする。つまり整理すると、水平方向は異なる複数の周期で反転させる。本実施形態の複数とは２つの周期で４画素間と８画素間（一部例外あり）を意味する。また、垂直方向はライン間で排他的論理和を取ったときに特定の周期で反転させる。本実施形態の特定の周期とは８画素間である。この正極同期の抽出はこれらの性質を読みとるもので詳しくは後述する。
【００４４】
次に同期信号に続くコードの内容について説明する。コードの内容は「１」と「０」をどのように規定するかと接続先を制御するコードの割付がある。図１２（ア）はコードの内容を表現する「１」と「０」の信号を示している。この信号は８画素周期内のパルスの幅で決めており、８画素中のはじめの２画素がハイレベルのものを「０」とし、８画素中のはじめの６画素がハイレベルのものを「１」としている。この規定に添ったレベル判定は同図（イ）と（ウ）の２通り考えられる。（イ）は同期信号により位相が合わされた８画素周期のパルス（Ａ）信号の立ち上がりのタイミングでライン（１５）の信号をフリップフロップを用いてデータとして取り込む。（ウ）は最初の８画素分にヘッダとして入れてある８画素幅のハイレベルとその後４画素分がブランク（ロウレベル）であることを確認した後、各データの立ち上がりから４画素分遅れたところがハイであるかロウであるかをフリップフロップを用いてデータとして取り込む。
【００４５】
本実施形態ではデータの数はラインあたり５ビットとし、フレームあたり４ライン同一コードを送る。これはインターレース走査で２ライン同一コードが転送され、順次走査で４ライン同一コードが転送される。この内容を盛り込んだ本実施形態でのコードの全体像が図１３（Ａ）に示されている。インターレースのときは奇数ラインと偶数ラインが２フィールド間にわたって転送されるが画面での見え方は同じである。１フレームのライン数は同期信号の８ラインに加えて４ライン毎の同一コードが１１コード分で全部で５２ラインとしている。また１ライン当たりの画素数はヘッダ部が８画素、ブランクが４画素、５ビットのデータが全部で４０画素となりトータル５２画素となる。本実施形態は取りうる１形態であり、要求される仕様によって最適な構成を考えればよい。同期信号の水平幅は水平の最大データ領域まで同一の繰り返しを継続すればよい。水平の幅が長くなれば誤検出が少なくなるが、転送効率が悪くなる問題があり、データ量を適切に考える必要がある。図１３（Ｂ）は異なるパターンのコードが示されている。これは同図（Ａ）の水平及び垂直方向を１／２にしたものである。アナログ接続のコンディションが良い場合やデジタルＩＦではこのような転送効率のよいパターンを選び情報を量を増やすことができる。本実施形態としては（Ａ）のパターンを標準として取り扱う。
【００４６】
本発明のユニバーサル・ネットワーク・グイは、図６に示してあるテレビジョン受像機１に接続されている外部電子機器２１〜２４から送られてきたメニュー画面の制御ボタンやアイコンなどに意味づけられた制御内容を、外部装置用リモートコントローラ６１〜６４を経由して外部電子機器２１〜２４に送ることを目的としている。これにより外部電子機器２１〜２４のリモコンを無くして、外部電子機器２１〜２４の操作をテレビジョン受像機１に向けた操作に一元化することできる。外部電子機器２１〜２４からテレビジョン受像機１に転送される制御内容は、本実施形態では最終的にリモコンコードで外部電子機器２１〜２４の制御を行うため既存のリモコンで使われているコードを使用し、新たにその規格を決める必要はない。既成のリモコンコードを使用することには、あらためてコードの内容を解読することなく、そのまま赤外線に変換できる利点がある。
【００４７】
リモコンコードは「家製協フォーマット」が標準方式として知られているが、現在そのフォーマットが使われていることは少ない。現状では、個別企業がそれぞれのフォーマットを策定して自社製のリモコンに使用しているが、それとは別にあらゆる会社の製品に対応したリモコンも市販されている。つまり、全メーカのコードの利用は可能な状況にある。テレビジョン受像機に接続される外部電子機器のメーカが分かれば、リモコンのコードをそのメーカのものに設定することで、各社の外部電子機器の制御が可能になる。
【００４８】
図１４は今使われているメーカごとに策定したリモコンのコード形式についてまとめた表を示す。これはリモコンコードが何ビットで構成されているかを知るために整理したものである。この表のカスタムコードとはメーカと対象の制御機器（テレビやＶＴＲ等）が何であるかを特定するもので、データコードは機器の動作コード、例えばＶＴＲであれば「再生」「早送り」などの機器の動作を制御する内容になっている。この表から分かるとおりコード構成の最低ビット数はフォーマット（Ａ）では２４ビット、フォーマット（Ｂ）では反転コードを含めて２４ビット、フォーマット（Ｃ）では１６ビットである。したがって、本実施形態で必要とされるリモコンコードのビット数は最低１６ビット、またさまざまな方式及びメーカに対応するためには或る程度の余裕を持って３２ビット程度あれば、テレビに接続されている外部電子機器のメーカと機器を判別し、その機能を制御することができる。
【００４９】
前記図１３に示す本実施形態のメニュー画面に盛り込まれるコードは水平５２画素、垂直５２ライン（画素）としており、盛り込めるデータ量の５５ビットは、リモコンコードに必要とされる３２ビットに比べ充分満足できるものである。１コードあたり水平５ビット目をパリティコードまたは全体のチェックサムコードなどに充てると４４ビットとなる。図１３のコード１〜８までをリモコンコードに割り振り、その後のコード９〜１１を拡張コードに割り振る。拡張コードは例えば一機能一押しではないリモコン操作、例えば３２５チャンネルなど「３」「２」「５」と３回リモコンボタンを押下するようなユーザの複数アクションで達成していた操作などに活用することができる。
【００５０】
次に２次元正極同期信号の再生方法について説明する。図１５は２次元正極同期信号を検出するための構成（以下「同期信号検出部」という）を示したブロック図である。この同期信号検出部は、入力信号を１水平周期遅延させる遅延器Ｄ１１、Ｄ１２、Ｄ１３と、排他的論理和（ＥＸ−ＯＲ）回路Ｇ１１、Ｇ１２、Ｇ１３、Ｇ１４、Ｇ１５と、入力信号を８画素分の時間遅延させる遅延器Ｄ２１、Ｄ２２と、論理積（ＡＮＤ）回路Ｇ２１と、カウンタＣ１、Ｃ２、Ｃ３、Ｃ４、Ｃ５と、ゲートパルス生成器Ｐ１、Ｐ２、Ｐ３、Ｐ４と、論理積否定（ＮＡＮＤ）回路Ｇ３１と、論理和（ＯＲ）回路Ｇ４１、Ｇ４２と、排他的論理和否定（ＥＸ−ＮＯＲ）回路Ｇ５１と、全加算器Ｇ６１と、比較器Ｇ７１と、エッジ検出器Ｇ８１とを備えている。この図において、（ａ）、（ｂ）、（ｃ）はそれぞれ排他的論理和回路Ｇ１１、Ｇ１２、Ｇ１３の出力を示し、（ｄ）、（ｅ）はそれぞれ遅延期Ｄ２１、Ｄ２２の出力を示し、（ｇ）は論理積回路Ｇ２１の出力を示し、（ｊ）、（ｈ）、（ｌ）はそれぞれゲートパルス生成器Ｐ１、Ｐ２、Ｐ３の出力を示す。第１の入力には映像信号が入力され、最終出力は第１の出力と第２の出力とからなる。
【００５１】
２次元正極同期信号の検出は奇数フィールド及び偶数フィールドの何れでも検出が可能であるが、本実施形態では奇数フィールドでの検出について説明する。図１６は２次元正極同期信号の検出を説明するためのタイミング図である。同図のライン（１）、（３）、（５）、（７）は図１０に示したコードの奇数ライン（１）、（３）、（５）、（７）であり、この奇数ラインの同期信号の特徴を捉えて２次元正極同期信号として検出する。図１６の（ａ）〜（ｌ）の波形は図１５に示す構成の各段階での中間出力のそれぞれの波形を表している。排他的論理回路Ｇ１１、Ｇ１２、Ｇ１３のそれぞれの出力（ａ）、（ｂ）、（ｃ）は図１６に示すとおり、３系統とも繰り返し周期が８画素単位に揃って反転している。同図（ｄ）及び（ｅ）は前記（ｂ）及び（ｃ）が８画素分の遅延器Ｄ２１及びＤ２２によって８画素分遅延したのである。（ａ）、（ｂ）、（ｃ）、（ｄ）、（ｅ）が全て８画素周期であれば図１５の論理積回路Ｇ２１の出力は図１６の（ｇ）となり、ハイレベルになっている期間が連続する。このハイレベルの連続は同期信号の水平と垂直両方が一致していることを同時に見ていることになる。第２のカウンタＣ２はこのハイレベルの期間をカウントし、図１６の（ｇ）が（ｈ）に示す第２の矢印の期間ハイレベルであれば第２のゲートパルス生成器Ｐ２に対し信号を出力し、第２のゲートパルス生成器Ｐ２は図１８（ｈ）に示すゲートパルスを出力する。第２のカウンタＣ２のリセットは、波形（ａ）、（ｂ）、（ｃ）の最初の立ち下がりエッジが揃ったところでなされ、その後の立ち下がりエッジでリセットパルスが出ないように保護がかかっているものとする。
【００５２】
また図１６（ａ）、（ｂ）、（ｃ）の波形が一致していることを確認することにより、もう１系統のゲートパルスを生成させる。これは垂直方向だけでの確認になるが、確認の期間が長いので保護のために入れている。垂直方向の一致は排他的論理和否定回路Ｇ５１の出力が連続的にハイレベルになり、図１６（ｉ）に示す波形となる。図１６（ｉ）及び（ｇ）にある×の期間は映像信号にかかるところで値が不定であることを示している。第１のカウンタＣ１は図１６（ｊ）に示す第１の矢印の期間カウントして第１のゲートパルス生成器Ｐ１に対し信号を出力し、その信号により第１のゲートパルス生成器Ｐ１からゲートパルスとして図１６（ｊ）の波形を出力する。この第１のカウンタＣ１についても同様に波形（ａ）、（ｂ）、（ｃ）の最初の立ち下がりエッジが揃ったところでリセットされているものとする。論理積否定回路Ｇ３１は図１６（ｊ）と（ｈ）のゲートパルス波形と第２の入力全てがハイレベルとなったときに出力をロウにする。このパルスは基準同期信号をゲートするパルスとなる。
【００５３】
尚ここで画像の水平同期信号に画素単位のクロックの残留位相誤差がなく且つジッタもないことを前提にすれば、図１６（ｊ）の第１の矢印と同図（ｈ）の第２の矢印と同図（ｇ）及び（ｉ）に示す波形の連続性をカウントして、安定的に（ｈ）と（ｊ）のゲートパルスを得ることができる。しかし安定性に欠ける場合は、図１６の４クロック単位の破線で（ｇ）及び（ｉ）に示す波形の連続性をカウントして評価することで安定したゲートパルスが得られる。この破線の位相は図１０、図１１及び図１２では同期信号の変化点を示していたが、図１６ではそれとは２クロックずれたところにあり、同期信号の変化しない位相である。そしてこの波線の位相の前後１クロックずれたところで同一のレベルになっている。位相クロックが不十分であっても検出レベルが変化しない位相である。但しこの４クロック単位の位相は画像の水平同期信号との関係で決められる。
【００５４】
図１５の（ａ）、（ｂ）、（ｃ）は加算器Ｇ６１に入力される。加算器Ｇ６１で４ライン間にわたる同期信号が揃っていると同一波形の繰り返しとなり、加算結果は３となる。３以上（１、２でもよい）であることを確認するのが比較器Ｇ７１である。加算器Ｇ６１と比較器Ｇ７１の機能は、加算器Ｇ６１を１ビットの全加算器とし、２つの入力と桁上げの入力にそれぞれ（ａ）、（ｂ）、（ｃ）の波形を入力し、桁上がりを出力することで回路を簡単化することができる。比較器Ｇ７１の出力は（ａ）、（ｂ）、（ｃ）と波形は変わらないが、何れかが異なるとハイレベルが出力されないので保護として働きノイズに対する耐性が高められる。エッジ検出器Ｇ８１はパルスの立ち上がり部分１画素分のパルスを出力する。このパルスは図１６（ｃ）のライン時間に複数のパルスを出力するが、前記論理積否定回路Ｇ３１の出力のパルスがゲートして、同図（ｋ）の基準同期信号を得る。
【００５５】
この基準同期信号には、第３のカウンタＣ３と第３のゲートパルス生成器Ｐ４とによって、時間方向の保護がかけられている。第３のカウンタＣ３は画素単位の分解能で１フレームをカウントしていて、カウント値から任意のパルスの位相と幅を出力することができる。第３のゲートパルス生成器Ｐ３は第３のカウンタＣ３のカウント値から図１６（ｌ）の波形を生成し、論理和回路Ｇ４２の出力にゲートされた基準同期信号を得る。尚図１５（ｌ）に示すゲート信号は同期の安定性によってはもう少し広めに取ることもある。基準同期信号を第４のカウンタＣ４で定められた値までカウントしてデータが取り込まれたことを示すフラグ、例えばハイレベルにするフラグを出力する。定められた値とは例えば５とすれば、５フレーム間にわたって基準同期信号が連続して得られていれば正しく同期検出ができたことを示すことになる。尚、第５のカウンタＣ５の役割については後述する。
【００５６】
第４のゲートパルス生成器Ｐ４は１つのコード群の領域を示すパルス、例えば領域をロウレベルとして出力する。このパルスは別のコード群を検出する同期検出回路の第２の入力に入れられて、重複して同じコード群を検出しないように、優先順位の高いものから順番につなげることで複数のコードの検出を可能にする。基準同期信号とコード群の領域パルスを表したものが図１７である。図１７（Ａ）はカウンタの構成を示すブロック図である。これは図１５に示す第３のカウンタＣ３に相当し、水平画素数と垂直ライン数をカウントしている。そのカウント値は図１７（Ｂ）に表すとおりで、同図（Ｂ）にモデル化した映像信号は、１３．５ＭＨｚを標本化周波数とする標準規格に添った水平の画素番号と垂直ライン番号を表したものである。この映像信号の有効エリア内にコード群があり、基準同期信号は図に示しているあたりに位置するが、コード群の左端に基準を置きたい場合には画面の空間内でオフセットすればよい。このように第３のカウンタＣ３が基準同期信号に同期することで、コード群の領域パルスなどを任意に設定できる。したがって、データを抽出するパルスも任意に作成できる。
【００５７】
図１８は画像信号のラインと転送されるデータの関係を示している。同図の左端には画像信号のライン番号が書かれている。２次元正極同期信号に使われるライン番号１〜８はここでは省略して書かれていない。またここではインターレース走査の奇数ラインのみ示している。ライン番号の右に書かれているＣ０、Ｃ１、Ｃ２、…と書かれている箱１つ１つが８画素からなる１ビットのデータである。また伝送されるデータは連続する２ライン（フレームでは４ライン）で同じものが送られるため、後述する５ビット目（Ｐ９、Ｐ１１、Ｐ１３、…）をのぞき１ビット目から４ビット目までについてはライン９とライン１１は同じものになっている。これはライン１３とライン１５、以下も同様になっている。前記したとおり基準同期信号でデータの各位置に相当するパルスを生成できる。したがって図１８のますめに示すデータをフリップフロップのデータ入力とし、基準同期信号より得られるパルスをフリップフロップのクロック入力としてデータを抽出する。本実施形態でのデータは２ライン毎に同じデータ（フレームでは４ライン毎）が得られる。得られたデータはフィールド単位またはフレーム単位でＣＰＵバスを経由しＣＰＵに入力され、ＣＰＵにおいてデータの内容が認識される。
【００５８】
データの内容についてはここで特に限定するものでないが、本実施形態のように各ライン４ビット目までをデータとし、５ビット目をパリティビットとすることで誤りの検出に使うこともできる。またパリティに活用している５ビット目にデータ全体のチェックサムの値を盛り込み、同様にエラーの検出に利用することもできる。本実施形態では同一画面内ではデータの内容は変化しないことを前提としているので、エラーがあった場合はそのデータを無視するだけで良く、エラー訂正機能までは必要としない。したがって、エラー検出程度は極めて簡単な内容ですますことができ、これはデータ伝送においてメリットとなる。
【００５９】
次にアイコンのすげ替えについて説明する。図７のテレビ画面Ａには外部電子機器から転送されたコードがむき出しの状態で表示されており、操作を誘導するためのＧＵＩの画面としては相応しくない。２次元バーコードなどむき出しのコードは最近至る所に活用されているので、それほど違和感を感じなくなってきているが見苦しさは拭えない。このむき出しのコードを同図テレビ画面Ｂに表示されているようなパソコンの画面に展開されるいわゆるアイコンに変換することで、画面としての見栄えが良くなり、また操作の内容が見た目で判別することができ、使い勝手の良い操作画面になる。
【００６０】
このアイコン画像をテレビジョン受像機がどのような手段で取得するかについて説明する。図７のテレビ画面Ｂに表示されている再生や停止を意味するアイコンなど、テレビジョン受像機に接続されることの多いＶＴＲなどの基本操作のためのアイコンは、テレビジョン受像機内部にあらかじめアイコンのデータを持っておくことで容易にアイコンのすげ替えをすることができる。しかし、これは多様な制御内容に対しての真の解決方法ではなく、表示できるアイコンのデザインも固定されたものとなる。外部電子機器の特別な機能のアイコンや固有のデザインのアイコンを表示するためには、外部電子機器からテレビジョン受像機にこれらのアイコンのデータを転送する必要がある。
【００６１】
本発明のユニバーサル・ネットワーク・グイでは、このアイコン画像をコード領域またはコードで指定した領域、または事前に規定した領域に盛り込んで時分割で送り、それをテレビジョン受像機のメモリに取り込んで画面に表示する。コードに変わってアイコン画像が送られるタイミングの検知について説明する。手法としては同期信号またはコードの内容を周期的に変更することで時間方向のタイミングが計れるようにする。本実施形態ではコード１ビットに変化を付ける方法をとる。
【００６２】
図１９（Ａ）は時間方向の同期を取るためのコード１ビットの変化を示している。どのコードにこれを割り付けるかはここでは規定しないが、商品開発する段階では規定する必要がある。また、時間方向の同期は２次元正極同期信号内の同期検出に影響しないところを変化させても可能である。同図（Ｂ）はコードとアイコンを送っている期間を表しており、横方向のハッチングが入った期間がアイコン転送部である。目盛りは１垂直周期単位に付している。本実施形態ではフレーム単位でコードを転送する方式としているので、図１９（Ａ）のコードがハイレベルになる期間は２垂直周期である。またインターレース信号にも対応するためにアイコンを転送する期間も２垂直周期とする。
【００６３】
アイコン転送時は２次元正極同期信号を送れないため、２次元正極同期信号の検出ではこれを配慮する必要がある。図１５に示す構成では、第５のカウンタＣ５で基準同期信号（本実施形態ではフレーム単位）が検出されない場合をカウントしており、このカウント値を２以上（２は４垂直周期）に設定しておけば外れない。したがって、同期は第４のカウンタＣ４で基準同期信号が５フレーム以上検出されるとデータ取り込みフラグが立って同期したことになり、２フレーム以上同期が来なければ同期が外れる。アイコンの転送は１フレーム（２垂直周期）を８フレーム（１６垂直周期）毎に送るので、同期が外れることなく転送できる。
【００６４】
図２０は本発明のユニバーサル・ネットワーク・グイの双方向システムの構成を表すブロック図である。図２０には、テレビジョン受像機１に赤外線を使用する外部装置用リモートコントローラ５と外部電子機器２がそれぞれ接続されていることが描かれている。ここには外部電子機器は１機種しか示されていないが、複数の外部電子機器を接続する場合もテレビジョン受像機と外部装置用リモートコントローラ及び外部電子機器の関係と構成は変わらない。
【００６５】
図２０のテレビジョン受像機１にはアナログ接続またはデジタルＩＦで接続された外部電子機器２から、これまで説明してきた制御コードとアイコンが盛り込まれたＧＵＩ画像が転送されてくる。外部電子機器２内では同期生成器２０３にて作成された２次元正極同期信号が合成器２０８に送られ、コードとアイコン生成器２０４で作成された制御コードとアイコンの時分割信号が合成器２０８に送られ、またグラフィックス生成器２０５で作成されたその他のさまざまな文字情報や図形情報が合成器２０８に送られる。この外部電子機器２が蓄積メディアであれば再生信号、またチューナであれば放送信号に相当する映像信号が信号源２０６から出力される。この映像信号が同期誤検出保護器２０７にて２次元正極同期信号に対する保護がかけられ合成器２０８に送られる。合成器２０８では入力されたそれぞれの信号を合成して制御メニュー画面として出力し、アナログ接続またはデジタルＩＦを経由してテレビジョン受像機１に送る。
【００６６】
外部電子機器２からテレビジョン受像機１に送られたＧＵＩ画像信号は、同期検出及びタイミングパルス発生器１１、コード抽出器１５、アイコンメモリ１２及び合成器１３にそれぞれ入力される。同期検出及びタイミングパルス発生器１１では入力されたＧＵＩ画像信号から２次元正極同期信号を分離して、各機能ブロックに対して必要なパルスを生成して出力する。
【００６７】
アイコンメモリ１２は同期検出及びタイミングパルス発生器１１から送られたパルスに従いＧＵＩ画像信号に時分割多重されているアイコン画像を取り込み、画素単位でメモリに書き込む。アナログ接続時に必要なＡＤコンバータはここでは省いて示していない。データは誤ると制御内容が変わってしまい大きな問題となるため、本実施形態ではデータ単位を８画素で１ビットとしている。しかしアイコンは画像であり、アナログ接続で少々の歪み生じても問題がないため画素単位の処理でも問題はない。
【００６８】
合成器１３ではアイコンメモリ１２からの入力で画面上の所定の位置に表示される制御コードのアイコンへのすげ替え処理が行われ、そのアイコン画像と入力されたＧＵＩ画像及びグラフィックス生成器１７で作られたテレビジョン受像機内の情報の画像が合成される。合成器１３で合成された映像は表示装置１４で表示される。
【００６９】
ユーザは表示装置１４に表示されたＧＵＩ画像（例えば図７テレビ画面Ｂ）を見て、所望の制御アイコンを選択する。このアイコンの選択の仕方は、現行のリモコンでは上下左右決定ボタンの操作でもよく、またテレビにつけられたビデオカメラによる映像を使用したアイコン選択手段によっても良く、ここではアイコン選定手段を限定するものではない。またアイコンを選択する際に、どのアイコンを選択しているかが分かるように、簡単な方法としては選択したアイコンの下にカーソルを付加したりして明示する必要がある。この処理はテレビジョン受像機１内のグラフィックス生成器１７において行われる。
【００７０】
テレビジョン受像機１内のコード抽出器１５は図１８を参照して説明したようにデータを抽出し、抽出した制御コードの内容をバスを経由してＣＰＵ１６へ入力する。ＣＰＵ１６では、制御コードの内容をソフトウェアで解読してリモコンコード発生器１８に適切な制御コードを転送する。ここで外部電子機器２からＧＵＩ画像信号に合成されてくるコード内容は、外部電子機器２に使われているリモコンコードそのものを使うことが望ましい。リモコンコードは各社個別に規定されているが、この場合基本的なリモコンコードを互いにオープンにするだけで良く、統一規格化と言った面倒な作業を経ることなく業界での共通化が達成できる。
【００７１】
リモコンコード発生器１８からの信号により外部装置用リモートコントローラ５の赤外線発光部から赤外線が発射される。これを外部電子機器２の赤外線受光部２０１で受光し、赤外線受光部２０１はそれをパルスに変換してＣＰＵ２０２に送る。ＣＰＵ２０２は制御コードをソフトウェアで解読し、外部電子機器２を制御する。例えばビデオテープレコーダでは「再生」や「停止」などの制御である。
【００７２】
次に図２０の外部電子機器２内の同期誤検出保護器２０７について説明する。画面メニューや映像信号の中で２値化したときに２次元正極同期信号と同じ波形がでた場合、テレビジョン受像機１で２次元正極同期信号ではないにもかかわらず２次元正極同期信号として誤検出を起こす可能性がある。これを避けるために、信号源２０６から出力される信号に同期誤検出保護器２０７でエラー信号を付加する。２次元正極同期信号のパターンは映像信号ではまずあり得ないような相関性のないパターンを選んでいるが、より確実で安心なものにしておく必要がある。画面メニューのようなものは事前に画像の内容が分かっているので確認しておけるので問題はないが、あらゆるパターンの信号が来る映像信号は、誤検出の問題を想定しておく必要があり、それを回避する手段として同期誤検出保護器２０７が設けられている。
【００７３】
図２１は同期誤検出保護器２７の構成を示すブロック図である。図２０の信号源２０６から出力される信号は２つに分かれ、１つは同期検出器及びタイミングパルス発生器２７１に入力され、もう１つはエラー付加器に入力される。同期検出及びタイミングパルス発生器２７１は図２０のテレビジョン受像機１内の同期検出及びタイミングパルス発生器１１と同じものである。図２１の同期検出及びタイミングパルス発生器２７１は図２０の信号源２０６から入力された映像信号から２次元正極同期信号を検出する。２次元正極同期信号の検出の仕方は前記したとおりであるが、４ラインからなるパターンの一致を見て、さらに時間方向にも繰り返していることを確認している。ここでテレビジョン受像機１の時間方向の繰り返しを上回って検出を確認した場合、同期検出及びタイミングパルス発生器２７１はエラー付加器２７２に信号を送る。エラー付加器２７２はその信号に従い映像信号をわずかに変更して、映像信号が２値化したときの２次元正極同期信号パターンと同じにならないようにする。図２２は映像信号が２次元正極同期信号と同じパターンであったものにエラー付加器２７２で変更した信号を表している。同図のライン（５）に反転として示した部分が変更された部分であり、ここには本来の波形を反転させる変更が加えられている。この変更により信号はテレビジョン受像機で２次元正極同期信号としては検出されることはない。これによりあらゆる信号形態を想定しなければならない動画像においても、制御コードとアイコンを誤検出することなく判別することができる。以上が第１の実施形態のアナログ接続及びデジタルＩＦ共通に実施できる内容である。
【００７４】
次に第２の実施形態を説明する。第２の実施形態は、接続方式をデジタルＩＦに限定した、本発明の２次元正極同期信号と制御コードをデジタルデータに埋め込んで転送するようにしたものである。
第１の実施形態では、アイコンを時分割にして転送し、テレビジョン受像機に備えたメモリにアイコンデータを保持して２次元正極同期信号及び制御コードとすげ替える処理をしていた。この方法はアナログ接続及びデジタルＩＦの両方で可能な方法であるが、デジタルに限定すれば、メモリを用いてすげ替えすることなく、実用上人間が知覚できない程度に、２次元正極同期信号及び制御コードを埋め込むことができる。本実施形態では、見た目にもっとも影響が少ないデジタル映像信号のＬＳＢに２次元正極同期信号及び制御コードを盛り込んで、第１の実施形態と同様の検出方法で基準同期信号を取り出す。
【００７５】
図２３は第２の実施形態の全体のシステム構成を表すブロック図である。基本的な構成は図２０と同じであり、ここでは一部のデジタル信号固有のところについて説明する。図２３の外部電子機器２の信号源２０６ｄからの信号を例えば８ビットデジタル信号とすると、同期誤検出保護器２０７ｄはその信号のＬＳＢのみをチェックし、上位７ビットは直接合成器２０８ｄに入力される。同期生成器２０３ｄから出力される２次元正極同期信号とコード生成器２０４ｄから出力される制御コードは合成器２０８ｄで信号源２０６ｄから入力されたデジタル映像信号のＬＳＢである８ビットめに合成される。合成器２０８ｄで合成されたデジタル映像信号はテレビジョン受像機１に転送され、同期信号及びタイミングパルス発生器１１ｄとコード抽出器１５ｄにはデジタル映像信号のＬＳＢのみが入力される。一方転送されたデジタル映像信号はテレビジョン受像機１の合成器１３ｄにも入力されるが、ＬＳＢミュート部１２ｄによってそのデジタル映像信号はＬＳＢがミュートされている。ＬＳＢといってもコードのパターンが揃うとその模様が知覚され、妨害となる。そこでその妨害を抑圧するためにデジタル映像信号のＬＳＢを０または１に固定することによってミュートする。ＬＳＢミュートはもっとも簡単な方法であるが、第１の実施形態と同様にメモリを設けて、ＬＳＢのみを時分割ですげ替える方法もある。
【００７６】
図２４は図２３の外部電子機器２内でデジタル映像信号に２次元正極同期信号と制御コードを盛り込む処理を行う部分の構成を示すブロック図である。図２４の同期生成器２０３ｄで生成された２次元正極同期信号とコード発生器２０４ｄで生成した制御コード信号は切替器２８２でパラメータα２により時分割多重される。切替器２８２で時分割多重された２次元正極同期及信号び制御コード信号は１ビットであり、デジタル映像信号のＬＳＢになるものである。一方グラフィックス生成器２０５ｄと信号源２０６ｄの出力信号は８ビットのデジタル信号である。信号源２０６ｄから出力されるデジタル映像信号のＬＳＢ信号は、同期誤検出保護器２０７ｄで２次元正極同期信号と同じパターンが検出されると、その部分が変更され、同期信号が保護される。この同期誤検出保護器２０７ｄは第１の実施形態と同じものである。切替器２８１はグラフィックス生成器２０５ｄと信号源２０６ｄからのデジタル信号をパラメータα１により切り替える。その後この信号は、ＬＳＢのみパラメータα３により切替器２８３にて、時分割多重されている２次元正極同期信号と制御コードにすげ替えられる。これによりデジタル映像信号のＬＳＢに２次元正極同期信号と制御コードが盛り込まれるとともに同期誤検出保護もかけられているため、デジタル信号のＬＳＢパターンが万が一同じパターンがきても誤動作を起こすことはない。
【００７７】
デジタル画像信号のＬＳＢはもっとも変化が激しくランダム性があるので、２次元正極同期信号のように規則的な信号と区別し易いが、規則的であるともっとも振幅の変化が小さいＬＳＢでもパターンとしても認識しやすいものでもある。このパターンはできるだけ空間周波数が高い周波数領域にある方が目立ちにくくなる。テレビジョン受像機ではミュートをかけるので見えないが、ミュートをかけない場合またはミュートがかかるまでは見えてしまう。図１３（Ａ）の走査信号では２次元正極同期信号と制御コードを奇数ライン、偶数ラインともに２ライン同じものを送っているところを示してあるが、図２５（Ａ）には２ライン目の奇数ラインの信号は１ライン目の奇数ラインの信号を反転させたもの、２ライン目の偶数ラインの信号は１ライン目の偶数ラインの信号をを反転させたものが示されている。これにより空間周波数を高めてパターンが目立ちにくくしている。図２５（Ｂ）は同図（Ａ）を縦横とも２分の一にしたものである。またここでは図示していないが、デジタルＩＦではデータを正確に１画素単位で転送できるため、図２５（Ｂ）よりもさらに水平成分を減らすことが可能である。また第１の実施形態ではコードの０または１をアナログ伝送の歪みを考慮して特定の波形にしたが、デジタルＩＦの場合は１画素１ビットコードを送り転送容量を向上させることも可能である。
【００７８】
図２６に本発明の応用例を示し、その有効性を説明する。図２６（Ａ）はテレビジョン受像機の画面を示しており、そこには接続している外部電子機器内で映像とメニュー画面を合成したものが転送され映し出されている。メニュー画面部分には再生や停止などの制御のアイコンが配置されている。アイコンは外部電子機器から送られてきた２次元正極同期信号をもとに抽出されたものが表示されており、同時に外部電子機器の制御コードもテレビジョン受像機で認識できるものになっている。したがって、テレビジョン受像機のリモコンまたはその他のポインティング機能でアイコンを選択することで外部電子機器の制御が可能になっている。また同図（Ｂ）もテレビジョン受像機の画面を示しているが、こちらは映像信号内にアイコンが展開されているものである。リアルタイムに変化する映像信号の中に２次元正極同期信号を盛り込んでも、テレビジョン受像機側で２次元正極同期信号を検出し、同図（Ａ）の場合と同様に制御コードとアイコンを抽出することができる。
【００７９】
また、図２７もテレビジョン受像機の画面が示されているが、ここにはビデオ入力１に接続された外部電子機器から送られたＥＰＧ（電子番組ガイド：Electronic Program Guide）の録画予約メニュー画面が表示されている。ＥＰＧの番組を示すコードを２次元正極同期信号を使いテレビジョン受像機に転送することでテレビのリモコンによる番組の予約操作が可能になる。ここに表示されている再生や停止のアイコン、さらにＥＰＧ画面は、外部電子機器から送られてくるもので、テレビジョン受像機にある本来の機能ではないが、操作はテレビジョン受像機で統一的に行うことができる。また新規外部電子機器が接続されても、また接続されている外部電子機器に新たな機能制御が加わっても、外部電子機器の制御操作はテレビジョン受像機で同様に統一的に操作ができるものである。
【００８０】
このようにして外部電子機器の制御は、テレビジョン受像機の画面に映し出された外部電子機器のメニュー画面を見ながらテレビジョン受像機付属のリモコンやその他のポインティング操作をすることで、該当の制御アイコンを選択決定し、外部電子機器を制御することができる。これによりリモコンを持ち変えることなくテレビジョン受像機に接続されている外部電子機器の制御をすることができる。例えばハードディスクレコーダのように記録メディアを取り出す必要のない外部電子機器の場合、ユーザから見えないところにその外部電子機器が置かれてあっても、外部装置用リモートコントローラの赤外線がその外部電子機器に伝わるように機器をセットしておくことにより、操作が可能になる。また本実施形態では赤外線の外部装置用リモートコントローラを使っているが、デジタルＩＦの場合は情報の流れが双方向のため、制御フォーマットが策定されているならば赤外線の外部装置用リモートコントローラを使うことなくデジタルＩＦを介したデータ転送を使って、外部電子機器を制御することもできる。
【００８１】
図２８には赤外線リピータを使った本発明の応用例が示されている。テレビジョン受像機１にはアナログ接続またはデジタルＩＦによる接続６にて４台の外部電子機器２が接続されている。テレビジョン受像機１はリモコンの赤外線受光部１ａと赤外線発光部１ｂを備えている。また部屋の反対側または電子機器２に向かっているところには赤外線リピータ５ａが設置されている。図２９に示す例では操作に使用するリモコンの数はテレビジョン受像機と外部電子機器を合わせた数だけ必要であったが、図２８に示す例ではテレビジョン受像機のリモコン４は１台だけでよい。図２８の外部電子機器２からは映像信号のメニュー画面に付加された制御コードがテレビジョン受像機１に転送され、リモコン４で選択された外部電子機器２の制御はその解読された制御コードにしたがったリモコンコードが赤外線発行部１ｂから赤外線リピータ５ａに向け放射される。赤外線リピータ５ａでは受光した赤外線の波形を整形して、外部電子機器２に向けて赤外線を放射する。この利用形態では図６に示すようにラックに入った外部電子機器毎に設置した外部電子機器用リモートコントローラ６１〜６４は不要である。また赤外線リピータ５ａを使えば隣の部屋などにも制御がおよび、無線のデジタルＩＦで映像信号と制御コードをテレビジョン受像機１に送れば、広範囲の機器に対して無線で対応できる。
【００８２】
以上詳述した本発明の実施形態では、全ての接続方式にある映像そのものに制御コードを乗せて、２次元正極同期信号を判別してコードを抽出する方式を採用したので、映像が転送できる方式であればアナログ接続やデジタルＩＦまたは有線無線にかかわらず対応できる。
【００８３】
外部電子機器に向けた制御方式は赤外線による外部装置用リモートコントローラやまた最後に記述した赤外線リピータを活用するため、極めて安価に実現できるとともに、すでに決まっている制御フォーマットを各メーカ間でオープンにすることで利用できる。またリモコンコードは調べれば分かることでもあり、実施が容易である。したがって本発明によれば、いつまで経っても実現できないホームネットワークの代用としての役割を担うこともできると共に、また他の方式と相容れられるものであり、ユーザにとって多様化するＡＶ機器の利便性の向上が図れる有効な方法が提供される。
【００８４】
本実施形態では制御コードとして各外部電子機器のリモコンコードを使用し、外部電子機器の制御を利用目的にして取り上げたが、２次元正極同期信号以外のコードはこの制御コードに限定されるものではなく、制御コードを記述した領域にはその他の多様な情報を盛り込むことができる。
【００８５】
以上のような効果をもつ本発明のユニバーサル・ネットワーク・グイは、テレビジョン受像機をＡＶ機器のセンター情報機器として位置づけ、これを中核にして接続される外部電子機器をテレビジョン受像機の画面メニューを操作する方式、すなわちＧＵＩによる操作であらゆる機器を遠隔操作するものである。これによるテレビジョン受像機を中核にした統一操作の実現は、接続先が何であるか分からなくても、ＧＵＩ画面を介して接続先の操作内容が把握できるため、新規外部電子機器も努力することなく扱える家電感覚の操作形態を実現することに他ならない。本発明はさまざまな接続方式を有するＡＶ機器の使い勝手の問題を解決する有効な手段を提供し、誰でもが電子機器を簡単に扱える方策として重要な役割を担うことができる。
【図面の簡単な説明】
【００８６】
【図１】テレビジョン受像機と外部電子機器の設置例を示す図である。
【図２】テレビジョン受像機の操作メニュー画面を示す図である。
【図３】テレビジョン受像機に接続された外部電子機器のメニュー画面例を示す図である。
【図４】テレビジョン受像機の接続パネルを示す図である。
【図５】外部装置用リモートコントローラを介した外部電子機器の操作を説明するための図である。
【図６】テレビジョン受像機と外部電子機器と外装置用リモートコントローラの接続例を示す図である。
【図７】外部電子機器操作用のメニュー画面に表示される制御コード群をアイコン表示に置き換える方法を説明するための図である。
【図８】映像信号に使われるアナログ信号とデジタル信号の振幅規定を説明するための図である。
【図９】一般画像の画像空間内での相関性を説明するための図である。
【図１０】画像信号のライン１からライン１２に組み込まれた２次元正極同期信号と制御コードの波形を示す図である。
【図１１】画像信号のライン１３からライン２４に組み込まれた制御コードの波形を示す図である。
【図１２】コードのフォーマットとデータ抽出方法を説明するための図である。
【図１３】コードデータが表示されたテレビジョン受像機の画面を示す図である。
【図１４】３種類のリモコンコード体系を表として示す図である。
【図１５】２次元正極同期信号の検出及び制御のためのタイミングパルスの発生を行う同期信号検出部の構成を示すブロック図である。
【図１６】図１５に示す同期信号検出部の動作を説明するためのタイミング図である。
【図１７】図１５に示す同期信号検出部で抽出される基準同期信号とそれから得られるコード群をとらえるタイミングパルスの関係を映像信号上で説明するための図である。
【図１８】奇数フィールドにあるデータの取り込みを説明するための図である。
【図１９】アイコンのすげ替えタイミングを示すタイムチャートである。
【図２０】本発明の第１の実施形態にかかるテレビジョン受像機と外部電子機器の要部の構成を示すブロック図である。
【図２１】図２０に示す同期誤検出保護器の構成を示すブロック図である。
【図２２】同期誤検出保護器の作用で変化した画像信号の波形を示す図である。
【図２３】本発明の第２の実施形態にかかるテレビジョン受像機と外部電子機器の要部の構成を示すブロック図である。
【図２４】図２３に示す外部電子機器の合成器の構成を示すブロック図である。
【図２５】本発明の第２の実施形態におけるコードデータが表示されたテレビジョン受像機の画面を示す図である。
【図２６】本発明の応用例を説明するための図である。
【図２７】本発明のＥＰＧ画面での一応用例を示す図である。
【図２８】赤外線リピータを使った応用例を示す図である。
【図２９】現状のテレビジョン受像機と外部電子機器とリモコンの関係を説明するための図である。
【図３０】テレビジョン受像機と外部電子機器を接続するさまざまな方式を示す図である。
【符号の説明】
【００８７】
１ テレビジョン受像機（表示電子機器）
２ 外部電子機器
３ ユーザ（操作者）
４ リモコン装置
５ 外部リモートコントローラ
１１ 同期検出及びタイミングパルス発生器（同期信号検出手段）
１２ アイコンメモリ
１２ｄ ＬＳＢミュート部
１４ 表示装置
１５ コード抽出器
１６ ＣＰＵ
１７ グラフィックス生成器
１８ リモコンコード発生器
２０１ 赤外線受光部
２０３ 同期生成器
２０４ コードとアイコン生成器
２０５ グラフィックス生成器
２０６ 信号源
２０７ 同期誤検出保護器
２０８ 合成器
２７１ 同期検出器及びタイミングパルス発生器
２７２ エラー付加器
【技術分野】
【０００１】
本発明は、テレビジョン受像機やパーソナルコンピュータのような表示装置を有する電子機器を含む複数の電子機器からなる電子機器システムに関し、特に表示装置を有する電子機器を介してそれに接続される電子機器の遠隔操作を行うことができる電子機器システムに関する。
【背景技術】
【０００２】
１９８０年代に赤外線リモートコントローラ（通称リモコン）がテレビジョン受像機をはじめとする家電機器に付属するようになり、手元で制御できるユーザインターフェースが広く普及し、家電製品の利用形態を大きく変貌させた。現在においてもこの操作形態が主流であり、リモコン操作は１機能を１押しで実行する仕組みが基本となっている。テレビジョン受像機用リモコンを例に取れば「電源」「チャンネル」「音量」「入力切替」などのキーがそれに該当する。リモコンはこれまでのテレビジョン受像機及びそれに接続される外部電子機器にとって大変便利な遠隔の操作方法であった。
【０００３】
しかしながら、最近始まったデータ放送では、所望のメニュー画面を選択するためにはリモコンの「上下左右」や「決定」キーを何度も押下する必要がある。またＥＰＧ（電子プログラムガイド）では、マトリクスに配列された案内画面から所望の位置を選択し、録画予約をするためにはさらに何度もキーを押下する必要があり、データ放送での操作と同様リモコン操作は煩雑で使いづらくなっている。
【０００４】
特許文献１には、このような課題を解決するために、マウスまたはこれに類似する位置指定操作装置により得られる位置指定情報を、キー押下信号の時系列パターンであるキー押下時系列符号に符号化し、そのキー押下時系列符号をテレビジョン受像機に送信するようにした制御装置が提案されている。
【０００５】
【特許文献１】特開２００３−２８３８６６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
特許文献１に示された制御装置は、パーソナルコンピュータ（パソコン）の操作と酷似したポインティングの操作により、テレビジョン受像機を遠隔操作するものである。したがって、パソコンを利用しない人にとっては使いづらいもので、情報リテラシー（情報を使いこなす能力）の観点から、パソコンの使い勝手をそのまま導入することは無理がある。遠隔操作が求められる今日のテレビジョン受像機の利用形態にマッチした新たな操作手段が必要になっている。
【０００７】
さらにネットワーク化の進展は、宅内のストレージメディアや宅外のインターネットから得られる多様な情報を、テレビジョン受像機やパソコンのディスプレイに表示することで情報を受容することになる。この場合の操作形態は情報源に依存するため、多様な操作形態に対応する必要があり、家電機器に付属する現状のリモコンでは充分な対応が出来なかった。
【０００８】
このような状況において、多様な電子機器に対応できる柔軟性と遠隔操作の利便性を両立させ、手元で利用するリモコンのような遠隔操作用機器を不要とした電子機器の制御装置を本出願人は既に提案している。この装置はテレビジョン受像機上に作り出されるグラフィカルなユーザインターフェース（以下ＧＵＩ：Graphical User Interface）に対しての遠隔からのポインティング操作を効果的に改善したものである。
【０００９】
この新たな制御装置によるネットワーク機器の制御は、電子機器同士の双方向通信のためのデジタルインターフェース（以下「デジタルＩＦ」という）での接続が前提となる。テレビジョン受像機に接続されているネットワーク機器の操作は、デジタルＩＦを介してテレビジョン受像機に表示されるネットワーク機器の操作メニューを選択操作し、その制御情報がネットワーク機器へフィードバックされることでなされる。しかしながら、デジタルＩＦは方式が多様化しており全てのデジタルＩＦと上位の制御プロトコルにわたって対応することは、コストや開発工数の面で困難になっている。また従来のアナログ機器の接続は片方向通信であり、テレビジョン受像機がその接続を介して制御情報を取得することは困難な問題であった。
【００１０】
デジタルＩＦの開発分野では電子機器同士の相互接続を図る目的で、ネットワークにつながる機器を制御するための統一された上位プロトコル策定の取り組みが活発に進められている。しかし、現実にはそれを利用したホームネットワークを形成するまでには至っていない。現状における一般家庭でのオーディオとビデオ機器の利用形態を踏まえ、低廉で簡単に実現できるネットワークの制御方式及び制御装置が必要になっている。
【００１１】
テレビジョン受像機の操作については、本出願人が提案した前述の制御装置により、ポインティング機能を有する遠隔操作が可能な操作手段を導入することでテレビジョン放送の多様化と複雑化に対して使い勝手の面で改善がなされている。しかしながら、テレビジョン受像機に接続されているネットワーク機器を制御するためには、さまざまなデジタルネットワークの制御プロトコルに対応する必要がある。このネットワーク機器の制御に関して長年業界で取り組んではいるがその統一化ならびに普及には至っていないのが現状である。図２９は現状でのテレビジョン受像機とテレビジョン受像機に接続されている電子機器の操作方法にある問題点を説明するための図である。テレビジョン受像機１には４台の外部電子機器２がアナログもしくはデジタルＩＦで接続されており、外部電子機器２の操作には、従来から使われているそれぞれの外部電子機器２に対応するリモコン４が活用されている。そしてここにはデジタル及びアナログの両接続方式を含めて、つながる機器の数に合わせてリモコンの数が増える問題がある。この問題は、テレビジョン受像機につながるＶＴＲ、ビデオディスク、その他オーディオ機器などを操作するときにどのリモコンが該当のリモコンであるか判別がつかなくなるようなことで、現状でもよく経験している現象である。
【００１２】
図３０には現状におけるテレビジョン受像機とそれを取りまく外部電子機器及びその接続方式が示されている。デジタルＩＦのｉＬｉｎｋ（IEEE1394）は、セキュリティ（5C−DTCP）やストリームのリアルタイム転送（Isochronous）に対応でき、接続しているどの機器もホストになりえて機器同士が対等につながることを前提としており、制御仕様であるＡＶＣプロトコルで扱われるＡＶ機器を中心に発展している。さらに制御方式としてｉＬｉｎｋ（IEEE1394）上で相互接続性を図ることを目的としたＨＡＶｉ（Home Audio / Video interoperability）と呼ばれる上位プロトコルとミドルウェアが規定されてはいるが、普及するまでに至っていない。またコンピュータではＬＡＮを利用したイーサネット（登録商標）（Ethernet（登録商標））、既設の電話線を利用したＨｏｍｅＰＮＡ（Home Phone line Networking Alliance）、パーソナルコンピュータ系で発展してきたＵＳＢ（Universal Serial Bus）などがあるが、これらはＡＶ機器にも利用されてきている。また最近ではＨＤＭＩ（High-Definition Multimedia Interface）をＡＶ機器に採用することが活発化している。これには制御プロトコルを転送するＣＥＣ（Consumer Electronics Control）と呼ばれるラインが設けられているが、まだプロトコル自体の規定には至っていない。さらに携帯端末（ノートＰＣ、携帯電話、ＰＤＡなど）の接続方式ではケーブルを嫌う性質上、免許なしで使用できる２．４ＧＨｚバンドのＢｌｕｅｔｏｏｔｈが注目されている。さらに無線による接続方式ではＵＷＢ（Ultra Wide Band）がＢｌｕｅｔｏｏｔｈや無線ＬＡＮ（IEEE 802.11b）などよりも高速であるため家庭用のＡＶ機器への応用が期待されている。
【００１３】
このようにさまざまな接続方式が乱立すると異種接続方式間の相互接続問題が出てくる。これは映像や音声の転送方式間での乗せ換え機能や制御プロトコルの変換機能をＡＶ機器に搭載しなければならないといった問題である。これはＡＶ機器の価格を押し上げることに他ならず、民生ＡＶ機器及び家電製品全般において使い勝手と価格の両面を満足するものとは言えなくなり、真のユーザの利益になりうるものではない。現状のデジタルＩＦを総括すると、ビデオとオーディオのリアルタイムでの転送は可能になり、制御プロトコルについては統一規格の策定に向けて関係各方面で努力はなされているが、いまだに統一化と普及にまでは至っていない。その結果として接続機器の数だけリモコンが必要となっている。
【００１４】
一方アナログ接続ではビデオ信号とオーディオ信号については複数のピンジャックケーブルで接続する方式が早くから定着し、今日においてもこれが接続方式の主流を占めている。またデータの転送においてはＶＩＢ（Vertical Interval Blanking：垂直帰線期間を使用する伝送方式）が策定されている。しかし、データの転送方向が一方向だけであり、双方向的な制御をするためには、やはりリモコンが必要となる。結果としてデジタルＩＦと同様に接続機器の数だけリモコンが必要になっている。
【００１５】
現状は前記したとおり、デジタルＩＦにおいては双方向での制御データの転送の仕組みは盛り込まれているが、規格が乱立し制御プロトコルについても規格統一がなされておらず、これがデジタルＩＦの普及に至っていない理由となっている。また現状のデジタルＩＦにおいては従来のアナログ方式との連続性も考えられていない。テレビジョン受像機やストレージメディアと言った一般民生用ＡＶ機器に関して、テレビジョン受像機とこれにつながる外部電子機器に付属するリモコンが氾濫し、統一されたスタイルでこれらの機器を制御することがいつまで経っても実現できないという課題が存在している。
【００１６】
本発明は上述した点に着目してなされたものであり、表示装置を有する表示電子機器とそれに接続された多様な外部電子機器の制御を、接続の方式に左右されることなく、表示電子機器付属のリモコンもしくは表示電子機器を介した操作で、統一的に行うことができる電子機器システムを提供することを目的とする。
【課題を解決するための手段】
【００１７】
上記目的を達成するため請求項１に記載の発明は、表示装置を有する少なくとも１つの表示電子機器と、該表示電子機器に接続された少なくとも１つの他の電子機器からなる電子機器システムにおいて、前記他の電子機器は、前記表示電子機器へ伝送する映像信号の所定領域に、所定の同期信号及び前記他の電子機器の制御に必要な情報を含む付加情報を付加する情報付加手段を備え、前記表示電子機器は、前記他の電子機器から供給される映像信号から前記付加情報を抽出する抽出手段と、該抽出手段により抽出された付加情報に基づいて、前記他の電子機器を制御するための制御情報を前記表示装置に表示する制御情報表示手段と、前記表示装置に表示された制御情報の中から操作者が所望の制御情報を選択したとき、該選択された制御情報を前記他の電子機器に転送する転送手段とを備え、前記他の電子機器は、前記転送手段により転送された制御情報に応じた制御動作を行うことを特徴とする。
【００１８】
請求項２に記載の発明は、前記転送手段は、前記選択された制御情報を、赤外線リモートコントローラを介して前記他の電子機器に転送することを特徴とする。
【００１９】
請求項３に記載の発明は、前記情報付加手段は、前記映像信号の前記所定領域以外の領域において、前記同期信号と同一パターンの検出を行い、前記同一パターンが検出されたときは、該同一パターンが検出された信号の一部を変更することを特徴とする。
【００２０】
請求項４に記載の発明は、前記情報付加手段が付加する付加情報は、前記制御情報としてアイコンを前記表示装置に表示するためのアイコン情報を含み、前記制御情報表示手段は、前記アイコン情報に基づいて、前記制御情報に対応するアイコンを前記表示装置に表示することを特徴とする。
【発明の効果】
【００２１】
請求項１に記載の発明によれば、表示電子機器に接続されている他の電子機器の制御に必要な情報を含む付加情報が所定の同期信号とともに映像信号の所定領域に付加されて表示電子機器に伝送される。表示電子機器では送られた映像信号から付加情報が抽出され、抽出された付加情報に基づいて他の電子機器を制御するための制御情報が表示装置に表示される。操作者はメニュー画面に示されている操作項目を表示電子機器に付属するリモコンなどによって選択する。そして操作者が所望の制御情報を選択すると、選択された制御情報が表示電子機器から他の電子機器に転送され、他の電子機器の制御が行われる。したがって、付属のリモコンもしくは表示電子機器を介した操作で他の電子機器の制御を行うことができる。その結果他の電子機器に付属しているリモコンが不要になり、電子機器システム全体の操作性を向上させることができる。
【００２２】
請求項２に記載の発明によれば、操作者により選択された制御情報が赤外線リモートコントローラを介して他の電子機器に転送される。したがって、既に市場で使用されているリモコンコードで他の電子機器を制御することができる。これにより、新たな規格を策定する必要がなく容易にこのシステムを導入することができる。
【００２３】
請求項３に記載の発明によれば、映像信号の所定の領域以外の領域において同期信号と同一パターンの検出が行われ、同一パターンが検出されたときは、その信号の一部が変更される。これにより、映像信号の一部が同期信号として間違って検出されることを防止し、付加情報を表示電子機器に確実に伝送することができる。
【００２４】
請求項４に記載の発明によれば、付加情報にアイコン情報が含まれ、アイコン情報に基づいて制御情報に対応するアイコンが表示装置に表示される。したがって、制御情報を選択するための画面の見栄えが良くなり、且つ操作の誘導を容易に行うことができる。
【発明を実施するための最良の形態】
【００２５】
以下本発明の実施の形態を図面を参照して説明する。
家庭内の機器の統一操作を実現するためには、テレビジョン受像機やパーソナルコンピュータと言った表示装置を有する機器から接続先の電子機器の操作情報が見えることが必要である。ＡＶ機器に限って考えた時、テレビジョン受像機を家庭内ＡＶ機器のセンター機器として据えて、テレビを中心とした統一操作を実現することが、新規な接続機器も努力することなく扱える家電感覚のホームネットワークを実現することに他ならない。それを実現する方策が家電感覚のＧＵＩである。何がつながるか分からないテレビジョン受像機がつながる電子機器のすべての操作方式を担うのではなく、またこれは不可能でもある。テレビジョン受像機には接続先の電子機器の操作情報がメニュー画面として展開され、それに向けて遠隔操作する。つまり操作対象をテレビジョン受像機に統合し、接続される機器のすべての機能をユーザが享受することにより電子機器の使い勝手を向上させる。したがって本発明は、ＧＵＩを実現する仕組みを備えた電子機器システムを提供するものであり、例えばテレビジョン受像機に接続される外部電子機器から、制御画面がリアルタイムで転送されて、その制御画面から所望の制御ボタンを選択し、その制御情報が逆に外部電子機器に転送されて外部電子機器の制御がなされるといった双方向の接続を、方式間の壁を越えて実現するものである。
【００２６】
ここで第１の実施形態では、従来からのアナログ接続方式との連続性、乱立する各種デジタルＩＦとの親和性、制御プロトコル規格からの独立性及び１台のリモコンによる統合制御の５つの要件を満たすことで、あらゆる接続方式との親和性を持つ接続を可能とするインターフェースをユニバーサル・ネットワーク・グイ（UNIVERSAL NETWORK Graphical User Interface）と呼称して説明する。このユニバーサル・ネット・グイが本発明の特徴的部分を構成する。また第２の実施形態では上記要件の内、アナログ方式との連続性を外して接続方式をデジタルＩＦに限定した場合について説明する。
【００２７】
図１は従来の一般家庭での接続例を示す図である。同図にはテレビジョン受像機１とそれに接続された４台の外部電子機器２がラックに設置されており、その外部電子機器２及びテレビジョン受像機１を操作するためのそれぞれのリモコン４が描かれている。外部電子機器２としては、ビデオテープレコーダ、ビデオディスクレコーダ、ハードディスクレコーダ、ＣＡＴＶのターミナルアダプタなどが該当する。テレビジョン受像機１には、地上波、ＣＳ、ＢＳのＲＦ信号（変調信号）に対応するチューナが搭載されている。またテレビジョン受像機１と外部電子機器２の接続は、第１の実施形態ではアナログ接続でもデジタルＩＦの何れであってもよく、第２の実施形態ではデジタルＩＦであればどのようなデジタルＩＦでもよい。また無線接続であるかまたは有線接続であるかについても本実施形態では何れでも実現可能であり、ここで特に問うものではない。但し、アナログまたはデジタルで映像データが伝送されることが接続の必須条件である。この条件は図３０に示した全ての接続例において該当しており、現在存在するすべてのＡＶ関係の接続方式に対応するものである。
【００２８】
図２はテレビジョン受像機１に表示されたテレビジョン受像機１を制御するためのメニュー画面を表している。表示されているメニュー画面は「ビデオ」「地上」「ＢＳ」「ＣＳ」「設定」の各画面から成り、同図は接続されている外部電子機器２を選択するための「ビデオ」の画面が前面にきている。「地上」「ＢＳ」「ＣＳ」の画面はチャンネル切替の制御画面であり、これはテレビジョン受像機１に内蔵されているチューナを制御するためのものであるから、テレビジョン受像機内で閉じており、ＧＵＩによる制御上の課題はここでは存在しない。また「設定」についてもテレビジョン受像機の各種設定をする画面であり、同様にここにもＧＵＩによる制御上の課題はない。
【００２９】
ＧＵＩによる制御上の課題は外部電子機器２を選択する「ビデオ」画面にある。本実施形態のテレビジョン受像機１は４つのビデオ入力を持っており、各ビデオ入力に図１に示した４つの外部電子機器２が接続されている。ここで外部電子機器２を選択するまでは操作の対象がテレビジョン受像機内にあるので問題はない。しかしビデオ入力１〜４のいずれかを選択した後は操作の対象が各接続先の電子機器に移る。テレビジョン受像機内で閉じているときはテレビジョン受像機１に付属するリモコンで操作し、ビデオ入力選択後は選択された外部電子機器２に付属するのリモコンに制御が移るため、それまで使用していたリモコンを持ち替えなければならないことになる。本実施形態では４つの外部電子機器２が接続されているので、操作者は４つのリモコンの中から該当するリモコンを選択する。ここにはテレビのリモコンを含めトータル５つのリモコンが存在している。本発明は、これら外部電子機器付属のリモコン操作を、テレビジョン受像機付属のリモコンの操作またはテレビジョン受像機を経由した操作で行うことを可能にし、図１に示したのシステム全体を統一的に制御するものである。
【００３０】
図３は図２に示されているメニュー画面でビデオ入力１を選択した際のメニュー画面例を示している。図に示した「ビデオ入力１→ＶＨＳ」はビデオ入力１にはＶＨＳのビデオテープレコーダが接続されていることを示しており、その下にはビデオテープレコーダの再生画面を含む操作画面（「電源ＯＮ／ＯＦＦ」「プレイ（記号）」「ストップ（記号）」などとさらに深く詳細な設定画面である「番組予約」への展開ボタン）が描かれている。またテレビ画面の左下には前のメニュー画面への「戻る」ための操作ボタン及び再生画面を「拡大」するための操作ボタンが描かれている。この画面の情報は選択したビデオ１につながっているビデオテープレコーダのみが認識している情報であり、アナログ接続ではビデオケーブルを介して、デジタルＩＦでは画像データから得られるものである。このように画像については全てのアナログ接続及びデジタルＩＦでテレビジョン受像機１への転送が可能である。しかしながら、制御情報がメニュー画面のどのポジションに表示されているか、また制御情報が何であるのかということについてはこのままでは認識することができない。またたとえ制御情報を認識することができても外部電子機器２へ制御をフィードバックする仕組みがここにはない。本発明のユニバーサル・ネットワーク・グイはこの課題を解決するものである。
【００３１】
図４にはテレビジョン受像機１の裏側の接続パネルが示されている。４つの外部電子機器２が接続できるように接続端子のビデオ１〜４を装備している。ビデオ１及びビデオ２はそれぞれアナログ接続用で入力映像端子４１、４２、入力音声右と音声入力左用にそれぞれオーディオのピンジャックケーブル端子４３〜４６と輝度信号と搬送色信号を独立させたＳケーブルでの接続用の入力Ｓ映像端子４７、４８が備えられている。ビデオ３はデジタルＩＦ用でｉＬｉｎｋとの愛称で呼ばれているＩＥＥＥ１３９４接続端子４９が備えられている。ビデオ４もデジタルＩＦ用でＨＤＭｉ接続端子５０が備えられている。ビデオ１〜４のすべてに外部リモートコントローラ端子５１〜５４が備えられている。
【００３２】
図５にはテレビジョン受像機１に接続されている外部電子機器２としてのビデオデッキとテレビジョン受像機１の外部リモートコントローラ端子に接続されている外部装置用リモートコントローラ５が描かれている。これはすでに一般的に活用されており、リモコンの補助的役割として外部電子機器の制御に使われている。例えば単体のＣＳデジタルチューナから行うビデオテープレコーダの留守録予約などに活用されている。同図には外部装置用リモートコントローラ５の先端から赤外線を放射して外部電子機器のリモコン受光部２０１にてそれを受けて制御情報が転送されている様子が描かれている。
【００３３】
図６は本実施形態で外部装置用リモートコントローラを装備したシステムの構成を示すブロック図である。前記図３のメニュー画面は図６の第１の外部電子機器２１からテレビジョン受像機１に画像信号として転送されたものである。第２〜４の外部電子機器２２、２３、２４もテレビジョン受像機のそれぞれの接続端子に同様に接続されている。但し前記のとおり第３の外部電子機器２３と第４の外部電子機器２４の接続はデジタルＩＦとなっており、本発明が多様な接続方式に対して有効であることを明示している。
【００３４】
図６には４つの外部装置用リモートコントローラ６１〜６４が描かれている。４つの外部電子機器２１、２２、２３、２４は図４に示したテレビジョン受像機裏のパネルの端子４１、４２、４９、５０にそれぞれ接続されており、４つの外部装置用リモートコントローラ６１〜６４は端子５１〜５４にそれぞれ接続されている。
【００３５】
このようにテレビジョン受像機１に接続されている外部電子機器２１〜２４へのテレビジョン受像機１からの制御は、赤外線を使った外部装置用リモートコントローラ６１〜６４を活用することで可能である。すなわちテレビジョン受像機１に表示されているメニュー画面に対して行うテレビジョン受像機付属の赤外線リモコンの操作でテレビジョン受像機１の制御と同様に外部電子機器２１〜２４の制御ができる。接続されている外部電子機器２１〜２４のリモコンで操作できる全ての機能がテレビジョン受像機付属のリモコンで制御できることになる。本発明のユニバーサル・ネットワーク・グイはこの制御の仕組みを実施形態として活用する。尚、ここでは外部装置用リモートコントローラ６１〜６４を４つ設置しているが、赤外線照射の指向性の問題が無ければ１つあればよい。しかし本実施形態では図１に示すテレビジョン受像機１と外部電子機器２とがラックに設置された形態で説明するため、各外部電子機器に図５に示す外部装置用リモートコントローラをそれぞれ取り付けて利用する。
【００３６】
図６に示しているテレビジョン受像機１と外部電子機器２１〜２４とはアナログ接続またはデジタルＩＦにより接続されており、各外部電子機器２１〜２４からの画像がテレビジョン受像機１に表示されるとともに、テレビジョン受像機１からの外部電子機器２１〜２４への制御は外部装置用リモートコントローラ６１〜６４を経由して行われる。この仕組みの中で外部電子機器２１〜２４のメニュー画面は画像と共にテレビジョン受像機１に伝送することができる。しかし、外部電子機器２１〜２４の制御情報についてはこれを如何にして外部電子機器２１〜２４からテレビジョン受像機１に伝達するかが課題となっている。一般にアナログ接続におけるテレビジョン受像機へのデータ転送は、垂直のブランキングにデータを多重する方式で考えられている。これは例えば、社団法人電波産業会（ＡＲＩＢ：Association of Radio Industries and Businesses）のＳＴＤ−Ｂ５（垂直帰線期間を使用する標準テレビジョン・データ多重放送）や社団法人電子情報技術産業協会（ＪＥＩＴＡ：Japan Electronics and Information Technology Industries Association）のＣＰＲ−１２０４ ＶＢＩを用いたビデオＩＤ信号伝送方法（５２５ラインシステム）、ＣＰＲ−１２０４−１ ＶＢＩを用いたビデオＩＤ信号伝送方法（５２５Ｐ システム）、ＣＰＲ−１２０４−２ ＶＢＩを用いたビデオＩＤ信号伝送方法（７５０Ｐ，１１２５ｉシステム）などで標準規格として定められている。これらは、ファクシミリ信号やテレソフトウェア信号、静止画信号、文字信号、時刻信号、表示装置制御データ信号などの規格となっている。またコピーガードシステムで同期信号を変動させる方式もある。これはデータの転送ではないが垂直のブランキングにデータを挿入した場合の妨害になる。したがって、これらと競合することが考えられる垂直ブランキングに多重する方式は好ましくない。また新たな規格を設けることは、業界の合意にもとづくものであり、時間と労力がかかる。したがって、独自の方式で映像信号に制御信号を盛り込むことが、早期実現をもってユーザに使い勝手の良さを享受していただくための方策となる。
【００３７】
図７は映像信号の有効エリア内（ブランキングでない部分）に制御情報を埋め込んだ状態を示すイメージ図である。同図テレビ画面Ａはデータがそのまま見えている状態で、同期信号と制御コードなどが表示されている。同図テレビ画面Ｂでは制御コードの内容を解読してそれを適切なアイコン（icon）に置き換えて表示している。ここでのアイコンはパーソナルコンピュータのＧＵＩで使われているものと同じ概念のもので、操作を誘導するための適切な画像であり、ユーザーインターフェースの重要な役割を担っている。しかし、図７のテレビ画面Ａのように「再生」などコードの内容を言葉で表記していれば、アイコンがなくても操作する上で不都合をきたすものではない。
【００３８】
図７のテレビ画面Ａのように画面内に制御コードを表示するためには、コード表示の位置情報が必要になる。通常の位置情報を得るための同期信号は負極同期と呼ばれるもので、映像信号とレベル方向で区別できるため、レベルスライスで同期抽出が行われている。図８（Ａ）に示したアナログ接続での映像信号には、この負極同期がもちいられているので、本実施形態ではこれと同様の同期形式を採用することはできない。また、図８（Ｂ）に示すデジタルＩＦまたはデジタル放送やパッケージメディアでのデジタルコンポーネント映像信号ではデジタル信号のダイナミックレンジに対して黒レベルと白ピークレベルが規定されていて、負極同期信号は配慮されていない。これを踏まえて本発明のユニバーサル・ネットワーク・グイで採用する同期形式は２次元正極同期方式とする。この方式では２次元正極同期信号を映像信号やその他の信号と区別できないのため、統計的性質の違いを見分けて分離する。
【００３９】
図９は画像の相関性について説明するための図である。同図（Ａ）は第１ライン（ライン：水平周期）と第２ラインの一般的な振幅変化を表したもので、振幅のセンターを０レベルとしてピーク振幅を＋１、−１としている。ここで垂直方向については隣り合うライン間で、水平方向は隣り合う画素または数画素離れた画素間の相関性を考える。垂直方向の相関値は第１のライン上と第２のライン上の同じ位置の画素の振幅を乗算したものとし、水平方向は隣り合う画素もしくは数画素離れた画素の振幅を乗算したものとする。同図（Ｂ）はこのように算出された垂直及び水平の相関値をプロットした相関マップである。画像の統計的性質として、近い画素は相関性が高く、画素間が離れるに従い相関性が失われる傾向がある。この場合一般画像の相関値は同図（Ｂ）の第１象限の領域Ａに位置する頻度が多く、相関性のない波形は第３象限の原点から離れたところの領域Ｂに位置する。本実施形態ではこの第３象限のＢ領域に位置する波形を２次元正極同期信号とし、一般画像と区別できるようにしている。
【００４０】
コードの内容を詳細に表したものが図１０及び図１１である。図１０の第１ライン（１）から第８ライン（８）までが一般画像と区別するための２次元正極同期信号である。２次元正極同期信号の垂直方向は、インターレース信号の場合はライン間で反転し、順次走査信号の場合は２ライン間で反転する信号である。図１０は奇数フィールドである奇数ラインと偶数フィールドである偶数ラインが重ね合わされたフレーム信号として描写している。
【００４１】
図１０及び図１１の水平の目盛りは基準周期を表し、１基準周期は１画素または複数画素で構成される。水平の相関性を低くするためには１基準周期の画素数はできるだけ小さい方がよく、本実施形態では基準周期を１画素とし、水平相関は４画素間での相関と８画素間での相関を評価する。
【００４２】
ここで相関性を有する一般画像と２次元正極同期信号の区別のためには、２次元正極同期信号はできるだけ相関性がない隣り合う画素間の相関性を評価すべきである。しかし、機器同士の接続がアナログの場合、同期再生の不完全さや伝送路での歪みの画素信号への影響も考慮しなければならない。同期再生については位相ロックがかからず残留位相誤差が状況によって変化すること、伝送路についてはビデオテープレコーダに記録再生されても耐えられることを前提とする。すなわちアナログ接続では伝送路の周波数特性のロールオフ率などが厳しく管理されていないため、あまりにも厳しい同期信号は検出が難しくなる。また伝送路での影響を配慮しすぎて離れた画素間の相関を評価した場合には、相関性が無くなり、誤検出を招きかねないことも配慮すべき重要な事項である。
【００４３】
この考え方を踏まえて水平方向については、４画素間で反転と８画素間で反転の異なる繰り返し周期での相関を考慮する。垂直方向はこの水平方向の波形を４ライン間にわたってインターレース信号ではライン毎、順次走査では２ライン間毎に排他的論理和を取ったとき、水平８画素間で周期的に反転するようにする。つまり整理すると、水平方向は異なる複数の周期で反転させる。本実施形態の複数とは２つの周期で４画素間と８画素間（一部例外あり）を意味する。また、垂直方向はライン間で排他的論理和を取ったときに特定の周期で反転させる。本実施形態の特定の周期とは８画素間である。この正極同期の抽出はこれらの性質を読みとるもので詳しくは後述する。
【００４４】
次に同期信号に続くコードの内容について説明する。コードの内容は「１」と「０」をどのように規定するかと接続先を制御するコードの割付がある。図１２（ア）はコードの内容を表現する「１」と「０」の信号を示している。この信号は８画素周期内のパルスの幅で決めており、８画素中のはじめの２画素がハイレベルのものを「０」とし、８画素中のはじめの６画素がハイレベルのものを「１」としている。この規定に添ったレベル判定は同図（イ）と（ウ）の２通り考えられる。（イ）は同期信号により位相が合わされた８画素周期のパルス（Ａ）信号の立ち上がりのタイミングでライン（１５）の信号をフリップフロップを用いてデータとして取り込む。（ウ）は最初の８画素分にヘッダとして入れてある８画素幅のハイレベルとその後４画素分がブランク（ロウレベル）であることを確認した後、各データの立ち上がりから４画素分遅れたところがハイであるかロウであるかをフリップフロップを用いてデータとして取り込む。
【００４５】
本実施形態ではデータの数はラインあたり５ビットとし、フレームあたり４ライン同一コードを送る。これはインターレース走査で２ライン同一コードが転送され、順次走査で４ライン同一コードが転送される。この内容を盛り込んだ本実施形態でのコードの全体像が図１３（Ａ）に示されている。インターレースのときは奇数ラインと偶数ラインが２フィールド間にわたって転送されるが画面での見え方は同じである。１フレームのライン数は同期信号の８ラインに加えて４ライン毎の同一コードが１１コード分で全部で５２ラインとしている。また１ライン当たりの画素数はヘッダ部が８画素、ブランクが４画素、５ビットのデータが全部で４０画素となりトータル５２画素となる。本実施形態は取りうる１形態であり、要求される仕様によって最適な構成を考えればよい。同期信号の水平幅は水平の最大データ領域まで同一の繰り返しを継続すればよい。水平の幅が長くなれば誤検出が少なくなるが、転送効率が悪くなる問題があり、データ量を適切に考える必要がある。図１３（Ｂ）は異なるパターンのコードが示されている。これは同図（Ａ）の水平及び垂直方向を１／２にしたものである。アナログ接続のコンディションが良い場合やデジタルＩＦではこのような転送効率のよいパターンを選び情報を量を増やすことができる。本実施形態としては（Ａ）のパターンを標準として取り扱う。
【００４６】
本発明のユニバーサル・ネットワーク・グイは、図６に示してあるテレビジョン受像機１に接続されている外部電子機器２１〜２４から送られてきたメニュー画面の制御ボタンやアイコンなどに意味づけられた制御内容を、外部装置用リモートコントローラ６１〜６４を経由して外部電子機器２１〜２４に送ることを目的としている。これにより外部電子機器２１〜２４のリモコンを無くして、外部電子機器２１〜２４の操作をテレビジョン受像機１に向けた操作に一元化することできる。外部電子機器２１〜２４からテレビジョン受像機１に転送される制御内容は、本実施形態では最終的にリモコンコードで外部電子機器２１〜２４の制御を行うため既存のリモコンで使われているコードを使用し、新たにその規格を決める必要はない。既成のリモコンコードを使用することには、あらためてコードの内容を解読することなく、そのまま赤外線に変換できる利点がある。
【００４７】
リモコンコードは「家製協フォーマット」が標準方式として知られているが、現在そのフォーマットが使われていることは少ない。現状では、個別企業がそれぞれのフォーマットを策定して自社製のリモコンに使用しているが、それとは別にあらゆる会社の製品に対応したリモコンも市販されている。つまり、全メーカのコードの利用は可能な状況にある。テレビジョン受像機に接続される外部電子機器のメーカが分かれば、リモコンのコードをそのメーカのものに設定することで、各社の外部電子機器の制御が可能になる。
【００４８】
図１４は今使われているメーカごとに策定したリモコンのコード形式についてまとめた表を示す。これはリモコンコードが何ビットで構成されているかを知るために整理したものである。この表のカスタムコードとはメーカと対象の制御機器（テレビやＶＴＲ等）が何であるかを特定するもので、データコードは機器の動作コード、例えばＶＴＲであれば「再生」「早送り」などの機器の動作を制御する内容になっている。この表から分かるとおりコード構成の最低ビット数はフォーマット（Ａ）では２４ビット、フォーマット（Ｂ）では反転コードを含めて２４ビット、フォーマット（Ｃ）では１６ビットである。したがって、本実施形態で必要とされるリモコンコードのビット数は最低１６ビット、またさまざまな方式及びメーカに対応するためには或る程度の余裕を持って３２ビット程度あれば、テレビに接続されている外部電子機器のメーカと機器を判別し、その機能を制御することができる。
【００４９】
前記図１３に示す本実施形態のメニュー画面に盛り込まれるコードは水平５２画素、垂直５２ライン（画素）としており、盛り込めるデータ量の５５ビットは、リモコンコードに必要とされる３２ビットに比べ充分満足できるものである。１コードあたり水平５ビット目をパリティコードまたは全体のチェックサムコードなどに充てると４４ビットとなる。図１３のコード１〜８までをリモコンコードに割り振り、その後のコード９〜１１を拡張コードに割り振る。拡張コードは例えば一機能一押しではないリモコン操作、例えば３２５チャンネルなど「３」「２」「５」と３回リモコンボタンを押下するようなユーザの複数アクションで達成していた操作などに活用することができる。
【００５０】
次に２次元正極同期信号の再生方法について説明する。図１５は２次元正極同期信号を検出するための構成（以下「同期信号検出部」という）を示したブロック図である。この同期信号検出部は、入力信号を１水平周期遅延させる遅延器Ｄ１１、Ｄ１２、Ｄ１３と、排他的論理和（ＥＸ−ＯＲ）回路Ｇ１１、Ｇ１２、Ｇ１３、Ｇ１４、Ｇ１５と、入力信号を８画素分の時間遅延させる遅延器Ｄ２１、Ｄ２２と、論理積（ＡＮＤ）回路Ｇ２１と、カウンタＣ１、Ｃ２、Ｃ３、Ｃ４、Ｃ５と、ゲートパルス生成器Ｐ１、Ｐ２、Ｐ３、Ｐ４と、論理積否定（ＮＡＮＤ）回路Ｇ３１と、論理和（ＯＲ）回路Ｇ４１、Ｇ４２と、排他的論理和否定（ＥＸ−ＮＯＲ）回路Ｇ５１と、全加算器Ｇ６１と、比較器Ｇ７１と、エッジ検出器Ｇ８１とを備えている。この図において、（ａ）、（ｂ）、（ｃ）はそれぞれ排他的論理和回路Ｇ１１、Ｇ１２、Ｇ１３の出力を示し、（ｄ）、（ｅ）はそれぞれ遅延期Ｄ２１、Ｄ２２の出力を示し、（ｇ）は論理積回路Ｇ２１の出力を示し、（ｊ）、（ｈ）、（ｌ）はそれぞれゲートパルス生成器Ｐ１、Ｐ２、Ｐ３の出力を示す。第１の入力には映像信号が入力され、最終出力は第１の出力と第２の出力とからなる。
【００５１】
２次元正極同期信号の検出は奇数フィールド及び偶数フィールドの何れでも検出が可能であるが、本実施形態では奇数フィールドでの検出について説明する。図１６は２次元正極同期信号の検出を説明するためのタイミング図である。同図のライン（１）、（３）、（５）、（７）は図１０に示したコードの奇数ライン（１）、（３）、（５）、（７）であり、この奇数ラインの同期信号の特徴を捉えて２次元正極同期信号として検出する。図１６の（ａ）〜（ｌ）の波形は図１５に示す構成の各段階での中間出力のそれぞれの波形を表している。排他的論理回路Ｇ１１、Ｇ１２、Ｇ１３のそれぞれの出力（ａ）、（ｂ）、（ｃ）は図１６に示すとおり、３系統とも繰り返し周期が８画素単位に揃って反転している。同図（ｄ）及び（ｅ）は前記（ｂ）及び（ｃ）が８画素分の遅延器Ｄ２１及びＤ２２によって８画素分遅延したのである。（ａ）、（ｂ）、（ｃ）、（ｄ）、（ｅ）が全て８画素周期であれば図１５の論理積回路Ｇ２１の出力は図１６の（ｇ）となり、ハイレベルになっている期間が連続する。このハイレベルの連続は同期信号の水平と垂直両方が一致していることを同時に見ていることになる。第２のカウンタＣ２はこのハイレベルの期間をカウントし、図１６の（ｇ）が（ｈ）に示す第２の矢印の期間ハイレベルであれば第２のゲートパルス生成器Ｐ２に対し信号を出力し、第２のゲートパルス生成器Ｐ２は図１８（ｈ）に示すゲートパルスを出力する。第２のカウンタＣ２のリセットは、波形（ａ）、（ｂ）、（ｃ）の最初の立ち下がりエッジが揃ったところでなされ、その後の立ち下がりエッジでリセットパルスが出ないように保護がかかっているものとする。
【００５２】
また図１６（ａ）、（ｂ）、（ｃ）の波形が一致していることを確認することにより、もう１系統のゲートパルスを生成させる。これは垂直方向だけでの確認になるが、確認の期間が長いので保護のために入れている。垂直方向の一致は排他的論理和否定回路Ｇ５１の出力が連続的にハイレベルになり、図１６（ｉ）に示す波形となる。図１６（ｉ）及び（ｇ）にある×の期間は映像信号にかかるところで値が不定であることを示している。第１のカウンタＣ１は図１６（ｊ）に示す第１の矢印の期間カウントして第１のゲートパルス生成器Ｐ１に対し信号を出力し、その信号により第１のゲートパルス生成器Ｐ１からゲートパルスとして図１６（ｊ）の波形を出力する。この第１のカウンタＣ１についても同様に波形（ａ）、（ｂ）、（ｃ）の最初の立ち下がりエッジが揃ったところでリセットされているものとする。論理積否定回路Ｇ３１は図１６（ｊ）と（ｈ）のゲートパルス波形と第２の入力全てがハイレベルとなったときに出力をロウにする。このパルスは基準同期信号をゲートするパルスとなる。
【００５３】
尚ここで画像の水平同期信号に画素単位のクロックの残留位相誤差がなく且つジッタもないことを前提にすれば、図１６（ｊ）の第１の矢印と同図（ｈ）の第２の矢印と同図（ｇ）及び（ｉ）に示す波形の連続性をカウントして、安定的に（ｈ）と（ｊ）のゲートパルスを得ることができる。しかし安定性に欠ける場合は、図１６の４クロック単位の破線で（ｇ）及び（ｉ）に示す波形の連続性をカウントして評価することで安定したゲートパルスが得られる。この破線の位相は図１０、図１１及び図１２では同期信号の変化点を示していたが、図１６ではそれとは２クロックずれたところにあり、同期信号の変化しない位相である。そしてこの波線の位相の前後１クロックずれたところで同一のレベルになっている。位相クロックが不十分であっても検出レベルが変化しない位相である。但しこの４クロック単位の位相は画像の水平同期信号との関係で決められる。
【００５４】
図１５の（ａ）、（ｂ）、（ｃ）は加算器Ｇ６１に入力される。加算器Ｇ６１で４ライン間にわたる同期信号が揃っていると同一波形の繰り返しとなり、加算結果は３となる。３以上（１、２でもよい）であることを確認するのが比較器Ｇ７１である。加算器Ｇ６１と比較器Ｇ７１の機能は、加算器Ｇ６１を１ビットの全加算器とし、２つの入力と桁上げの入力にそれぞれ（ａ）、（ｂ）、（ｃ）の波形を入力し、桁上がりを出力することで回路を簡単化することができる。比較器Ｇ７１の出力は（ａ）、（ｂ）、（ｃ）と波形は変わらないが、何れかが異なるとハイレベルが出力されないので保護として働きノイズに対する耐性が高められる。エッジ検出器Ｇ８１はパルスの立ち上がり部分１画素分のパルスを出力する。このパルスは図１６（ｃ）のライン時間に複数のパルスを出力するが、前記論理積否定回路Ｇ３１の出力のパルスがゲートして、同図（ｋ）の基準同期信号を得る。
【００５５】
この基準同期信号には、第３のカウンタＣ３と第３のゲートパルス生成器Ｐ４とによって、時間方向の保護がかけられている。第３のカウンタＣ３は画素単位の分解能で１フレームをカウントしていて、カウント値から任意のパルスの位相と幅を出力することができる。第３のゲートパルス生成器Ｐ３は第３のカウンタＣ３のカウント値から図１６（ｌ）の波形を生成し、論理和回路Ｇ４２の出力にゲートされた基準同期信号を得る。尚図１５（ｌ）に示すゲート信号は同期の安定性によってはもう少し広めに取ることもある。基準同期信号を第４のカウンタＣ４で定められた値までカウントしてデータが取り込まれたことを示すフラグ、例えばハイレベルにするフラグを出力する。定められた値とは例えば５とすれば、５フレーム間にわたって基準同期信号が連続して得られていれば正しく同期検出ができたことを示すことになる。尚、第５のカウンタＣ５の役割については後述する。
【００５６】
第４のゲートパルス生成器Ｐ４は１つのコード群の領域を示すパルス、例えば領域をロウレベルとして出力する。このパルスは別のコード群を検出する同期検出回路の第２の入力に入れられて、重複して同じコード群を検出しないように、優先順位の高いものから順番につなげることで複数のコードの検出を可能にする。基準同期信号とコード群の領域パルスを表したものが図１７である。図１７（Ａ）はカウンタの構成を示すブロック図である。これは図１５に示す第３のカウンタＣ３に相当し、水平画素数と垂直ライン数をカウントしている。そのカウント値は図１７（Ｂ）に表すとおりで、同図（Ｂ）にモデル化した映像信号は、１３．５ＭＨｚを標本化周波数とする標準規格に添った水平の画素番号と垂直ライン番号を表したものである。この映像信号の有効エリア内にコード群があり、基準同期信号は図に示しているあたりに位置するが、コード群の左端に基準を置きたい場合には画面の空間内でオフセットすればよい。このように第３のカウンタＣ３が基準同期信号に同期することで、コード群の領域パルスなどを任意に設定できる。したがって、データを抽出するパルスも任意に作成できる。
【００５７】
図１８は画像信号のラインと転送されるデータの関係を示している。同図の左端には画像信号のライン番号が書かれている。２次元正極同期信号に使われるライン番号１〜８はここでは省略して書かれていない。またここではインターレース走査の奇数ラインのみ示している。ライン番号の右に書かれているＣ０、Ｃ１、Ｃ２、…と書かれている箱１つ１つが８画素からなる１ビットのデータである。また伝送されるデータは連続する２ライン（フレームでは４ライン）で同じものが送られるため、後述する５ビット目（Ｐ９、Ｐ１１、Ｐ１３、…）をのぞき１ビット目から４ビット目までについてはライン９とライン１１は同じものになっている。これはライン１３とライン１５、以下も同様になっている。前記したとおり基準同期信号でデータの各位置に相当するパルスを生成できる。したがって図１８のますめに示すデータをフリップフロップのデータ入力とし、基準同期信号より得られるパルスをフリップフロップのクロック入力としてデータを抽出する。本実施形態でのデータは２ライン毎に同じデータ（フレームでは４ライン毎）が得られる。得られたデータはフィールド単位またはフレーム単位でＣＰＵバスを経由しＣＰＵに入力され、ＣＰＵにおいてデータの内容が認識される。
【００５８】
データの内容についてはここで特に限定するものでないが、本実施形態のように各ライン４ビット目までをデータとし、５ビット目をパリティビットとすることで誤りの検出に使うこともできる。またパリティに活用している５ビット目にデータ全体のチェックサムの値を盛り込み、同様にエラーの検出に利用することもできる。本実施形態では同一画面内ではデータの内容は変化しないことを前提としているので、エラーがあった場合はそのデータを無視するだけで良く、エラー訂正機能までは必要としない。したがって、エラー検出程度は極めて簡単な内容ですますことができ、これはデータ伝送においてメリットとなる。
【００５９】
次にアイコンのすげ替えについて説明する。図７のテレビ画面Ａには外部電子機器から転送されたコードがむき出しの状態で表示されており、操作を誘導するためのＧＵＩの画面としては相応しくない。２次元バーコードなどむき出しのコードは最近至る所に活用されているので、それほど違和感を感じなくなってきているが見苦しさは拭えない。このむき出しのコードを同図テレビ画面Ｂに表示されているようなパソコンの画面に展開されるいわゆるアイコンに変換することで、画面としての見栄えが良くなり、また操作の内容が見た目で判別することができ、使い勝手の良い操作画面になる。
【００６０】
このアイコン画像をテレビジョン受像機がどのような手段で取得するかについて説明する。図７のテレビ画面Ｂに表示されている再生や停止を意味するアイコンなど、テレビジョン受像機に接続されることの多いＶＴＲなどの基本操作のためのアイコンは、テレビジョン受像機内部にあらかじめアイコンのデータを持っておくことで容易にアイコンのすげ替えをすることができる。しかし、これは多様な制御内容に対しての真の解決方法ではなく、表示できるアイコンのデザインも固定されたものとなる。外部電子機器の特別な機能のアイコンや固有のデザインのアイコンを表示するためには、外部電子機器からテレビジョン受像機にこれらのアイコンのデータを転送する必要がある。
【００６１】
本発明のユニバーサル・ネットワーク・グイでは、このアイコン画像をコード領域またはコードで指定した領域、または事前に規定した領域に盛り込んで時分割で送り、それをテレビジョン受像機のメモリに取り込んで画面に表示する。コードに変わってアイコン画像が送られるタイミングの検知について説明する。手法としては同期信号またはコードの内容を周期的に変更することで時間方向のタイミングが計れるようにする。本実施形態ではコード１ビットに変化を付ける方法をとる。
【００６２】
図１９（Ａ）は時間方向の同期を取るためのコード１ビットの変化を示している。どのコードにこれを割り付けるかはここでは規定しないが、商品開発する段階では規定する必要がある。また、時間方向の同期は２次元正極同期信号内の同期検出に影響しないところを変化させても可能である。同図（Ｂ）はコードとアイコンを送っている期間を表しており、横方向のハッチングが入った期間がアイコン転送部である。目盛りは１垂直周期単位に付している。本実施形態ではフレーム単位でコードを転送する方式としているので、図１９（Ａ）のコードがハイレベルになる期間は２垂直周期である。またインターレース信号にも対応するためにアイコンを転送する期間も２垂直周期とする。
【００６３】
アイコン転送時は２次元正極同期信号を送れないため、２次元正極同期信号の検出ではこれを配慮する必要がある。図１５に示す構成では、第５のカウンタＣ５で基準同期信号（本実施形態ではフレーム単位）が検出されない場合をカウントしており、このカウント値を２以上（２は４垂直周期）に設定しておけば外れない。したがって、同期は第４のカウンタＣ４で基準同期信号が５フレーム以上検出されるとデータ取り込みフラグが立って同期したことになり、２フレーム以上同期が来なければ同期が外れる。アイコンの転送は１フレーム（２垂直周期）を８フレーム（１６垂直周期）毎に送るので、同期が外れることなく転送できる。
【００６４】
図２０は本発明のユニバーサル・ネットワーク・グイの双方向システムの構成を表すブロック図である。図２０には、テレビジョン受像機１に赤外線を使用する外部装置用リモートコントローラ５と外部電子機器２がそれぞれ接続されていることが描かれている。ここには外部電子機器は１機種しか示されていないが、複数の外部電子機器を接続する場合もテレビジョン受像機と外部装置用リモートコントローラ及び外部電子機器の関係と構成は変わらない。
【００６５】
図２０のテレビジョン受像機１にはアナログ接続またはデジタルＩＦで接続された外部電子機器２から、これまで説明してきた制御コードとアイコンが盛り込まれたＧＵＩ画像が転送されてくる。外部電子機器２内では同期生成器２０３にて作成された２次元正極同期信号が合成器２０８に送られ、コードとアイコン生成器２０４で作成された制御コードとアイコンの時分割信号が合成器２０８に送られ、またグラフィックス生成器２０５で作成されたその他のさまざまな文字情報や図形情報が合成器２０８に送られる。この外部電子機器２が蓄積メディアであれば再生信号、またチューナであれば放送信号に相当する映像信号が信号源２０６から出力される。この映像信号が同期誤検出保護器２０７にて２次元正極同期信号に対する保護がかけられ合成器２０８に送られる。合成器２０８では入力されたそれぞれの信号を合成して制御メニュー画面として出力し、アナログ接続またはデジタルＩＦを経由してテレビジョン受像機１に送る。
【００６６】
外部電子機器２からテレビジョン受像機１に送られたＧＵＩ画像信号は、同期検出及びタイミングパルス発生器１１、コード抽出器１５、アイコンメモリ１２及び合成器１３にそれぞれ入力される。同期検出及びタイミングパルス発生器１１では入力されたＧＵＩ画像信号から２次元正極同期信号を分離して、各機能ブロックに対して必要なパルスを生成して出力する。
【００６７】
アイコンメモリ１２は同期検出及びタイミングパルス発生器１１から送られたパルスに従いＧＵＩ画像信号に時分割多重されているアイコン画像を取り込み、画素単位でメモリに書き込む。アナログ接続時に必要なＡＤコンバータはここでは省いて示していない。データは誤ると制御内容が変わってしまい大きな問題となるため、本実施形態ではデータ単位を８画素で１ビットとしている。しかしアイコンは画像であり、アナログ接続で少々の歪み生じても問題がないため画素単位の処理でも問題はない。
【００６８】
合成器１３ではアイコンメモリ１２からの入力で画面上の所定の位置に表示される制御コードのアイコンへのすげ替え処理が行われ、そのアイコン画像と入力されたＧＵＩ画像及びグラフィックス生成器１７で作られたテレビジョン受像機内の情報の画像が合成される。合成器１３で合成された映像は表示装置１４で表示される。
【００６９】
ユーザは表示装置１４に表示されたＧＵＩ画像（例えば図７テレビ画面Ｂ）を見て、所望の制御アイコンを選択する。このアイコンの選択の仕方は、現行のリモコンでは上下左右決定ボタンの操作でもよく、またテレビにつけられたビデオカメラによる映像を使用したアイコン選択手段によっても良く、ここではアイコン選定手段を限定するものではない。またアイコンを選択する際に、どのアイコンを選択しているかが分かるように、簡単な方法としては選択したアイコンの下にカーソルを付加したりして明示する必要がある。この処理はテレビジョン受像機１内のグラフィックス生成器１７において行われる。
【００７０】
テレビジョン受像機１内のコード抽出器１５は図１８を参照して説明したようにデータを抽出し、抽出した制御コードの内容をバスを経由してＣＰＵ１６へ入力する。ＣＰＵ１６では、制御コードの内容をソフトウェアで解読してリモコンコード発生器１８に適切な制御コードを転送する。ここで外部電子機器２からＧＵＩ画像信号に合成されてくるコード内容は、外部電子機器２に使われているリモコンコードそのものを使うことが望ましい。リモコンコードは各社個別に規定されているが、この場合基本的なリモコンコードを互いにオープンにするだけで良く、統一規格化と言った面倒な作業を経ることなく業界での共通化が達成できる。
【００７１】
リモコンコード発生器１８からの信号により外部装置用リモートコントローラ５の赤外線発光部から赤外線が発射される。これを外部電子機器２の赤外線受光部２０１で受光し、赤外線受光部２０１はそれをパルスに変換してＣＰＵ２０２に送る。ＣＰＵ２０２は制御コードをソフトウェアで解読し、外部電子機器２を制御する。例えばビデオテープレコーダでは「再生」や「停止」などの制御である。
【００７２】
次に図２０の外部電子機器２内の同期誤検出保護器２０７について説明する。画面メニューや映像信号の中で２値化したときに２次元正極同期信号と同じ波形がでた場合、テレビジョン受像機１で２次元正極同期信号ではないにもかかわらず２次元正極同期信号として誤検出を起こす可能性がある。これを避けるために、信号源２０６から出力される信号に同期誤検出保護器２０７でエラー信号を付加する。２次元正極同期信号のパターンは映像信号ではまずあり得ないような相関性のないパターンを選んでいるが、より確実で安心なものにしておく必要がある。画面メニューのようなものは事前に画像の内容が分かっているので確認しておけるので問題はないが、あらゆるパターンの信号が来る映像信号は、誤検出の問題を想定しておく必要があり、それを回避する手段として同期誤検出保護器２０７が設けられている。
【００７３】
図２１は同期誤検出保護器２７の構成を示すブロック図である。図２０の信号源２０６から出力される信号は２つに分かれ、１つは同期検出器及びタイミングパルス発生器２７１に入力され、もう１つはエラー付加器に入力される。同期検出及びタイミングパルス発生器２７１は図２０のテレビジョン受像機１内の同期検出及びタイミングパルス発生器１１と同じものである。図２１の同期検出及びタイミングパルス発生器２７１は図２０の信号源２０６から入力された映像信号から２次元正極同期信号を検出する。２次元正極同期信号の検出の仕方は前記したとおりであるが、４ラインからなるパターンの一致を見て、さらに時間方向にも繰り返していることを確認している。ここでテレビジョン受像機１の時間方向の繰り返しを上回って検出を確認した場合、同期検出及びタイミングパルス発生器２７１はエラー付加器２７２に信号を送る。エラー付加器２７２はその信号に従い映像信号をわずかに変更して、映像信号が２値化したときの２次元正極同期信号パターンと同じにならないようにする。図２２は映像信号が２次元正極同期信号と同じパターンであったものにエラー付加器２７２で変更した信号を表している。同図のライン（５）に反転として示した部分が変更された部分であり、ここには本来の波形を反転させる変更が加えられている。この変更により信号はテレビジョン受像機で２次元正極同期信号としては検出されることはない。これによりあらゆる信号形態を想定しなければならない動画像においても、制御コードとアイコンを誤検出することなく判別することができる。以上が第１の実施形態のアナログ接続及びデジタルＩＦ共通に実施できる内容である。
【００７４】
次に第２の実施形態を説明する。第２の実施形態は、接続方式をデジタルＩＦに限定した、本発明の２次元正極同期信号と制御コードをデジタルデータに埋め込んで転送するようにしたものである。
第１の実施形態では、アイコンを時分割にして転送し、テレビジョン受像機に備えたメモリにアイコンデータを保持して２次元正極同期信号及び制御コードとすげ替える処理をしていた。この方法はアナログ接続及びデジタルＩＦの両方で可能な方法であるが、デジタルに限定すれば、メモリを用いてすげ替えすることなく、実用上人間が知覚できない程度に、２次元正極同期信号及び制御コードを埋め込むことができる。本実施形態では、見た目にもっとも影響が少ないデジタル映像信号のＬＳＢに２次元正極同期信号及び制御コードを盛り込んで、第１の実施形態と同様の検出方法で基準同期信号を取り出す。
【００７５】
図２３は第２の実施形態の全体のシステム構成を表すブロック図である。基本的な構成は図２０と同じであり、ここでは一部のデジタル信号固有のところについて説明する。図２３の外部電子機器２の信号源２０６ｄからの信号を例えば８ビットデジタル信号とすると、同期誤検出保護器２０７ｄはその信号のＬＳＢのみをチェックし、上位７ビットは直接合成器２０８ｄに入力される。同期生成器２０３ｄから出力される２次元正極同期信号とコード生成器２０４ｄから出力される制御コードは合成器２０８ｄで信号源２０６ｄから入力されたデジタル映像信号のＬＳＢである８ビットめに合成される。合成器２０８ｄで合成されたデジタル映像信号はテレビジョン受像機１に転送され、同期信号及びタイミングパルス発生器１１ｄとコード抽出器１５ｄにはデジタル映像信号のＬＳＢのみが入力される。一方転送されたデジタル映像信号はテレビジョン受像機１の合成器１３ｄにも入力されるが、ＬＳＢミュート部１２ｄによってそのデジタル映像信号はＬＳＢがミュートされている。ＬＳＢといってもコードのパターンが揃うとその模様が知覚され、妨害となる。そこでその妨害を抑圧するためにデジタル映像信号のＬＳＢを０または１に固定することによってミュートする。ＬＳＢミュートはもっとも簡単な方法であるが、第１の実施形態と同様にメモリを設けて、ＬＳＢのみを時分割ですげ替える方法もある。
【００７６】
図２４は図２３の外部電子機器２内でデジタル映像信号に２次元正極同期信号と制御コードを盛り込む処理を行う部分の構成を示すブロック図である。図２４の同期生成器２０３ｄで生成された２次元正極同期信号とコード発生器２０４ｄで生成した制御コード信号は切替器２８２でパラメータα２により時分割多重される。切替器２８２で時分割多重された２次元正極同期及信号び制御コード信号は１ビットであり、デジタル映像信号のＬＳＢになるものである。一方グラフィックス生成器２０５ｄと信号源２０６ｄの出力信号は８ビットのデジタル信号である。信号源２０６ｄから出力されるデジタル映像信号のＬＳＢ信号は、同期誤検出保護器２０７ｄで２次元正極同期信号と同じパターンが検出されると、その部分が変更され、同期信号が保護される。この同期誤検出保護器２０７ｄは第１の実施形態と同じものである。切替器２８１はグラフィックス生成器２０５ｄと信号源２０６ｄからのデジタル信号をパラメータα１により切り替える。その後この信号は、ＬＳＢのみパラメータα３により切替器２８３にて、時分割多重されている２次元正極同期信号と制御コードにすげ替えられる。これによりデジタル映像信号のＬＳＢに２次元正極同期信号と制御コードが盛り込まれるとともに同期誤検出保護もかけられているため、デジタル信号のＬＳＢパターンが万が一同じパターンがきても誤動作を起こすことはない。
【００７７】
デジタル画像信号のＬＳＢはもっとも変化が激しくランダム性があるので、２次元正極同期信号のように規則的な信号と区別し易いが、規則的であるともっとも振幅の変化が小さいＬＳＢでもパターンとしても認識しやすいものでもある。このパターンはできるだけ空間周波数が高い周波数領域にある方が目立ちにくくなる。テレビジョン受像機ではミュートをかけるので見えないが、ミュートをかけない場合またはミュートがかかるまでは見えてしまう。図１３（Ａ）の走査信号では２次元正極同期信号と制御コードを奇数ライン、偶数ラインともに２ライン同じものを送っているところを示してあるが、図２５（Ａ）には２ライン目の奇数ラインの信号は１ライン目の奇数ラインの信号を反転させたもの、２ライン目の偶数ラインの信号は１ライン目の偶数ラインの信号をを反転させたものが示されている。これにより空間周波数を高めてパターンが目立ちにくくしている。図２５（Ｂ）は同図（Ａ）を縦横とも２分の一にしたものである。またここでは図示していないが、デジタルＩＦではデータを正確に１画素単位で転送できるため、図２５（Ｂ）よりもさらに水平成分を減らすことが可能である。また第１の実施形態ではコードの０または１をアナログ伝送の歪みを考慮して特定の波形にしたが、デジタルＩＦの場合は１画素１ビットコードを送り転送容量を向上させることも可能である。
【００７８】
図２６に本発明の応用例を示し、その有効性を説明する。図２６（Ａ）はテレビジョン受像機の画面を示しており、そこには接続している外部電子機器内で映像とメニュー画面を合成したものが転送され映し出されている。メニュー画面部分には再生や停止などの制御のアイコンが配置されている。アイコンは外部電子機器から送られてきた２次元正極同期信号をもとに抽出されたものが表示されており、同時に外部電子機器の制御コードもテレビジョン受像機で認識できるものになっている。したがって、テレビジョン受像機のリモコンまたはその他のポインティング機能でアイコンを選択することで外部電子機器の制御が可能になっている。また同図（Ｂ）もテレビジョン受像機の画面を示しているが、こちらは映像信号内にアイコンが展開されているものである。リアルタイムに変化する映像信号の中に２次元正極同期信号を盛り込んでも、テレビジョン受像機側で２次元正極同期信号を検出し、同図（Ａ）の場合と同様に制御コードとアイコンを抽出することができる。
【００７９】
また、図２７もテレビジョン受像機の画面が示されているが、ここにはビデオ入力１に接続された外部電子機器から送られたＥＰＧ（電子番組ガイド：Electronic Program Guide）の録画予約メニュー画面が表示されている。ＥＰＧの番組を示すコードを２次元正極同期信号を使いテレビジョン受像機に転送することでテレビのリモコンによる番組の予約操作が可能になる。ここに表示されている再生や停止のアイコン、さらにＥＰＧ画面は、外部電子機器から送られてくるもので、テレビジョン受像機にある本来の機能ではないが、操作はテレビジョン受像機で統一的に行うことができる。また新規外部電子機器が接続されても、また接続されている外部電子機器に新たな機能制御が加わっても、外部電子機器の制御操作はテレビジョン受像機で同様に統一的に操作ができるものである。
【００８０】
このようにして外部電子機器の制御は、テレビジョン受像機の画面に映し出された外部電子機器のメニュー画面を見ながらテレビジョン受像機付属のリモコンやその他のポインティング操作をすることで、該当の制御アイコンを選択決定し、外部電子機器を制御することができる。これによりリモコンを持ち変えることなくテレビジョン受像機に接続されている外部電子機器の制御をすることができる。例えばハードディスクレコーダのように記録メディアを取り出す必要のない外部電子機器の場合、ユーザから見えないところにその外部電子機器が置かれてあっても、外部装置用リモートコントローラの赤外線がその外部電子機器に伝わるように機器をセットしておくことにより、操作が可能になる。また本実施形態では赤外線の外部装置用リモートコントローラを使っているが、デジタルＩＦの場合は情報の流れが双方向のため、制御フォーマットが策定されているならば赤外線の外部装置用リモートコントローラを使うことなくデジタルＩＦを介したデータ転送を使って、外部電子機器を制御することもできる。
【００８１】
図２８には赤外線リピータを使った本発明の応用例が示されている。テレビジョン受像機１にはアナログ接続またはデジタルＩＦによる接続６にて４台の外部電子機器２が接続されている。テレビジョン受像機１はリモコンの赤外線受光部１ａと赤外線発光部１ｂを備えている。また部屋の反対側または電子機器２に向かっているところには赤外線リピータ５ａが設置されている。図２９に示す例では操作に使用するリモコンの数はテレビジョン受像機と外部電子機器を合わせた数だけ必要であったが、図２８に示す例ではテレビジョン受像機のリモコン４は１台だけでよい。図２８の外部電子機器２からは映像信号のメニュー画面に付加された制御コードがテレビジョン受像機１に転送され、リモコン４で選択された外部電子機器２の制御はその解読された制御コードにしたがったリモコンコードが赤外線発行部１ｂから赤外線リピータ５ａに向け放射される。赤外線リピータ５ａでは受光した赤外線の波形を整形して、外部電子機器２に向けて赤外線を放射する。この利用形態では図６に示すようにラックに入った外部電子機器毎に設置した外部電子機器用リモートコントローラ６１〜６４は不要である。また赤外線リピータ５ａを使えば隣の部屋などにも制御がおよび、無線のデジタルＩＦで映像信号と制御コードをテレビジョン受像機１に送れば、広範囲の機器に対して無線で対応できる。
【００８２】
以上詳述した本発明の実施形態では、全ての接続方式にある映像そのものに制御コードを乗せて、２次元正極同期信号を判別してコードを抽出する方式を採用したので、映像が転送できる方式であればアナログ接続やデジタルＩＦまたは有線無線にかかわらず対応できる。
【００８３】
外部電子機器に向けた制御方式は赤外線による外部装置用リモートコントローラやまた最後に記述した赤外線リピータを活用するため、極めて安価に実現できるとともに、すでに決まっている制御フォーマットを各メーカ間でオープンにすることで利用できる。またリモコンコードは調べれば分かることでもあり、実施が容易である。したがって本発明によれば、いつまで経っても実現できないホームネットワークの代用としての役割を担うこともできると共に、また他の方式と相容れられるものであり、ユーザにとって多様化するＡＶ機器の利便性の向上が図れる有効な方法が提供される。
【００８４】
本実施形態では制御コードとして各外部電子機器のリモコンコードを使用し、外部電子機器の制御を利用目的にして取り上げたが、２次元正極同期信号以外のコードはこの制御コードに限定されるものではなく、制御コードを記述した領域にはその他の多様な情報を盛り込むことができる。
【００８５】
以上のような効果をもつ本発明のユニバーサル・ネットワーク・グイは、テレビジョン受像機をＡＶ機器のセンター情報機器として位置づけ、これを中核にして接続される外部電子機器をテレビジョン受像機の画面メニューを操作する方式、すなわちＧＵＩによる操作であらゆる機器を遠隔操作するものである。これによるテレビジョン受像機を中核にした統一操作の実現は、接続先が何であるか分からなくても、ＧＵＩ画面を介して接続先の操作内容が把握できるため、新規外部電子機器も努力することなく扱える家電感覚の操作形態を実現することに他ならない。本発明はさまざまな接続方式を有するＡＶ機器の使い勝手の問題を解決する有効な手段を提供し、誰でもが電子機器を簡単に扱える方策として重要な役割を担うことができる。
【図面の簡単な説明】
【００８６】
【図１】テレビジョン受像機と外部電子機器の設置例を示す図である。
【図２】テレビジョン受像機の操作メニュー画面を示す図である。
【図３】テレビジョン受像機に接続された外部電子機器のメニュー画面例を示す図である。
【図４】テレビジョン受像機の接続パネルを示す図である。
【図５】外部装置用リモートコントローラを介した外部電子機器の操作を説明するための図である。
【図６】テレビジョン受像機と外部電子機器と外装置用リモートコントローラの接続例を示す図である。
【図７】外部電子機器操作用のメニュー画面に表示される制御コード群をアイコン表示に置き換える方法を説明するための図である。
【図８】映像信号に使われるアナログ信号とデジタル信号の振幅規定を説明するための図である。
【図９】一般画像の画像空間内での相関性を説明するための図である。
【図１０】画像信号のライン１からライン１２に組み込まれた２次元正極同期信号と制御コードの波形を示す図である。
【図１１】画像信号のライン１３からライン２４に組み込まれた制御コードの波形を示す図である。
【図１２】コードのフォーマットとデータ抽出方法を説明するための図である。
【図１３】コードデータが表示されたテレビジョン受像機の画面を示す図である。
【図１４】３種類のリモコンコード体系を表として示す図である。
【図１５】２次元正極同期信号の検出及び制御のためのタイミングパルスの発生を行う同期信号検出部の構成を示すブロック図である。
【図１６】図１５に示す同期信号検出部の動作を説明するためのタイミング図である。
【図１７】図１５に示す同期信号検出部で抽出される基準同期信号とそれから得られるコード群をとらえるタイミングパルスの関係を映像信号上で説明するための図である。
【図１８】奇数フィールドにあるデータの取り込みを説明するための図である。
【図１９】アイコンのすげ替えタイミングを示すタイムチャートである。
【図２０】本発明の第１の実施形態にかかるテレビジョン受像機と外部電子機器の要部の構成を示すブロック図である。
【図２１】図２０に示す同期誤検出保護器の構成を示すブロック図である。
【図２２】同期誤検出保護器の作用で変化した画像信号の波形を示す図である。
【図２３】本発明の第２の実施形態にかかるテレビジョン受像機と外部電子機器の要部の構成を示すブロック図である。
【図２４】図２３に示す外部電子機器の合成器の構成を示すブロック図である。
【図２５】本発明の第２の実施形態におけるコードデータが表示されたテレビジョン受像機の画面を示す図である。
【図２６】本発明の応用例を説明するための図である。
【図２７】本発明のＥＰＧ画面での一応用例を示す図である。
【図２８】赤外線リピータを使った応用例を示す図である。
【図２９】現状のテレビジョン受像機と外部電子機器とリモコンの関係を説明するための図である。
【図３０】テレビジョン受像機と外部電子機器を接続するさまざまな方式を示す図である。
【符号の説明】
【００８７】
１ テレビジョン受像機（表示電子機器）
２ 外部電子機器
３ ユーザ（操作者）
４ リモコン装置
５ 外部リモートコントローラ
１１ 同期検出及びタイミングパルス発生器（同期信号検出手段）
１２ アイコンメモリ
１２ｄ ＬＳＢミュート部
１４ 表示装置
１５ コード抽出器
１６ ＣＰＵ
１７ グラフィックス生成器
１８ リモコンコード発生器
２０１ 赤外線受光部
２０３ 同期生成器
２０４ コードとアイコン生成器
２０５ グラフィックス生成器
２０６ 信号源
２０７ 同期誤検出保護器
２０８ 合成器
２７１ 同期検出器及びタイミングパルス発生器
２７２ エラー付加器
【特許請求の範囲】
【請求項１】
表示装置を有する少なくとも１つの表示電子機器と、該表示電子機器に接続された少なくとも１つの他の電子機器からなる電子機器システムにおいて、
前記他の電子機器は、
前記表示電子機器へ伝送する映像信号の所定領域に、所定の同期信号及び前記他の電子機器の制御に必要な情報を含む付加情報を付加する情報付加手段を備え、
前記表示電子機器は、
前記他の電子機器から供給される映像信号から前記付加情報を抽出する抽出手段と、
該抽出手段により抽出された付加情報に基づいて、前記他の電子機器を制御するための制御情報を前記表示装置に表示する制御情報表示手段と、
前記表示装置に表示された制御情報の中から操作者が所望の制御情報を選択したとき、該選択された制御情報を前記他の電子機器に転送する転送手段とを備え、
前記他の電子機器は、前記転送手段により転送された制御情報に応じた制御動作を行うことを特徴とする電子機器システム。
【請求項２】
前記転送手段は、前記選択された制御情報を、赤外線リモートコントローラを介して前記他の電子機器に転送することを特徴とする請求項１に記載の電子機器システム。
【請求項３】
前記情報付加手段は、前記映像信号の前記所定領域以外の領域において、前記同期信号と同一パターンの検出を行い、前記同一パターンが検出されたときは、該同一パターンが検出された信号の一部を変更することを特徴とする請求項１または２に記載の電子機器システム。
【請求項４】
前記情報付加手段が付加する付加情報は、前記制御情報としてアイコンを前記表示装置に表示するためのアイコン情報を含み、前記制御情報表示手段は、前記アイコン情報に基づいて、前記制御情報に対応するアイコンを前記表示装置に表示することを特徴とする請求項１から３の何れか１項に記載の電子機器システム。
【請求項１】
表示装置を有する少なくとも１つの表示電子機器と、該表示電子機器に接続された少なくとも１つの他の電子機器からなる電子機器システムにおいて、
前記他の電子機器は、
前記表示電子機器へ伝送する映像信号の所定領域に、所定の同期信号及び前記他の電子機器の制御に必要な情報を含む付加情報を付加する情報付加手段を備え、
前記表示電子機器は、
前記他の電子機器から供給される映像信号から前記付加情報を抽出する抽出手段と、
該抽出手段により抽出された付加情報に基づいて、前記他の電子機器を制御するための制御情報を前記表示装置に表示する制御情報表示手段と、
前記表示装置に表示された制御情報の中から操作者が所望の制御情報を選択したとき、該選択された制御情報を前記他の電子機器に転送する転送手段とを備え、
前記他の電子機器は、前記転送手段により転送された制御情報に応じた制御動作を行うことを特徴とする電子機器システム。
【請求項２】
前記転送手段は、前記選択された制御情報を、赤外線リモートコントローラを介して前記他の電子機器に転送することを特徴とする請求項１に記載の電子機器システム。
【請求項３】
前記情報付加手段は、前記映像信号の前記所定領域以外の領域において、前記同期信号と同一パターンの検出を行い、前記同一パターンが検出されたときは、該同一パターンが検出された信号の一部を変更することを特徴とする請求項１または２に記載の電子機器システム。
【請求項４】
前記情報付加手段が付加する付加情報は、前記制御情報としてアイコンを前記表示装置に表示するためのアイコン情報を含み、前記制御情報表示手段は、前記アイコン情報に基づいて、前記制御情報に対応するアイコンを前記表示装置に表示することを特徴とする請求項１から３の何れか１項に記載の電子機器システム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【公開番号】特開２００７−３６９０６（Ｐ２００７−３６９０６Ａ）
【公開日】平成１９年２月８日（２００７．２．８）
【国際特許分類】
【出願番号】特願２００５−２１９７４４（Ｐ２００５−２１９７４４）
【出願日】平成１７年７月２９日（２００５．７．２９）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．Ｂｌｕｅｔｏｏｔｈ
【出願人】（０００００４３２９）日本ビクター株式会社 (3,896)
【Ｆターム（参考）】
【公開日】平成１９年２月８日（２００７．２．８）
【国際特許分類】
【出願日】平成１７年７月２９日（２００５．７．２９）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．Ｂｌｕｅｔｏｏｔｈ
【出願人】（０００００４３２９）日本ビクター株式会社 (3,896)
【Ｆターム（参考）】
[ Back to top ]