映像処理装置及びその制御方法
【課題】元映像及びトリミング映像をマルチウィンドウ画面で表示する際、ウィンドウのサイズ比に応じて、表示するトリミング映像領域を決定することにより、ユーザの利便性を向上させる。
【解決手段】放送受信装置１００はトリミング映像に係る領域情報を取得するトリミング映像領域取得部１１６と、各ウィンドウを表示する信号を生成するウィンドウ生成部１１４を備える。ウィンドウサイズ変更部１１５は操作指示に従ってウィンドウのサイズを変更する。合成映像生成部１０９は複数のウィンドウを合成した映像出力を生成して表示部１１１に出力する。トリミング映像領域決定部１１７は、複数のウィンドウのサイズ比を、広画角映像及びトリミング映像の解像度比と比較して、表示するトリミング映像領域を決定し、トリミング映像視聴用ウィンドウ内の映像が、別ウィンドウに表示された広画角映像における該当領域よりも大きく表示されるように制御する。
【解決手段】放送受信装置１００はトリミング映像に係る領域情報を取得するトリミング映像領域取得部１１６と、各ウィンドウを表示する信号を生成するウィンドウ生成部１１４を備える。ウィンドウサイズ変更部１１５は操作指示に従ってウィンドウのサイズを変更する。合成映像生成部１０９は複数のウィンドウを合成した映像出力を生成して表示部１１１に出力する。トリミング映像領域決定部１１７は、複数のウィンドウのサイズ比を、広画角映像及びトリミング映像の解像度比と比較して、表示するトリミング映像領域を決定し、トリミング映像視聴用ウィンドウ内の映像が、別ウィンドウに表示された広画角映像における該当領域よりも大きく表示されるように制御する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、元映像とその一部領域を切り出したトリミング映像をマルチウィンドウ画面で表示させる際、各画面のサイズ比に応じて映像の切り出し領域を制御する技術に関するものである。
【背景技術】
【０００２】
デジタル放送ではハイビジョン放送が一般的となり、「２ｋ×１ｋ」、すなわち１９２０×１０８０ピクセル（以下、ＦＨＤと記す）での映像処理が行われる。高度衛星デジタル放送では、さらに高解像度の「４ｋ×２ｋ」のデジタルシネマや「８ｋ×４ｋ」のスーパーハイビジョン（以下、ＳＨＶと記す）の映像信号と、２２．２ｃｈのマルチチャンネル音声の送信方式が検討されている。従来の解像度を超える映像の放送では、受信装置の処理能力や機能に応じた表示を行うことも検討されている。例えば、画面全体をダウンコンバートした映像をユーザに提供する形態がある。この他、コンテンツ制作者や放送局が指定した代表画面や特定のテーマに応じた画面（いずれもＳＨＶ画面の一部）から受信装置側で切り出した映像をユーザが視聴する形態が検討されている。後者の視聴形態を以下では、トリミング視聴という。
【０００３】
トリミング視聴では、例えば、受信装置の表示能力に適した映像が表示されるように、ＳＨＶ映像全体の中の部分領域を示すトリミング映像領域情報が、映像製作者である放送局からＳＨＶ映像に付加して送信される。受信装置はトリミング映像領域情報に基づいて表示すべき領域を切り出してユーザに映像を提示する。トリミング視聴が普及した場合、受信装置のマルチウィンドウ機能と併せてユーザの利便性が高まる。ユーザは撮影されたＳＨＶの広画角映像と、その一部を抽出したトリミング映像（全体映像の一部がズーミングされた映像や放送局が意図的に指定した注目映像等）を同時に視聴できる。図１１（Ａ）は２画面での表示形態を例示する。ユーザは、左側ウィンドウ１１０１ａでスポーツ番組等の全体映像を視ながら、右側ウィンドウ１１０２ａのトリミング映像で注目選手の表情等を視ることができる。なお、マルチウィンドウ機能では一般的に２画面機能が知られ、各画面の大きさをユーザ操作で変更可能である。
【０００４】
従来、全体映像とトリミング映像との同時表示処理にて、映像やディスプレイのアスペクト比に基づいて生成される配置表示情報によって合成映像の配置を決定する技術がある（特許文献１参照）。また、子画面に表示する領域の画像を形成するビデオ信号を切り出して、子画面の大きさに応じて縮小や拡大処理を行ない、ＰｉｎＰ合成し、ユーザが指定した領域の画像を子画面に表示するテレビ受信機が知られている（特許文献２参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−１２１３７８号公報
【特許文献２】特開平０９−１６３２６０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
広画角映像とトリミング映像を、マルチウィンドウ機能にてユーザが同時に視聴している最中に、ユーザによりウィンドウサイズの変更を要求される場合が考えられる。その際、複数のウィンドウのサイズ比によってはトリミング映像の方が小さく表示されてしまうことが懸念される。
図１１（Ｂ）は、左側ウィンドウ１１０１ｂに広画角映像が表示され、右側ウィンドウ１１０２ｂにトリミング映像が表示された例を示す。ユーザ操作によって、左側ウィンドウ１１０１ｂのサイズが大きくなったため、右側ウィンドウ１１０２ｂはサイズの縮小を余儀なくされる。その結果、全体映像とその一部をズーミングした映像を同時に楽しめるというユーザのメリットが十分に発揮されなくなってしまうおそれがある。
【０００７】
一方、受信装置の表示能力に適した映像が表示されるように、放送局が複数のトリミング映像領域情報を送信している場合、ユーザは変更したウィンドウサイズに適したトリミング映像領域に切り替える操作を行うことがある。しかし、ユーザはウィンドウサイズを変更しながら、尚且つトリミング映像領域を切り替える操作を強いられると操作負担が増えることが懸念される。従来技術では、映像及びディスプレイのアスペクト比に応じて画面配置を決定できるが、複数のウィンドウのサイズ比を考慮したトリミング映像領域の切り替え制御は行われていなかった。
そこで本発明は、元映像とトリミング映像をマルチウィンドウ画面で表示する際、ウィンドウのサイズ比に応じて、表示するトリミング映像領域を決定することにより、ユーザの利便性を向上させることを目的とする。
【課題を解決するための手段】
【０００８】
上述した課題を解決する為に本発明に係る装置は、元映像の一部を抽出した第１トリミング映像及び該第１トリミング映像よりも解像度の低い第２トリミング映像を処理して、前記元映像を表示画面の第１ウィンドウに表示させ、第２ウィンドウには前記第１トリミング映像又は第２トリミング映像を表示させる映像処理装置であって、前記第１トリミング映像及び第２トリミング映像に係る領域情報を取得する取得手段と、前記第１ウィンドウ及び第２ウィンドウを表示する信号を生成するウィンドウ生成手段と、ユーザ操作によるウィンドウのサイズ変更要求を受けて前記第１ウィンドウ及び第２ウィンドウのサイズを変更するウィンドウサイズ変更手段と、前記第１ウィンドウ及び第２ウィンドウを合成した映像出力を生成する合成映像生成手段と、前記第２ウィンドウに表示するトリミング映像の映像領域を決定する映像領域決定手段を備える。前記映像領域決定手段は、前記ウィンドウ生成手段により生成される前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比よりも小さい場合、前記第２ウィンドウに表示させる映像領域を前記第１トリミング映像の映像領域に決定し、前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比以上である場合、前記第２ウィンドウに表示させる映像領域を前記第２トリミング映像の映像領域に決定する。
【発明の効果】
【０００９】
本発明によれば、元映像とトリミング映像をそれぞれのウィンドウで表示する際、ウィンドウのサイズ比に応じて、表示するトリミング映像領域を決定することにより、ユーザの利便性を向上させることができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施形態に係る放送受信装置の構成例を概略的に示すブロック図である。
【図２】ＥＩＴに挿入されるコンポーネント記述子のデータ構造を示す図である。
【図３】コンポーネント記述子に記載のコンポーネント内容とコンポーネント種別の一例を表で示す図である。
【図４】ＥＩＴに挿入される拡張形式イベント記述子のデータ構造を示した図である。
【図５】拡張形式イベント記述子に記載のトリミング映像領域情報の一例を表で示す図である。
【図６】トリミング映像領域情報を受信した際の表示例を示す図である。
【図７】マルチウィンドウ表示及び操作を説明する図である。
【図８】２画面表示が要求された際の各ウィンドウに表示映像を決定する処理例を説明するフローチャートである。
【図９】ウィンドウのサイズ変更に伴うトリミング映像領域の決定処理例を説明するフローチャートである。
【図１０】ウィンドウのサイズ変更に伴うトリミング映像領域の決定後の表示例を示す図である。
【図１１】全体映像及びトリミング映像の表示例（Ａ）と、ウィンドウサイズを変更した際の表示例（Ｂ）を示す図である。
【発明を実施するための形態】
【００１１】
以下、図面を用いて本発明の各実施形態について説明する。本発明の映像処理装置を適用した放送受信装置については、装置自身が表示手段を備えた形態と、外部表示装置に映像信号を出力して画像を表示する形態があり、本発明はいずれの形態にも適用可能である。
【００１２】
［第１実施形態］
図１は、本発明の第１実施形態に係る放送受信装置１００の構成例を示すブロック図である。アンテナ（またはケーブル）からの放送信号は、チューナ部１０１に入力される。チューナ部１０１は放送信号に対して復調、誤り訂正等の処理を施し、トランスポートストリーム（ＴＳ：Transport Stream）と呼ばれる形式のデータ（以下、ＴＳデータという）を生成して出力する。分離部１０２はＴＳデータを、オーディオデータ、ビデオデータ、番組情報データ及びデータ放送用データに分離する。分離されたオーディオデータ及びビデオデータは、オーディオデコーダ１０３及びビデオデコーダ１０４にそれぞれ出力され、番組情報データ及びデータ放送用データはストリームデータ処理部１０５に出力される。なお、番組情報データ及びデータ放送用データはデータ放送コンテンツ、制御文書等の情報を含む。該データは、例えば、後述するＥＩＴコンポーネント記述子（映像品質やアスペクト比等、番組を構成している各コンポーネントの情報）、拡張イベント記述子（番組の詳細内容を項目ごとに示した情報）を含む。ＥＩＴは“Event Information Table”の略号である。
【００１３】
オーディオデコーダ１０３は、分離部１０２からの音声データをデコード（復号化）して音声出力部１０６に出力する。音声出力部１０６は、オーディオデコーダ１０３がデコードした音声データを増幅し、デジタル／アナログ変換して音声信号をスピーカ１１０に出力する。スピーカ１１０は、音声出力部１０６からの音声信号を増幅して音声を出力する。また、ビデオデコーダ１０４は、分離部１０２からの映像データをデコードして映像出力部１０７に送る。尚、図１ではチューナ部１０１、分離部１０２及びビデオデコーダ１０４を１つだけ示すが、放送受信装置１００は、チューナ部１０１、分離部１０２及びビデオデコーダ１０４をそれぞれ２つ備えることで、複数の放送番組の受信及び２画面表示制御が可能である。
【００１４】
ストリームデータ処理部１０５はトリミング映像領域取得部１１６を有し、分離部１０２からの番組情報データ及びデータ放送用データを解析し、バスを介してメモリ１１２にデータを格納する。トリミング映像領域取得部１１６は、ストリームデータ処理部１０５内で解析したＥＩＴから、トリミング視聴に必要となるトリミング映像領域情報を取得してメモリ１１２に格納する。トリミング映像領域情報については後述する。
【００１５】
映像出力部１０７は、ビデオデコーダ１０４から入力された映像データに対して、後述するトリミング映像領域決定部１１７からの情報に従い、映像領域を部分的に切り出す処理及びスケーリング処理を施してビデオプレーン１０８に出力する。また映像出力部１０７は、後述するウィンドウ生成部１１４で生成されたウィンドウの数だけ、映像データをビデオプレーン１０８の各プレーン（Ｐｌａｎｅ１，２参照）に出力する。合成映像生成部１０９は、ビデオプレーン１０８の各プレーンに出力された複数の映像データをマルチウィンドウ画面として１画面上に合成する。また合成映像生成部１０９は、リモートコントローラ（以下、リモコンと略称する）１１９によるユーザ操作指示に応じて、メモリ１１２に格納されたデータ放送用データを読み出してデータ放送画面を構成し、映像信号を表示部１１１に出力する。表示部１１１は、合成映像生成部１０９の出力した映像信号に従って画像を表示する。本実施形態では３８４０×２１６０ピクセルの解像度をもつ表示デバイスが使用される。
【００１６】
ウィンドウ生成部１１４は、映像表示用のウィンドウを生成し、映像出力部１０７を通じてマルチウィンドウ画面表示機能を実現する。また、ウィンドウ生成部１１４はウィンドウサイズ変更部１１５を備え、リモコン１１９によるユーザ操作指示に応じて、画面表示されている各ウィンドウのサイズ変更処理を行う。
【００１７】
トリミング映像領域決定部１１７は、ウィンドウ生成部１１４より得られるウィンドウ数、各ウィンドウのサイズ及びトリミング映像領域取得部１１６が取得したトリミング映像領域情報に基づき、ウィンドウ内に表示するトリミング映像領域を決定する。
【００１８】
制御部１１３は放送受信装置１００の各部を統括的に制御する。メモリ１１２は、ストリームデータ処理部１０５からのデータ放送用データや、トリミング映像領域取得部１１６からのトリミング映像領域情報等を記憶する。メモリ１１２は、制御部１１３がプログラムを解釈して実行する為に使用するワークメモリを含む。操作入力部１１８は、リモコン１１９からの信号や、放送受信装置１００の本体部に設けた不図示のスイッチ類からの信号を受け付け、バスを介して制御部１１３に操作指示信号を送信する。リモコン１１９は、ユーザからの操作指示を操作入力部１１８の受信部に無線送信する。
【００１９】
次に、第１実施形態に於いて放送局より受信するトリミング映像領域情報について説明する。トリミング映像領域情報は、トリミング映像領域の有無、トリミング映像領域の位置及び幅、高さの情報（ｘ，ｙ，ｗｉｄｔｈ，ｈｅｉｇｈｔ）等の各項目で構成される。これらは日本国内のデジタル放送の標準規格であるＡＲＩＢ（電波産業会）標準規格を拡張して伝送される情報である。ＡＲＩＢ規定によるデジタル放送では、映像や音声、番組に関する種々の情報をＰＳＩ／ＳＩデータ内に各種テーブルとして埋め込んで送出可能である。ＰＳＩは“Program Specific Information”の略号であり、ＳＩは“Service Information”の略号である。
【００２０】
放送局指定のトリミング映像領域情報の各項目は、番組名、放送日時、番組内容等の番組に関する情報を送るＥＩＴに挿入されるコンポーネント記述子及び拡張形式イベント記述子を拡張したものである。これらの情報はＳＨＶ映像フォーマット情報（３８４０×２１６０／６０／Ｐの映像フォーマット等）と共に伝送される。コンポーネント記述子は、図２に示すデータ構造を持ち、コンポーネント内容及びコンポーネント種別を含む。コンポーネント種別（ｃｏｍｐｏｎｅｎｔ＿ｔｙｐｅ）という８ビットのフィールドの情報で、映像コンポーネントや音声コンポーネントの種別を示すことができる。なお、図中の数値は、各フィールドのビット数を示す。
【００２１】
図３は、コンポーネント内容とコンポーネント種別を規定した表を例示する。映像コンポーネント（コンポーネント内容０ｘ０１）のコンポーネント種別０ｘ００から０ｘＤ４までは、現在規格化されている映像コンポーネントを示している。本実施形態で想定している映像ストリームは、ハイビジョン映像を超えるさらに高解像度の映像フォーマットによるものであるため、現行では規定されていない。そこで本実施形態では、ＳＨＶの映像フォーマットであることを示すコンポーネント種別として、図３に示すように０ｘＥ１乃至０ｘＥ８を割り当てている。
【００２２】
コンポーネント種別として、トリミング映像領域ありの映像フォーマットが指定される場合、トリミング映像領域情報が伝送される。トリミング映像領域情報はＥＩＴに挿入される拡張形式イベント記述子を用いて伝送することができる。拡張形式イベント記述子は、図４に示すデータ構造を持ち、その中の項目名（文字符号）の１つとしてトリミング映像領域情報が追加される。図５はトリミング映像領域Ａ乃至Ｃと、項目名及び項目記述を表にして例示する。項目名（文字符号）には、１つのコンテンツ（番組）のトリミング映像領域ごとに独立したトリミングＩＤ、トリミング映像領域名、トリミング映像領域のサイズや位置（アドレス）等の情報種別が定義される。項目記述（文字符号）に示す値はテキスト情報として伝送される。
【００２３】
図６は、放送受信装置１００がトリミング映像領域情報を受信した際に表示部１１１に画面表示される表示例を示す。図６（Ａ）は、放送局より受信するトリミング映像領域情報を説明する概略図である。当該情報はその伝送に際してＥＩＴに挿入される。本例にて受信する元映像（図示の広画角映像）のフォーマットは、「３８４０×２１６０（ｉ）、トリミング映像領域あり」で、映像コンポーネント種別０ｘＥ７（図３参照）で指定される。元映像から抽出されるトリミング映像領域は、例えば、以下に示す通りである。
【００２４】
第１トリミング映像領域（Ａ枠内参照）：ＦＨＤ用領域（ｘ＝９６０，ｙ＝５４０，ｗ＝１９２０，ｈ＝１０８０）。
第２トリミング映像領域（Ｂ枠内参照）：ＳＤ用領域（ｘ＝１５６０，ｙ＝８４０，ｗ＝７２０，ｈ＝４８０）であり、第１トリミング映像よりも解像度は低い。
第３トリミング映像領域（Ｃ枠内参照）：セルフォン用領域（ｘ＝１７４０，ｙ＝９６０，ｗ＝３６０，ｈ＝２４０）であり、第２トリミング映像よりも解像度は低い。
【００２５】
上記の情報は拡張形式イベント記述子に挿入される。図６（Ａ）にＡ乃至Ｃで示す枠が各領域を示している。なお、ｘｙ座標の原点（０，０）は表示画面の左上隅に位置し、単位についてはピクセル（Ｐｉｘｅｌ）で表す。放送局は、放送受信装置の表示能力に応じて、最適な映像となるように４つのパターンを提供する。図６は、中央の選手が各装置で認識できるような映像を指定した例である。本例では、表示部１１１の解像度が３８４０×２１６０ピクセルである為、デフォルト設定の状態では、図６（Ｂ）に示す３８４０×２１６０ピクセルの画像が表示される。放送受信装置１００はユーザのリモコン操作に従い、その他の表示デバイス用として送信されたＡ乃至Ｃの領域についてそれぞれスケーリング処理を行い、図６（Ｃ）乃至（Ｅ）に示す画像が表示部１１１に表示される。図６（Ｃ）は図６（Ａ）のＡ枠内のトリミング映像を拡大した表示画像を示し、図６（Ｄ）は図６（Ａ）のＢ枠内のトリミング映像を拡大した表示画像を示し、図６（Ｅ）は図６（Ａ）のＣ枠内のトリミング映像を拡大した表示画像を示す。
【００２６】
次に、図７を用いて本実施形態で適用するマルチウィンドウの表示処理例について説明する。
ユーザがリモコン１１９に設けられた不図示の２画面表示用ボタンを操作すると、操作入力部１１８は操作指示信号を制御部１１３に送る。制御部１１３の指示を受けたウィンドウ生成部１１４は、後述する処理に従って決定した２つの表示映像のデータを、映像出力部１０７を介してビデオプレーン１０８に出力する。ビデオプレーン１０８の出力結果を受け、合成映像生成部１０９は、２画面の映像表示情報及び各種ＧＵＩ（Graphical User Interface）の表示情報を表示部１１１に出力する。図７（Ａ）は表示部１１１に出力された画面例を示す。初期状態では、コンテンツＡ、Ｂの各画像が同じウィンドウサイズで表示される。図中の黒い星印の記号は、どちらのウィンドウに対してユーザの操作が有効であるか、及び音声が出力されるかを示す（以下、操作・音声権という）。本例では左側のウィンドウに操作・音声権がある。この状態にて、ユーザがリモコン１１９にて操作を行った場合、操作・音声権を有する左側のウィンドウに対する操作が行われたものとして受け付けられ、制御部１１３は操作指示に従って所定の処理を実行する。
【００２７】
放送受信装置１００では、マルチウィンドウ表示の際、ウィンドウのサイズ変更が可能である。ユーザがリモコン１１９に設けられた不図示の拡大表示用ボタンを操作すると、サイズ変更要求に従って図７（Ｂ）に示すように操作・音声権のある左側のウィンドウが拡大される。これに連動して、操作・音声権の無い右側のウィンドウは縮小される。ユーザはこの操作を繰り返し行うことで、図７（Ａ）から（Ｃ）へとウィンドウのサイズを変更できる。操作・音声権のあるウィンドウに対して縮小表示用ボタンが操作された場合、ウィンドウサイズの縮小処理が実行される。ウィンドウサイズの変更処理は、サイズ変更要求を受けたウィンドウサイズ変更部１１５の制御下でビデオプレーン１０８、合成映像生成部１０９によって実行される。
【００２８】
次に図８のフローチャートを用いて、２画面表示制御にて各ウィンドウに表示する映像を決定する処理について説明する。
Ｓ８０１ではビデオプレーン「Ｐｌａｎｅ１」を使って通常の１画面で映像表示が行われており、表示中にユーザがリモコン１１９を操作したものとする。Ｓ８０２で制御部１１３は、操作入力部１１８からの操作指示が２画面表示を要求する指示であるか否かを判定する。リモコン操作で２画面表示の要求があった場合、Ｓ８０３に進み、当該要求がない場合にはＳ８０１に戻って１画面表示を続行する。
【００２９】
Ｓ８０３でウィンドウ生成部１１４は、もう１つのウィンドウを表示する為に、ビデオプレーンの未使用分「Ｐｌａｎｅ２」を新たなウィンドウ用に確保する。ここでは２画面表示への遷移後におけるデフォルトのウィンドウサイズは、２つのウィンドウで同じサイズとする。ウィンドウ生成部１１４は両ウィンドウのサイズを１９２０×１０８０ピクセルに設定する。次のＳ８０４でトリミング映像領域取得部１１６は、現時点で既に表示中であったイベントに対するＥＩＴのコンポーネント種別を格納先のメモリ１１２より取得し、Ｓ８０５に進む。Ｓ８０５ではトリミング映像領域情報の有無が判定され、該情報があった場合、Ｓ８０７に進む。また、Ｓ８０５でトリミング映像領域情報がなかった場合、Ｓ８０６に進む。
【００３０】
Ｓ８０６で制御部１１３は、現在表示中のサービスと隣接するサービス（サービスＩＤが数値的に最も近いサービス）をチューニングし、信号分離の後、ビデオコンポーネントのみをビデオデコーダ１０４でデコードする処理を各部に指示する。そしてＳ８０８に進む。Ｓ８０７でトリミング映像領域決定部１１７は、メモリ１１２に格納されている該当するＥＩＴの拡張形式イベント記述子を取得する。トリミング映像領域決定部１１７は拡張形式イベント記述子に記載されているトリミング映像領域のうちで、最も領域サイズの大きいトリミング映像領域の情報を今回のトリミング映像領域と決定する。その後、映像出力部１０７にて、決定されたトリミング映像領域に従い、映像の切り出しが行われる。
【００３１】
Ｓ８０６、Ｓ８０７の後、Ｓ８０８に進む。上述したように新たなウィンドウに表示する映像が決定されると、映像出力部１０７は、両ウィンドウに表示する映像に対してスケーリング処理を施し、処理結果を各ウィンドウに相当するビデオプレーン１０８に出力する。その後、Ｓ８０９で合成映像生成部１０９は、２つのビデオプレーンの画像データを合成した上で、ＧＵＩ画面の生成用データを重畳して表示部１１１に出力する。Ｓ８１０で表示部１１１は各ウィンドウで２画面表示を行う。
以上の処理は、制御部１１３が解釈して実行するプログラムに従って各部と連携して行われる。
【００３２】
次に図９のフローチャートを用いて、広画角映像及びトリミング映像の２画面表示中にウィンドウサイズを変更した場合のトリミング映像領域の決定処理について説明する。
本処理では、図８のＳ８１０に示す２画面表示状態とする。Ｓ９０１で表示部１１１は、広画角映像とトリミング映像について同じウィンドウサイズで２画面表示を行う。Ｓ９０２で制御部１１３は、リモコン１１９によるユーザ操作指示を受け付け、ウィンドウのサイズ変更が要求されたか否かを判定する。ウィンドウのサイズ変更要求があった場合、Ｓ９０３に進み、当該要求がない場合にはＳ９０１に戻る。
【００３３】
Ｓ９０３でウィンドウサイズ変更部１１５は、メモリ１１２に一時的に格納している現在のウィンドウサイズと、各ウィンドウに係るトリミング映像領域情報を取得する。次に、Ｓ９０４の条件分岐処理に進む。この判断は後述の条件式によって決定され、特定の条件式を満たす状態が変化した場合、Ｓ９０５に進み、トリミング映像領域の変更処理が行われ、Ｓ９０６に進む。またＳ９０４で特定の条件式を満たす状態が変化しない場合、Ｓ９０６に進む。
【００３４】
Ｓ９０６で映像出力部１０７は表示映像のスケーリング処理を行い、ウィンドウサイズ変更部１１５は各ウィンドウのサイズ変更処理を行う。
【００３５】
以下、Ｓ９０４の条件式について具体例を説明する。ここでは説明の便宜上、広画角映像を表示する第１ウィンドウを「ウィンドウ１」と記し、トリミング映像を表示する第２ウィンドウを「ウィンドウ２」と記す。条件式は、このウィンドウ１及び２のサイズ比（面積比）と、表示する映像の解像度比との比較結果、つまりサイズ比が所定の解像度比以上であるか否かに応じて複数に場合分けされる。図１０（Ａ）乃至（Ｃ）は、場合分けに応じて処理された表示画像を例示し、操作・音声権は左側のウィンドウにある。なお、Ｓ９０４の判断処理において、下記条件式を満たす状態が変化する場合、例えば、ＣＡＳＥ１に示す条件式を満たす状態から、ＣＡＳＥ２に示す条件式を満たすようにウィンドウサイズの変更が指示された場合には、Ｓ９０５に処理を進める。またウィンドウのサイズ変更の前後で下記条件式を満たす状態が変化しない場合にはＳ９０６に処理を進める。
【００３６】
ＣＡＳＥ１：
ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０） ・・・（式１）
（式１）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはＦＨＤ用トリミング映像領域（１９２０×１０８０）がスケーリング処理されて表示される。
図１０（Ａ）に示すように、左側のウィンドウ１００１ａの広画角映像と、右側のウィンドウ１００２ａのトリミング映像は、同一ウィンドウサイズでスケーリング処理されてそれぞれの画面に表示される。
【００３７】
ＣＡＳＥ２：
広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０）＜＝ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式２）
（式２）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはＳＤ用トリミング映像領域（７２０×４８０）がスケーリング処理されて表示される。図１０（Ｂ）に示すように、拡大された左側のウィンドウ１００１ｂには広画角映像が表示され、縮小された右側のウィンドウ１００２ｂにはトリミング映像が表示される。
【００３８】
ＣＡＳＥ３：
ウィンドウ１／ウィンドウ２＞＝広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式３）
（式３）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはセルフォン用トリミング映像領域（３６０×２４０）がスケーリング処理されて表示される。図１０（Ｃ）に示すように、図１０（Ｂ）よりもさらに拡大された左側のウィンドウ１００１ｃには広画角映像が表示され、図１０（Ｂ）よりもさらに縮小された右側のウィンドウ１００２ｃにはトリミング映像が表示される。
【００３９】
上記条件式に従い、各ウィンドウに表示するトリミング映像領域を制御することで、図１１（Ｂ）で説明した問題が解消される。すなわち、ユーザが任意にウィンドウサイズを変更した場合でも、トリミング映像視聴用のウィンドウ内の映像は常に、別ウィンドウに表示されている広画角映像における該当領域よりも大きく表示されることになる。よって、ユーザは別段の操作を行うことなく、広画角映像及びその一部を拡大したトリミング映像を見易い状態で同時に楽しむことが出来る。
【００４０】
第１実施形態によれば、ユーザ操作で変更されるウィンドウのサイズ比に応じて適切なトリミング映像領域を決定し、表示映像に反映させることができる。よって、全体映像とその一部がズーミングされた映像を同時に視聴する形態が放送受信装置にて自動で実現されるので、ユーザの利便性が向上する。
尚、本実施形態では、広画角映像の付帯情報としてトリミング映像領域が指定されるとしたが、各解像度の映像ストリームが送出されて受信装置側で選択して表示する構成でもよい。また、ウィンドウのサイズ変更に伴い、トリミング映像領域が切り替わる条件を満たす場合に、ユーザに対して「トリミング映像領域を切り替えますか？」等、確認用のダイアログ表示処理を行ってもよい。上記の例では２画面表示を例に説明したが、上記制御はウィンドウの解像度に拠る制御ではなく、ウィンドウのサイズ比に基づくので、表示画面に３画面以上のウィンドウを表示する場合でも、上記と同様の処理で実現できる。
【００４１】
［第２実施形態］
次に、本発明の第２実施形態を説明する。第２実施形態では、トリミング映像領域をスケーリング処理して表示する際、さらにスケーリング率（表示映像の拡大縮小率）を加味して表示領域を制御する。以下、主として第１実施形態との相違点を説明する。なお第２実施形態及び後述の第３実施形態において、第１実施形態と同じ構成を有する部分については、第１実施形態にて既に使用した符号と同一の符号を付与することにより、それらの詳細な説明を割愛する。
【００４２】
第２実施形態では、トリミング映像領域の決定処理に用いる条件式（図９のＳ９０４参照）について第１実施形態とは異なる特徴を説明する。第１実施形態の場合と同様、広画角映像を表示していたウィンドウをウィンドウ１と記し、トリミング映像領域を表示していたウィンドウをウィンドウ２と記す。
ウィンドウ２の表示映像をより小さなトリミング映像領域に切り替える際、映像出力部１０７はウィンドウサイズに合わせて映像のスケーリング処理を行う。本実施形態では、このスケーリング処理によって解像度が等倍以上に引き伸ばされることが無いように、以下に示す中間トリミング映像領域が生成される。この中間トリミング映像領域は、放送局より送出されるトリミング映像領域と共にウィンドウサイズ変更処理に伴う切り替え映像領域情報として使用される。
従って第２実施形態に係る条件式は、ウィンドウ１及び２のサイズ比（面積比）、表示映像の解像度比、及び表示の際のスケーリング率によって、下記のように場合分けされる。
【００４３】
ＣＡＳＥ１：
ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０） ・・・（式１）
（式１）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはＦＨＤ用トリミング映像領域（１９２０×１０８０）がスケーリング処理されて表示される。
【００４４】
ＣＡＳＥ２−１：
広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０）＜＝ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式２）
ウィンドウ２＞ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式４）
（式２）及び（式４）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２には中間トリミング映像領域１（１２８０×７２０）がスケーリング処理されて表示される。中間トリミング映像領域１（１２８０×７２０）は、ＦＨＤ用トリミング映像領域（１９２０×１０８０）とＳＤ用トリミング映像領域（７２０×４８０）の間の解像度をもつ。尚、中間トリミング映像領域１（１２８０×７２０）は、「広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０）＝ウィンドウ１／ウィンドウ２」を満たすときのウィンドウ２のサイズより算出される。
【００４５】
ＣＡＳＥ２−２：
広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０）＜＝ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式２）
ウィンドウ２＜＝ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式５）
（式２）及び（式５）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がリサイズされて表示され、ウィンドウ２にはＳＤ用トリミング映像領域（７２０×４８０）がリサイズされて表示される。
【００４６】
ＣＡＳＥ３−１：
ウィンドウ１／ウィンドウ２＞＝広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式３）
ウィンドウ２＞セルフォン用トリミング映像領域（３６０×２４０） ・・・（式６）
（式３）及び（式６）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２には中間トリミング映像領域２（６００×４００）がスケーリング処理されて表示される。中間トリミング映像領域２（６００×４００）は、ＳＤ用トリミング映像領域（７２０×４８０）とセルフォン用トリミング映像領域（３６０×２４０）の間の解像度をもつ。尚、中間トリミング映像領域２（６００×４００）は、「広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０）≒ウィンドウ１／ウィンドウ２」を満たすときのウィンドウ２のサイズより算出される。
【００４７】
ＣＡＳＥ３−２：
ウィンドウ１／ウィンドウ２＞＝広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式３）
ウィンドウ２＜＝セルフォン用トリミング映像領域（３６０×２４０） ・・・（式７）
（式３）及び（式７）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはセルフォン用トリミング映像領域（３６０×２４０）がスケーリング処理されて表示される。
【００４８】
上記条件式に従ってウィンドウに表示するトリミング映像領域が制御される。これにより、ユーザが任意のウィンドウサイズに変更した場合でも、ウィンドウ２には、ウィンドウ１に表示されている広画角映像における該当領域よりもトリミング映像が大きく表示されることになる。本実施形態では更に、スケーリング率の如何によっては上記中間トリミング映像領域が生成されてウィンドウ２に表示されるので、拡大により表示映像の解像度が低下して画質が粗くならないように防止できる。
尚、第２実施形態では、スケーリング処理により表示映像の解像度が等倍以上に引き伸ばされないよう、中間トリミング映像領域を生成したが、等倍に限られるものではない。例えば、その倍率については表示デバイスの表示能力や解像度アップコンバート技術等と併せて適宜設定されてもよい。
【００４９】
［第３実施形態］
次に本発明の第３実施形態を説明する。
第３実施形態では、表示部１１１に用いる表示デバイスの解像度と、マルチウィンドウの表示及び操作において前記実施形態とは異なる特徴を有する。放送受信装置１００の表示部１１１は、本実施形態では２２４００×９７２０の解像度をもつ表示デバイスである。広画角映像の視聴時に表示部１１１は、３８４０×２１６０の映像をドットバイドット（映像情報の１ピクセルを表示デバイスの１ドットに対応させて表示する方式）で表示画面の垂直方向の中央に表示する。
【００５０】
ユーザがリモコン１１９に設けた不図示の２画面表示用ボタンを操作すると、ウィンドウ生成部１１４は、２つの表示映像にそれぞれ対応するウィンドウを表示する信号を生成する。例えば、広画角映像領域（３８４０×２１６０）とＦＨＤ用トリミング映像領域（１９２０×１０８０）の２つの表示映像は、映像出力部１０７を介しビデオプレーン１０８に出力される。ビデオプレーン１０８の出力結果を受けて合成映像生成部１０９は、２画面の映像信号及び各種ＧＵＩの映像信号を表示部１１１に出力する。初期状態では、２つの映像は夫々ドットバイドットで表示されるように、３８４０×２１６０及び１９２０×１０８０のウィンドウサイズで夫々表示される。
【００５１】
他の実施形態と同様、放送受信装置１００はマルチウィンドウ表示の際、ウィンドウのサイズを変更可能である。例えば、ユーザがリモコン１１９に設けた不図示の拡大表示用ボタンを操作すると、操作・音声権のあるウィンドウが拡大される。但し、第１実施形態の場合とは異なり、操作・音声権の無いウィンドウは、その大きさを維持する。
トリミング映像領域の決定に用いる条件式（図９のＳ９０４参照）については、マルチウィンドウの初期状態が異なるため、第１実施形態の場合とは異なり条件分岐処理では２つのケースを有するのみである。また、一方のウィンドウサイズを変更した場合でも、他方のウィンドウサイズは変更されないため、各条件に於いては、以下に示すウィンドウサイズとなる。また、表示されるウィンドウの位置はシングル画面、マルチウィンドウ画面に拠らず、常に画面の垂直方向の中央に表示されるものとする（マルチウィンドウ画面では各ウィンドウが横並びに配置されて表示される）。
【００５２】
ＣＡＳＥ１：
広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０）＜＝ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式２）
（式２）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはＳＤ用トリミング映像領域（７２０×４８０）がスケーリング処理されて表示される。この時のウィンドウ１の変更範囲は、解像度で（３８４０×２１６０）乃至（１０２４０×４８６０）となる。一方、ウィンドウ２のサイズは、固定の１９２０×１０８０である。
【００５３】
ＣＡＳＥ２：
ウィンドウ１／ウィンドウ２＞＝広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式３）
（式３）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはセルフォン用トリミング映像領域（３６０×２４０）がスケーリング処理されて表示される。この時のウィンドウ１の変更範囲は、ウィンドウ２のサイズが１９２０×１０８０と固定されているため、解像度で（１０２４０×４８６０）乃至（２０４８０×９７２０）となる。
【００５４】
尚、第３実施形態では、常に表示部１１１の画面にて垂直方向の中央に映像が表示されるものとした。これに限らず、広画角映像を表示する親画面中の子画面にトリミング映像を表示させる表示形態（Picture in Picture表示）を採用してもよい。あるいは、表示デバイスの解像度が大きいため、ユーザがウィンドウを所望の位置に移動させて使用することを想定し、ユーザ操作により表示位置を変更する処理を行える構成にしてもよい。
【符号の説明】
【００５５】
１００ 放送受信装置（映像処理装置）
１０９ 合成映像生成部
１１３ 制御部
１１４ ウィンドウ生成部
１１５ ウィンドウサイズ変更部
１１６ トリミング映像領域取得部
１１７ トリミング映像領域決定部
【技術分野】
【０００１】
本発明は、元映像とその一部領域を切り出したトリミング映像をマルチウィンドウ画面で表示させる際、各画面のサイズ比に応じて映像の切り出し領域を制御する技術に関するものである。
【背景技術】
【０００２】
デジタル放送ではハイビジョン放送が一般的となり、「２ｋ×１ｋ」、すなわち１９２０×１０８０ピクセル（以下、ＦＨＤと記す）での映像処理が行われる。高度衛星デジタル放送では、さらに高解像度の「４ｋ×２ｋ」のデジタルシネマや「８ｋ×４ｋ」のスーパーハイビジョン（以下、ＳＨＶと記す）の映像信号と、２２．２ｃｈのマルチチャンネル音声の送信方式が検討されている。従来の解像度を超える映像の放送では、受信装置の処理能力や機能に応じた表示を行うことも検討されている。例えば、画面全体をダウンコンバートした映像をユーザに提供する形態がある。この他、コンテンツ制作者や放送局が指定した代表画面や特定のテーマに応じた画面（いずれもＳＨＶ画面の一部）から受信装置側で切り出した映像をユーザが視聴する形態が検討されている。後者の視聴形態を以下では、トリミング視聴という。
【０００３】
トリミング視聴では、例えば、受信装置の表示能力に適した映像が表示されるように、ＳＨＶ映像全体の中の部分領域を示すトリミング映像領域情報が、映像製作者である放送局からＳＨＶ映像に付加して送信される。受信装置はトリミング映像領域情報に基づいて表示すべき領域を切り出してユーザに映像を提示する。トリミング視聴が普及した場合、受信装置のマルチウィンドウ機能と併せてユーザの利便性が高まる。ユーザは撮影されたＳＨＶの広画角映像と、その一部を抽出したトリミング映像（全体映像の一部がズーミングされた映像や放送局が意図的に指定した注目映像等）を同時に視聴できる。図１１（Ａ）は２画面での表示形態を例示する。ユーザは、左側ウィンドウ１１０１ａでスポーツ番組等の全体映像を視ながら、右側ウィンドウ１１０２ａのトリミング映像で注目選手の表情等を視ることができる。なお、マルチウィンドウ機能では一般的に２画面機能が知られ、各画面の大きさをユーザ操作で変更可能である。
【０００４】
従来、全体映像とトリミング映像との同時表示処理にて、映像やディスプレイのアスペクト比に基づいて生成される配置表示情報によって合成映像の配置を決定する技術がある（特許文献１参照）。また、子画面に表示する領域の画像を形成するビデオ信号を切り出して、子画面の大きさに応じて縮小や拡大処理を行ない、ＰｉｎＰ合成し、ユーザが指定した領域の画像を子画面に表示するテレビ受信機が知られている（特許文献２参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−１２１３７８号公報
【特許文献２】特開平０９−１６３２６０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
広画角映像とトリミング映像を、マルチウィンドウ機能にてユーザが同時に視聴している最中に、ユーザによりウィンドウサイズの変更を要求される場合が考えられる。その際、複数のウィンドウのサイズ比によってはトリミング映像の方が小さく表示されてしまうことが懸念される。
図１１（Ｂ）は、左側ウィンドウ１１０１ｂに広画角映像が表示され、右側ウィンドウ１１０２ｂにトリミング映像が表示された例を示す。ユーザ操作によって、左側ウィンドウ１１０１ｂのサイズが大きくなったため、右側ウィンドウ１１０２ｂはサイズの縮小を余儀なくされる。その結果、全体映像とその一部をズーミングした映像を同時に楽しめるというユーザのメリットが十分に発揮されなくなってしまうおそれがある。
【０００７】
一方、受信装置の表示能力に適した映像が表示されるように、放送局が複数のトリミング映像領域情報を送信している場合、ユーザは変更したウィンドウサイズに適したトリミング映像領域に切り替える操作を行うことがある。しかし、ユーザはウィンドウサイズを変更しながら、尚且つトリミング映像領域を切り替える操作を強いられると操作負担が増えることが懸念される。従来技術では、映像及びディスプレイのアスペクト比に応じて画面配置を決定できるが、複数のウィンドウのサイズ比を考慮したトリミング映像領域の切り替え制御は行われていなかった。
そこで本発明は、元映像とトリミング映像をマルチウィンドウ画面で表示する際、ウィンドウのサイズ比に応じて、表示するトリミング映像領域を決定することにより、ユーザの利便性を向上させることを目的とする。
【課題を解決するための手段】
【０００８】
上述した課題を解決する為に本発明に係る装置は、元映像の一部を抽出した第１トリミング映像及び該第１トリミング映像よりも解像度の低い第２トリミング映像を処理して、前記元映像を表示画面の第１ウィンドウに表示させ、第２ウィンドウには前記第１トリミング映像又は第２トリミング映像を表示させる映像処理装置であって、前記第１トリミング映像及び第２トリミング映像に係る領域情報を取得する取得手段と、前記第１ウィンドウ及び第２ウィンドウを表示する信号を生成するウィンドウ生成手段と、ユーザ操作によるウィンドウのサイズ変更要求を受けて前記第１ウィンドウ及び第２ウィンドウのサイズを変更するウィンドウサイズ変更手段と、前記第１ウィンドウ及び第２ウィンドウを合成した映像出力を生成する合成映像生成手段と、前記第２ウィンドウに表示するトリミング映像の映像領域を決定する映像領域決定手段を備える。前記映像領域決定手段は、前記ウィンドウ生成手段により生成される前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比よりも小さい場合、前記第２ウィンドウに表示させる映像領域を前記第１トリミング映像の映像領域に決定し、前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比以上である場合、前記第２ウィンドウに表示させる映像領域を前記第２トリミング映像の映像領域に決定する。
【発明の効果】
【０００９】
本発明によれば、元映像とトリミング映像をそれぞれのウィンドウで表示する際、ウィンドウのサイズ比に応じて、表示するトリミング映像領域を決定することにより、ユーザの利便性を向上させることができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施形態に係る放送受信装置の構成例を概略的に示すブロック図である。
【図２】ＥＩＴに挿入されるコンポーネント記述子のデータ構造を示す図である。
【図３】コンポーネント記述子に記載のコンポーネント内容とコンポーネント種別の一例を表で示す図である。
【図４】ＥＩＴに挿入される拡張形式イベント記述子のデータ構造を示した図である。
【図５】拡張形式イベント記述子に記載のトリミング映像領域情報の一例を表で示す図である。
【図６】トリミング映像領域情報を受信した際の表示例を示す図である。
【図７】マルチウィンドウ表示及び操作を説明する図である。
【図８】２画面表示が要求された際の各ウィンドウに表示映像を決定する処理例を説明するフローチャートである。
【図９】ウィンドウのサイズ変更に伴うトリミング映像領域の決定処理例を説明するフローチャートである。
【図１０】ウィンドウのサイズ変更に伴うトリミング映像領域の決定後の表示例を示す図である。
【図１１】全体映像及びトリミング映像の表示例（Ａ）と、ウィンドウサイズを変更した際の表示例（Ｂ）を示す図である。
【発明を実施するための形態】
【００１１】
以下、図面を用いて本発明の各実施形態について説明する。本発明の映像処理装置を適用した放送受信装置については、装置自身が表示手段を備えた形態と、外部表示装置に映像信号を出力して画像を表示する形態があり、本発明はいずれの形態にも適用可能である。
【００１２】
［第１実施形態］
図１は、本発明の第１実施形態に係る放送受信装置１００の構成例を示すブロック図である。アンテナ（またはケーブル）からの放送信号は、チューナ部１０１に入力される。チューナ部１０１は放送信号に対して復調、誤り訂正等の処理を施し、トランスポートストリーム（ＴＳ：Transport Stream）と呼ばれる形式のデータ（以下、ＴＳデータという）を生成して出力する。分離部１０２はＴＳデータを、オーディオデータ、ビデオデータ、番組情報データ及びデータ放送用データに分離する。分離されたオーディオデータ及びビデオデータは、オーディオデコーダ１０３及びビデオデコーダ１０４にそれぞれ出力され、番組情報データ及びデータ放送用データはストリームデータ処理部１０５に出力される。なお、番組情報データ及びデータ放送用データはデータ放送コンテンツ、制御文書等の情報を含む。該データは、例えば、後述するＥＩＴコンポーネント記述子（映像品質やアスペクト比等、番組を構成している各コンポーネントの情報）、拡張イベント記述子（番組の詳細内容を項目ごとに示した情報）を含む。ＥＩＴは“Event Information Table”の略号である。
【００１３】
オーディオデコーダ１０３は、分離部１０２からの音声データをデコード（復号化）して音声出力部１０６に出力する。音声出力部１０６は、オーディオデコーダ１０３がデコードした音声データを増幅し、デジタル／アナログ変換して音声信号をスピーカ１１０に出力する。スピーカ１１０は、音声出力部１０６からの音声信号を増幅して音声を出力する。また、ビデオデコーダ１０４は、分離部１０２からの映像データをデコードして映像出力部１０７に送る。尚、図１ではチューナ部１０１、分離部１０２及びビデオデコーダ１０４を１つだけ示すが、放送受信装置１００は、チューナ部１０１、分離部１０２及びビデオデコーダ１０４をそれぞれ２つ備えることで、複数の放送番組の受信及び２画面表示制御が可能である。
【００１４】
ストリームデータ処理部１０５はトリミング映像領域取得部１１６を有し、分離部１０２からの番組情報データ及びデータ放送用データを解析し、バスを介してメモリ１１２にデータを格納する。トリミング映像領域取得部１１６は、ストリームデータ処理部１０５内で解析したＥＩＴから、トリミング視聴に必要となるトリミング映像領域情報を取得してメモリ１１２に格納する。トリミング映像領域情報については後述する。
【００１５】
映像出力部１０７は、ビデオデコーダ１０４から入力された映像データに対して、後述するトリミング映像領域決定部１１７からの情報に従い、映像領域を部分的に切り出す処理及びスケーリング処理を施してビデオプレーン１０８に出力する。また映像出力部１０７は、後述するウィンドウ生成部１１４で生成されたウィンドウの数だけ、映像データをビデオプレーン１０８の各プレーン（Ｐｌａｎｅ１，２参照）に出力する。合成映像生成部１０９は、ビデオプレーン１０８の各プレーンに出力された複数の映像データをマルチウィンドウ画面として１画面上に合成する。また合成映像生成部１０９は、リモートコントローラ（以下、リモコンと略称する）１１９によるユーザ操作指示に応じて、メモリ１１２に格納されたデータ放送用データを読み出してデータ放送画面を構成し、映像信号を表示部１１１に出力する。表示部１１１は、合成映像生成部１０９の出力した映像信号に従って画像を表示する。本実施形態では３８４０×２１６０ピクセルの解像度をもつ表示デバイスが使用される。
【００１６】
ウィンドウ生成部１１４は、映像表示用のウィンドウを生成し、映像出力部１０７を通じてマルチウィンドウ画面表示機能を実現する。また、ウィンドウ生成部１１４はウィンドウサイズ変更部１１５を備え、リモコン１１９によるユーザ操作指示に応じて、画面表示されている各ウィンドウのサイズ変更処理を行う。
【００１７】
トリミング映像領域決定部１１７は、ウィンドウ生成部１１４より得られるウィンドウ数、各ウィンドウのサイズ及びトリミング映像領域取得部１１６が取得したトリミング映像領域情報に基づき、ウィンドウ内に表示するトリミング映像領域を決定する。
【００１８】
制御部１１３は放送受信装置１００の各部を統括的に制御する。メモリ１１２は、ストリームデータ処理部１０５からのデータ放送用データや、トリミング映像領域取得部１１６からのトリミング映像領域情報等を記憶する。メモリ１１２は、制御部１１３がプログラムを解釈して実行する為に使用するワークメモリを含む。操作入力部１１８は、リモコン１１９からの信号や、放送受信装置１００の本体部に設けた不図示のスイッチ類からの信号を受け付け、バスを介して制御部１１３に操作指示信号を送信する。リモコン１１９は、ユーザからの操作指示を操作入力部１１８の受信部に無線送信する。
【００１９】
次に、第１実施形態に於いて放送局より受信するトリミング映像領域情報について説明する。トリミング映像領域情報は、トリミング映像領域の有無、トリミング映像領域の位置及び幅、高さの情報（ｘ，ｙ，ｗｉｄｔｈ，ｈｅｉｇｈｔ）等の各項目で構成される。これらは日本国内のデジタル放送の標準規格であるＡＲＩＢ（電波産業会）標準規格を拡張して伝送される情報である。ＡＲＩＢ規定によるデジタル放送では、映像や音声、番組に関する種々の情報をＰＳＩ／ＳＩデータ内に各種テーブルとして埋め込んで送出可能である。ＰＳＩは“Program Specific Information”の略号であり、ＳＩは“Service Information”の略号である。
【００２０】
放送局指定のトリミング映像領域情報の各項目は、番組名、放送日時、番組内容等の番組に関する情報を送るＥＩＴに挿入されるコンポーネント記述子及び拡張形式イベント記述子を拡張したものである。これらの情報はＳＨＶ映像フォーマット情報（３８４０×２１６０／６０／Ｐの映像フォーマット等）と共に伝送される。コンポーネント記述子は、図２に示すデータ構造を持ち、コンポーネント内容及びコンポーネント種別を含む。コンポーネント種別（ｃｏｍｐｏｎｅｎｔ＿ｔｙｐｅ）という８ビットのフィールドの情報で、映像コンポーネントや音声コンポーネントの種別を示すことができる。なお、図中の数値は、各フィールドのビット数を示す。
【００２１】
図３は、コンポーネント内容とコンポーネント種別を規定した表を例示する。映像コンポーネント（コンポーネント内容０ｘ０１）のコンポーネント種別０ｘ００から０ｘＤ４までは、現在規格化されている映像コンポーネントを示している。本実施形態で想定している映像ストリームは、ハイビジョン映像を超えるさらに高解像度の映像フォーマットによるものであるため、現行では規定されていない。そこで本実施形態では、ＳＨＶの映像フォーマットであることを示すコンポーネント種別として、図３に示すように０ｘＥ１乃至０ｘＥ８を割り当てている。
【００２２】
コンポーネント種別として、トリミング映像領域ありの映像フォーマットが指定される場合、トリミング映像領域情報が伝送される。トリミング映像領域情報はＥＩＴに挿入される拡張形式イベント記述子を用いて伝送することができる。拡張形式イベント記述子は、図４に示すデータ構造を持ち、その中の項目名（文字符号）の１つとしてトリミング映像領域情報が追加される。図５はトリミング映像領域Ａ乃至Ｃと、項目名及び項目記述を表にして例示する。項目名（文字符号）には、１つのコンテンツ（番組）のトリミング映像領域ごとに独立したトリミングＩＤ、トリミング映像領域名、トリミング映像領域のサイズや位置（アドレス）等の情報種別が定義される。項目記述（文字符号）に示す値はテキスト情報として伝送される。
【００２３】
図６は、放送受信装置１００がトリミング映像領域情報を受信した際に表示部１１１に画面表示される表示例を示す。図６（Ａ）は、放送局より受信するトリミング映像領域情報を説明する概略図である。当該情報はその伝送に際してＥＩＴに挿入される。本例にて受信する元映像（図示の広画角映像）のフォーマットは、「３８４０×２１６０（ｉ）、トリミング映像領域あり」で、映像コンポーネント種別０ｘＥ７（図３参照）で指定される。元映像から抽出されるトリミング映像領域は、例えば、以下に示す通りである。
【００２４】
第１トリミング映像領域（Ａ枠内参照）：ＦＨＤ用領域（ｘ＝９６０，ｙ＝５４０，ｗ＝１９２０，ｈ＝１０８０）。
第２トリミング映像領域（Ｂ枠内参照）：ＳＤ用領域（ｘ＝１５６０，ｙ＝８４０，ｗ＝７２０，ｈ＝４８０）であり、第１トリミング映像よりも解像度は低い。
第３トリミング映像領域（Ｃ枠内参照）：セルフォン用領域（ｘ＝１７４０，ｙ＝９６０，ｗ＝３６０，ｈ＝２４０）であり、第２トリミング映像よりも解像度は低い。
【００２５】
上記の情報は拡張形式イベント記述子に挿入される。図６（Ａ）にＡ乃至Ｃで示す枠が各領域を示している。なお、ｘｙ座標の原点（０，０）は表示画面の左上隅に位置し、単位についてはピクセル（Ｐｉｘｅｌ）で表す。放送局は、放送受信装置の表示能力に応じて、最適な映像となるように４つのパターンを提供する。図６は、中央の選手が各装置で認識できるような映像を指定した例である。本例では、表示部１１１の解像度が３８４０×２１６０ピクセルである為、デフォルト設定の状態では、図６（Ｂ）に示す３８４０×２１６０ピクセルの画像が表示される。放送受信装置１００はユーザのリモコン操作に従い、その他の表示デバイス用として送信されたＡ乃至Ｃの領域についてそれぞれスケーリング処理を行い、図６（Ｃ）乃至（Ｅ）に示す画像が表示部１１１に表示される。図６（Ｃ）は図６（Ａ）のＡ枠内のトリミング映像を拡大した表示画像を示し、図６（Ｄ）は図６（Ａ）のＢ枠内のトリミング映像を拡大した表示画像を示し、図６（Ｅ）は図６（Ａ）のＣ枠内のトリミング映像を拡大した表示画像を示す。
【００２６】
次に、図７を用いて本実施形態で適用するマルチウィンドウの表示処理例について説明する。
ユーザがリモコン１１９に設けられた不図示の２画面表示用ボタンを操作すると、操作入力部１１８は操作指示信号を制御部１１３に送る。制御部１１３の指示を受けたウィンドウ生成部１１４は、後述する処理に従って決定した２つの表示映像のデータを、映像出力部１０７を介してビデオプレーン１０８に出力する。ビデオプレーン１０８の出力結果を受け、合成映像生成部１０９は、２画面の映像表示情報及び各種ＧＵＩ（Graphical User Interface）の表示情報を表示部１１１に出力する。図７（Ａ）は表示部１１１に出力された画面例を示す。初期状態では、コンテンツＡ、Ｂの各画像が同じウィンドウサイズで表示される。図中の黒い星印の記号は、どちらのウィンドウに対してユーザの操作が有効であるか、及び音声が出力されるかを示す（以下、操作・音声権という）。本例では左側のウィンドウに操作・音声権がある。この状態にて、ユーザがリモコン１１９にて操作を行った場合、操作・音声権を有する左側のウィンドウに対する操作が行われたものとして受け付けられ、制御部１１３は操作指示に従って所定の処理を実行する。
【００２７】
放送受信装置１００では、マルチウィンドウ表示の際、ウィンドウのサイズ変更が可能である。ユーザがリモコン１１９に設けられた不図示の拡大表示用ボタンを操作すると、サイズ変更要求に従って図７（Ｂ）に示すように操作・音声権のある左側のウィンドウが拡大される。これに連動して、操作・音声権の無い右側のウィンドウは縮小される。ユーザはこの操作を繰り返し行うことで、図７（Ａ）から（Ｃ）へとウィンドウのサイズを変更できる。操作・音声権のあるウィンドウに対して縮小表示用ボタンが操作された場合、ウィンドウサイズの縮小処理が実行される。ウィンドウサイズの変更処理は、サイズ変更要求を受けたウィンドウサイズ変更部１１５の制御下でビデオプレーン１０８、合成映像生成部１０９によって実行される。
【００２８】
次に図８のフローチャートを用いて、２画面表示制御にて各ウィンドウに表示する映像を決定する処理について説明する。
Ｓ８０１ではビデオプレーン「Ｐｌａｎｅ１」を使って通常の１画面で映像表示が行われており、表示中にユーザがリモコン１１９を操作したものとする。Ｓ８０２で制御部１１３は、操作入力部１１８からの操作指示が２画面表示を要求する指示であるか否かを判定する。リモコン操作で２画面表示の要求があった場合、Ｓ８０３に進み、当該要求がない場合にはＳ８０１に戻って１画面表示を続行する。
【００２９】
Ｓ８０３でウィンドウ生成部１１４は、もう１つのウィンドウを表示する為に、ビデオプレーンの未使用分「Ｐｌａｎｅ２」を新たなウィンドウ用に確保する。ここでは２画面表示への遷移後におけるデフォルトのウィンドウサイズは、２つのウィンドウで同じサイズとする。ウィンドウ生成部１１４は両ウィンドウのサイズを１９２０×１０８０ピクセルに設定する。次のＳ８０４でトリミング映像領域取得部１１６は、現時点で既に表示中であったイベントに対するＥＩＴのコンポーネント種別を格納先のメモリ１１２より取得し、Ｓ８０５に進む。Ｓ８０５ではトリミング映像領域情報の有無が判定され、該情報があった場合、Ｓ８０７に進む。また、Ｓ８０５でトリミング映像領域情報がなかった場合、Ｓ８０６に進む。
【００３０】
Ｓ８０６で制御部１１３は、現在表示中のサービスと隣接するサービス（サービスＩＤが数値的に最も近いサービス）をチューニングし、信号分離の後、ビデオコンポーネントのみをビデオデコーダ１０４でデコードする処理を各部に指示する。そしてＳ８０８に進む。Ｓ８０７でトリミング映像領域決定部１１７は、メモリ１１２に格納されている該当するＥＩＴの拡張形式イベント記述子を取得する。トリミング映像領域決定部１１７は拡張形式イベント記述子に記載されているトリミング映像領域のうちで、最も領域サイズの大きいトリミング映像領域の情報を今回のトリミング映像領域と決定する。その後、映像出力部１０７にて、決定されたトリミング映像領域に従い、映像の切り出しが行われる。
【００３１】
Ｓ８０６、Ｓ８０７の後、Ｓ８０８に進む。上述したように新たなウィンドウに表示する映像が決定されると、映像出力部１０７は、両ウィンドウに表示する映像に対してスケーリング処理を施し、処理結果を各ウィンドウに相当するビデオプレーン１０８に出力する。その後、Ｓ８０９で合成映像生成部１０９は、２つのビデオプレーンの画像データを合成した上で、ＧＵＩ画面の生成用データを重畳して表示部１１１に出力する。Ｓ８１０で表示部１１１は各ウィンドウで２画面表示を行う。
以上の処理は、制御部１１３が解釈して実行するプログラムに従って各部と連携して行われる。
【００３２】
次に図９のフローチャートを用いて、広画角映像及びトリミング映像の２画面表示中にウィンドウサイズを変更した場合のトリミング映像領域の決定処理について説明する。
本処理では、図８のＳ８１０に示す２画面表示状態とする。Ｓ９０１で表示部１１１は、広画角映像とトリミング映像について同じウィンドウサイズで２画面表示を行う。Ｓ９０２で制御部１１３は、リモコン１１９によるユーザ操作指示を受け付け、ウィンドウのサイズ変更が要求されたか否かを判定する。ウィンドウのサイズ変更要求があった場合、Ｓ９０３に進み、当該要求がない場合にはＳ９０１に戻る。
【００３３】
Ｓ９０３でウィンドウサイズ変更部１１５は、メモリ１１２に一時的に格納している現在のウィンドウサイズと、各ウィンドウに係るトリミング映像領域情報を取得する。次に、Ｓ９０４の条件分岐処理に進む。この判断は後述の条件式によって決定され、特定の条件式を満たす状態が変化した場合、Ｓ９０５に進み、トリミング映像領域の変更処理が行われ、Ｓ９０６に進む。またＳ９０４で特定の条件式を満たす状態が変化しない場合、Ｓ９０６に進む。
【００３４】
Ｓ９０６で映像出力部１０７は表示映像のスケーリング処理を行い、ウィンドウサイズ変更部１１５は各ウィンドウのサイズ変更処理を行う。
【００３５】
以下、Ｓ９０４の条件式について具体例を説明する。ここでは説明の便宜上、広画角映像を表示する第１ウィンドウを「ウィンドウ１」と記し、トリミング映像を表示する第２ウィンドウを「ウィンドウ２」と記す。条件式は、このウィンドウ１及び２のサイズ比（面積比）と、表示する映像の解像度比との比較結果、つまりサイズ比が所定の解像度比以上であるか否かに応じて複数に場合分けされる。図１０（Ａ）乃至（Ｃ）は、場合分けに応じて処理された表示画像を例示し、操作・音声権は左側のウィンドウにある。なお、Ｓ９０４の判断処理において、下記条件式を満たす状態が変化する場合、例えば、ＣＡＳＥ１に示す条件式を満たす状態から、ＣＡＳＥ２に示す条件式を満たすようにウィンドウサイズの変更が指示された場合には、Ｓ９０５に処理を進める。またウィンドウのサイズ変更の前後で下記条件式を満たす状態が変化しない場合にはＳ９０６に処理を進める。
【００３６】
ＣＡＳＥ１：
ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０） ・・・（式１）
（式１）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはＦＨＤ用トリミング映像領域（１９２０×１０８０）がスケーリング処理されて表示される。
図１０（Ａ）に示すように、左側のウィンドウ１００１ａの広画角映像と、右側のウィンドウ１００２ａのトリミング映像は、同一ウィンドウサイズでスケーリング処理されてそれぞれの画面に表示される。
【００３７】
ＣＡＳＥ２：
広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０）＜＝ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式２）
（式２）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはＳＤ用トリミング映像領域（７２０×４８０）がスケーリング処理されて表示される。図１０（Ｂ）に示すように、拡大された左側のウィンドウ１００１ｂには広画角映像が表示され、縮小された右側のウィンドウ１００２ｂにはトリミング映像が表示される。
【００３８】
ＣＡＳＥ３：
ウィンドウ１／ウィンドウ２＞＝広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式３）
（式３）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはセルフォン用トリミング映像領域（３６０×２４０）がスケーリング処理されて表示される。図１０（Ｃ）に示すように、図１０（Ｂ）よりもさらに拡大された左側のウィンドウ１００１ｃには広画角映像が表示され、図１０（Ｂ）よりもさらに縮小された右側のウィンドウ１００２ｃにはトリミング映像が表示される。
【００３９】
上記条件式に従い、各ウィンドウに表示するトリミング映像領域を制御することで、図１１（Ｂ）で説明した問題が解消される。すなわち、ユーザが任意にウィンドウサイズを変更した場合でも、トリミング映像視聴用のウィンドウ内の映像は常に、別ウィンドウに表示されている広画角映像における該当領域よりも大きく表示されることになる。よって、ユーザは別段の操作を行うことなく、広画角映像及びその一部を拡大したトリミング映像を見易い状態で同時に楽しむことが出来る。
【００４０】
第１実施形態によれば、ユーザ操作で変更されるウィンドウのサイズ比に応じて適切なトリミング映像領域を決定し、表示映像に反映させることができる。よって、全体映像とその一部がズーミングされた映像を同時に視聴する形態が放送受信装置にて自動で実現されるので、ユーザの利便性が向上する。
尚、本実施形態では、広画角映像の付帯情報としてトリミング映像領域が指定されるとしたが、各解像度の映像ストリームが送出されて受信装置側で選択して表示する構成でもよい。また、ウィンドウのサイズ変更に伴い、トリミング映像領域が切り替わる条件を満たす場合に、ユーザに対して「トリミング映像領域を切り替えますか？」等、確認用のダイアログ表示処理を行ってもよい。上記の例では２画面表示を例に説明したが、上記制御はウィンドウの解像度に拠る制御ではなく、ウィンドウのサイズ比に基づくので、表示画面に３画面以上のウィンドウを表示する場合でも、上記と同様の処理で実現できる。
【００４１】
［第２実施形態］
次に、本発明の第２実施形態を説明する。第２実施形態では、トリミング映像領域をスケーリング処理して表示する際、さらにスケーリング率（表示映像の拡大縮小率）を加味して表示領域を制御する。以下、主として第１実施形態との相違点を説明する。なお第２実施形態及び後述の第３実施形態において、第１実施形態と同じ構成を有する部分については、第１実施形態にて既に使用した符号と同一の符号を付与することにより、それらの詳細な説明を割愛する。
【００４２】
第２実施形態では、トリミング映像領域の決定処理に用いる条件式（図９のＳ９０４参照）について第１実施形態とは異なる特徴を説明する。第１実施形態の場合と同様、広画角映像を表示していたウィンドウをウィンドウ１と記し、トリミング映像領域を表示していたウィンドウをウィンドウ２と記す。
ウィンドウ２の表示映像をより小さなトリミング映像領域に切り替える際、映像出力部１０７はウィンドウサイズに合わせて映像のスケーリング処理を行う。本実施形態では、このスケーリング処理によって解像度が等倍以上に引き伸ばされることが無いように、以下に示す中間トリミング映像領域が生成される。この中間トリミング映像領域は、放送局より送出されるトリミング映像領域と共にウィンドウサイズ変更処理に伴う切り替え映像領域情報として使用される。
従って第２実施形態に係る条件式は、ウィンドウ１及び２のサイズ比（面積比）、表示映像の解像度比、及び表示の際のスケーリング率によって、下記のように場合分けされる。
【００４３】
ＣＡＳＥ１：
ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０） ・・・（式１）
（式１）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはＦＨＤ用トリミング映像領域（１９２０×１０８０）がスケーリング処理されて表示される。
【００４４】
ＣＡＳＥ２−１：
広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０）＜＝ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式２）
ウィンドウ２＞ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式４）
（式２）及び（式４）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２には中間トリミング映像領域１（１２８０×７２０）がスケーリング処理されて表示される。中間トリミング映像領域１（１２８０×７２０）は、ＦＨＤ用トリミング映像領域（１９２０×１０８０）とＳＤ用トリミング映像領域（７２０×４８０）の間の解像度をもつ。尚、中間トリミング映像領域１（１２８０×７２０）は、「広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０）＝ウィンドウ１／ウィンドウ２」を満たすときのウィンドウ２のサイズより算出される。
【００４５】
ＣＡＳＥ２−２：
広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０）＜＝ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式２）
ウィンドウ２＜＝ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式５）
（式２）及び（式５）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がリサイズされて表示され、ウィンドウ２にはＳＤ用トリミング映像領域（７２０×４８０）がリサイズされて表示される。
【００４６】
ＣＡＳＥ３−１：
ウィンドウ１／ウィンドウ２＞＝広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式３）
ウィンドウ２＞セルフォン用トリミング映像領域（３６０×２４０） ・・・（式６）
（式３）及び（式６）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２には中間トリミング映像領域２（６００×４００）がスケーリング処理されて表示される。中間トリミング映像領域２（６００×４００）は、ＳＤ用トリミング映像領域（７２０×４８０）とセルフォン用トリミング映像領域（３６０×２４０）の間の解像度をもつ。尚、中間トリミング映像領域２（６００×４００）は、「広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０）≒ウィンドウ１／ウィンドウ２」を満たすときのウィンドウ２のサイズより算出される。
【００４７】
ＣＡＳＥ３−２：
ウィンドウ１／ウィンドウ２＞＝広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式３）
ウィンドウ２＜＝セルフォン用トリミング映像領域（３６０×２４０） ・・・（式７）
（式３）及び（式７）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはセルフォン用トリミング映像領域（３６０×２４０）がスケーリング処理されて表示される。
【００４８】
上記条件式に従ってウィンドウに表示するトリミング映像領域が制御される。これにより、ユーザが任意のウィンドウサイズに変更した場合でも、ウィンドウ２には、ウィンドウ１に表示されている広画角映像における該当領域よりもトリミング映像が大きく表示されることになる。本実施形態では更に、スケーリング率の如何によっては上記中間トリミング映像領域が生成されてウィンドウ２に表示されるので、拡大により表示映像の解像度が低下して画質が粗くならないように防止できる。
尚、第２実施形態では、スケーリング処理により表示映像の解像度が等倍以上に引き伸ばされないよう、中間トリミング映像領域を生成したが、等倍に限られるものではない。例えば、その倍率については表示デバイスの表示能力や解像度アップコンバート技術等と併せて適宜設定されてもよい。
【００４９】
［第３実施形態］
次に本発明の第３実施形態を説明する。
第３実施形態では、表示部１１１に用いる表示デバイスの解像度と、マルチウィンドウの表示及び操作において前記実施形態とは異なる特徴を有する。放送受信装置１００の表示部１１１は、本実施形態では２２４００×９７２０の解像度をもつ表示デバイスである。広画角映像の視聴時に表示部１１１は、３８４０×２１６０の映像をドットバイドット（映像情報の１ピクセルを表示デバイスの１ドットに対応させて表示する方式）で表示画面の垂直方向の中央に表示する。
【００５０】
ユーザがリモコン１１９に設けた不図示の２画面表示用ボタンを操作すると、ウィンドウ生成部１１４は、２つの表示映像にそれぞれ対応するウィンドウを表示する信号を生成する。例えば、広画角映像領域（３８４０×２１６０）とＦＨＤ用トリミング映像領域（１９２０×１０８０）の２つの表示映像は、映像出力部１０７を介しビデオプレーン１０８に出力される。ビデオプレーン１０８の出力結果を受けて合成映像生成部１０９は、２画面の映像信号及び各種ＧＵＩの映像信号を表示部１１１に出力する。初期状態では、２つの映像は夫々ドットバイドットで表示されるように、３８４０×２１６０及び１９２０×１０８０のウィンドウサイズで夫々表示される。
【００５１】
他の実施形態と同様、放送受信装置１００はマルチウィンドウ表示の際、ウィンドウのサイズを変更可能である。例えば、ユーザがリモコン１１９に設けた不図示の拡大表示用ボタンを操作すると、操作・音声権のあるウィンドウが拡大される。但し、第１実施形態の場合とは異なり、操作・音声権の無いウィンドウは、その大きさを維持する。
トリミング映像領域の決定に用いる条件式（図９のＳ９０４参照）については、マルチウィンドウの初期状態が異なるため、第１実施形態の場合とは異なり条件分岐処理では２つのケースを有するのみである。また、一方のウィンドウサイズを変更した場合でも、他方のウィンドウサイズは変更されないため、各条件に於いては、以下に示すウィンドウサイズとなる。また、表示されるウィンドウの位置はシングル画面、マルチウィンドウ画面に拠らず、常に画面の垂直方向の中央に表示されるものとする（マルチウィンドウ画面では各ウィンドウが横並びに配置されて表示される）。
【００５２】
ＣＡＳＥ１：
広画角映像領域（３８４０×２１６０）／ＦＨＤ用トリミング映像領域（１９２０×１０８０）＜＝ウィンドウ１／ウィンドウ２＜広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式２）
（式２）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはＳＤ用トリミング映像領域（７２０×４８０）がスケーリング処理されて表示される。この時のウィンドウ１の変更範囲は、解像度で（３８４０×２１６０）乃至（１０２４０×４８６０）となる。一方、ウィンドウ２のサイズは、固定の１９２０×１０８０である。
【００５３】
ＣＡＳＥ２：
ウィンドウ１／ウィンドウ２＞＝広画角映像領域（３８４０×２１６０）／ＳＤ用トリミング映像領域（７２０×４８０） ・・・（式３）
（式３）を満たす場合、ウィンドウ１には広画角映像領域（３８４０×２１６０）がスケーリング処理されて表示され、ウィンドウ２にはセルフォン用トリミング映像領域（３６０×２４０）がスケーリング処理されて表示される。この時のウィンドウ１の変更範囲は、ウィンドウ２のサイズが１９２０×１０８０と固定されているため、解像度で（１０２４０×４８６０）乃至（２０４８０×９７２０）となる。
【００５４】
尚、第３実施形態では、常に表示部１１１の画面にて垂直方向の中央に映像が表示されるものとした。これに限らず、広画角映像を表示する親画面中の子画面にトリミング映像を表示させる表示形態（Picture in Picture表示）を採用してもよい。あるいは、表示デバイスの解像度が大きいため、ユーザがウィンドウを所望の位置に移動させて使用することを想定し、ユーザ操作により表示位置を変更する処理を行える構成にしてもよい。
【符号の説明】
【００５５】
１００ 放送受信装置（映像処理装置）
１０９ 合成映像生成部
１１３ 制御部
１１４ ウィンドウ生成部
１１５ ウィンドウサイズ変更部
１１６ トリミング映像領域取得部
１１７ トリミング映像領域決定部
【特許請求の範囲】
【請求項１】
元映像の一部を抽出した第１トリミング映像及び該第１トリミング映像よりも解像度の低い第２トリミング映像を処理して、前記元映像を表示画面の第１ウィンドウに表示させ、第２ウィンドウには前記第１トリミング映像又は第２トリミング映像を表示させる映像処理装置であって、
前記第１トリミング映像及び第２トリミング映像に係る領域情報を取得する取得手段と、
前記第１ウィンドウ及び第２ウィンドウを表示する信号を生成するウィンドウ生成手段と、
ユーザ操作によるウィンドウのサイズ変更要求を受けて前記第１ウィンドウ及び第２ウィンドウのサイズを変更するウィンドウサイズ変更手段と、
前記第１ウィンドウ及び第２ウィンドウを合成した映像出力を生成する合成映像生成手段と、
前記第２ウィンドウに表示するトリミング映像の映像領域を決定する映像領域決定手段を備え、
前記映像領域決定手段は、前記ウィンドウ生成手段により生成される前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比よりも小さい場合、前記第２ウィンドウに表示させる映像領域を前記第１トリミング映像の映像領域に決定し、前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比以上である場合、前記第２ウィンドウに表示させる映像領域を前記第２トリミング映像の映像領域に決定することを特徴とする映像処理装置。
【請求項２】
前記映像領域決定手段は、前記第１ウィンドウ及び第２ウィンドウのサイズ比並びに前記元映像及びトリミング映像の解像度比に加えて、前記第１トリミング映像及び第２トリミング映像を前記第２ウィンドウに表示させる際のスケーリング率を用いて、
前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第２トリミング映像の解像度比よりも小さく、かつ前記第２ウィンドウのサイズが前記第２トリミング映像の映像領域よりも大きい場合、前記第１トリミング映像と前記第２トリミング映像の間の解像度をもつ中間トリミング映像を生成して前記第２ウィンドウに表示させる映像領域を決定することを特徴とする請求項１記載の映像処理装置。
【請求項３】
前記映像領域決定手段は、
前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第２トリミング映像の解像度比よりも小さく、かつ前記第２ウィンドウのサイズが前記第２トリミング映像の映像領域の大きさ以下である場合、前記第２ウィンドウに表示させる映像領域を前記第２トリミング映像の映像領域に決定することを特徴とする請求項２記載の映像処理装置。
【請求項４】
元映像の一部を抽出した第１トリミング映像及び該第１トリミング映像よりも解像度の低い第２トリミング映像を処理して、前記元映像を表示画面の第１ウィンドウに表示させ、第２ウィンドウには前記第１トリミング映像と第２トリミング映像のいずれかを表示させる映像処理装置で実行される制御方法であって、
前記第１トリミング映像及び第２トリミング映像に係る領域情報を取得する取得ステップと、
前記第１ウィンドウ及び第２ウィンドウを表示する信号を生成するウィンドウ生成ステップと、
ユーザ操作によるウィンドウのサイズ変更要求を受けて前記第１ウィンドウ及び第２ウィンドウのサイズを変更するウィンドウサイズ変更ステップと、
前記第１ウィンドウ及び第２ウィンドウを合成した映像出力を生成する合成映像生成ステップと、
前記第２ウィンドウに表示するトリミング映像の映像領域を決定する映像領域決定ステップを有し、
前記映像領域決定ステップでは、前記ウィンドウ生成ステップで生成される前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比よりも小さい場合、前記第２ウィンドウに表示させる映像領域を前記第１トリミング映像の映像領域に決定し、前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比以上である場合、前記第２ウィンドウに表示させる映像領域を前記第２トリミング映像の映像領域に決定することを特徴とする映像処理装置の制御方法。
【請求項１】
元映像の一部を抽出した第１トリミング映像及び該第１トリミング映像よりも解像度の低い第２トリミング映像を処理して、前記元映像を表示画面の第１ウィンドウに表示させ、第２ウィンドウには前記第１トリミング映像又は第２トリミング映像を表示させる映像処理装置であって、
前記第１トリミング映像及び第２トリミング映像に係る領域情報を取得する取得手段と、
前記第１ウィンドウ及び第２ウィンドウを表示する信号を生成するウィンドウ生成手段と、
ユーザ操作によるウィンドウのサイズ変更要求を受けて前記第１ウィンドウ及び第２ウィンドウのサイズを変更するウィンドウサイズ変更手段と、
前記第１ウィンドウ及び第２ウィンドウを合成した映像出力を生成する合成映像生成手段と、
前記第２ウィンドウに表示するトリミング映像の映像領域を決定する映像領域決定手段を備え、
前記映像領域決定手段は、前記ウィンドウ生成手段により生成される前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比よりも小さい場合、前記第２ウィンドウに表示させる映像領域を前記第１トリミング映像の映像領域に決定し、前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比以上である場合、前記第２ウィンドウに表示させる映像領域を前記第２トリミング映像の映像領域に決定することを特徴とする映像処理装置。
【請求項２】
前記映像領域決定手段は、前記第１ウィンドウ及び第２ウィンドウのサイズ比並びに前記元映像及びトリミング映像の解像度比に加えて、前記第１トリミング映像及び第２トリミング映像を前記第２ウィンドウに表示させる際のスケーリング率を用いて、
前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第２トリミング映像の解像度比よりも小さく、かつ前記第２ウィンドウのサイズが前記第２トリミング映像の映像領域よりも大きい場合、前記第１トリミング映像と前記第２トリミング映像の間の解像度をもつ中間トリミング映像を生成して前記第２ウィンドウに表示させる映像領域を決定することを特徴とする請求項１記載の映像処理装置。
【請求項３】
前記映像領域決定手段は、
前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第２トリミング映像の解像度比よりも小さく、かつ前記第２ウィンドウのサイズが前記第２トリミング映像の映像領域の大きさ以下である場合、前記第２ウィンドウに表示させる映像領域を前記第２トリミング映像の映像領域に決定することを特徴とする請求項２記載の映像処理装置。
【請求項４】
元映像の一部を抽出した第１トリミング映像及び該第１トリミング映像よりも解像度の低い第２トリミング映像を処理して、前記元映像を表示画面の第１ウィンドウに表示させ、第２ウィンドウには前記第１トリミング映像と第２トリミング映像のいずれかを表示させる映像処理装置で実行される制御方法であって、
前記第１トリミング映像及び第２トリミング映像に係る領域情報を取得する取得ステップと、
前記第１ウィンドウ及び第２ウィンドウを表示する信号を生成するウィンドウ生成ステップと、
ユーザ操作によるウィンドウのサイズ変更要求を受けて前記第１ウィンドウ及び第２ウィンドウのサイズを変更するウィンドウサイズ変更ステップと、
前記第１ウィンドウ及び第２ウィンドウを合成した映像出力を生成する合成映像生成ステップと、
前記第２ウィンドウに表示するトリミング映像の映像領域を決定する映像領域決定ステップを有し、
前記映像領域決定ステップでは、前記ウィンドウ生成ステップで生成される前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比よりも小さい場合、前記第２ウィンドウに表示させる映像領域を前記第１トリミング映像の映像領域に決定し、前記第１ウィンドウ及び第２ウィンドウのサイズ比が、前記元映像及び第１トリミング映像の解像度比以上である場合、前記第２ウィンドウに表示させる映像領域を前記第２トリミング映像の映像領域に決定することを特徴とする映像処理装置の制御方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−１４２７６６（Ｐ２０１２−１４２７６６Ａ）
【公開日】平成２４年７月２６日（２０１２．７．２６）
【国際特許分類】
【出願番号】特願２０１０−２９３７１４（Ｐ２０１０−２９３７１４）
【出願日】平成２２年１２月２８日（２０１０．１２．２８）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２４年７月２６日（２０１２．７．２６）
【国際特許分類】
【出願日】平成２２年１２月２８日（２０１０．１２．２８）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]