投写型映像表示装置および画像調整方法
【課題】外光の影響が大きい場合や投写距離が長い場合であっても、高い精度で映像の形状調整を可能とする投写型映像表示装置及び画像調整方法を提供する。
【解決手段】光源から出射される光を変調する液晶パネルと、液晶パネルから出射される光を投写面上に投写する投写ユニットとを有する投写型映像表示装置であって、所定のパターン画像を表示するように液晶パネルを制御する素子制御部と、投写面上に投写された所定パターン画像を撮像する撮像素子と、撮像素子によって撮像された撮像画像に基づいて、投写型映像表示装置と投写面との位置関係を算出する算出部と、算出部によって算出された位置関係に基づいて、投写面上に投写される映像を調整する調整部と、を備える。そして、撮像素子が所定パターン画像を撮像するときに、撮像画像のコントラストを高くする処理S520を行うことを要旨とする。
【解決手段】光源から出射される光を変調する液晶パネルと、液晶パネルから出射される光を投写面上に投写する投写ユニットとを有する投写型映像表示装置であって、所定のパターン画像を表示するように液晶パネルを制御する素子制御部と、投写面上に投写された所定パターン画像を撮像する撮像素子と、撮像素子によって撮像された撮像画像に基づいて、投写型映像表示装置と投写面との位置関係を算出する算出部と、算出部によって算出された位置関係に基づいて、投写面上に投写される映像を調整する調整部と、を備える。そして、撮像素子が所定パターン画像を撮像するときに、撮像画像のコントラストを高くする処理S520を行うことを要旨とする。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、光源から出射される光を変調するように構成された光変調素子と、光変調素子から出射される光を投写面上に投写するように構成された投写ユニットとを有する投写型映像表示装置およびこの投写型映像表示装置に適用される画像調整方法に関する。
【背景技術】
【0002】
従来、光源から出射される光を変調する光変調素子と、光変調素子から出射される光を投写面上に投写する投写ユニットとを備える投写型映像表示装置が知られている。ここで、投写型映像表示装置と投写面との位置関係によっては、投写面上に投写される映像の形状が歪んでしまう。
【0003】
これに対して、以下の手順で映像の形状を調整する方法が提案されている(例えば、特許文献1)。第1に、投写型映像表示装置は、長方形形状のテストパターン画像を投写面上に投写する。第2に、投写型映像表示装置は、投写面上に投写されたテストパターン画像を撮像して、投写面におけるテストパターン画像の4隅の座標を特定する。第3に、投写型映像表示装置は、投写面におけるテストパターン画像の4隅の座標に基づいて、投写型映像表示装置と投写面との位置関係を特定して、投写面上に投写される映像の形状を調整する。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開2005−318652号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
ところで、テストパターン画像を撮像素子で撮像するときに、外光(太陽光や室内灯による光)が明るい場合や、投写型映像表示装置ら投写面までの距離(投写距離)が長い場合がある。このような場合には、撮像素子によって撮像される撮像画像のコントラストが低下してしまい、テストパターン画像からの座標の特定が困難になる。座標の特定が正確ではないと、その後の映像の形状を調整する処理の精度も低下してしまう。
【0006】
そこで、本発明は、上述した課題を解決するためになされたものであり、外光の影響が大きい場合や投写距離が長い場合であっても、高い精度で映像の形状調整を可能とする投写型映像表示装置及び画像調整方法を提供することを目的とする。
【課題を解決するための手段】
【0007】
本発明の一の特徴は、光源(例えば、光源10)から出射される光を変調する光変調素子(例えば、液晶パネル50)と、前記光変調素子から出射される光を投写面(例えば、投写面400)上に投写する投写ユニット(例えば、投写ユニット110)とを有する投写型映像表示装置(例えば、投写型映像表示装置100)である。この投写型映像表示装置において、所定のパターン画像を表示するように前記光変調素子を制御する素子制御部(例えば、素子制御部260)と、前記投写面上に投写された前記所定パターン画像を撮像する撮像素子(例えば、撮像素子300)と、前記撮像素子によって撮像された撮像画像に基づいて、前記投写型映像表示装置と前記投写面との位置関係を算出する算出部(例えば、算出部250)と、前記算出部によって算出された位置関係に基づいて、前記投写面上に投写される映像を調整する調整部(例えば、調整部280)と、を備える。そして、前記撮像素子が前記所定パターン画像を撮像するときに、前記撮像画像のコントラストを高くする処理を行うことを要旨とする。
【0008】
形状調整、ズーム調整、フォーカス調整を行うための各種パターン画像を投写したときに、外光(太陽光や室内灯による光)が明るい場合や、投写型映像表示装置ら投写面までの距離(投写距離)が長い場合がある。外光の影響が大きい場合や投写距離が長い場合には、撮像素子によって撮像される撮像画像のコントラストが低下してしまい、上記の各種調整のための検出精度が低下してしまう虞がある。かかる特徴によれば、撮像素子によって撮像される撮像画像のコントラストが向上するので、高い検出精度を維持することが可能となる。
【0009】
上記の投写型映像表示装置において、撮像画像のコントラストを高くする処理は、前記光変調素子に入射する光の光量を増加させる処理(例えば、ステップ520、620)であることを要旨とする。これにより、投写面に投写されるパターン画像のコントラストが向上するので、撮像素子によって撮像される撮像画像のコントラストも向上させることができる。
【0010】
上記の投写型映像表示装置において、撮像画像のコントラストを高くする処理は、前記撮像素子の露光時間を増加させる処理(例えば、ステップ720)であることを要旨とする。これにより、撮像素子によって撮像される撮像画像のコントラストを向上させることができる。
【0011】
本発明の他の特徴は、光源(例えば、光源10)から出射される光を変調する光変調素子(例えば、液晶パネル50)と、前記光変調素子から出射される光を投写面(例えば、投写面400)上に投写する投写ユニット(例えば、投写ユニット110)とを有する投写型映像表示装置(例えば、投写型映像表示装置100)に適用される画像調整方法である。この画像調整方法において、所定のパターン画像を前記投写面上に表示する表示ステップ(例えば、ステップ316)と、前記投写面上に投写された前記所定パターン画像を撮像する撮像ステップ(例えば、ステップ317)と、前記撮像ステップにおいて撮像された撮像画像に基づいて、前記投写型映像表示装置と前記投写面との位置関係を算出する算出ステップ(例えば、ステップ320)と、前記算出ステップにおいて算出された位置関係に基づいて、前記投写面上に投写される映像を調整する調整ステップ(例えば、ステップ400)と、を備える。そして、前記撮像素子が前記所定パターン画像を撮像するときに、前記撮像画像のコントラストを高くするステップ(例えば、ステップ520、620、720)を含むことを要旨とする。
【0012】
かかる特徴によれば、ユーザが外光の影響や投写距離などに注意を払うことなく、高い検出精度を維持することが可能となる。
【発明の効果】
【0013】
本発明によれば、外光の影響が大きい場合や投写距離が長い場合であっても、高い精度で映像の形状調整を可能とする投写型映像表示装置及び画像調整方法を提供することができる。
【図面の簡単な説明】
【0014】
【図1】第1実施形態に係る投写型映像表示装置100の概略を示す図である。
【図2】第1実施形態に係る投写型映像表示装置100の構成を示す図である。
【図3】第1実施形態に係る制御ユニット200を示すブロック図である。
【図4】第1実施形態に係る記憶テストパターン画像の一例を示す図である。
【図5】第1実施形態に係る記憶テストパターン画像の一例を示す図である。
【図6】第1実施形態に係る記憶テストパターン画像の一例を示す図である。
【図7】第1実施形態に係る記憶テストパターン画像の一例を示す図である。
【図8】第1実施形態に係る撮像テストパターン画像の一例を示す図である。
【図9】第1実施形態に係る撮像テストパターン画像の一例を示す図である。
【図10】第1実施形態に係る投写テストパターン画像に含まれる交点を算出する方法を説明するための図である。
【図11】第1実施形態に係る投写型映像表示装置100の動作を示すフロー図である。
【図12】第1実施形態に係る投写型映像表示装置100の動作を示すフロー図である。
【図13】第1実施形態に係る投写型映像表示装置100のモード切替動作の一例を示すフロー図である。
【図14】第1実施形態に係る多灯式投写型映像表示装置100の構成を示す図である。
【図15】第1実施形態に係る投写型映像表示装置100のモード切替動作の一例を示すフロー図である。
【図16】第1実施形態に係る固体光源投写型映像表示装置100の構成を示す図である。
【図17】第1実施形態に係る撮像素子300のモード切替動作の一例を示すフロー図である。
【図18】第1実施形態に係るサンプル領域の一例を示す図である。
【発明を実施するための形態】
【0015】
以下において、本発明の実施形態に係る投写型映像表示装置について、図面を参照しながら説明する。なお、以下の図面の記載において、同一又は類似の部分には、同一又は類似の符号を付している。
【0016】
ただし、図面は模式的なものであり、各寸法の比率などは現実のものとは異なることに留意すべきである。従って、具体的な寸法などは以下の説明を参酌して判断すべきである。また、図面相互間においても互いの寸法の関係や比率が異なる部分が含まれていることは勿論である。
【0017】
[実施形態の概要]
実施形態に係る投写型映像表示装置は、光源から出射される光を変調する光変調素子と、光変調素子から出射される光を投写面上に投写する投写ユニットとを有するものである。この投写型映像表示装置は、所定のパターン画像を表示するように光変調素子を制御する素子制御部と、投写面上に投写された所定パターン画像を撮像する撮像素子と、撮像素子によって撮像された撮像画像に基づいて、投写型映像表示装置と投写面との位置関係を算出する算出部と、算出部によって算出された位置関係に基づいて、投写面上に投写される映像を調整する調整部と、を備える。
【0018】
そして、撮像素子が所定パターン画像を撮像するときに、撮像画像のコントラストを高くする処理を行うものである。具体的には、1)光源の光量を上げる、2)遮光手段(調光手段)を開状態とする、3)光源をより光量が得られる駆動方法で駆動する、といった処理を行うことにより、光変調素子に入射する光の光量を増加させる処理が挙げられる。あるいは、撮像素子の露光時間を長くすることも有効である。
【0019】
[第1実施形態]
(投写型映像表示装置の概略)
以下において、第1実施形態に係る投写型映像表示装置について、図面を参照しながら説明する。図1は、第1実施形態に係る投写型映像表示装置100の概略を示す図である。
【0020】
図1に示すように、投写型映像表示装置100には、撮像素子300が設けられる。また、投写型映像表示装置100は、投写面400上に映像光を投写する。
【0021】
撮像素子300は、投写面400を撮像するように構成される。すなわち、撮像素子300は、投写型映像表示装置100によって投写面400上に投写された映像光の反射光を検出するように構成される。撮像素子300は、投写型映像表示装置100に対して、撮像画像を所定ラインに沿って出力する。撮像素子300は、投写型映像表示装置100に内蔵されていてもよく、投写型映像表示装置100と併設されていてもよい。
【0022】
投写面400は、スクリーンなどによって構成される。投写型映像表示装置100が映像光を投写可能な範囲(投写可能範囲410)は、投写面400上に形成される。また、投写面400は、スクリーンの外枠などによって構成される表示枠420を有する。
【0023】
第1実施形態では、投写型映像表示装置100の光軸Nが投写面400の法線Mと一致しないケースについて例示する。例えば、光軸Nと法線Mとが角度θを構成するケースについて例示する。
【0024】
すなわち、第1実施形態では、光軸Nが法線Mと一致しないため、投写可能範囲410(投写面400上に表示される映像)が歪んでしまう。第1実施形態では、このような投写可能範囲410の歪みを補正する方法について主として説明する。
【0025】
(投写型映像表示装置の構成)
以下において、第1実施形態に係る投写型映像表示装置について、図面を参照しながら説明する。図2は、第1実施形態に係る投写型映像表示装置100の構成を示す図である。
【0026】
図2に示すように、投写型映像表示装置100は、投写ユニット110と、照明装置120とを有する。
【0027】
投写ユニット110は、照明装置120から出射された映像光を投写面(不図示)上などに投写する。
【0028】
第1に、照明装置120は、光源10と、UV/IRカットフィルタ20と、フライアイレンズユニット30と、PBSアレイ40と、複数の液晶パネル50(液晶パネル50R、液晶パネル50G及び液晶パネル50B)と、クロスダイクロイックプリズム60とを有する。
【0029】
光源10は、白色光を発する光源(例えば、UHPランプやキセノンランプ)などである。すなわち、光源10が発する白色光は、赤成分光R、緑成分光G及び青成分光Bを含む。
【0030】
UV/IRカットフィルタ20は、可視光成分(赤成分光R、緑成分光G及び青成分光B)を透過する。UV/IRカットフィルタ20は、赤外光成分や紫外光成分を遮光する。
【0031】
フライアイレンズユニット30は、光源10が発する光を均一化する。具体的には、フライアイレンズユニット30は、フライアイレンズ31及びフライアイレンズ32によって構成される。フライアイレンズ31及びフライアイレンズ32は、それぞれ、複数の微少レンズによって構成される。各微少レンズは、光源10が発する光が液晶パネル50の全面に照射されるように、光源10が発する光を集光する。
【0032】
PBSアレイ40は、フライアイレンズユニット30から出射された光の偏光状態を揃える。例えば、PBSアレイ40は、フライアイレンズユニット30から出射された光をS偏光(又はP偏光)に揃える。
【0033】
液晶パネル50Rは、赤出力信号Routに基づいて赤成分光Rを変調する。液晶パネル50Rに光が入射する側には、一の偏光方向(例えば、S偏光)を有する光を透過して、他の偏光方向(例えば、P偏光)を有する光を遮光する入射側偏光板52Rが設けられている。液晶パネル50Rから光が出射する側には、一の偏光方向(例えば、S偏光)を有する光を遮光して、他の偏光方向(例えば、P偏光)を有する光を透過する出射側偏光板53Rが設けられている。
【0034】
液晶パネル50Gは、緑出力信号Goutに基づいて緑成分光Gを変調する。液晶パネル50Gに光が入射する側には、一の偏光方向(例えば、S偏光)を有する光を透過して、他の偏光方向(例えば、P偏光)を有する光を遮光する入射側偏光板52Gが設けられる。一方で、液晶パネル50Gから光が出射する側には、一の偏光方向(例えば、S偏光)を有する光を遮光して、他の偏光方向(例えば、P偏光)を有する光を透過する出射側偏光板53Gが設けられる。
【0035】
液晶パネル50Bは、青出力信号Boutに基づいて青成分光Bを変調する。液晶パネル50Bに光が入射する側には、一の偏光方向(例えば、S偏光)を有する光を透過して、他の偏光方向(例えば、P偏光)を有する光を遮光する入射側偏光板52Bが設けられる。一方で、液晶パネル50Bから光が出射する側には、一の偏光方向(例えば、S偏光)を有する光を遮光して、他の偏光方向(例えば、P偏光)を有する光を透過する出射側偏光板53Bが設けられる。
【0036】
なお、赤出力信号Rout、緑出力信号Gout及び青出力信号Boutは、映像出力信号を構成する。映像出力信号は、1フレームを構成する複数の画素毎の信号である。
【0037】
ここで、各液晶パネル50には、コントラスト比や透過率を向上させる補償板(不図示)が設けられていてもよい。また、各偏光板は、偏光板に入射する光の光量や熱負担を軽減させるプリ偏光板を有していてもよい。
【0038】
クロスダイクロイックプリズム60は、液晶パネル50R、液晶パネル50G及び液晶パネル50Bから出射される光を合成する色合成部を構成する。クロスダイクロイックプリズム60から出射された合成光は、投写ユニット110に導かれる。
【0039】
第2に、照明装置120は、ミラー群(ミラー71〜ミラー76)及びレンズ群(レンズ81〜レンズ85)を有する。
【0040】
ミラー71は、青成分光Bを透過して、赤成分光R及び緑成分光Gを反射するダイクロイックミラーである。ミラー72は、赤成分光Rを透過して、緑成分光Gを反射するダイクロイックミラーである。ミラー71及びミラー72は、赤成分光R、緑成分光G及び青成分光Bを分離する色分離部を構成する。
【0041】
ミラー73は、赤成分光R、緑成分光G及び青成分光Bを反射して、赤成分光R、緑成分光G及び青成分光Bをミラー71側に導く。ミラー74は、青成分光Bを反射して、青成分光Bを液晶パネル50B側に導く。ミラー75及びミラー76は、赤成分光Rを反射して、赤成分光Rを液晶パネル50R側に導く。
【0042】
レンズ81は、PBSアレイ40から出射された光を集光するコンデンサレンズである。レンズ82は、ミラー73で反射された光を集光するコンデンサレンズである。
【0043】
レンズ83Rは、液晶パネル50Rに赤成分光Rが照射されるように、赤成分光Rを略平行光化する。レンズ83Gは、液晶パネル50Gに緑成分光Gが照射されるように、緑成分光Gを略平行光化する。レンズ83Bは、液晶パネル50Bに青成分光Bが照射されるように、青成分光Bを略平行光化する。
【0044】
レンズ84及びレンズ85は、赤成分光Rの拡大を抑制しながら、液晶パネル50R上に赤成分光Rを略結像するリレーレンズである。
【0045】
(制御ユニットの構成)
以下において、第1実施形態に係る制御ユニットについて、図面を参照しながら説明する。図3は、第1実施形態に係る制御ユニット200を示すブロック図である。制御ユニット200は、投写型映像表示装置100に設けられており、投写型映像表示装置100を制御する。
【0046】
なお、制御ユニット200は、映像入力信号を映像出力信号に変換する。映像入力信号は、赤入力信号Rin、緑入力信号Gin及び青入力信号Binによって構成される。映像出力信号は、赤出力信号Rout、緑出力信号Gout及び青出力信号Boutによって構成される。映像入力信号及び映像出力信号は、1フレームを構成する複数の画素毎に入力される信号である。
【0047】
図3に示すように、制御ユニット200は、映像信号受付部210と、記憶部220と、取得部230と、特定部240と、算出部250と、素子制御部260と、投写ユニット調整部270とを有する。
【0048】
映像信号受付部210は、DVDやTVチューナなどの外部装置(不図示)から映像入力信号を受付ける。
【0049】
記憶部220は、各種情報を記憶する。具体的には、記憶部220は、表示枠420を検出するために用いる枠検出パターン画像、フォーカスを調整するために用いるフォーカス調整画像、投写型映像表示装置100と投写面400との位置関係を算出するために用いるテストパターン画像を記憶する。或いは、記憶部220は、露光値を調整するために用いる露光調整画像を記憶してもよい。
【0050】
テストパターン画像は、3つ以上の交点を構成する3つ以上の線分のそれぞれの少なくとも一部分を構成する画像である。また、3つ以上の線分は、所定ラインに対して傾きを有する。
【0051】
なお、撮像素子300は、上述したように、撮像画像を所定ラインに沿って出力する。例えば、所定ラインは、水平方向の画素列であり、所定ラインの向きは、水平方向である。
【0052】
以下において、テストパターン画像の一例について、図4〜図7を参照しながら説明する。図4〜図7に示すように、テストパターン画像は、4つの交点(Ps1〜Ps4)を構成する4つの線分(Ls1〜Ls4)の少なくとも一部分を構成する画像である。第1実施形態では、4つの線分(Ls1〜Ls4)は、濃淡或いは明暗の差(エッジ)によって表される。
【0053】
詳細には、図4に示すように、テストパターン画像は、黒の背景及び白抜きの菱形であってもよい。ここで、白抜きの菱形の4辺は、4つの線分(Ls1〜Ls4)の少なくとも一部分を構成する。なお、4つの線分(Ls1〜Ls4)は、所定ライン(水平方向)に対して傾きを有する。
【0054】
或いは、図5に示すように、テストパターン画像は、黒の背景及び白抜きの線分であってもよい。白抜きの線分は、図4に示す白抜きの菱形の4辺の一部分を構成する。ここで、白抜きの線分は、4つの線分(Ls1〜Ls4)の少なくとも一部分を構成する。なお、4つの線分(Ls1〜Ls4)は、所定ライン(水平方向)に対して傾きを有する。
【0055】
或いは、図6に示すように、テストパターン画像は、黒の背景及び1対の白抜きの三角形であってもよい。ここで、1対の白抜きの三角形の2辺は、4つの線分(Ls1〜Ls4)の少なくとも一部分を構成する。なお、4つの線分(Ls1〜Ls4)は、所定ライン(水平方向)に対して傾きを有する。
【0056】
或いは、図7に示すように、テストパターン画像は、黒の背景及び白抜きの線分であってもよい。ここで、白抜きの線分は、4つの線分(Ls1〜Ls4)の少なくとも一部分を構成する。図7に示すように、4つの線分(Ls1〜Ls4)によって構成される4つの交点(Ps1〜Ps4)は、投写可能範囲410の外側に設けられてもよい。なお、4つの線分(Ls1〜Ls4)は、所定ライン(水平方向)に対して傾きを有する。
【0057】
取得部230は、撮像素子300から所定ラインに沿って出力される撮像画像を取得する。例えば、取得部230は、撮像素子300から所定ラインに沿って出力される枠検出パターン画像の撮像画像を取得する。取得部230は、撮像素子300から所定ラインに沿って出力されるフォーカス調整画像の撮像画像を取得する。取得部230は、撮像素子300から所定ラインに沿って出力されるテストパターン画像の撮像画像を取得する。或いは、取得部230は、撮像素子300から所定ラインに沿って出力される露光調整画像の撮像画像を取得してもよい。
【0058】
特定部240は、取得部230によって所定ライン毎に取得される撮像画像に基づいて、撮像画像に含まれる3つの線分を特定する。続いて、特定部240は、撮像画像に含まれる3つの線分に基づいて、撮像画像に含まれる3つ以上の交点を取得する。
【0059】
具体的には、特定部240は、以下の手順によって、撮像画像に含まれる3つ以上の交点を取得する。ここでは、テストパターン画像が図4に示す画像(白抜きの菱形)であるケースについて例示する。
【0060】
第1に、特定部240は、図8に示すように、取得部230によって所定ライン毎に取得される撮像画像に基づいて、濃淡或いは明暗の差(エッジ)を有する点群Pedgeを取得する。すなわち、特定部240は、テストパターン画像の白抜きの菱形の4辺に対応する点群Pedgeを特定する。
【0061】
第2に、特定部240は、図9に示すように、点群Pedgeに基づいて、撮像画像に含まれる4つの線分(Lt1〜Lt4)を特定する。すなわち、特定部240は、テストパターン画像に含まれる4つの線分(Ls1〜Ls4)に対応する4つの線分(Lt1〜Lt4)を特定する。
【0062】
第3に、特定部240は、図9に示すように、4つの線分(Lt1〜Lt4)に基づいて、撮像画像に含まれる4つの交点(Pt1〜Pt4)を特定する。すなわち、特定部240は、テストパターン画像に含まれる4つの交点(Ps1〜Ps4)に対応する4つの交点(Pt1〜Pt4)を特定する。
【0063】
算出部250は、テストパターン画像に含まれる3つ以上の交点(例えば、Ps1〜Ps4)及び撮像画像に含まれる3つの交点(例えば、Pt1〜Pt4)に基づいて、投写型映像表示装置100と投写面400との位置関係を算出する。具体的には、算出部250は、投写型映像表示装置100(投写ユニット110)の光軸Nと投写面400の法線Mとのずれ量を算出する。
【0064】
なお、以下においては、記憶部220に記憶されたテストパターン画像を記憶テストパターン画像と称する。撮像画像に含まれるテストパターン画像を撮像テストパターン画像と称する。投写面400に投写されたテストパターン画像を投写テストパターン画像と称する。
【0065】
第1に、算出部250は、投写テストパターン画像に含まれる4つの交点(Pu1〜Pu4)の座標を算出する。ここでは、記憶テストパターン画像の交点Ps1、撮像テストパターン画像の交点Pt1、投写テストパターン画像の交点Pu1を例に挙げて説明する。交点Ps1、交点Pt1及び交点Pu1は、互いに対応する交点である。
【0066】
以下において、交点Pu1の座標(Xu1,Yu1,Zu1)の算出方法について、図10を参照しながら説明する。交点Pu1の座標(Xu1,Yu1,Zu1)は、投写型映像表示装置100の焦点Osを原点とする3次元空間における座標であることに留意すべきである。
【0067】
(1)算出部250は、記憶テストパターン画像の2次元平面における交点Ps1の座標(xs1,ys1)について、投写型映像表示装置100の焦点Osを原点とする3次元空間における交点Ps1の座標(Xs1,Ys1,Zs1)に変換する。具体的には、交点Ps1の座標(Xs1,Ys1,Zs1)は、以下の式によって表される。
【0068】
【数1】
【0069】
なお、Asは、3×3の変換行列であり、キャリブレーション等の前処理によって予め取得することが可能である。すなわち、Asは、既知のパラメータである。
【0070】
ここでは、投写型映像表示装置100の光軸方向に垂直な面がXs軸及びYs軸で表されており、投写型映像表示装置100の光軸方向がZs軸で表されている。
【0071】
同様に、算出部250は、撮像テストパターン画像の2次元平面における交点Pt1の座標(xt1,yt1)について、撮像素子300の焦点Otを原点とする3次元空間における交点Pt1の座標(Xt1,Yt1,Zt1)に変換する。
【0072】
【数2】
【0073】
なお、Atは、3×3の変換行列であり、キャリブレーション等の前処理によって予め取得することが可能である。すなわち、Atは、既知のパラメータである。
【0074】
ここでは、撮像素子300の光軸方向に垂直な面がXt軸及びYt軸で表されており、撮像素子300の向き(撮像方向)がZt軸で表されている。このような座標空間において、撮像素子300の向き(撮像方向)の傾き(ベクトル)は既知であることに留意すべきである。
【0075】
(2)算出部250は、交点Ps1と交点Pu1とを結ぶ直線Lvの式を算出する。同様に、算出部250は、交点Pt1と交点Pu1とを結ぶ直線Lwの式を算出する。なお、直線Lv及び直線Lwの式は、以下のように表される。
【0076】
【数3】
【0077】
(3)算出部250は、投写型映像表示装置100の焦点Osを原点とする3次元空間における直線Lw’に直線Lwを変換する。直線Lw’は、以下の式によって表される。
【0078】
【数4】
【0079】
なお、投写型映像表示装置100の光軸及び撮像素子300の向き(撮像方向)は既知であるため、回転成分を示すパラメータRは既知である。同様に、投写型映像表示装置100及び撮像素子300の相対位置が既知であるため、並進成分を示すパラメータTも既知である。
【0080】
(4)算出部250は、式(3)及び式(5)に基づいて、直線Lv及び直線Lw’の交点(すなわち、交点Pu1)における媒介変数Ks及びKtを算出する。続いて、算出部250は、交点Ps1の座標(Xs1,Ys1,Zs1)及びKsに基づいて、交点Pu1の座標(Xu1,Yu1,Zu1)の座標を算出する。或いは、算出部250は、交点Pt1の座標(Xt1,Yt1,Zt1)及びKtに基づいて、交点Pu1の座標(Xu1,Yu1,Zu1)の座標を算出する。
【0081】
これによって、算出部250は、交点Pu1の座標(Xu1,Yu1,Zu1)を算出する。同様に、算出部250は、交点Pu2の座標(Xu2,Yu2,Zu2)、交点Pu3の座標(Xu3,Yu3,Zu3)、交点Pu4の座標(Xu4,Yu4,Zu4)を算出する。
【0082】
第2に、算出部250は、投写面400の法線Mのベクトルを算出する。具体的には、算出部250は、交点Pu1〜交点Pu4のうち、少なくとも3つの交点の座標を用いて、投写面400の法線Mのベクトルを算出する。投写面400の式は、以下の式によって表され、パラメータk1、k2、k3は、投写面400の法線Mのベクトルを表している。
【0083】
これによって、算出部250は、投写型映像表示装置100の光軸Nと投写面400の法線Mとのずれ量を算出することができる。すなわち、算出部250は、投写型映像表示装置100と投写面400との位置関係を算出することができる。
【0084】
なお、第1実施形態では、特定部240及び算出部250を別々に説明したが、特定部240及び算出部250は、1つの構成と考えてもよい。例えば、特定部240の機能を算出部250が有していてもよい。
【0085】
図3に戻って、素子制御部260は、映像入力信号を映像出力信号に変換して、映像出力信号に基づいて、液晶パネル50を制御する。また、素子制御部260は、以下に示す機能を有する。
【0086】
具体的には、素子制御部260は、投写型映像表示装置100と投写面400との位置関係に基づいて、投写面400上に投写された映像の形状の自動補正を行う機能を有する(形状調整)。すなわち、素子制御部260は、投写型映像表示装置100と投写面400との位置関係に基づいて、自動的に台形補正を行う機能を有する。
【0087】
投写ユニット調整部270は、投写ユニット110に設けられるレンズ群を制御する。第1に、投写ユニット調整部270は、投写ユニット110に設けられるレンズ群のシフトによって、投写面400上に設けられる表示枠420内に投写可能範囲410を収める(ズーム調整)。具体的には、投写ユニット調整部270は、投写ユニット調整部270は、取得部230によって取得される枠検出パターン画像の撮像画像に基づいて、表示枠420内に投写可能範囲410が収まるように、投写ユニット110に設けられるレンズ群を制御する。
【0088】
第2に、投写ユニット調整部270は、投写ユニット110に設けられるレンズ群のシフトによって、投写面400に投写された映像のフォーカスを調整する(フォーカス調整)。具体的には、投写ユニット調整部270は、取得部230によって取得されるフォーカス調整画像の撮像画像に基づいて、投写面400に投写された映像のフォーカス値が最大値となるように、投写ユニット110に設けられるレンズ群を制御する。
【0089】
なお、素子制御部260及び投写ユニット調整部270は、投写面400に投写された映像を調整する調整部280を構成する。
【0090】
第1実施形態では、投写型映像表示装置100は、投写面400上に枠検出パターン画像を投写して、投写面400上に設けられる表示枠420を検出する。続いて、投写型映像表示装置100は、投写面400上にフォーカス調整画像を投写して、投写面400上に投写される映像(テストパターン画像)の全体を対象として、投写面400上に投写される映像のフォーカスを調整する。続いて、投写型映像表示装置100は、投写面400上にテストパターン画像を投写して、投写型映像表示装置100と投写面400との位置関係を算出する。続いて、投写型映像表示装置100は、投写型映像表示装置100と投写面400との位置関係に基づいて、投写面400上に投写される映像の形状を調整する。
【0091】
第1実施形態では、投写型映像表示装置100は、テストパターン画像の全体を対象として、テストパターン画像に含まれる線分を特定し、投写型映像表示装置100と投写面400との位置関係を算出する(一括処理モード(第1処理モード))。すなわち、一括処理モードでは、撮像素子300は、投写可能範囲410の全体を対象としてフォーカスが調整された状態でテストパターン画像の全体を撮像し、投写型映像表示装置100は、テストパターン画像の全体の撮像画像に基づいて、テストパターン画像に含まれる3つ以上の線分を特定する。
【0092】
(投写型映像表示装置の動作)
以下において、第1実施形態に係る投写型映像表示装置(制御ユニット)の動作について、図面を参照しながら説明する。図11及び図12は、第1実施形態に係る投写型映像表示装置100(制御ユニット200)の動作を示すフロー図である。
【0093】
図11に示すように、ステップ50において、投写型映像表示装置100は、画像調整リセット処理を行う。具体的には、投写型映像表示装置100は、形状調整、ズーム調整、フォーカス調整などのパラメータ(例えば、以前のパラメータ)を初期パラメータにリセットする。
【0094】
なお、投写型映像表示装置100は、画像調整リセット処理において、投写面400上に映像の形状変化をユーザに視認させないために、図11に示すフローの開始から画像調整リセット処理(各種パラメータのリセット)を行うまで、投写面400上に映像を表示しないことが好ましい。
【0095】
ステップ100において、投写型映像表示装置100は、投写面400上に枠検出パターン画像を表示(投写)する。枠検出パターン画像は、例えば、白画像などである。
【0096】
ステップ200において、投写型映像表示装置100に設けられた撮像素子300は、投写面400を撮像する。すなわち、撮像素子300は、投写面400上に投写された枠検出パターン画像を撮像する。続いて、投写型映像表示装置100は、枠検出パターン画像の撮像画像に基づいて、投写面400上に設けられる表示枠420を検出する。
【0097】
ステップ310において、投写型映像表示装置100は、テストパターン画像の全体を対象として、テストパターン画像に含まれる線分を特定し、投写型映像表示装置100と投写面400との位置関係を算出する(一括処理モード)。なお、一括処理モードの詳細については後述する(図12を参照)。
【0098】
ステップ400において、投写型映像表示装置100は、投写型映像表示装置100と投写面400との位置関係に基づいて、投写面400上に投写される映像の形状を調整する(台形補正)。
【0099】
図12に示すように、ステップ311において、投写型映像表示装置100は、投写面400上にフォーカス調整画像を表示(投写)する。フォーカス調整画像は、例えば、白のストライプ及び黒のストライプが交互に配置された画像などである。
【0100】
ステップ312において、投写型映像表示装置100に設けられた撮像素子300は、投写面400を撮像する。すなわち、撮像素子300は、投写面400上に投写されたフォーカス調整画像を撮像する。
【0101】
ステップ313において、投写型映像表示装置100は、投写面400に投写されたフォーカス調整画像のフォーカス値を算出する。
【0102】
ステップ314において、投写型映像表示装置100は、フォーカス調整画像の全体を対象として、フォーカス調整画像のフォーカス値が最大値であるか否かを判定する。投写型映像表示装置100は、フォーカス値が最大値である場合に、ステップ316の処理に移る。投写型映像表示装置100は、フォーカス値が最大値でない場合に、ステップ315の処理に移る。
【0103】
ステップ315において、投写型映像表示装置100は、投写可能範囲410の全体を対象として、投写面400に投写されたフォーカス調整画像のフォーカスを調整する。具体的には、投写型映像表示装置100は、フォーカス調整画像の撮像画像に基づいて、投写ユニット110に設けられるレンズ群をシフトする。
【0104】
すなわち、投写型映像表示装置100は、ステップ312〜ステップ315のループ処理によって、フォーカス調整画像の全体を対象としてフォーカス値が最大値となるように、フォーカス調整画像のフォーカスを調整する。
【0105】
ステップ316において、投写型映像表示装置100は、投写面400上にテストパターン画像を表示(投写)する。
【0106】
ステップ317において、投写型映像表示装置100に設けられた撮像素子300は、投写面400を撮像する。すなわち、撮像素子300は、投写面400上に投写されたテストパターン画像を撮像する。
【0107】
ステップ318において、投写型映像表示装置100は、撮像テストパターン画像の全体を対象として、撮像テストパターン画像に含まれる4つの線分(Lt1〜Lt4)を特定する。
【0108】
ステップ319において、投写型映像表示装置100は、4つの線分(Lt1〜Lt4)に基づいて、撮像テストパターン画像に含まれる4つの交点(Pt1〜Pt4)を特定する。
【0109】
ステップ320において、投写型映像表示装置100は、記憶テストパターン画像に含まれる4つの交点(Ps1〜Ps4)及び撮像テストパターン画像に含まれる4つの交点(Pt1〜Pt4)に基づいて、投写型映像表示装置100と投写面400との位置関係を算出する。
【0110】
(モード切替例1)
以下において、第1実施形態に係る投写型映像表示装置(制御ユニット)のモード切替動作について、図面を参照しながら説明する。図13は、第1実施形態に係る投写型映像表示装置100(制御ユニット200)の動作を示すフロー図である。
【0111】
上記のように、形状調整、ズーム調整、フォーカス調整を行うための各種画像を投写したときに、外光(太陽光や室内灯による光)が明るい場合や、投写型映像表示装置100から投写面400までの距離(投写距離)が長い場合に、撮像素子300によって撮像された画像のコントラストが低下する。これは、上記各調整のための検出精度を低下させる原因となる。
【0112】
そこで、上記各調整を行う前に、具体的には、図13に示すように、ステップ50とステップ100との間において、投写型映像表示装置100の運転モードを切り替える。
【0113】
ステップ510において、投写型映像表示装置100は、高輝度となる設定になっているか否かを判断する。高輝度設定とは、具体的には、図14に示すように、光源10が複数のUHPランプからなる場合(多灯式)には全てのランプを点灯させる状態、あるいは、光源10から液晶パネル50R,50G,50Bまでの間にアイリスやメカシャッタ90が挿入されている場合にはこれらの遮光手段(調光手段)を全開とする状態である。
【0114】
投写型映像表示装置100は、高輝度設定である場合に、ステップ100の処理に移る。投写型映像表示装置100は、高輝度設定でない場合に、光源10の全てのランプを点灯させるか、あるいは、メカシャッタ90を全開にするステップ520の処理に移る。
【0115】
最後に、ステップ400において、投写型映像表示装置100は、台形補正を行うと共に、ステップ510において高輝度設定ではなかった場合には元の設定に戻す。
【0116】
(モード切替例2)
以下において、第1実施形態に係る投写型映像表示装置(制御ユニット)のモード切替例2について、図面を参照しながら説明する。図15は、モード切替例2に係る制御ユニット200の動作を示すフロー図である。
【0117】
ステップ610において、投写型映像表示装置100は、高輝度駆動となる設定になっているか否かを判断する。高輝度駆動設定とは、具体的には、図16に示すように、光源10が複数の固体光源からなる場合、所定のDuty比以上で固体光源を駆動している状態、あるいは、所定の閾値以上の電流値で固体光源を駆動している状態である。
【0118】
投写型映像表示装置100は、高輝度駆動設定である場合に、ステップ100の処理に移る。投写型映像表示装置100は、高輝度駆動設定でない場合に、光源10の全ての固体光源を高輝度駆動させるステップ620の処理に移る。
【0119】
最後に、ステップ400において、投写型映像表示装置100は、台形補正を行うと共に、ステップ510において高輝度駆動設定ではなかった場合には元の設定に戻す。
【0120】
(モード切替例3)
以下において、第1実施形態に係る撮像素子(制御ユニット)のモード切替例3について、図面を参照しながら説明する。図17は、モード切替例3に係る制御ユニット200の動作を示すフロー図である。
【0121】
モード切替例3では、投写型映像表示装置100ではなく、撮像素子300の撮像動作を切り替える。具体的には、図17に示すように、概略処理モードの中のステップ317に代えて、露光調整と撮像とを繰り返す。
【0122】
ステップ710において、撮像素子300は、任意のエッジ近傍に設定されたサンプル領域(図18の領域A,B,C,D)を撮像する。このとき、第1回の撮像では、撮像素子300の露光状態を高い状態に設定しておく。各サンプル領域を撮像した後、ステップ720の処理に移行する。
【0123】
ステップ720において、撮像素子300は、露光状態を中程度に設定し、ステップ710の処理に移行する。第2回の撮像では、中程度の露光状態にてサンプル領域A,B,C,Dを撮像し、ステップ720の処理に移行する。
【0124】
再度、ステップ720において、撮像素子300は、露光状態を低い状態に設定し、ステップ710の処理に移行する。第3回の撮像では、低い露光状態にてサンプル領域A,B,C,Dを撮像する。
【0125】
モード切替例3では、上記のように、例えば、3段階の露光調整と3回の撮像とを繰り返すことにより、適切なコントラストのテストパターン画像を撮像し、台形補正を行う。サンプル領域A,Cでは、第2回の撮像(中程度の露光状態)にて得られた撮像画像を用いて位置関係の算出を行うことができるが、サンプル領域Bでは第3回の撮像(低い露光状態)にて得られた撮像画像、サンプル領域Dでは第1回の撮像(高い露光状態)にて得られた撮像画像を用いる方が正確な位置関係の算出が可能になる。
【0126】
(作用及び効果)
第1実施形態では、撮像素子が所定パターン画像(枠検出パターン画像、テストパターン画像、フォーカス調整画像)を撮像するときに、撮像画像のコントラストを高くする処理を行う。これにより、撮像画像から正確に投写型映像表示装置100と投写面400との位置関係を算出することができるので、映像の形状を精度よく調整することができる。
【0127】
具体的には、モード切替例1およびモード切替例2のように、光源の光量を上げる、遮光手段(調光手段)を開状態とする、より光量が得られる駆動方法で光源を駆動する、といった処理を行うことにより、光変調素子に入射する光の光量を増加させる。これにより、投写面に投写されるパターン画像のコントラストが向上するので、撮像素子によって撮像される撮像画像のコントラストも向上させることができる。
【0128】
あるいは、モード切替例3のように、撮像素子の露光時間を長くすることも有効である。これにより、撮像素子によって撮像される撮像画像のコントラストを向上させることができる。
【0129】
[その他の実施形態]
本発明は上述した実施形態によって説明したが、この開示の一部をなす論述及び図面は、この発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施形態、実施例及び運用技術が明らかとなろう。
【0130】
上述した実施形態では、光源として、白色光源を例示した。しかしながら、光源は、LED(Laser Emitting Diode)やLD(Laser Diode)であってもよい。
【0131】
上述した実施形態では、光変調素子として、透過型の液晶パネルについて例示した。しかしながら、光変調素子は、反射型の液用パネルやDMD(Digital Micromirror Device)であってもよい。
【0132】
上述した実施形態では特に触れていないが、モード切替例は、複数の例を組み合わせであってもよい。
【0133】
変更例3では、分割処理モードとして、変更例1に示すフォーカス調整を例示した。しかしながら、実施形態は、これに限定されるものではない。変更例3において、分割処理モードとして、変更例2に示す露光時間調整を適用してもよい。
【0134】
上述した実施形態では特に触れていないが、素子制御部260は、表示枠420が検出されてから、テストパターン画像が表示されるまで、映像を表示しないように液晶パネル50を制御することが好ましい。
【0135】
上述した実施形態では特に触れていないが、素子制御部260は、撮像テストパターン画像に含まれる3つ以上の交点が取得されてから、投写面400上に投写される映像の形状が補正されるまで、映像を表示しないように液晶パネル50を制御することが好ましい。
【0136】
上述した実施形態では特に触れていないが、素子制御部260は、テストパターン画像とともに、テストパターン画像以外の所定画像(例えば、背景画像)を表示するように液晶パネル50を制御することが好ましい。
【0137】
例えば、撮像素子300によって検出可能な色や輝度によってテストパターン画像が構成されており、撮像素子300によって検出できない色や輝度によってテストパターン画像以外の所定画像が構成される。
【0138】
或いは、赤、緑及び青のうち、いずれかの色によってテストパターン画像が構成されており、他の色によってテストパターン画像以外の所定画像が構成される。撮像素子300は、テストパターン画像を構成する色のみを検出することによって、テストパターン画像の撮像画像を取得することができる。
【0139】
また、映像信号が入力されていない場合には、素子制御部260は、テストパターン画像とともに、所定画像としてエラーメッセージを表示するように液晶パネル50を制御してもよい。或いは、テストパターン画像に含まれる線分或いは交点を特定することができない場合に、素子制御部260は、所定画像としてエラーメッセージを表示するように液晶パネル50を制御してもよい。
【0140】
実施形態では、投写型映像表示装置100は、表示枠420の検出後に、フォーカスを調整する。しかしながら、実施形態は、これに限定されるものではない。例えば、投写型映像表示装置100は、表示枠420を検出せずに、フォーカスを調整してもよい。具体的には、通常の使用態様では、投写可能範囲410の中心部分が表示枠420内に含まれることが想定されるため、投写型映像表示装置100は、投写可能範囲410の中心部分にフォーカス調整画像を表示するとともに、投写可能範囲410の中心部分に表示される映像(フォーカス調整画像)のフォーカスを調整してもよい。
【0141】
実施形態では、テストパターン画像のうち、背景部分が黒であり、パターン部分が白である。しかしながら、実施形態は、これに限定されるものではない。例えば、背景部分が白であり、パターン部分が黒であってもよい。背景部分が青であり、パターン部分が白であってもよい。すなわち、エッジ検出が可能な程度、背景部分とパターン部分との間に輝度差があればよい。なお、エッジ検出が可能な程度は、撮像素子300の精度に応じて定められる。背景部分とパターン部分との間の輝度差が大きいほど、撮像素子300の精度が必要とされないため、撮像素子300のコストを低減できることは勿論である。また、各種のパターン画像についても、特徴点が抽出可能な画像であれば、特別なパターン画像ではなく、映像入力信号からの映像を用いても良い。
【0142】
上述した実施形態では、投写型映像表示装置100は、分割処理モードにおいて、フォーカス調整(或いは、露光調整)を行って線分を特定するまでの処理を対象領域毎に行う。しかしながら、実施形態は、これに限定されるものではない。投写型映像表示装置100は、分割処理モードにおいて、フォーカス調整(或いは、露光調整)を対象領域毎に行って、フォーカス値(或いは、露光値)を対象領域毎に記憶した上で、フォーカス値(或いは、露光値)を対象領域毎に変更しながら、各対象領域に含まれる線分を特定してもよい。
【符号の説明】
【0143】
10…光源、20…UV/IRカットフィルタ、30…フライアイレンズユニット、40…PBSアレイ、50…液晶パネル、52、53…偏光板、60…クロスダイクロイックキューブ、71〜76…ミラー、81〜85…レンズ、100…投写型映像表示装置、110…投写ユニット、120…照明ユニット、200…制御ユニット、210…映像信号受付部、220…記憶部、230…取得部、240…特定部、250…算出部、260…素子制御部、270…投写ユニット制御部、280…調整部、290…露光時間調整部、295…モード制御部、300…撮像素子、400…投写面、410…投写可能範囲、420…表示枠
【技術分野】
【0001】
本発明は、光源から出射される光を変調するように構成された光変調素子と、光変調素子から出射される光を投写面上に投写するように構成された投写ユニットとを有する投写型映像表示装置およびこの投写型映像表示装置に適用される画像調整方法に関する。
【背景技術】
【0002】
従来、光源から出射される光を変調する光変調素子と、光変調素子から出射される光を投写面上に投写する投写ユニットとを備える投写型映像表示装置が知られている。ここで、投写型映像表示装置と投写面との位置関係によっては、投写面上に投写される映像の形状が歪んでしまう。
【0003】
これに対して、以下の手順で映像の形状を調整する方法が提案されている(例えば、特許文献1)。第1に、投写型映像表示装置は、長方形形状のテストパターン画像を投写面上に投写する。第2に、投写型映像表示装置は、投写面上に投写されたテストパターン画像を撮像して、投写面におけるテストパターン画像の4隅の座標を特定する。第3に、投写型映像表示装置は、投写面におけるテストパターン画像の4隅の座標に基づいて、投写型映像表示装置と投写面との位置関係を特定して、投写面上に投写される映像の形状を調整する。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開2005−318652号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
ところで、テストパターン画像を撮像素子で撮像するときに、外光(太陽光や室内灯による光)が明るい場合や、投写型映像表示装置ら投写面までの距離(投写距離)が長い場合がある。このような場合には、撮像素子によって撮像される撮像画像のコントラストが低下してしまい、テストパターン画像からの座標の特定が困難になる。座標の特定が正確ではないと、その後の映像の形状を調整する処理の精度も低下してしまう。
【0006】
そこで、本発明は、上述した課題を解決するためになされたものであり、外光の影響が大きい場合や投写距離が長い場合であっても、高い精度で映像の形状調整を可能とする投写型映像表示装置及び画像調整方法を提供することを目的とする。
【課題を解決するための手段】
【0007】
本発明の一の特徴は、光源(例えば、光源10)から出射される光を変調する光変調素子(例えば、液晶パネル50)と、前記光変調素子から出射される光を投写面(例えば、投写面400)上に投写する投写ユニット(例えば、投写ユニット110)とを有する投写型映像表示装置(例えば、投写型映像表示装置100)である。この投写型映像表示装置において、所定のパターン画像を表示するように前記光変調素子を制御する素子制御部(例えば、素子制御部260)と、前記投写面上に投写された前記所定パターン画像を撮像する撮像素子(例えば、撮像素子300)と、前記撮像素子によって撮像された撮像画像に基づいて、前記投写型映像表示装置と前記投写面との位置関係を算出する算出部(例えば、算出部250)と、前記算出部によって算出された位置関係に基づいて、前記投写面上に投写される映像を調整する調整部(例えば、調整部280)と、を備える。そして、前記撮像素子が前記所定パターン画像を撮像するときに、前記撮像画像のコントラストを高くする処理を行うことを要旨とする。
【0008】
形状調整、ズーム調整、フォーカス調整を行うための各種パターン画像を投写したときに、外光(太陽光や室内灯による光)が明るい場合や、投写型映像表示装置ら投写面までの距離(投写距離)が長い場合がある。外光の影響が大きい場合や投写距離が長い場合には、撮像素子によって撮像される撮像画像のコントラストが低下してしまい、上記の各種調整のための検出精度が低下してしまう虞がある。かかる特徴によれば、撮像素子によって撮像される撮像画像のコントラストが向上するので、高い検出精度を維持することが可能となる。
【0009】
上記の投写型映像表示装置において、撮像画像のコントラストを高くする処理は、前記光変調素子に入射する光の光量を増加させる処理(例えば、ステップ520、620)であることを要旨とする。これにより、投写面に投写されるパターン画像のコントラストが向上するので、撮像素子によって撮像される撮像画像のコントラストも向上させることができる。
【0010】
上記の投写型映像表示装置において、撮像画像のコントラストを高くする処理は、前記撮像素子の露光時間を増加させる処理(例えば、ステップ720)であることを要旨とする。これにより、撮像素子によって撮像される撮像画像のコントラストを向上させることができる。
【0011】
本発明の他の特徴は、光源(例えば、光源10)から出射される光を変調する光変調素子(例えば、液晶パネル50)と、前記光変調素子から出射される光を投写面(例えば、投写面400)上に投写する投写ユニット(例えば、投写ユニット110)とを有する投写型映像表示装置(例えば、投写型映像表示装置100)に適用される画像調整方法である。この画像調整方法において、所定のパターン画像を前記投写面上に表示する表示ステップ(例えば、ステップ316)と、前記投写面上に投写された前記所定パターン画像を撮像する撮像ステップ(例えば、ステップ317)と、前記撮像ステップにおいて撮像された撮像画像に基づいて、前記投写型映像表示装置と前記投写面との位置関係を算出する算出ステップ(例えば、ステップ320)と、前記算出ステップにおいて算出された位置関係に基づいて、前記投写面上に投写される映像を調整する調整ステップ(例えば、ステップ400)と、を備える。そして、前記撮像素子が前記所定パターン画像を撮像するときに、前記撮像画像のコントラストを高くするステップ(例えば、ステップ520、620、720)を含むことを要旨とする。
【0012】
かかる特徴によれば、ユーザが外光の影響や投写距離などに注意を払うことなく、高い検出精度を維持することが可能となる。
【発明の効果】
【0013】
本発明によれば、外光の影響が大きい場合や投写距離が長い場合であっても、高い精度で映像の形状調整を可能とする投写型映像表示装置及び画像調整方法を提供することができる。
【図面の簡単な説明】
【0014】
【図1】第1実施形態に係る投写型映像表示装置100の概略を示す図である。
【図2】第1実施形態に係る投写型映像表示装置100の構成を示す図である。
【図3】第1実施形態に係る制御ユニット200を示すブロック図である。
【図4】第1実施形態に係る記憶テストパターン画像の一例を示す図である。
【図5】第1実施形態に係る記憶テストパターン画像の一例を示す図である。
【図6】第1実施形態に係る記憶テストパターン画像の一例を示す図である。
【図7】第1実施形態に係る記憶テストパターン画像の一例を示す図である。
【図8】第1実施形態に係る撮像テストパターン画像の一例を示す図である。
【図9】第1実施形態に係る撮像テストパターン画像の一例を示す図である。
【図10】第1実施形態に係る投写テストパターン画像に含まれる交点を算出する方法を説明するための図である。
【図11】第1実施形態に係る投写型映像表示装置100の動作を示すフロー図である。
【図12】第1実施形態に係る投写型映像表示装置100の動作を示すフロー図である。
【図13】第1実施形態に係る投写型映像表示装置100のモード切替動作の一例を示すフロー図である。
【図14】第1実施形態に係る多灯式投写型映像表示装置100の構成を示す図である。
【図15】第1実施形態に係る投写型映像表示装置100のモード切替動作の一例を示すフロー図である。
【図16】第1実施形態に係る固体光源投写型映像表示装置100の構成を示す図である。
【図17】第1実施形態に係る撮像素子300のモード切替動作の一例を示すフロー図である。
【図18】第1実施形態に係るサンプル領域の一例を示す図である。
【発明を実施するための形態】
【0015】
以下において、本発明の実施形態に係る投写型映像表示装置について、図面を参照しながら説明する。なお、以下の図面の記載において、同一又は類似の部分には、同一又は類似の符号を付している。
【0016】
ただし、図面は模式的なものであり、各寸法の比率などは現実のものとは異なることに留意すべきである。従って、具体的な寸法などは以下の説明を参酌して判断すべきである。また、図面相互間においても互いの寸法の関係や比率が異なる部分が含まれていることは勿論である。
【0017】
[実施形態の概要]
実施形態に係る投写型映像表示装置は、光源から出射される光を変調する光変調素子と、光変調素子から出射される光を投写面上に投写する投写ユニットとを有するものである。この投写型映像表示装置は、所定のパターン画像を表示するように光変調素子を制御する素子制御部と、投写面上に投写された所定パターン画像を撮像する撮像素子と、撮像素子によって撮像された撮像画像に基づいて、投写型映像表示装置と投写面との位置関係を算出する算出部と、算出部によって算出された位置関係に基づいて、投写面上に投写される映像を調整する調整部と、を備える。
【0018】
そして、撮像素子が所定パターン画像を撮像するときに、撮像画像のコントラストを高くする処理を行うものである。具体的には、1)光源の光量を上げる、2)遮光手段(調光手段)を開状態とする、3)光源をより光量が得られる駆動方法で駆動する、といった処理を行うことにより、光変調素子に入射する光の光量を増加させる処理が挙げられる。あるいは、撮像素子の露光時間を長くすることも有効である。
【0019】
[第1実施形態]
(投写型映像表示装置の概略)
以下において、第1実施形態に係る投写型映像表示装置について、図面を参照しながら説明する。図1は、第1実施形態に係る投写型映像表示装置100の概略を示す図である。
【0020】
図1に示すように、投写型映像表示装置100には、撮像素子300が設けられる。また、投写型映像表示装置100は、投写面400上に映像光を投写する。
【0021】
撮像素子300は、投写面400を撮像するように構成される。すなわち、撮像素子300は、投写型映像表示装置100によって投写面400上に投写された映像光の反射光を検出するように構成される。撮像素子300は、投写型映像表示装置100に対して、撮像画像を所定ラインに沿って出力する。撮像素子300は、投写型映像表示装置100に内蔵されていてもよく、投写型映像表示装置100と併設されていてもよい。
【0022】
投写面400は、スクリーンなどによって構成される。投写型映像表示装置100が映像光を投写可能な範囲(投写可能範囲410)は、投写面400上に形成される。また、投写面400は、スクリーンの外枠などによって構成される表示枠420を有する。
【0023】
第1実施形態では、投写型映像表示装置100の光軸Nが投写面400の法線Mと一致しないケースについて例示する。例えば、光軸Nと法線Mとが角度θを構成するケースについて例示する。
【0024】
すなわち、第1実施形態では、光軸Nが法線Mと一致しないため、投写可能範囲410(投写面400上に表示される映像)が歪んでしまう。第1実施形態では、このような投写可能範囲410の歪みを補正する方法について主として説明する。
【0025】
(投写型映像表示装置の構成)
以下において、第1実施形態に係る投写型映像表示装置について、図面を参照しながら説明する。図2は、第1実施形態に係る投写型映像表示装置100の構成を示す図である。
【0026】
図2に示すように、投写型映像表示装置100は、投写ユニット110と、照明装置120とを有する。
【0027】
投写ユニット110は、照明装置120から出射された映像光を投写面(不図示)上などに投写する。
【0028】
第1に、照明装置120は、光源10と、UV/IRカットフィルタ20と、フライアイレンズユニット30と、PBSアレイ40と、複数の液晶パネル50(液晶パネル50R、液晶パネル50G及び液晶パネル50B)と、クロスダイクロイックプリズム60とを有する。
【0029】
光源10は、白色光を発する光源(例えば、UHPランプやキセノンランプ)などである。すなわち、光源10が発する白色光は、赤成分光R、緑成分光G及び青成分光Bを含む。
【0030】
UV/IRカットフィルタ20は、可視光成分(赤成分光R、緑成分光G及び青成分光B)を透過する。UV/IRカットフィルタ20は、赤外光成分や紫外光成分を遮光する。
【0031】
フライアイレンズユニット30は、光源10が発する光を均一化する。具体的には、フライアイレンズユニット30は、フライアイレンズ31及びフライアイレンズ32によって構成される。フライアイレンズ31及びフライアイレンズ32は、それぞれ、複数の微少レンズによって構成される。各微少レンズは、光源10が発する光が液晶パネル50の全面に照射されるように、光源10が発する光を集光する。
【0032】
PBSアレイ40は、フライアイレンズユニット30から出射された光の偏光状態を揃える。例えば、PBSアレイ40は、フライアイレンズユニット30から出射された光をS偏光(又はP偏光)に揃える。
【0033】
液晶パネル50Rは、赤出力信号Routに基づいて赤成分光Rを変調する。液晶パネル50Rに光が入射する側には、一の偏光方向(例えば、S偏光)を有する光を透過して、他の偏光方向(例えば、P偏光)を有する光を遮光する入射側偏光板52Rが設けられている。液晶パネル50Rから光が出射する側には、一の偏光方向(例えば、S偏光)を有する光を遮光して、他の偏光方向(例えば、P偏光)を有する光を透過する出射側偏光板53Rが設けられている。
【0034】
液晶パネル50Gは、緑出力信号Goutに基づいて緑成分光Gを変調する。液晶パネル50Gに光が入射する側には、一の偏光方向(例えば、S偏光)を有する光を透過して、他の偏光方向(例えば、P偏光)を有する光を遮光する入射側偏光板52Gが設けられる。一方で、液晶パネル50Gから光が出射する側には、一の偏光方向(例えば、S偏光)を有する光を遮光して、他の偏光方向(例えば、P偏光)を有する光を透過する出射側偏光板53Gが設けられる。
【0035】
液晶パネル50Bは、青出力信号Boutに基づいて青成分光Bを変調する。液晶パネル50Bに光が入射する側には、一の偏光方向(例えば、S偏光)を有する光を透過して、他の偏光方向(例えば、P偏光)を有する光を遮光する入射側偏光板52Bが設けられる。一方で、液晶パネル50Bから光が出射する側には、一の偏光方向(例えば、S偏光)を有する光を遮光して、他の偏光方向(例えば、P偏光)を有する光を透過する出射側偏光板53Bが設けられる。
【0036】
なお、赤出力信号Rout、緑出力信号Gout及び青出力信号Boutは、映像出力信号を構成する。映像出力信号は、1フレームを構成する複数の画素毎の信号である。
【0037】
ここで、各液晶パネル50には、コントラスト比や透過率を向上させる補償板(不図示)が設けられていてもよい。また、各偏光板は、偏光板に入射する光の光量や熱負担を軽減させるプリ偏光板を有していてもよい。
【0038】
クロスダイクロイックプリズム60は、液晶パネル50R、液晶パネル50G及び液晶パネル50Bから出射される光を合成する色合成部を構成する。クロスダイクロイックプリズム60から出射された合成光は、投写ユニット110に導かれる。
【0039】
第2に、照明装置120は、ミラー群(ミラー71〜ミラー76)及びレンズ群(レンズ81〜レンズ85)を有する。
【0040】
ミラー71は、青成分光Bを透過して、赤成分光R及び緑成分光Gを反射するダイクロイックミラーである。ミラー72は、赤成分光Rを透過して、緑成分光Gを反射するダイクロイックミラーである。ミラー71及びミラー72は、赤成分光R、緑成分光G及び青成分光Bを分離する色分離部を構成する。
【0041】
ミラー73は、赤成分光R、緑成分光G及び青成分光Bを反射して、赤成分光R、緑成分光G及び青成分光Bをミラー71側に導く。ミラー74は、青成分光Bを反射して、青成分光Bを液晶パネル50B側に導く。ミラー75及びミラー76は、赤成分光Rを反射して、赤成分光Rを液晶パネル50R側に導く。
【0042】
レンズ81は、PBSアレイ40から出射された光を集光するコンデンサレンズである。レンズ82は、ミラー73で反射された光を集光するコンデンサレンズである。
【0043】
レンズ83Rは、液晶パネル50Rに赤成分光Rが照射されるように、赤成分光Rを略平行光化する。レンズ83Gは、液晶パネル50Gに緑成分光Gが照射されるように、緑成分光Gを略平行光化する。レンズ83Bは、液晶パネル50Bに青成分光Bが照射されるように、青成分光Bを略平行光化する。
【0044】
レンズ84及びレンズ85は、赤成分光Rの拡大を抑制しながら、液晶パネル50R上に赤成分光Rを略結像するリレーレンズである。
【0045】
(制御ユニットの構成)
以下において、第1実施形態に係る制御ユニットについて、図面を参照しながら説明する。図3は、第1実施形態に係る制御ユニット200を示すブロック図である。制御ユニット200は、投写型映像表示装置100に設けられており、投写型映像表示装置100を制御する。
【0046】
なお、制御ユニット200は、映像入力信号を映像出力信号に変換する。映像入力信号は、赤入力信号Rin、緑入力信号Gin及び青入力信号Binによって構成される。映像出力信号は、赤出力信号Rout、緑出力信号Gout及び青出力信号Boutによって構成される。映像入力信号及び映像出力信号は、1フレームを構成する複数の画素毎に入力される信号である。
【0047】
図3に示すように、制御ユニット200は、映像信号受付部210と、記憶部220と、取得部230と、特定部240と、算出部250と、素子制御部260と、投写ユニット調整部270とを有する。
【0048】
映像信号受付部210は、DVDやTVチューナなどの外部装置(不図示)から映像入力信号を受付ける。
【0049】
記憶部220は、各種情報を記憶する。具体的には、記憶部220は、表示枠420を検出するために用いる枠検出パターン画像、フォーカスを調整するために用いるフォーカス調整画像、投写型映像表示装置100と投写面400との位置関係を算出するために用いるテストパターン画像を記憶する。或いは、記憶部220は、露光値を調整するために用いる露光調整画像を記憶してもよい。
【0050】
テストパターン画像は、3つ以上の交点を構成する3つ以上の線分のそれぞれの少なくとも一部分を構成する画像である。また、3つ以上の線分は、所定ラインに対して傾きを有する。
【0051】
なお、撮像素子300は、上述したように、撮像画像を所定ラインに沿って出力する。例えば、所定ラインは、水平方向の画素列であり、所定ラインの向きは、水平方向である。
【0052】
以下において、テストパターン画像の一例について、図4〜図7を参照しながら説明する。図4〜図7に示すように、テストパターン画像は、4つの交点(Ps1〜Ps4)を構成する4つの線分(Ls1〜Ls4)の少なくとも一部分を構成する画像である。第1実施形態では、4つの線分(Ls1〜Ls4)は、濃淡或いは明暗の差(エッジ)によって表される。
【0053】
詳細には、図4に示すように、テストパターン画像は、黒の背景及び白抜きの菱形であってもよい。ここで、白抜きの菱形の4辺は、4つの線分(Ls1〜Ls4)の少なくとも一部分を構成する。なお、4つの線分(Ls1〜Ls4)は、所定ライン(水平方向)に対して傾きを有する。
【0054】
或いは、図5に示すように、テストパターン画像は、黒の背景及び白抜きの線分であってもよい。白抜きの線分は、図4に示す白抜きの菱形の4辺の一部分を構成する。ここで、白抜きの線分は、4つの線分(Ls1〜Ls4)の少なくとも一部分を構成する。なお、4つの線分(Ls1〜Ls4)は、所定ライン(水平方向)に対して傾きを有する。
【0055】
或いは、図6に示すように、テストパターン画像は、黒の背景及び1対の白抜きの三角形であってもよい。ここで、1対の白抜きの三角形の2辺は、4つの線分(Ls1〜Ls4)の少なくとも一部分を構成する。なお、4つの線分(Ls1〜Ls4)は、所定ライン(水平方向)に対して傾きを有する。
【0056】
或いは、図7に示すように、テストパターン画像は、黒の背景及び白抜きの線分であってもよい。ここで、白抜きの線分は、4つの線分(Ls1〜Ls4)の少なくとも一部分を構成する。図7に示すように、4つの線分(Ls1〜Ls4)によって構成される4つの交点(Ps1〜Ps4)は、投写可能範囲410の外側に設けられてもよい。なお、4つの線分(Ls1〜Ls4)は、所定ライン(水平方向)に対して傾きを有する。
【0057】
取得部230は、撮像素子300から所定ラインに沿って出力される撮像画像を取得する。例えば、取得部230は、撮像素子300から所定ラインに沿って出力される枠検出パターン画像の撮像画像を取得する。取得部230は、撮像素子300から所定ラインに沿って出力されるフォーカス調整画像の撮像画像を取得する。取得部230は、撮像素子300から所定ラインに沿って出力されるテストパターン画像の撮像画像を取得する。或いは、取得部230は、撮像素子300から所定ラインに沿って出力される露光調整画像の撮像画像を取得してもよい。
【0058】
特定部240は、取得部230によって所定ライン毎に取得される撮像画像に基づいて、撮像画像に含まれる3つの線分を特定する。続いて、特定部240は、撮像画像に含まれる3つの線分に基づいて、撮像画像に含まれる3つ以上の交点を取得する。
【0059】
具体的には、特定部240は、以下の手順によって、撮像画像に含まれる3つ以上の交点を取得する。ここでは、テストパターン画像が図4に示す画像(白抜きの菱形)であるケースについて例示する。
【0060】
第1に、特定部240は、図8に示すように、取得部230によって所定ライン毎に取得される撮像画像に基づいて、濃淡或いは明暗の差(エッジ)を有する点群Pedgeを取得する。すなわち、特定部240は、テストパターン画像の白抜きの菱形の4辺に対応する点群Pedgeを特定する。
【0061】
第2に、特定部240は、図9に示すように、点群Pedgeに基づいて、撮像画像に含まれる4つの線分(Lt1〜Lt4)を特定する。すなわち、特定部240は、テストパターン画像に含まれる4つの線分(Ls1〜Ls4)に対応する4つの線分(Lt1〜Lt4)を特定する。
【0062】
第3に、特定部240は、図9に示すように、4つの線分(Lt1〜Lt4)に基づいて、撮像画像に含まれる4つの交点(Pt1〜Pt4)を特定する。すなわち、特定部240は、テストパターン画像に含まれる4つの交点(Ps1〜Ps4)に対応する4つの交点(Pt1〜Pt4)を特定する。
【0063】
算出部250は、テストパターン画像に含まれる3つ以上の交点(例えば、Ps1〜Ps4)及び撮像画像に含まれる3つの交点(例えば、Pt1〜Pt4)に基づいて、投写型映像表示装置100と投写面400との位置関係を算出する。具体的には、算出部250は、投写型映像表示装置100(投写ユニット110)の光軸Nと投写面400の法線Mとのずれ量を算出する。
【0064】
なお、以下においては、記憶部220に記憶されたテストパターン画像を記憶テストパターン画像と称する。撮像画像に含まれるテストパターン画像を撮像テストパターン画像と称する。投写面400に投写されたテストパターン画像を投写テストパターン画像と称する。
【0065】
第1に、算出部250は、投写テストパターン画像に含まれる4つの交点(Pu1〜Pu4)の座標を算出する。ここでは、記憶テストパターン画像の交点Ps1、撮像テストパターン画像の交点Pt1、投写テストパターン画像の交点Pu1を例に挙げて説明する。交点Ps1、交点Pt1及び交点Pu1は、互いに対応する交点である。
【0066】
以下において、交点Pu1の座標(Xu1,Yu1,Zu1)の算出方法について、図10を参照しながら説明する。交点Pu1の座標(Xu1,Yu1,Zu1)は、投写型映像表示装置100の焦点Osを原点とする3次元空間における座標であることに留意すべきである。
【0067】
(1)算出部250は、記憶テストパターン画像の2次元平面における交点Ps1の座標(xs1,ys1)について、投写型映像表示装置100の焦点Osを原点とする3次元空間における交点Ps1の座標(Xs1,Ys1,Zs1)に変換する。具体的には、交点Ps1の座標(Xs1,Ys1,Zs1)は、以下の式によって表される。
【0068】
【数1】
【0069】
なお、Asは、3×3の変換行列であり、キャリブレーション等の前処理によって予め取得することが可能である。すなわち、Asは、既知のパラメータである。
【0070】
ここでは、投写型映像表示装置100の光軸方向に垂直な面がXs軸及びYs軸で表されており、投写型映像表示装置100の光軸方向がZs軸で表されている。
【0071】
同様に、算出部250は、撮像テストパターン画像の2次元平面における交点Pt1の座標(xt1,yt1)について、撮像素子300の焦点Otを原点とする3次元空間における交点Pt1の座標(Xt1,Yt1,Zt1)に変換する。
【0072】
【数2】
【0073】
なお、Atは、3×3の変換行列であり、キャリブレーション等の前処理によって予め取得することが可能である。すなわち、Atは、既知のパラメータである。
【0074】
ここでは、撮像素子300の光軸方向に垂直な面がXt軸及びYt軸で表されており、撮像素子300の向き(撮像方向)がZt軸で表されている。このような座標空間において、撮像素子300の向き(撮像方向)の傾き(ベクトル)は既知であることに留意すべきである。
【0075】
(2)算出部250は、交点Ps1と交点Pu1とを結ぶ直線Lvの式を算出する。同様に、算出部250は、交点Pt1と交点Pu1とを結ぶ直線Lwの式を算出する。なお、直線Lv及び直線Lwの式は、以下のように表される。
【0076】
【数3】
【0077】
(3)算出部250は、投写型映像表示装置100の焦点Osを原点とする3次元空間における直線Lw’に直線Lwを変換する。直線Lw’は、以下の式によって表される。
【0078】
【数4】
【0079】
なお、投写型映像表示装置100の光軸及び撮像素子300の向き(撮像方向)は既知であるため、回転成分を示すパラメータRは既知である。同様に、投写型映像表示装置100及び撮像素子300の相対位置が既知であるため、並進成分を示すパラメータTも既知である。
【0080】
(4)算出部250は、式(3)及び式(5)に基づいて、直線Lv及び直線Lw’の交点(すなわち、交点Pu1)における媒介変数Ks及びKtを算出する。続いて、算出部250は、交点Ps1の座標(Xs1,Ys1,Zs1)及びKsに基づいて、交点Pu1の座標(Xu1,Yu1,Zu1)の座標を算出する。或いは、算出部250は、交点Pt1の座標(Xt1,Yt1,Zt1)及びKtに基づいて、交点Pu1の座標(Xu1,Yu1,Zu1)の座標を算出する。
【0081】
これによって、算出部250は、交点Pu1の座標(Xu1,Yu1,Zu1)を算出する。同様に、算出部250は、交点Pu2の座標(Xu2,Yu2,Zu2)、交点Pu3の座標(Xu3,Yu3,Zu3)、交点Pu4の座標(Xu4,Yu4,Zu4)を算出する。
【0082】
第2に、算出部250は、投写面400の法線Mのベクトルを算出する。具体的には、算出部250は、交点Pu1〜交点Pu4のうち、少なくとも3つの交点の座標を用いて、投写面400の法線Mのベクトルを算出する。投写面400の式は、以下の式によって表され、パラメータk1、k2、k3は、投写面400の法線Mのベクトルを表している。
【0083】
これによって、算出部250は、投写型映像表示装置100の光軸Nと投写面400の法線Mとのずれ量を算出することができる。すなわち、算出部250は、投写型映像表示装置100と投写面400との位置関係を算出することができる。
【0084】
なお、第1実施形態では、特定部240及び算出部250を別々に説明したが、特定部240及び算出部250は、1つの構成と考えてもよい。例えば、特定部240の機能を算出部250が有していてもよい。
【0085】
図3に戻って、素子制御部260は、映像入力信号を映像出力信号に変換して、映像出力信号に基づいて、液晶パネル50を制御する。また、素子制御部260は、以下に示す機能を有する。
【0086】
具体的には、素子制御部260は、投写型映像表示装置100と投写面400との位置関係に基づいて、投写面400上に投写された映像の形状の自動補正を行う機能を有する(形状調整)。すなわち、素子制御部260は、投写型映像表示装置100と投写面400との位置関係に基づいて、自動的に台形補正を行う機能を有する。
【0087】
投写ユニット調整部270は、投写ユニット110に設けられるレンズ群を制御する。第1に、投写ユニット調整部270は、投写ユニット110に設けられるレンズ群のシフトによって、投写面400上に設けられる表示枠420内に投写可能範囲410を収める(ズーム調整)。具体的には、投写ユニット調整部270は、投写ユニット調整部270は、取得部230によって取得される枠検出パターン画像の撮像画像に基づいて、表示枠420内に投写可能範囲410が収まるように、投写ユニット110に設けられるレンズ群を制御する。
【0088】
第2に、投写ユニット調整部270は、投写ユニット110に設けられるレンズ群のシフトによって、投写面400に投写された映像のフォーカスを調整する(フォーカス調整)。具体的には、投写ユニット調整部270は、取得部230によって取得されるフォーカス調整画像の撮像画像に基づいて、投写面400に投写された映像のフォーカス値が最大値となるように、投写ユニット110に設けられるレンズ群を制御する。
【0089】
なお、素子制御部260及び投写ユニット調整部270は、投写面400に投写された映像を調整する調整部280を構成する。
【0090】
第1実施形態では、投写型映像表示装置100は、投写面400上に枠検出パターン画像を投写して、投写面400上に設けられる表示枠420を検出する。続いて、投写型映像表示装置100は、投写面400上にフォーカス調整画像を投写して、投写面400上に投写される映像(テストパターン画像)の全体を対象として、投写面400上に投写される映像のフォーカスを調整する。続いて、投写型映像表示装置100は、投写面400上にテストパターン画像を投写して、投写型映像表示装置100と投写面400との位置関係を算出する。続いて、投写型映像表示装置100は、投写型映像表示装置100と投写面400との位置関係に基づいて、投写面400上に投写される映像の形状を調整する。
【0091】
第1実施形態では、投写型映像表示装置100は、テストパターン画像の全体を対象として、テストパターン画像に含まれる線分を特定し、投写型映像表示装置100と投写面400との位置関係を算出する(一括処理モード(第1処理モード))。すなわち、一括処理モードでは、撮像素子300は、投写可能範囲410の全体を対象としてフォーカスが調整された状態でテストパターン画像の全体を撮像し、投写型映像表示装置100は、テストパターン画像の全体の撮像画像に基づいて、テストパターン画像に含まれる3つ以上の線分を特定する。
【0092】
(投写型映像表示装置の動作)
以下において、第1実施形態に係る投写型映像表示装置(制御ユニット)の動作について、図面を参照しながら説明する。図11及び図12は、第1実施形態に係る投写型映像表示装置100(制御ユニット200)の動作を示すフロー図である。
【0093】
図11に示すように、ステップ50において、投写型映像表示装置100は、画像調整リセット処理を行う。具体的には、投写型映像表示装置100は、形状調整、ズーム調整、フォーカス調整などのパラメータ(例えば、以前のパラメータ)を初期パラメータにリセットする。
【0094】
なお、投写型映像表示装置100は、画像調整リセット処理において、投写面400上に映像の形状変化をユーザに視認させないために、図11に示すフローの開始から画像調整リセット処理(各種パラメータのリセット)を行うまで、投写面400上に映像を表示しないことが好ましい。
【0095】
ステップ100において、投写型映像表示装置100は、投写面400上に枠検出パターン画像を表示(投写)する。枠検出パターン画像は、例えば、白画像などである。
【0096】
ステップ200において、投写型映像表示装置100に設けられた撮像素子300は、投写面400を撮像する。すなわち、撮像素子300は、投写面400上に投写された枠検出パターン画像を撮像する。続いて、投写型映像表示装置100は、枠検出パターン画像の撮像画像に基づいて、投写面400上に設けられる表示枠420を検出する。
【0097】
ステップ310において、投写型映像表示装置100は、テストパターン画像の全体を対象として、テストパターン画像に含まれる線分を特定し、投写型映像表示装置100と投写面400との位置関係を算出する(一括処理モード)。なお、一括処理モードの詳細については後述する(図12を参照)。
【0098】
ステップ400において、投写型映像表示装置100は、投写型映像表示装置100と投写面400との位置関係に基づいて、投写面400上に投写される映像の形状を調整する(台形補正)。
【0099】
図12に示すように、ステップ311において、投写型映像表示装置100は、投写面400上にフォーカス調整画像を表示(投写)する。フォーカス調整画像は、例えば、白のストライプ及び黒のストライプが交互に配置された画像などである。
【0100】
ステップ312において、投写型映像表示装置100に設けられた撮像素子300は、投写面400を撮像する。すなわち、撮像素子300は、投写面400上に投写されたフォーカス調整画像を撮像する。
【0101】
ステップ313において、投写型映像表示装置100は、投写面400に投写されたフォーカス調整画像のフォーカス値を算出する。
【0102】
ステップ314において、投写型映像表示装置100は、フォーカス調整画像の全体を対象として、フォーカス調整画像のフォーカス値が最大値であるか否かを判定する。投写型映像表示装置100は、フォーカス値が最大値である場合に、ステップ316の処理に移る。投写型映像表示装置100は、フォーカス値が最大値でない場合に、ステップ315の処理に移る。
【0103】
ステップ315において、投写型映像表示装置100は、投写可能範囲410の全体を対象として、投写面400に投写されたフォーカス調整画像のフォーカスを調整する。具体的には、投写型映像表示装置100は、フォーカス調整画像の撮像画像に基づいて、投写ユニット110に設けられるレンズ群をシフトする。
【0104】
すなわち、投写型映像表示装置100は、ステップ312〜ステップ315のループ処理によって、フォーカス調整画像の全体を対象としてフォーカス値が最大値となるように、フォーカス調整画像のフォーカスを調整する。
【0105】
ステップ316において、投写型映像表示装置100は、投写面400上にテストパターン画像を表示(投写)する。
【0106】
ステップ317において、投写型映像表示装置100に設けられた撮像素子300は、投写面400を撮像する。すなわち、撮像素子300は、投写面400上に投写されたテストパターン画像を撮像する。
【0107】
ステップ318において、投写型映像表示装置100は、撮像テストパターン画像の全体を対象として、撮像テストパターン画像に含まれる4つの線分(Lt1〜Lt4)を特定する。
【0108】
ステップ319において、投写型映像表示装置100は、4つの線分(Lt1〜Lt4)に基づいて、撮像テストパターン画像に含まれる4つの交点(Pt1〜Pt4)を特定する。
【0109】
ステップ320において、投写型映像表示装置100は、記憶テストパターン画像に含まれる4つの交点(Ps1〜Ps4)及び撮像テストパターン画像に含まれる4つの交点(Pt1〜Pt4)に基づいて、投写型映像表示装置100と投写面400との位置関係を算出する。
【0110】
(モード切替例1)
以下において、第1実施形態に係る投写型映像表示装置(制御ユニット)のモード切替動作について、図面を参照しながら説明する。図13は、第1実施形態に係る投写型映像表示装置100(制御ユニット200)の動作を示すフロー図である。
【0111】
上記のように、形状調整、ズーム調整、フォーカス調整を行うための各種画像を投写したときに、外光(太陽光や室内灯による光)が明るい場合や、投写型映像表示装置100から投写面400までの距離(投写距離)が長い場合に、撮像素子300によって撮像された画像のコントラストが低下する。これは、上記各調整のための検出精度を低下させる原因となる。
【0112】
そこで、上記各調整を行う前に、具体的には、図13に示すように、ステップ50とステップ100との間において、投写型映像表示装置100の運転モードを切り替える。
【0113】
ステップ510において、投写型映像表示装置100は、高輝度となる設定になっているか否かを判断する。高輝度設定とは、具体的には、図14に示すように、光源10が複数のUHPランプからなる場合(多灯式)には全てのランプを点灯させる状態、あるいは、光源10から液晶パネル50R,50G,50Bまでの間にアイリスやメカシャッタ90が挿入されている場合にはこれらの遮光手段(調光手段)を全開とする状態である。
【0114】
投写型映像表示装置100は、高輝度設定である場合に、ステップ100の処理に移る。投写型映像表示装置100は、高輝度設定でない場合に、光源10の全てのランプを点灯させるか、あるいは、メカシャッタ90を全開にするステップ520の処理に移る。
【0115】
最後に、ステップ400において、投写型映像表示装置100は、台形補正を行うと共に、ステップ510において高輝度設定ではなかった場合には元の設定に戻す。
【0116】
(モード切替例2)
以下において、第1実施形態に係る投写型映像表示装置(制御ユニット)のモード切替例2について、図面を参照しながら説明する。図15は、モード切替例2に係る制御ユニット200の動作を示すフロー図である。
【0117】
ステップ610において、投写型映像表示装置100は、高輝度駆動となる設定になっているか否かを判断する。高輝度駆動設定とは、具体的には、図16に示すように、光源10が複数の固体光源からなる場合、所定のDuty比以上で固体光源を駆動している状態、あるいは、所定の閾値以上の電流値で固体光源を駆動している状態である。
【0118】
投写型映像表示装置100は、高輝度駆動設定である場合に、ステップ100の処理に移る。投写型映像表示装置100は、高輝度駆動設定でない場合に、光源10の全ての固体光源を高輝度駆動させるステップ620の処理に移る。
【0119】
最後に、ステップ400において、投写型映像表示装置100は、台形補正を行うと共に、ステップ510において高輝度駆動設定ではなかった場合には元の設定に戻す。
【0120】
(モード切替例3)
以下において、第1実施形態に係る撮像素子(制御ユニット)のモード切替例3について、図面を参照しながら説明する。図17は、モード切替例3に係る制御ユニット200の動作を示すフロー図である。
【0121】
モード切替例3では、投写型映像表示装置100ではなく、撮像素子300の撮像動作を切り替える。具体的には、図17に示すように、概略処理モードの中のステップ317に代えて、露光調整と撮像とを繰り返す。
【0122】
ステップ710において、撮像素子300は、任意のエッジ近傍に設定されたサンプル領域(図18の領域A,B,C,D)を撮像する。このとき、第1回の撮像では、撮像素子300の露光状態を高い状態に設定しておく。各サンプル領域を撮像した後、ステップ720の処理に移行する。
【0123】
ステップ720において、撮像素子300は、露光状態を中程度に設定し、ステップ710の処理に移行する。第2回の撮像では、中程度の露光状態にてサンプル領域A,B,C,Dを撮像し、ステップ720の処理に移行する。
【0124】
再度、ステップ720において、撮像素子300は、露光状態を低い状態に設定し、ステップ710の処理に移行する。第3回の撮像では、低い露光状態にてサンプル領域A,B,C,Dを撮像する。
【0125】
モード切替例3では、上記のように、例えば、3段階の露光調整と3回の撮像とを繰り返すことにより、適切なコントラストのテストパターン画像を撮像し、台形補正を行う。サンプル領域A,Cでは、第2回の撮像(中程度の露光状態)にて得られた撮像画像を用いて位置関係の算出を行うことができるが、サンプル領域Bでは第3回の撮像(低い露光状態)にて得られた撮像画像、サンプル領域Dでは第1回の撮像(高い露光状態)にて得られた撮像画像を用いる方が正確な位置関係の算出が可能になる。
【0126】
(作用及び効果)
第1実施形態では、撮像素子が所定パターン画像(枠検出パターン画像、テストパターン画像、フォーカス調整画像)を撮像するときに、撮像画像のコントラストを高くする処理を行う。これにより、撮像画像から正確に投写型映像表示装置100と投写面400との位置関係を算出することができるので、映像の形状を精度よく調整することができる。
【0127】
具体的には、モード切替例1およびモード切替例2のように、光源の光量を上げる、遮光手段(調光手段)を開状態とする、より光量が得られる駆動方法で光源を駆動する、といった処理を行うことにより、光変調素子に入射する光の光量を増加させる。これにより、投写面に投写されるパターン画像のコントラストが向上するので、撮像素子によって撮像される撮像画像のコントラストも向上させることができる。
【0128】
あるいは、モード切替例3のように、撮像素子の露光時間を長くすることも有効である。これにより、撮像素子によって撮像される撮像画像のコントラストを向上させることができる。
【0129】
[その他の実施形態]
本発明は上述した実施形態によって説明したが、この開示の一部をなす論述及び図面は、この発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施形態、実施例及び運用技術が明らかとなろう。
【0130】
上述した実施形態では、光源として、白色光源を例示した。しかしながら、光源は、LED(Laser Emitting Diode)やLD(Laser Diode)であってもよい。
【0131】
上述した実施形態では、光変調素子として、透過型の液晶パネルについて例示した。しかしながら、光変調素子は、反射型の液用パネルやDMD(Digital Micromirror Device)であってもよい。
【0132】
上述した実施形態では特に触れていないが、モード切替例は、複数の例を組み合わせであってもよい。
【0133】
変更例3では、分割処理モードとして、変更例1に示すフォーカス調整を例示した。しかしながら、実施形態は、これに限定されるものではない。変更例3において、分割処理モードとして、変更例2に示す露光時間調整を適用してもよい。
【0134】
上述した実施形態では特に触れていないが、素子制御部260は、表示枠420が検出されてから、テストパターン画像が表示されるまで、映像を表示しないように液晶パネル50を制御することが好ましい。
【0135】
上述した実施形態では特に触れていないが、素子制御部260は、撮像テストパターン画像に含まれる3つ以上の交点が取得されてから、投写面400上に投写される映像の形状が補正されるまで、映像を表示しないように液晶パネル50を制御することが好ましい。
【0136】
上述した実施形態では特に触れていないが、素子制御部260は、テストパターン画像とともに、テストパターン画像以外の所定画像(例えば、背景画像)を表示するように液晶パネル50を制御することが好ましい。
【0137】
例えば、撮像素子300によって検出可能な色や輝度によってテストパターン画像が構成されており、撮像素子300によって検出できない色や輝度によってテストパターン画像以外の所定画像が構成される。
【0138】
或いは、赤、緑及び青のうち、いずれかの色によってテストパターン画像が構成されており、他の色によってテストパターン画像以外の所定画像が構成される。撮像素子300は、テストパターン画像を構成する色のみを検出することによって、テストパターン画像の撮像画像を取得することができる。
【0139】
また、映像信号が入力されていない場合には、素子制御部260は、テストパターン画像とともに、所定画像としてエラーメッセージを表示するように液晶パネル50を制御してもよい。或いは、テストパターン画像に含まれる線分或いは交点を特定することができない場合に、素子制御部260は、所定画像としてエラーメッセージを表示するように液晶パネル50を制御してもよい。
【0140】
実施形態では、投写型映像表示装置100は、表示枠420の検出後に、フォーカスを調整する。しかしながら、実施形態は、これに限定されるものではない。例えば、投写型映像表示装置100は、表示枠420を検出せずに、フォーカスを調整してもよい。具体的には、通常の使用態様では、投写可能範囲410の中心部分が表示枠420内に含まれることが想定されるため、投写型映像表示装置100は、投写可能範囲410の中心部分にフォーカス調整画像を表示するとともに、投写可能範囲410の中心部分に表示される映像(フォーカス調整画像)のフォーカスを調整してもよい。
【0141】
実施形態では、テストパターン画像のうち、背景部分が黒であり、パターン部分が白である。しかしながら、実施形態は、これに限定されるものではない。例えば、背景部分が白であり、パターン部分が黒であってもよい。背景部分が青であり、パターン部分が白であってもよい。すなわち、エッジ検出が可能な程度、背景部分とパターン部分との間に輝度差があればよい。なお、エッジ検出が可能な程度は、撮像素子300の精度に応じて定められる。背景部分とパターン部分との間の輝度差が大きいほど、撮像素子300の精度が必要とされないため、撮像素子300のコストを低減できることは勿論である。また、各種のパターン画像についても、特徴点が抽出可能な画像であれば、特別なパターン画像ではなく、映像入力信号からの映像を用いても良い。
【0142】
上述した実施形態では、投写型映像表示装置100は、分割処理モードにおいて、フォーカス調整(或いは、露光調整)を行って線分を特定するまでの処理を対象領域毎に行う。しかしながら、実施形態は、これに限定されるものではない。投写型映像表示装置100は、分割処理モードにおいて、フォーカス調整(或いは、露光調整)を対象領域毎に行って、フォーカス値(或いは、露光値)を対象領域毎に記憶した上で、フォーカス値(或いは、露光値)を対象領域毎に変更しながら、各対象領域に含まれる線分を特定してもよい。
【符号の説明】
【0143】
10…光源、20…UV/IRカットフィルタ、30…フライアイレンズユニット、40…PBSアレイ、50…液晶パネル、52、53…偏光板、60…クロスダイクロイックキューブ、71〜76…ミラー、81〜85…レンズ、100…投写型映像表示装置、110…投写ユニット、120…照明ユニット、200…制御ユニット、210…映像信号受付部、220…記憶部、230…取得部、240…特定部、250…算出部、260…素子制御部、270…投写ユニット制御部、280…調整部、290…露光時間調整部、295…モード制御部、300…撮像素子、400…投写面、410…投写可能範囲、420…表示枠
【特許請求の範囲】
【請求項1】
光源から出射される光を変調する光変調素子と、前記光変調素子から出射される光を投写面上に投写する投写ユニットとを有する投写型映像表示装置であって、
所定のパターン画像を表示するように前記光変調素子を制御する素子制御部と、前記投写面上に投写された前記所定パターン画像を撮像する撮像素子と、前記撮像素子によって撮像された撮像画像に基づいて、前記投写型映像表示装置と前記投写面との位置関係を算出する算出部と、前記算出部によって算出された位置関係に基づいて、前記投写面上に投写される映像を調整する調整部と、を備え、
前記撮像素子が前記所定パターン画像を撮像するときに、前記撮像画像のコントラストを高くする処理を行うことを特徴とする投写型映像表示装置。
【請求項2】
請求項1記載の投写型映像表示装置において、
前記処理は、前記光変調素子に入射する光の光量を増加させる処理であることを特徴とする投写型映像表示装置。
【請求項3】
請求項1記載の投写型映像表示装置において、
前記処理は、前記撮像素子の露光時間を増加させる処理であることを特徴とする投写型映像表示装置。
【請求項4】
光源から出射される光を変調する光変調素子と、前記光変調素子から出射される光を投写面上に投写する投写ユニットとを有する投写型映像表示装置に適用される画像調整方法であって、
所定のパターン画像を前記投写面上に表示する表示ステップと、
前記投写面上に投写された前記所定パターン画像を撮像する撮像ステップと、
前記撮像ステップにおいて撮像された撮像画像に基づいて、前記投写型映像表示装置と前記投写面との位置関係を算出する算出ステップと、
前記算出ステップにおいて算出された位置関係に基づいて、前記投写面上に投写される映像を調整する調整ステップと、を備え、
前記撮像素子が前記所定パターン画像を撮像するときに、前記撮像画像のコントラストを高くするステップを含むことを特徴とする画像調整方法。
【請求項1】
光源から出射される光を変調する光変調素子と、前記光変調素子から出射される光を投写面上に投写する投写ユニットとを有する投写型映像表示装置であって、
所定のパターン画像を表示するように前記光変調素子を制御する素子制御部と、前記投写面上に投写された前記所定パターン画像を撮像する撮像素子と、前記撮像素子によって撮像された撮像画像に基づいて、前記投写型映像表示装置と前記投写面との位置関係を算出する算出部と、前記算出部によって算出された位置関係に基づいて、前記投写面上に投写される映像を調整する調整部と、を備え、
前記撮像素子が前記所定パターン画像を撮像するときに、前記撮像画像のコントラストを高くする処理を行うことを特徴とする投写型映像表示装置。
【請求項2】
請求項1記載の投写型映像表示装置において、
前記処理は、前記光変調素子に入射する光の光量を増加させる処理であることを特徴とする投写型映像表示装置。
【請求項3】
請求項1記載の投写型映像表示装置において、
前記処理は、前記撮像素子の露光時間を増加させる処理であることを特徴とする投写型映像表示装置。
【請求項4】
光源から出射される光を変調する光変調素子と、前記光変調素子から出射される光を投写面上に投写する投写ユニットとを有する投写型映像表示装置に適用される画像調整方法であって、
所定のパターン画像を前記投写面上に表示する表示ステップと、
前記投写面上に投写された前記所定パターン画像を撮像する撮像ステップと、
前記撮像ステップにおいて撮像された撮像画像に基づいて、前記投写型映像表示装置と前記投写面との位置関係を算出する算出ステップと、
前記算出ステップにおいて算出された位置関係に基づいて、前記投写面上に投写される映像を調整する調整ステップと、を備え、
前記撮像素子が前記所定パターン画像を撮像するときに、前記撮像画像のコントラストを高くするステップを含むことを特徴とする画像調整方法。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【公開番号】特開2013−98712(P2013−98712A)
【公開日】平成25年5月20日(2013.5.20)
【国際特許分類】
【出願番号】特願2011−239039(P2011−239039)
【出願日】平成23年10月31日(2011.10.31)
【出願人】(000001889)三洋電機株式会社 (18,308)
【Fターム(参考)】
【公開日】平成25年5月20日(2013.5.20)
【国際特許分類】
【出願日】平成23年10月31日(2011.10.31)
【出願人】(000001889)三洋電機株式会社 (18,308)
【Fターム(参考)】
[ Back to top ]