画像補正回路、撮影装置および画像補正プログラム
【課題】機械シャッターの動作特性に起因した露光量のばらつきを抑制する。
【解決手段】複数の光電変換素子の露光時間を制御する機械シャッターを用いて撮影された画像を取得する画像取得部と、前記画像を補正する補正部とを備え、前記補正部は、画像における画素の位置ごとに補正量を規定したＬＵＴ（Ｌｏｏｋ Ｕｐ Ｔａｂｌｅ）や補正量を与える関数などの補正規則を生成して、前記機械シャッターの動作特性に基づいて画像を補正する。
【解決手段】複数の光電変換素子の露光時間を制御する機械シャッターを用いて撮影された画像を取得する画像取得部と、前記画像を補正する補正部とを備え、前記補正部は、画像における画素の位置ごとに補正量を規定したＬＵＴ（Ｌｏｏｋ Ｕｐ Ｔａｂｌｅ）や補正量を与える関数などの補正規則を生成して、前記機械シャッターの動作特性に基づいて画像を補正する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、露光時間を機械シャッターにより制御して撮影された画像を補正する技術に関する。
【背景技術】
【０００２】
従来、複数の光電変換素子における露光を開始させるタイミングを電子シャッターにより制御し、露光を終了させるタイミングを機械シャッターにより制御する撮影装置が提案されている（特許文献１〜３、参照）。このような撮影装置においては、機械シャッターが露光を終了させるタイミングに追従するように、電子シャッターが露光を開始させるタイミングを制御することにより、各光電変換素子についての露光時間の均一化を図っていた。なお、一般に、電子シャッターは、複数の光電変換素子が直線状に配列するライン単位で露光を開始させるタイミングを制御する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平１１−４１５２３号公報
【特許文献２】特開２００６−１０１４９２号公報
【特許文献３】特開２００８−１４７９７９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、機械シャッターが露光を終了させるタイミングは遮光幕の運動に依存し、非線形特性を有するため、機械シャッターが露光を終了させるタイミングに追従するように、電子シャッターが露光を開始させるタイミングを制御することは困難となる。すなわち、非線形特性を有するタイミングで電子シャッターを動作させなければならず、電子シャッター動作時における電子シャッター制御回路の処理負荷が大きくなるという問題があった。また、光電変換素子が配列する素子面において、ラインに交差するように機械シャッターが遮光領域の境界を形成する場合、ラインに属する光電変換素子間で露光時間のばらつきが生じることとなる。このような場合、電子シャッターがライン単位で露光を開始するタイミングを制御しても、ラインに属する光電変換素子間での露光時間のばらつきに起因した露光量のばらつきを抑制することができないという問題があった。
本発明は、前記課題にかんがみてなされたもので、機械シャッターの動作特性に起因した露光量のばらつきを抑制することを目的とする。
【課題を解決するための手段】
【０００５】
前記目的を達成するため本発明において、画像取得部は、複数の光電変換素子における露光時間を制御する機械シャッターを用いて撮影された画像を取得する。補正部は、機械シャッターの動作特性に基づいて画像を補正する。これにより、撮影後の画像の補正により、機械シャッターの動作特性に起因して生じる露光量のばらつき等を抑制することができる。画像の補正においては、光電変換素子のラインの方向に制約されることなく画像を補正できる。また、補正を画像の撮影後に行うことができ、電子シャッター動作時において電子シャッターの動作タイミングを複雑に制御しなくても済む。
【０００６】
ここで、画像取得部は、露光時間が少なくとも機械シャッターにより制御された画像を取得すればよく、画像補正回路は機械シャッターを備えた撮影装置に備えられていてもよいし、当該撮影装置とは別の装置に備えられていてもよい。後者の場合、補正部は機械シャッターの動作特性に基づく補正を行うにあたり、機械シャッターの動作特性を示す情報を例えば画像の添付情報や撮影装置との通信等によって取得すればよい。さらに、撮影装置は、例えばカメラ付携帯電話やカメラ付パーソナルコンピューターのように画像の撮影する機能のみならず、他の機能も有する装置であってもよい。また、機械シャッターの動作特性を示す情報は、動作特性を直接示してもよいし、撮影装置の機種や機械シャッターの機構等を示すものであってもよい。また、補正部は、機械シャッターの動作特性に基づいて画像の補正規則を生成してもよいし、予め機械シャッターの動作特性に基づいて作成された補正規則を取得してもよい。この補正規則は、例えば画像における画素の位置ごとに補正量を規定したＬＵＴ（Look Up Table）であってもよいし、画像における画素の位置を変数として補正量を与える関数であってもよい。
【０００７】
複数の光電変換素子における露光時間のばらつきは、電子先幕−機械後幕シャッター方式によって撮影された画像において顕著に生じ得る。
なお、電子先幕−機械後幕シャッター方式とは、以下のとおりである。まず、電子シャッターにより、複数の光電変換素子に露光を開始させるタイミングを制御する。具体的には、光電変換素子における電荷の蓄積を開始させることにより、露光を開始させる。そして、機械シャッターによる遮光部の移動により、遮光領域の境界を複数の光電変換素子の素子面上において移動させて複数の光電変換素子を遮光していくことにより、複数の光電変換素子に露光を終了させるタイミングを制御する。なお、本明細書において露光とは、光電変換素子に撮影光が到達し、かつ、当該撮影光の光量に応じて光電変換素子が電荷を蓄積する状態を意味する。
【０００８】
このような電子先幕−機械後幕シャッター方式においては、各光電変換素子における露光の開始と終了とが互いに異なる機構により実現される。すなわち、電子シャッターの動作特性と機械シャッターの動作特性とが相違し、当該相違は露光量にばらつきを生じさせる主要な要因となり得る。そのため、電子シャッターの動作特性と機械シャッターの動作特性との相違に基づく補正を行うことにより、効果的に露光量のばらつきを抑制することができる。
【０００９】
露光量にばらつきを生じさせる要因となる動作特性の例として、各光電変換素子に露光の開始と終了とをさせるタイミングの特性が挙げられる。機械シャッターによる露光の終了は遮光部を機械的に運動させることにより実現されるため、機械シャッターによる露光終了のタイミングの特性は遮光部の加速運動特性に依存する。これに対して、電子シャッターによる露光開始のタイミングは遮光部の運動特性に依存しないため、機械シャッターが各光電変換素子に露光を終了させるタイミングの特性と相違する。電子シャッターが各光電変換素子に露光を開始させるタイミングの特性と、機械シャッターが各光電変換素子に露光を終了させるタイミングの特性とが相違する場合、露光の開始から終了までの期間である露光時間が各光電変換素子においてばらつくからである。露光時間が長いほど露光量も増加するため、露光時間がばらつけば露光量もばらつくこととなる。そこで、電子シャッターのタイミングの特性と、機械シャッターのタイミングの特性との相違に基づいて、露光時間が短くなる光電変換素子ほど露光量を大きくする補正を行うことにより、露光量のばらつきを抑制するのが望ましい。
【００１０】
ところで、従来技術のように機械シャッターが露光を終了させるタイミングに追従するように電子シャッターが露光を開始させるタイミングを制御することにより、露光時間の均一化を図ることができる。ところが、機械シャッターの遮光部が光電変換素子の素子面上に形成する遮光領域の境界が、電荷の蓄積を開始させるための配線が共通する複数の光電変換素子が直線状に配列するラインに交差する場合には、従来技術の手法では露光時間を均一化することができない。ラインに遮光領域の境界が交差する場合、単一のラインに属する光電変換素子間で露光時間にばらつきが生じ、ライン単位で露光を開始させるタイミングを制御しても光電変換素子間での露光時間のばらつきの影響は抑制できないからである。このような場合においても、ライン内における少なくとも２つの光電変換素子について互いに異なる補正を行うことにより、単一のラインに属する複数の光電変換素子間の露光時間のばらつきの影響を抑制する補正が可能である。なお、補正部は、画像を画素単位で補正してもよいし、所定数の画素で構成されるブロック単位で画像を補正してもよい。
【００１１】
ラインに遮光領域の境界が交差し得る機械シャッターのシャッター機構の例として、例えば遮光部が所定の回転軸まわりに回転移動するシャッター機構や、遮光されない領域を素子面上の一点に絞り込んで行くシャッター機構等においては、遮光領域の境界の方向が一定とならないため、遮光領域の境界がラインに交差する。
なお、従来技術のように、機械シャッターが露光を終了させるタイミングに追従するように電子シャッターが露光を開始させるタイミングを制御した上で、補正部による画像の補正を行ってもよい。
【００１２】
電子シャッターの場合、素子面上に配列された各光電変換素子を、直接、電子制御することにより、各光電変換素子の露光状態を制御する。すなわち、電子シャッターは、素子面上において実質的に撮影光を遮光することにより、各光電変換素子の露光状態を制御する。一方、機械シャッターは遮光部により撮影光を遮光するが、当該遮光部が撮影光を遮光する光軸方向の位置は、通常、素子面上とはならない。遮光部と素子面との摩擦抵抗の発生を防止したり、素子面上の光電変換素子の破損を防止する必要があるからである。素子面上と異なる位置にて撮影光を遮光する機械シャッターは、素子面上の光電変換素子に集光されてない状態の撮影光を遮光することとなる。すなわち、ある光電変換素子に集光される撮影光を遮光するにあたり、機械シャッターはある程度の幅を有する当該撮影光の光束を遮光することとなる。従って、機械シャッターの動作により、ある光電変換素子に集光される撮影光が徐々に絞り込まれていき、最終的に当該光電変換素子に集光された撮影光が完全に遮光された段階で、当該光電変換素子の露光が終了することとなる。ここで、各光電変換素子に集光される撮影光の光束が機械シャッターによって絞り込まれない期間よりも、絞り込まれる期間の方が単位時間あたりの露光量は小さくなる。従って、各光電変換素子に集光される撮影光の光束が機械シャッターによって徐々に絞り込まれる期間の長さがばらつけば、各光電変換素子における露光量もばらつくこととなる。撮影光の光束が機械シャッターの遮光部によって徐々に絞り込まれる期間は遮光部の位置における光束の幅に依存し、当該光束の幅は光軸方向における遮光部と素子面との距離に依存する。そのため、補正部は、遮光部と素子面との距離に応じた補正により露光量のばらつきを抑制するのが望ましい。
【００１３】
ところで、機械シャッターの動作特性は、撮影時における動作履歴や動作環境にも依存する。例えば、遮光部をばね力により動作させる場合において、遮光部の動作前に電磁石がばね力に抗して遮光部を保持していた期間に応じて、電磁石の加熱や遮光部の磁化などにより遮光部の速度特性や加速度特性が変化する。さらに、ばねの機械特性は、機械シャッターの使用や時間の経過により変化するため、機械シャッターの動作回数や製造時期等が異なる場合にも、機械シャッターの動作特性が異なることとなる。従って、補正部は、過去の動作期間の長さや動作回数や製造時期からの経過時間等を示す機械シャッターの動作履歴情報に応じて画像を補正するのが望ましい。さらに、撮影時における機械シャッターの温度や湿度等に応じても機械シャッターの動作特性が変化する。従って、補正部は、機械シャッターの温度や湿度等を示す動作環境情報に応じて画像を補正するのが望ましい。
【００１４】
光電変換素子ごとに露光の終了から露光量の読み出しを行うまでの待機時間がばらつく場合には、待機時間が長いほど露光量から待機時間に相当する露光量分を小さくする補正を行ってもよい。これにより、待機時間において光電変換素子にわずかに蓄積される暗電流による電荷の影響を抑制できる。
【００１５】
本発明の画像補正回路は単独の装置として実現されるものに限らず、本発明の画像補正回路が備える各手段が撮影装置に備えられてもよい。また、請求項に記載された各手段の機能は、構成自体で機能が特定されるハードウェア資源、プログラムにより機能が特定されるハードウェア資源、またはそれらの組み合わせにより実現される。また、これら各手段の機能は、各々が物理的に互いに独立したハードウェア資源で実現されるものに限定されない。さらに、本発明は画像補正プログラムの記録媒体としても成立する。むろん、そのコンピュータープログラムの記録媒体は、磁気記録媒体であってもよいし光磁気記録媒体であってもよいし、今後開発されるいかなる記録媒体であってもよい。
【図面の簡単な説明】
【００１６】
【図１】デジタルカメラを示すブロック図である。
【図２】エリアイメージセンサーの模式図である。
【図３】露光のタイミングを示すグラフである。
【図４】露光のタイミングを示すグラフである。
【図５】光束が絞られる様子を示す模式図およびグラフである。
【図６】エリアイメージセンサーおよび遮光幕の模式図である。
【図７】露光のタイミングを示すグラフである。
【図８】撮像データを読み出すタイミングを示すグラフである。
【発明を実施するための形態】
【００１７】
以下、本発明の実施の形態を添付図面を参照しながら以下の順に説明する。なお、各図において対応する構成要素には同一の符号が付され、重複する説明は省略される。
（１）撮影装置の構成：
（２）ＬＵＴの構成：
（３）変形例１：
（４）変形例２：
（５）変形例３：
（６）変形例４：
（７）変形例５：
（８）変形例６：
（９）変形例７：
（１０）変形例８：
【００１８】
（１）撮影装置の構成：
図１は本発明の一実施形態にかかる画像補正回路を含む撮影装置１である。本実施形態にかかる撮影装置１は、ＥＶＦ（Electronic View Finder）を備えたミラーレスデジタルカメラである。撮影装置１は、光学系１０とエリアイメージセンサー１５とＡＳＩＣ２００とタイミングジェネレーター３０と表示部４０とＣＰＵ５０とＳＤ−ＲＡＭ５２とＲＯＭ５３とＲＡＭ５４と操作部５５とリムーバルメモリー５６とを備えている。ＣＰＵ５０は、ＳＤ−ＲＡＭ５２とＲＡＭ５４を適宜利用してＲＯＭ５３に記録されたプログラムを実行する。当該プログラムの機能によりＣＰＵ５０は、操作部５５に対する操作に応じてエリアイメージセンサー１５にて撮影された被写体を示す画像データを生成する機能を実行する。なお、操作部５５はシャッターボタンと、露光時間（シャッター速度）を設定するためのダイヤルスイッチとを備えている。
【００１９】
光学系１０は、レンズ１１と絞り１２と機械シャッター１３とローパスフィルター１４とを備える。レンズ１１は撮影光を集光してエリアイメージセンサー１５に被写体の画像を結像させる。絞り１２は、撮影光の光束を絞り込んで撮影光量を調整する。なお、露光時間は、ダイヤルスイッチに対する操作以外に、絞り優先の場合における絞り１２の設定にも依存して設定される。レンズ１１と絞り１２とは交換式レンズユニットに備えられ、当該交換式レンズユニットは撮影装置１の筐体に交換可能に取り付けられる。ローパスフィルター１４は、撮影光のエリアイメージセンサー１５における空間的高周波数成分を遮断することにより、撮影した画像におけるモアレを防止する。
【００２０】
図２Ａは、エリアイメージセンサー１５の素子面の一部を正面から見て示す模式図である。エリアイメージセンサー１５は、例えばベイヤー配列されたカラーフィルターと、露光量に応じた電荷を蓄積する複数の光電変換素子とが所定の素子面に配列したＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサーやＣＣＤ（Charge Coupled Device）イメージセンサー等の固体撮像素子である。本実施形態では、ＣＭＯＳイメージセンサーを使用した場合を例にして、以下説明する。図２において各光電変換素子を正方形で示し、正方形の内側には各光電変換素子に対応して備えられるカラーフィルターの色（３チャネル：Ｒ（赤），Ｇ（緑），Ｂ（青））を示す。エリアイメージセンサー１５の素子面上における複数の光電変換素子の配列位置は直交座標で規定され、一方の座標軸に平行な方向に並ぶ複数の光電変換素子によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように配列されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼ぶ。
【００２１】
本実施例におけるエリアイメージセンサー１５においては、ライン単位で光電変換素子に蓄積された電荷のリセット（放電）ができる。すなわち、同一のラインに属する複数の光電変換素子においては互いに同時に電荷がリセットされ、リセットの解除動作により互いに同時に電荷の蓄積が開始する。光電変換素子における電荷の蓄積の開始は、光電変換素子における露光の開始を意味する。例えば、各光電変換素子はソース−ドレイン間の導通により電荷を放電させるリセット用電界効果トランジスターを備えるとともに、同一のラインに属する各光電変換素子においてはリセット用電界効果トランジスターのゲートに電圧を印加するための配線が共通する。エリアイメージセンサー１５は、光電変換素子に蓄積された電荷をライン単位で読み出す。なお、エリアイメージセンサー１５は、必要な画質や速度に応じて、全ラインから読み出すことをせずに、間欠読み出しを行うことができる。そして、光電変換素子で、電荷の読み出しが行われた場合にも電荷がリセットされる。エリアイメージセンサー１５は、読み出した電荷に対応する露光量の階調値をＡ／Ｄ変換器等によりＡ／Ｄ変換して各画素に対応付けた撮像データを生成する。この撮像データは、本発明の画像に相当する。撮像データの画素は光電変換素子に一意に対応する。エリアイメージセンサー１５から読み出された撮像データは、ＳＤ−ＲＡＭ５２にバッファーされ、後述のＡＳＩＣ２００によって撮像データに対する各種画像処理が実行される。
【００２２】
図２Ｂは、エリアイメージセンサー１５の素子面の全体を正面から見て示す模式図である。各ラインには垂直方向の上方になるにつれて１ずつ増加するライン番号Ｌ（１〜Ｌmax）が付され、ラインに直交する垂直方向の列には水平方向右側になるにつれて１ずつ増加する列番号Ｃ（１〜Ｃmax）が付される。また、垂直方向中央のラインのライン番号ＬをＬmidとし、水平方向中央の列を列番号ＣをＣmidと表す。機械シャッター１３は、複数の光電変換素子が配列されたエリアイメージセンサー１５の素子面に対してほぼ平行な平面板状の遮光部としての遮光幕（図１においてハッチングで図示。）を備える。この遮光幕により、複数の光電変換素子が配列されたエリアイメージセンサー１５の素子面上に露光領域Ｒ１と遮光領域Ｒ２とを形成する。すなわち、エリアイメージセンサー１５の素子面上における遮光幕の陰影が遮光領域Ｒ２をなす。機械シャッター１３は、以下のようにして遮光幕を動作させる。
【００２３】
本実施形態の機械シャッター１３は、ノーマルオープン型であり、撮影装置１の電源ＯＦＦの状態において、遮光幕は係止レバーにより係止されるとともに永久磁石により吸着保持される。遮光幕は、撮影光の全体を遮光する位置に遮光幕を引きつけるばねのばね力に抗し、係止レバーの係止および永久磁石の吸着により撮影光の光路の外側に係止される。そして、撮影装置１の電源ＯＮの状態において、係止レバーによる遮光幕の係止を解除する。係止レバーによる遮光幕の係止が解除されても、永久磁石により遮光幕が吸着保持され、ばね力に抗する遮光幕の保持が継続する。そして、シャッターボタンが押下されると、電子シャッター制御部３０ａ１により各光電変換素子における露光を開始させ、さらに露光の開始から露光時間に対応する期間が経過すると、遮光幕を吸着する永久磁石の磁力を打ち消す磁力を生じさせる電磁石へ電流を供給し、永久磁石による遮光幕の吸着保持を解除する。これにより、遮光幕はばね力により移動させられ、遮光幕が撮影光の全体を遮光する位置に移動する。
【００２４】
図２Ｂにおいては、機械シャッター１３がばね力により遮光幕を移動させることにより、エリアイメージセンサー１５の素子面上において露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが移動する様子を模式的に示している。本実施形態では、ばねが遮光幕を上方に引きつけることにより、シャッターが閉じる際に露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが下方から上方に向かって（破線矢印の方向に）移動することとする。遮光幕の移動によって光電変換素子に境界Ｂが到達することにより、当該光電変換素子の露光が終了する。本実施形態の機械シャッター１３では、エリアイメージセンサー１５の素子面の右側に設けられた図示しない回転軸を中心として遮光幕が回転移動可能に支持されている。本実施形態では、垂直方向中央のラインに境界Ｂが到達したとき境界Ｂとラインとが平行となる。垂直方向中央のラインに境界Ｂが到達するまでは、境界Ｂは右肩上がりに傾斜し、徐々にラインと平行に近づいていく。垂直方向中央のラインに境界Ｂが到達すると、境界Ｂは徐々に右肩下がりの傾斜角を増していく。すなわち、エリアイメージセンサー１５の素子面上における境界Ｂの方向は一定とはならず、基本的にラインに対して境界Ｂが交差する。なお、遮光幕の回転軸をエリアイメージセンサー１５の素子面から十分に遠い位置に設ければ各ラインと境界Ｂとが平行であると見なせるが、本実施形態では撮影装置１の小型化や機械シャッター１３の動作高速化等の要請により境界Ｂがラインに交差し得る位置に遮光幕の回転軸が設けられる。
【００２５】
タイミングジェネレーター３０はセンサー制御部３０ａと表示制御部３０ｂとを備え、センサー制御部３０ａは電子シャッター制御部３０ａ１を備える。センサー制御部３０ａは、液晶パネル４２における各光電変換素子の各種動作タイミングを制御するための信号を生成し、エリアイメージセンサー１５に出力する。また、表示制御部３０ｂは、液晶パネル４２の各表示画素の表示タイミングを制御するための信号を生成し、液晶パネルドライバー４１に出力する。
【００２６】
電子シャッター制御部３０ａ１は、操作部５５にてシャッターボタンが押下されると電子シャッターを開放させる。なお、電子シャッターを開放するとは、エリアイメージセンサー１５のすべての光電変換素子における電荷を一旦リセットし、電荷の蓄積を再開させて、露光を開始させることを意味する。上述のように本実施形態ではライン単位で複数の光電変換素子に蓄積された電荷のリセットが可能であり、電荷のリセットと電荷の蓄積の開始をすべてのラインについて順に行っていくことにより、すべての光電変換素子の蓄積を開始する。なお、電子シャッター制御部３０ａ１は、電荷のリセットをすべてのラインについて同時に行わせ、その後、電荷の蓄積の開始をライン単位で順次行わせるようにしてもよい。いずれの場合でも、光電変換素子の露光が開始するタイミングはラインごとに異なることとなる。
【００２７】
表示部４０はＥＶＦであり、エリアイメージセンサー１５の各光電変換素子にて検知された露光量のデータを間欠ライン読出しにより読み出すことにより生成した、いわゆるライブビュー動画を表示し、また、撮影した被写体の静止画像を表示する。表示部４０は、図示しないインターフェース回路と液晶パネルドライバー４１と液晶パネル４２と図示しない接眼レンズ等を備えている。液晶パネルドライバー４１は、各サブピクセルに電圧を印加して液晶を駆動するための信号を液晶パネル４２に対して出力する。
【００２８】
ＡＳＩＣ２００は、画像データ生成部２０を備える。この画像データ生成部２０は、ＳＤ−ＲＡＭ５２に予め確保されたラインバッファーやフレームバッファーを利用し、エリアイメージセンサー１５にて撮影された撮像データに対してパイプライン処理によって各種画像処理を実行する。なお、ＡＳＩＣ２００は、画像処理用ＤＳＰ（Digital Signal Processor）であってもよい。画像データ生成部２０は、露光量補正部２０ａと画素補間部２０ｂと色再現処理部２０ｃとフィルター処理部２０ｄとガンマ補正部２０ｅとリサイズ処理部２０ｆとを備えている。
【００２９】
画像データ生成部２０は、エリアイメージセンサー１５が撮影した撮像データを取得する画像取得部を構成する。露光量補正部２０ａは、複数の光電変換素子における露光量のばらつきを抑制するように撮像データを補正する補正部を構成する。すなわち、露光量補正部２０ａは、ＲＯＭ５３に記録されたＬＵＴ５３ａを参照して、撮像データにおける露光量の階調値を画素ごとに補正する。ＬＵＴ５３ａは、エリアイメージセンサー１５に備えられた１つまたは複数の光電変換素子ごとに乗算すべき露光量のゲイン等の補正のための情報が規定されたデータであり、露光時間ごとに予め作成される。露光量補正部２０ａは、撮影時に設定された露光時間を取得し、当該露光時間に対応するＬＵＴ５３ａを参照する。撮像データの各画素とエリアイメージセンサー１５の複数の光電変換素子とは一意に対応するため、露光量補正部２０ａは、各画素について乗算すべき露光量のゲインを補正して特定できる。
【００３０】
画素補間部２０ｂは、周辺画素の階調値を用いた補間処理を行うことにより、各画素に対応する光電変換素子に備えられたカラーフィルターの色とは異なる２チャネルの色の階調値を算出する。この結果、各画素について３チャネルの階調値が対応付けられた撮像データが生成される。色再現処理部２０ｃは、画素補間が完了した撮像データの各画素の階調値に対して３×３の行列演算を行うことによってカラーマッチングのための色変換処理を行う。フィルター処理部２０ｄは、撮像データに対してシャープネス調整やノイズ除去処理などをフィルター処理によって実行する。ガンマ補正部２０ｅはエリアイメージセンサー１５の撮影データの階調値が示す色と、表示部４０等で扱う画像データの階調値が示す色との特性差を補償するガンマ補正を実行する。リサイズ処理部２０ｆは当該ラインバッファーに記録されていくデータを逐次参照して補間演算処理を行い、画素の間の位置における各チャネルの階調値を特定することによって、例えば記録サイズへとリサイズを行う。リサイズ処理部２０ｆにてリサイズが完了すると、画像データ生成部２０における各画像処理が完了された画像データが生成できる。この画像データはＳＤ−ＲＡＭ５２にバッファーされ、表示部４０に表示されるとともに、リムーバルメモリー５６に記録される。なお、露光量補正部２０ａは画像データ生成部２０のいずれの回路２０ｂ〜２０ｆの前後に備えられてもよい。露光量補正部２０ａによる露光量の補正は、画素補間部２０ｂによる画素補間よりも前に行ってもよいし、画素補間部２０ｂによる画素補間よりも後に行ってもよい。
【００３１】
（２）ＬＵＴの構成：
図３Ａ，３Ｂの左グラフは、エリアイメージセンサー１５における露光のタイミングを示すグラフである。また、図３Ａの左グラフは設定された露光時間ＴＥが１／１２５秒であり、図３Ｂの左グラフは設定された露光時間ＴＥが１／６０秒である場合を示す。図３Ａ，３Ｂの左グラフにおいて、横軸は時刻を示し、縦軸はライン番号Ｌを示している。図３Ａ，３Ｂの左グラフにおける左側の折れ線はエリアイメージセンサー１５の各ラインの光電変換素子の露光が開始するタイミング示し、当該タイミング（時刻）はライン番号Ｌの関数Ｘ（Ｌ）によって与えられる。図３Ａ，３Ｂの左グラフにおける右側の曲線は露光が終了するタイミングを示し、当該タイミング（時刻）は各光電変換素子のライン番号Ｌおよび列番号Ｃの関数Ｙ（Ｌ，Ｃ）で与えられる。以下、特定のライン番号Ｌおよび列番号Ｃを指す必要がない場合等には、各関数における変数（Ｌ，Ｃ），（Ｌ）等の表記を省略する場合がある。また、ラインに属するすべての光電変換素子の電荷を同時に蓄積開始させることにより露光が開始するため、タイミングＸ（Ｌ）は列番号Ｃの関数とはならない。ここで図３Ａ，３Ｂの左グラフにおける左側の折れ線は電子シャッターの動作特性を示し、右側のタイミングは機械シャッターによる動作特性を示す。電子シャッターの特性はここでは３段折れ線による特性であるが，３段折れ線である必要は無く、３段折れ線ではない直線〜数十段或いはそれ以上の数の折れ線であっても良い。
【００３２】
上述のように光電変換素子における露光は電子シャッター制御部３０ａ１により電荷をリセットし、電荷の蓄積の開始させることにより開始するため、露光開始のタイミングＸは電子シャッターの動作特性に相当する。一方、光電変換素子における露光は、機械シャッター１３の遮光幕の移動によって露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが光電変換素子に到達することにより終了するため、露光終了のタイミングＹは機械シャッター１３の動作特性に相当する。また、各光電変換素子における現実の露光時間ＡＥ（Ｌ，Ｃ）は電子シャッターによる露光の開始から機械シャッター１３による露光の終了までの期間であり、横軸方向におけるタイミングＸとタイミングＹとの差分｛Ｙ（Ｌ，Ｃ）−Ｘ（Ｌ）｝が光電変換素子の現実の露光時間ＡＥ（Ｌ，Ｃ）を意味する。
【００３３】
ここで、機械シャッター１３の遮光幕は、ばね力や摩擦力等の影響を受けて動作するが説明を簡単にするために、ばね力による等加速運動を行うとしている。この場合、露光領域Ｒ１と遮光領域Ｒ２との境界Ｂの垂直方向の位置は徐々に傾きを増す放物線状に推移する。従って、タイミングＹが示すように、光電変換素子の露光が終了するライン番号は、時間の経過とともに放物線状に増加する。すなわち、タイミングＹは二次関数の逆関数となる。
【００３４】
本実施形態では、各ラインに属する光電変換素子における露光時間の均一化を図るために、電子シャッターのタイミングＸを、機械シャッター１３のタイミングＹに追従した折れ線形状とする。具体的には、電子シャッターのタイミングＸは以下のようにして作成される。まず、水平方向中央の列（列番号Ｃmid）に属する各光電変換素子に境界Ｂが到達するタイミングＹ（Ｌ，Ｃmid）を遮光幕の運動方程式に基づいて特定する。そして、タイミングＹ（Ｌ，Ｃmid）を、設定された露光時間ＴＥだけ時刻の早い側にオフセットしたオフセット曲線Ｚ（破線で図示。）を作成する。次に、このオフセット曲線Ｚに対してライン番号Ｌ1，Ｌ2，Ｌmaxにてそれぞれ接する接線を作成する。なお、１＜Ｌ1＜Ｌ2＜Ｌmaxとする。そして、ライン番号Ｌ1，Ｌ2にてそれぞれオフセット曲線Ｚに接する２つの接線の交点、および、ライン番号Ｌ2，Ｌmaxにてそれぞれオフセット曲線に接する２つの接線の交点を屈曲点とした３段折れ線を作成し、当該３段折れ線を電子シャッターのタイミングＸとする。電子シャッターのタイミングＸは徐々に傾きを増す放物線に追従するため、下方から数えて１段目の折れ線の傾きは２段目の折れ線よりも小さく、２段目の折れ線の傾きは３段目の折れ線よりも小さくなる。なお、折れ線の段数は３段に限られない。
【００３５】
電子シャッター制御部３０ａ１は、ライン番号の昇順に光電変換素子に露光を開始させていくローリングシャッター動作を行うとともに、隣接するライン間における露光開始タイミングの間隔を３段折れ線のタイミングＸの傾きに対応した長さとする。すなわち、ｎ（ｎは３以下の自然数。）段目の折れ線に対応するライン番号の隣接ライン間における露光開始タイミングの間隔は、一定、かつ、（ｎ＋１）段目の折れ線に対応する隣接ライン番号のライン間における露光開始タイミングの間隔よりも長く確保される。なお、シャッターボタンが押下されると、まず電子シャッター制御部３０ａ１が最も下方のラインから光電変換素子の電荷の蓄積を開始し、当該開始のタイミングから所定期間だけ待機した後に、機械シャッター１３が電磁石へ電流を供給して永久磁石による遮光幕の吸着を解除させ、ばね力により遮光幕を移動させる。前記所定期間とは、設定された露光時間ＴＥとほぼ等しく、ライン番号Ｌ1，Ｌ2，Ｌmaxのラインの光電変換素子のうち、水平方向中央の列（列番号Ｃmid，）に属する光電変換素子の現実の露光時間ＡＥ（Ｌ，Ｃmid）が設定された露光時間ＴＥと等しくなる期間とする。
【００３６】
以上のようにして、電子シャッター制御部３０ａ１が機械シャッター１３のタイミングＹ（Ｌ，Ｃmid）に追従するように各ラインに属する光電変換素子に露光を開始させるタイミングを制御することにより、水平方向中央の列に属する各光電変換素子における現実の露光時間ＡＥ（Ｌ，Ｃmid）を、設定された露光時間ＴＥに近似させることができる。しかしながら、電子シャッターのタイミングＸ（折れ線）を、機械シャッター１３のタイミングＹ（Ｌ，Ｃmid）（放物線）に完全に追従させることはできず、図３Ａ，３Ｂの中グラフに示すように、水平方向中央の列に属する各光電変換素子における現実の露光時間ＡＥ（Ｌ，Ｃmid）＝｛Ｙ（Ｌ，Ｃmid）−Ｘ（Ｌ）｝は一定とならず、露光時間ＴＥに対する現実の露光時間ＡＥ（Ｌ，Ｃmid）の誤差（ハッチングで図示。）が生じる。この誤差の大きさは、各光電変換素子の垂直方向の位置に依存する。次に、水平方向中央の列以外の列に属する各光電変換素子における現実の露光時間ＡＥ（Ｌ，Ｃ）について考察する。
【００３７】
図４は、エリアイメージセンサー１５の各列に属する光電変換素子における露光のタイミングを示すグラフである。同図においては、水平方向中央の列に属する各光電変換素子の露光が終了するタイミングＹ（Ｌ，Ｃmid）を実線で示し、左端および右端の列に属する各光電変換素子の露光が終了するタイミングＹ（Ｌ，Ｃ1），Ｙ（Ｌ，Ｃmax）をそれぞれ一点鎖線と二点鎖線で示す。図２Ｂにて示したように露光領域Ｒ１と遮光領域Ｒ２との境界Ｂは方向を変えながら移動するため、列番号ＣごとにタイミングＹ（Ｌ，Ｃ）が異なる。すなわち、境界Ｂが垂直方向中央のライン（ライン番号Ｌmid）に到達するまでは、境界Ｂが右肩上がりとなるため、右端に近い光電変換素子であるほど早く露光が終了する。従って、境界Ｂが垂直方向中央のラインに到達するまでは、タイミングＹ（Ｌ，Ｃmax）がタイミングＹ（Ｌ，Ｃmid）に先行し、タイミングＹ（Ｌ，Ｃmid）がタイミングＹ（Ｌ，Ｃ1）に先行する。一方、境界Ｂが垂直方向中央のラインに到達した後では、境界Ｂが右肩下がりとなるため、左端に近い光電変換素子であるほど早く露光が終了する。従って、境界Ｂが垂直方向中央のラインに到達した後では、タイミングＹ（Ｌ，Ｃ1）がタイミングＹ（Ｌ，Ｃmid）に先行し、タイミングＹ（Ｌ，Ｃmid）がタイミングＹ（Ｌ，Ｃmax）に先行する。また、垂直方向中央のライン（ライン番号Ｌmid）に属する光電変換素子の露光はすべて同時に終了し、ライン番号ＬmidについてのタイミングＹ（Ｌmid，Ｃ1），Ｙ（Ｌmid，Ｃmid），Ｙ（Ｌmid，Ｃmax）が一致する。
【００３８】
このように、光電変換素子の水平方向の位置に応じて露光が終了するタイミングＹ（Ｌ，Ｃ1），Ｙ（Ｌ，Ｃmid），Ｙ（Ｌ，Ｃmax）が互いに異なることとなる。これに対して、光水平方向中央の列の光電変換素子についてのタイミングＹ（Ｌ，Ｃmid）に追従するタイミングＸ（Ｌ）によって、すべての列に属する光電変換素子の露光が開始させられるため、水平方向中央の列以外の列に属する光電変換素子についての現実の露光時間ＡＥ（Ｌ，Ｃ1），ＡＥ（Ｌ，Ｃmax）は、水平方向中央の列に属する光電変換素子についての現実の露光時間ＡＥ（Ｌ，Ｃmid）よりも大きくばらつくこととなる。なお、電荷をリセットするための配線の制約により、露光を開始させるタイミングＸは光電変換素子の列ごとに制御できない。すなわち、境界Ｂがラインに交差する以上、露光を開始するタイミングＸをいかに調整したとして、光電変換素子の水平方向の位置に依存した露光時間のばらつきは防止できない。
【００３９】
本実施形態では、ＬＵＴ５３ａを作成するためのコンピューターが遮光幕の運動を予測し、さらに撮影光の光線予測により素子面における露光領域Ｒ１と遮光領域Ｒ２との境界Ｂの推移を予測することにより、すべての光電変換素子についての現実の露光時間ＡＥ（Ｌ，Ｃ）を算出する。そして、図３Ａ，３Ｂの右グラフに示すように、設定された露光時間ＴＥを現実の露光時間ＡＥ（Ｌ，Ｃ）で除算することによりゲインＧＥ（Ｌ，Ｃ）を算出する。なお、図３Ａ，３Ｂ，図４では、水平方向左端と中央と右端の列に属する光電変換素子についてのタイミングＹを図示したが、すべての列に属する光電変換素子についてのタイミングＹを予測し、ゲインＧＥを算出する。さらに、各光電変換素子にゲインＧＥを対応付けてＬＵＴ５３ａに格納する。
【００４０】
ここで、現実の露光時間ＡＥ（Ｌ，Ｃ）が設定された露光時間ＴＥよりも小さい光電変換素子についてのゲインＧＥ（Ｌ，Ｃ）は１よりも大きく、反対に現実の露光時間ＡＥ（Ｌ，Ｃ）が設定された露光時間ＴＥよりも大きい光電変換素子についてのゲインＧＥ（Ｌ，Ｃ）は１よりも小さくなる。ただし、ゲインＧＥの値は必ず１以上の値になるように設計することが望ましい。ゲインＧＥの値を１以上にすることで、補正後の露光量の最大飽和値が一定数値よりも下回ることで発生する画像の光量むらや色むらを抑制することができる。また、現実の露光時間ＡＥ（Ｌ，Ｃ）と、設定された露光時間ＴＥとの誤差の絶対値が大きくなるほど、ゲインＧＥ（Ｌ，Ｃ）は１から大きく相違する値となる。図３Ａ，３Ｂの中グラフに対比されるように、現実の露光時間ＡＥ（Ｌ，Ｃ）と、設定された露光時間ＴＥとの誤差の大きさは設定された露光時間ＴＥには依存せず一定である。設定された露光時間ＴＥが変化しても遮光幕はばね力により同様の運動をするからである。そのため、設定された露光時間ＴＥが長ければ長いほど、現実の露光時間ＡＥ（Ｌ，Ｃ）と、設定された露光時間ＴＥとの誤差のゲインＧＥ（Ｌ，Ｃ）に対する寄与度が小さくなり、ゲインＧＥ（Ｌ，Ｃ）は１に近い値となる。このように、ゲインＧＥは設定された露光時間ＴＥに依存するため、コンピューターはＬＵＴ５３ａを設定された露光時間ＴＥごとに作成するか、代表的な露光時間に応じたＬＵＴを作成し、他の露光時間ＴＥの場合にはこのＬＵＴに基づいて換算を行い、撮影時の露光時間に応じたゲインＧＥ（Ｌ，Ｃ）を算出するようにする。なお、一部の光電変換素子についてゲインＧＥを算出し、素子面における光電変換素子の位置関係に基づく補間演算により他の光電変換素子についてのゲインＧＥを算出してもよい。
【００４１】
露光量補正部２０ａは、撮影時の露光時間に対応するＬＵＴ５３ａを参照し、撮像データにおける各画素の露光量の階調値に各画素に対応する光電変換素子のゲインＧＥを乗算する。このように、露光量の階調値にゲインＧＥを乗算することにより、現実の露光時間ＡＥ（Ｌ，Ｃ）が短い光電変換素子についての露光量を増加させ、現実の露光時間ＡＥ（Ｌ，Ｃ）が長い光電変換素子についての露光量を減少させることができ、露光時間のばらつきの露光量に対する影響を抑制できる。ＬＵＴ５３ａによれば画素単位、すなわち光電変換素子単位でゲインＧＥが規定できるため、光電変換素子の垂直方向の位置と水平方向の位置の双方に依存してばらつく露光時間のばらつきの影響を抑制できる。特に、露光領域Ｒ１と遮光領域Ｒ２との境界Ｂがラインと交差することによって生じる水平方向における露光時間のばらつきは、仮に電子シャッターのタイミングＸを機械シャッター１３のタイミングＹ（Ｌ，Ｃmid）に完全に追従させた場合でも解消できないが、ＬＵＴ５３ａによる補正を行うことにより水平方向における露光時間のばらつきの影響も抑制できる。なお、本実施形態では露光時間と露光量とは比例関係にあると見なしてゲインＧＥを乗算して補正を行うこととしたが、露光時間と露光量との非線形性を考慮する場合にはゲインＧＥを非線形変換した上で露光量の補正を行ってもよい。
【００４２】
（３）変形例１：
以上においては、電子シャッターと機械シャッター１３のタイミングの特性の相違に起因した露光時間のばらつきの影響を抑制するＬＵＴ５３ａを作成する例を説明したが、機械シャッター１３の他の動作特性に注目して露光量のばらつきを抑制するＬＵＴ５３ａを作成してもよい。例えば、電子シャッターによる撮影光の光束の絞り込み特性と、機械シャッター１３による撮影光の光束の絞り込み特性を考慮したＬＵＴ５３ａを作成してもよい。
【００４３】
図５Ａは、機械シャッター１３の遮光幕により遮光される撮影光の光束の様子を示す模式図である。図５Ａでは、レンズ１１と機械シャッター１３の遮光幕とエリアイメージセンサー１５とを、撮影光の中央光軸および遮光幕の移動方向に垂直な方向から見て示している。なお、本変形例においては説明の簡略化のため露光領域Ｒ１と遮光領域Ｒ２との境界Ｂは常にラインに対して平行であると見なすこととする。また、電子シャッターのタイミングＸを機械シャッター１３のタイミングＹに完全に追従させているものとする。すなわち、すべての光電変換素子における現実の露光時間ＡＥが設定された露光時間ＴＥと等しいと仮定する。
【００４４】
ここでは以下の時刻ｔおよび遮光幕の上端位置ｙを定義する。まず、時刻ｔ0，ｔ1においてエリアイメージセンサー１５における最下方および最上方のライン（ライン番号１，Ｌmax）に属する光電変換素子の露光を開始させる。そして、機械シャッター１３の遮光幕が上昇を開始し、遮光幕の上端位置ｙがｙ2となった時刻ｔ2にて最下方のラインに属する光電変換素子に集光される光束の最下端が遮光される。次に、遮光幕の上端位置ｙがｙ3となった時刻ｔ3にて最上方のラインに属する光電変換素子に集光される光束の最下端が遮光される。遮光幕の上端位置ｙがｙ4となった時刻ｔ4にて最下方のラインに属する光電変換素子に集光される光束の最上端が遮光される。さらに、遮光幕の上端位置ｙがｙ5となった時刻ｔ5にて最上方のラインに属する光電変換素子に集光される光束の最上端が遮光される。なお、時刻ｔ4において最下方のラインに属する光電変換素子に集光された撮影光が完全に遮光され、最下方のラインに属する光電変換素子の露光が終了する。すなわち、時刻ｔ4において露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが最下方のラインに到達する。同様に、時刻ｔ5において露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが最上方のラインに到達し、当該ラインに属する光電変換素子の露光が終了する。
【００４５】
図５Ｂは、最下方のラインに属する光電変換素子の露光量を示すグラフである。図５Ｂにおける縦軸は露光量を示し、横軸は時刻を示す。同図に示すように、最下方のラインに属する光電変換素子の露光量は、当該ラインに属する光電変換素子に露光を開始させる時刻ｔ0から所定の傾きで線形的に増加する。そして、最下方のラインに属する光電変換素子に集光される光束の最下端が遮光される時刻ｔ2が経過すると、当該光電変換素子に集光される光束が徐々に絞り込まれていき露光量が増加する傾きが減少していく。さらに、最下方のラインに属する光電変換素子に集光される光束の最上端が遮光される時刻ｔ4が経過すると、当該光電変換素子の露光が終了し、最終的に露光量は増加しなくなる。この露光量に対応する電荷を読み出して量子化することにより、撮像データの各画素の露光量を示す階調値が決定される。
【００４６】
図５Ｂに示すように、最下方の光電変換素子に集光される撮影光の光束が絞り込まれ始める時刻ｔ2から露光が終了する時刻ｔ4までの絞込露光時間ＦＴが長いほど、最下方の光電変換素子の露光量は小さくなる。本変形例では電子シャッターのタイミングＸを機械シャッター１３のタイミングＹに完全に追従させているため、各ラインの露光を開始してから終了するまでの現実の露光時間ＡＥ（ｔ0〜ｔ4）は、すべての光電変換素子について同じとなる。しかし、絞込露光時間ＦＴの長さは光電変換素子ごとにばらつくこととなる。
【００４７】
図５Ｃは、遮光幕の上端位置ｙと絞込露光時間ＦＴとの関係を示すグラフである。同図の横軸は時刻ｔを示し、縦軸は上端位置ｙを示す。遮光幕の上端位置ｙは、遮光幕の等加速度運動により放物線状に推移する。最下方と最上方のラインについての絞込露光時間ＦＴは、それぞれ期間（ｔ2〜ｔ4）と期間（ｔ3〜ｔ5）であり、上端位置ｙが区間（ｙ2〜ｙ4）と区間（ｙ3〜ｙ5）を通過する期間に対応する。図５Ａに示すように、最下方と最上方のラインは中央光軸に関して上下対称な位置にあるため、区間（ｙ2〜ｙ4）の長さと区間（ｙ3〜ｙ5）の長さとは互いに等しい。しかしながら、遮光幕の速度は線形的に増加するため、遮光幕の進行方向下流側にある区間（ｙ3〜ｙ5）を通過する期間（ｔ3〜ｔ5）の方が、区間（ｙ2〜ｙ4）を通過する期間（ｔ2〜ｔ4）よりも短くなる。すなわち、最上方のラインについての絞込露光時間ＦＴの方が、最下方のラインについての絞込露光時間ＦＴよりも短くなる。従って、絞込露光時間ＦＴが短い最上方のラインの方が露光量が大きくなる。すなわち、撮影光の絞り込み特性に起因して、露光量は光電変換素子の垂直方向の位置に応じてばらつく。
【００４８】
以上のように絞込露光時間ＦＴは、光電変換素子に集光される撮影光の光束が絞り込まれる遮光幕の上端位置ｙの区間（ｙ2〜ｙ4），（ｙ3〜ｙ5）に依存して変化する。この区間（ｙ2〜ｙ4），（ｙ3〜ｙ5）の遮光幕の進行方向における長さや位置は、図５Ａに示すレンズ１１と遮光幕とエリアイメージセンサー１５との位置関係に基づいて幾何学的に特定できる。従って、機械シャッター１３の遮光幕が撮影光を遮光する光軸方向の位置に基づく補正により露光量のばらつきを抑制するのが望ましい。例えば、遮光幕とエリアイメージセンサー１５との距離が長いほど、遮光幕は長い区間（ｙ2〜ｙ4），（ｙ3〜ｙ5）において撮影光の光束を絞り込むこととなるため、各光電変換素子についての絞込露光時間ＦＴが長くなる。従って、遮光幕とエリアイメージセンサー１５との距離が長い機械シャッター１３については、ゲインＧＥの値を大きくしたＬＵＴ５３ａを作成してもよい。以上説明した露光量のばらつきを補正するためのＬＵＴ５３ａを、機械シャッター１３の遮光幕が撮影光を遮光する光軸方向の位置等に基づいて計算により作成してもよいが、以下のようにしてＬＵＴ５３ａを作成してもよい。
【００４９】
本変形例では、均一な色（例えば白等。）を有する被写体を全体に均等な光源を照射しつつ、当該被写体を光学系１０の画角全体で撮影する。そして、ＬＵＴ５３ａを作成するコンピューターは、エリアイメージセンサー１５から撮像データを取得する。当該コンピューターは、当該撮像データのうち所定の光電変換素子に対応する露光量の階調値をＲＧＢ各チャネルについて取得し、当該階調値を基準階調値とする。ここで、所定の光電変換素子はゲインＧＥが１以上になるように、エリアイメージセンサー１５のうちの最も露光時間が短い光電変換素子とすることが望ましい。そして、撮像データの各画素の階調値をチャネルが一致する基準階調値によって除算した露光量比率を算出し、当該露光量比率の逆数を各画素に対応する光電変換素子についてのゲインＧＥとして算出し、光電変換素子とゲインＧＥとの対応関係をＬＵＴ５３ａに格納する。上述のように、光束が絞られて露光される絞込露光時間ＦＴは光軸方向における遮光幕の位置に依存するため、撮影装置１の機体ごとにＬＵＴ５３ａを作成しておくことで、機体ごとの遮光幕の位置ばらつきや機械シャッターの製造誤差などに起因した動作特性のばらつきの影響を吸収させることができる。ＬＵＴ５３ａは、例えば撮影装置１の製造時に作成し、ＲＯＭ５３に格納しておけばよい。この手法によれば、前記実施形態において説明した露光時間のばらつきに起因する露光量のばらつきも抑制できる。なお、本変形例の補正によれば、露光の開始と終了の双方を機械シャッターにより行い、当該機械シャッターの遮光幕の光軸方向における位置が互いに異なる場合においても、遮光幕の光軸方向における位置の相違（絞り込み特性の相違）に起因した露光量のばらつきが抑制できる。また、ＬＵＴ５３ａを定期的に作成することで、撮影装置１の経時劣化の影響を吸収させることができる。
【００５０】
（４）変形例２：
以上においては、実際に写真の撮影を行う際における機械シャッター１３の動作特性に注目したが、撮影を行う前における機械シャッター１３の動作履歴に応じて機械シャッター１３の動作特性が変化する場合も考えられる。本変形例の機械シャッターは前記実施形態の機械シャッター１３と異なり以下のように動作する。すなわち、前記実施形態の機械シャッター１３は、係止レバーによる遮光幕の係止を解除したときに永久磁石により遮光幕の吸着保持を維持したが、本変形例では係止レバーによる遮光幕の係止を解除する際に電磁石に電流を供給し、当該電磁石の磁力によりばね力に抗する遮光幕の保持を継続させることとする。そして、露光の開始から露光時間ＴＥに対応する期間が経過すると、電磁石への電流供給を停止し、電磁石による遮光幕の吸着保持を解除する。これにより、遮光幕はばね力により移動させられ、遮光幕が撮影光の全体を遮光する位置に移動して、各光電変換素子における露光が終了する。通常、撮影前の期間においては、エリアイメージセンサー１５において撮影されたライブビュー動画をＥＶＦ（表示部４０）等において見ながらシャッターチャンスを覗うこととなる。本変形例の機械シャッターでは、ライブビュー動画を表示する期間において、係止レバーによる遮光幕の係止を解除し、遮光幕を電磁石により吸着保持する。このような方式の機械シャッターでは、ライブビュー動画を表示する期間が長いほど、電磁石は高温となる。ここで、電磁石が高温となることにより機械シャッター１３の即応性が低下する。即応性が低下すると、電磁石への電流供給を停止してから遮光幕が駆動するまでの時間が長くなる。従って、ライブビュー動画を表示する期間が長いほど露光終了が遅れることとなる。そのため、ライブビュー動画を表示した期間に拘わらず同一のＬＵＴ５３ａを参照して、露光量補正部２０ａが露光量の階調値を補正することにより、補正誤差が生じることとなる。
【００５１】
そこで、本変形例において露光量補正部２０ａは、シャッターボタンが押下される前にライブビュー動画を表示していた期間の長さを示す動作履歴情報をＣＰＵ５０から取得する。そして、露光量補正部２０ａは、動作履歴情報に基づいて、ライブビュー動画を表示していた期間の長さに対応するＬＵＴ５３ａを参照して、露光量補正部２０ａが露光量の階調値を補正する。なお、本変形例においても、変形例１と同様に均一な色の被写体の撮像データに基づいて、複数のライブビュー動画の表示期間ごとにＬＵＴ５３ａを作成しておけばよい。むろん、ＬＵＴ５３ａに規定されたゲインＧＥをライブビュー動画を表示していた期間に応じて補正した上で、当該ゲインＧＥに基づく補正を行ってもよい。なお、遮光幕の動作に関与するいずれかの電磁石に電流が供給された時間に基づいて露光量の補正を行えばよい。例えばシャッター準備動作（例えば、シャッターボタン半押し時の動作。）において電磁石への電流供給を要する機械シャッターにおいてはシャッター準備動作の期間に基づいて露光量の補正を行えばよい。
【００５２】
（５）変形例３：
上述のようにライブビュー動画の長期間表示によって電磁石が高温となることにより機械シャッター１３の即応性が低下するが、高温下で撮影装置１を使用することにより電磁石が高温となる場合でも機械シャッター１３の即応性が低下する。さらに、高温下で撮影装置１を使用する場合、電磁石のみならず遮光幕を引きつけるばねの特性にも変化が生じる。さらに、ばねの特性は湿度によっても変化する。ばねの特性が変化すると、遮光幕の運動が変化し、図３Ａ，３Ｂの中グラフに示した露光時間の誤差が増大する。さらに、ばねの特性は、ばねの伸縮回数（疲労）や経年劣化によっても変化する。例えば、伸縮回数が大きいほど、製造後長期間経過するほど、ばねの弾性力の劣化により遮光幕の加速度が低下し、露光時間が長くなる。そこで、本変形例の露光量補正部２０ａは、シャッターボタンが押下された際における機械シャッター１３の温度と湿度を示す動作環境情報を図示しないセンサーから取得するとともに、撮影装置１の製造時期および機械シャッター１３の動作回数を示す動作履歴情報をＣＰＵ５０から取得する。そして、露光量補正部２０ａは、当該動作環境情報と当該動作履歴情報に基づいて機械シャッター１３の温度と湿度と撮影装置１の製造時期と機械シャッター１３の動作回数とを特定し、これらの組み合わせに対応するＬＵＴ５３ａを参照して露光量の階調値を補正する。なお、本変形例においても、変形例１と同様に均一な色の被写体の撮像データに基づいて、機械シャッター１３の温度と湿度と撮影装置１の製造時期と機械シャッター１３の動作回数の複数の組み合わせごとにＬＵＴ５３ａを作成しておけばよい。
【００５３】
（６）変形例４：
図６は、本変形例にかかる機械シャッター１３の遮光幕とエリアイメージセンサー１５とを示す模式図である。本変形例において、機械シャッター１３は、遮光幕が５枚の絞り羽根によって構成され、５枚の絞り羽根が中央光軸に向かって光路を絞り込むように駆動する絞りシャッター方式を採用する。なお、機械シャッター１３の遮光幕はエリアイメージセンサー１５とレンズ１１との間に設けられてもよいし、レンズ１１よりも光路上流側に設けられてもよい。このような絞りシャッター方式では、露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが中央光軸を中心とした円の外接五角形をなすこととなり、当該外接五角形の各辺はエリアイメージセンサー１５のライン（破線矢印で図示。）と交差することとなる。また、このような絞りシャッター方式では、光軸中央に近いほど光電変換素子ほど露光領域Ｒ１と遮光領域Ｒ２との境界Ｂの到達が遅く、露光が終了するタイミングが遅くなるという特性を有する。一方、エリアイメージセンサー１５のラインの方向は水平方向であるため、ライン単位で光電変換素子に露光を開始させるタイミングを調整しても、機械シャッター１３のタイミングに追従することはできない。このような場合であっても、撮像データにおける露光量の階調値を光電変換素子の位置に応じて補正することにより、露光量のばらつきを抑制することができる。
【００５４】
（７）変形例５：
図７の左グラフは、本変形例のエリアイメージセンサー１５における露光のタイミングを示すグラフである。本変形例において、電子シャッター制御部３０ａ１は、電子シャッターのタイミングＸを機械シャッター１３のタイミングＹに追従させない。すなわち、図７の左グラフに示すようにすべてのラインに属するすべての光電変換素子における電荷のリセットを同時に行い、すべての光電変換素子における電荷の蓄積開始を同時に行う（グローバルシャッターを行う）ことにより、すべての光電変換素子における露光を同時に開始させる。図７の左グラフの例では、最上方のライン（ライン番号Ｌmax）の水平方向中央の光電変換素子における現実の露光時間ＴＥ（Ｌmax，Ｃmid）と設定された露光時間ＴＥとを一致させる。この場合、特に下方のラインにおいて、電子シャッターのタイミングＸと機械シャッター１３のタイミングＹとが大きく異なることとなるため、図７の中グラフに示すように設定された露光時間ＴＥに対して現実の露光時間ＡＥが大きくばらつく。特に下方のラインにおいては、設定された露光時間ＴＥに対して現実の露光時間ＡＥが大幅に短くなる。
【００５５】
本変形例でも、図７の右グラフのように設定された露光時間ＴＥを現実の露光時間ＡＥで除算してゲインＧＥを求める。そして、当該ゲインＧＥを各光電変換素子に対応付けてＬＵＴ５３ａに格納し、露光量補正部２０ａがＬＵＴ５３ａを参照して撮像データにおける各画素の露光量の階調値に各画素に対応する光電変換素子のゲインＧＥを乗算する。本変形例では、現実の露光時間ＡＥが、設定された露光時間ＴＥに対して大幅に短くなるラインが生じるが、このようなラインについては１よりも大幅に大きいゲインＧＥが乗算することで、ノイズは増幅されてしまうが露光量のばらつきが抑制できる。すなわち、本発明のように露光量を示す階調値にゲインＧＥを乗算して補正を行えば、電子シャッターのタイミングＸを正確に制御せずとも露光量のばらつきが抑制できる。従って、撮影した画像の画質を大きく劣化させることなく、電子シャッター制御部３０ａ１の回路規模を縮小できる。
【００５６】
（８）変形例６：
図８は、各ラインの光電変換素子における露光および撮像データの読み出しのタイミングを示すグラフである。図８の例では、前記変形例１と同様に電子シャッターのタイミングＸを機械シャッター１３のタイミングＹに完全に追従させていることとする。従って、各光電変換素子における現実の露光時間ＡＥは、設定された露光時間ＴＥと一致する。図８においては、各ラインについて撮像データを読み出すタイミングを示すタイミングＰ（Ｌ）を破線により示している。各ラインにおいては多数の光電変換素子が存在するため、各ラインについて撮像データを読み出すのに必要な期間は、機械シャッター１３により各ラインを境界Ｂが通過する期間よりも長くなる。従って、撮像データの読み出すタイミングＰ（Ｌ）は、各ラインの光電変換素子に露光を開始および終了させるタイミングＸ，Ｙよりも傾きが緩やかとなる。従って、光電変換素子にて露光を終了させてから撮像データの読み出すまでの待機期間ＷＴ（Ｌ）は、ライン番号が増加するほど長くなる。この待機期間ＷＴ（Ｌ）においては、機械シャッター１３の遮光幕が各光電変換素子を遮光するものの、待機期間ＷＴ（Ｌ）が長いほどエリアイメージセンサー１５の暗電流ノイズによる電荷の蓄積量Ｎ（Ｌ）が大きくなる。すなわち、機械シャッター１３のタイミングＹと撮像データの読み出しタイミングＰ（Ｌ）との相違に起因して生じる待機期間ＷＴ（Ｌ）の不均一さに起因して、各光電変換素子における露光量にばらつきが生じることとなる。本変形例では、上方のラインほど暗電流分の露光量が増加することから、上方ラインに行くほどノイズ分が増加する値Ｎ（Ｌ）を露光量の階調値から減ずることにより、待機期間ＷＴ（Ｌ）の不均一さに起因する露光量のばらつきを抑制する。
【００５７】
（９）変形例７：
以上においては、撮影装置１にて画像を補正する例を説明したが、撮影装置１以外の装置にて画像を補正してもよい。例えば、撮影装置１は、画像データ生成部２０による各種画像処理をすることなく、エリアイメージセンサー１５にて撮影された撮像データをそのままリムーバルメモリー５６に記録するモードを備える。また、撮影装置１は、この撮像データに、撮影装置１の機種や撮影時の露光時間（シャッター速度）を特定する添付情報を添付する。本変形例においては、露光量の補正を、上述の撮像データをリムーバルメモリー５６から読み込み可能なコンピューターにおいて実行する。機械シャッター１３のタイミングＹは物理的に異なるシャッター機構を有する撮影装置１の機種ごとに大きく異なる。従って、本変形例においては予め撮影装置１の機種ごとにＬＵＴ５３ａを作成しておきコンピューターに記録しておく。そして、コンピューターは撮像データを読み込むと、当該撮像データに添付された添付情報によって特定される撮影装置１の機種に対応するＬＵＴ５３ａを参照して当該撮像データの各画素に対応付けられた露光量の階調値を補正する。なお、撮影時の露光時間（シャッター速度）に応じたＬＵＴそのものを添付しても良い。この場合には、ＬＵＴが添付されていない場合と異なり、そのＬＵＴを参照して当該撮像データの各画素に対応付けられた露光量の階調値を補正する。
【００５８】
（１０）変形例８：
図３Ａ，３Ｂの中グラフに対比されるように、設定された露光時間ＴＥが長ければ長いほど、現実の露光時間ＡＥと、設定された露光時間ＴＥとの誤差の露光量に与える影響は小さく、当該誤差の影響を抑制するためのゲインＧＥは１に近い値となる。さらに、設定された露光時間ＴＥが大きくなると、現実の露光時間ＡＥと、設定された露光時間ＴＥとの誤差による露光量のばらつきは、画像を視認した場合に感じられなくなる。従って、設定された露光時間ＴＥが所定の閾値よりも長い場合には、露光量補正部２０ａによる補正を行わないようにしてもよい。例えば、設定された露光時間ＴＥに対する、現実の露光時間ＡＥと設定された露光時間ＴＥとの誤差の絶対値の最大値の相対比が所定の閾値（例えば、１／５０等。）である場合には、露光量のばらつきは感じられ難いとして補正を行わないようにしてよい。
本発明の具体的態様は、上述の実施形態や変形例に限定されるものではなく、実施形態や変形例同士を組み合わせたものであってもよいし、本発明の技術的思想を逸脱しない範囲で変形を行っても良い。
【符号の説明】
【００５９】
１…撮影装置、１０…光学系、１１…レンズ、１２…絞り、１３…機械シャッター、１４…ローパスフィルター、１５…エリアイメージセンサー、２０…画像データ生成部、２０ａ…露光量補正部、２０ｂ…画素補間部、２０ｃ…色再現処理部、２０ｄ…フィルター処理部、２０ｅ…ガンマ補正部、２０ｆ…リサイズ処理部、３０…タイミングジェネレーター、３０ａ…センサー制御部、３０ａ１…電子シャッター制御部、３０ｂ…表示制御部、４０…表示部、４１…液晶パネルドライバー、４２…液晶パネル、５５…操作部、５６…リムーバルメモリー。
【技術分野】
【０００１】
本発明は、露光時間を機械シャッターにより制御して撮影された画像を補正する技術に関する。
【背景技術】
【０００２】
従来、複数の光電変換素子における露光を開始させるタイミングを電子シャッターにより制御し、露光を終了させるタイミングを機械シャッターにより制御する撮影装置が提案されている（特許文献１〜３、参照）。このような撮影装置においては、機械シャッターが露光を終了させるタイミングに追従するように、電子シャッターが露光を開始させるタイミングを制御することにより、各光電変換素子についての露光時間の均一化を図っていた。なお、一般に、電子シャッターは、複数の光電変換素子が直線状に配列するライン単位で露光を開始させるタイミングを制御する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平１１−４１５２３号公報
【特許文献２】特開２００６−１０１４９２号公報
【特許文献３】特開２００８−１４７９７９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、機械シャッターが露光を終了させるタイミングは遮光幕の運動に依存し、非線形特性を有するため、機械シャッターが露光を終了させるタイミングに追従するように、電子シャッターが露光を開始させるタイミングを制御することは困難となる。すなわち、非線形特性を有するタイミングで電子シャッターを動作させなければならず、電子シャッター動作時における電子シャッター制御回路の処理負荷が大きくなるという問題があった。また、光電変換素子が配列する素子面において、ラインに交差するように機械シャッターが遮光領域の境界を形成する場合、ラインに属する光電変換素子間で露光時間のばらつきが生じることとなる。このような場合、電子シャッターがライン単位で露光を開始するタイミングを制御しても、ラインに属する光電変換素子間での露光時間のばらつきに起因した露光量のばらつきを抑制することができないという問題があった。
本発明は、前記課題にかんがみてなされたもので、機械シャッターの動作特性に起因した露光量のばらつきを抑制することを目的とする。
【課題を解決するための手段】
【０００５】
前記目的を達成するため本発明において、画像取得部は、複数の光電変換素子における露光時間を制御する機械シャッターを用いて撮影された画像を取得する。補正部は、機械シャッターの動作特性に基づいて画像を補正する。これにより、撮影後の画像の補正により、機械シャッターの動作特性に起因して生じる露光量のばらつき等を抑制することができる。画像の補正においては、光電変換素子のラインの方向に制約されることなく画像を補正できる。また、補正を画像の撮影後に行うことができ、電子シャッター動作時において電子シャッターの動作タイミングを複雑に制御しなくても済む。
【０００６】
ここで、画像取得部は、露光時間が少なくとも機械シャッターにより制御された画像を取得すればよく、画像補正回路は機械シャッターを備えた撮影装置に備えられていてもよいし、当該撮影装置とは別の装置に備えられていてもよい。後者の場合、補正部は機械シャッターの動作特性に基づく補正を行うにあたり、機械シャッターの動作特性を示す情報を例えば画像の添付情報や撮影装置との通信等によって取得すればよい。さらに、撮影装置は、例えばカメラ付携帯電話やカメラ付パーソナルコンピューターのように画像の撮影する機能のみならず、他の機能も有する装置であってもよい。また、機械シャッターの動作特性を示す情報は、動作特性を直接示してもよいし、撮影装置の機種や機械シャッターの機構等を示すものであってもよい。また、補正部は、機械シャッターの動作特性に基づいて画像の補正規則を生成してもよいし、予め機械シャッターの動作特性に基づいて作成された補正規則を取得してもよい。この補正規則は、例えば画像における画素の位置ごとに補正量を規定したＬＵＴ（Look Up Table）であってもよいし、画像における画素の位置を変数として補正量を与える関数であってもよい。
【０００７】
複数の光電変換素子における露光時間のばらつきは、電子先幕−機械後幕シャッター方式によって撮影された画像において顕著に生じ得る。
なお、電子先幕−機械後幕シャッター方式とは、以下のとおりである。まず、電子シャッターにより、複数の光電変換素子に露光を開始させるタイミングを制御する。具体的には、光電変換素子における電荷の蓄積を開始させることにより、露光を開始させる。そして、機械シャッターによる遮光部の移動により、遮光領域の境界を複数の光電変換素子の素子面上において移動させて複数の光電変換素子を遮光していくことにより、複数の光電変換素子に露光を終了させるタイミングを制御する。なお、本明細書において露光とは、光電変換素子に撮影光が到達し、かつ、当該撮影光の光量に応じて光電変換素子が電荷を蓄積する状態を意味する。
【０００８】
このような電子先幕−機械後幕シャッター方式においては、各光電変換素子における露光の開始と終了とが互いに異なる機構により実現される。すなわち、電子シャッターの動作特性と機械シャッターの動作特性とが相違し、当該相違は露光量にばらつきを生じさせる主要な要因となり得る。そのため、電子シャッターの動作特性と機械シャッターの動作特性との相違に基づく補正を行うことにより、効果的に露光量のばらつきを抑制することができる。
【０００９】
露光量にばらつきを生じさせる要因となる動作特性の例として、各光電変換素子に露光の開始と終了とをさせるタイミングの特性が挙げられる。機械シャッターによる露光の終了は遮光部を機械的に運動させることにより実現されるため、機械シャッターによる露光終了のタイミングの特性は遮光部の加速運動特性に依存する。これに対して、電子シャッターによる露光開始のタイミングは遮光部の運動特性に依存しないため、機械シャッターが各光電変換素子に露光を終了させるタイミングの特性と相違する。電子シャッターが各光電変換素子に露光を開始させるタイミングの特性と、機械シャッターが各光電変換素子に露光を終了させるタイミングの特性とが相違する場合、露光の開始から終了までの期間である露光時間が各光電変換素子においてばらつくからである。露光時間が長いほど露光量も増加するため、露光時間がばらつけば露光量もばらつくこととなる。そこで、電子シャッターのタイミングの特性と、機械シャッターのタイミングの特性との相違に基づいて、露光時間が短くなる光電変換素子ほど露光量を大きくする補正を行うことにより、露光量のばらつきを抑制するのが望ましい。
【００１０】
ところで、従来技術のように機械シャッターが露光を終了させるタイミングに追従するように電子シャッターが露光を開始させるタイミングを制御することにより、露光時間の均一化を図ることができる。ところが、機械シャッターの遮光部が光電変換素子の素子面上に形成する遮光領域の境界が、電荷の蓄積を開始させるための配線が共通する複数の光電変換素子が直線状に配列するラインに交差する場合には、従来技術の手法では露光時間を均一化することができない。ラインに遮光領域の境界が交差する場合、単一のラインに属する光電変換素子間で露光時間にばらつきが生じ、ライン単位で露光を開始させるタイミングを制御しても光電変換素子間での露光時間のばらつきの影響は抑制できないからである。このような場合においても、ライン内における少なくとも２つの光電変換素子について互いに異なる補正を行うことにより、単一のラインに属する複数の光電変換素子間の露光時間のばらつきの影響を抑制する補正が可能である。なお、補正部は、画像を画素単位で補正してもよいし、所定数の画素で構成されるブロック単位で画像を補正してもよい。
【００１１】
ラインに遮光領域の境界が交差し得る機械シャッターのシャッター機構の例として、例えば遮光部が所定の回転軸まわりに回転移動するシャッター機構や、遮光されない領域を素子面上の一点に絞り込んで行くシャッター機構等においては、遮光領域の境界の方向が一定とならないため、遮光領域の境界がラインに交差する。
なお、従来技術のように、機械シャッターが露光を終了させるタイミングに追従するように電子シャッターが露光を開始させるタイミングを制御した上で、補正部による画像の補正を行ってもよい。
【００１２】
電子シャッターの場合、素子面上に配列された各光電変換素子を、直接、電子制御することにより、各光電変換素子の露光状態を制御する。すなわち、電子シャッターは、素子面上において実質的に撮影光を遮光することにより、各光電変換素子の露光状態を制御する。一方、機械シャッターは遮光部により撮影光を遮光するが、当該遮光部が撮影光を遮光する光軸方向の位置は、通常、素子面上とはならない。遮光部と素子面との摩擦抵抗の発生を防止したり、素子面上の光電変換素子の破損を防止する必要があるからである。素子面上と異なる位置にて撮影光を遮光する機械シャッターは、素子面上の光電変換素子に集光されてない状態の撮影光を遮光することとなる。すなわち、ある光電変換素子に集光される撮影光を遮光するにあたり、機械シャッターはある程度の幅を有する当該撮影光の光束を遮光することとなる。従って、機械シャッターの動作により、ある光電変換素子に集光される撮影光が徐々に絞り込まれていき、最終的に当該光電変換素子に集光された撮影光が完全に遮光された段階で、当該光電変換素子の露光が終了することとなる。ここで、各光電変換素子に集光される撮影光の光束が機械シャッターによって絞り込まれない期間よりも、絞り込まれる期間の方が単位時間あたりの露光量は小さくなる。従って、各光電変換素子に集光される撮影光の光束が機械シャッターによって徐々に絞り込まれる期間の長さがばらつけば、各光電変換素子における露光量もばらつくこととなる。撮影光の光束が機械シャッターの遮光部によって徐々に絞り込まれる期間は遮光部の位置における光束の幅に依存し、当該光束の幅は光軸方向における遮光部と素子面との距離に依存する。そのため、補正部は、遮光部と素子面との距離に応じた補正により露光量のばらつきを抑制するのが望ましい。
【００１３】
ところで、機械シャッターの動作特性は、撮影時における動作履歴や動作環境にも依存する。例えば、遮光部をばね力により動作させる場合において、遮光部の動作前に電磁石がばね力に抗して遮光部を保持していた期間に応じて、電磁石の加熱や遮光部の磁化などにより遮光部の速度特性や加速度特性が変化する。さらに、ばねの機械特性は、機械シャッターの使用や時間の経過により変化するため、機械シャッターの動作回数や製造時期等が異なる場合にも、機械シャッターの動作特性が異なることとなる。従って、補正部は、過去の動作期間の長さや動作回数や製造時期からの経過時間等を示す機械シャッターの動作履歴情報に応じて画像を補正するのが望ましい。さらに、撮影時における機械シャッターの温度や湿度等に応じても機械シャッターの動作特性が変化する。従って、補正部は、機械シャッターの温度や湿度等を示す動作環境情報に応じて画像を補正するのが望ましい。
【００１４】
光電変換素子ごとに露光の終了から露光量の読み出しを行うまでの待機時間がばらつく場合には、待機時間が長いほど露光量から待機時間に相当する露光量分を小さくする補正を行ってもよい。これにより、待機時間において光電変換素子にわずかに蓄積される暗電流による電荷の影響を抑制できる。
【００１５】
本発明の画像補正回路は単独の装置として実現されるものに限らず、本発明の画像補正回路が備える各手段が撮影装置に備えられてもよい。また、請求項に記載された各手段の機能は、構成自体で機能が特定されるハードウェア資源、プログラムにより機能が特定されるハードウェア資源、またはそれらの組み合わせにより実現される。また、これら各手段の機能は、各々が物理的に互いに独立したハードウェア資源で実現されるものに限定されない。さらに、本発明は画像補正プログラムの記録媒体としても成立する。むろん、そのコンピュータープログラムの記録媒体は、磁気記録媒体であってもよいし光磁気記録媒体であってもよいし、今後開発されるいかなる記録媒体であってもよい。
【図面の簡単な説明】
【００１６】
【図１】デジタルカメラを示すブロック図である。
【図２】エリアイメージセンサーの模式図である。
【図３】露光のタイミングを示すグラフである。
【図４】露光のタイミングを示すグラフである。
【図５】光束が絞られる様子を示す模式図およびグラフである。
【図６】エリアイメージセンサーおよび遮光幕の模式図である。
【図７】露光のタイミングを示すグラフである。
【図８】撮像データを読み出すタイミングを示すグラフである。
【発明を実施するための形態】
【００１７】
以下、本発明の実施の形態を添付図面を参照しながら以下の順に説明する。なお、各図において対応する構成要素には同一の符号が付され、重複する説明は省略される。
（１）撮影装置の構成：
（２）ＬＵＴの構成：
（３）変形例１：
（４）変形例２：
（５）変形例３：
（６）変形例４：
（７）変形例５：
（８）変形例６：
（９）変形例７：
（１０）変形例８：
【００１８】
（１）撮影装置の構成：
図１は本発明の一実施形態にかかる画像補正回路を含む撮影装置１である。本実施形態にかかる撮影装置１は、ＥＶＦ（Electronic View Finder）を備えたミラーレスデジタルカメラである。撮影装置１は、光学系１０とエリアイメージセンサー１５とＡＳＩＣ２００とタイミングジェネレーター３０と表示部４０とＣＰＵ５０とＳＤ−ＲＡＭ５２とＲＯＭ５３とＲＡＭ５４と操作部５５とリムーバルメモリー５６とを備えている。ＣＰＵ５０は、ＳＤ−ＲＡＭ５２とＲＡＭ５４を適宜利用してＲＯＭ５３に記録されたプログラムを実行する。当該プログラムの機能によりＣＰＵ５０は、操作部５５に対する操作に応じてエリアイメージセンサー１５にて撮影された被写体を示す画像データを生成する機能を実行する。なお、操作部５５はシャッターボタンと、露光時間（シャッター速度）を設定するためのダイヤルスイッチとを備えている。
【００１９】
光学系１０は、レンズ１１と絞り１２と機械シャッター１３とローパスフィルター１４とを備える。レンズ１１は撮影光を集光してエリアイメージセンサー１５に被写体の画像を結像させる。絞り１２は、撮影光の光束を絞り込んで撮影光量を調整する。なお、露光時間は、ダイヤルスイッチに対する操作以外に、絞り優先の場合における絞り１２の設定にも依存して設定される。レンズ１１と絞り１２とは交換式レンズユニットに備えられ、当該交換式レンズユニットは撮影装置１の筐体に交換可能に取り付けられる。ローパスフィルター１４は、撮影光のエリアイメージセンサー１５における空間的高周波数成分を遮断することにより、撮影した画像におけるモアレを防止する。
【００２０】
図２Ａは、エリアイメージセンサー１５の素子面の一部を正面から見て示す模式図である。エリアイメージセンサー１５は、例えばベイヤー配列されたカラーフィルターと、露光量に応じた電荷を蓄積する複数の光電変換素子とが所定の素子面に配列したＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサーやＣＣＤ（Charge Coupled Device）イメージセンサー等の固体撮像素子である。本実施形態では、ＣＭＯＳイメージセンサーを使用した場合を例にして、以下説明する。図２において各光電変換素子を正方形で示し、正方形の内側には各光電変換素子に対応して備えられるカラーフィルターの色（３チャネル：Ｒ（赤），Ｇ（緑），Ｂ（青））を示す。エリアイメージセンサー１５の素子面上における複数の光電変換素子の配列位置は直交座標で規定され、一方の座標軸に平行な方向に並ぶ複数の光電変換素子によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように配列されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼ぶ。
【００２１】
本実施例におけるエリアイメージセンサー１５においては、ライン単位で光電変換素子に蓄積された電荷のリセット（放電）ができる。すなわち、同一のラインに属する複数の光電変換素子においては互いに同時に電荷がリセットされ、リセットの解除動作により互いに同時に電荷の蓄積が開始する。光電変換素子における電荷の蓄積の開始は、光電変換素子における露光の開始を意味する。例えば、各光電変換素子はソース−ドレイン間の導通により電荷を放電させるリセット用電界効果トランジスターを備えるとともに、同一のラインに属する各光電変換素子においてはリセット用電界効果トランジスターのゲートに電圧を印加するための配線が共通する。エリアイメージセンサー１５は、光電変換素子に蓄積された電荷をライン単位で読み出す。なお、エリアイメージセンサー１５は、必要な画質や速度に応じて、全ラインから読み出すことをせずに、間欠読み出しを行うことができる。そして、光電変換素子で、電荷の読み出しが行われた場合にも電荷がリセットされる。エリアイメージセンサー１５は、読み出した電荷に対応する露光量の階調値をＡ／Ｄ変換器等によりＡ／Ｄ変換して各画素に対応付けた撮像データを生成する。この撮像データは、本発明の画像に相当する。撮像データの画素は光電変換素子に一意に対応する。エリアイメージセンサー１５から読み出された撮像データは、ＳＤ−ＲＡＭ５２にバッファーされ、後述のＡＳＩＣ２００によって撮像データに対する各種画像処理が実行される。
【００２２】
図２Ｂは、エリアイメージセンサー１５の素子面の全体を正面から見て示す模式図である。各ラインには垂直方向の上方になるにつれて１ずつ増加するライン番号Ｌ（１〜Ｌmax）が付され、ラインに直交する垂直方向の列には水平方向右側になるにつれて１ずつ増加する列番号Ｃ（１〜Ｃmax）が付される。また、垂直方向中央のラインのライン番号ＬをＬmidとし、水平方向中央の列を列番号ＣをＣmidと表す。機械シャッター１３は、複数の光電変換素子が配列されたエリアイメージセンサー１５の素子面に対してほぼ平行な平面板状の遮光部としての遮光幕（図１においてハッチングで図示。）を備える。この遮光幕により、複数の光電変換素子が配列されたエリアイメージセンサー１５の素子面上に露光領域Ｒ１と遮光領域Ｒ２とを形成する。すなわち、エリアイメージセンサー１５の素子面上における遮光幕の陰影が遮光領域Ｒ２をなす。機械シャッター１３は、以下のようにして遮光幕を動作させる。
【００２３】
本実施形態の機械シャッター１３は、ノーマルオープン型であり、撮影装置１の電源ＯＦＦの状態において、遮光幕は係止レバーにより係止されるとともに永久磁石により吸着保持される。遮光幕は、撮影光の全体を遮光する位置に遮光幕を引きつけるばねのばね力に抗し、係止レバーの係止および永久磁石の吸着により撮影光の光路の外側に係止される。そして、撮影装置１の電源ＯＮの状態において、係止レバーによる遮光幕の係止を解除する。係止レバーによる遮光幕の係止が解除されても、永久磁石により遮光幕が吸着保持され、ばね力に抗する遮光幕の保持が継続する。そして、シャッターボタンが押下されると、電子シャッター制御部３０ａ１により各光電変換素子における露光を開始させ、さらに露光の開始から露光時間に対応する期間が経過すると、遮光幕を吸着する永久磁石の磁力を打ち消す磁力を生じさせる電磁石へ電流を供給し、永久磁石による遮光幕の吸着保持を解除する。これにより、遮光幕はばね力により移動させられ、遮光幕が撮影光の全体を遮光する位置に移動する。
【００２４】
図２Ｂにおいては、機械シャッター１３がばね力により遮光幕を移動させることにより、エリアイメージセンサー１５の素子面上において露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが移動する様子を模式的に示している。本実施形態では、ばねが遮光幕を上方に引きつけることにより、シャッターが閉じる際に露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが下方から上方に向かって（破線矢印の方向に）移動することとする。遮光幕の移動によって光電変換素子に境界Ｂが到達することにより、当該光電変換素子の露光が終了する。本実施形態の機械シャッター１３では、エリアイメージセンサー１５の素子面の右側に設けられた図示しない回転軸を中心として遮光幕が回転移動可能に支持されている。本実施形態では、垂直方向中央のラインに境界Ｂが到達したとき境界Ｂとラインとが平行となる。垂直方向中央のラインに境界Ｂが到達するまでは、境界Ｂは右肩上がりに傾斜し、徐々にラインと平行に近づいていく。垂直方向中央のラインに境界Ｂが到達すると、境界Ｂは徐々に右肩下がりの傾斜角を増していく。すなわち、エリアイメージセンサー１５の素子面上における境界Ｂの方向は一定とはならず、基本的にラインに対して境界Ｂが交差する。なお、遮光幕の回転軸をエリアイメージセンサー１５の素子面から十分に遠い位置に設ければ各ラインと境界Ｂとが平行であると見なせるが、本実施形態では撮影装置１の小型化や機械シャッター１３の動作高速化等の要請により境界Ｂがラインに交差し得る位置に遮光幕の回転軸が設けられる。
【００２５】
タイミングジェネレーター３０はセンサー制御部３０ａと表示制御部３０ｂとを備え、センサー制御部３０ａは電子シャッター制御部３０ａ１を備える。センサー制御部３０ａは、液晶パネル４２における各光電変換素子の各種動作タイミングを制御するための信号を生成し、エリアイメージセンサー１５に出力する。また、表示制御部３０ｂは、液晶パネル４２の各表示画素の表示タイミングを制御するための信号を生成し、液晶パネルドライバー４１に出力する。
【００２６】
電子シャッター制御部３０ａ１は、操作部５５にてシャッターボタンが押下されると電子シャッターを開放させる。なお、電子シャッターを開放するとは、エリアイメージセンサー１５のすべての光電変換素子における電荷を一旦リセットし、電荷の蓄積を再開させて、露光を開始させることを意味する。上述のように本実施形態ではライン単位で複数の光電変換素子に蓄積された電荷のリセットが可能であり、電荷のリセットと電荷の蓄積の開始をすべてのラインについて順に行っていくことにより、すべての光電変換素子の蓄積を開始する。なお、電子シャッター制御部３０ａ１は、電荷のリセットをすべてのラインについて同時に行わせ、その後、電荷の蓄積の開始をライン単位で順次行わせるようにしてもよい。いずれの場合でも、光電変換素子の露光が開始するタイミングはラインごとに異なることとなる。
【００２７】
表示部４０はＥＶＦであり、エリアイメージセンサー１５の各光電変換素子にて検知された露光量のデータを間欠ライン読出しにより読み出すことにより生成した、いわゆるライブビュー動画を表示し、また、撮影した被写体の静止画像を表示する。表示部４０は、図示しないインターフェース回路と液晶パネルドライバー４１と液晶パネル４２と図示しない接眼レンズ等を備えている。液晶パネルドライバー４１は、各サブピクセルに電圧を印加して液晶を駆動するための信号を液晶パネル４２に対して出力する。
【００２８】
ＡＳＩＣ２００は、画像データ生成部２０を備える。この画像データ生成部２０は、ＳＤ−ＲＡＭ５２に予め確保されたラインバッファーやフレームバッファーを利用し、エリアイメージセンサー１５にて撮影された撮像データに対してパイプライン処理によって各種画像処理を実行する。なお、ＡＳＩＣ２００は、画像処理用ＤＳＰ（Digital Signal Processor）であってもよい。画像データ生成部２０は、露光量補正部２０ａと画素補間部２０ｂと色再現処理部２０ｃとフィルター処理部２０ｄとガンマ補正部２０ｅとリサイズ処理部２０ｆとを備えている。
【００２９】
画像データ生成部２０は、エリアイメージセンサー１５が撮影した撮像データを取得する画像取得部を構成する。露光量補正部２０ａは、複数の光電変換素子における露光量のばらつきを抑制するように撮像データを補正する補正部を構成する。すなわち、露光量補正部２０ａは、ＲＯＭ５３に記録されたＬＵＴ５３ａを参照して、撮像データにおける露光量の階調値を画素ごとに補正する。ＬＵＴ５３ａは、エリアイメージセンサー１５に備えられた１つまたは複数の光電変換素子ごとに乗算すべき露光量のゲイン等の補正のための情報が規定されたデータであり、露光時間ごとに予め作成される。露光量補正部２０ａは、撮影時に設定された露光時間を取得し、当該露光時間に対応するＬＵＴ５３ａを参照する。撮像データの各画素とエリアイメージセンサー１５の複数の光電変換素子とは一意に対応するため、露光量補正部２０ａは、各画素について乗算すべき露光量のゲインを補正して特定できる。
【００３０】
画素補間部２０ｂは、周辺画素の階調値を用いた補間処理を行うことにより、各画素に対応する光電変換素子に備えられたカラーフィルターの色とは異なる２チャネルの色の階調値を算出する。この結果、各画素について３チャネルの階調値が対応付けられた撮像データが生成される。色再現処理部２０ｃは、画素補間が完了した撮像データの各画素の階調値に対して３×３の行列演算を行うことによってカラーマッチングのための色変換処理を行う。フィルター処理部２０ｄは、撮像データに対してシャープネス調整やノイズ除去処理などをフィルター処理によって実行する。ガンマ補正部２０ｅはエリアイメージセンサー１５の撮影データの階調値が示す色と、表示部４０等で扱う画像データの階調値が示す色との特性差を補償するガンマ補正を実行する。リサイズ処理部２０ｆは当該ラインバッファーに記録されていくデータを逐次参照して補間演算処理を行い、画素の間の位置における各チャネルの階調値を特定することによって、例えば記録サイズへとリサイズを行う。リサイズ処理部２０ｆにてリサイズが完了すると、画像データ生成部２０における各画像処理が完了された画像データが生成できる。この画像データはＳＤ−ＲＡＭ５２にバッファーされ、表示部４０に表示されるとともに、リムーバルメモリー５６に記録される。なお、露光量補正部２０ａは画像データ生成部２０のいずれの回路２０ｂ〜２０ｆの前後に備えられてもよい。露光量補正部２０ａによる露光量の補正は、画素補間部２０ｂによる画素補間よりも前に行ってもよいし、画素補間部２０ｂによる画素補間よりも後に行ってもよい。
【００３１】
（２）ＬＵＴの構成：
図３Ａ，３Ｂの左グラフは、エリアイメージセンサー１５における露光のタイミングを示すグラフである。また、図３Ａの左グラフは設定された露光時間ＴＥが１／１２５秒であり、図３Ｂの左グラフは設定された露光時間ＴＥが１／６０秒である場合を示す。図３Ａ，３Ｂの左グラフにおいて、横軸は時刻を示し、縦軸はライン番号Ｌを示している。図３Ａ，３Ｂの左グラフにおける左側の折れ線はエリアイメージセンサー１５の各ラインの光電変換素子の露光が開始するタイミング示し、当該タイミング（時刻）はライン番号Ｌの関数Ｘ（Ｌ）によって与えられる。図３Ａ，３Ｂの左グラフにおける右側の曲線は露光が終了するタイミングを示し、当該タイミング（時刻）は各光電変換素子のライン番号Ｌおよび列番号Ｃの関数Ｙ（Ｌ，Ｃ）で与えられる。以下、特定のライン番号Ｌおよび列番号Ｃを指す必要がない場合等には、各関数における変数（Ｌ，Ｃ），（Ｌ）等の表記を省略する場合がある。また、ラインに属するすべての光電変換素子の電荷を同時に蓄積開始させることにより露光が開始するため、タイミングＸ（Ｌ）は列番号Ｃの関数とはならない。ここで図３Ａ，３Ｂの左グラフにおける左側の折れ線は電子シャッターの動作特性を示し、右側のタイミングは機械シャッターによる動作特性を示す。電子シャッターの特性はここでは３段折れ線による特性であるが，３段折れ線である必要は無く、３段折れ線ではない直線〜数十段或いはそれ以上の数の折れ線であっても良い。
【００３２】
上述のように光電変換素子における露光は電子シャッター制御部３０ａ１により電荷をリセットし、電荷の蓄積の開始させることにより開始するため、露光開始のタイミングＸは電子シャッターの動作特性に相当する。一方、光電変換素子における露光は、機械シャッター１３の遮光幕の移動によって露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが光電変換素子に到達することにより終了するため、露光終了のタイミングＹは機械シャッター１３の動作特性に相当する。また、各光電変換素子における現実の露光時間ＡＥ（Ｌ，Ｃ）は電子シャッターによる露光の開始から機械シャッター１３による露光の終了までの期間であり、横軸方向におけるタイミングＸとタイミングＹとの差分｛Ｙ（Ｌ，Ｃ）−Ｘ（Ｌ）｝が光電変換素子の現実の露光時間ＡＥ（Ｌ，Ｃ）を意味する。
【００３３】
ここで、機械シャッター１３の遮光幕は、ばね力や摩擦力等の影響を受けて動作するが説明を簡単にするために、ばね力による等加速運動を行うとしている。この場合、露光領域Ｒ１と遮光領域Ｒ２との境界Ｂの垂直方向の位置は徐々に傾きを増す放物線状に推移する。従って、タイミングＹが示すように、光電変換素子の露光が終了するライン番号は、時間の経過とともに放物線状に増加する。すなわち、タイミングＹは二次関数の逆関数となる。
【００３４】
本実施形態では、各ラインに属する光電変換素子における露光時間の均一化を図るために、電子シャッターのタイミングＸを、機械シャッター１３のタイミングＹに追従した折れ線形状とする。具体的には、電子シャッターのタイミングＸは以下のようにして作成される。まず、水平方向中央の列（列番号Ｃmid）に属する各光電変換素子に境界Ｂが到達するタイミングＹ（Ｌ，Ｃmid）を遮光幕の運動方程式に基づいて特定する。そして、タイミングＹ（Ｌ，Ｃmid）を、設定された露光時間ＴＥだけ時刻の早い側にオフセットしたオフセット曲線Ｚ（破線で図示。）を作成する。次に、このオフセット曲線Ｚに対してライン番号Ｌ1，Ｌ2，Ｌmaxにてそれぞれ接する接線を作成する。なお、１＜Ｌ1＜Ｌ2＜Ｌmaxとする。そして、ライン番号Ｌ1，Ｌ2にてそれぞれオフセット曲線Ｚに接する２つの接線の交点、および、ライン番号Ｌ2，Ｌmaxにてそれぞれオフセット曲線に接する２つの接線の交点を屈曲点とした３段折れ線を作成し、当該３段折れ線を電子シャッターのタイミングＸとする。電子シャッターのタイミングＸは徐々に傾きを増す放物線に追従するため、下方から数えて１段目の折れ線の傾きは２段目の折れ線よりも小さく、２段目の折れ線の傾きは３段目の折れ線よりも小さくなる。なお、折れ線の段数は３段に限られない。
【００３５】
電子シャッター制御部３０ａ１は、ライン番号の昇順に光電変換素子に露光を開始させていくローリングシャッター動作を行うとともに、隣接するライン間における露光開始タイミングの間隔を３段折れ線のタイミングＸの傾きに対応した長さとする。すなわち、ｎ（ｎは３以下の自然数。）段目の折れ線に対応するライン番号の隣接ライン間における露光開始タイミングの間隔は、一定、かつ、（ｎ＋１）段目の折れ線に対応する隣接ライン番号のライン間における露光開始タイミングの間隔よりも長く確保される。なお、シャッターボタンが押下されると、まず電子シャッター制御部３０ａ１が最も下方のラインから光電変換素子の電荷の蓄積を開始し、当該開始のタイミングから所定期間だけ待機した後に、機械シャッター１３が電磁石へ電流を供給して永久磁石による遮光幕の吸着を解除させ、ばね力により遮光幕を移動させる。前記所定期間とは、設定された露光時間ＴＥとほぼ等しく、ライン番号Ｌ1，Ｌ2，Ｌmaxのラインの光電変換素子のうち、水平方向中央の列（列番号Ｃmid，）に属する光電変換素子の現実の露光時間ＡＥ（Ｌ，Ｃmid）が設定された露光時間ＴＥと等しくなる期間とする。
【００３６】
以上のようにして、電子シャッター制御部３０ａ１が機械シャッター１３のタイミングＹ（Ｌ，Ｃmid）に追従するように各ラインに属する光電変換素子に露光を開始させるタイミングを制御することにより、水平方向中央の列に属する各光電変換素子における現実の露光時間ＡＥ（Ｌ，Ｃmid）を、設定された露光時間ＴＥに近似させることができる。しかしながら、電子シャッターのタイミングＸ（折れ線）を、機械シャッター１３のタイミングＹ（Ｌ，Ｃmid）（放物線）に完全に追従させることはできず、図３Ａ，３Ｂの中グラフに示すように、水平方向中央の列に属する各光電変換素子における現実の露光時間ＡＥ（Ｌ，Ｃmid）＝｛Ｙ（Ｌ，Ｃmid）−Ｘ（Ｌ）｝は一定とならず、露光時間ＴＥに対する現実の露光時間ＡＥ（Ｌ，Ｃmid）の誤差（ハッチングで図示。）が生じる。この誤差の大きさは、各光電変換素子の垂直方向の位置に依存する。次に、水平方向中央の列以外の列に属する各光電変換素子における現実の露光時間ＡＥ（Ｌ，Ｃ）について考察する。
【００３７】
図４は、エリアイメージセンサー１５の各列に属する光電変換素子における露光のタイミングを示すグラフである。同図においては、水平方向中央の列に属する各光電変換素子の露光が終了するタイミングＹ（Ｌ，Ｃmid）を実線で示し、左端および右端の列に属する各光電変換素子の露光が終了するタイミングＹ（Ｌ，Ｃ1），Ｙ（Ｌ，Ｃmax）をそれぞれ一点鎖線と二点鎖線で示す。図２Ｂにて示したように露光領域Ｒ１と遮光領域Ｒ２との境界Ｂは方向を変えながら移動するため、列番号ＣごとにタイミングＹ（Ｌ，Ｃ）が異なる。すなわち、境界Ｂが垂直方向中央のライン（ライン番号Ｌmid）に到達するまでは、境界Ｂが右肩上がりとなるため、右端に近い光電変換素子であるほど早く露光が終了する。従って、境界Ｂが垂直方向中央のラインに到達するまでは、タイミングＹ（Ｌ，Ｃmax）がタイミングＹ（Ｌ，Ｃmid）に先行し、タイミングＹ（Ｌ，Ｃmid）がタイミングＹ（Ｌ，Ｃ1）に先行する。一方、境界Ｂが垂直方向中央のラインに到達した後では、境界Ｂが右肩下がりとなるため、左端に近い光電変換素子であるほど早く露光が終了する。従って、境界Ｂが垂直方向中央のラインに到達した後では、タイミングＹ（Ｌ，Ｃ1）がタイミングＹ（Ｌ，Ｃmid）に先行し、タイミングＹ（Ｌ，Ｃmid）がタイミングＹ（Ｌ，Ｃmax）に先行する。また、垂直方向中央のライン（ライン番号Ｌmid）に属する光電変換素子の露光はすべて同時に終了し、ライン番号ＬmidについてのタイミングＹ（Ｌmid，Ｃ1），Ｙ（Ｌmid，Ｃmid），Ｙ（Ｌmid，Ｃmax）が一致する。
【００３８】
このように、光電変換素子の水平方向の位置に応じて露光が終了するタイミングＹ（Ｌ，Ｃ1），Ｙ（Ｌ，Ｃmid），Ｙ（Ｌ，Ｃmax）が互いに異なることとなる。これに対して、光水平方向中央の列の光電変換素子についてのタイミングＹ（Ｌ，Ｃmid）に追従するタイミングＸ（Ｌ）によって、すべての列に属する光電変換素子の露光が開始させられるため、水平方向中央の列以外の列に属する光電変換素子についての現実の露光時間ＡＥ（Ｌ，Ｃ1），ＡＥ（Ｌ，Ｃmax）は、水平方向中央の列に属する光電変換素子についての現実の露光時間ＡＥ（Ｌ，Ｃmid）よりも大きくばらつくこととなる。なお、電荷をリセットするための配線の制約により、露光を開始させるタイミングＸは光電変換素子の列ごとに制御できない。すなわち、境界Ｂがラインに交差する以上、露光を開始するタイミングＸをいかに調整したとして、光電変換素子の水平方向の位置に依存した露光時間のばらつきは防止できない。
【００３９】
本実施形態では、ＬＵＴ５３ａを作成するためのコンピューターが遮光幕の運動を予測し、さらに撮影光の光線予測により素子面における露光領域Ｒ１と遮光領域Ｒ２との境界Ｂの推移を予測することにより、すべての光電変換素子についての現実の露光時間ＡＥ（Ｌ，Ｃ）を算出する。そして、図３Ａ，３Ｂの右グラフに示すように、設定された露光時間ＴＥを現実の露光時間ＡＥ（Ｌ，Ｃ）で除算することによりゲインＧＥ（Ｌ，Ｃ）を算出する。なお、図３Ａ，３Ｂ，図４では、水平方向左端と中央と右端の列に属する光電変換素子についてのタイミングＹを図示したが、すべての列に属する光電変換素子についてのタイミングＹを予測し、ゲインＧＥを算出する。さらに、各光電変換素子にゲインＧＥを対応付けてＬＵＴ５３ａに格納する。
【００４０】
ここで、現実の露光時間ＡＥ（Ｌ，Ｃ）が設定された露光時間ＴＥよりも小さい光電変換素子についてのゲインＧＥ（Ｌ，Ｃ）は１よりも大きく、反対に現実の露光時間ＡＥ（Ｌ，Ｃ）が設定された露光時間ＴＥよりも大きい光電変換素子についてのゲインＧＥ（Ｌ，Ｃ）は１よりも小さくなる。ただし、ゲインＧＥの値は必ず１以上の値になるように設計することが望ましい。ゲインＧＥの値を１以上にすることで、補正後の露光量の最大飽和値が一定数値よりも下回ることで発生する画像の光量むらや色むらを抑制することができる。また、現実の露光時間ＡＥ（Ｌ，Ｃ）と、設定された露光時間ＴＥとの誤差の絶対値が大きくなるほど、ゲインＧＥ（Ｌ，Ｃ）は１から大きく相違する値となる。図３Ａ，３Ｂの中グラフに対比されるように、現実の露光時間ＡＥ（Ｌ，Ｃ）と、設定された露光時間ＴＥとの誤差の大きさは設定された露光時間ＴＥには依存せず一定である。設定された露光時間ＴＥが変化しても遮光幕はばね力により同様の運動をするからである。そのため、設定された露光時間ＴＥが長ければ長いほど、現実の露光時間ＡＥ（Ｌ，Ｃ）と、設定された露光時間ＴＥとの誤差のゲインＧＥ（Ｌ，Ｃ）に対する寄与度が小さくなり、ゲインＧＥ（Ｌ，Ｃ）は１に近い値となる。このように、ゲインＧＥは設定された露光時間ＴＥに依存するため、コンピューターはＬＵＴ５３ａを設定された露光時間ＴＥごとに作成するか、代表的な露光時間に応じたＬＵＴを作成し、他の露光時間ＴＥの場合にはこのＬＵＴに基づいて換算を行い、撮影時の露光時間に応じたゲインＧＥ（Ｌ，Ｃ）を算出するようにする。なお、一部の光電変換素子についてゲインＧＥを算出し、素子面における光電変換素子の位置関係に基づく補間演算により他の光電変換素子についてのゲインＧＥを算出してもよい。
【００４１】
露光量補正部２０ａは、撮影時の露光時間に対応するＬＵＴ５３ａを参照し、撮像データにおける各画素の露光量の階調値に各画素に対応する光電変換素子のゲインＧＥを乗算する。このように、露光量の階調値にゲインＧＥを乗算することにより、現実の露光時間ＡＥ（Ｌ，Ｃ）が短い光電変換素子についての露光量を増加させ、現実の露光時間ＡＥ（Ｌ，Ｃ）が長い光電変換素子についての露光量を減少させることができ、露光時間のばらつきの露光量に対する影響を抑制できる。ＬＵＴ５３ａによれば画素単位、すなわち光電変換素子単位でゲインＧＥが規定できるため、光電変換素子の垂直方向の位置と水平方向の位置の双方に依存してばらつく露光時間のばらつきの影響を抑制できる。特に、露光領域Ｒ１と遮光領域Ｒ２との境界Ｂがラインと交差することによって生じる水平方向における露光時間のばらつきは、仮に電子シャッターのタイミングＸを機械シャッター１３のタイミングＹ（Ｌ，Ｃmid）に完全に追従させた場合でも解消できないが、ＬＵＴ５３ａによる補正を行うことにより水平方向における露光時間のばらつきの影響も抑制できる。なお、本実施形態では露光時間と露光量とは比例関係にあると見なしてゲインＧＥを乗算して補正を行うこととしたが、露光時間と露光量との非線形性を考慮する場合にはゲインＧＥを非線形変換した上で露光量の補正を行ってもよい。
【００４２】
（３）変形例１：
以上においては、電子シャッターと機械シャッター１３のタイミングの特性の相違に起因した露光時間のばらつきの影響を抑制するＬＵＴ５３ａを作成する例を説明したが、機械シャッター１３の他の動作特性に注目して露光量のばらつきを抑制するＬＵＴ５３ａを作成してもよい。例えば、電子シャッターによる撮影光の光束の絞り込み特性と、機械シャッター１３による撮影光の光束の絞り込み特性を考慮したＬＵＴ５３ａを作成してもよい。
【００４３】
図５Ａは、機械シャッター１３の遮光幕により遮光される撮影光の光束の様子を示す模式図である。図５Ａでは、レンズ１１と機械シャッター１３の遮光幕とエリアイメージセンサー１５とを、撮影光の中央光軸および遮光幕の移動方向に垂直な方向から見て示している。なお、本変形例においては説明の簡略化のため露光領域Ｒ１と遮光領域Ｒ２との境界Ｂは常にラインに対して平行であると見なすこととする。また、電子シャッターのタイミングＸを機械シャッター１３のタイミングＹに完全に追従させているものとする。すなわち、すべての光電変換素子における現実の露光時間ＡＥが設定された露光時間ＴＥと等しいと仮定する。
【００４４】
ここでは以下の時刻ｔおよび遮光幕の上端位置ｙを定義する。まず、時刻ｔ0，ｔ1においてエリアイメージセンサー１５における最下方および最上方のライン（ライン番号１，Ｌmax）に属する光電変換素子の露光を開始させる。そして、機械シャッター１３の遮光幕が上昇を開始し、遮光幕の上端位置ｙがｙ2となった時刻ｔ2にて最下方のラインに属する光電変換素子に集光される光束の最下端が遮光される。次に、遮光幕の上端位置ｙがｙ3となった時刻ｔ3にて最上方のラインに属する光電変換素子に集光される光束の最下端が遮光される。遮光幕の上端位置ｙがｙ4となった時刻ｔ4にて最下方のラインに属する光電変換素子に集光される光束の最上端が遮光される。さらに、遮光幕の上端位置ｙがｙ5となった時刻ｔ5にて最上方のラインに属する光電変換素子に集光される光束の最上端が遮光される。なお、時刻ｔ4において最下方のラインに属する光電変換素子に集光された撮影光が完全に遮光され、最下方のラインに属する光電変換素子の露光が終了する。すなわち、時刻ｔ4において露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが最下方のラインに到達する。同様に、時刻ｔ5において露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが最上方のラインに到達し、当該ラインに属する光電変換素子の露光が終了する。
【００４５】
図５Ｂは、最下方のラインに属する光電変換素子の露光量を示すグラフである。図５Ｂにおける縦軸は露光量を示し、横軸は時刻を示す。同図に示すように、最下方のラインに属する光電変換素子の露光量は、当該ラインに属する光電変換素子に露光を開始させる時刻ｔ0から所定の傾きで線形的に増加する。そして、最下方のラインに属する光電変換素子に集光される光束の最下端が遮光される時刻ｔ2が経過すると、当該光電変換素子に集光される光束が徐々に絞り込まれていき露光量が増加する傾きが減少していく。さらに、最下方のラインに属する光電変換素子に集光される光束の最上端が遮光される時刻ｔ4が経過すると、当該光電変換素子の露光が終了し、最終的に露光量は増加しなくなる。この露光量に対応する電荷を読み出して量子化することにより、撮像データの各画素の露光量を示す階調値が決定される。
【００４６】
図５Ｂに示すように、最下方の光電変換素子に集光される撮影光の光束が絞り込まれ始める時刻ｔ2から露光が終了する時刻ｔ4までの絞込露光時間ＦＴが長いほど、最下方の光電変換素子の露光量は小さくなる。本変形例では電子シャッターのタイミングＸを機械シャッター１３のタイミングＹに完全に追従させているため、各ラインの露光を開始してから終了するまでの現実の露光時間ＡＥ（ｔ0〜ｔ4）は、すべての光電変換素子について同じとなる。しかし、絞込露光時間ＦＴの長さは光電変換素子ごとにばらつくこととなる。
【００４７】
図５Ｃは、遮光幕の上端位置ｙと絞込露光時間ＦＴとの関係を示すグラフである。同図の横軸は時刻ｔを示し、縦軸は上端位置ｙを示す。遮光幕の上端位置ｙは、遮光幕の等加速度運動により放物線状に推移する。最下方と最上方のラインについての絞込露光時間ＦＴは、それぞれ期間（ｔ2〜ｔ4）と期間（ｔ3〜ｔ5）であり、上端位置ｙが区間（ｙ2〜ｙ4）と区間（ｙ3〜ｙ5）を通過する期間に対応する。図５Ａに示すように、最下方と最上方のラインは中央光軸に関して上下対称な位置にあるため、区間（ｙ2〜ｙ4）の長さと区間（ｙ3〜ｙ5）の長さとは互いに等しい。しかしながら、遮光幕の速度は線形的に増加するため、遮光幕の進行方向下流側にある区間（ｙ3〜ｙ5）を通過する期間（ｔ3〜ｔ5）の方が、区間（ｙ2〜ｙ4）を通過する期間（ｔ2〜ｔ4）よりも短くなる。すなわち、最上方のラインについての絞込露光時間ＦＴの方が、最下方のラインについての絞込露光時間ＦＴよりも短くなる。従って、絞込露光時間ＦＴが短い最上方のラインの方が露光量が大きくなる。すなわち、撮影光の絞り込み特性に起因して、露光量は光電変換素子の垂直方向の位置に応じてばらつく。
【００４８】
以上のように絞込露光時間ＦＴは、光電変換素子に集光される撮影光の光束が絞り込まれる遮光幕の上端位置ｙの区間（ｙ2〜ｙ4），（ｙ3〜ｙ5）に依存して変化する。この区間（ｙ2〜ｙ4），（ｙ3〜ｙ5）の遮光幕の進行方向における長さや位置は、図５Ａに示すレンズ１１と遮光幕とエリアイメージセンサー１５との位置関係に基づいて幾何学的に特定できる。従って、機械シャッター１３の遮光幕が撮影光を遮光する光軸方向の位置に基づく補正により露光量のばらつきを抑制するのが望ましい。例えば、遮光幕とエリアイメージセンサー１５との距離が長いほど、遮光幕は長い区間（ｙ2〜ｙ4），（ｙ3〜ｙ5）において撮影光の光束を絞り込むこととなるため、各光電変換素子についての絞込露光時間ＦＴが長くなる。従って、遮光幕とエリアイメージセンサー１５との距離が長い機械シャッター１３については、ゲインＧＥの値を大きくしたＬＵＴ５３ａを作成してもよい。以上説明した露光量のばらつきを補正するためのＬＵＴ５３ａを、機械シャッター１３の遮光幕が撮影光を遮光する光軸方向の位置等に基づいて計算により作成してもよいが、以下のようにしてＬＵＴ５３ａを作成してもよい。
【００４９】
本変形例では、均一な色（例えば白等。）を有する被写体を全体に均等な光源を照射しつつ、当該被写体を光学系１０の画角全体で撮影する。そして、ＬＵＴ５３ａを作成するコンピューターは、エリアイメージセンサー１５から撮像データを取得する。当該コンピューターは、当該撮像データのうち所定の光電変換素子に対応する露光量の階調値をＲＧＢ各チャネルについて取得し、当該階調値を基準階調値とする。ここで、所定の光電変換素子はゲインＧＥが１以上になるように、エリアイメージセンサー１５のうちの最も露光時間が短い光電変換素子とすることが望ましい。そして、撮像データの各画素の階調値をチャネルが一致する基準階調値によって除算した露光量比率を算出し、当該露光量比率の逆数を各画素に対応する光電変換素子についてのゲインＧＥとして算出し、光電変換素子とゲインＧＥとの対応関係をＬＵＴ５３ａに格納する。上述のように、光束が絞られて露光される絞込露光時間ＦＴは光軸方向における遮光幕の位置に依存するため、撮影装置１の機体ごとにＬＵＴ５３ａを作成しておくことで、機体ごとの遮光幕の位置ばらつきや機械シャッターの製造誤差などに起因した動作特性のばらつきの影響を吸収させることができる。ＬＵＴ５３ａは、例えば撮影装置１の製造時に作成し、ＲＯＭ５３に格納しておけばよい。この手法によれば、前記実施形態において説明した露光時間のばらつきに起因する露光量のばらつきも抑制できる。なお、本変形例の補正によれば、露光の開始と終了の双方を機械シャッターにより行い、当該機械シャッターの遮光幕の光軸方向における位置が互いに異なる場合においても、遮光幕の光軸方向における位置の相違（絞り込み特性の相違）に起因した露光量のばらつきが抑制できる。また、ＬＵＴ５３ａを定期的に作成することで、撮影装置１の経時劣化の影響を吸収させることができる。
【００５０】
（４）変形例２：
以上においては、実際に写真の撮影を行う際における機械シャッター１３の動作特性に注目したが、撮影を行う前における機械シャッター１３の動作履歴に応じて機械シャッター１３の動作特性が変化する場合も考えられる。本変形例の機械シャッターは前記実施形態の機械シャッター１３と異なり以下のように動作する。すなわち、前記実施形態の機械シャッター１３は、係止レバーによる遮光幕の係止を解除したときに永久磁石により遮光幕の吸着保持を維持したが、本変形例では係止レバーによる遮光幕の係止を解除する際に電磁石に電流を供給し、当該電磁石の磁力によりばね力に抗する遮光幕の保持を継続させることとする。そして、露光の開始から露光時間ＴＥに対応する期間が経過すると、電磁石への電流供給を停止し、電磁石による遮光幕の吸着保持を解除する。これにより、遮光幕はばね力により移動させられ、遮光幕が撮影光の全体を遮光する位置に移動して、各光電変換素子における露光が終了する。通常、撮影前の期間においては、エリアイメージセンサー１５において撮影されたライブビュー動画をＥＶＦ（表示部４０）等において見ながらシャッターチャンスを覗うこととなる。本変形例の機械シャッターでは、ライブビュー動画を表示する期間において、係止レバーによる遮光幕の係止を解除し、遮光幕を電磁石により吸着保持する。このような方式の機械シャッターでは、ライブビュー動画を表示する期間が長いほど、電磁石は高温となる。ここで、電磁石が高温となることにより機械シャッター１３の即応性が低下する。即応性が低下すると、電磁石への電流供給を停止してから遮光幕が駆動するまでの時間が長くなる。従って、ライブビュー動画を表示する期間が長いほど露光終了が遅れることとなる。そのため、ライブビュー動画を表示した期間に拘わらず同一のＬＵＴ５３ａを参照して、露光量補正部２０ａが露光量の階調値を補正することにより、補正誤差が生じることとなる。
【００５１】
そこで、本変形例において露光量補正部２０ａは、シャッターボタンが押下される前にライブビュー動画を表示していた期間の長さを示す動作履歴情報をＣＰＵ５０から取得する。そして、露光量補正部２０ａは、動作履歴情報に基づいて、ライブビュー動画を表示していた期間の長さに対応するＬＵＴ５３ａを参照して、露光量補正部２０ａが露光量の階調値を補正する。なお、本変形例においても、変形例１と同様に均一な色の被写体の撮像データに基づいて、複数のライブビュー動画の表示期間ごとにＬＵＴ５３ａを作成しておけばよい。むろん、ＬＵＴ５３ａに規定されたゲインＧＥをライブビュー動画を表示していた期間に応じて補正した上で、当該ゲインＧＥに基づく補正を行ってもよい。なお、遮光幕の動作に関与するいずれかの電磁石に電流が供給された時間に基づいて露光量の補正を行えばよい。例えばシャッター準備動作（例えば、シャッターボタン半押し時の動作。）において電磁石への電流供給を要する機械シャッターにおいてはシャッター準備動作の期間に基づいて露光量の補正を行えばよい。
【００５２】
（５）変形例３：
上述のようにライブビュー動画の長期間表示によって電磁石が高温となることにより機械シャッター１３の即応性が低下するが、高温下で撮影装置１を使用することにより電磁石が高温となる場合でも機械シャッター１３の即応性が低下する。さらに、高温下で撮影装置１を使用する場合、電磁石のみならず遮光幕を引きつけるばねの特性にも変化が生じる。さらに、ばねの特性は湿度によっても変化する。ばねの特性が変化すると、遮光幕の運動が変化し、図３Ａ，３Ｂの中グラフに示した露光時間の誤差が増大する。さらに、ばねの特性は、ばねの伸縮回数（疲労）や経年劣化によっても変化する。例えば、伸縮回数が大きいほど、製造後長期間経過するほど、ばねの弾性力の劣化により遮光幕の加速度が低下し、露光時間が長くなる。そこで、本変形例の露光量補正部２０ａは、シャッターボタンが押下された際における機械シャッター１３の温度と湿度を示す動作環境情報を図示しないセンサーから取得するとともに、撮影装置１の製造時期および機械シャッター１３の動作回数を示す動作履歴情報をＣＰＵ５０から取得する。そして、露光量補正部２０ａは、当該動作環境情報と当該動作履歴情報に基づいて機械シャッター１３の温度と湿度と撮影装置１の製造時期と機械シャッター１３の動作回数とを特定し、これらの組み合わせに対応するＬＵＴ５３ａを参照して露光量の階調値を補正する。なお、本変形例においても、変形例１と同様に均一な色の被写体の撮像データに基づいて、機械シャッター１３の温度と湿度と撮影装置１の製造時期と機械シャッター１３の動作回数の複数の組み合わせごとにＬＵＴ５３ａを作成しておけばよい。
【００５３】
（６）変形例４：
図６は、本変形例にかかる機械シャッター１３の遮光幕とエリアイメージセンサー１５とを示す模式図である。本変形例において、機械シャッター１３は、遮光幕が５枚の絞り羽根によって構成され、５枚の絞り羽根が中央光軸に向かって光路を絞り込むように駆動する絞りシャッター方式を採用する。なお、機械シャッター１３の遮光幕はエリアイメージセンサー１５とレンズ１１との間に設けられてもよいし、レンズ１１よりも光路上流側に設けられてもよい。このような絞りシャッター方式では、露光領域Ｒ１と遮光領域Ｒ２との境界Ｂが中央光軸を中心とした円の外接五角形をなすこととなり、当該外接五角形の各辺はエリアイメージセンサー１５のライン（破線矢印で図示。）と交差することとなる。また、このような絞りシャッター方式では、光軸中央に近いほど光電変換素子ほど露光領域Ｒ１と遮光領域Ｒ２との境界Ｂの到達が遅く、露光が終了するタイミングが遅くなるという特性を有する。一方、エリアイメージセンサー１５のラインの方向は水平方向であるため、ライン単位で光電変換素子に露光を開始させるタイミングを調整しても、機械シャッター１３のタイミングに追従することはできない。このような場合であっても、撮像データにおける露光量の階調値を光電変換素子の位置に応じて補正することにより、露光量のばらつきを抑制することができる。
【００５４】
（７）変形例５：
図７の左グラフは、本変形例のエリアイメージセンサー１５における露光のタイミングを示すグラフである。本変形例において、電子シャッター制御部３０ａ１は、電子シャッターのタイミングＸを機械シャッター１３のタイミングＹに追従させない。すなわち、図７の左グラフに示すようにすべてのラインに属するすべての光電変換素子における電荷のリセットを同時に行い、すべての光電変換素子における電荷の蓄積開始を同時に行う（グローバルシャッターを行う）ことにより、すべての光電変換素子における露光を同時に開始させる。図７の左グラフの例では、最上方のライン（ライン番号Ｌmax）の水平方向中央の光電変換素子における現実の露光時間ＴＥ（Ｌmax，Ｃmid）と設定された露光時間ＴＥとを一致させる。この場合、特に下方のラインにおいて、電子シャッターのタイミングＸと機械シャッター１３のタイミングＹとが大きく異なることとなるため、図７の中グラフに示すように設定された露光時間ＴＥに対して現実の露光時間ＡＥが大きくばらつく。特に下方のラインにおいては、設定された露光時間ＴＥに対して現実の露光時間ＡＥが大幅に短くなる。
【００５５】
本変形例でも、図７の右グラフのように設定された露光時間ＴＥを現実の露光時間ＡＥで除算してゲインＧＥを求める。そして、当該ゲインＧＥを各光電変換素子に対応付けてＬＵＴ５３ａに格納し、露光量補正部２０ａがＬＵＴ５３ａを参照して撮像データにおける各画素の露光量の階調値に各画素に対応する光電変換素子のゲインＧＥを乗算する。本変形例では、現実の露光時間ＡＥが、設定された露光時間ＴＥに対して大幅に短くなるラインが生じるが、このようなラインについては１よりも大幅に大きいゲインＧＥが乗算することで、ノイズは増幅されてしまうが露光量のばらつきが抑制できる。すなわち、本発明のように露光量を示す階調値にゲインＧＥを乗算して補正を行えば、電子シャッターのタイミングＸを正確に制御せずとも露光量のばらつきが抑制できる。従って、撮影した画像の画質を大きく劣化させることなく、電子シャッター制御部３０ａ１の回路規模を縮小できる。
【００５６】
（８）変形例６：
図８は、各ラインの光電変換素子における露光および撮像データの読み出しのタイミングを示すグラフである。図８の例では、前記変形例１と同様に電子シャッターのタイミングＸを機械シャッター１３のタイミングＹに完全に追従させていることとする。従って、各光電変換素子における現実の露光時間ＡＥは、設定された露光時間ＴＥと一致する。図８においては、各ラインについて撮像データを読み出すタイミングを示すタイミングＰ（Ｌ）を破線により示している。各ラインにおいては多数の光電変換素子が存在するため、各ラインについて撮像データを読み出すのに必要な期間は、機械シャッター１３により各ラインを境界Ｂが通過する期間よりも長くなる。従って、撮像データの読み出すタイミングＰ（Ｌ）は、各ラインの光電変換素子に露光を開始および終了させるタイミングＸ，Ｙよりも傾きが緩やかとなる。従って、光電変換素子にて露光を終了させてから撮像データの読み出すまでの待機期間ＷＴ（Ｌ）は、ライン番号が増加するほど長くなる。この待機期間ＷＴ（Ｌ）においては、機械シャッター１３の遮光幕が各光電変換素子を遮光するものの、待機期間ＷＴ（Ｌ）が長いほどエリアイメージセンサー１５の暗電流ノイズによる電荷の蓄積量Ｎ（Ｌ）が大きくなる。すなわち、機械シャッター１３のタイミングＹと撮像データの読み出しタイミングＰ（Ｌ）との相違に起因して生じる待機期間ＷＴ（Ｌ）の不均一さに起因して、各光電変換素子における露光量にばらつきが生じることとなる。本変形例では、上方のラインほど暗電流分の露光量が増加することから、上方ラインに行くほどノイズ分が増加する値Ｎ（Ｌ）を露光量の階調値から減ずることにより、待機期間ＷＴ（Ｌ）の不均一さに起因する露光量のばらつきを抑制する。
【００５７】
（９）変形例７：
以上においては、撮影装置１にて画像を補正する例を説明したが、撮影装置１以外の装置にて画像を補正してもよい。例えば、撮影装置１は、画像データ生成部２０による各種画像処理をすることなく、エリアイメージセンサー１５にて撮影された撮像データをそのままリムーバルメモリー５６に記録するモードを備える。また、撮影装置１は、この撮像データに、撮影装置１の機種や撮影時の露光時間（シャッター速度）を特定する添付情報を添付する。本変形例においては、露光量の補正を、上述の撮像データをリムーバルメモリー５６から読み込み可能なコンピューターにおいて実行する。機械シャッター１３のタイミングＹは物理的に異なるシャッター機構を有する撮影装置１の機種ごとに大きく異なる。従って、本変形例においては予め撮影装置１の機種ごとにＬＵＴ５３ａを作成しておきコンピューターに記録しておく。そして、コンピューターは撮像データを読み込むと、当該撮像データに添付された添付情報によって特定される撮影装置１の機種に対応するＬＵＴ５３ａを参照して当該撮像データの各画素に対応付けられた露光量の階調値を補正する。なお、撮影時の露光時間（シャッター速度）に応じたＬＵＴそのものを添付しても良い。この場合には、ＬＵＴが添付されていない場合と異なり、そのＬＵＴを参照して当該撮像データの各画素に対応付けられた露光量の階調値を補正する。
【００５８】
（１０）変形例８：
図３Ａ，３Ｂの中グラフに対比されるように、設定された露光時間ＴＥが長ければ長いほど、現実の露光時間ＡＥと、設定された露光時間ＴＥとの誤差の露光量に与える影響は小さく、当該誤差の影響を抑制するためのゲインＧＥは１に近い値となる。さらに、設定された露光時間ＴＥが大きくなると、現実の露光時間ＡＥと、設定された露光時間ＴＥとの誤差による露光量のばらつきは、画像を視認した場合に感じられなくなる。従って、設定された露光時間ＴＥが所定の閾値よりも長い場合には、露光量補正部２０ａによる補正を行わないようにしてもよい。例えば、設定された露光時間ＴＥに対する、現実の露光時間ＡＥと設定された露光時間ＴＥとの誤差の絶対値の最大値の相対比が所定の閾値（例えば、１／５０等。）である場合には、露光量のばらつきは感じられ難いとして補正を行わないようにしてよい。
本発明の具体的態様は、上述の実施形態や変形例に限定されるものではなく、実施形態や変形例同士を組み合わせたものであってもよいし、本発明の技術的思想を逸脱しない範囲で変形を行っても良い。
【符号の説明】
【００５９】
１…撮影装置、１０…光学系、１１…レンズ、１２…絞り、１３…機械シャッター、１４…ローパスフィルター、１５…エリアイメージセンサー、２０…画像データ生成部、２０ａ…露光量補正部、２０ｂ…画素補間部、２０ｃ…色再現処理部、２０ｄ…フィルター処理部、２０ｅ…ガンマ補正部、２０ｆ…リサイズ処理部、３０…タイミングジェネレーター、３０ａ…センサー制御部、３０ａ１…電子シャッター制御部、３０ｂ…表示制御部、４０…表示部、４１…液晶パネルドライバー、４２…液晶パネル、５５…操作部、５６…リムーバルメモリー。
【特許請求の範囲】
【請求項１】
複数の光電変換素子の露光時間を制御する機械シャッターを用いて撮影された画像を取得する画像取得部と、
前記機械シャッターの動作特性に基づいて前記画像を補正する補正部と、
を備える画像補正回路。
【請求項２】
前記画像取得部は、前記複数の光電変換素子にて電荷の蓄積を開始させることにより露光の開始を制御する電子シャッターと、遮光部を機械的に動作させることにより、前記複数の光電変換素子が配列する素子面に前記遮光部によって遮光された遮光領域を形成する前記機械シャッターとを用いて撮影された画像を取得する、
請求項１に記載の画像補正回路。
【請求項３】
前記補正部は、前記電子シャッターが前記複数の光電変換素子に露光を開始させるタイミングの特性と、前記機械シャッターが前記複数の光電変換素子に露光を終了させるタイミングの特性との相違に基づいて、前記露光時間が短くなる光電変換素子についての露光量ほど大きくする補正を行う、
請求項２に記載の画像補正回路。
【請求項４】
前記電子シャッターは、電荷の蓄積を開始させるための配線が共通する前記複数の光電変換素子が前記素子面にて直線状に配列するライン単位で露光を開始させるとともに、
前記遮光領域の境界は前記ラインに交差し、
前記補正部は、前記ライン内における少なくとも２つの光電変換素子について互いに異なる補正を行う、
請求項３に記載の画像補正回路。
【請求項５】
前記補正部は、撮影光の光軸方向における前記遮光部と前記素子面との距離に応じた補正を行う、
請求項１から請求項４のいずれか一項に記載の画像補正回路。
【請求項６】
前記補正部は、前記画像を撮影した際における前記機械シャッターの動作履歴情報と動作環境情報との少なくとも一方を取得し、前記動作履歴情報と前記動作環境情報との少なくとも一方に応じて前記画像を補正する、
請求項１から請求項５のいずれか一項に記載の画像補正回路。
【請求項７】
請求項１から請求項６のいずれか一項に記載の画像補正回路を備えた撮影装置。
【請求項８】
複数の光電変換素子の露光時間を制御する機械シャッターを用いて撮影された画像を取得する画像取得機能と、
前記機械シャッターの動作特性に基づいて前記画像を補正する補正機能と、をコンピューターに実行させる、
画像補正プログラム。
【請求項１】
複数の光電変換素子の露光時間を制御する機械シャッターを用いて撮影された画像を取得する画像取得部と、
前記機械シャッターの動作特性に基づいて前記画像を補正する補正部と、
を備える画像補正回路。
【請求項２】
前記画像取得部は、前記複数の光電変換素子にて電荷の蓄積を開始させることにより露光の開始を制御する電子シャッターと、遮光部を機械的に動作させることにより、前記複数の光電変換素子が配列する素子面に前記遮光部によって遮光された遮光領域を形成する前記機械シャッターとを用いて撮影された画像を取得する、
請求項１に記載の画像補正回路。
【請求項３】
前記補正部は、前記電子シャッターが前記複数の光電変換素子に露光を開始させるタイミングの特性と、前記機械シャッターが前記複数の光電変換素子に露光を終了させるタイミングの特性との相違に基づいて、前記露光時間が短くなる光電変換素子についての露光量ほど大きくする補正を行う、
請求項２に記載の画像補正回路。
【請求項４】
前記電子シャッターは、電荷の蓄積を開始させるための配線が共通する前記複数の光電変換素子が前記素子面にて直線状に配列するライン単位で露光を開始させるとともに、
前記遮光領域の境界は前記ラインに交差し、
前記補正部は、前記ライン内における少なくとも２つの光電変換素子について互いに異なる補正を行う、
請求項３に記載の画像補正回路。
【請求項５】
前記補正部は、撮影光の光軸方向における前記遮光部と前記素子面との距離に応じた補正を行う、
請求項１から請求項４のいずれか一項に記載の画像補正回路。
【請求項６】
前記補正部は、前記画像を撮影した際における前記機械シャッターの動作履歴情報と動作環境情報との少なくとも一方を取得し、前記動作履歴情報と前記動作環境情報との少なくとも一方に応じて前記画像を補正する、
請求項１から請求項５のいずれか一項に記載の画像補正回路。
【請求項７】
請求項１から請求項６のいずれか一項に記載の画像補正回路を備えた撮影装置。
【請求項８】
複数の光電変換素子の露光時間を制御する機械シャッターを用いて撮影された画像を取得する画像取得機能と、
前記機械シャッターの動作特性に基づいて前記画像を補正する補正機能と、をコンピューターに実行させる、
画像補正プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１２−７０１１８（Ｐ２０１２−７０１１８Ａ）
【公開日】平成２４年４月５日（２０１２．４．５）
【国際特許分類】
【出願番号】特願２０１０−２１１６９６（Ｐ２０１０−２１１６９６）
【出願日】平成２２年９月２２日（２０１０．９．２２）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
【公開日】平成２４年４月５日（２０１２．４．５）
【国際特許分類】
【出願日】平成２２年９月２２日（２０１０．９．２２）
【出願人】（０００００２３６９）セイコーエプソン株式会社 (51,324)
【Ｆターム（参考）】
[ Back to top ]