撮像装置
【課題】使用者が撮像装置を把持する場合、右手と左手で撮像装置に対する触れ方が異なり、その特性を考慮せずにセンサを配置してしまうと、精確な検出結果が得られないばかりか、場合によっては検出すらできない恐れがある。
【解決手段】上記課題を解決するために、撮像装置は、レンズユニットと、レンズユニットと一体的に接続されるボディユニットと、レンズユニットに設けられ、使用者の生体情報を一度のサンプリングにより取得できるセンサから成る第1センサ群と、ボディユニットに設けられ、生体情報を複数回のサンプリングにより取得するセンサを含む第2センサ群とを備える。
【解決手段】上記課題を解決するために、撮像装置は、レンズユニットと、レンズユニットと一体的に接続されるボディユニットと、レンズユニットに設けられ、使用者の生体情報を一度のサンプリングにより取得できるセンサから成る第1センサ群と、ボディユニットに設けられ、生体情報を複数回のサンプリングにより取得するセンサを含む第2センサ群とを備える。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、撮像装置に関する。
【背景技術】
【0002】
撮影者の生体情報を検出して撮影者の感情を推定し、推定された感情に基づいて撮影操作を支援する撮像装置が知られている。例えば、感情の高ぶりに応じて手振れ補正ゲインを調整し、補正レンズの追従特性を改善している。
[先行技術文献]
[特許文献]
[特許文献1]特開2009−210992号公報
【発明の概要】
【発明が解決しようとする課題】
【0003】
使用者が撮像装置を把持する場合、右手と左手で撮像装置に対する触れ方が異なり、その特性を考慮せずにセンサを配置してしまうと、精確な検出結果が得られないばかりか、場合によっては検出すらできない恐れがある。他方、あらゆるセンサを右手用と左手用のそれぞれに用意したのでは、コストの増大を招くことになる。
【課題を解決するための手段】
【0004】
上記課題を解決するために、本発明の第1の態様における撮像装置は、レンズユニットと、レンズユニットと一体的に接続されるボディユニットと、レンズユニットに設けられ、使用者の生体情報を一度のサンプリングにより取得できるセンサから成る第1センサ群と、ボディユニットに設けられ、生体情報を複数回のサンプリングにより取得するセンサを含む第2センサ群とを備える。
【0005】
また、上記課題を解決するために、本発明の第2の態様における撮像装置は、レンズユニットと、レンズユニットと一体的に接続されるボディユニットと、レンズユニットに設けられ、使用者の生体情報を温度の変化に依存して取得するセンサを含む第1センサ群と、ボディユニットに設けられ、生体情報を温度の変化に依存せずに取得するセンサから成る第2センサ群とを備える。
【0006】
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。
【図面の簡単な説明】
【0007】
【図1】本実施形態に係るカメラシステムの要部断面図である。
【図2】カメラシステムの上部概観図である。
【図3】撮影レンズを左手により把持した第1の状態を示す図である。
【図4】撮影レンズを左手により把持した第2の状態を示す図である。
【図5】カメラ本体に設けられたカメラ本体側生体センサ部を示す図である。
【図6】心拍数検出センサと脈波検出センサの構成を示す図である。
【図7】カメラシステムのブロック図である。
【図8】本実施形態に係る撮影モード時の動作フロー図である。
【図9】本実施形態に係る再生モード時の動作フロー図である。
【図10】キャラクタの例を示す図である。
【図11】表示状態の例を示す図である。
【発明を実施するための形態】
【0008】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【0009】
図1は、本実施形態に係るカメラシステム1の要部断面図である。本実施形態では、撮像装置の一例として、カメラシステム1について説明する。カメラシステム1は、ボディユニットとしてのカメラ本体2と交換可能なレンズユニットとしての撮影レンズ3を組み合わせて撮像装置として機能する、レンズ交換式一眼レフカメラである。
【0010】
撮影レンズ3は、フォーカスレンズ、ズームレンズおよび防振レンズを含むレンズ群4、絞り5、カメラシステム1の振れを検出する角速度センサ6、レンズ群4を駆動する駆動装置等を備える。角速度センサ6は、少なくとも光軸に直交する2軸周りの角速度を検出する。駆動装置は、例えば振動波モータ、VCMにより構成される複数のモータを有し、フォーカスレンズを光軸方向に駆動し、防振レンズを光軸方向とは異なる方向に駆動する。
【0011】
また、撮影レンズ3は、撮影レンズ3の全体を制御すると共に、カメラ本体2と協働するレンズCPU7を有し、撮影者の生体情報を取得するセンサ群であるレンズ側生体センサ部8を有する。撮影レンズ3に配設されるセンサ群の構成については後に詳述する。
【0012】
カメラ本体2は、撮影レンズ3からの光束を反射してファインダー光学系26に導く反射位置と、撮影レンズ3からの光束がCCDまたはCMOSなどから構成される撮像素子27に入射するように退避する退避位置とで揺動するメインミラー28を備える。メインミラー28の一部の領域は半透過領域となっており、カメラ本体2は、この半透過領域を透過した光束を焦点検出センサ29へ反射するサブミラー30を備える。サブミラー30は、メインミラー28に連動して揺動し、メインミラー28が退避位置をとるときには、サブミラー30も光束から退避する。なお、焦点検出センサ29は、位相差方式により入射する光束の焦点状態を検出する。
【0013】
反射位置にあるメインミラー28で反射された光束は、焦点板31、ペンタプリズム32を介してファインダー光学系26へ導かれる。ファインダー光学系26は、複数のレンズから構成されており、撮影者はファインダー光学系26により被写界を確認することができる。
【0014】
ペンタプリズム32を透過する光束の一部は測光センサ40に導かれる。測光センサ40は、撮影レンズ3へ入射する光束を複数の領域ごとに測光することにより、被写界の輝度分布を計測する。また、ペンタプリズム32の上方にはGPS(Global Positioning System:全地球測位システム)モジュール41を備えており、GPS衛星からの信号を受信して、カメラシステム1が存在している位置情報を取得する。さらに、カメラ本体2は、撮影レンズ3のマウント部近傍で撮影レンズ3と干渉しない位置に、被写界の音を取り込むマイク42と、ファインダー光学系26の近傍にスピーカ43を備える。
【0015】
メインミラー28が退避位置にあるときには、撮影レンズ3からの光束は、ローパスフィルタ33を介して撮像素子27に入射する。撮像素子27の近傍には撮像基板34が設けられており、撮像基板34の後方には外部に面して背面モニタ37が設けられている。
【0016】
カメラ本体2は、撮影者の右の手指が触れる位置に、撮影者の生体情報を取得するセンサ群であるカメラ本体側生体センサ部16を有する。カメラ本体2に配設されるセンサ群の構成については後に詳述する。
【0017】
図2は、本実施形態に係るカメラシステム1の上部概観図である。具体的には、操作者が右手でカメラ本体2を把持すると共に左手で撮影レンズ3を把持している状態を示す図である。レンズ側生体センサ部8は、撮影者の左手の指または掌が触れる位置に配設されている。
【0018】
上述のように、カメラ本体2は、撮影者の右の手指が触れる位置にカメラ本体側生体センサ部16を有している。撮影者がカメラ本体2を把持するとき、右手の親指がカメラ本体2の背面に位置し、人差し指がレリーズSW24の近傍に位置するので、グリップ部50に位置する他の3本の指と離れてしまう。このため、カメラ本体側生体センサ部16は、右手の親指に対応するカメラ背面位置と、人差し指に対応するレリーズSW24の近傍位置と、他の3本の指に対応するグリップ部近傍のカメラ前面位置とに離間して設けられている。なお、人差し指に対応するカメラ本体側生体センサ部16は、レリーズSW24の表面に設けられていても良い。
【0019】
なお、カメラ本体2においては、右手の中指、薬指、小指の3本がカメラ本体2を把持するカメラ前面位置と、右手の親指に対応したカメラ背面位置との少なくとも一方が、カメラ本体2を把持するグリップ部50である。また、カメラ本体2の背面には、いくつかの操作SWが設けられており、これらの操作SWは右手親指で操作される。また、カメラ本体2の上面には撮影モードを設定する撮影モードSW25が設けられている。
【0020】
図3は、撮影レンズ3を左手により把持した第1の状態を示す図である。第1の状態は、左手の甲が下側に位置して撮影レンズ3を把持した状態である。図4は、撮影レンズ3を左手により把持した第2の状態を示す図である。第2の状態は、左手の甲が左側に位置して撮影レンズ3を把持した状態である。
【0021】
撮影者が撮影レンズ3を把持しつつズーム操作、マニュアルフォーカス操作を行う場合においては、左手の親指が他の指とは離れてしまう。また、異なる撮影者、異なる撮影状況(例えば、横位置撮影および縦位置撮影)によっても撮影レンズの把持の仕方は変化する。そこで、撮影レンズ3の円周上には、複数のレンズ側生体センサ部8(8A〜8D)が設けられている。
【0022】
具体的には、レンズ側生体センサ部8は、ズーム操作位置とマニュアルフォーカス操作位置との少なくとも一方の位置で、かつ、左手の親指に対応する位置と、親指以外の指に対応する位置とに離間して設けられる。より具体的には、レンズ側生体センサ部8は、ズーム操作用ゴム、フォーカス操作用ゴムが設けられた位置であって、左手に接触するように、または、左手と対向するように設けられている。
【0023】
特に、撮影レンズ3が撮影者に触れられるのは撮影動作時が主であり、それ以外の運搬時等においては触れられる機会が少ない。さらには、生体情報の利用頻度が比較的高い撮影準備動作時、すなわち露光前における構図確認時、フォーカスレンズ駆動時などにおいては、撮影者の指の接触箇所が頻繁に変化し、しかも一箇所に留まる時間が極めて短い場合が多い。そこで、撮影レンズ3に設けられるレンズ側生体センサ部8は、一度のサンプリングにより生体情報を取得できるセンサから構成されることが望ましい。つまり、時間をおいて複数回のサンプリングを必要とするタイプのセンサは、レンズ側生体センサ部8を構成するセンサとしては望ましくない。別言すれば、レンズ側生体センサ部8を構成するセンサの検知時間は、カメラ本体側生体センサ部16を構成するセンサの検知時間よりも短いことが望ましい。
【0024】
そこで、本実施形態においては、レンズ側生体センサ部8を構成するセンサとして、撮影者の発汗量を検出する発汗センサ13、撮影者の体温を検出する温度センサ14、および撮影者が撮影レンズ3を把持する圧力を検出する圧力センサ15を採用する。これらのセンサは上記の条件を満たし、比較的短時間で生体情報を取得することができる。
【0025】
レンズ側生体センサ部8B〜8Dは、レンズ側生体センサ部8Aと同様に、発汗センサ13、温度センサ14および圧力センサ15をそれぞれ備える。このように、撮影レンズ3の円周上に複数のレンズ側生体センサ部8(8A〜8D)を設けることにより、少ない接触機会に対応してより確実に撮影者の生体情報を取得できる。
【0026】
なお、上述の実施形態では、ズーム操作位置、マニュアルフォーカス操作位置等に応じて複数のレンズ側生体センサ部8(8A〜8D)を設けているが、撮影者、撮影状態等に応じて撮影レンズ3の把持の仕方が変った場合においても生体情報を検出できる位置であれば、複数のレンズ側生体センサ部8を上述の位置以外の位置に設けてもよい。また、左手の親指が撮影レンズ3を把持する力はあまり大きくないので、レンズ側生体センサ部8B、8Cにおいては、左手の親指に対応する圧力センサ15を省略してもよい。同様に、レンズ側生体センサ部8に高い検出精度が要求されない場合には、左手の親指に対応する位置のセンサを適宜省略することにより、撮影レンズ3の部品点数を抑えることができる。
【0027】
図5は、カメラ本体2のレリーズSW24の近傍およびグリップ部50に設けられたカメラ本体側生体センサ部16を示す図である。撮影レンズ3に対する撮影者の接触頻度および接触箇所の変動を考えると、カメラ本体2に対する撮影者の把持は長時間であり、接触場所も一定している。そこで、カメラ本体2に設けられるカメラ本体側生体センサ部16には、時間をおいて複数回のサンプリングを行うことで撮影者の生体情報を取得するタイプのセンサを含めることができる。別言すれば、カメラ本体側生体センサ部16を構成するセンサの検知時間は、レンズ側生体センサ部8を構成するセンサの検知時間より長くても良い。
【0028】
特に、撮影者がカメラ本体2を右手で把持する場合を考えると、背面および側面に位置する掌と、グリップ部50に位置する中指、薬指および小指でカメラ本体2を支え、親指および人差し指がレリーズSW24等の操作部材を操作する状況を想定できる。すなわち、掌が接触する背面および側面と、中指、薬指および小指が接触するグリップ部50は、安定的な接触を必要とするタイプのセンサを配置するには都合が良い。そこで、本実施形態においては、カメラ本体側生体センサ部16を構成するセンサとして、グリップ部50のうち撮影者の中指、薬指および小指が接触すると想定される箇所に、心拍数検出センサ17と脈波検出センサ20を配設する。これらのセンサは、所定の時間間隔により複数回のサンプリングを行うことで撮影者の心拍数、脈波を検出する。
【0029】
また、撮影者の把持力を検出する圧力センサ23も、把持力が適切に検出できるように、中指、薬指および小指が接触すると想定される箇所に配設される。すなわち、心拍数検出センサ17、脈波検出センサ20および圧力センサ23は、グリップ部50の下部に隣接して配設される。なお、使用者の手の大きさによっては小指がグリップ部50に掛からない場合が想定されるので、中指、薬指の少なくとも一方が掛かる位置を想定して配設されることが望ましい。
【0030】
一方、撮影者の発汗量を検出する発汗センサ21、体温を検出する温度センサ22は、レリーズSW24の周辺に設けられる。これらのセンサは、撮影者に継続的に接触されると、例えば前回のサンプリング時における汗が残存して今回のサンプリング結果に悪影響を与える場合があるので、グリップ部50ではなく、レリーズSW24の周辺に配設されることが望ましい。
【0031】
図6は、カメラ本体側生体センサ部16が備える心拍数検出センサ17と脈波検出センサ20の構成を示す図である。図6(a)に示すように、心拍数検出センサ17は、基準電極17aと検出電極17b〜17dから構成される互いに分離した複数の電極部を有し、撮影者の心拍数を検出する。また、図6(b)に示すように、脈波検出センサ20は、複数の発光部20a(20a1〜20a4)とこれらに対応する受光部20b(20b1〜20b4)が交互に配置されて構成され、撮影者の脈派を検出する。
【0032】
図7は、本実施形態に係るカメラシステム1のブロック図である。撮像基板34は、撮像素子27を駆動する駆動回路10、撮像素子27の出力をデジタル信号に変換するA/D変換回路11、ASICで構成される画像処理制御回路18および撮像素子27からの信号の高周波成分を抽出するコントラストAF回路19などを有している。
【0033】
画像処理制御回路18は、デジタル信号に変換された画像信号に対してホワイトバランス調整、シャープネス調整、ガンマ補正、階調調整などの画像処理を施すと共に、JPEGなどの画像圧縮を行って画像ファイルを生成する。画像ファイルは、画像に関する情報をメタ情報として記憶する領域を有する。例えば、JPEGファイルではEXIF情報として、様々な情報を追加的に付加することができる。具体的には後述するが、本実施形態においては、撮影時の撮影者の生体情報をEXIF情報として記述する。生成された画像ファイルは、画像記録媒体35に記憶される。画像記録媒体35は、カメラ本体2に対して着脱可能なフラッシュメモリなどの記録媒体であっても良いし、カメラ本体2に内蔵されるSSDなどの記録媒体であっても良い。
【0034】
画像処理を施された画像信号は、背面モニタ制御回路36の制御により、背面モニタ37に表示される。撮影直後に撮影された画像信号を所定時間表示すれば、画像記録媒体35に記録された画像ファイルに対応する画像を撮影者に視認させるレックレビュー表示を実現できる。また、撮像素子27が連続的に光電変換する被写界像を、画像記録媒体35に記録することなく背面モニタ37に逐次表示すればライブビュー表示を実現できる。さらに、撮像素子27が連続的に光電変換する被写界像を、例えばMPEG、H.264などの動画圧縮処理を画像処理制御回路18で施して画像記録媒体35に記録すれば、動画撮影を実現することができる。このとき、マイク42で収集した被写界の音声も圧縮処理して、動画データに同期させて記録する。生成される動画像のフレームレートは、例えば30fpsなど、複数のフレームレートから選択されて設定される。
【0035】
また、撮影者により再生モードが選択されたときには、背面モニタ制御回路36の制御により、撮影後の画像ファイルを背面モニタ37に表示することができる。このとき、画像記録媒体35に記録された画像ファイルは、カメラ本体CPU46により読み出されて画像処理制御回路18により展開される。撮影者が操作部材の操作により別画像ファイルの表示指示を行ったときには、カメラ本体CPU46は、指示された画像ファイルを展開して背面モニタ37に表示する。具体的な表示フローについては後述する。
【0036】
コントラストAF回路19は、撮像素子27からの撮像信号の高周波成分を抽出してAF評価値信号を生成し、これが最大になるフォーカスレンズ位置を検出する。具体的には、画像処理制御回路18から入力される画像信号から、バンドパスフィルタを用いて所定の高周波成分を抽出し、ピークホールド、積分等の検波処理を行ってAF評価値信号を生成する。生成したAF評価値信号は、カメラ本体CPU46に出力する。
【0037】
レンズCPU7は、角速度センサ6で検出した手振れをキャンセルするように、撮影レンズ3内の防振レンズを光軸方向とは異なる方向に駆動して光学式手振れ補正を実現している。手振れ補正はこのような光学式手振れ補正に限らず、撮像素子27に駆動機構を付与して、光軸方向とは異なる方向に駆動して手振れをキャンセルする撮像素子駆動式手振れ補正を採用することもできる。さらには、画像処理制御回路18から出力された複数枚の画像間の動きベクトルを算出し、算出した画像間の動きベクトルをキャンセルするように画像読み出し位置を制御して手振れをキャンセルする電子式手振れ補正を採用することもできる。光学式手振れ補正および撮像素子駆動式手振れ補正は特に静止画撮影に好適であり、動画撮影にも適用される。電子式手振れ補正は動画撮影に好適である。これらの方式は、選択的、追加的に採用され得る。
【0038】
測光センサ40は、上述のように、撮影レンズ3へ入射する光束を複数の領域ごとに測光することにより被写界の輝度分布を計測するが、計測結果はカメラ本体CPU46に出力する。カメラ本体CPU46では、選択された測光モードに応じて露出値を算出する。測光モードとしては、明るい部分と暗い部分のバランスを取る分割測光モード、画面中央を適正露出とする中央重点測光モード、選択したフォーカスポイントの狭領域を適正露出とするスポット測光モードなどが選択され得る。
【0039】
カレンダー部38は、水晶発振子、計時用集積回路等を有しており、年月日時分秒といったカレンダー情報を保持する。カメラ本体CPU46は、カレンダー部38から時間に関する情報を適宜検出することができる。GPSモジュール41は、GPS衛星からの信号を受信してカメラ本体2が存在している緯度、経度、高度情報を取得する。カメラ本体CPU46は、GPSモジュール41からカメラ本体2が存在している位置に関する情報を適宜検出することができる。
【0040】
フラッシュROM39は、EEPROM(登録商標)であり、カメラシステム1を動作させるプログラムのほか、各種調整値、設定値を記憶する記憶装置である。具体的には、AF調整データ、AE調整データ、製造時の年月日時間データ、設定SWの設定履歴などを記憶している。また、フラッシュROM39には、撮影者の平常時の生体情報値も記憶されている。本実施形態においては、フラッシュROM39は生体情報値として心拍数、血流量、血圧、体温、カメラ本体2を把持する圧力、撮影レンズ3を把持する圧力を記憶している。
【0041】
RAM44は、フラッシュROM39に記憶されたプログラムが展開され、カメラ本体CPU46が高速にアクセスできるDRAMなどの高速RAMである。特に頻繁に参照される各種調整値、設定値などもフラッシュROM39からコピーされ、カメラ本体CPU46からのアクセスを容易にする。キャラクタROM45は、背面モニタ37に撮影画像を表示するときに、重畳して表示するキャラクタを複数記憶している。詳細については後述する。
【0042】
レリーズSW24は、2段式のスイッチである。撮影者がレリーズSW24を半押しすると、カメラ本体CPU46は、オートフォーカス、測光などの撮影準備動作を行う。さらに撮影者がレリーズSW24を全押しすると、カメラ本体CPU46は、レンズ側生体センサ部8およびカメラ本体側生体センサ部16を用いて撮影者の生体情報の検出を開始すると共に、静止画、動画の撮影動作を開始する。
【0043】
カメラ本体CPU46は、レンズCPU7と協働してカメラシステム1の全体を制御する。特に本実施形態では、カメラ本体CPU46は、撮影モードにおいては、レンズ側生体センサ部8およびカメラ本体側生体センサ部16の出力に基づいて撮影者の生体情報を取得し、撮影画像のメタ情報として画像ファイルに記録する。また、再生モードにおいては、メタ情報から生体情報を読み出して撮影時における撮影者の感情を判断し、読み出した撮影画像を判断した感情に基づいて加工した上で、背面モニタ37に表示する。または、撮影画像を表示した時の生体情報を取得して感情を判断し、表示する撮影画像を判断した感情に基づいて加工した上で、背面モニタ37に再度表示する。ここではまず、レンズ側生体センサ部8およびカメラ本体側生体センサ部16による撮影者の生体情報の取得について説明する。
【0044】
はじめに、心拍数測定について説明する。上述のように、撮影者が右手でカメラ本体2のグリップ部50を把持する位置には心拍数検出センサ17の基準電極17aおよび検出電極17b〜17dが設けられている。検出電極17b〜17dからの検出電位は、差動増幅器で電位差が増幅されてカメラ本体CPU46へ出力される。カメラ本体CPU46は、一定の時間間隔ごとに検出電極17b〜17dから得た電位差を処理して、撮影者の心拍数を演算する。
【0045】
なお、例えば撮影者がグリップ部50を把持していない場合には、撮影者の右手が基準電極17a、検出電極17b〜17dに触れていないので、基準電極17aと検出電極17b〜17dとの間がオープンとなる。カメラ本体CPU46は、基準電極17aと検出電極17b〜17dとの間がオープンの場合には、撮影者がグリップ部50を把持していないと判断する。
【0046】
次に、血圧測定について説明する。脈波検出センサ20は、撮影者の血圧を測定する。脈波検出センサ20は、発光部20aから例えば赤外線を射出し、この赤外線が指の動脈で反射され、反射された赤外線を赤外線センサである受光部20bで受光することにより手の指部の脈波を検出する。つまり、末梢血管の血流量を検出する。カメラ本体CPU46は、一定の時間間隔ごとに得る脈波検出センサ20からの脈波に基づいて撮影者の血圧を演算する。カメラ本体CPU46は、心拍数検出センサ17の基準電極17aと検出電極17bとの出力に基づいて、脈波検出センサ20の発光部20aの発光を禁止してもよい。つまり、撮影者がグリップ部50を把持していないときに電力の消費を回避する。
【0047】
次に、発汗測定について説明する。発汗は手のインピーダンスを測定することにより検出できる。発汗センサ13、21は、複数の電極を有して一度のサンプリングにより発汗を検出する。発汗センサ13は、レンズ側生体センサ部8A〜8Dのそれぞれに設けられているが、感動、興奮、緊張といったような精神性発汗は、発汗量が少なく、発汗時間も短いので、指よりも発汗量が多い掌側に位置するレンズ側生体センサ部8B、Cだけに設けてもよい。
【0048】
次に、温度測定について説明する。温度センサ14、22は、熱により抵抗値が変化するサーミスタ方式を用いており、一度のサンプリングにより撮影者の体温を検出できる。発汗には上述の精神性発汗と、体温調節のための温熱性発汗とがあり、精神性発汗と温熱性発汗とは相互干渉している。このため、カメラ本体CPU46は発汗センサ13、21の出力と、温度センサ14、22の出力とに基づいて撮影者の発汗が精神性発汗か温熱性発汗かを判断することができる。例えば、カメラ本体CPU46は、温度センサ22により検出した温度が高く、発汗センサ21からの発汗信号が常時検出される場合には温熱性発汗と判断することができる。したがって、温度センサ14は発汗センサ13と、温度センサ22は発汗センサ21と隣接して配設されることが好ましい。
【0049】
発汗センサ13、21および温度センサ14、22は、それぞれ一度のサンプリングにより発汗、体温を検出できるが、継続的にサンプリングを行うことにより、これらの変化を検出することもできる。カメラ本体CPU46は、発汗センサ21からの発汗信号が不規則に出力される場合に精神性発汗と判断して、撮影者が感動、興奮、緊張といった状態であることを検出できる。
【0050】
なお、温度センサ14、22を省略した場合には、カメラ本体CPU46は、GPSモジュール41の位置情報、カレンダー部38からの時間情報などに基づいて、発汗センサ13、21からの発汗信号が精神性発汗か温熱性発汗かを判断してもよい。更に、レンズCPU7が発汗センサ13、温度センサ14の出力に基づいて、左手の汗が精神性発汗か温熱性発汗かを判断することもできる。
【0051】
次に、圧力測定について説明する。圧力センサ15は、静電容量型のセンサであり、撮影者が撮影レンズ3を把持したときの押圧力による変形量を、一度のサンプリングにより検出できる。本実施形態において圧力センサ15は、操作ゴムの下方に設けられている。圧力センサ23も同様の静電容量型のセンサであり、撮影者がカメラ本体2を把持したときの押圧力による変形量を測定する。なお、圧力センサ15、23として歪ゲージ、電歪素子などを用いてもよい。
【0052】
カメラ本体側生体センサ部16は、発汗センサ21、温度センサ22および圧力センサ23を含み、レンズ側生体センサ部8は、発汗センサ13、温度センサ14および圧力センサ15から構成される。すなわち、同一の機能を持つセンサが、カメラ本体2と撮影レンズ3のそれぞれに設けられている。そこで、カメラ本体CPU46は、例えば撮影者の発汗情報を取得したい場合は、それぞれの発汗センサ21、13に対して並列で検出を要求し、後段の処理を含めていち早く生体情報として取得できた方の結果を採用する。つまり、同一機能を持つセンサがカメラ本体2と撮影レンズ3のそれぞれに設けられている場合は、いち早く生体情報を取得できた方の結果を採用する。なお、後に取得された生体情報が先に取得された生体情報よりも精度、信頼度などが高い場合には、取得結果を差し替えても良い。
【0053】
上述のように、カメラ本体CPU46は、レンズCPU7と協働して、レンズ側生体センサ部8およびカメラ本体側生体センサ部16の出力に基づいて撮影者の生体情報を取得する。以下に、カメラシステム1の制御フローについて具体的に説明する。
【0054】
図8は、本実施形態に係る撮影モード時の動作フロー図である。フローは、カメラシステム1の電源がONにされて撮影者からの撮影指示を待つ状態から開始する。カメラ本体CPU46は、ステップS101で、レリーズSW24の半押しであるSW1がONになるまで待機する。SW1が撮影者によりONにされると、カメラ本体CPU46は、撮影準備動作を実行する。具体的には、測光センサ40の出力により露出値を決定し、焦点検出センサ29を用いた位相差方式によりオートフォーカスを行う。オートフォーカスは、コントラストAF回路19を用いたコントラスト方式であっても良い。
【0055】
そして、ステップS103で、レリーズSW24の全押しであるSW2がONになるまで待機する。所定の時間内にSW2がONにならなければ、ステップS101へ戻る。SW2がONになれば、ステップS104へ進み、カメラ本体CPU46は、カメラ本体側生体センサ部16およびレンズ側生体センサ部8の少なくとも一方から撮影者の生体情報を取得する。さらに、ステップS105で本撮影動作を実行する。本撮影動作では、ステップS102で決定された露出値に従って、レンズCPU7は絞り5を動作させ、カメラ本体CPU46はフォーカルプレーンシャッタを走行させて、被写体光束を撮像素子27に導く。さらにカメラ本体CPU46は、決定された撮像感度に従って撮像素子27の出力に所定のゲインを掛けて電荷読み出しを行う。なお、ステップS104とステップS105の順序はこれに限らず、逆の順序であっても良いし、両者が並行して処理されても良い。
【0056】
ステップS106では、画像処理制御回路18は、このように生成された画像信号に、画像処理および圧縮処理を施して画像ファイルを生成する。このとき、ステップS104で取得した生体情報を、画像ファイルのメタ情報に記録する。さらに、ステップS107でカメラ本体CPU46は、取得した生体情報から撮影者の感情を推定して、推定した感情に基づいて画像ファイルのレイティングを行う。レイティングとは、撮影画像の重要度に応じた等級分けであり、例えば1から5の5段階の等級が割り当てられる。一般的には撮影者が撮影画像を視認しながら等級を付与するが、本実施形態においては、推定した感情から画像の重要度を判定して自動的に等級を付与する。感情の分類例は後述するが、例えば、推定された感情が「愛情」、「喜び」等のポジティブな感情であれば重要度の高い5、4を付与する。また、推定された感情が「平常」であれば平均値である3を付与し、「無関心」、「怒り」、「苦痛」等のネガティブな感情に対しては重要度の低い2、1を付与する。
【0057】
上述のように、レンズ側生体センサ部8およびカメラ本体側生体センサ部16は、さまざまなセンサの集合体として構成されており、それぞれのセンサが異なる種類の生体情報を出力する。これらの出力を単独で、あるいは組み合わせて判断することにより、撮影者の感情を推定することができる。例えば、高い心拍数および精神性発汗が検出されるときには、撮影者は「焦り」を感じていると推定できる。センサの出力と感情の対応関係は検証的に確定されており、対応関係を示すテーブルをフラッシュROM39に記憶させておくことができる。そこで、感情判定においては、取得された生体情報が、テーブルに記述された特定の感情パターンと一致するかを判断する。
【0058】
ステップS107でレイティングを行い、等級を画像ファイルのメタ情報に記録したら、ステップS108へ進み、カメラ本体CPU46は生成した画像ファイルを画像記録媒体35に記録する。以上により、撮影モード時の一連の動作フローを終了する。
【0059】
なお、ステップS104の生体情報の取得を、ステップS103のSW2オン以前に実行しても良い。そして、カメラ本体CPU46は、取得した生体情報から撮影者の感情を推定し、当該感情に対応するキャラクタをキャラクタROM45から読み出して、ファインダー内の表示部または背面モニタ37に表示する。つまり、解析された感情を撮影者に告知する。撮影者は、キャラクタを視認することにより自らの感情を客観的に判断できるので、感情の告知は、SW2オンのタイミング決定に貢献する。
【0060】
また、解析された感情を被写体側にも告知すれば、被写体である人物は撮影者の心理状況を理解できるので、撮影者の要求にいち早く応えることができるなどのメリットがある。被写体側への告知は、カメラ本体2の前面側にも表示部を設けることによって行うことができるが、もちろん表示部における表示に限らない。スピーカ43により音声を用いて告知しても良いし、カメラ本体2がプロジェクターユニットを備えるのであれば、被写体にキャラクタを投影して告知しても良い。
【0061】
また、SW2オンの前に感情を検出できれば、推定された感情により撮影シーケンスを自動制御することもできる。例えば、撮影者が興奮状態であることが推定されたら、その時点から露出条件を変えるなどして、続けて複数枚の撮影を実行する。このような自動制御により、撮影者の感情の起伏に影響を受けることの少ない撮影結果を得ることができる。
【0062】
次に、再生モードについて説明する。図9は、本実施形態に係る再生モード時動作フロー図である。再生モードは、撮影者が操作部材の操作により再生モードを選択したときに開始する。なお、再生モードは、画像の撮影者ではなく、他の観察者であっても操作できる。
【0063】
撮影者により再生モードが選択されると、カメラ本体CPU46は、ステップS201で現在の再生モードが撮影時モードに設定されているか、表示時モードに設定されているかを判断する。撮影時モードとは、撮影者の撮影時における感情を推定し、この感情に基づいて撮影画像を加工して表示するモードである。一方、表示時モードとは、再生モード時においてカメラシステム1を操作する観察者の、撮影画像の表示時における感情を推定し、この感情に基づいて撮影画像を加工して再表示するモードである。
【0064】
まず、撮影時モードについて説明する。ステップS201で撮影時モードが設定されていると判断すると、カメラ本体CPU46は、ステップS301で対象となる最初の画像ファイルを画像記録媒体35から画像処理制御回路18を用いて読み出し、RAM44の作業メモリ上に展開する。続いてステップS302において、対象画像ファイルのメタ情報から、撮影時に付加された撮影者の生体情報を読み出す。カメラ本体CPU46は、ステップS303で、読み出した生体情報から撮影者の感情を推定する。生体情報から撮影者の感情の推定は、上述のように、フラッシュROM39に記憶された生体情報と感情パターンの対応関係を示すテーブルを参照し、読み出した生体情報がテーブルに記述された特定の感情パターンと一致するかを判断して行う。
【0065】
ステップS303で感情を推定したら、ステップS304で、カメラ本体CPU46は画像処理制御回路18を用いて、RAM44の作業メモリ上に展開した撮影画像を、推定した感情に基づいて加工する。具体的な加工例については後述するが、例えば、推定した感情に対応するキャラクタをキャラクタROM45から読み出して、これを撮影画像に合成する加工を行う。
【0066】
このように推定した感情に基づいて加工された撮影画像は、ステップS305で、背面モニタ制御回路36により表示用信号に変換されて背面モニタ37に表示される。そして、一定時間内に次画像の表示指示があれば、再びステップS301へ戻って次画像に対して同様の表示処理を繰り返す。次画像の表示指示は、撮影者による操作部材の操作であっても良いし、スライドショーモード等の自動再生指示であっても良い。一定時間内に次画像の表示指示が無ければ再生モードを終了する。このように、背面モニタ37を取り囲んで鑑賞する鑑賞者に、撮影時における撮影者の感情が認識されれば、撮影画像をより楽しむことができる。
【0067】
次に、表示時モードについて説明する。ステップS201で表示時モードが設定されていると判断すると、カメラ本体CPU46は、ステップS401で対象となる最初の画像ファイルを画像記録媒体35から画像処理制御回路18を用いて読み出し、RAM44の作業メモリ上に展開する。続いてステップS402においてカメラ本体CPU46は、RAM44の作業メモリ上に展開した撮影画像を、背面モニタ制御回路36を用いて背面モニタ37に表示する。
【0068】
対象画像を表示して観察者に視認させたら、カメラ本体CPU46はステップS403で、レンズ側生体センサ部8およびカメラ本体側生体センサ部16の出力に基づいて、カメラシステム1を操作する観察者の生体情報を取得する。そして、ステップS404で、取得された生体情報から観察者の感情を推定する。
【0069】
ステップS404で感情を推定したら、ステップS405で、カメラ本体CPU46は画像処理制御回路18を用いて、RAM44の作業メモリ上に展開されている撮影画像を、ステップS304と同様に、推定した感情に基づいて加工する。このように推定した感情に基づいて加工された撮影画像は、ステップS406で、背面モニタ制御回路36によりすでに表示されている加工前の撮影画像に置き換えられて背面モニタ37に表示される。そして、一定時間内に次画像の表示指示があれば、再びステップS401へ戻って次画像に対して同様の表示処理を繰り返す。次画像の表示指示は、撮影者による操作部材の操作であっても良いし、スライドショーモード等の自動再生指示であっても良い。一定時間内に次画像の表示指示が無ければ再生モードを終了する。このように、背面モニタ37を取り囲んで鑑賞する鑑賞者に、表示時における操作者の感情が認識されれば、撮影画像をより楽しむことができる。
【0070】
なお、再生モードによる撮影画像の再生は、上述のような画像の加工を伴うものの他に、記録された画像ファイルをそのまま展開して再生する通常の再生も選択し得る。再生モードにおける表示方法は、メニュー選択等により選択されて設定される。
【0071】
また、上述の撮影時モード、表示時モードの他にも様々なモードを設定し得る。例えば、再生時における観察者の感情を推定して、その感情と同じ感情がメタ情報から解析される画像ファイルのみを表示させるセレクトモードが挙げられる。具体的には、カメラ本体CPU46が、レンズ側生体センサ部8およびカメラ本体側生体センサ部16の出力に基づいて、カメラシステム1を操作する観察者の生体情報を取得する。次に、画像処理制御回路18を用いて対象となり得る画像ファイルを画像記録媒体35から読み出し、そのメタ情報から、撮影時に付加された撮影者の生体情報を抽出する。さらに、カメラ本体CPU46は、読み出した生体情報から撮影者の感情を推定する。そして、撮影者の感情が観察者の感情と一致すれば、当該撮影画像を、背面モニタ制御回路36により表示用信号に変換して背面モニタ37に表示する。この一連の処理を、対象となり得る画像ファイルが無くなるまで継続する。もちろん、表示する撮影画像に対して、推定した感情に基づき加工を施しても良い。このような処理を実行することにより、観察者の気分に即した撮影画像を選択的に表示することができる。
【0072】
推定した感情を撮影画像に反映させるべく、撮影画像を加工して表現する手法は様々である。例えば、表示させる撮影画像の大きさを変更することができる。取得した生体情報から「羞恥」の感情が推定される場合は、撮影画像を小さく加工して表示する。逆に「喜び」の感情が推定される場合は、ズーミングするように徐々に拡大して表示する。
【0073】
さらに、表示する撮影画像の輝度、再度および色相の少なくとも1つを変更する加工を施すこともできる。取得した生体情報から「愛情」の感情が推定される場合は、撮影画像を暖色系に寄せる加工を施す。一方、「絶望」の感情が推定される場合は、撮影画像全体を暗く加工して表示する。
【0074】
または、スライドショーモード等の自動再生時には、連続して表示される撮影画像の、画像ごとの表示時間を変更することもできる。取得した生体情報から「焦り」の感情が推定される場合は、一枚あたりの表示時間を短くして表示する。
【0075】
別の例としては、感情に対応するキャラクタをキャラクタROM45から読み出して、撮影画像に合成する加工を施しても良い。図10は、感情に対応するキャラクタの例を示す図である。図示するように、「平常」「喜び」「愛情」「羞恥」「焦り」「苦痛」「驚き」「困惑」「無関心」「悲しみ」「怒り」「絶望」といった様々な感情に対応するキャラクタがキャラクタROM45に記憶されている。キャラクタの合成は、画像に直接埋め込んで画像信号を生成しても良いし、背面モニタ制御回路36により撮影画像上にレイヤー状に重畳して画像信号を生成しても良い。また、背面モニタ37の撮影画像を表示する領域とは別の空き領域にキャラクタを表示するように表示信号を生成しても良い。
【0076】
図10では、それぞれの感情に対応するキャラクタを示すが、一つの感情に対して、その度合いに応じて複数のキャラクタを用意してもよい。生体情報からは、例えば「焦り」の感情の中でも、より強い焦りを感じているのか、わずかな焦りを感じているのかを判断することができる。そこで、同じ「焦り」を示すキャラクタでも、そのデザインから「焦り」の度合いがわかるように複数のキャラクタを用意する。そして、判断した感情とその度合いから、これに対応するキャラクタを選択して加工、表示する。また、感情の度合いは、キャラクタの大きさ、色、数、表示時間、アニメーションの動きによっても表現できる。カメラ本体CPU46は、判断した感情とその度合いから、読み出したキャラクタ自体を加工、変更して表示する。
【0077】
図11は、キャラクタを組み合わせて表示する表示状態の例を示す図である。図は、「喜び」を表す喜びキャラクタ47が、撮影画像に重畳されて動き回る様子を表している。背面モニタ37には、キャラクタが合成された撮影画像の表示の他に、ファイル名表示48、等級アイコン表示49が行われる。
【0078】
なお、推定した感情の撮影画像への反映は、上述の1つの加工に限らない。もちろん組み合わせて加工を行っても良いし、他の表現手法を用いて感情を撮影画像に反映しても良い。
【0079】
以上の実施形態では、静止画ファイルの撮影動作の例を示した。しかし、動画ファイルにおいても、生体情報から推定される感情に基づいて画像を加工することができる。また、生体情報の記録は、画像ファイルのメタ情報への記録に限らず、画像ファイルへのリンク情報と生体情報を記述する生体情報格納ファイルを生成しても良い。
【0080】
以上の実施形態では、一度のサンプリングにより生体情報を取得できるか否かにより、レンズ側生体センサ部8を構成するセンサとするか否かを定めた。しかしながら、センサの配設については、他の観点も採用し得る。例えば、使用者の生体情報を温度の変化に依存して取得するタイプのセンサであれば、撮像素子27の発熱の影響を受けやすいカメラ本体2への配設を避けるべきと考えられる。この観点からすると、レンズ側生体センサ部8としては温度の変化に依存して取得するタイプのセンサを含み得るが、カメラ本体側生体センサ部16は温度の変化に依存せずに取得するタイプのセンサのみから構成されることが好ましい。したがって、温度の変化に依存して生体情報を取得する温度センサ、発汗センサはレンズ側生体センサ部8として配設されることが好ましい。
【0081】
以上の実施形態では、生体情報を取得するセンサとして、心拍数検出センサ、脈波検出センサ、発汗センサ、温度センサ、圧力センサを例に説明したが、もちろんこれらのセンサに限らない。新たに追加されるセンサは、上述の観点に即してレンズ側生体センサ部8およびカメラ本体側生体センサ部16の少なくとも一方を構成するセンサとして配設される。
【0082】
また、以上の実施形態においては、電源の構成については特に言及していないが、もちろん、カメラシステム1は電力の供給を受けて動作する。カメラシステム1は、電力供給を、家庭用AC電源に接続して受けることもできるし、着脱可能な電池から受けることもできる。電池の種類は、一次電池でも二次電池でも良い。
【0083】
さらには、電力を供給する素子の性質に合せて、複数の電池が着脱できるように構成しても良い。例えば、上記の実施形態のように、カメラ本体2と撮影レンズ3がそれぞれ異なるユニットとして構成される場合においては、それぞれのユニットに対して電池を装着し得る。この場合、カメラ本体2に装着された電池は主にカメラ本体2に電力を供給し、撮影レンズ3に装着された電池は主に撮影レンズ3に電力を供給する。したがって、フォーカスレンズを駆動する駆動電力は、撮影レンズ3に装着された電池により供給される。もちろん、消耗時等においては、一方の電池が他方の電池を補うように電力を供給することもできる。
【0084】
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【0085】
特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
【符号の説明】
【0086】
1 カメラシステム、2 カメラ本体、3 撮影レンズ、4 レンズ群、5 絞り、6 角速度センサ、7 レンズCPU、8 レンズ側生体センサ部、10 駆動回路、11 A/D変換回路、13 発汗センサ、14 温度センサ、15 圧力センサ、16 カメラ本体側生体センサ部、17 心拍数検出センサ、18 画像処理制御回路、19 コントラストAF回路、20 脈波検出センサ、21 発汗センサ、22 温度センサ、23 圧力センサ、24 レリーズSW、25 撮影モードSW、26 ファインダー光学系、27 撮像素子、28 メインミラー、29 焦点検出センサ、30 サブミラー、31 焦点板、32 ペンタプリズム、33 ローパスフィルタ、34 撮像基板、35 画像記録媒体、36 背面モニタ制御回路、37 背面モニタ、38 カレンダー部、39 フラッシュROM、40 測光センサ、41 GPSモジュール、42 マイク、43 スピーカ、44 RAM、45 キャラクタROM、46 カメラ本体CPU、47 喜びキャラクタ、48 ファイル名表示、49 等級アイコン表示、50 グリップ部
【技術分野】
【0001】
本発明は、撮像装置に関する。
【背景技術】
【0002】
撮影者の生体情報を検出して撮影者の感情を推定し、推定された感情に基づいて撮影操作を支援する撮像装置が知られている。例えば、感情の高ぶりに応じて手振れ補正ゲインを調整し、補正レンズの追従特性を改善している。
[先行技術文献]
[特許文献]
[特許文献1]特開2009−210992号公報
【発明の概要】
【発明が解決しようとする課題】
【0003】
使用者が撮像装置を把持する場合、右手と左手で撮像装置に対する触れ方が異なり、その特性を考慮せずにセンサを配置してしまうと、精確な検出結果が得られないばかりか、場合によっては検出すらできない恐れがある。他方、あらゆるセンサを右手用と左手用のそれぞれに用意したのでは、コストの増大を招くことになる。
【課題を解決するための手段】
【0004】
上記課題を解決するために、本発明の第1の態様における撮像装置は、レンズユニットと、レンズユニットと一体的に接続されるボディユニットと、レンズユニットに設けられ、使用者の生体情報を一度のサンプリングにより取得できるセンサから成る第1センサ群と、ボディユニットに設けられ、生体情報を複数回のサンプリングにより取得するセンサを含む第2センサ群とを備える。
【0005】
また、上記課題を解決するために、本発明の第2の態様における撮像装置は、レンズユニットと、レンズユニットと一体的に接続されるボディユニットと、レンズユニットに設けられ、使用者の生体情報を温度の変化に依存して取得するセンサを含む第1センサ群と、ボディユニットに設けられ、生体情報を温度の変化に依存せずに取得するセンサから成る第2センサ群とを備える。
【0006】
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。
【図面の簡単な説明】
【0007】
【図1】本実施形態に係るカメラシステムの要部断面図である。
【図2】カメラシステムの上部概観図である。
【図3】撮影レンズを左手により把持した第1の状態を示す図である。
【図4】撮影レンズを左手により把持した第2の状態を示す図である。
【図5】カメラ本体に設けられたカメラ本体側生体センサ部を示す図である。
【図6】心拍数検出センサと脈波検出センサの構成を示す図である。
【図7】カメラシステムのブロック図である。
【図8】本実施形態に係る撮影モード時の動作フロー図である。
【図9】本実施形態に係る再生モード時の動作フロー図である。
【図10】キャラクタの例を示す図である。
【図11】表示状態の例を示す図である。
【発明を実施するための形態】
【0008】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【0009】
図1は、本実施形態に係るカメラシステム1の要部断面図である。本実施形態では、撮像装置の一例として、カメラシステム1について説明する。カメラシステム1は、ボディユニットとしてのカメラ本体2と交換可能なレンズユニットとしての撮影レンズ3を組み合わせて撮像装置として機能する、レンズ交換式一眼レフカメラである。
【0010】
撮影レンズ3は、フォーカスレンズ、ズームレンズおよび防振レンズを含むレンズ群4、絞り5、カメラシステム1の振れを検出する角速度センサ6、レンズ群4を駆動する駆動装置等を備える。角速度センサ6は、少なくとも光軸に直交する2軸周りの角速度を検出する。駆動装置は、例えば振動波モータ、VCMにより構成される複数のモータを有し、フォーカスレンズを光軸方向に駆動し、防振レンズを光軸方向とは異なる方向に駆動する。
【0011】
また、撮影レンズ3は、撮影レンズ3の全体を制御すると共に、カメラ本体2と協働するレンズCPU7を有し、撮影者の生体情報を取得するセンサ群であるレンズ側生体センサ部8を有する。撮影レンズ3に配設されるセンサ群の構成については後に詳述する。
【0012】
カメラ本体2は、撮影レンズ3からの光束を反射してファインダー光学系26に導く反射位置と、撮影レンズ3からの光束がCCDまたはCMOSなどから構成される撮像素子27に入射するように退避する退避位置とで揺動するメインミラー28を備える。メインミラー28の一部の領域は半透過領域となっており、カメラ本体2は、この半透過領域を透過した光束を焦点検出センサ29へ反射するサブミラー30を備える。サブミラー30は、メインミラー28に連動して揺動し、メインミラー28が退避位置をとるときには、サブミラー30も光束から退避する。なお、焦点検出センサ29は、位相差方式により入射する光束の焦点状態を検出する。
【0013】
反射位置にあるメインミラー28で反射された光束は、焦点板31、ペンタプリズム32を介してファインダー光学系26へ導かれる。ファインダー光学系26は、複数のレンズから構成されており、撮影者はファインダー光学系26により被写界を確認することができる。
【0014】
ペンタプリズム32を透過する光束の一部は測光センサ40に導かれる。測光センサ40は、撮影レンズ3へ入射する光束を複数の領域ごとに測光することにより、被写界の輝度分布を計測する。また、ペンタプリズム32の上方にはGPS(Global Positioning System:全地球測位システム)モジュール41を備えており、GPS衛星からの信号を受信して、カメラシステム1が存在している位置情報を取得する。さらに、カメラ本体2は、撮影レンズ3のマウント部近傍で撮影レンズ3と干渉しない位置に、被写界の音を取り込むマイク42と、ファインダー光学系26の近傍にスピーカ43を備える。
【0015】
メインミラー28が退避位置にあるときには、撮影レンズ3からの光束は、ローパスフィルタ33を介して撮像素子27に入射する。撮像素子27の近傍には撮像基板34が設けられており、撮像基板34の後方には外部に面して背面モニタ37が設けられている。
【0016】
カメラ本体2は、撮影者の右の手指が触れる位置に、撮影者の生体情報を取得するセンサ群であるカメラ本体側生体センサ部16を有する。カメラ本体2に配設されるセンサ群の構成については後に詳述する。
【0017】
図2は、本実施形態に係るカメラシステム1の上部概観図である。具体的には、操作者が右手でカメラ本体2を把持すると共に左手で撮影レンズ3を把持している状態を示す図である。レンズ側生体センサ部8は、撮影者の左手の指または掌が触れる位置に配設されている。
【0018】
上述のように、カメラ本体2は、撮影者の右の手指が触れる位置にカメラ本体側生体センサ部16を有している。撮影者がカメラ本体2を把持するとき、右手の親指がカメラ本体2の背面に位置し、人差し指がレリーズSW24の近傍に位置するので、グリップ部50に位置する他の3本の指と離れてしまう。このため、カメラ本体側生体センサ部16は、右手の親指に対応するカメラ背面位置と、人差し指に対応するレリーズSW24の近傍位置と、他の3本の指に対応するグリップ部近傍のカメラ前面位置とに離間して設けられている。なお、人差し指に対応するカメラ本体側生体センサ部16は、レリーズSW24の表面に設けられていても良い。
【0019】
なお、カメラ本体2においては、右手の中指、薬指、小指の3本がカメラ本体2を把持するカメラ前面位置と、右手の親指に対応したカメラ背面位置との少なくとも一方が、カメラ本体2を把持するグリップ部50である。また、カメラ本体2の背面には、いくつかの操作SWが設けられており、これらの操作SWは右手親指で操作される。また、カメラ本体2の上面には撮影モードを設定する撮影モードSW25が設けられている。
【0020】
図3は、撮影レンズ3を左手により把持した第1の状態を示す図である。第1の状態は、左手の甲が下側に位置して撮影レンズ3を把持した状態である。図4は、撮影レンズ3を左手により把持した第2の状態を示す図である。第2の状態は、左手の甲が左側に位置して撮影レンズ3を把持した状態である。
【0021】
撮影者が撮影レンズ3を把持しつつズーム操作、マニュアルフォーカス操作を行う場合においては、左手の親指が他の指とは離れてしまう。また、異なる撮影者、異なる撮影状況(例えば、横位置撮影および縦位置撮影)によっても撮影レンズの把持の仕方は変化する。そこで、撮影レンズ3の円周上には、複数のレンズ側生体センサ部8(8A〜8D)が設けられている。
【0022】
具体的には、レンズ側生体センサ部8は、ズーム操作位置とマニュアルフォーカス操作位置との少なくとも一方の位置で、かつ、左手の親指に対応する位置と、親指以外の指に対応する位置とに離間して設けられる。より具体的には、レンズ側生体センサ部8は、ズーム操作用ゴム、フォーカス操作用ゴムが設けられた位置であって、左手に接触するように、または、左手と対向するように設けられている。
【0023】
特に、撮影レンズ3が撮影者に触れられるのは撮影動作時が主であり、それ以外の運搬時等においては触れられる機会が少ない。さらには、生体情報の利用頻度が比較的高い撮影準備動作時、すなわち露光前における構図確認時、フォーカスレンズ駆動時などにおいては、撮影者の指の接触箇所が頻繁に変化し、しかも一箇所に留まる時間が極めて短い場合が多い。そこで、撮影レンズ3に設けられるレンズ側生体センサ部8は、一度のサンプリングにより生体情報を取得できるセンサから構成されることが望ましい。つまり、時間をおいて複数回のサンプリングを必要とするタイプのセンサは、レンズ側生体センサ部8を構成するセンサとしては望ましくない。別言すれば、レンズ側生体センサ部8を構成するセンサの検知時間は、カメラ本体側生体センサ部16を構成するセンサの検知時間よりも短いことが望ましい。
【0024】
そこで、本実施形態においては、レンズ側生体センサ部8を構成するセンサとして、撮影者の発汗量を検出する発汗センサ13、撮影者の体温を検出する温度センサ14、および撮影者が撮影レンズ3を把持する圧力を検出する圧力センサ15を採用する。これらのセンサは上記の条件を満たし、比較的短時間で生体情報を取得することができる。
【0025】
レンズ側生体センサ部8B〜8Dは、レンズ側生体センサ部8Aと同様に、発汗センサ13、温度センサ14および圧力センサ15をそれぞれ備える。このように、撮影レンズ3の円周上に複数のレンズ側生体センサ部8(8A〜8D)を設けることにより、少ない接触機会に対応してより確実に撮影者の生体情報を取得できる。
【0026】
なお、上述の実施形態では、ズーム操作位置、マニュアルフォーカス操作位置等に応じて複数のレンズ側生体センサ部8(8A〜8D)を設けているが、撮影者、撮影状態等に応じて撮影レンズ3の把持の仕方が変った場合においても生体情報を検出できる位置であれば、複数のレンズ側生体センサ部8を上述の位置以外の位置に設けてもよい。また、左手の親指が撮影レンズ3を把持する力はあまり大きくないので、レンズ側生体センサ部8B、8Cにおいては、左手の親指に対応する圧力センサ15を省略してもよい。同様に、レンズ側生体センサ部8に高い検出精度が要求されない場合には、左手の親指に対応する位置のセンサを適宜省略することにより、撮影レンズ3の部品点数を抑えることができる。
【0027】
図5は、カメラ本体2のレリーズSW24の近傍およびグリップ部50に設けられたカメラ本体側生体センサ部16を示す図である。撮影レンズ3に対する撮影者の接触頻度および接触箇所の変動を考えると、カメラ本体2に対する撮影者の把持は長時間であり、接触場所も一定している。そこで、カメラ本体2に設けられるカメラ本体側生体センサ部16には、時間をおいて複数回のサンプリングを行うことで撮影者の生体情報を取得するタイプのセンサを含めることができる。別言すれば、カメラ本体側生体センサ部16を構成するセンサの検知時間は、レンズ側生体センサ部8を構成するセンサの検知時間より長くても良い。
【0028】
特に、撮影者がカメラ本体2を右手で把持する場合を考えると、背面および側面に位置する掌と、グリップ部50に位置する中指、薬指および小指でカメラ本体2を支え、親指および人差し指がレリーズSW24等の操作部材を操作する状況を想定できる。すなわち、掌が接触する背面および側面と、中指、薬指および小指が接触するグリップ部50は、安定的な接触を必要とするタイプのセンサを配置するには都合が良い。そこで、本実施形態においては、カメラ本体側生体センサ部16を構成するセンサとして、グリップ部50のうち撮影者の中指、薬指および小指が接触すると想定される箇所に、心拍数検出センサ17と脈波検出センサ20を配設する。これらのセンサは、所定の時間間隔により複数回のサンプリングを行うことで撮影者の心拍数、脈波を検出する。
【0029】
また、撮影者の把持力を検出する圧力センサ23も、把持力が適切に検出できるように、中指、薬指および小指が接触すると想定される箇所に配設される。すなわち、心拍数検出センサ17、脈波検出センサ20および圧力センサ23は、グリップ部50の下部に隣接して配設される。なお、使用者の手の大きさによっては小指がグリップ部50に掛からない場合が想定されるので、中指、薬指の少なくとも一方が掛かる位置を想定して配設されることが望ましい。
【0030】
一方、撮影者の発汗量を検出する発汗センサ21、体温を検出する温度センサ22は、レリーズSW24の周辺に設けられる。これらのセンサは、撮影者に継続的に接触されると、例えば前回のサンプリング時における汗が残存して今回のサンプリング結果に悪影響を与える場合があるので、グリップ部50ではなく、レリーズSW24の周辺に配設されることが望ましい。
【0031】
図6は、カメラ本体側生体センサ部16が備える心拍数検出センサ17と脈波検出センサ20の構成を示す図である。図6(a)に示すように、心拍数検出センサ17は、基準電極17aと検出電極17b〜17dから構成される互いに分離した複数の電極部を有し、撮影者の心拍数を検出する。また、図6(b)に示すように、脈波検出センサ20は、複数の発光部20a(20a1〜20a4)とこれらに対応する受光部20b(20b1〜20b4)が交互に配置されて構成され、撮影者の脈派を検出する。
【0032】
図7は、本実施形態に係るカメラシステム1のブロック図である。撮像基板34は、撮像素子27を駆動する駆動回路10、撮像素子27の出力をデジタル信号に変換するA/D変換回路11、ASICで構成される画像処理制御回路18および撮像素子27からの信号の高周波成分を抽出するコントラストAF回路19などを有している。
【0033】
画像処理制御回路18は、デジタル信号に変換された画像信号に対してホワイトバランス調整、シャープネス調整、ガンマ補正、階調調整などの画像処理を施すと共に、JPEGなどの画像圧縮を行って画像ファイルを生成する。画像ファイルは、画像に関する情報をメタ情報として記憶する領域を有する。例えば、JPEGファイルではEXIF情報として、様々な情報を追加的に付加することができる。具体的には後述するが、本実施形態においては、撮影時の撮影者の生体情報をEXIF情報として記述する。生成された画像ファイルは、画像記録媒体35に記憶される。画像記録媒体35は、カメラ本体2に対して着脱可能なフラッシュメモリなどの記録媒体であっても良いし、カメラ本体2に内蔵されるSSDなどの記録媒体であっても良い。
【0034】
画像処理を施された画像信号は、背面モニタ制御回路36の制御により、背面モニタ37に表示される。撮影直後に撮影された画像信号を所定時間表示すれば、画像記録媒体35に記録された画像ファイルに対応する画像を撮影者に視認させるレックレビュー表示を実現できる。また、撮像素子27が連続的に光電変換する被写界像を、画像記録媒体35に記録することなく背面モニタ37に逐次表示すればライブビュー表示を実現できる。さらに、撮像素子27が連続的に光電変換する被写界像を、例えばMPEG、H.264などの動画圧縮処理を画像処理制御回路18で施して画像記録媒体35に記録すれば、動画撮影を実現することができる。このとき、マイク42で収集した被写界の音声も圧縮処理して、動画データに同期させて記録する。生成される動画像のフレームレートは、例えば30fpsなど、複数のフレームレートから選択されて設定される。
【0035】
また、撮影者により再生モードが選択されたときには、背面モニタ制御回路36の制御により、撮影後の画像ファイルを背面モニタ37に表示することができる。このとき、画像記録媒体35に記録された画像ファイルは、カメラ本体CPU46により読み出されて画像処理制御回路18により展開される。撮影者が操作部材の操作により別画像ファイルの表示指示を行ったときには、カメラ本体CPU46は、指示された画像ファイルを展開して背面モニタ37に表示する。具体的な表示フローについては後述する。
【0036】
コントラストAF回路19は、撮像素子27からの撮像信号の高周波成分を抽出してAF評価値信号を生成し、これが最大になるフォーカスレンズ位置を検出する。具体的には、画像処理制御回路18から入力される画像信号から、バンドパスフィルタを用いて所定の高周波成分を抽出し、ピークホールド、積分等の検波処理を行ってAF評価値信号を生成する。生成したAF評価値信号は、カメラ本体CPU46に出力する。
【0037】
レンズCPU7は、角速度センサ6で検出した手振れをキャンセルするように、撮影レンズ3内の防振レンズを光軸方向とは異なる方向に駆動して光学式手振れ補正を実現している。手振れ補正はこのような光学式手振れ補正に限らず、撮像素子27に駆動機構を付与して、光軸方向とは異なる方向に駆動して手振れをキャンセルする撮像素子駆動式手振れ補正を採用することもできる。さらには、画像処理制御回路18から出力された複数枚の画像間の動きベクトルを算出し、算出した画像間の動きベクトルをキャンセルするように画像読み出し位置を制御して手振れをキャンセルする電子式手振れ補正を採用することもできる。光学式手振れ補正および撮像素子駆動式手振れ補正は特に静止画撮影に好適であり、動画撮影にも適用される。電子式手振れ補正は動画撮影に好適である。これらの方式は、選択的、追加的に採用され得る。
【0038】
測光センサ40は、上述のように、撮影レンズ3へ入射する光束を複数の領域ごとに測光することにより被写界の輝度分布を計測するが、計測結果はカメラ本体CPU46に出力する。カメラ本体CPU46では、選択された測光モードに応じて露出値を算出する。測光モードとしては、明るい部分と暗い部分のバランスを取る分割測光モード、画面中央を適正露出とする中央重点測光モード、選択したフォーカスポイントの狭領域を適正露出とするスポット測光モードなどが選択され得る。
【0039】
カレンダー部38は、水晶発振子、計時用集積回路等を有しており、年月日時分秒といったカレンダー情報を保持する。カメラ本体CPU46は、カレンダー部38から時間に関する情報を適宜検出することができる。GPSモジュール41は、GPS衛星からの信号を受信してカメラ本体2が存在している緯度、経度、高度情報を取得する。カメラ本体CPU46は、GPSモジュール41からカメラ本体2が存在している位置に関する情報を適宜検出することができる。
【0040】
フラッシュROM39は、EEPROM(登録商標)であり、カメラシステム1を動作させるプログラムのほか、各種調整値、設定値を記憶する記憶装置である。具体的には、AF調整データ、AE調整データ、製造時の年月日時間データ、設定SWの設定履歴などを記憶している。また、フラッシュROM39には、撮影者の平常時の生体情報値も記憶されている。本実施形態においては、フラッシュROM39は生体情報値として心拍数、血流量、血圧、体温、カメラ本体2を把持する圧力、撮影レンズ3を把持する圧力を記憶している。
【0041】
RAM44は、フラッシュROM39に記憶されたプログラムが展開され、カメラ本体CPU46が高速にアクセスできるDRAMなどの高速RAMである。特に頻繁に参照される各種調整値、設定値などもフラッシュROM39からコピーされ、カメラ本体CPU46からのアクセスを容易にする。キャラクタROM45は、背面モニタ37に撮影画像を表示するときに、重畳して表示するキャラクタを複数記憶している。詳細については後述する。
【0042】
レリーズSW24は、2段式のスイッチである。撮影者がレリーズSW24を半押しすると、カメラ本体CPU46は、オートフォーカス、測光などの撮影準備動作を行う。さらに撮影者がレリーズSW24を全押しすると、カメラ本体CPU46は、レンズ側生体センサ部8およびカメラ本体側生体センサ部16を用いて撮影者の生体情報の検出を開始すると共に、静止画、動画の撮影動作を開始する。
【0043】
カメラ本体CPU46は、レンズCPU7と協働してカメラシステム1の全体を制御する。特に本実施形態では、カメラ本体CPU46は、撮影モードにおいては、レンズ側生体センサ部8およびカメラ本体側生体センサ部16の出力に基づいて撮影者の生体情報を取得し、撮影画像のメタ情報として画像ファイルに記録する。また、再生モードにおいては、メタ情報から生体情報を読み出して撮影時における撮影者の感情を判断し、読み出した撮影画像を判断した感情に基づいて加工した上で、背面モニタ37に表示する。または、撮影画像を表示した時の生体情報を取得して感情を判断し、表示する撮影画像を判断した感情に基づいて加工した上で、背面モニタ37に再度表示する。ここではまず、レンズ側生体センサ部8およびカメラ本体側生体センサ部16による撮影者の生体情報の取得について説明する。
【0044】
はじめに、心拍数測定について説明する。上述のように、撮影者が右手でカメラ本体2のグリップ部50を把持する位置には心拍数検出センサ17の基準電極17aおよび検出電極17b〜17dが設けられている。検出電極17b〜17dからの検出電位は、差動増幅器で電位差が増幅されてカメラ本体CPU46へ出力される。カメラ本体CPU46は、一定の時間間隔ごとに検出電極17b〜17dから得た電位差を処理して、撮影者の心拍数を演算する。
【0045】
なお、例えば撮影者がグリップ部50を把持していない場合には、撮影者の右手が基準電極17a、検出電極17b〜17dに触れていないので、基準電極17aと検出電極17b〜17dとの間がオープンとなる。カメラ本体CPU46は、基準電極17aと検出電極17b〜17dとの間がオープンの場合には、撮影者がグリップ部50を把持していないと判断する。
【0046】
次に、血圧測定について説明する。脈波検出センサ20は、撮影者の血圧を測定する。脈波検出センサ20は、発光部20aから例えば赤外線を射出し、この赤外線が指の動脈で反射され、反射された赤外線を赤外線センサである受光部20bで受光することにより手の指部の脈波を検出する。つまり、末梢血管の血流量を検出する。カメラ本体CPU46は、一定の時間間隔ごとに得る脈波検出センサ20からの脈波に基づいて撮影者の血圧を演算する。カメラ本体CPU46は、心拍数検出センサ17の基準電極17aと検出電極17bとの出力に基づいて、脈波検出センサ20の発光部20aの発光を禁止してもよい。つまり、撮影者がグリップ部50を把持していないときに電力の消費を回避する。
【0047】
次に、発汗測定について説明する。発汗は手のインピーダンスを測定することにより検出できる。発汗センサ13、21は、複数の電極を有して一度のサンプリングにより発汗を検出する。発汗センサ13は、レンズ側生体センサ部8A〜8Dのそれぞれに設けられているが、感動、興奮、緊張といったような精神性発汗は、発汗量が少なく、発汗時間も短いので、指よりも発汗量が多い掌側に位置するレンズ側生体センサ部8B、Cだけに設けてもよい。
【0048】
次に、温度測定について説明する。温度センサ14、22は、熱により抵抗値が変化するサーミスタ方式を用いており、一度のサンプリングにより撮影者の体温を検出できる。発汗には上述の精神性発汗と、体温調節のための温熱性発汗とがあり、精神性発汗と温熱性発汗とは相互干渉している。このため、カメラ本体CPU46は発汗センサ13、21の出力と、温度センサ14、22の出力とに基づいて撮影者の発汗が精神性発汗か温熱性発汗かを判断することができる。例えば、カメラ本体CPU46は、温度センサ22により検出した温度が高く、発汗センサ21からの発汗信号が常時検出される場合には温熱性発汗と判断することができる。したがって、温度センサ14は発汗センサ13と、温度センサ22は発汗センサ21と隣接して配設されることが好ましい。
【0049】
発汗センサ13、21および温度センサ14、22は、それぞれ一度のサンプリングにより発汗、体温を検出できるが、継続的にサンプリングを行うことにより、これらの変化を検出することもできる。カメラ本体CPU46は、発汗センサ21からの発汗信号が不規則に出力される場合に精神性発汗と判断して、撮影者が感動、興奮、緊張といった状態であることを検出できる。
【0050】
なお、温度センサ14、22を省略した場合には、カメラ本体CPU46は、GPSモジュール41の位置情報、カレンダー部38からの時間情報などに基づいて、発汗センサ13、21からの発汗信号が精神性発汗か温熱性発汗かを判断してもよい。更に、レンズCPU7が発汗センサ13、温度センサ14の出力に基づいて、左手の汗が精神性発汗か温熱性発汗かを判断することもできる。
【0051】
次に、圧力測定について説明する。圧力センサ15は、静電容量型のセンサであり、撮影者が撮影レンズ3を把持したときの押圧力による変形量を、一度のサンプリングにより検出できる。本実施形態において圧力センサ15は、操作ゴムの下方に設けられている。圧力センサ23も同様の静電容量型のセンサであり、撮影者がカメラ本体2を把持したときの押圧力による変形量を測定する。なお、圧力センサ15、23として歪ゲージ、電歪素子などを用いてもよい。
【0052】
カメラ本体側生体センサ部16は、発汗センサ21、温度センサ22および圧力センサ23を含み、レンズ側生体センサ部8は、発汗センサ13、温度センサ14および圧力センサ15から構成される。すなわち、同一の機能を持つセンサが、カメラ本体2と撮影レンズ3のそれぞれに設けられている。そこで、カメラ本体CPU46は、例えば撮影者の発汗情報を取得したい場合は、それぞれの発汗センサ21、13に対して並列で検出を要求し、後段の処理を含めていち早く生体情報として取得できた方の結果を採用する。つまり、同一機能を持つセンサがカメラ本体2と撮影レンズ3のそれぞれに設けられている場合は、いち早く生体情報を取得できた方の結果を採用する。なお、後に取得された生体情報が先に取得された生体情報よりも精度、信頼度などが高い場合には、取得結果を差し替えても良い。
【0053】
上述のように、カメラ本体CPU46は、レンズCPU7と協働して、レンズ側生体センサ部8およびカメラ本体側生体センサ部16の出力に基づいて撮影者の生体情報を取得する。以下に、カメラシステム1の制御フローについて具体的に説明する。
【0054】
図8は、本実施形態に係る撮影モード時の動作フロー図である。フローは、カメラシステム1の電源がONにされて撮影者からの撮影指示を待つ状態から開始する。カメラ本体CPU46は、ステップS101で、レリーズSW24の半押しであるSW1がONになるまで待機する。SW1が撮影者によりONにされると、カメラ本体CPU46は、撮影準備動作を実行する。具体的には、測光センサ40の出力により露出値を決定し、焦点検出センサ29を用いた位相差方式によりオートフォーカスを行う。オートフォーカスは、コントラストAF回路19を用いたコントラスト方式であっても良い。
【0055】
そして、ステップS103で、レリーズSW24の全押しであるSW2がONになるまで待機する。所定の時間内にSW2がONにならなければ、ステップS101へ戻る。SW2がONになれば、ステップS104へ進み、カメラ本体CPU46は、カメラ本体側生体センサ部16およびレンズ側生体センサ部8の少なくとも一方から撮影者の生体情報を取得する。さらに、ステップS105で本撮影動作を実行する。本撮影動作では、ステップS102で決定された露出値に従って、レンズCPU7は絞り5を動作させ、カメラ本体CPU46はフォーカルプレーンシャッタを走行させて、被写体光束を撮像素子27に導く。さらにカメラ本体CPU46は、決定された撮像感度に従って撮像素子27の出力に所定のゲインを掛けて電荷読み出しを行う。なお、ステップS104とステップS105の順序はこれに限らず、逆の順序であっても良いし、両者が並行して処理されても良い。
【0056】
ステップS106では、画像処理制御回路18は、このように生成された画像信号に、画像処理および圧縮処理を施して画像ファイルを生成する。このとき、ステップS104で取得した生体情報を、画像ファイルのメタ情報に記録する。さらに、ステップS107でカメラ本体CPU46は、取得した生体情報から撮影者の感情を推定して、推定した感情に基づいて画像ファイルのレイティングを行う。レイティングとは、撮影画像の重要度に応じた等級分けであり、例えば1から5の5段階の等級が割り当てられる。一般的には撮影者が撮影画像を視認しながら等級を付与するが、本実施形態においては、推定した感情から画像の重要度を判定して自動的に等級を付与する。感情の分類例は後述するが、例えば、推定された感情が「愛情」、「喜び」等のポジティブな感情であれば重要度の高い5、4を付与する。また、推定された感情が「平常」であれば平均値である3を付与し、「無関心」、「怒り」、「苦痛」等のネガティブな感情に対しては重要度の低い2、1を付与する。
【0057】
上述のように、レンズ側生体センサ部8およびカメラ本体側生体センサ部16は、さまざまなセンサの集合体として構成されており、それぞれのセンサが異なる種類の生体情報を出力する。これらの出力を単独で、あるいは組み合わせて判断することにより、撮影者の感情を推定することができる。例えば、高い心拍数および精神性発汗が検出されるときには、撮影者は「焦り」を感じていると推定できる。センサの出力と感情の対応関係は検証的に確定されており、対応関係を示すテーブルをフラッシュROM39に記憶させておくことができる。そこで、感情判定においては、取得された生体情報が、テーブルに記述された特定の感情パターンと一致するかを判断する。
【0058】
ステップS107でレイティングを行い、等級を画像ファイルのメタ情報に記録したら、ステップS108へ進み、カメラ本体CPU46は生成した画像ファイルを画像記録媒体35に記録する。以上により、撮影モード時の一連の動作フローを終了する。
【0059】
なお、ステップS104の生体情報の取得を、ステップS103のSW2オン以前に実行しても良い。そして、カメラ本体CPU46は、取得した生体情報から撮影者の感情を推定し、当該感情に対応するキャラクタをキャラクタROM45から読み出して、ファインダー内の表示部または背面モニタ37に表示する。つまり、解析された感情を撮影者に告知する。撮影者は、キャラクタを視認することにより自らの感情を客観的に判断できるので、感情の告知は、SW2オンのタイミング決定に貢献する。
【0060】
また、解析された感情を被写体側にも告知すれば、被写体である人物は撮影者の心理状況を理解できるので、撮影者の要求にいち早く応えることができるなどのメリットがある。被写体側への告知は、カメラ本体2の前面側にも表示部を設けることによって行うことができるが、もちろん表示部における表示に限らない。スピーカ43により音声を用いて告知しても良いし、カメラ本体2がプロジェクターユニットを備えるのであれば、被写体にキャラクタを投影して告知しても良い。
【0061】
また、SW2オンの前に感情を検出できれば、推定された感情により撮影シーケンスを自動制御することもできる。例えば、撮影者が興奮状態であることが推定されたら、その時点から露出条件を変えるなどして、続けて複数枚の撮影を実行する。このような自動制御により、撮影者の感情の起伏に影響を受けることの少ない撮影結果を得ることができる。
【0062】
次に、再生モードについて説明する。図9は、本実施形態に係る再生モード時動作フロー図である。再生モードは、撮影者が操作部材の操作により再生モードを選択したときに開始する。なお、再生モードは、画像の撮影者ではなく、他の観察者であっても操作できる。
【0063】
撮影者により再生モードが選択されると、カメラ本体CPU46は、ステップS201で現在の再生モードが撮影時モードに設定されているか、表示時モードに設定されているかを判断する。撮影時モードとは、撮影者の撮影時における感情を推定し、この感情に基づいて撮影画像を加工して表示するモードである。一方、表示時モードとは、再生モード時においてカメラシステム1を操作する観察者の、撮影画像の表示時における感情を推定し、この感情に基づいて撮影画像を加工して再表示するモードである。
【0064】
まず、撮影時モードについて説明する。ステップS201で撮影時モードが設定されていると判断すると、カメラ本体CPU46は、ステップS301で対象となる最初の画像ファイルを画像記録媒体35から画像処理制御回路18を用いて読み出し、RAM44の作業メモリ上に展開する。続いてステップS302において、対象画像ファイルのメタ情報から、撮影時に付加された撮影者の生体情報を読み出す。カメラ本体CPU46は、ステップS303で、読み出した生体情報から撮影者の感情を推定する。生体情報から撮影者の感情の推定は、上述のように、フラッシュROM39に記憶された生体情報と感情パターンの対応関係を示すテーブルを参照し、読み出した生体情報がテーブルに記述された特定の感情パターンと一致するかを判断して行う。
【0065】
ステップS303で感情を推定したら、ステップS304で、カメラ本体CPU46は画像処理制御回路18を用いて、RAM44の作業メモリ上に展開した撮影画像を、推定した感情に基づいて加工する。具体的な加工例については後述するが、例えば、推定した感情に対応するキャラクタをキャラクタROM45から読み出して、これを撮影画像に合成する加工を行う。
【0066】
このように推定した感情に基づいて加工された撮影画像は、ステップS305で、背面モニタ制御回路36により表示用信号に変換されて背面モニタ37に表示される。そして、一定時間内に次画像の表示指示があれば、再びステップS301へ戻って次画像に対して同様の表示処理を繰り返す。次画像の表示指示は、撮影者による操作部材の操作であっても良いし、スライドショーモード等の自動再生指示であっても良い。一定時間内に次画像の表示指示が無ければ再生モードを終了する。このように、背面モニタ37を取り囲んで鑑賞する鑑賞者に、撮影時における撮影者の感情が認識されれば、撮影画像をより楽しむことができる。
【0067】
次に、表示時モードについて説明する。ステップS201で表示時モードが設定されていると判断すると、カメラ本体CPU46は、ステップS401で対象となる最初の画像ファイルを画像記録媒体35から画像処理制御回路18を用いて読み出し、RAM44の作業メモリ上に展開する。続いてステップS402においてカメラ本体CPU46は、RAM44の作業メモリ上に展開した撮影画像を、背面モニタ制御回路36を用いて背面モニタ37に表示する。
【0068】
対象画像を表示して観察者に視認させたら、カメラ本体CPU46はステップS403で、レンズ側生体センサ部8およびカメラ本体側生体センサ部16の出力に基づいて、カメラシステム1を操作する観察者の生体情報を取得する。そして、ステップS404で、取得された生体情報から観察者の感情を推定する。
【0069】
ステップS404で感情を推定したら、ステップS405で、カメラ本体CPU46は画像処理制御回路18を用いて、RAM44の作業メモリ上に展開されている撮影画像を、ステップS304と同様に、推定した感情に基づいて加工する。このように推定した感情に基づいて加工された撮影画像は、ステップS406で、背面モニタ制御回路36によりすでに表示されている加工前の撮影画像に置き換えられて背面モニタ37に表示される。そして、一定時間内に次画像の表示指示があれば、再びステップS401へ戻って次画像に対して同様の表示処理を繰り返す。次画像の表示指示は、撮影者による操作部材の操作であっても良いし、スライドショーモード等の自動再生指示であっても良い。一定時間内に次画像の表示指示が無ければ再生モードを終了する。このように、背面モニタ37を取り囲んで鑑賞する鑑賞者に、表示時における操作者の感情が認識されれば、撮影画像をより楽しむことができる。
【0070】
なお、再生モードによる撮影画像の再生は、上述のような画像の加工を伴うものの他に、記録された画像ファイルをそのまま展開して再生する通常の再生も選択し得る。再生モードにおける表示方法は、メニュー選択等により選択されて設定される。
【0071】
また、上述の撮影時モード、表示時モードの他にも様々なモードを設定し得る。例えば、再生時における観察者の感情を推定して、その感情と同じ感情がメタ情報から解析される画像ファイルのみを表示させるセレクトモードが挙げられる。具体的には、カメラ本体CPU46が、レンズ側生体センサ部8およびカメラ本体側生体センサ部16の出力に基づいて、カメラシステム1を操作する観察者の生体情報を取得する。次に、画像処理制御回路18を用いて対象となり得る画像ファイルを画像記録媒体35から読み出し、そのメタ情報から、撮影時に付加された撮影者の生体情報を抽出する。さらに、カメラ本体CPU46は、読み出した生体情報から撮影者の感情を推定する。そして、撮影者の感情が観察者の感情と一致すれば、当該撮影画像を、背面モニタ制御回路36により表示用信号に変換して背面モニタ37に表示する。この一連の処理を、対象となり得る画像ファイルが無くなるまで継続する。もちろん、表示する撮影画像に対して、推定した感情に基づき加工を施しても良い。このような処理を実行することにより、観察者の気分に即した撮影画像を選択的に表示することができる。
【0072】
推定した感情を撮影画像に反映させるべく、撮影画像を加工して表現する手法は様々である。例えば、表示させる撮影画像の大きさを変更することができる。取得した生体情報から「羞恥」の感情が推定される場合は、撮影画像を小さく加工して表示する。逆に「喜び」の感情が推定される場合は、ズーミングするように徐々に拡大して表示する。
【0073】
さらに、表示する撮影画像の輝度、再度および色相の少なくとも1つを変更する加工を施すこともできる。取得した生体情報から「愛情」の感情が推定される場合は、撮影画像を暖色系に寄せる加工を施す。一方、「絶望」の感情が推定される場合は、撮影画像全体を暗く加工して表示する。
【0074】
または、スライドショーモード等の自動再生時には、連続して表示される撮影画像の、画像ごとの表示時間を変更することもできる。取得した生体情報から「焦り」の感情が推定される場合は、一枚あたりの表示時間を短くして表示する。
【0075】
別の例としては、感情に対応するキャラクタをキャラクタROM45から読み出して、撮影画像に合成する加工を施しても良い。図10は、感情に対応するキャラクタの例を示す図である。図示するように、「平常」「喜び」「愛情」「羞恥」「焦り」「苦痛」「驚き」「困惑」「無関心」「悲しみ」「怒り」「絶望」といった様々な感情に対応するキャラクタがキャラクタROM45に記憶されている。キャラクタの合成は、画像に直接埋め込んで画像信号を生成しても良いし、背面モニタ制御回路36により撮影画像上にレイヤー状に重畳して画像信号を生成しても良い。また、背面モニタ37の撮影画像を表示する領域とは別の空き領域にキャラクタを表示するように表示信号を生成しても良い。
【0076】
図10では、それぞれの感情に対応するキャラクタを示すが、一つの感情に対して、その度合いに応じて複数のキャラクタを用意してもよい。生体情報からは、例えば「焦り」の感情の中でも、より強い焦りを感じているのか、わずかな焦りを感じているのかを判断することができる。そこで、同じ「焦り」を示すキャラクタでも、そのデザインから「焦り」の度合いがわかるように複数のキャラクタを用意する。そして、判断した感情とその度合いから、これに対応するキャラクタを選択して加工、表示する。また、感情の度合いは、キャラクタの大きさ、色、数、表示時間、アニメーションの動きによっても表現できる。カメラ本体CPU46は、判断した感情とその度合いから、読み出したキャラクタ自体を加工、変更して表示する。
【0077】
図11は、キャラクタを組み合わせて表示する表示状態の例を示す図である。図は、「喜び」を表す喜びキャラクタ47が、撮影画像に重畳されて動き回る様子を表している。背面モニタ37には、キャラクタが合成された撮影画像の表示の他に、ファイル名表示48、等級アイコン表示49が行われる。
【0078】
なお、推定した感情の撮影画像への反映は、上述の1つの加工に限らない。もちろん組み合わせて加工を行っても良いし、他の表現手法を用いて感情を撮影画像に反映しても良い。
【0079】
以上の実施形態では、静止画ファイルの撮影動作の例を示した。しかし、動画ファイルにおいても、生体情報から推定される感情に基づいて画像を加工することができる。また、生体情報の記録は、画像ファイルのメタ情報への記録に限らず、画像ファイルへのリンク情報と生体情報を記述する生体情報格納ファイルを生成しても良い。
【0080】
以上の実施形態では、一度のサンプリングにより生体情報を取得できるか否かにより、レンズ側生体センサ部8を構成するセンサとするか否かを定めた。しかしながら、センサの配設については、他の観点も採用し得る。例えば、使用者の生体情報を温度の変化に依存して取得するタイプのセンサであれば、撮像素子27の発熱の影響を受けやすいカメラ本体2への配設を避けるべきと考えられる。この観点からすると、レンズ側生体センサ部8としては温度の変化に依存して取得するタイプのセンサを含み得るが、カメラ本体側生体センサ部16は温度の変化に依存せずに取得するタイプのセンサのみから構成されることが好ましい。したがって、温度の変化に依存して生体情報を取得する温度センサ、発汗センサはレンズ側生体センサ部8として配設されることが好ましい。
【0081】
以上の実施形態では、生体情報を取得するセンサとして、心拍数検出センサ、脈波検出センサ、発汗センサ、温度センサ、圧力センサを例に説明したが、もちろんこれらのセンサに限らない。新たに追加されるセンサは、上述の観点に即してレンズ側生体センサ部8およびカメラ本体側生体センサ部16の少なくとも一方を構成するセンサとして配設される。
【0082】
また、以上の実施形態においては、電源の構成については特に言及していないが、もちろん、カメラシステム1は電力の供給を受けて動作する。カメラシステム1は、電力供給を、家庭用AC電源に接続して受けることもできるし、着脱可能な電池から受けることもできる。電池の種類は、一次電池でも二次電池でも良い。
【0083】
さらには、電力を供給する素子の性質に合せて、複数の電池が着脱できるように構成しても良い。例えば、上記の実施形態のように、カメラ本体2と撮影レンズ3がそれぞれ異なるユニットとして構成される場合においては、それぞれのユニットに対して電池を装着し得る。この場合、カメラ本体2に装着された電池は主にカメラ本体2に電力を供給し、撮影レンズ3に装着された電池は主に撮影レンズ3に電力を供給する。したがって、フォーカスレンズを駆動する駆動電力は、撮影レンズ3に装着された電池により供給される。もちろん、消耗時等においては、一方の電池が他方の電池を補うように電力を供給することもできる。
【0084】
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【0085】
特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
【符号の説明】
【0086】
1 カメラシステム、2 カメラ本体、3 撮影レンズ、4 レンズ群、5 絞り、6 角速度センサ、7 レンズCPU、8 レンズ側生体センサ部、10 駆動回路、11 A/D変換回路、13 発汗センサ、14 温度センサ、15 圧力センサ、16 カメラ本体側生体センサ部、17 心拍数検出センサ、18 画像処理制御回路、19 コントラストAF回路、20 脈波検出センサ、21 発汗センサ、22 温度センサ、23 圧力センサ、24 レリーズSW、25 撮影モードSW、26 ファインダー光学系、27 撮像素子、28 メインミラー、29 焦点検出センサ、30 サブミラー、31 焦点板、32 ペンタプリズム、33 ローパスフィルタ、34 撮像基板、35 画像記録媒体、36 背面モニタ制御回路、37 背面モニタ、38 カレンダー部、39 フラッシュROM、40 測光センサ、41 GPSモジュール、42 マイク、43 スピーカ、44 RAM、45 キャラクタROM、46 カメラ本体CPU、47 喜びキャラクタ、48 ファイル名表示、49 等級アイコン表示、50 グリップ部
【特許請求の範囲】
【請求項1】
レンズユニットと、
前記レンズユニットと一体的に接続されるボディユニットと、
レンズユニットに設けられ、使用者の生体情報を一度のサンプリングにより取得できるセンサから成る第1センサ群と、
ボディユニットに設けられ、前記生体情報を複数回のサンプリングにより取得するセンサを含む第2センサ群と
を備える撮像装置。
【請求項2】
前記第2センサ群は、心拍数検出センサを含む請求項1に記載の撮像装置。
【請求項3】
前記第2センサ群は、脈派検出センサを含む請求項1または2に記載の撮像装置。
【請求項4】
レンズユニットと、
前記レンズユニットと一体的に接続されるボディユニットと、
レンズユニットに設けられ、使用者の生体情報を温度の変化に依存して取得するセンサを含む第1センサ群と、
ボディユニットに設けられ、前記生体情報を温度の変化に依存せずに取得するセンサから成る第2センサ群と
を備える撮像装置。
【請求項5】
前記第1センサ群は、温度センサを含む請求項4に記載の撮像装置。
【請求項6】
前記第1センサ群は、発汗センサを含む請求項4または5に記載の撮像装置。
【請求項7】
前記レンズユニットは、前記ボディユニットに着脱可能である請求項1から6のいずれか1項に記載の撮像装置。
【請求項8】
前記第1センサ群に含まれるセンサの検知時間は、前記第2センサ群に含まれるセンサの検知時間よりも短い請求項1から7のいずれか1項に記載の撮像装置。
【請求項9】
前記ボディユニットに設けられ、前記使用者に把持される把持部を備え、
前記第2センサ群の少なくとも一部のセンサは、前記使用者の把持状態において、中指および薬指の少なくとも一方が掛かる位置に設けられる請求項1から8のいずれか1項に記載の撮像装置。
【請求項10】
前記第1センサ群および前記第2センサ群から得た前記生体情報に基づいて、前記使用者の感情を解析する解析部を備える請求項1から9のいずれか1項に記載の撮像装置。
【請求項11】
前記解析部は、前記第1センサ群に含まれるセンサと同一種類のセンサが前記第2センサ群にも含まれる場合には、いち早く取得された前記生体情報を用いて解析する請求項10に記載の撮像装置。
【請求項12】
前記解析部により解析された前記感情を告知する告知部を備える請求項10または11に記載の撮像装置。
【請求項1】
レンズユニットと、
前記レンズユニットと一体的に接続されるボディユニットと、
レンズユニットに設けられ、使用者の生体情報を一度のサンプリングにより取得できるセンサから成る第1センサ群と、
ボディユニットに設けられ、前記生体情報を複数回のサンプリングにより取得するセンサを含む第2センサ群と
を備える撮像装置。
【請求項2】
前記第2センサ群は、心拍数検出センサを含む請求項1に記載の撮像装置。
【請求項3】
前記第2センサ群は、脈派検出センサを含む請求項1または2に記載の撮像装置。
【請求項4】
レンズユニットと、
前記レンズユニットと一体的に接続されるボディユニットと、
レンズユニットに設けられ、使用者の生体情報を温度の変化に依存して取得するセンサを含む第1センサ群と、
ボディユニットに設けられ、前記生体情報を温度の変化に依存せずに取得するセンサから成る第2センサ群と
を備える撮像装置。
【請求項5】
前記第1センサ群は、温度センサを含む請求項4に記載の撮像装置。
【請求項6】
前記第1センサ群は、発汗センサを含む請求項4または5に記載の撮像装置。
【請求項7】
前記レンズユニットは、前記ボディユニットに着脱可能である請求項1から6のいずれか1項に記載の撮像装置。
【請求項8】
前記第1センサ群に含まれるセンサの検知時間は、前記第2センサ群に含まれるセンサの検知時間よりも短い請求項1から7のいずれか1項に記載の撮像装置。
【請求項9】
前記ボディユニットに設けられ、前記使用者に把持される把持部を備え、
前記第2センサ群の少なくとも一部のセンサは、前記使用者の把持状態において、中指および薬指の少なくとも一方が掛かる位置に設けられる請求項1から8のいずれか1項に記載の撮像装置。
【請求項10】
前記第1センサ群および前記第2センサ群から得た前記生体情報に基づいて、前記使用者の感情を解析する解析部を備える請求項1から9のいずれか1項に記載の撮像装置。
【請求項11】
前記解析部は、前記第1センサ群に含まれるセンサと同一種類のセンサが前記第2センサ群にも含まれる場合には、いち早く取得された前記生体情報を用いて解析する請求項10に記載の撮像装置。
【請求項12】
前記解析部により解析された前記感情を告知する告知部を備える請求項10または11に記載の撮像装置。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【公開番号】特開2012−147368(P2012−147368A)
【公開日】平成24年8月2日(2012.8.2)
【国際特許分類】
【出願番号】特願2011−5790(P2011−5790)
【出願日】平成23年1月14日(2011.1.14)
【出願人】(000004112)株式会社ニコン (12,601)
【Fターム(参考)】
【公開日】平成24年8月2日(2012.8.2)
【国際特許分類】
【出願日】平成23年1月14日(2011.1.14)
【出願人】(000004112)株式会社ニコン (12,601)
【Fターム(参考)】
[ Back to top ]