画像処理システム、画像処理装置、画像処理方法、画像処理プログラム及び印刷物
【課題】マーカーによって主要部が隠されている写真等のプリント媒体から、ユーザーが簡単にその作品の全体を見ることができるようにする。
【解決手段】プリント媒体２０にプリントされた画像３２の主要部をマスクするようにプリントされた加工画像からなるマーカー２２を端末１−１のカメラで読み取ることにより、加工画像からなるマーカー２２が示すサーバーのＵＲＬアドレスの場所にリンクし、その場所に記憶されている画像３２をダウンロードして表示部３１に表示する。
【解決手段】プリント媒体２０にプリントされた画像３２の主要部をマスクするようにプリントされた加工画像からなるマーカー２２を端末１−１のカメラで読み取ることにより、加工画像からなるマーカー２２が示すサーバーのＵＲＬアドレスの場所にリンクし、その場所に記憶されている画像３２をダウンロードして表示部３１に表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタル画像データからなる写真をプリントして提供するのに好適な画像処理システム、画像処理方法、画像処理プログラム及び印刷物に関する。
【背景技術】
【０００２】
デジタルカメラが普及して以来、写真をインターネットで送信可能、画像処理が可能という特性を生かして、様々な新しいビジネスが誕生してきた。
例えばインターネットで送信可能という特性を生かして、写真をインターネットを介してプリント業者に注文し、印画紙等のプリント媒体にプリントされた写真を郵送で受け取るプリントサービスが普及している。
【０００３】
また、画像処理が可能という特性を生かして、撮影した写真を絵画調の画調からなる絵画調画像データに変換する絵画変換技術がある（例えば、特許文献１参照）。
【０００４】
このような絵画変換技術を使用して、ユーザーがアップロードした写真を絵画調画像データに変換するウエブサイトも存在している。
絵画変換技術を使用すれば、薄暗い曇り空の写真を明るいパステル画調の画像に変換したり、人物のポートレートをイラスト画調の画像に変換したりすることができ、写真の新しい楽しみ方を広げることができる。
【０００５】
このようにして絵画変換された絵画調画像データからなる作品を有料で販売するビジネスが考えられる。
その場合、作品のサンプルをユーザーに見せないと絵画変換技術の良さを訴求できないが、すべてを表示させると無断で作品をコピー（ダウンロード）されてしまうという課題がある。
【０００６】
そこでダウンロードした作品の著作権を明らかにするために、ダウンロードした画像データにＳａｍｐｌｅマークを付加する技術が知られている（例えば、特許文献２参照）。
【０００７】
また、プライバシー保護の観点から、画像データの一部をマスクする技術が知られている（例えば、特許文献３参照）。
【０００８】
このような技術により作品にＳａｍｐｌｅマークを埋め込んだり、一部をマスクしたりしておいて、料金が支払われられた後にＳａｍｐｌｅマークやマスクを外すことが行われているが、ユーザーとしては購入前に作品の全体を確認したいという要望があった。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２０１１−１６６２１７号公報
【特許文献２】特開２００６−１８００５１号公報
【特許文献３】特開２００６−３２０４８８号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
本発明は上記事情に鑑みてなされたもので、マスクされた画像データから、ユーザーがビューアーを使って簡単にその画像データの全体を確認することができるようにすることを目的とする。
【課題を解決するための手段】
【００１１】
本発明は、上記目的を達成するため、端末と該端末にネットワークを介して接続されるサーバーとで構成される画像処理システムであって、前記端末は、画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、前記読取手段により読み取られたマーカーにより示される情報に基づき、前記サーバーに接続する接続手段と、前記接続手段により接続されたサーバーから、前記画像であって前記マーカーによるマスクのない画像を表示する画像データを取得する取得手段と、前記取得手段により取得された画像データに基づき、前記マーカーによるマスクのない画像を表示する表示手段とを備え、前記サーバーは、前記マーカーによるマスクのない画像を表示する画像データを記憶した記憶手段と、前記記憶手段から前記画像データを読み出して、前記端末の取得手段に供給する画像データ供給手段と、を備えることを特徴とする画像処理システムを提供するものである。
【００１２】
また、本発明は、表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーを表示させる第１の表示制御手段と、前記第１の表示制御手段により前記表示部に表示された前記マーカーを読み取る読取手段と、前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御手段と、を備えることを特徴とする画像処理装置等を提供するものである。
【００１３】
また、本発明は、画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段と、を備えることを特徴とする画像処理装置等を提供するものである。
【００１４】
また、本発明は、画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段とを備え、前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、前記表示制御手段は、前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元手段と、前記復元手段により復元された前記部分画像データに基づく部分画像により、前記表示手段に表示された画像の前記マーカーを除去した部分を補間する補間手段と、を備えることを特徴とする画像処理装置等を提供するものである。
【００１５】
また、本発明は、画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、前記マーカーには、当該マーカーによりによるマスクのない画像を表示する画像データが格納されているサーバーに端末を接続させる接続情報が含まれていることを特徴とする印刷物を提供するものである。
【発明の効果】
【００１６】
本発明によれば、作品のコピー防止を図りながら、ユーザーにその作品の全体を、ビューアーを使って見せることができる。
【図面の簡単な説明】
【００１７】
【図１】本発明に係る一実施形態のネットワークシステムの構成を示すブロック図である。
【図２Ａ】同実施形態において、プリント媒体に絵画調画像データの主要部をマーカーがマスクするようにプリントされている状態を示す図である。
【図２Ｂ】同実施形態において、プリント媒体にプリントされたマーカーを端末により読み取る状態を説明するための図である。
【図３】同実施形態において、サーバーの構成を示すブロック図である。
【図４】（Ａ）は同実施形態において、写真のプリントを発注した場合の流れを説明するためのフローチャートであり、（Ｂ）は同実施形態において、プリント媒体にプリントされたマーカーを端末で読み取った場合の流れを説明するためのフローチャートである。
【図５】同実施形態において、絵画変換処理を説明するためのフローチャートである。
【図６】同実施形態において、複数種類の絵画調画像データを端末に表示している状態を示す図である。
【図７】同実施形態において、操作メニューを端末に表示している状態を示す図である。
【図８】同実施形態において、端末の構成を示す機能ブロック図である。
【図９】同実施形態において、端末とサーバーの通信部分のシーケンス図である。
【図１０】本発明に係る第２の実施形態を説明するための模式図である。
【図１１】本発明に係る第２の実施形態の変形例を説明するための模式図である。
【図１２】同実施形態におけるデータフロー図を示すものである。
【図１３】同実施例における端末の内部フローを示す図である。
【図１４】本発明に係る第３の実施形態における端末の内部フローを示す図である。
【発明を実施するための形態】
【００１８】
［第１の実施形態］
【００１９】
図１は、本発明に係る一実施形態のネットワークシステムの構成を示すブロック図である。１−１、１−２、１−３、・・・はパーソナルコンピュータ（ＰＣ）やスマートフォン、携帯電話、情報端末などのいわゆる端末であり、インターネット５００を介して画像サービスサイト１０と接続可能で、ビューアーの役割をするものである。
【００２０】
画像サービスサイト１０は、ユーザーからアップロードされたオリジナル画像データを絵画調の画調からなる絵画調画像データに変換（絵画変換）するサービス、ユーザーから絵画変換された絵画調画像データのプリントの注文を受けてプリント媒体にプリントするサービスや、ユーザーから投稿された写真や絵画調画像データを公開するサービス等を行うウエブサイトである。なお、投稿された写真（オリジナル画像データ）、絵画変換された絵画調画像データ、プリント媒体にプリントされた写真等を総称して作品と呼ぶものとする。
【００２１】
この画像サービスサイト１０は、サーバー１１を有し、上記画像データを絵画調の画調からなる絵画調画像データに変換するサービスを含む各種サービスに係る処理を行うとともに、プリント装置１２を有し、ユーザーから注文を受けた絵画調画像データのプリントを行う。プリント装置１２は、画像サービスサイト１０の中にある必要はなく、他のプリントサイトに委託するものも含む。
【００２２】
図２Ａは、ユーザーから注文を受けた写真のプリントについて説明するもので、紙や印画紙等のプリント媒体２０に絵画調画像３２をプリントし、その絵画調画像３２の主要部２４上にＱＲコード（登録商標）等からなるマーカー２２をプリントされて印刷物２５が形成されている。
これにより、印刷物２５において絵画調画像３２の主要部２４がマーカー２２で隠されて見えないようになっている。
【００２３】
マーカー２２によってマスクする絵画調画像３２の部位は、絵画調画像３２の中央部付近等の画像データの内容に拘わらず一義的な位置でもよい。また、また、特開２０１１−５４０７１号公報記載の着目領域抽出技術を用いて人間が着目するであろう領域を抽出し、この抽出した領域を主要部としてもよいし、他の画像認識技術を用いて絵画調画像３２の主要部を自動認識した領域を主要部としてもよい。さらには、絵画調画像３２のオリジナル画像データをアップロードしたユーザーが指定した部位を主要部とするようにしてもよい。この場合は、ウエブサイトにユーザーがマスクの位置や大きさを指定する機能を設ける。
【００２４】
また、マーカーの形状については、ＱＲコード（登録商標）のみで構成した場合は、図示のように、マーカー２２のようにその形状が矩形となる。しかし、サーバー１１に、星型、楕円形、等あらかじめテンプレートが用意されていて、テンプレートのサイズと位置を調整して、印刷物２５におけるマーカーを適宜の形状にすることができる。この場合においてもＱＲコード（登録商標）を用いる場合には、星形の中に矩形のＱＲコード（登録商標）を入れたマーカーを形成してプリントする。
【００２５】
そして図２Ｂに示すように、端末１−１の裏面にある図示しないカメラでマーカー２２を読み取る。マーカー２２は画像サービスサイト１０のサーバー１１のＵＲＬアドレスを示しているため、端末１−１は画像サービスサイト１０に接続して、絵画調画像３２を、サーバー１１から端末１−１にダウンロードする。したがって、表示部３１に絵画調画像３２を表示することができる。
これにより、主要部２４上にあるマーカー２２が消えて、絵画調画像３２全体を端末１−１の表示部３１で見ることができる。
【００２６】
図３はサーバー１１の構成を示すブロック図であり、１３はユーザーがアップロードした写真（オリジナル画像データ）を記憶するためのオリジナル画像データ記憶部、１４はオリジナル画像データを絵画調の画像に変換した絵画調画像データが記憶される絵画調画像データ記憶部、１５はサーバー１１と端末１−１のリンクを制御するためのリンク制御プログラムが記憶されているリンク制御プログラム記憶部である。
リンク制御プログラムはオリジナル画像データ若しくは絵画調画像データの記憶場所をマーカーである二次元バーコードに変換する機能も備えている。
【００２７】
１６は、絵画変換のアルゴリズムに沿って絵画変換処理を実行する絵画変換プログラム及び絵画変換に必要なエフェクト処理のためのパラメータが記憶されている絵画変換プログラム記憶部、１７は、注文を受けた絵画変換した絵画調画像データと、そのオリジナル画像データを記憶している場所を示すマーカーとともにプリントさせるためのプリント制御プログラムが記憶されているプリント制御プログラム記憶部である。
【００２８】
また、１８はマーカー２２を絵画調画像３２上のどの位置にどのようなサイズや形状で重畳するかを制御するマーカー制御プログラムを記憶するマーカー制御プログラム記憶部である。
【００２９】
ここで、絵画変換プログラムで絵画変換処理が可能な絵画調の画調の種類としては、油絵画調、水彩画調、パステル画調、色鉛筆画調、ゴシック画調、エアブラシ画調、野獣派画調、ししゅう画調、イラスト画調、淡い水彩画調、クレヨン画調、ガッシュ画調、シルクスクリーン画調、コラージュ画調、ドローイング画調、重厚な油彩画調、の１６種類が用意されている。
【００３０】
１３Ａはオリジナル画像データ記憶部１３のスタートアドレスであり、１５Ａはリンク制御プログラム記憶部１５のスタートアドレスであり、１４Ａは絵画調画像データ記憶部１４のスタートアドレスである。このスタートアドレスを指定することにより、オリジナル画像データや各種リンク制御プログラム、各種絵画調画像データを指定する。
【００３１】
図４（Ａ）は、写真のプリントを発注した場合の流れを説明するためのフローチャートである。手順に沿って説明しているので、端末１−１によって行われる処理とサーバー１１によって行われる処理が１つのフローチャートに記載してある。
実際のサーバー１１と端末１−１の通信部分のシーケンスは図９を用いて後述する。
【００３２】
まずユーザーは、写真をインターネット経由で画像サービスサイト１０にプリント発注したい場合、端末１−１からサーバー１１へオリジナル画像のアップロードを行う（ステップＳ４０１）。その際、プリント枚数やプリントサイズ等の指定もする。
【００３３】
サーバー１１側では、アップロードされたオリジナル画像データをオリジナル画像データ記憶部１３に記憶する（ステップＳ４０２）。そしてステップＳ４０３でそのオリジナル画像データに対し絵画変換プログラムにより絵画変換処理を行う。画調の種類は、上述したとおり１６種類あるが、ここでは１６種類すべてを作成して絵画調画像データ記憶部１４に記憶するものとする（ステップＳ４０４）。画調の種類の指定を受けてから、その指定された画調の絵画調画像データに変換することもできる。
【００３４】
続いて、絵画調画像データ記憶部１４のスタートアドレス１４Ａ、すなわち各種絵画調画像データが記憶されている場所を示すマーカーをリンク制御プログラムにより作成する（ステップＳ４０５）。マーカーは、前述のように例えばＱＲコード（登録商標）である。
【００３５】
続いて、ステップＳ４０６でこの作成したマーカー２２を絵画調画像３２の主要部２４上に重畳して同じプリント媒体２０にプリントする（図２Ａ，２Ｂ参照）。プリント自体は画像サービスサイト１０内で行ってもよいし、別のプリントサーバーやプリント業者に対してプリント指示を行ってもよい。
そして、その絵画調画像３２とマーカー２２の両方が重ねてプリントされたプリント媒体２０を画像サービスサイト１０から、あるいは委託を受けたプリント業者からユーザーに郵送する（ステップＳ４０７）。
【００３６】
図４（Ｂ）はユーザーの端末１−１側の操作手順を示すフローチャートである。端末１−１に備えられている図示しないカメラ（後述する図８の８１）でプリント媒体２０にプリントされているマーカー２２を撮影する（ステップＳ４１１）。そうすると、端末１−１はマーカー２２を認識し、そのマーカー２２の指定しているサーバー１１のリンク先、すなわち絵画調画像データの記憶されている場所に自動的に接続する（ステップＳ４１２）。この際、一旦リンク先のＵＲＬアドレスを表示してクリックを要求するかどうかは設計事項なので、本実施形態では直接絵画調画像データの記憶されている場所のスタートアドレス１４Ａに接続するものとする。そしてその場所に記憶されている絵画調画像データ、例えば油絵調の絵画調画像データを端末１−１にダウンロードして（ステップＳ４１３）、絵画調画像３２を表示部３１に表示する（ステップＳ４１４）。
【００３７】
このようにすることによって、ユーザーは端末１−１をプリント媒体２０上に翳すだけで、主要部２４を隠しているマーカー２２が消えた絵画調画像３２を見ることができる。
【００３８】
図５は、絵画変換プログラム記憶部１６に記憶されている絵画変換プログラムによる絵画変換処理を示すフローチャートである。
まず前処理を行う（ステップＳ５０２）。ここは画調の種類にかかわらず共通して実行される処理で、絵画変換処理は画像データがビットマップ形式である必要があるので、ＪＰＥＧ形式で表現されている画像データをビットマップ形式に変換する。また、フィルタをかけてノイズ除去を行う。
【００３９】
続いて、画調選択処理を行う（ステップＳ５０４）。
画調が選択されると、それぞれの画調変換アルゴリズムのステップへ移る。例えば油絵調変換であればステップＳ５０６へ、水彩画調変換であればステップＳ５１０へ進む。それ以外であればその他の画調変換アルゴリズムのステップへと進む（ステップＳ５２０）。
【００４０】
なお、絵画変換処理の各アルゴリズムを実行する際は、変換に必要なエフェクト処理のための各種パラメータを取得する（ステップＳ５０８、ステップＳ５１２）。パラメータは絵画変換プログラム記憶部１６内に有している。パラメータとは画素にエフェクト処理をかけるための要素である。すなわち、画素は一般的にＲＧＢ各複数ビットの階調で表現されるが、そのビットデータに演算をかけるための要素である。
エフェクト処理はフォトレタッチソフトなどで採用されているエフェクト処理と基本的には同じ作用を得るものである。
【００４１】
また、エフェクト処理の一種として、ＨＤＲ（High Dynamic Range）と呼ばれる通常の写真では表現できない広いダイナミックレンジの写真を、トーンマッピングにより狭いダイナミックレンジ幅内に入れ込むことで露出過多の白飛びや露出不足の黒つぶれを補正して表現力を増大するエフェクト処理もある。このエフェクト処理を応用して写真を人の脳が受けた記憶や印象に近づけ、芸術的な表現を加味した新しい写真表現を実現した画像を得ることもできる。ＨＤＲ変換も絵画変換の一種である。
【００４２】
そしてステップＳ５２２、ステップＳ５０４を経由して上述した１６種類の絵画変換処理を行う。
なお、１６種類の絵画変換処理は端末１−１の表示部３１で見ることを想定しているので、それほど大きい画像は必要なく、例えばオリジナル画像データを８００×６００画素程度にリサイズしたリサイズ画像データに対して処理を実施している。オリジナル画像データは一般的に４０００×３０００程度の非常に大きなものである。そこで、プリント発注等の特定の画調の決定が行われると（ステップＳ５２２）、ステップＳ５２４に進み、オリジナル画像データについて絵画変換処理を行う（ステップＳ５２４）。この際、必要なパラメータを取得する（ステップＳ５２６）のは同様である。ただし、同じ画像に対して同じ画調で絵画変換する場合でも、元画像のサイズやプリントサイズが変わると適切なパラメータも変わってくるので、ステップＳ５０８、ステップＳ５１２で取得するパラメータとステップＳ５２６で取得するパラメータは異なってくる。
【００４３】
しかる後、絵画変換後の絵画調画像データを再びＪＰＥＧ形式に変換する後処理を行う（ステップＳ５２８）。オリジナル画像データの絵画変換が必要ない場合は、ステップＳ５２４、ステップＳ５２６はスキップして良い。
【００４４】
図６は本実施形態において、端末１−１の表示部３１に複数種類の絵画調画像データを表示する状態を示すものである。すなわち、端末１−１の表示部３１に１６種類の絵画調画像データの縮小画像４１ａ、４２ｂ、・・・を一覧表示している（符号４１）。４１ａは油絵画調、４１ｂは水彩画調、４１ｃはパステル画調、４１ｄは色鉛筆画調、４１ｅはゴシック画調、・・・に変換された絵画調画像データを示している。
端末１−１の表示部３１はタッチパネルを有しており、いずれかの縮小画像４１ａ、４１ｂ、・・・をタッチするとその画像が拡大表示されて図７に示すような操作メニュー表示が出てくる。
【００４５】
図７において３２は選択された画調の絵画調画像データであり、４２は操作メニューを表示しているものである。
端末１−１の表示ブラウザは例えばＨＴＭＬ（HyperText Markup Language）５若しくはＣＳＳ（Cascading Style Sheets）３等を使用して構成されており、機種に依存しない互換性のあるもので、サーバー１１のリンク制御プログラム記憶部１５に記憶されたリンク制御プログラムと連携を取ることができる。
すなわち、端末１−１の表示部３１のタッチパネル上で、操作メニュー４２のいずれかのメニューを操作すると、その操作信号を、インターネット５００を介してサーバー１１に送信し、対応するリンク制御プログラム記憶部１５のアドレス１６Ａへ飛び、サーバー１１のリンク制御プログラムがそれに対応した処理を実行する。
【００４６】
次に図８及び図９を参照してサーバー１１と端末１−１のリンク制御について説明する。
図８は端末１−１の構成を示す説明するための機能ブロック図である。この構成により図７に示す表示を実現している。
８１は図２Ｂでは図示していない端末１−１の裏面に設置されたカメラであり、マーカー２２を読み取るためのものである。
８２は送信部であり、マーカー２２を読み取ってサーバー１１のリンク先へアクセスし、オリジナル画像データをサーバー１１にアップロードするために機能する。
８３は受信部であり、サーバー１１から送信されてくる制御データや、オリジナル画像データ、絵画調画像データを受信するために機能する。
８４は表示制御部であり、表示部３１の表示を制御するものであり、操作メニュー４２をメニュー表示制御部８５の制御により表示部３１に表示させたり、絵画調画像データ表示制御部８６の制御により、操作メニュー４２の操作に応じて所定の画調の絵画調画像データを表示部３１に表示させたりするために機能する。
８７は端末側リンク制御部であり、サーバー１１のリンク制御プログラム記憶部１５に記憶されたリンク制御プログラムと連携を取るために機能する。連携を取るために送信部８２及び受信部８３により端末１−１とサーバー１１の間で各種制御信号の送受が行われる。
８８は操作制御部であり、タッチパネルの制御を行い、操作メニュー４２の操作を受けて操作信号を出力するために機能する。
【００４７】
図７において、絵画調画像３２が表示されている状態で操作メニュー４２の「次へ」キーまたは「戻る」キーを押すと、図６で一覧表示された種類の画調の絵画調画像データを１枚ずつ順送りまたは逆送りされて表示される。表示部３１のタッチパネルの絵画調画像３２の部分にタッチしてページ送りする（スワイプする）ことも可能である。
【００４８】
「一覧表示」キーを押すと図６に示す一覧表示状態となる。
【００４９】
「拡大表示」キーを押すと現在表示されている表示が拡大され、画像の細部を見ることができる。前述したとおり端末１−１の表示部３１の画素数は８００×６００画素程度であり、実際の画像データは４０００×３０００画素程度あるので、拡大することによってより実物に近い画像の細部を確認することができる。
【００５０】
また、絵画調画像データをプリント発注したい場合は、「サイズ指定」キーでプリントサイズを選び、「額縁指定」キーで額縁の有無や種類を選び、「媒体指定」キーでプリント媒体としてキャンバス地、マグカップ、Ｔシャツ、・・・等を選択する。最終的に「プリント注文」キーを押すことで発注される。
【００５１】
もちろん、１つの操作キーを押すとサブメニューを表示させることができるようになっている。
【００５２】
以上の操作は画像サービスサイト１０を特に意識することなく絵画調画像データの選択、表示、プリント注文等ができるが、「トップページ」キーを操作することにより、画像サービスサイト１０のトップページを表示部３１に表示する。そしてプリント注文に限らず、他のユーザーの投稿した写真を閲覧したり、自分の写真を投稿したりすることができる。
【００５３】
この場合、端末１−１がパーソナルコンピュータやスマートフォンの場合は画像サービスサイト１０の通常のホームページが表示されるが、携帯電話の場合は携帯電話専用のモバイルページへ飛ぶようにしてもよい。
【００５４】
図９は端末とサーバーの通信部分のシーケンス図であり、前記図８の動作の信号の流れを示したものである。
画像サービスサイト１０から郵送されてくる印刷物２５は、プリント媒体２０にマーカー２２が主要部２４をマスクするように重畳された画像３２がプリントされている(マーカー画像データ（Ａ）)。このマーカー２２を端末１−１のカメラ８１で読み取ると、端末１−１は、画像サービスサイト１０のサーバー１１が有するリンク制御プログラム記憶部１５に記憶されたリンク制御プログラムと連携を取る。そして、サーバー１１のＵＲＬアドレスを認識し（マーカー情報（Ｃ））、絵画調画像３２が記憶されている絵画調画像データ記憶部１４のアドレス１４Ａへ飛ぶ。
そして、アドレス１４Ａで指定される絵画調画像３２（マーカーに対応する画像データ（Ｂ））を読み出して端末１−１へ送る。
【００５５】
これらを制御するのはサーバー１１のリンク制御プログラム記憶部１５と端末１−１のリンク制御部８７である。
【００５６】
これにより、主要部２４上にあるマーカー２２が消えて、絵画調画像３２全体を端末１−１の表示部３１で見ることができる。
【００５７】
［第２の実施形態］
本発明の第２の実施形態は、マーカーの中に作品の主要部を隠している情報を入れ込んだものである。すなわち、第１の実施形態では、マーカーで主要部が隠されている画像から、元の画像をダウンロードすることによって画像全体を差替えたが、本実施形態では、マーカーによって隠されている部分の画像を符号化してマーカーに書き込んである。
【００５８】
図１０は、同実施の形態を説明するための模式図である。図１０（Ａ）は、ユーザーから注文を受けた画像のプリントについて説明するもので、紙や印画紙等のプリント媒体２０に画像３３がプリントされ、その画像３３の主要部２４上にマーカー２３がプリントされている。
したがって、印刷物２５における画像３３の主要部２４がマーカー２３で隠されて見えないようになっている。
【００５９】
このマーカー２３は、画像３３においてマーカー２３で隠されて見えない部分、つまり図１０（Ｃ）に実線で示した不足データ３５を符号化してマーカー２３に書き込んだものである。不足データ３５が符号化されて書き込まれているマーカー２３は、画像サービスサイト１０のサーバー１１から有料又は無料でダウンロードしたアプリケーションを用いて、端末１−１の絵画調画像データ表示制御部８６が復元することができるものである。
【００６０】
そこでユーザーは、端末１−１が有するカメラ８１により、プリント媒体２０にプリントされているマーカー２３を含む画像３３を撮影する。そうすると、端末１−１はマーカー２３を認識し、絵画調画像データ表示制御部８６が前記アプリケーションに基づき動作することにより、符号化された不足データ３５を生成する。
【００６１】
さらに、前記カメラ８１での撮影により表示部３１に表示されているマーカー２３を含む画像３３から、マーカー２３を除去した後、このマーカー２３が除去された画像３３と不足データ３５とをマッチングさせて、その輪郭等を合致させて表示する。これにより、図１０（Ｂ）に示すように、不足データ３５が補間された本来の画像３３が表示部３１に表示され、主要部２４上にあるマーカー２３を消去して、画像３３全体を端末１−１の表示部３１で見ることができる。
【００６２】
図１１は、本発明の第２の実施形態の変形例を説明するための模式図である。図１１（Ａ）は、ユーザーから注文を受けた画像のプリントについて説明するもので、紙や印画紙等のプリント媒体２０に画像３３がプリントされているが、その画像３３の主要部２４は、加工画像からなるマーカー３４で構成されている。この加工画像からなるマーカー３４は、同図（Ｃ）に示す画像３３における本来の画像部分である加工前画像データ３３１を加工して、本来の画像部分とは異なる画像を表示させたものである。これにより、印刷物２５における画像３３の主要部２４が加工画像からなるマーカー３４で隠されて見えないようになっている。
【００６３】
この本来の画像である加工前画像３３１を加工して、本来の画像部分とは異なる画像を表示させているマーカー３４は、画像サービスサイト１０のサーバー１１から有料又は無料でダウンロードしたアプリケーションを用いて、絵画調画像データ表示制御部８６が処理を実行することにより、本来の画像部分に復元できるデータからなる。
【００６４】
そこでユーザーは、端末１−１が有するカメラ８１により、プリント媒体２０にプリントされているマーカー３４を含む画像３３を撮影する。そうすると、端末１−１はマーカー２３を認識し、絵画調画像データ表示制御部８６が前記アプリケーションに基づき動作することにより、符号化された本来の画像部分を復号して生成する。
【００６５】
さらに、前記カメラ８１での撮影により表示部３１に表示されている加工画像からなるマーカー３４を含む画像３３から、加工画像からなるマーカー３４を除去した後、このマーカー３４が除去された画像３３と、加工前画像データ３３１とをマッチングさせて表示する。これにより、図１１（Ｂ）に示すように、加工画像からなるマーカー３４の部分が加工前画像データ３３１に置換された本来の画像３３が表示部３１に表示され、主要部２４上にある加工画像からなるマーカー３４を除去して、画像３３全体を端末１−１の表示部３１で見ることができる。
【００６６】
図１２は、第２の実施形態におけるデータフロー図を示すものである。図において、印刷物２５は画像サービスサイト１０、あるいは委託を受けたプリント業者からユーザーに郵送されたものである。ユーザーは、端末１−１が有するカメラ８１により、印刷物２５を撮影する。端末１−１は、加工画像データからなるマーカー３４を読み取って（ステップＳ６０１）、マーカー３４の情報を取得する。
【００６７】
このマーカー３４は、図１１を持って説明したように、その画像３３の主要部２４を加工した加工画像からなる。また、この加工画像からなるマーカー３４は、図１１（Ｃ）に示す画像３３における本来の画像部分である加工前画像データ３３１を加工して、本来の画像部分とは異なる画像を表示させたものである。これにより、印刷物２５における画像３３の主要部２４が加工画像からなるマーカー３４で隠されて見えないようになっている。
そして、前記取得したマーカー情報に基づき、加工前画像を表示させる加工前データの存在と、前記印刷物を撮影することにより得られた加工画像（マーカー３４）が意味する加工画像データの存在とを、絵画調画像データ表示制御部８６にて問い合わせる（ステップＳ６０２）。
【００６８】
そして、前記カメラ８１での撮影により表示部３１に表示されている加工画像からなるマーカー３４を含む画像３３から、加工画像からなるマーカー３４を除去した後、このマーカー３４が除去された画像３３と、加工前画像データ３３１とをマッチングさせて合成する（ステップＳ６０３）。しかる後に、この合成より、加工画像からなるマーカー３４の部分が加工前画像データ３３１に置換された本来の画像３３を端末１の表示部３１に表示する（ステップＳ６０４）これにより、ユーザーは、主要部２４上にある加工画像からなるマーカー３４が除去された画像３３全体を端末１−１の表示部３１で見ることが可能となる。
【００６９】
図１３は、第２の実施の形態における端末の内部フローを示す図である。この実施の形態において、図８に示した端末１−１の絵画調画像データ表示制御部８６には、予め画像サービスサイト１０のサーバー１１にアクセスして、有料又は無料でダウンロードした下記アプリケーション（１）（２）（３）が格納されている。
（１）不足データに対応するアプリケーション
（２）加工前画像データに対応するアプリケーション
（３）別の加工画像データに対応するアプリケーション
【００７０】
さらに、絵画調画像データ表示制御部８６には、
（Ａ）マーカーに対応する不足データ
（Ｂ）マーカーに対応する加工前画像データ
（Ｃ）マーカーに対応する別の加工前画像データ
が予め画像サービスサイト１０のサーバー１１から、有料又は無料でダウンロードして格納されている。
【００７１】
以上の構成において、端末１−１は、ユーザーが端末１−１を用いて前記印刷物２５を撮影する操作を行うと、カメラ８１により印刷物２５の画像中に存在するマーカーを読み取る（ステップＳ７０１）。そして、この読み取ったマーカーが、下記（ａ）、（ｂ）、（ｃ）の何れを意味するものであるかを判断する（ステップＳ７０２）。
（ａ）不足データに対応するマーカー
（ｂ）加工前画像データに対応するマーカー
（ｃ）別の加工画像データに対応するマーカー
【００７２】
「（ａ）不足データに対応するマーカー」である場合、つまり不足データ３５を符号化してマーカー２３に書き込んだものである場合には、絵画調画像データ表示制御部８６は（１）不足データに対応するアプリケーションを起動する。そして、このアプリケーションにより、（Ａ）マーカーに対応する不足データ取得する（ステップＳ７０３）。
【００７３】
また、「（ｂ）加工前画像データに対応するマーカー」である場合には、つまり加工画像データを符号化してマーカー３４に書き込んだものである場合には、絵画調画像データ表示制御部８６は、（２）加工前画像データに対応するアプリケーションを起動する。そして、このアプリケーションにより、（Ｂ）マーカーに対応する加工前画像データを取得する（ステップＳ７０４）。
【００７４】
また、「（ｃ）別の加工画像データに対応するマーカー」である場合には、つまり（ｂとは異なる加工画像データを符号化してマーカー３４に書き込んだものである場合には、絵画調画像データ表示制御部８６は、（３）別の加工画像データに対応するアプリケーションを起動する。そして、このアプリケーションにより、（Ｃ）マーカーに対応する別の加工前画像データを取得する（Ｓ７０５）。
【００７５】
しかる後に、前記カメラ８１での撮影により表示部３１に表示されているマーカーを含む画像から、マーカーを除去した後、このマーカーが除去された画像と、ステップＳ７０３〜７０５の何れかで取得した画像とをマッチングする（ステップＳ７０６）。このとき、カメラ８１での撮影により表示部３１に表示されている画像は、撮影時のおける端末１−１の撮影角度よる影響で、必ずしも正面から撮影されてはいないので、射影変換する（ステップＳ７０７）。しかる後に、表示部３１上の映像に合成し（ステップＳ７０８）、端末１−１の表示部３１に表示する（ステップＳ７０９）。これにより、ユーザーは、主要部２４上にある加工画像からなるマーカー３４が除去された画像３３全体を端末１−１の表示部３１で見ることが可能となる。
【００７６】
［第３の実施形態］
図１４は、本発明の第３の実施の形態における端末の内部フローを示す図である。第３の実施の形態は、前述した第２の実施の形態とはことなり、マーカーは、端末１側においては不足データ、加工前画像データ、別の加工前画像データに復元することはできず、画像サービスサイト１０側においてのみ復元することが可能である。
【００７７】
そこでユーザーは、端末１−１が有するカメラ８１により、プリント媒体２０にプリントされているマーカー２３を含む画像３３を撮影する。そうすると、端末１−１はカメラ８１により印刷物２５の画像中に存在するマーカーを読み取る（ステップＳ８０１）。そして、このマーカーは、下記（１）、（２）、（３）の何れかを意味するものであるかを判断する（ステップＳ８０２）。
（ａ）不足データに対応するマーカー
（ｂ）加工前画像データに対応するマーカー
（ｃ）別の加工画像データに対応するマーカー
【００７８】
「（ａ）不足データに対応するマーカー」である場合には、マーカーの指定しているサーバー１１のリンク先から不足データを取得する（ステップＳ８０３）。また、「（ｂ）加工前画像データに対応する」である場合には、マーカーの指定しているサーバー１１のリンク先から加工前画像データを取得し（Ｓ７０４）、「（ｃ）別の加工加工画像データに対応する」である場合には、別の加工画像データに対応するマーカーの指定しているサーバー１１のリンク先から別の加工前画像データを取得する（ステップＳ８０５）。
【００７９】
しかる後に、前記カメラ８１での撮影により表示部３１に表示されているマーカーを含む画像から、マーカーを除去した後、このマーカーが除去された画像と、ステップＳ８０３〜７０５の何れかで取得した画像とをマッチングする（ステップＳ８０６）。このとき、カメラ８１での撮影により表示部３１に表示されている画像は、撮影時のおける端末１−１の撮影角度よる影響で、必ずしも正面から撮影されてはいないので、射影変換する（ステップＳ８０７）。しかる後に、表示部３１上の映像に合成し（ステップＳ８０８）、端末１−１の表示部３１に表示する（ステップＳ８０９）。これにより、ユーザーは、主要部２４上にある加工画像からなるマーカー３４が除去された画像３３全体を端末１−１の表示部３１で見ることが可能となる。
【００８０】
以上説明したように、マーカーにより作品のコピー防止を図りながら、ユーザーは簡単な操作で、色々な画調に絵画変換された画像をその場で見て確認することができる。また、確認して、気に入った画調の絵画調画像データのプリントを発注することができる。更に、マグカップやＴシャツなどのプリント媒体を選んだり、額縁を選んだりすることができる。
【００８１】
ユーザーがプリントを注文した絵画調画像データ中に存在するマーカーを読み取るだけでマーカーが除去された画像を見ることができるので、簡単である。その際に画像サービスサイトとの連携が発生するので、副次的な効果としてウエブサイトへのアクセス機会が増大し、当該ウエブサイトへの誘導、認知度向上が期待できる。
【００８２】
なお、上記実施形態では、マーカーとしてＱＲコード（登録商標）を使用したが、これに限ることなく、二次元バーコードや一次元バーコードでもよく、丸型や四角、星形等のテンプレート内にマーカーを入れ込んでもよい。
【００８３】
プリント媒体は紙やマグカップ、Ｔシャツなどにハードプリントする例を説明したが、液晶やＥＬ、電子ペーパー等の表示媒体上に、主要部をマーカーで隠された作品を表示させても（ソフトプリント）同じ効果を得ることができる。例えばパーソナルコンピュータの画面上に主要部をマーカーで隠された作品を表示させ、ビューアーのカメラでマーカーを読み取らせることによってビューアー上にマーカーが消えた作品の全体像を表示させることができる。
【００８４】
また、図７では画像データの表示と操作メニュー表示を同時に行っている例を示したが、全面操作メニュー表示にしてもよいことは勿論である。
【００８５】
また、端末１−１とサーバー１１の連携についてはサーバー１１のリンク制御プログラムが制御するようにしてサーバー主体で動作するようにしているが、アプリケーションプログラムを端末１−１にダウンロードしてインストールし、端末主体で動作するようにしてもよい。
【００８６】
以上、この発明の実施形態について説明したが、この発明はこれらに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
【００８７】
以下に、本出願の特許請求の範囲に記載された発明を付記する。
【００８８】
＜請求項１＞
端末と該端末にネットワークを介して接続されるサーバーとで構成される画像処理システムであって、
前記端末は、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記サーバーに接続する接続手段と、
前記接続手段により接続されたサーバーから、前記画像であって前記マーカーによるマスクのない画像を表示する画像データを取得する取得手段と、
前記取得手段により取得された画像データに基づき、前記マーカーによるマスクのない画像を表示する表示手段とを備え、
前記サーバーは、
前記マーカーによるマスクのない画像を表示する画像データを記憶した記憶手段と、
前記記憶手段から前記画像データを読み出して、前記端末の取得手段に供給する画像データ供給手段と、
を備えることを特徴とする画像処理システム。
【００８９】
＜請求項２＞
前記サーバーの画像データ供給手段は、前記端末が有する前記表示手段の大きさに応じたサイズで前記マーカーによるマスクのない画像を表示する画像データを前記端末の取得手段に供給することを特徴とする請求項１記載の画像処理システム。
【００９０】
＜請求項３＞
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーを表示させる第１の表示制御手段と、
前記第１の表示制御手段により前記表示部に表示された前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御手段と、
を備えることを特徴とする画像処理装置。
【００９１】
＜請求項４＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段と、
を備えることを特徴とする画像処理装置。
【００９２】
＜請求項５＞
前記読取手段は、前記マーカーにより一部がマスクされた前記画像を撮像する撮像手段を有し、
前記表示制御手段は、前記撮像手段により前記印刷物から撮像された画像を表示部に表示させた後、該表示させた画像を処理して前記マーカーによるマスクのない画像を表示部に表示させることを特徴とする請求項４記載の画像処理装置。
【００９３】
＜請求項６＞
前記第２の表示制御手段により前記表示手段に表示された前記マーカーによるマスクのない画像を表示させる画像データをサーバーよりダウンロードするダウンロード手段を備えることを特徴とする請求項３又は４記載の画像処理装置。
【００９４】
＜請求項７＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段とを備え、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御手段は、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元手段と、
前記復元手段により復元された前記部分画像データに基づく部分画像により、前記表示手段に表示された画像の前記マーカーを除去した部分を補間する補間手段と、
を備えることを特徴とする画像処理装置。
【００９５】
＜請求項８＞
端末とネットワークを介して接続されるサーバーとを用いる画像処理方法であって、
前記端末には、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記サーバーに接続する接続ステップと、
前記接続により接続されたサーバーから、前記画像であって前記マーカーによるマスクのない画像を表示する画像データを取得する取得ステップと、
前記取得ステップにより取得された画像データに基づき、前記マーカーによるマスクのない画像を表示する表示ステップとを実行させ、
前記サーバーには、
前記マーカーによるマスクのない画像を表示する画像データを記憶した記憶手段からから前記画像データを読み出して、前記端末の取得ステップに供給する画像データ供給ステップ、
を実行させることを特徴とする画像処理方法。
【００９６】
＜請求項９＞
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーを表示させる第１の表示制御ステップと、
前記第１の表示制御ステップにより前記表示部に表示された前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御ステップと、
を含むことを特徴とする画像処理方法。
【００９７】
＜請求項１０＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御ステップと、
含むことを特徴とする画像処理方法。
【００９８】
＜請求項１１＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御ステップとを含み、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御ステップは、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元ステップと、
前記復元ステップにより復元された前記部分画像データに基づく部分画像を、前記表示ステップに表示された画像の前記マーカーを除去した部分にマッチングさせて補間するマッチングステップと、
を含むことを特徴とする画像処理方法。
【００９９】
＜請求項１２＞
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーが表示させる第１の表示制御手段と、
前記第１の表示手段制御手段により前記表示部に表示された前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御手段と、
して機能させることを特徴とする画像処理プログラム。
【０１００】
＜請求項１３＞
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段と、
を備えることを特徴とする画像処理プログラム。
【０１０１】
＜請求項１４＞
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段とを備え、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御手段は、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元手段と、
前記復元手段により復元された前記部分画像データに基づく部分画像を、前記表示手段に表示された画像の前記マーカーを除去した部分にマッチングさせて補間するマッチング手段と、
して機能させることを特徴とする画像処理プログラム。
【０１０２】
＜請求項１５＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、当該マーカーによりによるマスクのない画像を表示する画像データが格納されているサーバーに端末を接続させる接続情報が含まれていることを特徴とする印刷物。
【０１０３】
＜請求項１６＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる情報が含まれていることを特徴とする印刷物。
【０１０４】
＜請求項１７＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、前記マーカーにより一部がマスクされた前記画像が撮像された場合において、該撮像された画像を表示部に表示させた後、該表示させた画像を処理して前記マーカーによるマスクのない画像を表示部に表示させる情報が含まれていることを特徴とする印刷物。
【０１０５】
＜請求項１８＞
前記マーカーには、当該マーカーによるマスクのない画像に対応する元画像である作品を所定のサーバーよりダウンロードするためのダウンロード情報が含まれていることを特徴とする請求項１６記載の印刷物。
【符号の説明】
【０１０６】
１端末
１１サーバー
１２プリント装置
１３オリジナル画像データ記憶部
１４絵画調画像データ記憶部
１５リンク制御プログラム記憶部
１６絵画変換プログラム記憶部
１７プリント制御プログラム記憶部
１８マーカー制御プログラム記憶部
２０プリント媒体
２２マーカー
２３マーカー
２４主要部
２５不足データ
２５印刷物
３１表示部
３２絵画調画像
３３画像
３４マーカー
８１カメラ
８２送信部
８３受信部
８５メニュー表示制御部
８６絵画調画像データ表示制御部
８７リンク制御部
３３１加工前画像データ
【技術分野】
【０００１】
本発明は、デジタル画像データからなる写真をプリントして提供するのに好適な画像処理システム、画像処理方法、画像処理プログラム及び印刷物に関する。
【背景技術】
【０００２】
デジタルカメラが普及して以来、写真をインターネットで送信可能、画像処理が可能という特性を生かして、様々な新しいビジネスが誕生してきた。
例えばインターネットで送信可能という特性を生かして、写真をインターネットを介してプリント業者に注文し、印画紙等のプリント媒体にプリントされた写真を郵送で受け取るプリントサービスが普及している。
【０００３】
また、画像処理が可能という特性を生かして、撮影した写真を絵画調の画調からなる絵画調画像データに変換する絵画変換技術がある（例えば、特許文献１参照）。
【０００４】
このような絵画変換技術を使用して、ユーザーがアップロードした写真を絵画調画像データに変換するウエブサイトも存在している。
絵画変換技術を使用すれば、薄暗い曇り空の写真を明るいパステル画調の画像に変換したり、人物のポートレートをイラスト画調の画像に変換したりすることができ、写真の新しい楽しみ方を広げることができる。
【０００５】
このようにして絵画変換された絵画調画像データからなる作品を有料で販売するビジネスが考えられる。
その場合、作品のサンプルをユーザーに見せないと絵画変換技術の良さを訴求できないが、すべてを表示させると無断で作品をコピー（ダウンロード）されてしまうという課題がある。
【０００６】
そこでダウンロードした作品の著作権を明らかにするために、ダウンロードした画像データにＳａｍｐｌｅマークを付加する技術が知られている（例えば、特許文献２参照）。
【０００７】
また、プライバシー保護の観点から、画像データの一部をマスクする技術が知られている（例えば、特許文献３参照）。
【０００８】
このような技術により作品にＳａｍｐｌｅマークを埋め込んだり、一部をマスクしたりしておいて、料金が支払われられた後にＳａｍｐｌｅマークやマスクを外すことが行われているが、ユーザーとしては購入前に作品の全体を確認したいという要望があった。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２０１１−１６６２１７号公報
【特許文献２】特開２００６−１８００５１号公報
【特許文献３】特開２００６−３２０４８８号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
本発明は上記事情に鑑みてなされたもので、マスクされた画像データから、ユーザーがビューアーを使って簡単にその画像データの全体を確認することができるようにすることを目的とする。
【課題を解決するための手段】
【００１１】
本発明は、上記目的を達成するため、端末と該端末にネットワークを介して接続されるサーバーとで構成される画像処理システムであって、前記端末は、画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、前記読取手段により読み取られたマーカーにより示される情報に基づき、前記サーバーに接続する接続手段と、前記接続手段により接続されたサーバーから、前記画像であって前記マーカーによるマスクのない画像を表示する画像データを取得する取得手段と、前記取得手段により取得された画像データに基づき、前記マーカーによるマスクのない画像を表示する表示手段とを備え、前記サーバーは、前記マーカーによるマスクのない画像を表示する画像データを記憶した記憶手段と、前記記憶手段から前記画像データを読み出して、前記端末の取得手段に供給する画像データ供給手段と、を備えることを特徴とする画像処理システムを提供するものである。
【００１２】
また、本発明は、表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーを表示させる第１の表示制御手段と、前記第１の表示制御手段により前記表示部に表示された前記マーカーを読み取る読取手段と、前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御手段と、を備えることを特徴とする画像処理装置等を提供するものである。
【００１３】
また、本発明は、画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段と、を備えることを特徴とする画像処理装置等を提供するものである。
【００１４】
また、本発明は、画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段とを備え、前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、前記表示制御手段は、前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元手段と、前記復元手段により復元された前記部分画像データに基づく部分画像により、前記表示手段に表示された画像の前記マーカーを除去した部分を補間する補間手段と、を備えることを特徴とする画像処理装置等を提供するものである。
【００１５】
また、本発明は、画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、前記マーカーには、当該マーカーによりによるマスクのない画像を表示する画像データが格納されているサーバーに端末を接続させる接続情報が含まれていることを特徴とする印刷物を提供するものである。
【発明の効果】
【００１６】
本発明によれば、作品のコピー防止を図りながら、ユーザーにその作品の全体を、ビューアーを使って見せることができる。
【図面の簡単な説明】
【００１７】
【図１】本発明に係る一実施形態のネットワークシステムの構成を示すブロック図である。
【図２Ａ】同実施形態において、プリント媒体に絵画調画像データの主要部をマーカーがマスクするようにプリントされている状態を示す図である。
【図２Ｂ】同実施形態において、プリント媒体にプリントされたマーカーを端末により読み取る状態を説明するための図である。
【図３】同実施形態において、サーバーの構成を示すブロック図である。
【図４】（Ａ）は同実施形態において、写真のプリントを発注した場合の流れを説明するためのフローチャートであり、（Ｂ）は同実施形態において、プリント媒体にプリントされたマーカーを端末で読み取った場合の流れを説明するためのフローチャートである。
【図５】同実施形態において、絵画変換処理を説明するためのフローチャートである。
【図６】同実施形態において、複数種類の絵画調画像データを端末に表示している状態を示す図である。
【図７】同実施形態において、操作メニューを端末に表示している状態を示す図である。
【図８】同実施形態において、端末の構成を示す機能ブロック図である。
【図９】同実施形態において、端末とサーバーの通信部分のシーケンス図である。
【図１０】本発明に係る第２の実施形態を説明するための模式図である。
【図１１】本発明に係る第２の実施形態の変形例を説明するための模式図である。
【図１２】同実施形態におけるデータフロー図を示すものである。
【図１３】同実施例における端末の内部フローを示す図である。
【図１４】本発明に係る第３の実施形態における端末の内部フローを示す図である。
【発明を実施するための形態】
【００１８】
［第１の実施形態］
【００１９】
図１は、本発明に係る一実施形態のネットワークシステムの構成を示すブロック図である。１−１、１−２、１−３、・・・はパーソナルコンピュータ（ＰＣ）やスマートフォン、携帯電話、情報端末などのいわゆる端末であり、インターネット５００を介して画像サービスサイト１０と接続可能で、ビューアーの役割をするものである。
【００２０】
画像サービスサイト１０は、ユーザーからアップロードされたオリジナル画像データを絵画調の画調からなる絵画調画像データに変換（絵画変換）するサービス、ユーザーから絵画変換された絵画調画像データのプリントの注文を受けてプリント媒体にプリントするサービスや、ユーザーから投稿された写真や絵画調画像データを公開するサービス等を行うウエブサイトである。なお、投稿された写真（オリジナル画像データ）、絵画変換された絵画調画像データ、プリント媒体にプリントされた写真等を総称して作品と呼ぶものとする。
【００２１】
この画像サービスサイト１０は、サーバー１１を有し、上記画像データを絵画調の画調からなる絵画調画像データに変換するサービスを含む各種サービスに係る処理を行うとともに、プリント装置１２を有し、ユーザーから注文を受けた絵画調画像データのプリントを行う。プリント装置１２は、画像サービスサイト１０の中にある必要はなく、他のプリントサイトに委託するものも含む。
【００２２】
図２Ａは、ユーザーから注文を受けた写真のプリントについて説明するもので、紙や印画紙等のプリント媒体２０に絵画調画像３２をプリントし、その絵画調画像３２の主要部２４上にＱＲコード（登録商標）等からなるマーカー２２をプリントされて印刷物２５が形成されている。
これにより、印刷物２５において絵画調画像３２の主要部２４がマーカー２２で隠されて見えないようになっている。
【００２３】
マーカー２２によってマスクする絵画調画像３２の部位は、絵画調画像３２の中央部付近等の画像データの内容に拘わらず一義的な位置でもよい。また、また、特開２０１１−５４０７１号公報記載の着目領域抽出技術を用いて人間が着目するであろう領域を抽出し、この抽出した領域を主要部としてもよいし、他の画像認識技術を用いて絵画調画像３２の主要部を自動認識した領域を主要部としてもよい。さらには、絵画調画像３２のオリジナル画像データをアップロードしたユーザーが指定した部位を主要部とするようにしてもよい。この場合は、ウエブサイトにユーザーがマスクの位置や大きさを指定する機能を設ける。
【００２４】
また、マーカーの形状については、ＱＲコード（登録商標）のみで構成した場合は、図示のように、マーカー２２のようにその形状が矩形となる。しかし、サーバー１１に、星型、楕円形、等あらかじめテンプレートが用意されていて、テンプレートのサイズと位置を調整して、印刷物２５におけるマーカーを適宜の形状にすることができる。この場合においてもＱＲコード（登録商標）を用いる場合には、星形の中に矩形のＱＲコード（登録商標）を入れたマーカーを形成してプリントする。
【００２５】
そして図２Ｂに示すように、端末１−１の裏面にある図示しないカメラでマーカー２２を読み取る。マーカー２２は画像サービスサイト１０のサーバー１１のＵＲＬアドレスを示しているため、端末１−１は画像サービスサイト１０に接続して、絵画調画像３２を、サーバー１１から端末１−１にダウンロードする。したがって、表示部３１に絵画調画像３２を表示することができる。
これにより、主要部２４上にあるマーカー２２が消えて、絵画調画像３２全体を端末１−１の表示部３１で見ることができる。
【００２６】
図３はサーバー１１の構成を示すブロック図であり、１３はユーザーがアップロードした写真（オリジナル画像データ）を記憶するためのオリジナル画像データ記憶部、１４はオリジナル画像データを絵画調の画像に変換した絵画調画像データが記憶される絵画調画像データ記憶部、１５はサーバー１１と端末１−１のリンクを制御するためのリンク制御プログラムが記憶されているリンク制御プログラム記憶部である。
リンク制御プログラムはオリジナル画像データ若しくは絵画調画像データの記憶場所をマーカーである二次元バーコードに変換する機能も備えている。
【００２７】
１６は、絵画変換のアルゴリズムに沿って絵画変換処理を実行する絵画変換プログラム及び絵画変換に必要なエフェクト処理のためのパラメータが記憶されている絵画変換プログラム記憶部、１７は、注文を受けた絵画変換した絵画調画像データと、そのオリジナル画像データを記憶している場所を示すマーカーとともにプリントさせるためのプリント制御プログラムが記憶されているプリント制御プログラム記憶部である。
【００２８】
また、１８はマーカー２２を絵画調画像３２上のどの位置にどのようなサイズや形状で重畳するかを制御するマーカー制御プログラムを記憶するマーカー制御プログラム記憶部である。
【００２９】
ここで、絵画変換プログラムで絵画変換処理が可能な絵画調の画調の種類としては、油絵画調、水彩画調、パステル画調、色鉛筆画調、ゴシック画調、エアブラシ画調、野獣派画調、ししゅう画調、イラスト画調、淡い水彩画調、クレヨン画調、ガッシュ画調、シルクスクリーン画調、コラージュ画調、ドローイング画調、重厚な油彩画調、の１６種類が用意されている。
【００３０】
１３Ａはオリジナル画像データ記憶部１３のスタートアドレスであり、１５Ａはリンク制御プログラム記憶部１５のスタートアドレスであり、１４Ａは絵画調画像データ記憶部１４のスタートアドレスである。このスタートアドレスを指定することにより、オリジナル画像データや各種リンク制御プログラム、各種絵画調画像データを指定する。
【００３１】
図４（Ａ）は、写真のプリントを発注した場合の流れを説明するためのフローチャートである。手順に沿って説明しているので、端末１−１によって行われる処理とサーバー１１によって行われる処理が１つのフローチャートに記載してある。
実際のサーバー１１と端末１−１の通信部分のシーケンスは図９を用いて後述する。
【００３２】
まずユーザーは、写真をインターネット経由で画像サービスサイト１０にプリント発注したい場合、端末１−１からサーバー１１へオリジナル画像のアップロードを行う（ステップＳ４０１）。その際、プリント枚数やプリントサイズ等の指定もする。
【００３３】
サーバー１１側では、アップロードされたオリジナル画像データをオリジナル画像データ記憶部１３に記憶する（ステップＳ４０２）。そしてステップＳ４０３でそのオリジナル画像データに対し絵画変換プログラムにより絵画変換処理を行う。画調の種類は、上述したとおり１６種類あるが、ここでは１６種類すべてを作成して絵画調画像データ記憶部１４に記憶するものとする（ステップＳ４０４）。画調の種類の指定を受けてから、その指定された画調の絵画調画像データに変換することもできる。
【００３４】
続いて、絵画調画像データ記憶部１４のスタートアドレス１４Ａ、すなわち各種絵画調画像データが記憶されている場所を示すマーカーをリンク制御プログラムにより作成する（ステップＳ４０５）。マーカーは、前述のように例えばＱＲコード（登録商標）である。
【００３５】
続いて、ステップＳ４０６でこの作成したマーカー２２を絵画調画像３２の主要部２４上に重畳して同じプリント媒体２０にプリントする（図２Ａ，２Ｂ参照）。プリント自体は画像サービスサイト１０内で行ってもよいし、別のプリントサーバーやプリント業者に対してプリント指示を行ってもよい。
そして、その絵画調画像３２とマーカー２２の両方が重ねてプリントされたプリント媒体２０を画像サービスサイト１０から、あるいは委託を受けたプリント業者からユーザーに郵送する（ステップＳ４０７）。
【００３６】
図４（Ｂ）はユーザーの端末１−１側の操作手順を示すフローチャートである。端末１−１に備えられている図示しないカメラ（後述する図８の８１）でプリント媒体２０にプリントされているマーカー２２を撮影する（ステップＳ４１１）。そうすると、端末１−１はマーカー２２を認識し、そのマーカー２２の指定しているサーバー１１のリンク先、すなわち絵画調画像データの記憶されている場所に自動的に接続する（ステップＳ４１２）。この際、一旦リンク先のＵＲＬアドレスを表示してクリックを要求するかどうかは設計事項なので、本実施形態では直接絵画調画像データの記憶されている場所のスタートアドレス１４Ａに接続するものとする。そしてその場所に記憶されている絵画調画像データ、例えば油絵調の絵画調画像データを端末１−１にダウンロードして（ステップＳ４１３）、絵画調画像３２を表示部３１に表示する（ステップＳ４１４）。
【００３７】
このようにすることによって、ユーザーは端末１−１をプリント媒体２０上に翳すだけで、主要部２４を隠しているマーカー２２が消えた絵画調画像３２を見ることができる。
【００３８】
図５は、絵画変換プログラム記憶部１６に記憶されている絵画変換プログラムによる絵画変換処理を示すフローチャートである。
まず前処理を行う（ステップＳ５０２）。ここは画調の種類にかかわらず共通して実行される処理で、絵画変換処理は画像データがビットマップ形式である必要があるので、ＪＰＥＧ形式で表現されている画像データをビットマップ形式に変換する。また、フィルタをかけてノイズ除去を行う。
【００３９】
続いて、画調選択処理を行う（ステップＳ５０４）。
画調が選択されると、それぞれの画調変換アルゴリズムのステップへ移る。例えば油絵調変換であればステップＳ５０６へ、水彩画調変換であればステップＳ５１０へ進む。それ以外であればその他の画調変換アルゴリズムのステップへと進む（ステップＳ５２０）。
【００４０】
なお、絵画変換処理の各アルゴリズムを実行する際は、変換に必要なエフェクト処理のための各種パラメータを取得する（ステップＳ５０８、ステップＳ５１２）。パラメータは絵画変換プログラム記憶部１６内に有している。パラメータとは画素にエフェクト処理をかけるための要素である。すなわち、画素は一般的にＲＧＢ各複数ビットの階調で表現されるが、そのビットデータに演算をかけるための要素である。
エフェクト処理はフォトレタッチソフトなどで採用されているエフェクト処理と基本的には同じ作用を得るものである。
【００４１】
また、エフェクト処理の一種として、ＨＤＲ（High Dynamic Range）と呼ばれる通常の写真では表現できない広いダイナミックレンジの写真を、トーンマッピングにより狭いダイナミックレンジ幅内に入れ込むことで露出過多の白飛びや露出不足の黒つぶれを補正して表現力を増大するエフェクト処理もある。このエフェクト処理を応用して写真を人の脳が受けた記憶や印象に近づけ、芸術的な表現を加味した新しい写真表現を実現した画像を得ることもできる。ＨＤＲ変換も絵画変換の一種である。
【００４２】
そしてステップＳ５２２、ステップＳ５０４を経由して上述した１６種類の絵画変換処理を行う。
なお、１６種類の絵画変換処理は端末１−１の表示部３１で見ることを想定しているので、それほど大きい画像は必要なく、例えばオリジナル画像データを８００×６００画素程度にリサイズしたリサイズ画像データに対して処理を実施している。オリジナル画像データは一般的に４０００×３０００程度の非常に大きなものである。そこで、プリント発注等の特定の画調の決定が行われると（ステップＳ５２２）、ステップＳ５２４に進み、オリジナル画像データについて絵画変換処理を行う（ステップＳ５２４）。この際、必要なパラメータを取得する（ステップＳ５２６）のは同様である。ただし、同じ画像に対して同じ画調で絵画変換する場合でも、元画像のサイズやプリントサイズが変わると適切なパラメータも変わってくるので、ステップＳ５０８、ステップＳ５１２で取得するパラメータとステップＳ５２６で取得するパラメータは異なってくる。
【００４３】
しかる後、絵画変換後の絵画調画像データを再びＪＰＥＧ形式に変換する後処理を行う（ステップＳ５２８）。オリジナル画像データの絵画変換が必要ない場合は、ステップＳ５２４、ステップＳ５２６はスキップして良い。
【００４４】
図６は本実施形態において、端末１−１の表示部３１に複数種類の絵画調画像データを表示する状態を示すものである。すなわち、端末１−１の表示部３１に１６種類の絵画調画像データの縮小画像４１ａ、４２ｂ、・・・を一覧表示している（符号４１）。４１ａは油絵画調、４１ｂは水彩画調、４１ｃはパステル画調、４１ｄは色鉛筆画調、４１ｅはゴシック画調、・・・に変換された絵画調画像データを示している。
端末１−１の表示部３１はタッチパネルを有しており、いずれかの縮小画像４１ａ、４１ｂ、・・・をタッチするとその画像が拡大表示されて図７に示すような操作メニュー表示が出てくる。
【００４５】
図７において３２は選択された画調の絵画調画像データであり、４２は操作メニューを表示しているものである。
端末１−１の表示ブラウザは例えばＨＴＭＬ（HyperText Markup Language）５若しくはＣＳＳ（Cascading Style Sheets）３等を使用して構成されており、機種に依存しない互換性のあるもので、サーバー１１のリンク制御プログラム記憶部１５に記憶されたリンク制御プログラムと連携を取ることができる。
すなわち、端末１−１の表示部３１のタッチパネル上で、操作メニュー４２のいずれかのメニューを操作すると、その操作信号を、インターネット５００を介してサーバー１１に送信し、対応するリンク制御プログラム記憶部１５のアドレス１６Ａへ飛び、サーバー１１のリンク制御プログラムがそれに対応した処理を実行する。
【００４６】
次に図８及び図９を参照してサーバー１１と端末１−１のリンク制御について説明する。
図８は端末１−１の構成を示す説明するための機能ブロック図である。この構成により図７に示す表示を実現している。
８１は図２Ｂでは図示していない端末１−１の裏面に設置されたカメラであり、マーカー２２を読み取るためのものである。
８２は送信部であり、マーカー２２を読み取ってサーバー１１のリンク先へアクセスし、オリジナル画像データをサーバー１１にアップロードするために機能する。
８３は受信部であり、サーバー１１から送信されてくる制御データや、オリジナル画像データ、絵画調画像データを受信するために機能する。
８４は表示制御部であり、表示部３１の表示を制御するものであり、操作メニュー４２をメニュー表示制御部８５の制御により表示部３１に表示させたり、絵画調画像データ表示制御部８６の制御により、操作メニュー４２の操作に応じて所定の画調の絵画調画像データを表示部３１に表示させたりするために機能する。
８７は端末側リンク制御部であり、サーバー１１のリンク制御プログラム記憶部１５に記憶されたリンク制御プログラムと連携を取るために機能する。連携を取るために送信部８２及び受信部８３により端末１−１とサーバー１１の間で各種制御信号の送受が行われる。
８８は操作制御部であり、タッチパネルの制御を行い、操作メニュー４２の操作を受けて操作信号を出力するために機能する。
【００４７】
図７において、絵画調画像３２が表示されている状態で操作メニュー４２の「次へ」キーまたは「戻る」キーを押すと、図６で一覧表示された種類の画調の絵画調画像データを１枚ずつ順送りまたは逆送りされて表示される。表示部３１のタッチパネルの絵画調画像３２の部分にタッチしてページ送りする（スワイプする）ことも可能である。
【００４８】
「一覧表示」キーを押すと図６に示す一覧表示状態となる。
【００４９】
「拡大表示」キーを押すと現在表示されている表示が拡大され、画像の細部を見ることができる。前述したとおり端末１−１の表示部３１の画素数は８００×６００画素程度であり、実際の画像データは４０００×３０００画素程度あるので、拡大することによってより実物に近い画像の細部を確認することができる。
【００５０】
また、絵画調画像データをプリント発注したい場合は、「サイズ指定」キーでプリントサイズを選び、「額縁指定」キーで額縁の有無や種類を選び、「媒体指定」キーでプリント媒体としてキャンバス地、マグカップ、Ｔシャツ、・・・等を選択する。最終的に「プリント注文」キーを押すことで発注される。
【００５１】
もちろん、１つの操作キーを押すとサブメニューを表示させることができるようになっている。
【００５２】
以上の操作は画像サービスサイト１０を特に意識することなく絵画調画像データの選択、表示、プリント注文等ができるが、「トップページ」キーを操作することにより、画像サービスサイト１０のトップページを表示部３１に表示する。そしてプリント注文に限らず、他のユーザーの投稿した写真を閲覧したり、自分の写真を投稿したりすることができる。
【００５３】
この場合、端末１−１がパーソナルコンピュータやスマートフォンの場合は画像サービスサイト１０の通常のホームページが表示されるが、携帯電話の場合は携帯電話専用のモバイルページへ飛ぶようにしてもよい。
【００５４】
図９は端末とサーバーの通信部分のシーケンス図であり、前記図８の動作の信号の流れを示したものである。
画像サービスサイト１０から郵送されてくる印刷物２５は、プリント媒体２０にマーカー２２が主要部２４をマスクするように重畳された画像３２がプリントされている(マーカー画像データ（Ａ）)。このマーカー２２を端末１−１のカメラ８１で読み取ると、端末１−１は、画像サービスサイト１０のサーバー１１が有するリンク制御プログラム記憶部１５に記憶されたリンク制御プログラムと連携を取る。そして、サーバー１１のＵＲＬアドレスを認識し（マーカー情報（Ｃ））、絵画調画像３２が記憶されている絵画調画像データ記憶部１４のアドレス１４Ａへ飛ぶ。
そして、アドレス１４Ａで指定される絵画調画像３２（マーカーに対応する画像データ（Ｂ））を読み出して端末１−１へ送る。
【００５５】
これらを制御するのはサーバー１１のリンク制御プログラム記憶部１５と端末１−１のリンク制御部８７である。
【００５６】
これにより、主要部２４上にあるマーカー２２が消えて、絵画調画像３２全体を端末１−１の表示部３１で見ることができる。
【００５７】
［第２の実施形態］
本発明の第２の実施形態は、マーカーの中に作品の主要部を隠している情報を入れ込んだものである。すなわち、第１の実施形態では、マーカーで主要部が隠されている画像から、元の画像をダウンロードすることによって画像全体を差替えたが、本実施形態では、マーカーによって隠されている部分の画像を符号化してマーカーに書き込んである。
【００５８】
図１０は、同実施の形態を説明するための模式図である。図１０（Ａ）は、ユーザーから注文を受けた画像のプリントについて説明するもので、紙や印画紙等のプリント媒体２０に画像３３がプリントされ、その画像３３の主要部２４上にマーカー２３がプリントされている。
したがって、印刷物２５における画像３３の主要部２４がマーカー２３で隠されて見えないようになっている。
【００５９】
このマーカー２３は、画像３３においてマーカー２３で隠されて見えない部分、つまり図１０（Ｃ）に実線で示した不足データ３５を符号化してマーカー２３に書き込んだものである。不足データ３５が符号化されて書き込まれているマーカー２３は、画像サービスサイト１０のサーバー１１から有料又は無料でダウンロードしたアプリケーションを用いて、端末１−１の絵画調画像データ表示制御部８６が復元することができるものである。
【００６０】
そこでユーザーは、端末１−１が有するカメラ８１により、プリント媒体２０にプリントされているマーカー２３を含む画像３３を撮影する。そうすると、端末１−１はマーカー２３を認識し、絵画調画像データ表示制御部８６が前記アプリケーションに基づき動作することにより、符号化された不足データ３５を生成する。
【００６１】
さらに、前記カメラ８１での撮影により表示部３１に表示されているマーカー２３を含む画像３３から、マーカー２３を除去した後、このマーカー２３が除去された画像３３と不足データ３５とをマッチングさせて、その輪郭等を合致させて表示する。これにより、図１０（Ｂ）に示すように、不足データ３５が補間された本来の画像３３が表示部３１に表示され、主要部２４上にあるマーカー２３を消去して、画像３３全体を端末１−１の表示部３１で見ることができる。
【００６２】
図１１は、本発明の第２の実施形態の変形例を説明するための模式図である。図１１（Ａ）は、ユーザーから注文を受けた画像のプリントについて説明するもので、紙や印画紙等のプリント媒体２０に画像３３がプリントされているが、その画像３３の主要部２４は、加工画像からなるマーカー３４で構成されている。この加工画像からなるマーカー３４は、同図（Ｃ）に示す画像３３における本来の画像部分である加工前画像データ３３１を加工して、本来の画像部分とは異なる画像を表示させたものである。これにより、印刷物２５における画像３３の主要部２４が加工画像からなるマーカー３４で隠されて見えないようになっている。
【００６３】
この本来の画像である加工前画像３３１を加工して、本来の画像部分とは異なる画像を表示させているマーカー３４は、画像サービスサイト１０のサーバー１１から有料又は無料でダウンロードしたアプリケーションを用いて、絵画調画像データ表示制御部８６が処理を実行することにより、本来の画像部分に復元できるデータからなる。
【００６４】
そこでユーザーは、端末１−１が有するカメラ８１により、プリント媒体２０にプリントされているマーカー３４を含む画像３３を撮影する。そうすると、端末１−１はマーカー２３を認識し、絵画調画像データ表示制御部８６が前記アプリケーションに基づき動作することにより、符号化された本来の画像部分を復号して生成する。
【００６５】
さらに、前記カメラ８１での撮影により表示部３１に表示されている加工画像からなるマーカー３４を含む画像３３から、加工画像からなるマーカー３４を除去した後、このマーカー３４が除去された画像３３と、加工前画像データ３３１とをマッチングさせて表示する。これにより、図１１（Ｂ）に示すように、加工画像からなるマーカー３４の部分が加工前画像データ３３１に置換された本来の画像３３が表示部３１に表示され、主要部２４上にある加工画像からなるマーカー３４を除去して、画像３３全体を端末１−１の表示部３１で見ることができる。
【００６６】
図１２は、第２の実施形態におけるデータフロー図を示すものである。図において、印刷物２５は画像サービスサイト１０、あるいは委託を受けたプリント業者からユーザーに郵送されたものである。ユーザーは、端末１−１が有するカメラ８１により、印刷物２５を撮影する。端末１−１は、加工画像データからなるマーカー３４を読み取って（ステップＳ６０１）、マーカー３４の情報を取得する。
【００６７】
このマーカー３４は、図１１を持って説明したように、その画像３３の主要部２４を加工した加工画像からなる。また、この加工画像からなるマーカー３４は、図１１（Ｃ）に示す画像３３における本来の画像部分である加工前画像データ３３１を加工して、本来の画像部分とは異なる画像を表示させたものである。これにより、印刷物２５における画像３３の主要部２４が加工画像からなるマーカー３４で隠されて見えないようになっている。
そして、前記取得したマーカー情報に基づき、加工前画像を表示させる加工前データの存在と、前記印刷物を撮影することにより得られた加工画像（マーカー３４）が意味する加工画像データの存在とを、絵画調画像データ表示制御部８６にて問い合わせる（ステップＳ６０２）。
【００６８】
そして、前記カメラ８１での撮影により表示部３１に表示されている加工画像からなるマーカー３４を含む画像３３から、加工画像からなるマーカー３４を除去した後、このマーカー３４が除去された画像３３と、加工前画像データ３３１とをマッチングさせて合成する（ステップＳ６０３）。しかる後に、この合成より、加工画像からなるマーカー３４の部分が加工前画像データ３３１に置換された本来の画像３３を端末１の表示部３１に表示する（ステップＳ６０４）これにより、ユーザーは、主要部２４上にある加工画像からなるマーカー３４が除去された画像３３全体を端末１−１の表示部３１で見ることが可能となる。
【００６９】
図１３は、第２の実施の形態における端末の内部フローを示す図である。この実施の形態において、図８に示した端末１−１の絵画調画像データ表示制御部８６には、予め画像サービスサイト１０のサーバー１１にアクセスして、有料又は無料でダウンロードした下記アプリケーション（１）（２）（３）が格納されている。
（１）不足データに対応するアプリケーション
（２）加工前画像データに対応するアプリケーション
（３）別の加工画像データに対応するアプリケーション
【００７０】
さらに、絵画調画像データ表示制御部８６には、
（Ａ）マーカーに対応する不足データ
（Ｂ）マーカーに対応する加工前画像データ
（Ｃ）マーカーに対応する別の加工前画像データ
が予め画像サービスサイト１０のサーバー１１から、有料又は無料でダウンロードして格納されている。
【００７１】
以上の構成において、端末１−１は、ユーザーが端末１−１を用いて前記印刷物２５を撮影する操作を行うと、カメラ８１により印刷物２５の画像中に存在するマーカーを読み取る（ステップＳ７０１）。そして、この読み取ったマーカーが、下記（ａ）、（ｂ）、（ｃ）の何れを意味するものであるかを判断する（ステップＳ７０２）。
（ａ）不足データに対応するマーカー
（ｂ）加工前画像データに対応するマーカー
（ｃ）別の加工画像データに対応するマーカー
【００７２】
「（ａ）不足データに対応するマーカー」である場合、つまり不足データ３５を符号化してマーカー２３に書き込んだものである場合には、絵画調画像データ表示制御部８６は（１）不足データに対応するアプリケーションを起動する。そして、このアプリケーションにより、（Ａ）マーカーに対応する不足データ取得する（ステップＳ７０３）。
【００７３】
また、「（ｂ）加工前画像データに対応するマーカー」である場合には、つまり加工画像データを符号化してマーカー３４に書き込んだものである場合には、絵画調画像データ表示制御部８６は、（２）加工前画像データに対応するアプリケーションを起動する。そして、このアプリケーションにより、（Ｂ）マーカーに対応する加工前画像データを取得する（ステップＳ７０４）。
【００７４】
また、「（ｃ）別の加工画像データに対応するマーカー」である場合には、つまり（ｂとは異なる加工画像データを符号化してマーカー３４に書き込んだものである場合には、絵画調画像データ表示制御部８６は、（３）別の加工画像データに対応するアプリケーションを起動する。そして、このアプリケーションにより、（Ｃ）マーカーに対応する別の加工前画像データを取得する（Ｓ７０５）。
【００７５】
しかる後に、前記カメラ８１での撮影により表示部３１に表示されているマーカーを含む画像から、マーカーを除去した後、このマーカーが除去された画像と、ステップＳ７０３〜７０５の何れかで取得した画像とをマッチングする（ステップＳ７０６）。このとき、カメラ８１での撮影により表示部３１に表示されている画像は、撮影時のおける端末１−１の撮影角度よる影響で、必ずしも正面から撮影されてはいないので、射影変換する（ステップＳ７０７）。しかる後に、表示部３１上の映像に合成し（ステップＳ７０８）、端末１−１の表示部３１に表示する（ステップＳ７０９）。これにより、ユーザーは、主要部２４上にある加工画像からなるマーカー３４が除去された画像３３全体を端末１−１の表示部３１で見ることが可能となる。
【００７６】
［第３の実施形態］
図１４は、本発明の第３の実施の形態における端末の内部フローを示す図である。第３の実施の形態は、前述した第２の実施の形態とはことなり、マーカーは、端末１側においては不足データ、加工前画像データ、別の加工前画像データに復元することはできず、画像サービスサイト１０側においてのみ復元することが可能である。
【００７７】
そこでユーザーは、端末１−１が有するカメラ８１により、プリント媒体２０にプリントされているマーカー２３を含む画像３３を撮影する。そうすると、端末１−１はカメラ８１により印刷物２５の画像中に存在するマーカーを読み取る（ステップＳ８０１）。そして、このマーカーは、下記（１）、（２）、（３）の何れかを意味するものであるかを判断する（ステップＳ８０２）。
（ａ）不足データに対応するマーカー
（ｂ）加工前画像データに対応するマーカー
（ｃ）別の加工画像データに対応するマーカー
【００７８】
「（ａ）不足データに対応するマーカー」である場合には、マーカーの指定しているサーバー１１のリンク先から不足データを取得する（ステップＳ８０３）。また、「（ｂ）加工前画像データに対応する」である場合には、マーカーの指定しているサーバー１１のリンク先から加工前画像データを取得し（Ｓ７０４）、「（ｃ）別の加工加工画像データに対応する」である場合には、別の加工画像データに対応するマーカーの指定しているサーバー１１のリンク先から別の加工前画像データを取得する（ステップＳ８０５）。
【００７９】
しかる後に、前記カメラ８１での撮影により表示部３１に表示されているマーカーを含む画像から、マーカーを除去した後、このマーカーが除去された画像と、ステップＳ８０３〜７０５の何れかで取得した画像とをマッチングする（ステップＳ８０６）。このとき、カメラ８１での撮影により表示部３１に表示されている画像は、撮影時のおける端末１−１の撮影角度よる影響で、必ずしも正面から撮影されてはいないので、射影変換する（ステップＳ８０７）。しかる後に、表示部３１上の映像に合成し（ステップＳ８０８）、端末１−１の表示部３１に表示する（ステップＳ８０９）。これにより、ユーザーは、主要部２４上にある加工画像からなるマーカー３４が除去された画像３３全体を端末１−１の表示部３１で見ることが可能となる。
【００８０】
以上説明したように、マーカーにより作品のコピー防止を図りながら、ユーザーは簡単な操作で、色々な画調に絵画変換された画像をその場で見て確認することができる。また、確認して、気に入った画調の絵画調画像データのプリントを発注することができる。更に、マグカップやＴシャツなどのプリント媒体を選んだり、額縁を選んだりすることができる。
【００８１】
ユーザーがプリントを注文した絵画調画像データ中に存在するマーカーを読み取るだけでマーカーが除去された画像を見ることができるので、簡単である。その際に画像サービスサイトとの連携が発生するので、副次的な効果としてウエブサイトへのアクセス機会が増大し、当該ウエブサイトへの誘導、認知度向上が期待できる。
【００８２】
なお、上記実施形態では、マーカーとしてＱＲコード（登録商標）を使用したが、これに限ることなく、二次元バーコードや一次元バーコードでもよく、丸型や四角、星形等のテンプレート内にマーカーを入れ込んでもよい。
【００８３】
プリント媒体は紙やマグカップ、Ｔシャツなどにハードプリントする例を説明したが、液晶やＥＬ、電子ペーパー等の表示媒体上に、主要部をマーカーで隠された作品を表示させても（ソフトプリント）同じ効果を得ることができる。例えばパーソナルコンピュータの画面上に主要部をマーカーで隠された作品を表示させ、ビューアーのカメラでマーカーを読み取らせることによってビューアー上にマーカーが消えた作品の全体像を表示させることができる。
【００８４】
また、図７では画像データの表示と操作メニュー表示を同時に行っている例を示したが、全面操作メニュー表示にしてもよいことは勿論である。
【００８５】
また、端末１−１とサーバー１１の連携についてはサーバー１１のリンク制御プログラムが制御するようにしてサーバー主体で動作するようにしているが、アプリケーションプログラムを端末１−１にダウンロードしてインストールし、端末主体で動作するようにしてもよい。
【００８６】
以上、この発明の実施形態について説明したが、この発明はこれらに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
【００８７】
以下に、本出願の特許請求の範囲に記載された発明を付記する。
【００８８】
＜請求項１＞
端末と該端末にネットワークを介して接続されるサーバーとで構成される画像処理システムであって、
前記端末は、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記サーバーに接続する接続手段と、
前記接続手段により接続されたサーバーから、前記画像であって前記マーカーによるマスクのない画像を表示する画像データを取得する取得手段と、
前記取得手段により取得された画像データに基づき、前記マーカーによるマスクのない画像を表示する表示手段とを備え、
前記サーバーは、
前記マーカーによるマスクのない画像を表示する画像データを記憶した記憶手段と、
前記記憶手段から前記画像データを読み出して、前記端末の取得手段に供給する画像データ供給手段と、
を備えることを特徴とする画像処理システム。
【００８９】
＜請求項２＞
前記サーバーの画像データ供給手段は、前記端末が有する前記表示手段の大きさに応じたサイズで前記マーカーによるマスクのない画像を表示する画像データを前記端末の取得手段に供給することを特徴とする請求項１記載の画像処理システム。
【００９０】
＜請求項３＞
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーを表示させる第１の表示制御手段と、
前記第１の表示制御手段により前記表示部に表示された前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御手段と、
を備えることを特徴とする画像処理装置。
【００９１】
＜請求項４＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段と、
を備えることを特徴とする画像処理装置。
【００９２】
＜請求項５＞
前記読取手段は、前記マーカーにより一部がマスクされた前記画像を撮像する撮像手段を有し、
前記表示制御手段は、前記撮像手段により前記印刷物から撮像された画像を表示部に表示させた後、該表示させた画像を処理して前記マーカーによるマスクのない画像を表示部に表示させることを特徴とする請求項４記載の画像処理装置。
【００９３】
＜請求項６＞
前記第２の表示制御手段により前記表示手段に表示された前記マーカーによるマスクのない画像を表示させる画像データをサーバーよりダウンロードするダウンロード手段を備えることを特徴とする請求項３又は４記載の画像処理装置。
【００９４】
＜請求項７＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段とを備え、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御手段は、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元手段と、
前記復元手段により復元された前記部分画像データに基づく部分画像により、前記表示手段に表示された画像の前記マーカーを除去した部分を補間する補間手段と、
を備えることを特徴とする画像処理装置。
【００９５】
＜請求項８＞
端末とネットワークを介して接続されるサーバーとを用いる画像処理方法であって、
前記端末には、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記サーバーに接続する接続ステップと、
前記接続により接続されたサーバーから、前記画像であって前記マーカーによるマスクのない画像を表示する画像データを取得する取得ステップと、
前記取得ステップにより取得された画像データに基づき、前記マーカーによるマスクのない画像を表示する表示ステップとを実行させ、
前記サーバーには、
前記マーカーによるマスクのない画像を表示する画像データを記憶した記憶手段からから前記画像データを読み出して、前記端末の取得ステップに供給する画像データ供給ステップ、
を実行させることを特徴とする画像処理方法。
【００９６】
＜請求項９＞
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーを表示させる第１の表示制御ステップと、
前記第１の表示制御ステップにより前記表示部に表示された前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御ステップと、
を含むことを特徴とする画像処理方法。
【００９７】
＜請求項１０＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御ステップと、
含むことを特徴とする画像処理方法。
【００９８】
＜請求項１１＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御ステップとを含み、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御ステップは、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元ステップと、
前記復元ステップにより復元された前記部分画像データに基づく部分画像を、前記表示ステップに表示された画像の前記マーカーを除去した部分にマッチングさせて補間するマッチングステップと、
を含むことを特徴とする画像処理方法。
【００９９】
＜請求項１２＞
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーが表示させる第１の表示制御手段と、
前記第１の表示手段制御手段により前記表示部に表示された前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御手段と、
して機能させることを特徴とする画像処理プログラム。
【０１００】
＜請求項１３＞
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段と、
を備えることを特徴とする画像処理プログラム。
【０１０１】
＜請求項１４＞
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段とを備え、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御手段は、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元手段と、
前記復元手段により復元された前記部分画像データに基づく部分画像を、前記表示手段に表示された画像の前記マーカーを除去した部分にマッチングさせて補間するマッチング手段と、
して機能させることを特徴とする画像処理プログラム。
【０１０２】
＜請求項１５＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、当該マーカーによりによるマスクのない画像を表示する画像データが格納されているサーバーに端末を接続させる接続情報が含まれていることを特徴とする印刷物。
【０１０３】
＜請求項１６＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる情報が含まれていることを特徴とする印刷物。
【０１０４】
＜請求項１７＞
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、前記マーカーにより一部がマスクされた前記画像が撮像された場合において、該撮像された画像を表示部に表示させた後、該表示させた画像を処理して前記マーカーによるマスクのない画像を表示部に表示させる情報が含まれていることを特徴とする印刷物。
【０１０５】
＜請求項１８＞
前記マーカーには、当該マーカーによるマスクのない画像に対応する元画像である作品を所定のサーバーよりダウンロードするためのダウンロード情報が含まれていることを特徴とする請求項１６記載の印刷物。
【符号の説明】
【０１０６】
１端末
１１サーバー
１２プリント装置
１３オリジナル画像データ記憶部
１４絵画調画像データ記憶部
１５リンク制御プログラム記憶部
１６絵画変換プログラム記憶部
１７プリント制御プログラム記憶部
１８マーカー制御プログラム記憶部
２０プリント媒体
２２マーカー
２３マーカー
２４主要部
２５不足データ
２５印刷物
３１表示部
３２絵画調画像
３３画像
３４マーカー
８１カメラ
８２送信部
８３受信部
８５メニュー表示制御部
８６絵画調画像データ表示制御部
８７リンク制御部
３３１加工前画像データ
【特許請求の範囲】
【請求項１】
端末と該端末にネットワークを介して接続されるサーバーとで構成される画像処理システムであって、
前記端末は、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記サーバーに接続する接続手段と、
前記接続手段により接続されたサーバーから、前記画像であって前記マーカーによるマスクのない画像を表示する画像データを取得する取得手段と、
前記取得手段により取得された画像データに基づき、前記マーカーによるマスクのない画像を表示する表示手段とを備え、
前記サーバーは、
前記マーカーによるマスクのない画像を表示する画像データを記憶した記憶手段と、
前記記憶手段から前記画像データを読み出して、前記接続された端末の取得手段に供給する画像データ供給手段と、
を備えることを特徴とする画像処理システム。
【請求項２】
前記サーバーの画像データ供給手段は、前記端末が有する前記表示手段の大きさに応じたサイズで前記マーカーによるマスクのない画像を表示する画像データを前記端末の取得手段に供給することを特徴とする請求項１記載の画像処理システム。
【請求項３】
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーを表示させる第１の表示制御手段と、
前記第１の表示制御手段により前記表示部に表示された前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御手段と、
を備えることを特徴とする画像処理装置。
【請求項４】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段と、
を備えることを特徴とする画像処理装置。
【請求項５】
前記読取手段は、前記マーカーにより一部がマスクされた前記画像を撮像する撮像手段を有し、
前記表示制御手段は、前記撮像手段により前記印刷物から撮像された画像を表示部に表示させた後、該表示させた画像を処理して前記マーカーによるマスクのない画像を表示部に表示させることを特徴とする請求項４記載の画像処理装置。
【請求項６】
前記第２の表示制御手段により前記表示手段に表示された前記マーカーによるマスクのない画像を表示させる画像データをサーバーよりダウンロードするダウンロード手段を備えることを特徴とする請求項３又は４記載の画像処理装置。
【請求項７】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段とを備え、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御手段は、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元手段と、
前記復元手段により復元された前記部分画像データに基づく部分画像により、前記表示手段に表示された画像の前記マーカーを除去した部分を補間する補間手段と、
を備えることを特徴とする画像処理装置。
【請求項８】
端末とネットワークを介して接続されるサーバーとを用いる画像処理方法であって、
前記端末には、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記サーバーに接続する接続ステップと、
前記接続により接続されたサーバーから、前記画像であって前記マーカーによるマスクのない画像を表示する画像データを取得する取得ステップと、
前記取得ステップにより取得された画像データに基づき、前記マーカーによるマスクのない画像を表示する表示ステップとを実行させ、
前記サーバーには、
前記マーカーによるマスクのない画像を表示する画像データを記憶した記憶手段からから前記画像データを読み出して、前記端末の取得ステップに供給する画像データ供給ステップ、
を実行させることを特徴とする画像処理方法。
【請求項９】
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーを表示させる第１の表示制御ステップと、
前記第１の表示制御ステップにより前記表示部に表示された前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御ステップと、
を含むことを特徴とする画像処理方法。
【請求項１０】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御ステップと、
含むことを特徴とする画像処理方法。
【請求項１１】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御ステップとを含み、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御ステップは、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元ステップと、
前記復元ステップにより復元された前記部分画像データに基づく部分画像を、前記表示ステップに表示された画像の前記マーカーを除去した部分にマッチングさせて補間するマッチングステップと、
を含むことを特徴とする画像処理方法。
【請求項１２】
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーが表示させる第１の表示制御手段と、
前記第１の表示手段制御手段により前記表示部に表示された前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御手段と、
して機能させることを特徴とする画像処理プログラム。
【請求項１３】
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段と、
を備えることを特徴とする画像処理プログラム。
【請求項１４】
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段とを備え、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御手段は、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元手段と、
前記復元手段により復元された前記部分画像データに基づく部分画像を、前記表示手段に表示された画像の前記マーカーを除去した部分にマッチングさせて補間するマッチング手段と、
して機能させることを特徴とする画像処理プログラム。
【請求項１５】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、当該マーカーによるマスクのない画像を表示する画像データが格納されているサーバーに端末を接続させる接続情報が含まれていることを特徴とする印刷物。
【請求項１６】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる情報が含まれていることを特徴とする印刷物。
【請求項１７】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、前記マーカーにより一部がマスクされた前記画像が撮像された場合において、該撮像された画像を表示部に表示させた後、該表示させた画像を処理して前記マーカーによるマスクのない画像を表示部に表示させる情報が含まれていることを特徴とする印刷物。
【請求項１８】
前記マーカーには、当該マーカーによるマスクのない画像に対応する画像を所定のサーバーよりダウンロードするためのダウンロード情報が含まれていることを特徴とする請求項１６記載の印刷物。
【請求項１】
端末と該端末にネットワークを介して接続されるサーバーとで構成される画像処理システムであって、
前記端末は、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記サーバーに接続する接続手段と、
前記接続手段により接続されたサーバーから、前記画像であって前記マーカーによるマスクのない画像を表示する画像データを取得する取得手段と、
前記取得手段により取得された画像データに基づき、前記マーカーによるマスクのない画像を表示する表示手段とを備え、
前記サーバーは、
前記マーカーによるマスクのない画像を表示する画像データを記憶した記憶手段と、
前記記憶手段から前記画像データを読み出して、前記接続された端末の取得手段に供給する画像データ供給手段と、
を備えることを特徴とする画像処理システム。
【請求項２】
前記サーバーの画像データ供給手段は、前記端末が有する前記表示手段の大きさに応じたサイズで前記マーカーによるマスクのない画像を表示する画像データを前記端末の取得手段に供給することを特徴とする請求項１記載の画像処理システム。
【請求項３】
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーを表示させる第１の表示制御手段と、
前記第１の表示制御手段により前記表示部に表示された前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御手段と、
を備えることを特徴とする画像処理装置。
【請求項４】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段と、
を備えることを特徴とする画像処理装置。
【請求項５】
前記読取手段は、前記マーカーにより一部がマスクされた前記画像を撮像する撮像手段を有し、
前記表示制御手段は、前記撮像手段により前記印刷物から撮像された画像を表示部に表示させた後、該表示させた画像を処理して前記マーカーによるマスクのない画像を表示部に表示させることを特徴とする請求項４記載の画像処理装置。
【請求項６】
前記第２の表示制御手段により前記表示手段に表示された前記マーカーによるマスクのない画像を表示させる画像データをサーバーよりダウンロードするダウンロード手段を備えることを特徴とする請求項３又は４記載の画像処理装置。
【請求項７】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段とを備え、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御手段は、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元手段と、
前記復元手段により復元された前記部分画像データに基づく部分画像により、前記表示手段に表示された画像の前記マーカーを除去した部分を補間する補間手段と、
を備えることを特徴とする画像処理装置。
【請求項８】
端末とネットワークを介して接続されるサーバーとを用いる画像処理方法であって、
前記端末には、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記サーバーに接続する接続ステップと、
前記接続により接続されたサーバーから、前記画像であって前記マーカーによるマスクのない画像を表示する画像データを取得する取得ステップと、
前記取得ステップにより取得された画像データに基づき、前記マーカーによるマスクのない画像を表示する表示ステップとを実行させ、
前記サーバーには、
前記マーカーによるマスクのない画像を表示する画像データを記憶した記憶手段からから前記画像データを読み出して、前記端末の取得ステップに供給する画像データ供給ステップ、
を実行させることを特徴とする画像処理方法。
【請求項９】
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーを表示させる第１の表示制御ステップと、
前記第１の表示制御ステップにより前記表示部に表示された前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御ステップと、
を含むことを特徴とする画像処理方法。
【請求項１０】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御ステップと、
含むことを特徴とする画像処理方法。
【請求項１１】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取ステップと、
前記読取ステップにより読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御ステップとを含み、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御ステップは、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元ステップと、
前記復元ステップにより復元された前記部分画像データに基づく部分画像を、前記表示ステップに表示された画像の前記マーカーを除去した部分にマッチングさせて補間するマッチングステップと、
を含むことを特徴とする画像処理方法。
【請求項１２】
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
表示部に画像を表示させるとともに、該画像の一部をマスクするようにマーカーが表示させる第１の表示制御手段と、
前記第１の表示手段制御手段により前記表示部に表示された前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を前記表示部に表示させる第２の表示制御手段と、
して機能させることを特徴とする画像処理プログラム。
【請求項１３】
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段と、
を備えることを特徴とする画像処理プログラム。
【請求項１４】
画像処理装置が有するコンピュータで実行される前記コンピュータが読み取り可能なプログラムであって、
前記コンピュータを、
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされた印刷物から前記マーカーを読み取る読取手段と、
前記読取手段により読み取られたマーカーにより示される情報に基づき、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる表示制御手段とを備え、
前記マーカーには、前記マスクされた画像の一部を表示させる部分画像データが含まれ、
前記表示制御手段は、
前記印刷物から撮像された画像を表示部に表示させるとともに、前記マーカーに基づき前記マスクされた画像の一部を復元する復元手段と、
前記復元手段により復元された前記部分画像データに基づく部分画像を、前記表示手段に表示された画像の前記マーカーを除去した部分にマッチングさせて補間するマッチング手段と、
して機能させることを特徴とする画像処理プログラム。
【請求項１５】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、当該マーカーによるマスクのない画像を表示する画像データが格納されているサーバーに端末を接続させる接続情報が含まれていることを特徴とする印刷物。
【請求項１６】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、前記画像であって前記マーカーによるマスクのない画像を表示部に表示させる情報が含まれていることを特徴とする印刷物。
【請求項１７】
画像がプリントされているとともに、該画像の一部をマスクするようにマーカーがプリントされ、
前記マーカーには、前記マーカーにより一部がマスクされた前記画像が撮像された場合において、該撮像された画像を表示部に表示させた後、該表示させた画像を処理して前記マーカーによるマスクのない画像を表示部に表示させる情報が含まれていることを特徴とする印刷物。
【請求項１８】
前記マーカーには、当該マーカーによるマスクのない画像に対応する画像を所定のサーバーよりダウンロードするためのダウンロード情報が含まれていることを特徴とする請求項１６記載の印刷物。
【図１】
【図２Ａ】
【図２Ｂ】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２Ａ】
【図２Ｂ】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【公開番号】特開２０１３−９８６８２（Ｐ２０１３−９８６８２Ａ）
【公開日】平成２５年５月２０日（２０１３．５．２０）
【国際特許分類】
【出願番号】特願２０１１−２３８３８７（Ｐ２０１１−２３８３８７）
【出願日】平成２３年１０月３１日（２０１１．１０．３１）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【Ｆターム（参考）】
【公開日】平成２５年５月２０日（２０１３．５．２０）
【国際特許分類】
【出願日】平成２３年１０月３１日（２０１１．１０．３１）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【Ｆターム（参考）】
[ Back to top ]