画像感覚

专利摘要:
画像の感覚を提供する方法および装置が開示する。まず、デジタル画像を取得し、各種の感覚タグをデジタル画像の各部分に割り当る。デジタル画像を画面に表示する。デジタル画像の部分に対応する画面に対してユーザがいつ、どこをタッチしたか検出する。デジタル画像のタッチされた部分に感覚タグが割り当てられていた場合、タグされた感覚をユーザに提供する。
公开号:JP2011510371A
申请号:JP2010541720
申请日:2008-07-10
公开日:2011-03-31
发明作者:アゲヴィク、マルクス；ハンソン、アンデルス
申请人:ソニー エリクソン モバイル コミュニケーションズ， エービー；
IPC主号:G06F3-01

专利说明:

[0001] 本発明は、デジタル写真に関し、より具体的には、複数の感覚に訴えるようにデジタル写真を表示する方法および装置に関する。]
背景技術

[0002] 過去１０年にわたり、消費者にとってデジタル写真が非常に一般的になった。最新の携帯電話やＰＤＡの多くにデジタルカメラが内蔵されている。デジタル写真には、従来のフィルム写真に対していくつか重要な利点がある。まず、ユーザが写真を撮影した直後に、デジタルカメラの表示画面でデジタル写真を見ることができる。例えば写真の中の１人または数人が目を閉じていたなど、写真に問題があれば、ユーザはもう１枚写真を撮影しようと考える。また、デジタル写真は単純にメモリに記憶されるものなので、たくさんの写真を撮影することや、ユーザにとっていらない写真に戻って削除することが簡単である。最後に、デジタル写真は、例えば拡大、縮小などの操作を、写真を撮影した後に行うことが簡単である。]
[0003] デジタル写真は、従来の写真のように紙に印刷することに加えて、ＰＣ、デジタルカメラ、携帯電話、デジタルフォトフレームなど、ほとんどのコンピュータに表示することが可能である。デジタル写真は、画面に付属のメモリに単純に記憶し、周知の手法で表示する。]
[0004] しかしながら、デジタル写真を表示する現行の画面では、人間の感覚の１つ、すなわち視覚に訴えるようにしか、デジタル写真が提示されない。]
[0005] したがって、視覚、聴覚、味覚、触覚、および／または嗅覚などの複数の感覚に対してデジタル写真を表示するような、デジタル写真を表示する方法および装置が必要である。]
[0006] 本発明のある実施形態によれば、画像の感覚を提供する方法であって、デジタル画像を取得するステップと、デジタル画像の各部分に各種の感覚タグを割り当てるステップと、デジタル画像を画面に表示するステップと、デジタル画像の部分に対応する画面を覆うカバーに対してユーザがいつ、どこをタッチしたか検出するステップと、デジタル画像のタッチされた部分に感覚タグが割り当てられていたかどうか判定するステップと、タグされた感覚をユーザに提供するステップとを含む方法が提供される。]
[0007] 本発明の別の実施形態によれば、画像の感覚を提供する装置であって、デジタル画像を取得する手段と、デジタル画像の各部分に各種の感覚タグを割り当てる手段と、タグされたデジタル画像を表示する画面であって、デジタル画像の部分に対応する画面に対してユーザがいつ、どこをタッチしたか検出するものである画面と、デジタル画像のタッチされた部分に感覚タグが割り当てられていたかどうか判定する処理部と、タグされた感覚をユーザに提供する手段とを備える装置が提供される。]
[0008] 本発明のさらなる実施形態を従属項において限定する。]
[0009] 本発明の実施形態の一効果としては、人間の各種感覚を刺激するようにデジタル写真を画面に表示可能であることが挙げられる。]
図面の簡単な説明

[0010] 本発明の実施形態のさらなる目的、特徴、効果については、添付図面を参照した以下の本発明の詳細な説明から明らかとなろう。]
[0011] 図１Ａおよび図１Ｂは、デジタカメラと、本発明の実施形態に係る表示部とを備えたハンドヘルド無線通信端末を示す。
図２は、本発明の一実施形態に係るタッチスクリーンを覆った透明プラスチックカバーを示す。
図３は、本発明の一実施形態に係る透明プラスチックカバーを示す。
図４は、本発明の一実施形態に係るデジタル画像を表示する処理を説明するフローチャートである。
図５は、本発明の一実施形態に係るタッチスクリーン上のデジタル画像を示す。] 図１Ａ 図１Ｂ 図２ 図３ 図４ 図５
実施例

[0012] ここで、添付図面を参照しながら、本発明の実施形態の具体例を説明する。しかしながら、本発明は多種多様な形態で実施することが可能であり、ここに記載する実施形態に限定されると解釈すべきものではない。むしろ、開示する実施形態は本明細書を徹底的で完全なものとするために与えるのであって、当業者に本発明の範囲を完全に伝達するものである。添付図面に示す特定の実施形態の詳細な説明で使用する用語で、本発明を限定するつもりはない。また、図面において同じ番号は同じものを指す。]
[0013] 本発明の一実施形態によれば、タッチスクリーンを備えた複数の電子装置にデジタル画像を表示することができる。例えば、電子装置としては、コンピュータスクリーン、携帯電話、デジタルフォトフレームなどが挙げられるが、本発明は上記に限定されない。]
[0014] 図１Ａは、本発明の実施形態によって使用可能な携帯電話などの携帯通信端末１０の形態の電子装置を示している。端末１０は、枠を含む支持構造１１と、キーパッドまたはキーボード１２および画面１３を含むユーザインタフェースとを備える。端末１０は、マイクロフォンおよびスピーカを含むオーディオインタフェース、無線送受信回路、アンテナ、電池、無線通信用の関連ソフトウェアおよびデータメモリを含むマイクロプロセッサシステムを備え、それらすべてを支持構造１１で支えて、枠内に含むようにすることも可能である。これに加えて、装置１０は、
デジタルカメラ１４を備えることも可能であり、図１Ａにはその口径を示してある。] 図１Ａ
[0015] 図１Ａに示すように、カメラ１４の口径と画面１３とは、共通の視点から双方が見えるように配置することが可能である。例えば、カメラ１４の口径と画面１３とを枠１１の同一面上に配置することができる。このようにして、ユーザが画面１３を見ている間はカメラ１４がユーザの方を向いているものとすることができる。したがって、通信端末１０をテレビ電話として使用することも可能である。] 図１Ａ
[0016] 図１Ｂに示す通信端末１０の概略図を参照しながら、本発明の実施形態をさらに説明することとする。ここで図Ｂを参照すると、本発明の実施形態に係る通信端末例１０が、キーパッド１２と、画面１３と、送受信部２６と、記憶部１６と、マイクロフォン１５と、スピーカ１９と、カメラ１４とを備えており、これらは処理部２０と通信を行う。画面１３としては、タッチスクリーンが挙げられるが、本発明はこれに限定されない。送受信部２６は、送信回路２７と、受信回路２８と、モデム２９とを備え、協働させて無線周波信号をアンテナ２５を介して遠隔の送受信部に対して送受信を行うものが典型的である。無線周波信号は、トラフィック信号および制御信号の両方を含んだものとすることが可能であり、両信号を用いて、通信相手や通信宛先との通信を確立したり維持したりする。] 図１Ｂ
[0017] 記憶部１６は、処理部２０用のプログラム命令と、処理部２０がアクセスおよび／または使用可能なオーディオデータ、ビデオデータ、設定データなど、および／またはその他のデータなどのデータとの両方を記憶するのに用いる汎用メモリとすることができる。記憶部１６としては、不揮発性読出／書込メモリ、読出専用メモリ、および／または揮発性読出／書込メモリも挙げられる。]
[0018] ある実施形態によれば、図２に示すように、タッチスクリーン１３を覆うようにカバー３０を設置する。カバー３０の部分に印加された電気衝撃に基づいてテクスチャの変更が可能な透明プラスチック材料で構成することができるが、本発明は上記に限定されない。また、タッチスクリーン１３とカバー３０とを単一の画面に統合して、以下で説明するカバーの機能すべてを行えるようにすることも可能である。電気衝撃は、カバー３０に埋め込まれた一連の配線３２に印加する。加えて、図３に示すように、加熱配線３４および冷却配線３５の配線網をカバー３０に埋め込んだり、タッチスクリーン１３とカバー３０との間に設置したりすることも可能である。代替案においては、熱風および冷風を用いて、熱い、冷たいという感覚を伝えることも可能であるが、本発明は上記に限定されない。カバーの動作は処理部２０によって制御される。カバー３０の動作について、図４を参照しながら以下でさらに詳細に説明する。] 図２ 図３ 図４
[0019] ここで、図４を参照しながら、画像の感覚を提供する方法を説明する。ステップ４０１において、カメラ１４でデジタル画像を取得する。ユーザがカメラ１４を用いてデジタル画像を撮影してもよいし、あるいは外部コンピュータからカメラ１４へデジタル画像をダウンロードしてもよい。デジタル画像は、取得すると、ステップ４０３においてタッチスクリーン１３に表示される。まず、ステップ４０５において、図５に示すようにデジタル画像を複数の部分に分割する。この部分については、どのような大きさにすることも可能であり、本発明はその大きさによって限定されるものではないということが理解されよう。デジタル画像が表示されている間、デジタル画像の部分に感覚タグを付加することができる。感覚タグとしては、熱さ、冷たさ、粗さ、滑らかさ、硬さ、軟らかさ、音、味、においなどの感覚タグが挙げられるが、上記に限定されない。様々な音、におい、味に対応した多種多様な聴覚タグ、嗅覚タグ、味覚タグを携帯通信端末１０に記憶しておくことが可能であることが理解されよう。] 図４ 図５
[0020] 本発明の一実施形態によれば、ある人が、デジタル画像の様々な部分に適切な感覚タグを手動で割り当てる。例えば、この人は、カーソルを用いて、デジタル画像の部分に各種の感覚タグを割り当てることが可能であるが、本発明は上記に限定されない。１または２以上の感覚タグをデジタル画像の単一部分に割り当てることもできる。例えば、人々を表すデジタル画像の部分には軟らさおよび温かさの感覚タグを割り当てて、家屋を表すデジタル画像の部分には硬さの感覚タグ割り当てることが可能である。また、海岸および海のデジタル画像では、海岸に硬くて熱い感覚タグを割り当てて、冷たくて軟らかい感覚タグを海に割り当てることが可能である。加えて、海岸に打ち寄せる波を示すデジタル写真の部分に、打ち寄せる波の音をフィーチャーしたオーディオタグを割り当てることも可能である。カモメを示すデジタル画像の部分には、カモメをフィーシャーしたオーディオタグを割り当てることも可能である。最後に、デジタル画像の全部または一部に、海岸のにおいの感覚タグを割り当てることも可能である。]
[0021] 本発明のこの実施形態では、ユーザが適切な選択を行うことが可能なポップアップリストに、選択可能なすべての感覚タグを表示することができる。選択可能な感覚タグのリストについては、言うまでもなく、端末１０が発生可能な各種の音やにおい、およびカバー３０のタッチ性能に依存したものとなる。加えて、デジタル画像全体に各種のデフォルト感覚タグを初期的に適用することも可能である。例えば、デジタル画像の全部に硬くて冷たい感覚タグを初期的に割り当てておくことも可能であるが、本発明は上記に限定されない。]
[0022] 本発明の代替実施形態では、画像認識ソフトウェアを使用して、デジタル画像に感覚タグを割り当てることもできる。この実施形態では、処理部２０が画像認識ソフトウェアを使用して画像を解析し、デジタル画像の各種特徴に対して所定の感覚タグが割り当てられる。]
[0023] ステップ４０７においてデジタル画像に手動または自動でタグを行ったら、タグ済デジタル画像は、今後表示するものとして、ステップ４０９において記憶部１６に記憶する。タグ済デジタル画像は、外部コンピュータから端末１０にダウンロードされ、記憶部１６に記憶することもできることが理解されよう。]
[0024] ユーザが表示用タグ済デジタル画像を選択すると、ステップ４１１において処理部２０がタッチスクリーン１３にタグ済デジタル画像を表示させる。ここで、デジタル画像の全部または一部に聴覚タグおよび／または嗅覚タグの付されていた場合であれば、端末１０は各種の音やにおいを発生させることが可能である。この音やにおいは所定の時間だけ継続するものとすることもできれば、デジタル画像を表示している間だけ継続するものとすることもできる。いくつかのタグを同時に再生することも可能であり、それぞれをタッチで作動させる必要もないということが理解されよう。これについては、予め計画しておくこともできれば、リアルタイムで行うこともできる。]
[0025] タッチスクリーン１３は、ステップ４１３において、タッチスクリーン１３を覆うカバー３０に対してユーザがいつ、どこをタッチしたか検出することができる。ステップ４１５において、処理部２０が、表示されたデジタル画像のうちでタッチされている部分を判定し、タッチされている部分に何か感覚タグが付されているかどうか判定する。]
[0026] タッチされている部分に少なくとも１つの感覚タグが適用されていた場合、処理部２０は、ステップ４１９において発生させる適切な応答を与える。例えば、感覚タグが熱さまたは冷たさのいずれかであった場合、処理部２０は端末の適切な加熱部３４および冷却部３５を作動させて、タッチされているカバーの部分に応答を発生させる。感覚タグが滑らかさまたは粗さ、および／または硬さまたは軟らかさであった場合、処理部２０は、電気衝撃発生部４０に信号送信して、タッチされているカバーの部分に適切な応答を発生させる。感覚タグがオーディオサウンドであった場合、処理部２０は、タグされた音を選択し、スピーカ１９へ送信する。感覚タグがにおい出会った場合、処理部２０は、嗅覚システム４２に命令して、正しいにおいを生成させる。発生した応答は、所定の時間、もしくはユーザが指／手をカバー３０から離すまで、または指／手を画像の新たな部分に移動させるまで継続する。代替実施形態では、異なる感覚タグを所定のタグまたはユーザ定義タグとすることが可能である。さらに、タグを１または２以上の所定タグおよび／またはユーザ定義タグの組合せとすることも可能である。]
[0027] 以上、本発明について特定の実施形態を参照しながら説明した。しかしながら、上述したもの以外の実施形態についても、均等に本発明の範囲とすることが可能である。上述した以外の方法ステップについても、ハードウェア、またはソフトウェア、またはハードウェアとソフトウェアとの組合せで方法を実行して、本発明の範囲内で提供することが可能である。本発明の様々な特徴、ステップは、上述した以外の組合せで組み合わせることも可能であるということを了解すべきである。本発明の範囲については、添付の特許請求の範囲によってのみ限定されるものである。]

权利要求:

請求項1
画像の感覚を提供する方法であって、デジタル画像を取得するステップと、前記デジタル画像の各部分に各種の感覚タグを割り当てるステップと、前記デジタル画像を画面に表示するステップと、前記デジタル画像の部分に対応する前記画面を覆うカバーに対してユーザがいつ、どこをタッチしたか検出するステップと、前記デジタル画像のタッチされた部分に感覚タグが割り当てられていたかどうか判定するステップと、タグされた感覚を前記ユーザに提供するステップとを含む方法。
請求項2
前記ユーザが前記各種の感覚タグを前記デジタル画像に割り当てる、請求項１に記載の方法。
請求項3
画像認識アルゴリズムが前記各種の感覚タグを写真に割り当てる、請求項１に記載の方法。
請求項4
前記感覚タグは、光景、触感、音、味、においに関する、請求項１〜３のいずれか１項に記載の方法。
請求項5
前記画面はタッチスクリーンである、請求項１〜４のいずれか１項に記載の方法。
請求項6
前記画面を覆うようにカバーが提供される、請求項１〜５のいずれか１項に記載の方法。
請求項7
触覚タグが、前記タッチスクリーンの前記カバーを硬くするか、軟らかくするか、および／または熱くするか、冷たくするか、および／または滑らかにするか、粗くするかについて示す、請求項６に記載の方法。
請求項8
前記タグされた感覚は、前記ユーザが前記カバーをタッチしたところで、前記ユーザに提供される、請求項７に記載の方法。
請求項9
聴覚タグは、前記ユーザに対して再生可能な記録された音に対応している、請求項４に記載の方法。
請求項10
嗅覚タグは、装置から放出可能な記憶された芳香に対応している、請求項４または９のいずれか１項に記載の方法。
請求項11
触覚タグにしたがって、前記タッチスクリーンの前記カバーの部分に異なる電気衝撃を加えて、前記カバーを硬くまたは軟らかく、および／または滑らかにまたは粗くする、請求項７に記載の方法。
請求項12
触覚タグにしたがって、冷却手段が前記カバーに冷たい部分を発生させる、請求項７または１１のいずれか１項に記載の方法。
請求項13
触覚タグにしたがって、加熱手段が前記カバーに熱くなった部分を発生させる、請求項７、１１、または１２のいずれか１項に記載の方法。
請求項14
画像の感覚を提供する装置であって、デジタル画像を取得する手段と、前記デジタル画像の各部分に各種の感覚タグを割り当てる手段と、タグされた前記デジタル画像を表示する画面であって、前記デジタル画像の部分に対応する前記画面に対してユーザがいつ、どこをタッチしたか検出するものである画面と、前記デジタル画像のタッチされた部分に感覚タグが割り当てられていたかどうか判定する処理部と、タグされた感覚を前記ユーザに提供する手段とを備える装置。
請求項15
前記ユーザが前記各種の感覚タグを前記デジタル画像に割り当てる、請求項１４に記載の装置。
請求項16
画像認識アルゴリズムが前記各種の感覚タグを前記デジタル画像に割り当てる、請求項１４に記載の装置。
請求項17
前記感覚タグは、光景、触感、音、味、においに関する、請求項１４〜１６のいずれか１項に記載の装置。
請求項18
前記画面はタッチスクリーンである、請求項１４〜１７のいずれか１項に記載の装置。
請求項19
前記画面を覆うようにカバーが提供されたカバーをさらに備える、請求項１４〜１８のいずれか１項に記載の装置。
請求項20
触覚タグが、前記画面の前記カバーを硬くするか、軟らかくするか、および／または熱くするか、冷たくするか、および／または滑らかにするか、粗くするかについて示す、請求項１９に記載の装置。
請求項21
前記タグされた感覚は、前記ユーザが前記カバーをタッチしたところで、前記ユーザに提供される、請求項２０に記載の装置。
請求項22
聴覚タグは、前記ユーザに対して再生可能な記録された音に対応している、請求項１７に記載の装置。
請求項23
嗅覚タグは、前記装置から放出可能な記憶された芳香に対応している、請求項１７に記載の装置。
請求項24
触覚タグにしたがって、前記タッチスクリーンの前記カバーの部分に異なる電気衝撃を加えて、前記カバーを硬くまたは軟らかく、および／または滑らかにまたは粗くする、請求項２０に記載の装置。
請求項25
触覚タグにしたがって、冷却手段が前記カバーに冷たい部分を発生させる、請求項２０または２４のいずれか１項に記載の装置。
請求項26
触覚タグにしたがって、加熱手段が前記カバーに熱くなった部分を発生させる、請求項２０、２４、または２５のいずれか１項に記載の装置。