JP2010157035A - 合成画像表示システム、合成画像表示方法、及び合成画像表示プログラム - Google Patents
合成画像表示システム、合成画像表示方法、及び合成画像表示プログラム Download PDFInfo
- Publication number
- JP2010157035A JP2010157035A JP2008333848A JP2008333848A JP2010157035A JP 2010157035 A JP2010157035 A JP 2010157035A JP 2008333848 A JP2008333848 A JP 2008333848A JP 2008333848 A JP2008333848 A JP 2008333848A JP 2010157035 A JP2010157035 A JP 2010157035A
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- recognition information
- luminance
- composite image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Record Information Processing For Printing (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】撮影された画像の所定の位置に他の画像を合成して表示する合成画像表示システムにおいて、予め設定された光の照射後、時間の経過と共に輝度が変化する変化物により所定の情報が記された情報提供媒体を撮像する撮像手段と、前記撮像手段により撮影された画像中に含まれる所定形状からなる認識情報及び輝度情報を解析する認識情報解析手段と、前記認識情報解析手段により得られる認識情報から3次元位置を取得する3次元位置取得手段と、前記3次元位置取得手段により得られる3次元座標を用いて、予め蓄積された複数の合成対象画像のうち、前記認識情報に対応する画像を抽出する画像情報抽出手段と、前記画像情報抽出手段により抽出された合成対象画像を前記撮影画像の実空間を基準にして立体合成し、合成された画像を表示する画像合成手段とを有することにより上記課題を解決する。
【選択図】図1
Description
本発明は、例えばカメラ等の撮像手段及びそのカメラと接続されたPC(Personal Computer)や、カメラ付き携帯端末等を用いて、予め設定された光の照射後、時間の経過と共に輝度が変化する変化物により所定の情報が記された情報提供媒体(例えば、カード状の紙や樹脂シート等)を撮像し、撮影された画像に含まれる情報に対応する仮想図形等の画像(合成対象画像((静止画、動画、文字情報等を含む))を、撮影画像と合成してディスプレイ等の画面に表示する。なお、本発明では、仮想空間上の3次元情報を回転情報及び3次元座標に対応させて実空間画像に表示する仮想図形表示システムを提供する。
ここで、本実施形態における合成画像表示システムの機構構成例について図を用いて説明する。
次に、合成画像表示装置12の機能構成例について図を用いて説明する。なお、合成画像表示装置12の機能構成については、携帯端末13にて置き換えることもでき、また画像管理データベース14における各機能も具備することもできる。
なお、画像情報抽出手段38が抽出するものは、画像そのものに限定されず、文字や映像、模様、文字情報等でもよい。更に、画像情報抽出手段38は、抽出した情報に対して、実空間上にどのように表示するかを示す表示指示情報を表示する。なお、表示指示情報とは、具体的には表示される情報をどのように表示するかを示すものであり、どの位置に、どのような大きさで、どのタイミングでどの程度表示するか等の位置情報、書式情報、表示情報、時間情報等の各種情報を含んでいる。
ここで、本実施形態におけるカード20に記される認識情報21の具体例について図を用いて説明する。
なお、本発明においては、情報提供媒体として再帰反射シートを用いることにより、更に高精度な情報を読み取ることができる。以下にその内容について説明する。なお、実施例として、再帰反射シートである積層材料からの情報読み取り方法について説明する。
・透明樹脂
(株)セイコーアドバンス社製スクリーン印刷用インキSG−410(90部)、トルエン(10部)を混合し透明塗料を調製した。
・スクリーン印刷用版の作成
ナイロン製150メッシュスクリーンを用いて、10mm角のQR型2次元コード(14×14セル、コード情報:SHISEIDO)の版を作成した。
・再帰反射材
再帰反射材(微小球固定層+反射層)として、株式会社丸仁製オープン型再帰反射フィルム(LIGHT FORCETM LFU−1200、反射層:アルミニウム蒸着、ガラスビーズの直径:約40〜50μm、ビーズの埋没率:約50%)を用いた。
・情報コードの印刷方法
上記の再帰反射材の表面(透明微小球が露出した面)に、上記のスクリーン印刷用板を使用して、スクリーン印刷機で2次元コード(透明樹脂層)の厚さが約10μmになるように印刷した。印刷した2次元コードは外観上目視でほとんど認識できず、再帰反射材の意匠性を損なうことはなかった。
・コード情報の読み取り解析
図1に示した装置を用いて、上で作成した積層材料に対し、コード情報の読み取りを行った。ここで、光検出手段および情報コード解析手段として、CCDカメラ付コードリーダTHIR−3000LP((株)東研製))を用いた。コード情報の読み取り、解析を行った結果、実際にコード情報として記録されている「SHISEIDO」と読み取ることができた。
ここで、上述した合成画像表示システム10においては、各機能をコンピュータに実行させることができる実行プログラム(合成画像表示プログラム)を生成し、例えば汎用のパーソナルコンピュータ、サーバ等にその実行プログラムをインストールすることにより、本発明における合成画像表示処理等を実現することができる。
次に、本実施形態における合成画像表示処理手順について説明する。図5は、本実施形態における合成画像表示処理手順の一例を示すフローチャートである。
次に、実施例2として、本実施形態において表示される画像例について図を用いて説明する。図6は、本発明において表示される合成画像の一例を示す図である。
ここで、上述の実施形態においては、カード等の情報提供媒体に印字された印字情報等の変化物(二次元バーコード等)を撮影し、撮影した画像から印字情報を解析することで、対応する合成画像を所定の位置に表示しているが、本発明においてはこの限りではなく、例えば情報提供媒体をディスプレイ等の表示装置とし、ディスプレイに表示されている上述した変化物を撮影した画像を取得し、取得した画像に含まれる変化物を解析することで、対応する立体画像を抽出し、撮影された画像にその画像を合成させた合成画像を表示させることができる。なお、この実施形態では、例えば映像表示やスライド表示等により画面に表示された変化物を時間の経過と共に容易に切り換えることができ、撮影側は画面に表示される変化物を含む画像を上述したように撮影することで、その変化物に対応する立体画像を合成して動画のように表示させることができる。
11 撮像装置
12 合成画像表示装置
13 携帯端末
14 画像管理データベース
15 通信ネットワーク
20,70 カード(情報提供媒体)
21 認識情報
22 光源
31 入力手段
32 出力手段
33 蓄積手段
34 撮影画像取得手段
35 認識情報解析手段
36 回転方向検出手段
37 3次元位置取得手段
38 画像情報抽出手段
39 画像合成手段
40 送受信手段
41 制御手段
51 点
52 星型
53,54 文字
55 1次元バーコード
56 2次元バーコード
57 QRコード
58 DataMatrixコード
59 枠
61 入力装置
62 出力装置
63 ドライブ装置
64 補助記憶装置
65 メモリ装置
66 CPU
67 ネットワーク接続装置
72 合成画像
80 画面
81 立方体
82 文字情報
83 3次元形状
Claims (15)
- 撮影された画像の所定の位置に他の画像を合成して表示する合成画像表示システムにおいて、
予め設定された光の照射後、時間の経過と共に輝度が変化する変化物により所定の情報が記された情報提供媒体を撮像する撮像手段と、
前記撮像手段により撮影された画像中に含まれる所定形状からなる認識情報及び輝度情報を解析する認識情報解析手段と、
前記認識情報解析手段により得られる認識情報から3次元位置を取得する3次元位置取得手段と、
前記3次元位置取得手段により得られる3次元座標を用いて、予め蓄積された複数の合成対象画像のうち、前記認識情報に対応する画像を抽出する画像情報抽出手段と、
前記画像情報抽出手段により抽出された合成対象画像を前記撮影画像の実空間を基準にして立体合成し、合成された画像を表示する画像合成手段とを有することを特徴とする合成画像表示システム。 - 前記認識情報解析手段は、
予め設定される波長の紫外線光、赤外線光、及び可視光のうち、少なくとも1つの光源から照射された後の前記変化物の輝度情報を取得することを特徴とする請求項1に記載の合成画像表示システム。 - 前記画像情報抽出手段は、前記認識情報を印字したときの前記変化物の経時的な輝度情報の変化に伴い、所定時間毎における各輝度情報に対応する合成対象画像を順次抽出し、
前記画像合成手段は、前記画像情報抽出手段により前記合成対象画像が抽出される毎に、前記撮影画像と前記合成対象画像との合成を行うことを特徴とする請求項1又は2に記載の合成画像表示システム。 - 前記変化物により前記情報提供媒体に記された認識情報の向きを解析する回転方向検出手段を有し、
前記画像情報抽出手段は、
前記認識情報解析手段により得られる輝度情報と、前記回転方向検出手段により得られる回転情報とに基づいて、合成する対象画像を抽出することを特徴とする請求項1乃至3の何れか1項に記載の合成画像表示システム。 - 前記認識情報は、
文字、図形、模様、画像及びバーコード情報のうち、少なくとも1つであることを特徴とする請求項1乃至4の何れか1項に記載の合成画像表示システム。 - 前記画像合成手段は、
前記撮影画像に含まれる前記情報提供媒体の位置、角度、向きのうち少なくとも1つを含む姿勢情報、及び前記輝度情報に基づいて、前記合成対象画像に対して、表示、非表示、大きさ、位置、方向を制御することを特徴とする請求項1乃至5の何れか1項に記載の合成画像表示システム。 - 前記光源は、再帰反射観察ライトであり、前記情報提供媒体は、再帰反射シートであることを特徴とする請求項1乃至6の何れか1項に記載の合成画像表示システム。
- 撮影された画像の所定の位置に他の画像を合成して表示する合成画像表示方法において、
予め設定された光の照射後、時間の経過と共に輝度が変化する変化物により所定の情報が記された情報提供媒体を撮像する撮像ステップと、
前記撮像ステップにより撮影された画像中に含まれる所定形状からなる認識情報及び輝度情報を解析する認識情報解析ステップと、
前記認識情報解析ステップにより得られる認識情報から3次元位置を取得する3次元位置取得ステップと、
前記3次元位置取得ステップにより得られる3次元座標を用いて、予め蓄積された複数の合成対象画像のうち、前記認識情報に対応する画像を抽出する画像情報抽出ステップと、
前記画像情報抽出ステップにより抽出された合成対象画像を前記撮影画像の実空間を基準にして立体合成し、合成された画像を表示する画像合成ステップとを有することを特徴とする合成画像表示方法。 - 前記認識情報解析ステップは、
予め設定される波長の紫外線光、赤外線光、及び可視光のうち、少なくとも1つの光源から照射された後の前記変化物の輝度情報を取得することを特徴とする請求項8に記載の合成画像表示方法。 - 前記画像情報抽出ステップは、前記認識情報を印字したときの前記変化物の経時的な輝度情報の変化に伴い、所定時間毎における各輝度情報に対応する合成対象画像を順次抽出し、
前記画像合成ステップは、前記画像情報抽出ステップにより前記合成対象画像が抽出される毎に、前記撮影画像と前記合成対象画像との合成を行うことを特徴とする請求項8又は9に記載の合成画像表示方法。 - 前記変化物により前記情報提供媒体に記された認識情報の向きを解析する回転方向検出ステップを有し、
前記画像情報抽出ステップは、
前記認識情報解析ステップにより得られる輝度情報と、前記回転方向検出ステップにより得られる回転情報とに基づいて、合成する対象画像を抽出することを特徴とする請求項8乃至10の何れか1項に記載の合成画像表示方法。 - 前記認識情報は、
文字、図形、模様、画像及びバーコード情報のうち、少なくとも1つであることを特徴とする請求項8乃至11の何れか1項に記載の合成画像表示方法。 - 前記画像合成ステップは、
前記撮影画像に含まれる前記情報提供媒体の位置、角度、向きのうち少なくとも1つを含む姿勢情報、及び前記輝度情報に基づいて、前記合成対象画像に対して、表示、非表示、大きさ、位置、方向を制御することを特徴とする請求項8乃至12の何れか1項に記載の合成画像表示方法。 - 前記光源は、再帰反射観察ライトであり、前記情報提供媒体は、再帰反射シートであることを特徴とする請求項8乃至13の何れか1項に記載の合成画像表示方法。
- コンピュータに、請求項1乃至7の何れか1項に記載の合成画像表示システムの各手段に係る処理を実行させることを特徴とする合成画像表示プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008333848A JP5258549B2 (ja) | 2008-12-26 | 2008-12-26 | 合成画像表示システム、合成画像表示方法、及び合成画像表示プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008333848A JP5258549B2 (ja) | 2008-12-26 | 2008-12-26 | 合成画像表示システム、合成画像表示方法、及び合成画像表示プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010157035A true JP2010157035A (ja) | 2010-07-15 |
JP5258549B2 JP5258549B2 (ja) | 2013-08-07 |
Family
ID=42574943
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008333848A Expired - Fee Related JP5258549B2 (ja) | 2008-12-26 | 2008-12-26 | 合成画像表示システム、合成画像表示方法、及び合成画像表示プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5258549B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101507536B1 (ko) | 2013-07-08 | 2015-04-07 | 한남대학교 산학협력단 | 적외선을 이용한 객체 추출 및 영상 합성 시스템 |
JP2018116392A (ja) * | 2017-01-17 | 2018-07-26 | 京セラドキュメントソリューションズ株式会社 | 画像形成システム |
CN111783776A (zh) * | 2020-06-30 | 2020-10-16 | 平安国际智慧城市科技股份有限公司 | 基于真实板材的文字识别方法、装置和计算机设备 |
CN112927176A (zh) * | 2021-01-29 | 2021-06-08 | 北京百度网讯科技有限公司 | 图像合成方法、装置、电子设备和计算机可读存储介质 |
CN109801351B (zh) * | 2017-11-15 | 2023-04-14 | 阿里巴巴集团控股有限公司 | 动态图像生成方法和处理设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003256876A (ja) * | 2002-03-04 | 2003-09-12 | Sony Corp | 複合現実感表示装置及び方法、記憶媒体、並びにコンピュータ・プログラム |
JP2004062757A (ja) * | 2002-07-31 | 2004-02-26 | Canon Inc | 情報処理方法および撮像部位置姿勢推定装置 |
JP2006167449A (ja) * | 2004-12-01 | 2006-06-29 | Acushnet Co | 物体識別のための量子ドットを備えた性能測定システム |
JP2008146108A (ja) * | 2006-12-05 | 2008-06-26 | Canon Inc | 指標、画像処理装置、画像処理方法 |
JP2008224626A (ja) * | 2007-03-15 | 2008-09-25 | Canon Inc | 情報処理装置、情報処理方法、校正治具 |
-
2008
- 2008-12-26 JP JP2008333848A patent/JP5258549B2/ja not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003256876A (ja) * | 2002-03-04 | 2003-09-12 | Sony Corp | 複合現実感表示装置及び方法、記憶媒体、並びにコンピュータ・プログラム |
JP2004062757A (ja) * | 2002-07-31 | 2004-02-26 | Canon Inc | 情報処理方法および撮像部位置姿勢推定装置 |
JP2006167449A (ja) * | 2004-12-01 | 2006-06-29 | Acushnet Co | 物体識別のための量子ドットを備えた性能測定システム |
JP2008146108A (ja) * | 2006-12-05 | 2008-06-26 | Canon Inc | 指標、画像処理装置、画像処理方法 |
JP2008224626A (ja) * | 2007-03-15 | 2008-09-25 | Canon Inc | 情報処理装置、情報処理方法、校正治具 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101507536B1 (ko) | 2013-07-08 | 2015-04-07 | 한남대학교 산학협력단 | 적외선을 이용한 객체 추출 및 영상 합성 시스템 |
JP2018116392A (ja) * | 2017-01-17 | 2018-07-26 | 京セラドキュメントソリューションズ株式会社 | 画像形成システム |
US10489694B2 (en) | 2017-01-17 | 2019-11-26 | Kyocera Document Solutions Inc. | Image forming systems |
CN109801351B (zh) * | 2017-11-15 | 2023-04-14 | 阿里巴巴集团控股有限公司 | 动态图像生成方法和处理设备 |
CN111783776A (zh) * | 2020-06-30 | 2020-10-16 | 平安国际智慧城市科技股份有限公司 | 基于真实板材的文字识别方法、装置和计算机设备 |
CN111783776B (zh) * | 2020-06-30 | 2022-09-09 | 平安国际智慧城市科技股份有限公司 | 基于真实板材的文字识别方法、装置和计算机设备 |
CN112927176A (zh) * | 2021-01-29 | 2021-06-08 | 北京百度网讯科技有限公司 | 图像合成方法、装置、电子设备和计算机可读存储介质 |
CN112927176B (zh) * | 2021-01-29 | 2024-03-12 | 北京百度网讯科技有限公司 | 图像合成方法、装置、电子设备和计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP5258549B2 (ja) | 2013-08-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5258549B2 (ja) | 合成画像表示システム、合成画像表示方法、及び合成画像表示プログラム | |
JP4032776B2 (ja) | 複合現実感表示装置及び方法、記憶媒体、並びにコンピュータ・プログラム | |
CN105187122B (zh) | 信息提供***、信息提供方法以及记录介质 | |
JP4991154B2 (ja) | 画像表示装置、画像表示方法及びコマンド入力方法 | |
CN103218632B (zh) | 用于现场验证物品的方法、***和标签 | |
CN102375968B (zh) | 具有用于标记读取终端的集成电路结构的图像引擎 | |
US9547898B2 (en) | Automated cytology/histology viewers and related methods | |
CN105144198B (zh) | 用于便笺识别的***和方法 | |
CN103632151B (zh) | 可训练的手持式光学字符识别***与方法 | |
US11610299B2 (en) | Method and system for optical product authentication | |
ES2929842T3 (es) | Transferencia térmica de imagen compuesta con marca legible mediante escaneo | |
CN103649775B (zh) | 用于评估识别标记的***、识别标记及其用途 | |
US20070007349A1 (en) | Information reader, object, information processing apparatus, information communicating system, information reading method, and program | |
JP2007193387A (ja) | セキュリティ情報媒体読取装置 | |
CN105264544A (zh) | 用于管理便条的***和方法 | |
WO2011046127A1 (ja) | データ収集システム、携帯端末、シール及びデータ収集方法 | |
CN110494899B (zh) | 发光安全特征及用于对其进行检测的方法和设备 | |
WO2014031107A1 (en) | Orthogonal encoding for tags | |
CN207780718U (zh) | 视觉交互装置 | |
JP2003323239A (ja) | 情報処理装置及び情報処理方法、記憶媒体、並びにコンピュータ・プログラム | |
JP5258548B2 (ja) | 合成画像表示システム、合成画像表示方法、及び合成画像表示プログラム | |
CN108460444A (zh) | 一种反向热致变色叠印双层显示二维码及其制备方法 | |
CN110326279A (zh) | 电子水印嵌入装置、电子水印检测装置、电子水印嵌入方法、电子水印检测方法以及程序 | |
CN206113954U (zh) | 一种用于确定机器人位置的路标和设备 | |
Truccolo et al. | Forensic applications of rare earths: Anticounterfeiting materials and latent fingerprint developers |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20111201 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20111201 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120201 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20120201 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120927 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121002 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121102 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130409 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130423 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160502 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |