JP5743859B2 - 画像処理装置、方法、及び画像表示装置 - Google Patents
画像処理装置、方法、及び画像表示装置 Download PDFInfo
- Publication number
- JP5743859B2 JP5743859B2 JP2011249164A JP2011249164A JP5743859B2 JP 5743859 B2 JP5743859 B2 JP 5743859B2 JP 2011249164 A JP2011249164 A JP 2011249164A JP 2011249164 A JP2011249164 A JP 2011249164A JP 5743859 B2 JP5743859 B2 JP 5743859B2
- Authority
- JP
- Japan
- Prior art keywords
- unit
- size
- dimensional position
- search
- provisional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims description 99
- 238000000034 method Methods 0.000 title description 107
- 238000004364 calculation method Methods 0.000 claims description 92
- 238000011156 evaluation Methods 0.000 claims description 21
- 238000003672 processing method Methods 0.000 claims 1
- 238000003384 imaging method Methods 0.000 description 76
- 238000010586 diagram Methods 0.000 description 22
- 230000008569 process Effects 0.000 description 18
- 230000014509 gene expression Effects 0.000 description 15
- 239000011159 matrix material Substances 0.000 description 10
- 239000000284 extract Substances 0.000 description 6
- 239000002245 particle Substances 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000005295 random walk Methods 0.000 description 4
- 238000007476 Maximum Likelihood Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000011295 pitch Substances 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 238000003909 pattern recognition Methods 0.000 description 2
- NAWXUBYGYWOOIX-SFHVURJKSA-N (2s)-2-[[4-[2-(2,4-diaminoquinazolin-6-yl)ethyl]benzoyl]amino]-4-methylidenepentanedioic acid Chemical compound C1=CC2=NC(N)=NC(N)=C2C=C1CCC1=CC=C(C(=O)N[C@@H](CC(=C)C(O)=O)C(O)=O)C=C1 NAWXUBYGYWOOIX-SFHVURJKSA-N 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000036544 posture Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000017105 transposition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/285—Analysis of motion using a sequence of stereo image pairs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/167—Detection; Localisation; Normalisation using comparisons between temporally consecutive images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/12—Acquisition of 3D measurements of objects
- G06V2201/121—Acquisition of 3D measurements of objects using special illumination
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Image Analysis (AREA)
- Controls And Circuits For Display Device (AREA)
Description
本実施の形態の画像処理装置は、視聴者が裸眼で立体画像を観察可能なTV(テレビ)、PC(Personal Computer)、スマートフォン、デジタルフォトフレーム等の画像表示装置に用いられ得る。立体画像とは、互いに視差を有する複数の視差画像を含む画像である。なお、実施の形態で述べる画像とは、静止画又は動画のいずれであってもよい。
本実施の形態では、本実施の形態では、推定部36で前に算出した対象物の三次元位置及び対象物のサイズを、次の算出時の仮三次元位置及び仮サイズとして用いる。
本実施の形態では、画像処理装置12または画像処理装置12Aで算出した、対象物の三次元位置及びサイズに基づいて、表示部21の視域を調整する形態を説明する。
12、12A 画像処理装置
14 表示装置
28 決定部
29 制御部
21 表示部
30 第1取得部
32 第2取得部
34、35 第1設定部
36、37 推定部
38 第2設定部
39 切替部
40 第1算出部
42 第2算出部
44 第3算出部
Claims (10)
- 対象物が複数の位置から撮像された複数の撮像画像を取得する第1取得部と、
前記対象物の仮三次元位置と、前記対象物の仮サイズとを取得する第2取得部と、
前記仮三次元位置の近傍に少なくとも1つの探索候補点を設定する第1設定部と、
前記探索候補点を前記撮像画像に射影した射影位置毎に、前記対象物を探索するための探索窓であって、前記探索候補点の位置と前記仮サイズとに基づくサイズの前記探索窓を設定する第2設定部と、
前記探索窓内において、前記対象物が含まれるかどうかを示す評価値を算出する第1算出部と、
前記評価値に基づいて、前記対象物の三次元位置を算出する第2算出部と、
を備えた画像処理装置。 - 前記第2設定部は、前記仮サイズに基づいて、前記対象物の1または複数の仮サイズを新たに算出し、新たに算出した該仮サイズと前記射影位置とから、前記射影位置毎に前記探索窓サイズを設定する、請求項1に記載の画像処理装置。
- 前記第1算出部は、前記撮像画像上の前記探索窓サイズの探索窓内の画素値に基づいて、前記探索窓内に前記対象物が含まれているか否かを示す第1尤度を前記評価値として算出する、請求項2に記載の画像処理装置。
- 前記第1設定部は、前記第2算出部によって算出された前記三次元位置を前記仮三次元位置として、前記探索候補点を設定する、請求項3に記載の画像処理装置。
- 前記第1算出部は、前記対象物の予め定めた姿勢に基づいて前記評価値を算出する請求項1に記載の画像処理装置。
- 前記第1設定部は、前記対象物の予め定めた運動モデルに応じて前記探索候補点を設定する、請求項1に記載の画像処理装置。
- 前記評価値に基づいて、前記射影位置に対応する前記探索候補点に前記対象物が存在する度合を示す第2尤度を算出する第3算出部を更に備え、
前記第2算出部は、前記第2尤度に基づいて前記三次元位置を算出する、
請求項1に記載の画像処理装置。 - 表示部に表示される立体画像を視聴者が観察可能な視域を前記三次元位置に決定する決定部と、
前記視域が設定されるよう、前記表示部を制御する制御部と、
備えた請求項1に記載の画像処理装置。 - 対象物が複数の位置から撮像された複数の撮像画像を取得し、
前記対象物の仮三次元位置と、前記対象物の仮サイズを取得し、
実空間における前記仮三次元位置の近傍に少なくとも1つの探索候補点を設定し、
前記探索候補点を前記撮像画像に射影した射影位置毎に、前記対象物を探索するための探索窓であって、前記探索候補点の位置と前記仮サイズとに基づくサイズの前記探索窓を設定し、
前記探索窓内において、前記対象物が含まれるかどうかを示す評価値を算出し、
前記評価値に基づいて前記対象物の三次元位置を算出する、
画像処理方法。 - 対象物が複数の位置から撮像された複数の撮像画像を取得する第1取得部と、
前記対象物の仮三次元位置と、前記対象物の仮サイズを取得する第2取得部と、
実空間における前記仮三次元位置の近傍に少なくとも1つの探索候補点を設定する第1設定部と、
前記探索候補点を前記撮像画像に射影した射影位置毎に、前記対象物を探索するための探索窓であって、前記探索候補点の位置と前記仮サイズとに基づくサイズの前記探索窓を設定する第2設定部と、
前記探索窓内において、前記対象物が含まれるかどうかを示す評価値を算出する第1算出部と、
前記評価値に基づいて前記対象物の三次元位置を算出する第2算出部と、
立体画像を表示可能な表示部と、
前記立体画像を視聴者が観察可能な視域を前記三次元位置に決定する決定部と、
前記視域が設定されるよう、前記表示部を制御する制御部と、
備えた画像表示装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011249164A JP5743859B2 (ja) | 2011-11-14 | 2011-11-14 | 画像処理装置、方法、及び画像表示装置 |
US13/360,062 US9042637B2 (en) | 2011-11-14 | 2012-01-27 | Image processing device, method of processing image, and image display apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011249164A JP5743859B2 (ja) | 2011-11-14 | 2011-11-14 | 画像処理装置、方法、及び画像表示装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013105343A JP2013105343A (ja) | 2013-05-30 |
JP5743859B2 true JP5743859B2 (ja) | 2015-07-01 |
Family
ID=48280696
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011249164A Expired - Fee Related JP5743859B2 (ja) | 2011-11-14 | 2011-11-14 | 画像処理装置、方法、及び画像表示装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9042637B2 (ja) |
JP (1) | JP5743859B2 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5370542B1 (ja) * | 2012-06-28 | 2013-12-18 | カシオ計算機株式会社 | 画像処理装置、撮像装置、画像処理方法及びプログラム |
KR101970197B1 (ko) * | 2012-10-29 | 2019-04-18 | 에스케이 텔레콤주식회사 | 복수의 카메라 제어 방법과 그를 위한 카메라 제어 장치 |
JP6399869B2 (ja) * | 2014-09-09 | 2018-10-03 | キヤノン株式会社 | 被写体追尾装置、撮像装置、被写体追尾方法及びプログラム |
FR3030974B1 (fr) * | 2014-12-19 | 2018-03-23 | Stereolabs | Systeme pour la prise de vue en trois dimensions au cours d'un deplacement |
US11972586B2 (en) | 2015-02-13 | 2024-04-30 | Carnegie Mellon University | Agile depth sensing using triangulation light curtains |
US11747135B2 (en) | 2015-02-13 | 2023-09-05 | Carnegie Mellon University | Energy optimized imaging system with synchronized dynamic control of directable beam light source and reconfigurably masked photo-sensor |
JP6699176B2 (ja) * | 2016-01-06 | 2020-05-27 | カシオ計算機株式会社 | 描画装置、その描画制御方法及び描画制御プログラム |
CN110675010A (zh) * | 2018-06-15 | 2020-01-10 | 光宝电子(广州)有限公司 | 普查***与普查方法 |
WO2020057365A1 (en) * | 2018-09-18 | 2020-03-26 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Method, system, and computer-readable medium for generating spoofed structured light illuminated face |
CN115136227B (zh) * | 2020-11-30 | 2023-11-17 | 京东方科技集团股份有限公司 | 显示装置及其显示方法 |
CN113327244A (zh) * | 2021-06-25 | 2021-08-31 | 南京爱奇艺智能科技有限公司 | 一种基于计算机视觉的手柄控制器led灯定位方法和*** |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7831087B2 (en) * | 2003-10-31 | 2010-11-09 | Hewlett-Packard Development Company, L.P. | Method for visual-based recognition of an object |
US20050207486A1 (en) * | 2004-03-18 | 2005-09-22 | Sony Corporation | Three dimensional acquisition and visualization system for personal electronic devices |
JP2008026974A (ja) * | 2006-07-18 | 2008-02-07 | Mitsubishi Electric Corp | 人物追跡装置 |
US8611604B2 (en) * | 2009-06-03 | 2013-12-17 | Chubu University Educational Foundation | Object detection device |
JP2011090465A (ja) * | 2009-10-21 | 2011-05-06 | Fujitsu Ltd | 物***置推定装置および物***置推定プログラム |
KR20120057033A (ko) * | 2010-11-26 | 2012-06-05 | 한국전자통신연구원 | Iptv 제어를 위한 원거리 시선 추적 장치 및 방법 |
-
2011
- 2011-11-14 JP JP2011249164A patent/JP5743859B2/ja not_active Expired - Fee Related
-
2012
- 2012-01-27 US US13/360,062 patent/US9042637B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20130121560A1 (en) | 2013-05-16 |
JP2013105343A (ja) | 2013-05-30 |
US9042637B2 (en) | 2015-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5743859B2 (ja) | 画像処理装置、方法、及び画像表示装置 | |
EP2745504B1 (en) | Image projector, image processing method, computer program and recording medium | |
EP3182371B1 (en) | Threshold determination in for example a type ransac algorithm | |
KR101766603B1 (ko) | 화상 처리 장치, 화상 처리 시스템, 화상 처리 방법, 및 컴퓨터 프로그램 | |
JP2006252473A (ja) | 障害物検出装置、キャリブレーション装置、キャリブレーション方法およびキャリブレーションプログラム | |
EP2597597A2 (en) | Apparatus and method for calculating three dimensional (3D) positions of feature points | |
JP5672112B2 (ja) | ステレオ画像較正方法、ステレオ画像較正装置及びステレオ画像較正用コンピュータプログラム | |
JP2016029564A (ja) | 対象検出方法及び対象検出装置 | |
CN102510734A (zh) | 瞳孔检测装置及瞳孔检测方法 | |
JP5956248B2 (ja) | 画像監視装置 | |
US20190079158A1 (en) | 4d camera tracking and optical stabilization | |
US8599278B2 (en) | Method for estimating a plane in a range image and range image camera | |
WO2022217988A1 (zh) | 传感器配置方案确定方法、装置、计算机设备、存储介质及程序 | |
JP4193342B2 (ja) | 3次元データ生成装置 | |
US9344712B2 (en) | Image processing device, image processing method, computer program product, and image display device | |
JP2017192008A (ja) | オブジェクト検出装置 | |
KR20200112678A (ko) | 관찰자를 추적할 수 있는 공중 3차원 디스플레이 장치 및 방법 | |
TWI697846B (zh) | 物體辨識方法及其裝置 | |
JP5448952B2 (ja) | 同一人判定装置、同一人判定方法および同一人判定プログラム | |
JP5727969B2 (ja) | 位置推定装置、方法、及びプログラム | |
US20140362194A1 (en) | Image processing device, image processing method, and stereoscopic image display device | |
JP2020201823A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP5728399B2 (ja) | 計測装置、方法及びプログラム | |
JP2016065785A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2014102668A (ja) | 表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140130 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140926 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141007 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150407 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150428 |
|
LAPS | Cancellation because of no payment of annual fees |