JP2020178237A - 映像処理装置、映像処理方法及び映像処理プログラム - Google Patents
映像処理装置、映像処理方法及び映像処理プログラム Download PDFInfo
- Publication number
- JP2020178237A JP2020178237A JP2019079285A JP2019079285A JP2020178237A JP 2020178237 A JP2020178237 A JP 2020178237A JP 2019079285 A JP2019079285 A JP 2019079285A JP 2019079285 A JP2019079285 A JP 2019079285A JP 2020178237 A JP2020178237 A JP 2020178237A
- Authority
- JP
- Japan
- Prior art keywords
- area
- frame data
- prohibited area
- data
- video processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims description 78
- 238000003672 processing method Methods 0.000 title claims description 7
- 238000013459 approach Methods 0.000 claims description 4
- 238000001514 detection method Methods 0.000 description 19
- 230000015572 biosynthetic process Effects 0.000 description 12
- 238000003786 synthesis reaction Methods 0.000 description 12
- 238000000034 method Methods 0.000 description 9
- 238000012544 monitoring process Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/16—Image acquisition using multiple overlapping images; Image stitching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/66—Transforming electric information into light information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Image Processing (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Editing Of Facsimile Originals (AREA)
- Studio Devices (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
図2を参照し、本実施形態の映像処理装置1の構成について説明する。映像処理装置1は、図1の合成処理部110に相当する。
次に、図3を参照して、映像処理装置1による映像処理方法を説明する。映像処理装置1は、カメラC1,C2のそれぞれから入力した映像データにおいて、同時に撮影された各フレームデータについて、以下のステップS1〜S7の処理を繰り返す。
次に、図7を参照して、禁止領域の設定処理について説明する。
10…記憶装置
11…設定データ
12…フレーム情報データ
13…禁止領域データ
14…シームデータ
15…連結フレームデータ
20…処理装置
21…設定取得手段
22…フレーム取得手段
23…オブジェクト検出手段
24…禁止領域設定手段
25…シーム算出手段
26…連結フレーム出力手段
30…入出力インタフェース
100…合成処理サーバ
110…合成処理部
120…エンコード処理部
130…物体検出・トラッキング処理部
200…物体情報統合サーバ
300…デコードサーバ
400…統合物体情報受信サーバ
Claims (5)
- 撮影領域の一部を重ねて撮影された複数の映像データをつなぐ映像処理装置であって、
前記複数の映像データから、同時に撮影された複数のフレームデータを取得するフレーム取得手段と、
互いに隣接する前記フレームデータが重ねられた重複領域につなぎ目を通さない禁止領域を設定する禁止領域設定手段と、
前記禁止領域を通らないように前記つなぎ目を算出するシーム算出手段と、
前記つなぎ目に従って前記複数のフレームデータを連結して連結フレームデータを出力する連結フレーム出力手段と、を備え、
前記禁止領域設定手段は、前記フレームデータから検出されたオブジェクトが前記重複領域に進入した際、前記オブジェクトの位置および移動方向に基づいて前記禁止領域を設定する
ことを特徴とする映像処理装置。 - 前記禁止領域設定手段は、前記オブジェクトの位置から前記オブジェクトの進入方向側の前記重複領域の辺までの間の領域または前記オブジェクトの位置から前記オブジェクトの進行方向側の前記重複領域の辺までの間の領域を禁止領域として設定する
ことを特徴とする請求項1に記載の映像処理装置。 - 撮影領域の一部を重ねて撮影された複数の映像データをつなぐ映像処理装置による映像処理方法であって、
前記複数の映像データから、同時に撮影された複数のフレームデータを取得するステップと、
互いに隣接する前記フレームデータが重ねられた重複領域につなぎ目を通さない禁止領域を設定するステップと、
前記禁止領域を通らないように前記つなぎ目を算出するステップと、
前記つなぎ目に従って前記複数のフレームデータを連結して連結フレームデータを出力するステップと、を有し、
前記禁止領域を設定するステップでは、前記フレームデータから検出されたオブジェクトが前記重複領域に進入した際、前記オブジェクトの位置および移動方向に基づいて前記禁止領域を設定する
ことを特徴とする映像処理方法。 - 前記禁止領域を設定するステップでは、前記オブジェクトの位置から前記オブジェクトの進入方向側の前記重複領域の辺までの間の領域または前記オブジェクトの位置から前記オブジェクトの進行方向側の前記重複領域の辺までの間の領域を禁止領域として設定する
ことを特徴とする請求項3に記載の映像処理方法。 - 請求項1または2に記載の映像処理装置の各手段としてコンピュータを動作させることを特徴とする映像処理プログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019079285A JP7231825B2 (ja) | 2019-04-18 | 2019-04-18 | 映像処理装置、映像処理方法及び映像処理プログラム |
PCT/JP2020/015299 WO2020213430A1 (ja) | 2019-04-18 | 2020-04-03 | 映像処理装置、映像処理方法及び映像処理プログラム |
US17/599,065 US20220199120A1 (en) | 2019-04-18 | 2020-04-03 | Image processing device, image processing method, and image processing program |
CN202080029286.XA CN113711580A (zh) | 2019-04-18 | 2020-04-03 | 影像处理装置、影像处理方法和影像处理程序 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019079285A JP7231825B2 (ja) | 2019-04-18 | 2019-04-18 | 映像処理装置、映像処理方法及び映像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020178237A true JP2020178237A (ja) | 2020-10-29 |
JP7231825B2 JP7231825B2 (ja) | 2023-03-02 |
Family
ID=72837758
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019079285A Active JP7231825B2 (ja) | 2019-04-18 | 2019-04-18 | 映像処理装置、映像処理方法及び映像処理プログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20220199120A1 (ja) |
JP (1) | JP7231825B2 (ja) |
CN (1) | CN113711580A (ja) |
WO (1) | WO2020213430A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3889593A1 (en) | 2020-03-31 | 2021-10-06 | Yokogawa Electric Corporation | Reaction analysis device, reaction analysis system, and reaction analysis method |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112200727B (zh) * | 2020-11-06 | 2023-11-21 | 星宸科技股份有限公司 | 图像缝合装置、图像处理芯片、及图像缝合方法 |
JP7199613B2 (ja) * | 2021-01-25 | 2023-01-05 | 三菱電機株式会社 | 画像合成装置、画像合成方法、及びプログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170140791A1 (en) * | 2015-11-12 | 2017-05-18 | Intel Corporation | Multiple camera video image stitching by placing seams for scene objects |
JP2017102785A (ja) * | 2015-12-03 | 2017-06-08 | 日本電信電話株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2017103672A (ja) * | 2015-12-03 | 2017-06-08 | 日本電信電話株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
US20180095583A1 (en) * | 2016-09-30 | 2018-04-05 | Lg Display Co., Ltd. | Display device with built-in touch screen and driving method thereof |
JP2019036906A (ja) * | 2017-08-21 | 2019-03-07 | 日本電信電話株式会社 | 映像処理装置、映像処理方法及び映像処理プログラム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4899367B2 (ja) * | 2005-07-27 | 2012-03-21 | 日産自動車株式会社 | 俯瞰画像表示システム及び俯瞰画像の表示方法 |
WO2016165016A1 (en) * | 2015-04-14 | 2016-10-20 | Magor Communications Corporation | View synthesis-panorama |
US9911213B2 (en) * | 2015-12-18 | 2018-03-06 | Ricoh Co., Ltd. | Panoramic image stitching using objects |
KR102558473B1 (ko) * | 2016-09-30 | 2023-07-25 | 삼성전자주식회사 | 이미지를 표시하기 위한 방법 및 그 전자 장치 |
JP6715217B2 (ja) * | 2017-06-26 | 2020-07-01 | 日本電信電話株式会社 | 映像処理装置、映像処理方法および映像処理プログラム |
US10244164B1 (en) * | 2017-09-11 | 2019-03-26 | Qualcomm Incorporated | Systems and methods for image stitching |
US10917565B1 (en) * | 2019-03-08 | 2021-02-09 | Gopro, Inc. | Image capture device with a spherical capture mode and a non-spherical capture mode |
US11341614B1 (en) * | 2019-09-24 | 2022-05-24 | Ambarella International Lp | Emirror adaptable stitching |
-
2019
- 2019-04-18 JP JP2019079285A patent/JP7231825B2/ja active Active
-
2020
- 2020-04-03 US US17/599,065 patent/US20220199120A1/en active Pending
- 2020-04-03 CN CN202080029286.XA patent/CN113711580A/zh active Pending
- 2020-04-03 WO PCT/JP2020/015299 patent/WO2020213430A1/ja active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170140791A1 (en) * | 2015-11-12 | 2017-05-18 | Intel Corporation | Multiple camera video image stitching by placing seams for scene objects |
JP2017102785A (ja) * | 2015-12-03 | 2017-06-08 | 日本電信電話株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2017103672A (ja) * | 2015-12-03 | 2017-06-08 | 日本電信電話株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
US20180095583A1 (en) * | 2016-09-30 | 2018-04-05 | Lg Display Co., Ltd. | Display device with built-in touch screen and driving method thereof |
JP2019036906A (ja) * | 2017-08-21 | 2019-03-07 | 日本電信電話株式会社 | 映像処理装置、映像処理方法及び映像処理プログラム |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3889593A1 (en) | 2020-03-31 | 2021-10-06 | Yokogawa Electric Corporation | Reaction analysis device, reaction analysis system, and reaction analysis method |
Also Published As
Publication number | Publication date |
---|---|
US20220199120A1 (en) | 2022-06-23 |
JP7231825B2 (ja) | 2023-03-02 |
CN113711580A (zh) | 2021-11-26 |
WO2020213430A1 (ja) | 2020-10-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020213430A1 (ja) | 映像処理装置、映像処理方法及び映像処理プログラム | |
US9774896B2 (en) | Network synchronized camera settings | |
US20180091704A1 (en) | Video synchronization apparatus, and video synchronization method | |
US9762816B2 (en) | Video processing apparatus, camera apparatus, video processing method, and program | |
RU2019131371A (ru) | Система устройства просмотра смешанной реальности и способ для него | |
JP7080103B2 (ja) | 撮像装置、その制御方法、および、プログラム | |
KR20180125878A (ko) | 비디오 카메라 및 클라이언트 디바이스를 포함하는 시스템 및 그에 의해 수행되는 방법 | |
KR101769118B1 (ko) | 텔레프레젠스 영상 합성 장치, 텔레프레젠스 영상 합성 시스템 및 원격지 촬영 장치 | |
WO2020218023A1 (ja) | 物体情報処理装置、物体情報処理方法及び物体情報処理プログラム | |
CN107172413A (zh) | 现实场景视频显示方法和*** | |
JP2013115527A (ja) | テレビ会議システム及びテレビ会議方法 | |
JP6004978B2 (ja) | 被写体画像抽出装置および被写体画像抽出・合成装置 | |
JP2011151773A (ja) | 映像処理装置及び制御方法 | |
JP2019036906A (ja) | 映像処理装置、映像処理方法及び映像処理プログラム | |
JP2005092363A (ja) | 画像生成装置および画像生成プログラム | |
US11076224B2 (en) | Processing of data of a video sequence in order to zoom to a speaker detected in the sequence | |
JPWO2019038885A1 (ja) | 情報処理装置および画像出力方法 | |
JP4423416B2 (ja) | 映像合成処理システム | |
JP2001148806A (ja) | 映像合成演算処理装置、その方法及びシステム | |
KR102305172B1 (ko) | 방송 컨텐츠와 연계된 부가 컨텐츠 출력 방법 | |
JP2019036902A (ja) | 映像処理装置、映像処理方法および映像処理プログラム | |
JP2019096926A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP5131980B2 (ja) | 画像復号・表示装置 | |
JP5004680B2 (ja) | 画像処理装置、画像処理方法、テレビ会議システム、テレビ会議方法、プログラムおよび記録媒体 | |
WO2021192096A1 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210715 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220830 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220930 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230117 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230130 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7231825 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |