JP5500729B2 - 2d映像メディア標準に基づいて3d立体映像ファイルを生成及び再生するシステム及び方法 - Google Patents
2d映像メディア標準に基づいて3d立体映像ファイルを生成及び再生するシステム及び方法 Download PDFInfo
- Publication number
- JP5500729B2 JP5500729B2 JP2010512070A JP2010512070A JP5500729B2 JP 5500729 B2 JP5500729 B2 JP 5500729B2 JP 2010512070 A JP2010512070 A JP 2010512070A JP 2010512070 A JP2010512070 A JP 2010512070A JP 5500729 B2 JP5500729 B2 JP 5500729B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- video data
- data
- information
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/139—Format conversion, e.g. of frame-rate or size
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Controls And Circuits For Display Device (AREA)
- Television Signal Processing For Recording (AREA)
Description
310 第1のカメラ
312 第2のカメラ
320 映像信号処理部
330 格納部
340 符号化部
350 ファイル生成部
Claims (11)
- 2D(2次元)映像メディア標準に基づいて3D(3次元)映像ファイルを生成及び再生するためのシステムであって、
3D映像の生成に使用されるように、第1の映像データ及び前記第1の映像データと同期化される第2の映像データを有するデータ領域と、前記第1の映像データの情報を含むヘッダー領域と、前記第2の映像データの情報を含むメタデータ領域とを含む3D映像ファイルを生成する3D映像ファイル生成装置と、
前記第1の映像データ及び前記第2の映像データを用いて3D映像を合成及び再生するために、前記3D映像ファイルが入力される場合、前記第1の映像データの情報及び前記第2の映像データの情報を分析する3D映像ファイル再生装置と、を具備し、
前記データ領域は、前記第1の映像データを含む第1の映像トラックと、前記第2の映像データを含む第2の映像トラックとをさらに含み、
前記第1の映像データと前記第2の映像データとは、所定の被写体に対して第1のカメラと第2のカメラとを用いて左視点の映像と右視点の映像を各々撮影してユーザーが立体感を有するように形成された映像データであり、
前記3D映像ファイル再生装置は、3D映像を再生する場合に前記ヘッダー領域に格納された情報と前記メタデータ領域に格納された情報とを参照し、2D映像を再生する場合に前記ヘッダー領域に格納された情報のみを参照し前記メタデータ領域に格納された情報は参照しない
ことを特徴とするシステム。 - 前記第1の映像データの情報又は前記第2の映像データの情報は、前記第1の映像データ又は前記第2の映像データのフレーム数及び各フレームのサイズを含む
ことを特徴とする請求項1に記載のシステム。 - 2D(2次元)映像メディア標準に基づいて3D(3次元)映像ファイルを生成及び再生するためのシステムであって、
3D映像の生成に使用されるように、第1の映像データ及び前記第1の映像データと同期化される第2の映像データを有するデータ領域と、前記第1の映像データの情報を含むヘッダー領域と、前記第2の映像データの情報を含むメタデータ領域とを含む3D映像ファイルを生成する3D映像ファイル生成装置と、
前記第1の映像データ及び前記第2の映像データを用いて3D映像を合成及び再生するために、前記3D映像ファイルが入力される場合、前記第1の映像データの情報及び前記第2の映像データの情報を分析する3D映像ファイル再生装置と、を具備し、
前記データ領域は、前記第1の映像データが最初に格納された後に、前記第2の映像データが格納される映像トラックをさらに含み、
前記第1の映像データと前記第2の映像データとは、所定の被写体に対して第1のカメラと第2のカメラとを用いて左視点の映像と右視点の映像を各々撮影してユーザーが立体感を有するように形成された映像データであり、
前記3D映像ファイル再生装置は、3D映像を再生する場合に前記ヘッダー領域に格納された情報と前記メタデータ領域に格納された情報とを参照し、2D映像を再生する場合に前記ヘッダー領域に格納された情報のみを参照し前記メタデータ領域に格納された情報は参照しない
ことを特徴とするシステム。 - 前記第1の映像データの情報又は前記第2の映像データの情報は、前記第1の映像データ又は前記第2の映像データのフレーム数、各フレームサイズ、及び開始アドレスを含む ことを特徴とする請求項3に記載のシステム。
- 2D(2次元)映像メディア標準に基づいて3D(3次元)映像ファイルを生成及び再生するためのシステムであって、
3D映像の生成に使用されるように、第1の映像データ及び前記第1の映像データと同期化される第2の映像データを有するデータ領域と、前記第1の映像データの情報を含むヘッダー領域と、前記第2の映像データの情報を含むメタデータ領域とを含む3D映像ファイルを生成する3D映像ファイル生成装置と、
前記第1の映像データ及び前記第2の映像データを用いて3D映像を合成及び再生するために、前記3D映像ファイルが入力される場合、前記第1の映像データの情報及び前記第2の映像データの情報を分析する3D映像ファイル再生装置と、を具備し、
前記データ領域は、フレームのモジュールを有し、かつ前記第1の映像データ及び前記第2の映像データが交互に格納される映像トラックを含み、
前記第1の映像データと前記第2の映像データとは、所定の被写体に対して第1のカメラと第2のカメラとを用いて左視点の映像と右視点の映像を各々撮影してユーザーが立体感を有するように形成された映像データであり、
前記3D映像ファイル再生装置は、3D映像を再生する場合に前記ヘッダー領域に格納された情報と前記メタデータ領域に格納された情報とを参照し、2D映像を再生する場合に前記ヘッダー領域に格納された情報のみを参照し前記メタデータ領域に格納された情報は参照しない
ことを特徴とするシステム。 - 前記第1の映像データの情報又は前記第2の映像データの情報は、前記第1の映像データ又は前記第2の映像データのフレーム数、各フレームのサイズ、開始アドレス、及び前記交互に格納されるフレームに関するオフセット情報を含む
ことを特徴とする請求項5に記載のシステム。 - 前記3D映像ファイル生成装置は、
前記第1の映像データを出力するために、それぞれの被写体に対して左視点の映像を撮影する第1のカメラと、
前記第2の映像データを出力するために、それぞれの前記被写体に対して右視点を撮影する第2のカメラと、
前記第1のカメラ及び前記第2のカメラによって各々出力される前記第1の映像データ及び前記第2の映像データに対する前処理を遂行する映像信号処理部と、
前記前処理された第1の映像データ及び第2の映像データを格納する格納部と、
前記格納された第1の映像データ及び第2の映像データを符号化する符号化部と、
前記符号化された第1の映像データ及び第2の映像データを用いて、3D映像ファイルを生成する生成部と、をさらに含む
ことを特徴とする請求項1に記載のシステム。 - 前記3D映像ファイル再生装置は、
前記第1の映像データ及び前記第2の映像データを抽出するために、前記第1の映像データの情報及び前記第2の映像データの情報を分析するファイル分析部と、
前記抽出された第1の映像データ及び第2の映像データを格納する格納部と、
前記格納された第1の映像データ及び第2の映像データを復号化する復号化部と、
前記復号化された第1の映像データ及び第2の映像データを用いて、3D映像を合成及び再生する再生部と、
前記合成及び再生された3D映像を表示する表示部と、を含む
ことを特徴とする請求項1に記載のシステム。 - 2D(2次元)映像メディア標準に基づいて、3D(3次元)映像ファイルを生成及び再生するシステムであって、
ISO(国際標準化機構)14496−12による2D映像ファイルフォーマットのMdat領域及びMoov領域と、立体映像を生成するために使用される映像データの情報を含むメタデータ領域とから構成される3D映像ファイルフォーマットによって、3D映像ファイルが生成及び再生され、
3D映像を再生する場合に前記Moov領域に格納された情報と前記メタデータ領域に格納された情報とを参照し、2D映像を再生する場合に前記Moov領域に格納された情報のみを参照し前記メタデータ領域に格納された情報は参照しない
ことを特徴とするシステム。 - 2D(2次元)映像メディア標準に基づいて、3D(3次元)映像ファイルを生成及び再生する方法であって、
第1の映像データを出力するために被写体に対して左視点の映像を撮影し、第2の映像データを出力するために被写体に対して右視点の映像を撮影するステップと、
前記第1の映像データ及び前記第2の映像データに対する前処理を遂行するステップと、
前記前処理された第1の映像データ及び第2の映像データを格納するステップと、
前記格納された第1の映像データ及び第2の映像データを符号化するステップと、
前記符号化された第1の映像データ及び第2の映像データを有するデータ領域、前記第1の映像データの情報を含むヘッダー領域、及び前記第2の映像データの情報を含むメタデータ領域を有する3D映像ファイルを生成するステップと、を具備し、
前記データ領域は、前記第1の映像データを含む第1の映像トラックと、前記第2の映像データを含む第2の映像トラックとをさらに含み、
前記第1の映像データと前記第2の映像データとは、所定の被写体に対して第1のカメラと第2のカメラとを用いて左視点の映像と右視点の映像を各々撮影してユーザーが立体感を有するように形成された映像データであり、
3D映像を再生する場合に前記ヘッダー領域に格納された情報と前記メタデータ領域に格納された情報とを参照し、2D映像を再生する場合に前記ヘッダー領域に格納された情報のみを参照し前記メタデータ領域に格納された情報は参照しない
ことを特徴とする方法。 - 前記第1の映像データ及び前記第2の映像データを抽出するために、前記第1の映像データの情報及び前記第2の映像データの情報を分析するステップと、
前記抽出された第1の映像データ及び第2の映像データを格納するステップと、
前記格納された第1の映像データ及び第2の映像データを復号化するステップと、
前記復号化された第1の映像データ及び第2の映像データを立体映像として合成及び再生するステップと、
前記合成及び再生された立体映像を表示するステップと、をさらに具備する
ことを特徴とする請求項10に記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2007-0056475 | 2007-06-11 | ||
KR1020070056475A KR101388265B1 (ko) | 2007-06-11 | 2007-06-11 | 2d 영상 미디어 표준을 기반으로 3d 입체영상 파일을생성 및 재생하기 위한 시스템 및 방법 |
PCT/KR2008/003253 WO2008153312A2 (en) | 2007-06-11 | 2008-06-11 | System and method for generating and regenerating 3d image files based on 2d image media standards |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013176714A Division JP2014027665A (ja) | 2007-06-11 | 2013-08-28 | 2d映像メディア標準に基づいて3d立体映像ファイルを生成及び再生するシステム及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010529803A JP2010529803A (ja) | 2010-08-26 |
JP5500729B2 true JP5500729B2 (ja) | 2014-05-21 |
Family
ID=40095953
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010512070A Expired - Fee Related JP5500729B2 (ja) | 2007-06-11 | 2008-06-11 | 2d映像メディア標準に基づいて3d立体映像ファイルを生成及び再生するシステム及び方法 |
JP2013176714A Ceased JP2014027665A (ja) | 2007-06-11 | 2013-08-28 | 2d映像メディア標準に基づいて3d立体映像ファイルを生成及び再生するシステム及び方法 |
JP2015245156A Active JP6320366B2 (ja) | 2007-06-11 | 2015-12-16 | 2d映像メディア標準に基づいて3d立体映像ファイルを生成及び再生するシステム及び方法 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013176714A Ceased JP2014027665A (ja) | 2007-06-11 | 2013-08-28 | 2d映像メディア標準に基づいて3d立体映像ファイルを生成及び再生するシステム及び方法 |
JP2015245156A Active JP6320366B2 (ja) | 2007-06-11 | 2015-12-16 | 2d映像メディア標準に基づいて3d立体映像ファイルを生成及び再生するシステム及び方法 |
Country Status (5)
Country | Link |
---|---|
US (2) | US8457386B2 (ja) |
EP (1) | EP2153667B1 (ja) |
JP (3) | JP5500729B2 (ja) |
KR (1) | KR101388265B1 (ja) |
WO (1) | WO2008153312A2 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101387212B1 (ko) * | 2007-06-12 | 2014-04-21 | 삼성전자주식회사 | 2d 영상 미디어 표준을 기반으로 3d 입체영상 파일을생성 및 재생하기 위한 시스템 및 방법 |
JP4947389B2 (ja) * | 2009-04-03 | 2012-06-06 | ソニー株式会社 | 画像信号復号装置、画像信号復号方法、および画像信号符号化方法 |
JP4962525B2 (ja) * | 2009-04-08 | 2012-06-27 | ソニー株式会社 | 再生装置、再生方法、およびプログラム |
JP2011142585A (ja) * | 2010-01-08 | 2011-07-21 | Sony Corp | 画像処理装置、情報記録媒体、および画像処理方法、並びにプログラム |
US9106935B2 (en) * | 2010-03-05 | 2015-08-11 | Samsung Electronics Co., Ltd | Method and apparatus for transmitting and receiving a content file including multiple streams |
US20110316971A1 (en) * | 2010-06-28 | 2011-12-29 | Jianping Zhou | Single pipeline stereo image capture |
KR101814798B1 (ko) * | 2011-01-26 | 2018-01-04 | 삼성전자주식회사 | 입체영상 처리 장치 및 방법 |
CN103024288B (zh) * | 2012-12-26 | 2017-12-29 | 新奥特(北京)视频技术有限公司 | 一种3d文件时间矫正的方法和装置 |
CN110545479B (zh) | 2018-05-29 | 2021-07-06 | 北京字节跳动网络技术有限公司 | 媒体播放的加载控制方法、装置及存储介质 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4630097A (en) * | 1983-08-16 | 1986-12-16 | Marks Alvin M | 2D/3D compatible polarized color TV system |
US5596421A (en) | 1993-06-03 | 1997-01-21 | Matsushita Electric Industrial Co., Ltd. | Optical disk recorder for video signals and an optical disk for use therein |
JPH0730925A (ja) * | 1993-06-25 | 1995-01-31 | Matsushita Electric Ind Co Ltd | 光ディスク記録再生装置及び光ディスク |
JPH06350968A (ja) | 1993-06-03 | 1994-12-22 | Matsushita Electric Ind Co Ltd | 光ディスク記録再生装置及び光ディスク |
TW436777B (en) | 1995-09-29 | 2001-05-28 | Matsushita Electric Ind Co Ltd | A method and an apparatus for reproducing bitstream having non-sequential system clock data seamlessly therebetween |
EP0944269B1 (en) | 1996-12-04 | 2002-11-13 | Matsushita Electric Industrial Co., Ltd. | Optical disc for high resolution and three-dimensional image recording, optical disc reproducing device, and optical disc recording device |
JP2001126407A (ja) | 1999-10-27 | 2001-05-11 | Sony Corp | 情報管理方法及び装置 |
JP3819669B2 (ja) * | 2000-04-13 | 2006-09-13 | 三洋電機株式会社 | ディジタルカメラ |
JP3789794B2 (ja) | 2001-09-26 | 2006-06-28 | 三洋電機株式会社 | 立体画像処理方法、装置、およびシステム |
JP4251864B2 (ja) * | 2002-12-13 | 2009-04-08 | シャープ株式会社 | 画像データ作成装置およびそのデータを再生する画像データ再生装置 |
JP2004274091A (ja) * | 2003-01-15 | 2004-09-30 | Sharp Corp | 画像データ作成装置、画像データ再生装置、画像データ記録方式および画像データ記録媒体 |
JP2004274253A (ja) * | 2003-03-06 | 2004-09-30 | Sharp Corp | 映像記録装置および映像送信装置 |
JP2004336255A (ja) * | 2003-05-02 | 2004-11-25 | Sony Corp | データ処理装置、ビデオデータの編集方法及び編集プログラム |
JP2005026800A (ja) | 2003-06-30 | 2005-01-27 | Konica Minolta Photo Imaging Inc | 画像処理方法、撮像装置、画像処理装置及び画像記録装置 |
KR100576544B1 (ko) * | 2003-12-09 | 2006-05-03 | 한국전자통신연구원 | 엠펙-4 객체기술자 정보 및 구조를 이용한 3차원 동영상처리 장치 및 그 방법 |
JP4347724B2 (ja) * | 2004-03-05 | 2009-10-21 | 富士フイルム株式会社 | 画像ファイル生成装置および方法ならびに画像ファイル再生装置および方法 |
JP2006074531A (ja) | 2004-09-03 | 2006-03-16 | Canon Inc | データ記録再生装置及び方法 |
EP3104603B2 (en) * | 2006-03-31 | 2022-06-08 | Koninklijke Philips N.V. | Efficient image receiver for multiple views |
KR100716142B1 (ko) | 2006-09-04 | 2007-05-11 | 주식회사 이시티 | 스테레오스코픽 영상 데이터의 전송 방법 |
KR100962696B1 (ko) | 2007-06-07 | 2010-06-11 | 주식회사 이시티 | 부호화된 스테레오스코픽 영상 데이터 파일의 구성방법 |
-
2007
- 2007-06-11 KR KR1020070056475A patent/KR101388265B1/ko not_active IP Right Cessation
-
2008
- 2008-06-10 US US12/136,507 patent/US8457386B2/en not_active Expired - Fee Related
- 2008-06-11 JP JP2010512070A patent/JP5500729B2/ja not_active Expired - Fee Related
- 2008-06-11 WO PCT/KR2008/003253 patent/WO2008153312A2/en active Application Filing
- 2008-06-11 EP EP08766215.1A patent/EP2153667B1/en not_active Not-in-force
-
2013
- 2013-06-04 US US13/909,753 patent/US8644597B2/en not_active Expired - Fee Related
- 2013-08-28 JP JP2013176714A patent/JP2014027665A/ja not_active Ceased
-
2015
- 2015-12-16 JP JP2015245156A patent/JP6320366B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US8457386B2 (en) | 2013-06-04 |
KR20080108654A (ko) | 2008-12-16 |
WO2008153312A2 (en) | 2008-12-18 |
US20130286159A1 (en) | 2013-10-31 |
EP2153667A2 (en) | 2010-02-17 |
WO2008153312A3 (en) | 2009-02-12 |
JP2016103830A (ja) | 2016-06-02 |
JP2010529803A (ja) | 2010-08-26 |
EP2153667A4 (en) | 2013-10-16 |
US8644597B2 (en) | 2014-02-04 |
KR101388265B1 (ko) | 2014-04-22 |
JP6320366B2 (ja) | 2018-05-09 |
JP2014027665A (ja) | 2014-02-06 |
EP2153667B1 (en) | 2017-05-03 |
US20080304766A1 (en) | 2008-12-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6320366B2 (ja) | 2d映像メディア標準に基づいて3d立体映像ファイルを生成及び再生するシステム及び方法 | |
JP5193291B2 (ja) | 2d映像メディア標準に基づいて3d映像ファイルを生成及び再生するためのシステム及び方法 | |
KR101362647B1 (ko) | 2d 영상을 포함하는 3d 입체영상 파일을 생성 및재생하기 위한 시스템 및 방법 | |
US8259162B2 (en) | Method and apparatus for generating stereoscopic image data stream for temporally partial three-dimensional (3D) data, and method and apparatus for displaying temporally partial 3D data of stereoscopic image | |
EP3059948B1 (en) | Stereoscopic video and audio recording method, stereoscopic video and audio reproducing method | |
JP5022443B2 (ja) | 立体映像コンテンツ再生に利用されるメタデータの復号化方法 | |
US20080170806A1 (en) | 3D image processing apparatus and method | |
RU2552137C2 (ru) | Точки входа для ускоренного 3d-воспроизведения | |
US20080252719A1 (en) | Apparatus, method, and system for generating stereo-scopic image file based on media standards | |
WO2009075495A1 (en) | System and method for generating and reproducing image file including 2d image and 3d stereoscopic image | |
JP2005094168A (ja) | ファイル構造及びそれを用いる画像記録装置並びに画像再生装置 | |
KR101480186B1 (ko) | 2d 영상과 3d 입체영상을 포함하는 영상파일을 생성 및재생하기 위한 시스템 및 방법 | |
RU2522040C2 (ru) | Устройство и способ воспроизведения, структура данных, носитель записи, устройство записи и способ записи и программа | |
KR20090026012A (ko) | 스테레오스코픽 파일을 생성하기 위한 장치 및 방법 | |
KR101453084B1 (ko) | 3d 영상 파일을 생성 및 재생하기 위한 휴대 단말기 및 방법 | |
EP2685730A1 (en) | Playback device, playback method, and program | |
KR101630720B1 (ko) | 3d 비디오 소스 저장 방법 및 장치와 3d 비디오 재생 방법 및 장치 | |
JP2015029211A (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111021 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111025 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120614 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20120622 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20120907 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130828 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140114 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140310 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5500729 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |