JP2009260440A - 動画像処理装置及びその制御方法、プログラム - Google Patents
動画像処理装置及びその制御方法、プログラム Download PDFInfo
- Publication number
- JP2009260440A JP2009260440A JP2008104029A JP2008104029A JP2009260440A JP 2009260440 A JP2009260440 A JP 2009260440A JP 2008104029 A JP2008104029 A JP 2008104029A JP 2008104029 A JP2008104029 A JP 2008104029A JP 2009260440 A JP2009260440 A JP 2009260440A
- Authority
- JP
- Japan
- Prior art keywords
- image
- field image
- candidate
- current
- field
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
- H04N7/012—Conversion between an interlaced and a progressive signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/144—Movement detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
- H04N7/0137—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes dependent on presence/absence of motion, e.g. of motion zones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
- H04N7/0147—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes the interpolation using an indication of film mode or an indication of a specific pattern, e.g. 3:2 pull-down pattern
Landscapes
- Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Systems (AREA)
Abstract
【解決手段】現フィールド画像と前フィールド画像とから、同一時間のデータとして組み合わせたフレーム画像を生成し第1の候補画像とする。現フィールド画像と後フィールド画像とから、同一時間のデータとして組み合わせたフレーム画像を生成し第2の候補画像する。現フィールド画像を入力し、画素補間処理によりフレーム画像を生成し第3の候補画像する。現フィールド画像が、前フィールド画像、後フィールド画像と連続性があるか、あるいはいずれとも連続性がないかを判定し、その現フィールド画像の判定結果を履歴情報として記憶する。記憶している現フィールド画像よりも前の連続するフィールド画像の履歴情報のパターンから、特定パターンを検出し、その結果に基づいて現フィールド画像のフレーム画像として、第1乃至第3の候補画像のいずれかを選択する。
【選択図】図1A
Description
動画像中のフィールド画像からフレーム画像を生成する動画像処理装置であって、
現在の現フィールド画像とそれより時間的に前の前フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第1の候補画像として出力する第1の候補画像生成手段と、
前記現在の現フィールド画像とそれより時間的に後の後フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第2の候補画像として出力する第2の候補画像生成手段と、
前記現フィールド画像を入力し、その現フィールド画像に対する画素補間処理によりフレーム画像を生成し、これを第3の候補画像として出力する第3の候補画像生成手段と、
前記現フィールド画像が、前記前フィールド画像と連続性があるか、前記後フィールド画像と連続性があるか、あるいはいずれとも連続性がないかを判定する判定手段と、
前記判定手段による判定結果に基づいて、前記現フィールド画像の判定結果を履歴情報として記憶する記憶手段と、
前記記憶手段に記憶している前記現フィールド画像よりも前の連続するフィールド画像の履歴情報のパターンから、特定パターンを検出する検出手段と、
前記検出手段の検出結果に基づいて、前記現フィールド画像のフレーム画像として、前記第1乃至第3の候補画像のいずれから選択する選択手段と
を備える。
前記検出手段が前記特定パターンを検出する場合、その特定パターンに従って、前記現フィールド画像のフレーム画像として、前記第1及び第2の候補画像のいずれかを選択し、
前記検出手段が前記特定パターンを検出しない場合、前記現フィールド画像のフレーム画像として、前記第3の候補画像を選択する。
判定結果として前記前フィールド画像あるいは前記後フィールド画像のいずれかに前記連続性があると判定した場合は、その判定結果の履歴情報を記憶して、これまでに記憶している履歴情報を更新し、
判定結果として前記前フィールド画像及び前記後フィールド画像のいずれにも前記連続性がないと判定した場合は、これまでに記憶している履歴情報をリセットする。
動画像中のフィールド画像からフレーム画像を生成する動画像処理装置の制御方法であって、
現在の現フィールド画像とそれより時間的に前の前フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第1の候補画像として出力する第1の候補画像生成工程と、
前記現在の現フィールド画像とそれより時間的に後の後フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第2の候補画像として出力する第2の候補画像生成工程と、
前記現フィールド画像を入力し、その現フィールド画像に対する画素補間処理によりフレーム画像を生成し、これを第3の候補画像として出力する第3の候補画像生成工程と、
前記現フィールド画像が、前記前フィールド画像と連続性があるか、前記後フィールド画像と連続性があるか、あるいはいずれとも連続性がないかを判定する判定工程と、
前記判定工程による判定結果に基づいて、前記現フィールド画像の判定結果を履歴情報として記憶媒体に記憶する記憶工程と、
前記記憶媒体に記憶している前記現フィールド画像よりも前の連続するフィールド画像の履歴情報のパターンから、特定パターンを検出する検出工程と、
前記検出工程の検出結果に基づいて、前記現フィールド画像のフレーム画像として、前記第1乃至第3の候補画像のいずれから選択する選択工程と
を備える。
動画像中のフィールド画像からフレーム画像を生成する動画像処理装置の制御をコンピュータに実行させるためのプログラムであって、
現在の現フィールド画像とそれより時間的に前の前フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第1の候補画像として出力する第1の候補画像生成工程と、
前記現在の現フィールド画像とそれより時間的に後の後フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第2の候補画像として出力する第2の候補画像生成工程と、
前記現フィールド画像を入力し、その現フィールド画像に対する画素補間処理によりフレーム画像を生成し、これを第3の候補画像として出力する第3の候補画像生成工程と、
前記現フィールド画像が、前記前フィールド画像と連続性があるか、前記後フィールド画像と連続性があるか、あるいはいずれとも連続性がないかを判定する判定工程と、
前記判定工程による判定結果に基づいて、前記現フィールド画像の判定結果を履歴情報として記憶媒体に記憶する記憶工程と、
前記記憶媒体に記憶している前記現フィールド画像よりも前の連続するフィールド画像の履歴情報のパターンから、特定パターンを検出する検出工程と、
前記検出工程の検出結果に基づいて、前記現フィールド画像のフレーム画像として、前記第1乃至第3の候補画像のいずれから選択する選択工程と
をコンピュータに実行させる。
図1Aは本発明の実施形態1の動画像処理装置の機能構成を示す図である。
実施形態2の動画像処理装置は、図6に示すように、実施形態1における図1Aの第3の候補画像生成部104に代えて、動き適応型I/P変換処理部604を構成している。ここで、I/P変換とは、インターレース画像(I画像)であるフィールド画像からプログレシップ画像(P画像)であるフレーム画像へ変換することを意味する。特に、この動き適応型I/P変換処理部604は、現フィールド画像と前フィールド画像の2つのフィールド画像から1つのフレームを生成する。
102 候補画像生成部
103 候補画像生成部
104 候補画像生成部
105 候補画像比較・判定部
106 判定パターン検出部
107 候補画像選択部
Claims (9)
- 動画像中のフィールド画像からフレーム画像を生成する動画像処理装置であって、
現在の現フィールド画像とそれより時間的に前の前フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第1の候補画像として出力する第1の候補画像生成手段と、
前記現在の現フィールド画像とそれより時間的に後の後フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第2の候補画像として出力する第2の候補画像生成手段と、
前記現フィールド画像を入力し、その現フィールド画像に対する画素補間処理によりフレーム画像を生成し、これを第3の候補画像として出力する第3の候補画像生成手段と、
前記現フィールド画像が、前記前フィールド画像と連続性があるか、前記後フィールド画像と連続性があるか、あるいはいずれとも連続性がないかを判定する判定手段と、
前記判定手段による判定結果に基づいて、前記現フィールド画像の判定結果を履歴情報として記憶する記憶手段と、
前記記憶手段に記憶している前記現フィールド画像よりも前の連続するフィールド画像の履歴情報のパターンから、特定パターンを検出する検出手段と、
前記検出手段の検出結果に基づいて、前記現フィールド画像のフレーム画像として、前記第1乃至第3の候補画像のいずれから選択する選択手段と
を備えることを特徴とする動画像処理装置。 - 前記選択手段は、
前記検出手段が前記特定パターンを検出する場合、その特定パターンに従って、前記現フィールド画像のフレーム画像として、前記第1及び第2の候補画像のいずれかを選択し、
前記検出手段が前記特定パターンを検出しない場合、前記現フィールド画像のフレーム画像として、前記第3の候補画像を選択する
ことを特徴とする請求項1に記載の動画像処理装置。 - 前記判定手段は、前記前フィールド画像と前記現フィールド画像との間の相関値、前記現フィールド画像と前記後フィールド画像との間の相関値及び閾値の3つの値の大小関係から、前記現フィールド画像が、前記前フィールド画像と連続性があるか、前記後フィールド画像と連続性があるか、あるいはいずれとも連続性がないかを判定する
ことを特徴とする請求項1に記載の動画像処理装置。 - 前記記憶手段は、
判定結果として前記前フィールド画像あるいは前記後フィールド画像のいずれかに前記連続性があると判定した場合は、その判定結果の履歴情報を記憶して、これまでに記憶している履歴情報を更新し、
判定結果として前記前フィールド画像及び前記後フィールド画像のいずれにも前記連続性がないと判定した場合は、これまでに記憶している履歴情報をリセットする
ことを特徴とする請求項1に記載の動画像処理装置。 - 前記第3の候補画像生成手段は、前記前フィールド画像と前記後フィールド画像の少なくとも一方を補間画素生成用フィールド画像として入力し、指定された重み付けに従って、画素単位に前記現フィールド内の画素と前記補間画素生成用フィールド画像の画素を用いて補間画素を生成することで、前記現フィールド画像に対するフレーム画像を生成する
ことを特徴とする請求項1に記載の動画像処理装置。 - 前記第3の候補画像生成手段は、前記検出手段による特定パターンの検出の有無に応じて、前記重み付けを変更する
ことを特徴とする請求項5に記載の動画像処理装置。 - 前記第3の候補画像生成手段は、前記検出手段が前記特定パターンを検出しない場合、前記現フィールド画像の画素を用いる重み付けを増やす
ことを特徴とする請求項6に記載の動画像処理装置。 - 動画像中のフィールド画像からフレーム画像を生成する動画像処理装置の制御方法であって、
現在の現フィールド画像とそれより時間的に前の前フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第1の候補画像として出力する第1の候補画像生成工程と、
前記現在の現フィールド画像とそれより時間的に後の後フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第2の候補画像として出力する第2の候補画像生成工程と、
前記現フィールド画像を入力し、その現フィールド画像に対する画素補間処理によりフレーム画像を生成し、これを第3の候補画像として出力する第3の候補画像生成工程と、
前記現フィールド画像が、前記前フィールド画像と連続性があるか、前記後フィールド画像と連続性があるか、あるいはいずれとも連続性がないかを判定する判定工程と、
前記判定工程による判定結果に基づいて、前記現フィールド画像の判定結果を履歴情報として記憶媒体に記憶する記憶工程と、
前記記憶媒体に記憶している前記現フィールド画像よりも前の連続するフィールド画像の履歴情報のパターンから、特定パターンを検出する検出工程と、
前記検出工程の検出結果に基づいて、前記現フィールド画像のフレーム画像として、前記第1乃至第3の候補画像のいずれから選択する選択工程と
を備えることを特徴とする動画像処理装置の制御方法。 - 動画像中のフィールド画像からフレーム画像を生成する動画像処理装置の制御をコンピュータに実行させるためのプログラムであって、
現在の現フィールド画像とそれより時間的に前の前フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第1の候補画像として出力する第1の候補画像生成工程と、
前記現在の現フィールド画像とそれより時間的に後の後フィールド画像とを入力し、これらを同一時間のデータとして組み合わせたフレーム画像を生成し、これを第2の候補画像として出力する第2の候補画像生成工程と、
前記現フィールド画像を入力し、その現フィールド画像に対する画素補間処理によりフレーム画像を生成し、これを第3の候補画像として出力する第3の候補画像生成工程と、
前記現フィールド画像が、前記前フィールド画像と連続性があるか、前記後フィールド画像と連続性があるか、あるいはいずれとも連続性がないかを判定する判定工程と、
前記判定工程による判定結果に基づいて、前記現フィールド画像の判定結果を履歴情報として記憶媒体に記憶する記憶工程と、
前記記憶媒体に記憶している前記現フィールド画像よりも前の連続するフィールド画像の履歴情報のパターンから、特定パターンを検出する検出工程と、
前記検出工程の検出結果に基づいて、前記現フィールド画像のフレーム画像として、前記第1乃至第3の候補画像のいずれから選択する選択工程と
をコンピュータに実行させることを特徴とするプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008104029A JP5219598B2 (ja) | 2008-04-11 | 2008-04-11 | 動画像処理装置及びその制御方法、プログラム |
US12/409,125 US8139151B2 (en) | 2008-04-11 | 2009-03-23 | Moving image processing apparatus, control method thereof, and program |
CN2009101336396A CN101557492B (zh) | 2008-04-11 | 2009-04-13 | 运动图像处理设备及其控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008104029A JP5219598B2 (ja) | 2008-04-11 | 2008-04-11 | 動画像処理装置及びその制御方法、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009260440A true JP2009260440A (ja) | 2009-11-05 |
JP5219598B2 JP5219598B2 (ja) | 2013-06-26 |
Family
ID=41163679
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008104029A Expired - Fee Related JP5219598B2 (ja) | 2008-04-11 | 2008-04-11 | 動画像処理装置及びその制御方法、プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US8139151B2 (ja) |
JP (1) | JP5219598B2 (ja) |
CN (1) | CN101557492B (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010278993A (ja) * | 2009-06-01 | 2010-12-09 | Canon Inc | 映像処理装置およびその方法 |
JP2013046154A (ja) * | 2011-08-23 | 2013-03-04 | Nikon Systems Inc | ノイズ検知装置、再生装置、およびノイズ検知プログラム |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4922418B2 (ja) * | 2010-02-16 | 2012-04-25 | 株式会社東芝 | 再生装置および再生装置の制御方法 |
CN102196232B (zh) * | 2010-03-09 | 2015-01-28 | 富士通微电子(上海)有限公司 | 隔行视频图像中的缺失行的恢复方法 |
CN106604097B (zh) * | 2016-12-07 | 2020-08-11 | 广东威创视讯科技股份有限公司 | 多路视频信号的传输方法和*** |
CN108833118B (zh) * | 2018-07-25 | 2021-12-10 | 合肥学院 | 应用含参数Thiele型有理插值的安全访问方法及*** |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11261972A (ja) * | 1998-03-06 | 1999-09-24 | Pioneer Electron Corp | 映像信号識別方法及びそれを用いた映像信号の処理方 法 |
JP2006094257A (ja) * | 2004-09-27 | 2006-04-06 | Mitsubishi Electric Corp | 映像信号処理装置、映像信号処理方法、及び映像信号表示装置 |
JP2006237695A (ja) * | 2005-02-22 | 2006-09-07 | Nec Electronics Corp | プルダウン検出装置及びプルダウン検出方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07107375A (ja) | 1993-09-29 | 1995-04-21 | Toshiba Corp | 方式変換装置 |
JP3437291B2 (ja) * | 1994-11-14 | 2003-08-18 | キヤノン株式会社 | 再生装置および再生方法 |
JPH10145779A (ja) * | 1996-11-06 | 1998-05-29 | Sony Corp | フィールド検出装置およびフィールド検出方法、画像符号化装置および画像符号化方法、並びに記録媒体および記録方法 |
JPH1188845A (ja) | 1997-09-04 | 1999-03-30 | Matsushita Electric Ind Co Ltd | 動画像走査変換装置 |
JP4290124B2 (ja) * | 2002-11-26 | 2009-07-01 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 動き系列パターン検出 |
KR20040054032A (ko) * | 2002-12-16 | 2004-06-25 | 삼성전자주식회사 | 영상신호의 포맷 검출장치 및 방법 |
CN101076104B (zh) * | 2006-05-19 | 2011-06-29 | 深圳艾科创新微电子有限公司 | 电影模式的检测方法 |
US8964117B2 (en) * | 2007-09-28 | 2015-02-24 | Ati Technologies Ulc | Single-pass motion adaptive deinterlacer and method therefore |
-
2008
- 2008-04-11 JP JP2008104029A patent/JP5219598B2/ja not_active Expired - Fee Related
-
2009
- 2009-03-23 US US12/409,125 patent/US8139151B2/en not_active Expired - Fee Related
- 2009-04-13 CN CN2009101336396A patent/CN101557492B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11261972A (ja) * | 1998-03-06 | 1999-09-24 | Pioneer Electron Corp | 映像信号識別方法及びそれを用いた映像信号の処理方 法 |
JP2006094257A (ja) * | 2004-09-27 | 2006-04-06 | Mitsubishi Electric Corp | 映像信号処理装置、映像信号処理方法、及び映像信号表示装置 |
JP2006237695A (ja) * | 2005-02-22 | 2006-09-07 | Nec Electronics Corp | プルダウン検出装置及びプルダウン検出方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010278993A (ja) * | 2009-06-01 | 2010-12-09 | Canon Inc | 映像処理装置およびその方法 |
JP2013046154A (ja) * | 2011-08-23 | 2013-03-04 | Nikon Systems Inc | ノイズ検知装置、再生装置、およびノイズ検知プログラム |
Also Published As
Publication number | Publication date |
---|---|
US20090256957A1 (en) | 2009-10-15 |
JP5219598B2 (ja) | 2013-06-26 |
US8139151B2 (en) | 2012-03-20 |
CN101557492B (zh) | 2011-07-13 |
CN101557492A (zh) | 2009-10-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI466543B (zh) | 用於高清晰度與標準清晰度視訊之進階式解間條器 | |
JP5219598B2 (ja) | 動画像処理装置及びその制御方法、プログラム | |
JP4844370B2 (ja) | フレームレート変換装置及び表示装置 | |
US8385602B2 (en) | Image processing device method, program, and recording medium for improving detection precision of a motion vector | |
JP4643727B2 (ja) | 画像処理装置及び画像処理方法 | |
JP2004350281A (ja) | 映像信号のデインターレース方法およびデインターレース装置 | |
JP2008135965A (ja) | インタレース映像の生成シーケンスの検出方法およびインタレース/プログレッシブ変換方法並びに装置 | |
JP4983362B2 (ja) | フィルム検出装置およびその方法、並びに映像信号処理装置およびその方法 | |
KR20050035704A (ko) | 타임 시프트와 움직임 보상을 이용한 프레임 레이트 변환장치 및 그 방법 | |
US8385430B2 (en) | Video signal processing apparatus and video signal processing method | |
JP2006109488A (ja) | フィールド選択が可能な映像処理装置及びその方法 | |
JP2006310985A (ja) | フレームレート変換装置及び表示装置 | |
JP4375452B2 (ja) | 画像処理装置、画像処理方法、及びプログラム、並びに表示装置 | |
JP2007288483A (ja) | 画像変換装置 | |
JP2005252365A (ja) | 画像信号処理装置、画像信号処理方法、並びにプログラムおよびそれを記録した媒体 | |
JP2000092455A (ja) | 画像情報変換装置および画像情報変換方法 | |
JP3903498B2 (ja) | 映像信号変換方式および映像信号変換装置 | |
JP2005151134A (ja) | 動き・静止の判定装置および判定方法、並びに画像信号の処理装置および処理方法 | |
JP5305822B2 (ja) | 映像信号処理装置、及び方法、プログラム | |
JP4250807B2 (ja) | フィールド周波数変換装置および変換方法 | |
JP2005004770A (ja) | グループ化による映画映像検出方法及び装置 | |
JP2008227928A (ja) | フレームレート変換装置および映像表示装置 | |
JP4845569B2 (ja) | 信号処理装置及び信号処理方法 | |
JP5371682B2 (ja) | 画像処理装置及び画像処理方法 | |
JP5325671B2 (ja) | 画像処理装置、表示装置および画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110405 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121115 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121119 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130116 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130305 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160315 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5219598 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160315 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |