JP4647514B2 - 航空画像処理装置および航空画像処理方法 - Google Patents
航空画像処理装置および航空画像処理方法 Download PDFInfo
- Publication number
- JP4647514B2 JP4647514B2 JP2006040531A JP2006040531A JP4647514B2 JP 4647514 B2 JP4647514 B2 JP 4647514B2 JP 2006040531 A JP2006040531 A JP 2006040531A JP 2006040531 A JP2006040531 A JP 2006040531A JP 4647514 B2 JP4647514 B2 JP 4647514B2
- Authority
- JP
- Japan
- Prior art keywords
- shade
- angle
- image
- line segment
- matches
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/05—Geographic models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/12—Edge-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10032—Satellite or aerial image; Remote sensing
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Geometry (AREA)
- Remote Sensing (AREA)
- Computer Graphics (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
- Instructional Devices (AREA)
Description
著:昭晃堂、1992年p45〜p50)に地図作成手法と題して記述されている。
写真画像を用いて地図の作成を支援する航空画像処理装置において、
写真画像の撮影日時および撮影位置の緯度経度情報に基づいて太陽方位を求め、当該太陽方位と当該写真画像の撮影条件の情報に基づいて当該写真画像上の地物から発生する影の方位を求め、当該地物から発生する影の方位と所定方向間の日陰発生角度を求める日陰角度解析手段と、
前記写真画像の撮影日時および撮影位置の緯度経度情報に基づいて太陽高度を求め、当該太陽高度と前記写真画像の撮影条件の情報に基づいて、前記写真画像上の地物の地平面の高さに対して前記地物から発生する影が伸びる倍率を示す日陰発生延長倍率を求める日陰倍率解析手段と、
前記写真画像中の地物の輪郭線を抽出し、当該輪郭線を結線処理することによりポリゴンを生成するポリゴン生成手段と、
前記ポリゴン生成手段によって生成されたポリゴンを構成する各線分の写真画像上の角度から前記日陰発生角度に合致する線分を検出する日陰角度検出手段と、
前記日陰角度検出手段によって検出された日陰発生角度に合致する線分と当該日陰発生角度に合致する線分に接続された線分の関係が前記日陰発生延長倍率に合致するか否かを判定する日陰延長判定手段と、
前記日陰延長判定手段によって合致すると判定された場合、前記日陰発生角度に合致する線分と前記日陰発生角度に合致する線分に接続された線分を有する領域が隣接する全てのポリゴンの色調より暗いか否か判定し、隣接する全てのポリゴンの色調より暗い場合、前記日陰発生角度に合致する線分と前記日陰発生角度に合致する線分に接続された線分を有する領域を日陰領域と判定する日陰領域判定手段と、
を備える。
前記日陰領域判定手段により日陰領域と判定された領域について輪郭線を抽出し、当該輪郭線を結線処理することにより前記日陰領域のポリゴンを生成する日陰領域ポリゴン生成手段を備える。
日陰角度解析部と、日陰倍率解析部と、ポリゴン生成部と、日陰角度検出部と、日陰延長判定部と、日陰領域判定部とを備えた航空画像処理装置を用いて、写真画像による地図の作成を支援する航空画像処理方法において、
前記日陰角度解析部が、写真画像の撮影日時および撮影位置の緯度経度情報に基づいて太陽方位を求め、当該太陽方位と当該写真画像の撮影条件の情報に基づいて当該写真画像上の地物から発生する影の方位を求め、当該地物から発生する影の方位と所定方向間の日陰発生角度を求めるステップと、
前記日陰倍率解析部が、前記写真画像の撮影日時および撮影位置の緯度経度情報に基づいて太陽高度を求め、当該太陽高度と前記写真画像の撮影条件の情報に基づいて、前記写真画像上の地物の地平面の高さに対して前記地物から発生する影が伸びる倍率を示す日陰発生延長倍率を求めるステップと、
前記ポリゴン生成部が、前記写真画像中の地物の輪郭線を抽出し、当該輪郭線を結線処理することによりポリゴンを生成するステップと、
前記日陰角度検出部が、前記ポリゴン生成部によって生成されたポリゴンを構成する各線分の写真画像上の角度から前記日陰発生角度に合致する線分を検出するステップと、
前記日陰延長判定部が、前記日陰角度検出部によって検出された日陰発生角度に合致する線分と当該日陰発生角度に合致する線分に接続された線分の関係が前記日陰発生延長倍率に合致するか否かを判定するステップと、
前記日陰領域判定部が、前記日陰延長判定部によって合致すると判定された場合、前記日陰発生角度に合致する線分と前記日陰発生角度に合致する線分に接続された線分を有する領域が隣接する全てのポリゴンの色調より暗いか否か判定し、隣接する全てのポリゴンの色調より暗い場合、前記日陰発生角度に合致する線分と前記日陰発生角度に合致する線分に接続された線分を有する領域を日陰領域と判定するステップと、
を備える。
上述の実施の形態においては、ステップS13で影となる線分で囲まれた領域の色調が隣接する全てのポリゴンよりも暗いか否かを判定したが、これに限られず、更に色調が暗いか否かを判定すると共に、影となる線分で囲まれた領域の色が黒色であるか否かを判定することとしてもよい。このような処理により、より正確に日陰領域であるか否かを判定できる。
110 画像撮影部
120 画像記録中央制御部
130 日陰情報解析部
200 日陰情報付き航空画像DB
300 日陰情報無し航空画像DB
400 日陰情報パラメータ
500 地物ポリゴン生成システム
510 中央制御部
520 画像情報入力部
530 画像データ編集部
540 画像エッジ抽出部
550 ポリゴン生成部
560 日陰領域識別部
600 地物ポリゴンDB
Claims (3)
- 写真画像を用いて地図の作成を支援する航空画像処理装置において、
写真画像の撮影日時および撮影位置の緯度経度情報に基づいて太陽方位を求め、当該太陽方位と当該写真画像の撮影条件の情報に基づいて当該写真画像上の地物から発生する影の方位を求め、当該地物から発生する影の方位と所定方向間の日陰発生角度を求める日陰角度解析手段と、
前記写真画像の撮影日時および撮影位置の緯度経度情報に基づいて太陽高度を求め、当該太陽高度と前記写真画像の撮影条件の情報に基づいて、前記写真画像上の地物の地平面の高さに対して前記地物から発生する影が伸びる倍率を示す日陰発生延長倍率を求める日陰倍率解析手段と、
前記写真画像中の地物の輪郭線を抽出し、当該輪郭線を結線処理することによりポリゴンを生成するポリゴン生成手段と、
前記ポリゴン生成手段によって生成されたポリゴンを構成する各線分の写真画像上の角度から前記日陰発生角度に合致する線分を検出する日陰角度検出手段と、
前記日陰角度検出手段によって検出された日陰発生角度に合致する線分と当該日陰発生角度に合致する線分に接続された線分の関係が前記日陰発生延長倍率に合致するか否かを判定する日陰延長判定手段と、
前記日陰延長判定手段によって合致すると判定された場合、前記日陰発生角度に合致する線分と前記日陰発生角度に合致する線分に接続された線分を有する領域が隣接する全てのポリゴンの色調より暗いか否か判定し、隣接する全てのポリゴンの色調より暗い場合、前記日陰発生角度に合致する線分と前記日陰発生角度に合致する線分に接続された線分を有する領域を日陰領域と判定する日陰領域判定手段と、
を備えることを特徴とする航空画像処理装置。 - 前記日陰領域判定手段により日陰領域と判定された領域について輪郭線を抽出し、当該輪郭線を結線処理することにより前記日陰領域のポリゴンを生成する日陰領域ポリゴン生成手段を備えることを特徴とする請求項1に記載の航空画像処理装置。
- 日陰角度解析部と、日陰倍率解析部と、ポリゴン生成部と、日陰角度検出部と、日陰延長判定部と、日陰領域判定部とを備えた航空画像処理装置を用いて、写真画像による地図の作成を支援する航空画像処理方法において、
前記日陰角度解析部が、写真画像の撮影日時および撮影位置の緯度経度情報に基づいて太陽方位を求め、当該太陽方位と当該写真画像の撮影条件の情報に基づいて当該写真画像上の地物から発生する影の方位を求め、当該地物から発生する影の方位と所定方向間の日陰発生角度を求めるステップと、
前記日陰倍率解析部が、前記写真画像の撮影日時および撮影位置の緯度経度情報に基づいて太陽高度を求め、当該太陽高度と前記写真画像の撮影条件の情報に基づいて、前記写真画像上の地物の地平面の高さに対して前記地物から発生する影が伸びる倍率を示す日陰発生延長倍率を求めるステップと、
前記ポリゴン生成部が、前記写真画像中の地物の輪郭線を抽出し、当該輪郭線を結線処理することによりポリゴンを生成するステップと、
前記日陰角度検出部が、前記ポリゴン生成部によって生成されたポリゴンを構成する各線分の写真画像上の角度から前記日陰発生角度に合致する線分を検出するステップと、
前記日陰延長判定部が、前記日陰角度検出部によって検出された日陰発生角度に合致する線分と当該日陰発生角度に合致する線分に接続された線分の関係が前記日陰発生延長倍率に合致するか否かを判定するステップと、
前記日陰領域判定部が、前記日陰延長判定部によって合致すると判定された場合、前記日陰発生角度に合致する線分と前記日陰発生角度に合致する線分に接続された線分を有する領域が隣接する全てのポリゴンの色調より暗いか否か判定し、隣接する全てのポリゴンの色調より暗い場合、前記日陰発生角度に合致する線分と前記日陰発生角度に合致する線分に接続された線分を有する領域を日陰領域と判定するステップと、
を備えることを特徴とする航空画像処理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006040531A JP4647514B2 (ja) | 2006-02-17 | 2006-02-17 | 航空画像処理装置および航空画像処理方法 |
US11/656,002 US7809191B2 (en) | 2006-02-17 | 2007-01-22 | Image processing system and image processing method for aerial photograph |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006040531A JP4647514B2 (ja) | 2006-02-17 | 2006-02-17 | 航空画像処理装置および航空画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007219231A JP2007219231A (ja) | 2007-08-30 |
JP4647514B2 true JP4647514B2 (ja) | 2011-03-09 |
Family
ID=38427708
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006040531A Expired - Fee Related JP4647514B2 (ja) | 2006-02-17 | 2006-02-17 | 航空画像処理装置および航空画像処理方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7809191B2 (ja) |
JP (1) | JP4647514B2 (ja) |
Families Citing this family (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8911861B2 (en) * | 2008-12-11 | 2014-12-16 | Landec Corporation | Thermochromic indicator |
JP4647514B2 (ja) * | 2006-02-17 | 2011-03-09 | 株式会社日立ソリューションズ | 航空画像処理装置および航空画像処理方法 |
JP2011087128A (ja) * | 2009-10-15 | 2011-04-28 | Fujifilm Corp | 複眼カメラ及び被写体判別方法 |
EP2549434B1 (fr) * | 2011-07-22 | 2018-10-17 | Thales | Procédé de modélisation de bâtiments à partir d'une image géoréférencée |
JP5303692B1 (ja) * | 2011-11-28 | 2013-10-02 | パナソニック株式会社 | 立体画像処理装置及び立体画像処理方法 |
US9886794B2 (en) | 2012-06-05 | 2018-02-06 | Apple Inc. | Problem reporting in maps |
US9418672B2 (en) | 2012-06-05 | 2016-08-16 | Apple Inc. | Navigation application with adaptive instruction text |
US8965696B2 (en) | 2012-06-05 | 2015-02-24 | Apple Inc. | Providing navigation instructions while operating navigation application in background |
US10176633B2 (en) | 2012-06-05 | 2019-01-08 | Apple Inc. | Integrated mapping and navigation application |
US9482296B2 (en) | 2012-06-05 | 2016-11-01 | Apple Inc. | Rendering road signs during navigation |
US9997069B2 (en) | 2012-06-05 | 2018-06-12 | Apple Inc. | Context-aware voice guidance |
US9111380B2 (en) * | 2012-06-05 | 2015-08-18 | Apple Inc. | Rendering maps |
US9367959B2 (en) | 2012-06-05 | 2016-06-14 | Apple Inc. | Mapping application with 3D presentation |
US9269178B2 (en) | 2012-06-05 | 2016-02-23 | Apple Inc. | Virtual camera for 3D maps |
US9159153B2 (en) | 2012-06-05 | 2015-10-13 | Apple Inc. | Method, system and apparatus for providing visual feedback of a map view change |
US9230556B2 (en) | 2012-06-05 | 2016-01-05 | Apple Inc. | Voice instructions during navigation |
US9147286B2 (en) | 2012-06-06 | 2015-09-29 | Apple Inc. | Non-static 3D map views |
CN103903288B (zh) * | 2012-12-30 | 2017-10-24 | 厦门高德软件有限公司 | 一种道路阴影绘制方法及装置 |
KR101493418B1 (ko) * | 2013-03-29 | 2015-02-13 | 현대엠엔소프트 주식회사 | 공중사진의 그림자 제거 방법 및 그 장치 |
US9418485B2 (en) | 2013-05-31 | 2016-08-16 | Apple Inc. | Adjusting heights for road path indicators |
US9645726B2 (en) | 2013-06-08 | 2017-05-09 | Apple Inc. | Mapping application with interactive dynamic scale and smart zoom |
US9367895B2 (en) * | 2014-03-19 | 2016-06-14 | Digitalglobe, Inc. | Automated sliver removal in orthomosaic generation |
CN106537409B (zh) * | 2014-08-18 | 2020-02-14 | 谷歌有限责任公司 | 确定影像的罗盘定位 |
US10217236B2 (en) | 2016-04-08 | 2019-02-26 | Orbital Insight, Inc. | Remote determination of containers in geographical region |
EP3440428B1 (en) * | 2016-04-08 | 2022-06-01 | Orbital Insight, Inc. | Remote determination of quantity stored in containers in geographical region |
US10867374B2 (en) * | 2017-02-13 | 2020-12-15 | Sensors Unlimited, Inc. | Auto-focusing system and method by determining contrast difference between adjacent pixels using sobel filter |
JP7022559B2 (ja) * | 2017-10-17 | 2022-02-18 | 株式会社トプコン | 無人航空機の制御方法および無人航空機の制御用プログラム |
US20190164309A1 (en) * | 2017-11-29 | 2019-05-30 | Electronics And Telecommunications Research Institute | Method of detecting shooting direction and apparatuses performing the same |
US10553020B1 (en) * | 2018-03-20 | 2020-02-04 | Ratheon Company | Shadow mask generation using elevation data |
US20200192932A1 (en) * | 2018-12-13 | 2020-06-18 | Sap Se | On-demand variable feature extraction in database environments |
CN111724440B (zh) * | 2020-05-27 | 2024-02-02 | 杭州数梦工场科技有限公司 | 监控设备的方位信息确定方法、装置及电子设备 |
CN111610801A (zh) * | 2020-05-27 | 2020-09-01 | 福州尚易航农业科技有限公司 | 一种基于数字雷达的无人机感测技术 |
CN114782778B (zh) * | 2022-04-25 | 2023-01-06 | 广东工业大学 | 一种基于机器视觉技术的装配状态监控方法及*** |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11283012A (ja) * | 1998-03-31 | 1999-10-15 | Hitachi Software Eng Co Ltd | 陰の認識方法 |
JP2000020692A (ja) * | 1998-07-02 | 2000-01-21 | Nec Corp | 高解像度衛星データにおける影除去方法と該方法を用いた衛星データ処理装置 |
JP2002251618A (ja) * | 2001-02-23 | 2002-09-06 | Pasuko:Kk | 画像地図、その作成装置及び作成方法 |
JP2004252213A (ja) * | 2003-02-20 | 2004-09-09 | Pasuko:Kk | ポリゴン形成方法及びポリゴン形成システム |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4873651A (en) * | 1987-04-21 | 1989-10-10 | Case Western Reserve University | Method and apparatus for reconstructing three-dimensional surfaces from two-dimensional images |
JPH06105224A (ja) | 1992-09-17 | 1994-04-15 | Fujitsu Ltd | ダイナミックレンジ拡大装置 |
US5943164A (en) * | 1994-11-14 | 1999-08-24 | Texas Instruments Incorporated | Curved 3-D object description from single aerial images using shadows |
JPH11148807A (ja) * | 1997-07-29 | 1999-06-02 | Toshiba Corp | バンプ高さ測定方法及びバンプ高さ測定装置 |
US6177682B1 (en) * | 1998-10-21 | 2001-01-23 | Novacam Tyechnologies Inc. | Inspection of ball grid arrays (BGA) by using shadow images of the solder balls |
US6671349B1 (en) * | 2000-11-13 | 2003-12-30 | Olganix Corporation | Tomosynthesis system and registration method |
DE10346481B4 (de) * | 2003-10-02 | 2013-01-17 | Daimler Ag | Dreidimensionale Rekonstruktion von Oberflächenprofilen |
CA2455359C (en) * | 2004-01-16 | 2013-01-08 | Geotango International Corp. | System, computer program and method for 3d object measurement, modeling and mapping from single imagery |
GB0508073D0 (en) * | 2005-04-21 | 2005-06-01 | Bourbay Ltd | Automated batch generation of image masks for compositing |
KR100647807B1 (ko) * | 2005-11-24 | 2006-11-23 | 인하대학교 산학협력단 | 그림자 분석을 통한 3차원 건물정보 추출방법 |
JP4647514B2 (ja) * | 2006-02-17 | 2011-03-09 | 株式会社日立ソリューションズ | 航空画像処理装置および航空画像処理方法 |
US8170279B2 (en) * | 2008-06-23 | 2012-05-01 | Raytheon Company | Adaptive match metric selection for automatic target recognition |
-
2006
- 2006-02-17 JP JP2006040531A patent/JP4647514B2/ja not_active Expired - Fee Related
-
2007
- 2007-01-22 US US11/656,002 patent/US7809191B2/en not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11283012A (ja) * | 1998-03-31 | 1999-10-15 | Hitachi Software Eng Co Ltd | 陰の認識方法 |
JP2000020692A (ja) * | 1998-07-02 | 2000-01-21 | Nec Corp | 高解像度衛星データにおける影除去方法と該方法を用いた衛星データ処理装置 |
JP2002251618A (ja) * | 2001-02-23 | 2002-09-06 | Pasuko:Kk | 画像地図、その作成装置及び作成方法 |
JP2004252213A (ja) * | 2003-02-20 | 2004-09-09 | Pasuko:Kk | ポリゴン形成方法及びポリゴン形成システム |
Also Published As
Publication number | Publication date |
---|---|
US7809191B2 (en) | 2010-10-05 |
US20070195089A1 (en) | 2007-08-23 |
JP2007219231A (ja) | 2007-08-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4647514B2 (ja) | 航空画像処理装置および航空画像処理方法 | |
CN115439424B (zh) | 一种无人机航拍视频图像智能检测方法 | |
JP4717760B2 (ja) | 物体認識装置および映像物体測位装置 | |
KR102200299B1 (ko) | 3d-vr 멀티센서 시스템 기반의 도로 시설물 관리 솔루션을 구현하는 시스템 및 그 방법 | |
US20120269382A1 (en) | Object Recognition Device and Object Recognition Method | |
CN106871906B (zh) | 一种盲人导航方法、装置及终端设备 | |
CN109520500A (zh) | 一种基于终端拍摄图像匹配的精确定位及街景库采集方法 | |
US11972507B2 (en) | Orthophoto map generation method based on panoramic map | |
CN114973028B (zh) | 一种航拍视频图像实时变化检测方法及*** | |
CN116030194A (zh) | 一种基于目标检测规避的空地协同实景三维建模优化方法 | |
WO2022059603A1 (ja) | 浸水被害判定装置、浸水被害判定方法及びプログラム | |
JP3874363B1 (ja) | 位置評定装置、位置評定方法および位置評定プログラム | |
CN114544006A (zh) | 一种基于环境光照条件的低空遥感影像校正***及方法 | |
CN115112100B (zh) | 遥感控制***及方法 | |
CN115950435A (zh) | 无人机巡检影像的实时定位方法 | |
JP2003329780A (ja) | 夜間雲量測定方法および夜間雲量測定装置 | |
CN117291864A (zh) | 能见度估计装置及方法、以及记录介质 | |
CN114387532A (zh) | 边界的识别方法及其装置、终端、电子设备和无人设备 | |
CN114820485A (zh) | 一种基于机载图像测量波浪爬高的方法 | |
KR101224176B1 (ko) | 아웃도어 증강현실의 정확도 향상 시스템 및 그 방법 | |
CN111178264A (zh) | 一种用于对无人机航拍图像中铁塔塔基姿态的估计算法 | |
TW202108982A (zh) | 同步定位與建圖優化方法 | |
KR102393300B1 (ko) | 객체 지도 생성 시스템 및 그 방법 | |
JP5297366B2 (ja) | 撮影対象情報生成装置及び撮影対象情報生成プログラム | |
KR102249380B1 (ko) | 기준 영상 정보를 이용한 cctv 장치의 공간 정보 생성 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080627 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100804 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100914 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101029 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101207 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101208 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131217 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |