JP2012088538A - 画像表示装置及びプログラム - Google Patents
画像表示装置及びプログラム Download PDFInfo
- Publication number
- JP2012088538A JP2012088538A JP2010235303A JP2010235303A JP2012088538A JP 2012088538 A JP2012088538 A JP 2012088538A JP 2010235303 A JP2010235303 A JP 2010235303A JP 2010235303 A JP2010235303 A JP 2010235303A JP 2012088538 A JP2012088538 A JP 2012088538A
- Authority
- JP
- Japan
- Prior art keywords
- image
- person
- sight
- display unit
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Processing (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】図3は、表示部に表示されている目を含む画像に対して視線処理を実行した後の表示状態を示した図で、(1)は、表示部に視線を向けている人物(視認者)が居ることを検出した場合にその検出人物が単数の場合の表示例を示している。このように目を含む画像が表示されている場合に表示部に視線を向けている人物(視認者)を検出すると、表示画像内の目の視線方向を検出した人物の目の方向に一致するように表示画像内の目の画像部分を編集する。
【選択図】 図3
Description
ところで、デジタルカメラで撮影された画像を再生する装置として、デジタルフォトフレームと呼ばれる再生専用機が製品化されている。このデジタルフォトフレームは、好みの場所に設置しておくだけで、お気に入り画像(静止画)、例えば、人物やペットなどを撮影した画像、人物やペットなどを描いた画像を、いつでも自由に画像を鑑賞(視認)することができるという利点があるが、人物やペットなどの画像と視線を合わせるためにはその画像の視線方向から画像を見なければならなかった。
目を含む画像を表示する表示部を備えた画像表示装置であって、
前記表示部に視線を向けている人物が居るか否かを監視する監視手段と、
前記監視手段により前記表示部に視線を向けている人物が検出された場合に、前記表示部を基準としてその人物の目の方向を検出する検出手段と、
前記表示部に目を含む画像が表示されているか否かを判別する判別手段と、
前記検出手段により前記表示部に視線を向けている人物の目の方向が検出され、かつ、前記判別手段により前記表示部に目を含む画像が表示されていると判別された場合に、前記表示画像内の目の視線方向が前記検出された目の方向に一致するように該表示画像内の目の画像部分を編集する画像編集を行う編集手段と、
を備えることを特徴とする。
前記表示部側を撮影する撮像手段を更に備え、
前記監視手段は、前記撮像手段により撮像された画像を解析することにより前記表示部に視線を向けている人物が居るか否かを監視する、
ようにしたことを特徴とする、請求項2記載の発明であってもよい。
前記判別手段は、前記表示画像内の目の画像部分の大きさが所定値以上の場合に、前記表示部に目を含む画像が表示されていると判別する、
ようにしたことを特徴とする、請求項3記載の発明であってもよい。
前記監視手段は、前記表示部に視線を向けている人物が居る場合にその人物の数は単数か複数かを検出し、
前記検出手段は、前記監視手段により前記表示部に視線を向けている複数の人物が検出された場合に、その複数の検出人物の個々に対応してその目の方向をそれぞれ検出する、
ようにしたことを特徴とする、請求項4記載の発明であってもよい。
前記検出手段は、前記複数の検出人物の個々を所定の順番で順次指定しながら各検出人物の目の方向をそれぞれ検出し、
前記編集手段は、各検出人物が順次指定される毎に、表示画像内の目の視線方向がその検出人物の目方向に一致するように該表示画像内の目の画像部分をそれぞれ編集する処理を行う、
ようにしたことを特徴とする、請求項5記載の発明であってもよい。
前記監視手段により前記表示部に視線を向けている複数の人物が検出された場合にその複数の検出人物の年齢をそれぞれ特定する年齢特定手段を更に備え、
前記検出手段は、前記複数の検出人物の個々を所定の順番で順次指定する場合に、前記年齢特定手段により特定された年齢順に従って順次指定する、
ようにしたことを特徴とする、請求項6記載の発明であってもよい。
前記検出手段は、前記複数の検出人物の個々を所定の順番で順次指定する場合に、その複数の検出人物の並び順に従って各検出人物を順次指定する、
ようにしたことを特徴とする、請求項7記載の発明であってもよい。
前記編集手段は、前記検出手段により前記表示部に視線を向けている人物の目の方向が検出され、かつ、前記判別手段により目を含む画像が表示されていると判別された場合に所定の条件下で、前記表示画像内の目の視線方向が前記検出された目の方向に一致するように該表示画像内の目の画像部分を編集する、
ようにしたことを特徴とする、請求項8記載の発明であってもよい。
人物を記憶する人物記憶手段と、
前記監視手段により前記表示部に視線を向けている人物が検出された場合に、前記人物記憶手段を参照してその検出人物を特定する特定手段と、
を更に備え、
前記編集手段は、前記検出人物が前記人物記憶手段に記憶されている人物であることを前記所定の条件とする、
ようにしたことを特徴とする、請求項9記載の発明であってもよい。
前記編集手段は、前記表示部に表示されている目を含む画像と前記特定手段により特定された人物との対応関係を前記所定の条件とする、
ようにしたことを特徴とする、請求項10記載の発明であってもよい。
前記特定手段は、前記監視手段により前記表示部に視線を向けている人物が検出された場合に、前記表示部から距離的に近い人物を特定し、
前記編集手段は、前記特定手段により特定された距離的に近い人物を前記所定の条件とする、
ようにしたことを特徴とする、請求項11記載の発明であってもよい。
前記監視手段により前記表示部に視線を向けている人物の年齢を特定する年齢特定手段を更に備え、
前記編集手段は、前記年齢特定手段により特定された年齢が所定の年齢層であることを前記所定の条件とする、
ようにしたことを特徴とする、請求項12記載の発明であってもよい。
前記監視手段により前記表示部に視線を向けている人物の性別を推測する性別特定手段を更に備え、
前記編集手段は、前記性別特定手段により特定された性別が所定の性別であることを前記所定の条件とする、
ようにしたことを特徴とする、請求項13記載の発明であってもよい。
コンピュータに対して、
画像を表示する表示部に視線を向けている人物が居るか否かを監視する機能と、
前記表示部に視線を向けている人物が検出された場合に、前記表示部を基準としてその人物の目の方向を検出する機能と、
前記表示部に目を含む画像が表示されているか否かを判別する機能と、
前記表示部に視線を向けている人物の目の方向が検出され、かつ、前記判別の結果、前記表示部に目を含む画像が表示されていると判別された場合に、前記表示画像内の目の視線方向が前記検出された目の方向に一致するように該表示画像内の目の画像部分を編集する画像編集を行う機能と、
を実現させるためのプログラム、であることを特徴とする。
図1は、画像表示装置として適用した再生専用機としてのデジタルフォトフレームの基本的な構成要素を示したブロック図である。
デジタルフォトフレームは、例えば、全体が略長方体の薄型筐体を横長にして立て置きするスタンドタイプで、複数の画像データを順次読み出して再生するスライドショー機能、画像データを受信取得する通信機能、現在日時を計測する計時機能などを備え、制御部1を中核として動作する構成となっている。制御部1は、電源部(例えば、商用電源又は二次電池)2からの電力供給によって動作し、記憶部3内の各種のプログラムに応じてこのデジタルフォトフレームの全体動作を制御する中央演算処理装置やメモリ(図示省略)などを有している。記憶部3は、例えば、ROM、RAM、ハードディスク、フラッシュメモリなどの2以上を組み合わせた構成で、プログラム記憶部M1、画像データ記憶部M2、一時情報記憶部M3、人物記憶部M4、視線処理テーブル記憶部M5などを有している。
人物記憶部M4は、表示部4に表示されている画像を視認する可能性がある人物に関する情報を記憶するもので、図2(1)に示すように、「ID」、「性別」、「年齢」、「顔画像・特徴情報」の各項目を有し、その内容はユーザ操作により任意に設定されたものである。「ID」は、人物識別情報で、図示の例では、自分(設定者)である“X1”に対して“X2”〜X5はその家族である。「顔画像・特徴情報」は、その人物の顔を中心にして撮影した画像や顔の特徴を示した特徴情報で、人物を特定する人物認識時に使用するために事前に登録された登録情報である。
先ず、デジタルフォトフレームの動作に必要となる各種の初期設定を行った後(図4のステップA1)、表示部4に初期メニュー画面を表示させる(ステップA2)。この初期メニュー画面には、“画像一覧表示”、“スライドショー”、“設定”、“編集”などの各メニュー項目が表示され、ユーザはその中から任意の項目位置に対してタッチ操作又は操作部5上での操作を行う。いま“画像一覧表示”の項目位置をタッチする操作又は操作部5上の操作(一覧表示操作)が行われたときには(ステップA3でYES)、記憶部3内の画像データ記憶部M2に記憶されている画像データをアクセスすると共に(ステップA4)、カードIF6を介してメモリカードをアクセスし(ステップA5)、更に外部の記憶装置10に記憶されている当該ユーザ対応の画像データを通信部8からネットワーク9を介してアクセスする(ステップA6)。
先ず、制御部1は、撮像部7で撮像された画像を取得してその画像を解析しながら表示部4に視線を向けている人物(視認者)が近傍に居るかを監視し(ステップB1)、人物の顔が表示部4に向いている状態において、人物の目の方向を検出できたか、つまり、表示部4を基準としてその人物の目の方向を検出することができたかを判別する(ステップB2)。ここで、画像解析により顔の輪郭、目、口、鼻、額などの形やそれらの位置関係から人物の目を検出する。その結果、人物の目を検出することができなかった場合には(ステップB2でNO)、表示部4に視線を向けている人物が居ないと判断して、この時点で図6のフローから抜けるが、人物の目を検出することができたときには(ステップB2でYES)、表示部4に視線を向けている人物が居ると判断して、その検出人物(目を検出した人物)の数を計数して単数かを調べる(ステップB3)。
表示されている画像と対応関係にある特定の人物に対して視線合わせを行うことができる。
3 記憶部
4 表示部
5 操作部
7 撮像部
M1 プログラム記憶部
M2 画像データ記憶部
M3 一時情報記憶部
M4 人物記憶部
M5 視線処理テーブル記憶部
Claims (14)
- 目を含む画像を表示する表示部を備えた画像表示装置であって、
前記表示部に視線を向けている人物が居るか否かを監視する監視手段と、
前記監視手段により前記表示部に視線を向けている人物が検出された場合に、前記表示部を基準としてその人物の目の方向を検出する検出手段と、
前記表示部に目を含む画像が表示されているか否かを判別する判別手段と、
前記検出手段により前記表示部に視線を向けている人物の目の方向が検出され、かつ、前記判別手段により前記表示部に目を含む画像が表示されていると判別された場合に、前記表示画像内の目の視線方向が前記検出された目の方向に一致するように該表示画像内の目の画像部分を編集する画像編集を行う編集手段と、
を備えることを特徴とする画像表示装置。 - 前記表示部側を撮影する撮像手段を更に備え、
前記監視手段は、前記撮像手段により撮像された画像を解析することにより前記表示部に視線を向けている人物が居るか否かを監視する、
ようにしたことを特徴とする請求項1記載の画像表示装置。 - 前記判別手段は、前記表示画像内の目の画像部分の大きさが所定値以上の場合に、前記表示部に目を含む画像が表示されていると判別する、
ようにしたことを特徴とする請求項1あるいは請求項2記載の画像表示装置。 - 前記監視手段は、前記表示部に視線を向けている人物が居る場合にその人物の数は単数か複数かを検出し、
前記検出手段は、前記監視手段により前記表示部に視線を向けている複数の人物が検出された場合に、その複数の検出人物の個々に対応してその目の方向をそれぞれ検出する、
ようにしたことを特徴とする請求項1〜請求項3のいずれかに記載の画像表示装置。 - 前記検出手段は、前記複数の検出人物の個々を所定の順番で順次指定しながら各検出人物の目の方向をそれぞれ検出し、
前記編集手段は、各検出人物が順次指定される毎に、表示画像内の目の視線方向がその検出人物の目方向に一致するように該表示画像内の目の画像部分をそれぞれ編集する処理を行う、
ようにしたことを特徴とする請求項4記載の画像表示装置。 - 前記監視手段により前記表示部に視線を向けている複数の人物が検出された場合にその複数の検出人物の年齢をそれぞれ特定する年齢特定手段を更に備え、
前記検出手段は、前記複数の検出人物の個々を所定の順番で順次指定する場合に、前記年齢特定手段により特定された年齢順に従って順次指定する、
ようにしたことを特徴とする請求項5記載の画像表示装置。 - 前記検出手段は、前記複数の検出人物の個々を所定の順番で順次指定する場合に、その複数の検出人物の並び順に従って各検出人物を順次指定する、
ようにしたことを特徴とする請求項5記載の画像表示装置。 - 前記編集手段は、前記検出手段により前記表示部に視線を向けている人物の目の方向が検出され、かつ、前記判別手段により目を含む画像が表示されていると判別された場合に所定の条件下で、前記表示画像内の目の視線方向が前記検出された目の方向に一致するように該表示画像内の目の画像部分を編集する、
ようにしたことを特徴とする請求項1〜請求項7記載の画像表示装置。 - 人物を記憶する人物記憶手段と、
前記監視手段により前記表示部に視線を向けている人物が検出された場合に、前記人物記憶手段を参照してその検出人物を特定する特定手段と、
を更に備え、
前記編集手段は、前記検出人物が前記人物記憶手段に記憶されている人物であることを前記所定の条件とする、
ようにしたことを特徴とする請求項8記載の画像表示装置。 - 前記編集手段は、前記表示部に表示されている目を含む画像と前記特定手段により特定された人物との対応関係を前記所定の条件とする、
ようにしたことを特徴とする請求項8記載の画像表示装置。 - 前記特定手段は、前記監視手段により前記表示部に視線を向けている人物が検出された場合に、前記表示部から距離的に近い人物を特定し、
前記編集手段は、前記特定手段により特定された距離的に近い人物を前記所定の条件とする、
ようにしたことを特徴とする請求項8記載の画像表示装置。 - 前記監視手段により前記表示部に視線を向けている人物の年齢を特定する年齢特定手段を更に備え、
前記編集手段は、前記年齢特定手段により特定された年齢が所定の年齢層であることを前記所定の条件とする、
ようにしたことを特徴とする請求項8記載の画像表示装置。 - 前記監視手段により前記表示部に視線を向けている人物の性別を推測する性別特定手段を更に備え、
前記編集手段は、前記性別特定手段により特定された性別が所定の性別であることを前記所定の条件とする、
ようにしたことを特徴とする請求項8記載の画像表示装置。 - コンピュータに対して、
画像を表示する表示部に視線を向けている人物が居るか否かを監視する機能と、
前記表示部に視線を向けている人物が検出された場合に、前記表示部を基準としてその人物の目の方向を検出する機能と、
前記表示部に目を含む画像が表示されているか否かを判別する機能と、
前記表示部に視線を向けている人物の目の方向が検出され、かつ、前記判別の結果、前記表示部に目を含む画像が表示されていると判別された場合に、前記表示画像内の目の視線方向が前記検出された目の方向に一致するように該表示画像内の目の画像部分を編集する画像編集を行う機能と、
を実現させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010235303A JP5601142B2 (ja) | 2010-10-20 | 2010-10-20 | 画像表示装置、画像表示方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010235303A JP5601142B2 (ja) | 2010-10-20 | 2010-10-20 | 画像表示装置、画像表示方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012088538A true JP2012088538A (ja) | 2012-05-10 |
JP5601142B2 JP5601142B2 (ja) | 2014-10-08 |
Family
ID=46260217
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010235303A Expired - Fee Related JP5601142B2 (ja) | 2010-10-20 | 2010-10-20 | 画像表示装置、画像表示方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5601142B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103745429A (zh) * | 2013-08-22 | 2014-04-23 | 厦门美图移动科技有限公司 | 一种快速实现眼睛图像处理的方法 |
JP2014098778A (ja) * | 2012-11-14 | 2014-05-29 | Casio Comput Co Ltd | 画像処理装置、投影装置、画像選択方法及びプログラム |
JP2015142168A (ja) * | 2014-01-27 | 2015-08-03 | 大和ハウス工業株式会社 | 画像表示システム及び画像表示方法 |
CN105205779A (zh) * | 2015-09-15 | 2015-12-30 | 厦门美图之家科技有限公司 | 一种基于图像变形的眼部图像处理方法、***及拍摄终端 |
JP2018010677A (ja) * | 2013-09-24 | 2018-01-18 | シャープ株式会社 | 画像処理装置、画像表示装置およびプログラム |
US10389976B2 (en) | 2016-02-16 | 2019-08-20 | Sony Corporation | Information processing apparatus, information processing system, and information processing method |
US10762688B2 (en) | 2016-02-17 | 2020-09-01 | Sony Corporation | Information processing apparatus, information processing system, and information processing method |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH066786A (ja) * | 1992-06-22 | 1994-01-14 | A T R Tsushin Syst Kenkyusho:Kk | 視線一致補正装置 |
JPH11242733A (ja) * | 1998-02-24 | 1999-09-07 | Sanyo Electric Co Ltd | 省電力制御装置 |
JP2000137789A (ja) * | 1998-10-29 | 2000-05-16 | Sharp Corp | 画像処理装置 |
JP2001319217A (ja) * | 2000-05-09 | 2001-11-16 | Fuji Photo Film Co Ltd | 画像表示方法 |
JP2001337661A (ja) * | 2000-05-25 | 2001-12-07 | Pioneer Electronic Corp | 情報表示装置 |
JP2005117106A (ja) * | 2003-10-02 | 2005-04-28 | Nec Corp | 撮像機能付携帯電話機とその制御方法及び制御プログラム |
JP2006261785A (ja) * | 2005-03-15 | 2006-09-28 | Pioneer Electronic Corp | 消費電力量制御装置、電子機器 |
JP2008236550A (ja) * | 2007-03-22 | 2008-10-02 | Matsushita Electric Works Ltd | 映像表示装置 |
JP2010102235A (ja) * | 2008-10-27 | 2010-05-06 | V-Sync Co Ltd | 電子広告システム |
-
2010
- 2010-10-20 JP JP2010235303A patent/JP5601142B2/ja not_active Expired - Fee Related
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH066786A (ja) * | 1992-06-22 | 1994-01-14 | A T R Tsushin Syst Kenkyusho:Kk | 視線一致補正装置 |
JPH11242733A (ja) * | 1998-02-24 | 1999-09-07 | Sanyo Electric Co Ltd | 省電力制御装置 |
JP2000137789A (ja) * | 1998-10-29 | 2000-05-16 | Sharp Corp | 画像処理装置 |
JP2001319217A (ja) * | 2000-05-09 | 2001-11-16 | Fuji Photo Film Co Ltd | 画像表示方法 |
JP2001337661A (ja) * | 2000-05-25 | 2001-12-07 | Pioneer Electronic Corp | 情報表示装置 |
JP2005117106A (ja) * | 2003-10-02 | 2005-04-28 | Nec Corp | 撮像機能付携帯電話機とその制御方法及び制御プログラム |
JP2006261785A (ja) * | 2005-03-15 | 2006-09-28 | Pioneer Electronic Corp | 消費電力量制御装置、電子機器 |
JP2008236550A (ja) * | 2007-03-22 | 2008-10-02 | Matsushita Electric Works Ltd | 映像表示装置 |
JP2010102235A (ja) * | 2008-10-27 | 2010-05-06 | V-Sync Co Ltd | 電子広告システム |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014098778A (ja) * | 2012-11-14 | 2014-05-29 | Casio Comput Co Ltd | 画像処理装置、投影装置、画像選択方法及びプログラム |
CN103745429A (zh) * | 2013-08-22 | 2014-04-23 | 厦门美图移动科技有限公司 | 一种快速实现眼睛图像处理的方法 |
CN103745429B (zh) * | 2013-08-22 | 2015-01-21 | 厦门美图移动科技有限公司 | 一种快速实现眼睛图像处理的方法 |
JP2018010677A (ja) * | 2013-09-24 | 2018-01-18 | シャープ株式会社 | 画像処理装置、画像表示装置およびプログラム |
JP2015142168A (ja) * | 2014-01-27 | 2015-08-03 | 大和ハウス工業株式会社 | 画像表示システム及び画像表示方法 |
CN105205779A (zh) * | 2015-09-15 | 2015-12-30 | 厦门美图之家科技有限公司 | 一种基于图像变形的眼部图像处理方法、***及拍摄终端 |
CN105205779B (zh) * | 2015-09-15 | 2018-10-19 | 厦门美图之家科技有限公司 | 一种基于图像变形的眼部图像处理方法、***及拍摄终端 |
US10389976B2 (en) | 2016-02-16 | 2019-08-20 | Sony Corporation | Information processing apparatus, information processing system, and information processing method |
US10762688B2 (en) | 2016-02-17 | 2020-09-01 | Sony Corporation | Information processing apparatus, information processing system, and information processing method |
Also Published As
Publication number | Publication date |
---|---|
JP5601142B2 (ja) | 2014-10-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3079082B1 (en) | Method and apparatus for album display | |
JP5601142B2 (ja) | 画像表示装置、画像表示方法及びプログラム | |
EP3143477B1 (en) | System and method for providing haptic feedback to assist in capturing images | |
EP3489805B1 (en) | Method, apparatus and storage medium for searching for an object | |
KR102039427B1 (ko) | 스마트 글라스 | |
US10075629B2 (en) | Electronic device for capturing images while user looks directly at camera | |
CN107273004B (zh) | 图像显示装置、图像显示控制方法以及记录介质 | |
KR20160000741A (ko) | 글래스 타입 단말기 및 이의 제어방법 | |
WO2017020476A1 (zh) | 关联用户的确定方法及装置 | |
WO2017124899A1 (zh) | 一种信息处理方法及装置、电子设备 | |
US20180376121A1 (en) | Method and electronic device for displaying panoramic image | |
US10769743B2 (en) | Method, device and non-transitory storage medium for processing clothes information | |
US10013623B2 (en) | System and method for determining the position of an object displaying media content | |
JP2011243108A (ja) | 電子ブック装置及び電子ブック操作方法 | |
KR20210110068A (ko) | 제스처 인식 기반의 영상 편집 방법 및 이를 지원하는 전자 장치 | |
US9148537B1 (en) | Facial cues as commands | |
JP6570840B2 (ja) | 電子機器および方法 | |
CN105094297A (zh) | 显示内容的缩放方法及装置 | |
CN105426904A (zh) | 照片处理方法、装置和设备 | |
KR20190135794A (ko) | 이동 단말기 | |
US11551452B2 (en) | Apparatus and method for associating images from two image streams | |
JP2011159000A (ja) | 画像表示装置、画像表示方法および画像表示プログラム | |
JP5633296B2 (ja) | 画像制御装置及びプログラム | |
JP5477025B2 (ja) | 画像表示装置、及びプログラム | |
JP6873397B2 (ja) | 画像表示装置、画像表示制御方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130920 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140224 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140227 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140424 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140519 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140702 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140722 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140804 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5601142 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |