JP7095691B2 - 情報処理装置、情報処理方法、および記憶媒体 - Google Patents
情報処理装置、情報処理方法、および記憶媒体 Download PDFInfo
- Publication number
- JP7095691B2 JP7095691B2 JP2019519475A JP2019519475A JP7095691B2 JP 7095691 B2 JP7095691 B2 JP 7095691B2 JP 2019519475 A JP2019519475 A JP 2019519475A JP 2019519475 A JP2019519475 A JP 2019519475A JP 7095691 B2 JP7095691 B2 JP 7095691B2
- Authority
- JP
- Japan
- Prior art keywords
- person
- information processing
- unit
- sensor data
- opening
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
- B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
- B65F—GATHERING OR REMOVAL OF DOMESTIC OR LIKE REFUSE
- B65F1/00—Refuse receptacles; Accessories therefor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
- B65F—GATHERING OR REMOVAL OF DOMESTIC OR LIKE REFUSE
- B65F1/00—Refuse receptacles; Accessories therefor
- B65F1/14—Other constructional features; Accessories
- B65F1/16—Lids or covers
-
- E—FIXED CONSTRUCTIONS
- E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
- E05B—LOCKS; ACCESSORIES THEREFOR; HANDCUFFS
- E05B65/00—Locks or fastenings for special use
- E05B65/0042—For refrigerators or cold rooms
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D23/00—General constructional features
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D23/00—General constructional features
- F25D23/02—Doors; Covers
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
- G08B21/24—Reminder alarms, e.g. anti-loss alarms
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K15/00—Acoustics not otherwise provided for
- G10K15/02—Synthesis of acoustic waves
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/043—Identity of occupants
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- General Physics & Mathematics (AREA)
- Combustion & Propulsion (AREA)
- Chemical & Material Sciences (AREA)
- Transportation (AREA)
- Thermal Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Emergency Management (AREA)
- Business, Economics & Management (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Acoustics & Sound (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Emergency Alarm Devices (AREA)
- Alarm Systems (AREA)
- Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
- Refuse Collection And Transfer (AREA)
- Traffic Control Systems (AREA)
Description
1.本開示の一実施形態による情報処理システムの概要
2.基本構成および動作処理
2-1.情報処理装置の構成
2-2.動作処理
3.各実施例
3-1.第1の実施例
(3-1-1.構成)
(3-1-2.動作処理)
3-2.第2の実施例
(3-2-1.構成)
(3-2-2.動作処理)
3-3.第3の実施例
(3-3-1.構成)
(3-3-2.動作処理)
3-4.補足
(3-4-1.システム構成)
(3-4-2.応用例)
4.まとめ
図1は、本開示の一実施形態による情報処理システムの概要について説明する図である。本実施形態による情報処理システムでは、違反前の動作を制限することで、違反行為の抑止効果を高めることを可能とする。より具体的には、例えば図1の上段に示すように、運転者がイグニッションキーを回してエンジンを掛けようとした際、当該運転者の運転履歴に基づいて過去の交通ルール違反回数等を参照し、今回もルール違反を行う可能性が高いと判断した場合、交通違反行為の前段階の動作である(エンジンを掛けるための)イグニッション動作を制限する。例えばイグニッションキーが回らないようにしたり、回ってもエンジンが掛からないようにすることで、動作を制限する。これによりユーザの動作を一旦停止させて注意を引き、交通ルールを遵守するよう、音声やテキストで注意喚起することで、違反行為を行う前に運転者に交通ルールを思い出させて、ルールの遵守をより強く促すことができる。
<2-1.情報処理装置1の構成>
図2は、本実施形態による情報処理装置1の構成の一例を示すブロック図である。図2に示すように、情報処理装置1は、制御部10、センサ11、出力部12、制限アクチュエータ13、および記憶部14を有する。
センサ11は、各種情報を検知し、検知した情報(センサデータ)を制御部10に出力する。センサ11は、例えば、カメラ、音声入力部(マイクロホン)、人感センサ、生体センサ(脈拍、静脈、心拍、血圧、体温、発汗、呼吸、筋電値、または脳波等のセンサ)、モーションセンサ(加速度センサ、ジャイロセンサ、地磁気センサ等)、開閉センサ、環境センサ(気温、湿度、照度、雨、または風等のセンサ)、位置測位部等により実現され得る。
出力部12は、注意喚起部104の制御に従って、ユーザへの注意喚起を通知する通知部に相当する。出力部12は、音声出力部(スピーカ)や、表示部、投影部等により実現され得る。
制限アクチュエータ13は、動作制限部102の制御に従って対象物の動作を制限し、実質的に違反行為前のユーザによる対象物への動作を制限する機構を有する。例えば、自動車のエンジン始動動作を制限する場合、イグニッションキーがSTART位置(点火およびエンジンを始動させる位置)に回らないようロックしたり、START位置に回っても点火させないようにする機構により実現される。
記憶部14は、制御部10の処理に用いられるプログラムや演算パラメータ等を記憶するROM(Read Only Memory)、および適宜変化するパラメータ等を一時記憶するRAM(Random Access Memory)により実現される。
続いて、図3を参照して本実施形態による情報処理システムの動作処理について説明する。図3は、本実施形態による情報処理システムの動作処理を示すフローチャートである。
続いて、本実施形態による情報処理システムについて、複数の実施例を用いて具体的に説明する。
まず、図4~図8を参照して第1の実施例について説明する。第1の実施例では、街や自宅に設置されたゴミ収集箱(情報処理装置1)へのゴミ捨てルール違反の抑止について説明する。通常、所定の日時に自治体等の清掃局がゴミを回収しに来るため、ゴミ捨ての曜日や日時が地域毎にルールとして定められていることが想定される。
図4は、本実例による情報処理装置1A(ゴミ収集箱)の外観構成図である。図4に示すように、情報処理装置1Aは、内部にゴミを収納する収納部を有する形状であって、収納部の開口部を開閉する蓋部151が設けられている。また、情報処理装置1Aには、センサ11の一例としてゴミ収集箱に近付く人を捉えるためのカメラ111が設けられている。また、出力部12の一例として、表示部121および音声出力部122が設けられている。
制御部10Aは、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置1A内の動作全般を制御する。制御部10Aは、例えばCPU(Central Processing Unit)、マイクロプロセッサ等の電子回路によって実現される。また、制御部10Aは、使用するプログラムや演算パラメータ等を記憶するROM(Read Only Memory)、及び適宜変化するパラメータ等を一時記憶するRAM(Random Access Memory)を含んでいてもよい。
カメラ111Aは、撮像レンズ、絞り、ズームレンズ、およびフォーカスレンズ等により構成されるレンズ系、レンズ系に対してフォーカス動作やズーム動作を行わせる駆動系、レンズ系で得られる撮像光を光電変換して撮像信号を生成する固体撮像素子アレイ等を有する。固体撮像素子アレイは、例えばCCD(Charge Coupled Device)センサアレイや、CMOS(Complementary Metal Oxide Semiconductor)センサアレイにより実現されてもよい。カメラ111Aは可動式であってもよい。
蓋部のタッチセンサ112Aは、情報処理装置1Aの蓋部151に設けられ、蓋部151(具体的には、蓋部151の取っ手など)にユーザが触れことを検知する。
音声入力部113は、マイクロホンと、そのマイクロホンで得られた音声信号を増幅処理するマイクアンプ部と、音声信号にデジタル変換するA/D変換器により実現され、音声信号を制御部10Aに出力する。
操作入力部114は、ユーザによる操作指示を受付け、その操作内容を制御部10Aに出力する。操作入力部114は、タッチセンサ、圧力センサ、若しくは近接センサであってもよい。あるいは、操作入力部114は、ボタン、スイッチ、およびレバーなど、物理的構成であってもよい。
表示部121Aは、応答生成部1041Aにより生成された応答情報であるルール表示や注意勧告表示を出力する表示装置である。表示部121Aは、例えば蓋部151の取っ手付近など、ゴミを捨てようとしているユーザの視界に入る位置に設けられる。また、表示部121Aは、例えば、液晶ディスプレイ(LCD:Liquid Crystal Display)、有機EL((Electro Luminescence)ディスプレイなどの表示装置であってもよい。
音声出力部122Aは、音声信号を再生するスピーカと、スピーカに対するアンプ回路を有する。
蓋部の電磁ロック部131Aは、通電状態に応じて蓋部151をロックする機構により実現される。電磁ロック部131Aの具体的な機構は特に限定しないが、例えば通電時施錠型のロック機構(例えば電磁ソレノイドに通電することでロックし、ばねの力でロックが解除される機構。通電OFF時にはロック機能はなくなる)であってもよい。また、ロック機構の一例として電磁ロックを用いる場合について説明したが、本実施例はこれに限定されない。
顔画像データベース141Aには、予め登録された住人(ここでは、少なくともゴミ捨てを行う人物)の顔画像情報が登録されている。また、顔画像データベース141Aには、顔画像に紐付けてユーザ情報(個人ID、部屋番号、住所、氏名等)が登録されていてもよい。
ゴミ捨て履歴データベース142Aには、ゴミ捨てに関する各ユーザの履歴情報が記憶されている。
ゴミ出しルールデータベース143Aには、ゴミ出しルールに関する情報が記憶されている。
図6は、第1の実施例による情報処理装置1A(ゴミ収集箱)の動作処理を示すフローチャートである。図6に示すように、まず、情報処理装置1Aは、カメラ111Aにより、ゴミ箱(ここでは、情報処理装置1Aが相当する)周辺を監視する(ステップS203)。
また、本実施例による情報処理装置1Aは、住人のルール違反履歴に基づいて、頻繁にルール違反を行う人物に対して注意勧告を行うようにすることも可能である。以下、図7を参照して具体的に説明する。
次に、本実施形態による第2の実施例について、図9~図12を参照して説明する。第2の実施例では、冷蔵庫の開閉を制限することで、ダイエット効果を高めること(食べ過ぎ防止)を可能とする。
制御部10Bは、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置1B内の動作全般を制御する。制御部10Bは、例えばCPU(Central Processing Unit)、マイクロプロセッサ等の電子回路によって実現される。また、制御部10Bは、使用するプログラムや演算パラメータ等を記憶するROM(Read Only Memory)、及び適宜変化するパラメータ等を一時記憶するRAM(Random Access Memory)を含んでいてもよい。
カメラ111Bは、撮像レンズ、絞り、ズームレンズ、およびフォーカスレンズ等により構成されるレンズ系、レンズ系に対してフォーカス動作やズーム動作を行わせる駆動系、レンズ系で得られる撮像光を光電変換して撮像信号を生成する固体撮像素子アレイ等を有する。固体撮像素子アレイは、例えばCCD(Charge Coupled Device)センサアレイや、CMOS(Complementary Metal Oxide Semiconductor)センサアレイにより実現されてもよい。カメラ111Bは可動式であってもよい。
扉部のタッチセンサ112Bは、情報処理装置1Bの扉部に設けられ、扉部(具体的には、扉部の取っ手など)にユーザが触れことを検知する。
表示部121Bは、応答生成部1041Bにより生成された応答情報である注意勧告表示を出力する表示装置である。表示部121Bは、例えば扉部の取っ手付近など、冷蔵庫の扉を開けようとしているユーザの視界に入る位置に設けられる。また、表示部121Bは、例えば、液晶ディスプレイ(LCD:Liquid Crystal Display)、有機EL((Electro Luminescence)ディスプレイなどの表示装置であってもよい。
音声出力部122Bは、音声信号を再生するスピーカと、スピーカに対するアンプ回路を有する。
扉部の電磁ロック部131Bは、通電状態に応じて扉部をロックする機構により実現される。電磁ロック部131Bの具体的な機構は特に限定しないが、例えば通電時施錠型のロック機構(例えば電磁ソレノイドに通電することでロックし、ばねの力でロックが解除される機構。通電OFF時にはロック機能はなくなる)であってもよい。また、ロック機構の一例として電磁ロックを用いる場合について説明したが、本実施例はこれに限定されない。
顔画像データベース141Bには、予め登録された冷蔵庫の利用者(例えば、家族)の顔画像情報が登録されている。また、顔画像データベース141Bには、顔画像に紐付けてユーザ情報(個人ID、氏名等)が登録されていてもよい。
扉開閉履歴データベース142Bには、扉の開閉に関する各ユーザの履歴情報が記憶されている。
図11は、第2の実施例による情報処理装置1B(冷蔵庫)の動作処理を示すフローチャートである。図11に示すように、まず、情報処理装置1Bは、カメラ111Bにより、冷蔵庫(ここでは、情報処理装置1Bが相当する)周辺を監視する(ステップS303)。
次いで、本実施形態による第3の実施例について、図13~図15を参照して説明する。第3の実施例では、自動車運転時における交通ルール違反の抑止について説明する(本実施例では、移動体の一例として自動車を用いる)。交通ルール違反としては、例えば一時停止無視、信号無視、飲酒運転、運転通信部の手持ち通話、シートベルト未装着、方向指示器を用いずに車線変更、スピード違反、急加速・急発進、車間距離、よそ見、長時間運転等、法律上違反となる行為の他、危険運転もルール違反に含まれる。本実施例では、一例として「スピード違反」の抑止について説明する。
図14は、本実施例による情報処理装置1C(自動車)の内部構成図である。図14に示すように、情報処理装置1Cは、制御部10C、カメラ111C、車載センサ112C、表示部121C、音声出力部122C、イグニッションのロック部131C、顔画像データベース141C、運転履歴データベース142C、および交通ルールデータベース143Cを有する。
制御部10Cは、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置1C内の動作全般を制御する。制御部10Cは、例えばCPU(Central Processing Unit)、マイクロプロセッサ等の電子回路によって実現される。また、制御部10Cは、使用するプログラムや演算パラメータ等を記憶するROM(Read Only Memory)、及び適宜変化するパラメータ等を一時記憶するRAM(Random Access Memory)を含んでいてもよい。
カメラ111Cは、撮像レンズ、絞り、ズームレンズ、およびフォーカスレンズ等により構成されるレンズ系、レンズ系に対してフォーカス動作やズーム動作を行わせる駆動系、レンズ系で得られる撮像光を光電変換して撮像信号を生成する固体撮像素子アレイ等を有する。固体撮像素子アレイは、例えばCCD(Charge Coupled Device)センサアレイや、CMOS(Complementary Metal Oxide Semiconductor)センサアレイにより実現されてもよい。カメラ111Cは可動式であってもよい。
車載センサ112Cは、自動車に載置されている各種センサを含む。例えば車載センサ112Cは、位置測位部やスピード検知部等が含まれる。
表示部121Cは、応答生成部1041Cにより生成された応答情報であるルール表示や注意勧告表示を出力する表示装置である。表示部121Cは、例えば運転席周辺など、運転者の視界に入る位置に設けられる。また、表示部121Cは、例えば、液晶ディスプレイ(LCD:Liquid Crystal Display)、有機EL((Electro Luminescence)ディスプレイなどの表示装置であってもよい。
音声出力部122Cは、音声信号を再生するスピーカと、スピーカに対するアンプ回路を有する。
イグニッションのロック部131Cは、イグニッション動作を制限する。例えばイグニッションキー(すなわち移動体(自動車等)の起動キー)がSTART位置(点火位置)に回らないようロックしたり、START位置に回っても点火させないようにする。若しくは、イグニッションスイッチ(プッシュ式など)を押せないようロックしたり、押されても点火しないようにする。
顔画像データベース141Cには、予め登録されたユーザ(運転者)の顔画像情報が登録されている。また、顔画像データベース141Cには、顔画像に紐付けてユーザ情報(個人ID、年齢、氏名等)が登録されていてもよい。
運転履歴データベース142Cには、運転に関する各ユーザの履歴情報が記憶されている。例えば運転履歴データベース142Cには、交通ルール違反を行った日時と場所を記録する。本実施例では一例として、スピード超過(法定速度を超える速度での走行)を行った場所と日時が記録される。
交通ルールデータベース143Cには、交通ルールに関する情報が記憶されている。
図15は、第3の実施例による情報処理装置1C(自動車)の動作処理を示すフローチャートである。図15に示すように、まず、情報処理装置1Cは、カメラ111Cにより、運転席を監視する(ステップS403)。
(3-4-1.システム構成)
本実施形態による情報処理装置1は、情報処理端末とサーバとから成るシステム構成により実現されてもよい。
情報処理端末1Xは、制御部10X、センサ11X、出力部12X、制限アクチュエータ13X、記憶部14X、および通信部16Xを有する。
サーバ2は、制御部20、通信部21、および記憶部22を有する。
上述した各実施例では、対象物の動作制限として、ゴミ捨て収納箱の蓋部の開閉制限、冷蔵庫の扉の開閉制限、および自動車のイグニッション動作制限を挙げて説明したが本実施形態はこれに限定されない。
上述したように、本開示の実施形態による情報処理システムでは、違反前の動作を制限することで、違反行為の抑止効果を高めることが可能となる。
(1)
センサから出力されるセンサデータを取得するセンサデータ取得部と、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する制御部と、
を備える、情報処理装置。
(2)
前記制御部は、
前記センサデータに基づいて前記対象物に近接する人物を検出し、且つ、検出した人物が前記対象物を動作させた後に所定のルールを破る可能性があると推定される根拠となる情報を取得すると、
前記対象物の動作を制限し、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する、前記(1)に記載の情報処理装置。
(3)
前記所定のルールを破る可能性があると推定される根拠となる情報は、前記検出した人物の過去の行動履歴または現在の日時である、前記(2)に記載の情報処理装置。
(4)
前記制御部は、
前記検出した人物が、収納部の開閉部を開放した後に所定のルールを破る可能性があると推定すると、
前記収納部の開閉部をロックし、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後、前記収納部の開閉部のロックを解除するように制御する、前記(2)または(3)に記載の情報処理装置。
(5)
前記制御部は、
前記センサデータに基づき、前記対象物に近接する人物を特定し、
当該特定された人物の過去の行動履歴から、前記人物が、前記対象物を動作させた後に所定のルールを破る可能性があると推定すると、
前記対象物の動作を制限し、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する、前記(2)~(4)のいずれか1項に記載の情報処理装置。
(6)
前記制御部は、
前記センサデータに基づき、収納部に近接する人物を特定し、
当該特定された人物の過去の行動履歴から、前記人物が、前記収納部の開閉部を開放した後に所定のルールを破る可能性があると推定すると、
前記収納部の開閉部をロックし、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後に、前記収納部の開閉部のロックを解除するように制御する、前記(2)~(5)のいずれか1項に記載の情報処理装置。
(7)
前記対象物は、ゴミ収集箱であって、
前記制御部は、
ゴミ収集箱に接近する人物を検出し、当該人物がゴミ収集箱の蓋部を開放した後にゴミ出しルールを破る可能性があると推定すると、
前記ゴミ収集箱の蓋部をロックし、前記通知部を介して前記ゴミ出しルールを守るように注意喚起の通知を行った後に、前記ゴミ収集箱の蓋部のロックを解除するよう制御する、前記(2)~(6)のいずれか1項に記載の情報処理装置。
(8)
前記制御部は、
現在の日時とゴミ出しルールで規定されているゴミ出しの日時に基づいて、検出した人物がゴミ収集箱の蓋部を開放した後にゴミ出しルールを破る可能性があるか推定する、前記(7)に記載の情報処理装置。
(9)
前記制御部は、
前記検出した人物を特定し、特定した人物の過去のゴミ出しルール違反履歴に基づいて、当該人物がゴミ収集箱の蓋部を開放した後にゴミ出しルールを破る可能性があるか推定する、前記(7)に記載の情報処理装置。
(10)
前記対象物は、冷蔵庫であって、
前記制御部は、
冷蔵庫に接近する人物を検出し、当該人物が冷蔵庫の扉部を開放した後に食べ過ぎる可能性があると推定すると、
前記冷蔵庫の扉部をロックし、前記通知部を介して食べ過ぎないよう注意喚起の通知を行った後に、前記冷蔵庫の扉部のロックを解除するよう制御する、前記(2)~(6)のいずれか1項に記載の情報処理装置。
(11)
前記制御部は、
前記検出した人物を特定し、特定した人物の過去の扉開閉履歴に基づいて、当該人物が食べ過ぎである可能性があるか推定する、前記(10)に記載の情報処理装置。
(12)
前記対象物は、移動体であって、
前記制御部は、
前記センサデータに基づき、前記移動体を起動させる人物を特定し、
当該特定された人物の過去の行動履歴から、前記人物が前記移動体を起動させた後に所定のルールを破る可能性があると推定すると、
前記移動体の起動を制限し、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後に、前記移動体の起動の制限を解除するように制御する、前記(2)~(5)のいずれか1項に記載の情報処理装置。
(13)
前記制御部は、
前記移動体の起動制限として、起動キー、ボタン、またはスイッチの物理的な動作制限、または、エンジンの点火動作の制限を行う、前記(12)に記載の情報処理装置。
(14)
前記制御部は、
前記移動体である自動車の運転を行う人物を特定し、当該特定した人物の過去の交通ルール違反履歴に基づいて、当該人物が運転を開始した後に交通ルールを破る可能性があるか推定する、前記(12)または(13)に記載の情報処理装置。
(15)
前記制御部は、
前記センサデータに基づき、前記人物の手が前記対象物に近接したことを検出した際に、前記対象物を動作させた後に所定のルールを破る可能性がある当該人物への注意喚起の通知を行うよう制御する、前記(2)~(14)のいずれか1項に記載の情報処理装置。
(16)
前記対象物は、音楽再生装置であって、
前記制御部は、
前記センサデータに基づき、前記音楽再生装置を起動させる人物を特定し、
当該特定された人物の過去の音量調整履歴から、前記人物が前記音楽再生装置で音楽を再生させた後に所定値を超える音量で聴取する可能性があると推定すると、
前記音楽再生装置の再生動作を制限し、前記通知部を介して適切な音量で聴取するよう注意喚起の通知を行った後に、前記音楽再生装置の再生動作の制限を解除するように制御する、前記(2)または(3)に記載の情報処理装置。
(17)
プロセッサが、
センサから出力されるセンサデータを取得することと、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御することと、
を含む、情報処理方法。
(18)
コンピュータを、
センサから出力されるセンサデータを取得するセンサデータ取得部と、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する制御部と、
として機能させるためのプログラムが記憶された、コンピュータ読み取り可能な記憶媒体。
1X 情報処理端末
2 サーバ
3 ネットワーク
10、10A、10B、10C、10X 制御部
11、11X センサ
12、12X 出力部
13、13X 制限アクチュエータ
14、14X 記憶部
16X 通信部
20 制御部
21 通信部
22 記憶部
101 人物認識部
102 動作制限部
104 注意喚起部
111、111A、111B、111C カメラ
112A 蓋部のタッチセンサ
112B 扉部のタッチセンサ
112C 車載センサ
113 音声入力部
114 操作入力部
121、121A、121B、121C 表示部
122、122A、122B、122C 音声出力部
131A 蓋部の電磁ロック部
131B 扉部の電磁ロック部
131C イグニッションのロック部
141A、141B、141C 顔画像データベース
142A ゴミ捨て履歴データベース
142B 扉開閉履歴データベース
142C 運転履歴データベース
143A ゴミ出しルールデータベース
143C 交通ルールデータベース
151 蓋部
155 イグニッションキー
201 人物認識部
202 動作制限部
204 注意喚起部
1011A、1011B、1011C 顔認識部
1021A 蓋部開閉制限部
1021B 扉部開閉制限部
1021C イグニッション制限部
1031、1031A、1031B、1031C 履歴管理部
1041A、1041B、1041C 応答生成部
1051A、1051B、1051C RTC
Claims (16)
- センサから出力されるセンサデータを取得するセンサデータ取得部と、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する制御部と、
を備え、
前記制御部は、
前記センサデータに基づいて、前記対象物である収納部に近接する人物を検出し、且つ、検出した前記人物が、前記収納部の開閉部を開放した後に所定のルールを破る可能性があると推定される根拠となる情報を取得し、取得した情報に基づいて、前記収納部の開閉部を開放した後に前記所定のルールを破る可能性があると推定すると、
前記収納部の開閉部をロックすることにより前記対象物の動作を制限し、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後に、前記収納部の開閉部のロックを解除するように制御する、
情報処理装置。 - 前記所定のルールを破る可能性があると推定される根拠となる情報は、前記検出した人物の過去の行動履歴または現在の日時である、請求項1に記載の情報処理装置。
- センサから出力されるセンサデータを取得するセンサデータ取得部と、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する制御部と、
を備え、
前記制御部は、
前記センサデータに基づいて前記対象物に近接する人物を検出し、且つ、特定し、
特定された前記人物の過去の行動履歴を取得し、取得した前記行動履歴から、前記人物が、前記対象物を動作させた後に所定のルールを破る可能性があると推定すると、
前記対象物の動作を制限し、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する、
情報処理装置。 - センサから出力されるセンサデータを取得するセンサデータ取得部と、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する制御部と、
を備え、
前記制御部は、
前記センサデータに基づき、収納部に近接する人物を検出し、且つ、特定し、
特定された前記人物の過去の行動履歴を取得し、取得した前記行動履歴から、前記人物が、前記収納部の開閉部を開放した後に所定のルールを破る可能性があると推定すると、
前記収納部の開閉部をロックし、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後に、前記収納部の開閉部のロックを解除するように制御する、
情報処理装置。 - センサから出力されるセンサデータを取得するセンサデータ取得部と、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する制御部と、
を備え、
前記対象物は、ゴミ収集箱であって、
前記制御部は、
ゴミ収集箱に接近する人物を検出し、当該人物がゴミ収集箱の蓋部を開放した後にゴミ出しルールを破る可能性があると推定される情報を取得したことに基づき、当該人物がゴミ収集箱の蓋部を開放した後にゴミ出しルールを破る可能性があると推定すると、
前記ゴミ収集箱の蓋部をロックし、前記通知部を介して前記ゴミ出しルールを守るように注意喚起の通知を行った後に、前記ゴミ収集箱の蓋部のロックを解除するよう制御する、
情報処理装置。 - 前記制御部は、
現在の日時とゴミ出しルールで規定されているゴミ出しの日時に基づいて、検出した人物がゴミ収集箱の蓋部を開放した後にゴミ出しルールを破る可能性があるか推定する、請求項5に記載の情報処理装置。 - 前記制御部は、
前記検出した人物を特定し、特定した人物の過去のゴミ出しルール違反履歴に基づいて、当該人物がゴミ収集箱の蓋部を開放した後にゴミ出しルールを破る可能性があるか推定する、請求項5に記載の情報処理装置。 - 前記対象物は、冷蔵庫であって、
前記制御部は、
冷蔵庫に接近する人物を検出し、当該人物が冷蔵庫の扉部を開放した後に食べ過ぎる可能性があると推定すると、
前記冷蔵庫の扉部をロックし、前記通知部を介して食べ過ぎないよう注意喚起の通知を行った後に、前記冷蔵庫の扉部のロックを解除するよう制御する、請求項1~4のいずれか1項に記載の情報処理装置。 - 前記制御部は、
前記検出した人物を特定し、特定した人物の過去の扉開閉履歴に基づいて、当該人物が食べ過ぎである可能性があるか推定する、請求項8に記載の情報処理装置。 - センサから出力されるセンサデータを取得するセンサデータ取得部と、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する制御部と、
を備え、
前記対象物は、移動体であって、
前記制御部は、
前記センサデータに基づき、前記移動体を起動させるための動作を行った人物を検出し、且つ、当該人物を特定し、
特定された前記人物の過去の行動履歴から、前記人物が前記移動体を起動させた後に所定のルールを破る可能性があると推定すると、
前記移動体の起動を制限し、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後に、前記移動体の起動の制限を解除するように制御する、
情報処理装置。 - 前記制御部は、
前記移動体の起動制限として、起動キー、ボタン、またはスイッチの物理的な動作制限、または、エンジンの点火動作の制限を行う、請求項10に記載の情報処理装置。 - 前記制御部は、
前記移動体である自動車の運転を行う人物を特定し、特定した前記人物の過去の交通ルール違反履歴に基づいて、当該人物が運転を開始した後に交通ルールを破る可能性があるか推定する、請求項10又は11に記載の情報処理装置。 - 前記制御部は、
前記センサデータに基づき、前記人物の手が前記対象物に近接したことを検出した際に、前記対象物を動作させた後に所定のルールを破る可能性がある当該人物への注意喚起の通知を行うよう制御する、請求項1~12のいずれか1項に記載の情報処理装置。 - センサから出力されるセンサデータを取得するセンサデータ取得部と、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する制御部と、
を備え、
前記対象物は、音楽再生装置であって、
前記制御部は、
前記センサデータに基づき、前記音楽再生装置を起動させる動作を行った人物を検出し、且つ、当該人物を特定し、
特定された前記人物の過去の音量調整履歴から、前記人物が前記音楽再生装置で音楽を再生させた後に所定値を超える音量で聴取する可能性があると推定すると、
前記音楽再生装置の再生動作を制限し、前記通知部を介して適切な音量で聴取するよう注意喚起の通知を行った後に、前記音楽再生装置の再生動作の制限を解除するように制御する、
情報処理装置。 - プロセッサが、
センサから出力されるセンサデータを取得することと、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御することと、
を含む、情報処理方法であって、
前記プロセッサが、
前記センサデータに基づいて、前記対象物である収納部に近接する人物を検出し、且つ、検出した前記人物が、前記収納部の開閉部を開放した後に所定のルールを破る可能性があると推定される根拠となる情報を取得し、取得した情報に基づいて、前記収納部の開閉部を開放した後に前記所定のルールを破る可能性があると推定すると、
前記収納部の開閉部をロックすることにより前記対象物の動作を制限し、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後に、前記収納部の開閉部のロックを解除するように制御することをさらに含む、
情報処理方法。 - コンピュータを、
センサから出力されるセンサデータを取得するセンサデータ取得部と、
前記センサデータに基づき、対象物を動作させた後に所定のルールを破る可能性がある人物を検出すると、前記対象物の動作を制限し、通知部を介して前記所定のルールに基づいて注意喚起の通知を行った後に、前記対象物の動作の制限を解除するように制御する制御部と、
として機能させるためのプログラムが記憶された、コンピュータ読み取り可能な記憶媒体であって、
前記制御部は、
前記センサデータに基づいて、前記対象物である収納部に近接する人物を検出し、且つ、検出した前記人物が、前記収納部の開閉部を開放した後に所定のルールを破る可能性があると推定される根拠となる情報を取得し、取得した情報に基づいて、前記収納部の開閉部を開放した後に前記所定のルールを破る可能性があると推定すると、
前記収納部の開閉部をロックすることにより前記対象物の動作を制限し、前記通知部を介して前記所定のルールを守るように注意喚起の通知を行った後に、前記収納部の開閉部のロックを解除するように制御する、
記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017104720 | 2017-05-26 | ||
JP2017104720 | 2017-05-26 | ||
PCT/JP2018/007857 WO2018216299A1 (ja) | 2017-05-26 | 2018-03-01 | 情報処理装置、情報処理方法、および記憶媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018216299A1 JPWO2018216299A1 (ja) | 2020-04-02 |
JP7095691B2 true JP7095691B2 (ja) | 2022-07-05 |
Family
ID=64396473
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019519475A Active JP7095691B2 (ja) | 2017-05-26 | 2018-03-01 | 情報処理装置、情報処理方法、および記憶媒体 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11835931B2 (ja) |
JP (1) | JP7095691B2 (ja) |
WO (1) | WO2018216299A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7388097B2 (ja) * | 2019-09-27 | 2023-11-29 | 日本電気株式会社 | 情報処理装置、情報処理システム、情報処理方法、及びプログラム |
WO2021225143A1 (ja) * | 2020-05-07 | 2021-11-11 | ジェネクスト株式会社 | 運転支援システム |
EP4002038A1 (de) * | 2020-11-13 | 2022-05-25 | VEGA Grieshaber KG | Vorrichtung zum schützen eines zugriffs für segmente in verteilten systemen |
CN115349134A (zh) * | 2021-03-16 | 2022-11-15 | Jvc建伍株式会社 | 垃圾废弃辅助装置以及垃圾废弃辅助方法 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003223190A (ja) | 2002-01-29 | 2003-08-08 | Olympus Optical Co Ltd | データ記録再生装置 |
US20060237427A1 (en) | 2005-04-07 | 2006-10-26 | Logan James D | Smart cabinets |
JP2008174325A (ja) | 2007-01-16 | 2008-07-31 | Toyota Motor Corp | 物品収容庫管理システム |
JP2009282861A (ja) | 2008-05-23 | 2009-12-03 | Nippon Telegr & Teleph Corp <Ntt> | 通知システム |
JP2010020575A (ja) | 2008-07-11 | 2010-01-28 | Megumi Ishii | ゴミ捨て利用者がゴミの正確な分別を行う意識を促す装置 |
JP2011107909A (ja) | 2009-11-16 | 2011-06-02 | Clarion Co Ltd | ナビゲーション装置 |
US20140114502A1 (en) | 2011-03-22 | 2014-04-24 | Denis Hugron | Method and system for the prevention of automobile accidents causes by failure to obey road regulations, a vehicle equipped with the system, a manufacturing method for the system, and use of the system in vehicles |
US20150019266A1 (en) | 2013-07-15 | 2015-01-15 | Advanced Insurance Products & Services, Inc. | Risk assessment using portable devices |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09198588A (ja) * | 1996-01-16 | 1997-07-31 | Hitachi Vlsi Eng Corp | ドア警報装置 |
US6769603B2 (en) | 2001-03-15 | 2004-08-03 | Olympus Corporation | Data recording and reproducing apparatus and data reproducing apparatus |
JP2006028795A (ja) * | 2004-07-13 | 2006-02-02 | Tokai Rika Co Ltd | ドア錠制御装置 |
JP4092666B1 (ja) | 2007-10-17 | 2008-05-28 | クオリティ株式会社 | 管理システム,管理サーバおよび管理プログラム |
JP2011192031A (ja) | 2010-03-15 | 2011-09-29 | Denso It Laboratory Inc | 制御装置及び運転安全性保護方法 |
GB201005026D0 (en) * | 2010-03-25 | 2010-05-12 | Georgiou Archiveades | Method and system |
AT13308U1 (de) * | 2012-05-10 | 2013-10-15 | Saubermacher Dienstleistungs Ag | Vorrichtung zum Anzeigen von Abholinformationen |
JP6065328B2 (ja) | 2013-12-17 | 2017-01-25 | みこらった株式会社 | 自動運転車及び自動運転車用プログラム |
US10446018B1 (en) * | 2015-09-25 | 2019-10-15 | Apple Inc. | Controlled display of warning information |
-
2018
- 2018-03-01 WO PCT/JP2018/007857 patent/WO2018216299A1/ja active Application Filing
- 2018-03-01 JP JP2019519475A patent/JP7095691B2/ja active Active
- 2018-03-01 US US16/606,552 patent/US11835931B2/en active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003223190A (ja) | 2002-01-29 | 2003-08-08 | Olympus Optical Co Ltd | データ記録再生装置 |
US20060237427A1 (en) | 2005-04-07 | 2006-10-26 | Logan James D | Smart cabinets |
JP2008174325A (ja) | 2007-01-16 | 2008-07-31 | Toyota Motor Corp | 物品収容庫管理システム |
JP2009282861A (ja) | 2008-05-23 | 2009-12-03 | Nippon Telegr & Teleph Corp <Ntt> | 通知システム |
JP2010020575A (ja) | 2008-07-11 | 2010-01-28 | Megumi Ishii | ゴミ捨て利用者がゴミの正確な分別を行う意識を促す装置 |
JP2011107909A (ja) | 2009-11-16 | 2011-06-02 | Clarion Co Ltd | ナビゲーション装置 |
US20140114502A1 (en) | 2011-03-22 | 2014-04-24 | Denis Hugron | Method and system for the prevention of automobile accidents causes by failure to obey road regulations, a vehicle equipped with the system, a manufacturing method for the system, and use of the system in vehicles |
US20150019266A1 (en) | 2013-07-15 | 2015-01-15 | Advanced Insurance Products & Services, Inc. | Risk assessment using portable devices |
Also Published As
Publication number | Publication date |
---|---|
JPWO2018216299A1 (ja) | 2020-04-02 |
US11835931B2 (en) | 2023-12-05 |
WO2018216299A1 (ja) | 2018-11-29 |
US20210116875A1 (en) | 2021-04-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7095691B2 (ja) | 情報処理装置、情報処理方法、および記憶媒体 | |
US10899314B2 (en) | Mobile alert and security system | |
JP4211841B2 (ja) | ドライバ状態推定装置、サーバ、ドライバ情報収集装置及び運転者状態推定システム | |
US8559914B2 (en) | Interactive personal surveillance and security (IPSS) system | |
US8977230B2 (en) | Interactive personal surveillance and security (IPSS) systems and methods | |
US20070182543A1 (en) | Intelligent Home Security System | |
US20140120977A1 (en) | Methods and systems for providing multiple coordinated safety responses | |
WO2012158623A2 (en) | Consumer alarm with quiet button | |
JP2004122969A (ja) | 車両盗難防止装置 | |
US20140120872A1 (en) | Systems and methods for altering the properties of a mobile device in response to a make ready signal | |
EP3488428A1 (en) | Autonomous vehicle providing safety zone to persons in distress | |
JP4556366B2 (ja) | 車両盗難防止システム | |
Nellis | Surveillance-based compliance using electronic monitoring | |
JP2008040937A (ja) | 施設内監視システム | |
JP2023182752A (ja) | システムおよびプログラム等 | |
CN102582522A (zh) | 一种汽车车内后视镜及一种车内人体安全报警*** | |
CN1937763A (zh) | 移动通讯终端机的困倦感知装置及其困倦驾驶感知方法 | |
JP2003081061A (ja) | 車両盗難防止システム | |
JP2002302014A (ja) | 車両管理装置、車載監視装置、車両管理方法、車両監視方法、車両管理プログラム、車両監視プログラム、車両管理プログラムを記録した記録媒体、車両監視プログラムを記録した記録媒体および車両管理システム | |
WO2021100220A1 (ja) | 使用制限方法、携帯端末、及びプログラム | |
CN220243175U (zh) | 停车监控***及具有其的车辆 | |
CN106530607A (zh) | 一种智能眼镜及报警方法 | |
JP7250264B2 (ja) | 防犯装置、自動販売機又は情報提供装置、及びプログラム | |
US20240194060A1 (en) | Vehicle-enabled officer assistance | |
WO2023187267A2 (fr) | Coque de téléphone anti-agression |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220315 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220422 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220524 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220606 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7095691 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |