JP6796301B1 - Information processing system, information processing device, terminal device, server device, program, or method - Google Patents
Information processing system, information processing device, terminal device, server device, program, or method Download PDFInfo
- Publication number
- JP6796301B1 JP6796301B1 JP2020529647A JP2020529647A JP6796301B1 JP 6796301 B1 JP6796301 B1 JP 6796301B1 JP 2020529647 A JP2020529647 A JP 2020529647A JP 2020529647 A JP2020529647 A JP 2020529647A JP 6796301 B1 JP6796301 B1 JP 6796301B1
- Authority
- JP
- Japan
- Prior art keywords
- information
- parking
- vehicle
- image
- charge
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 116
- 230000010365 information processing Effects 0.000 title description 49
- 238000003384 imaging method Methods 0.000 claims description 131
- 238000012937 correction Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 abstract description 9
- 230000006870 function Effects 0.000 description 152
- 238000007726 management method Methods 0.000 description 146
- 230000008901 benefit Effects 0.000 description 77
- 238000010801 machine learning Methods 0.000 description 32
- 230000008569 process Effects 0.000 description 18
- 238000003860 storage Methods 0.000 description 17
- 238000012545 processing Methods 0.000 description 15
- 238000012559 user support system Methods 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 230000004044 response Effects 0.000 description 9
- 230000008859 change Effects 0.000 description 7
- 238000013135 deep learning Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 7
- 230000009471 action Effects 0.000 description 5
- 230000006399 behavior Effects 0.000 description 5
- 238000013145 classification model Methods 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 4
- 230000007423 decrease Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 239000005357 flat glass Substances 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 230000001681 protective effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000011109 contamination Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 230000002068 genetic effect Effects 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 230000002427 irreversible effect Effects 0.000 description 1
- 238000003064 k means clustering Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07B—TICKET-ISSUING APPARATUS; FARE-REGISTERING APPARATUS; FRANKING APPARATUS
- G07B15/00—Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points
- G07B15/02—Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points taking into account a variable factor such as distance or time, e.g. for passenger transport, parking systems or car rental systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/625—License plates
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07B—TICKET-ISSUING APPARATUS; FARE-REGISTERING APPARATUS; FRANKING APPARATUS
- G07B15/00—Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Finance (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Devices For Checking Fares Or Tickets At Control Points (AREA)
- Traffic Control Systems (AREA)
Abstract
【課題】本発明の一例のシステムは、より適切に画像から得たデータを活用できる。【解決手段】一又は複数の撮像装置が各々複数の駐車スペースを撮像視野とする、前記一又は複数の撮像装置から、画像を取得する画像取得部と、一又は複数の前記画像に基づいて、前記複数の駐車スペース内の、第1駐車スペースの料金を設定する料金設定部と、を備えるシステム。前記料金設定部は、一又は複数の前記画像に基づいて、前記第1駐車スペースとは異なる前記複数の駐車スペース内の第2駐車スペースの料金を、前記第1駐車スペースの料金とは異なる料金に設定する、システム。前記第1駐車スペースを含む第1駐車領域の満空情報が、前記第2駐車スペースを含む第2駐車領域の満空情報、よりも高い場合、前記料金設定部は、前記第1駐車スペースの料金を、前記第2駐車スペースの料金よりも、高く設定する、システム。【選択図】 図2PROBLEM TO BE SOLVED: To more appropriately utilize data obtained from an image in an example system of the present invention. SOLUTION: Based on an image acquisition unit that acquires an image from the one or a plurality of image pickup devices, in which one or a plurality of image pickup devices each have a plurality of parking spaces as an image pickup field, and the one or a plurality of the images. A system including a charge setting unit for setting a charge for a first parking space in the plurality of parking spaces. Based on the one or a plurality of the images, the charge setting unit charges a charge for the second parking space in the plurality of parking spaces different from the charge for the first parking space, and a charge different from the charge for the first parking space. Set to system. When the fullness information of the first parking area including the first parking space is higher than the fullness information of the second parking area including the second parking space, the charge setting unit of the first parking space A system that sets the charge higher than the charge for the second parking space. [Selection diagram] Fig. 2
Description
本出願において開示された技術は、情報処理システム、情報処理装置、サーバ装置、プログラム、又は方法に関する。 The techniques disclosed in this application relate to information processing systems, information processing devices, server devices, programs, or methods.
近年、画像を用いた情報処理が行われているが、必ずしも画像内の情報が適切に利用されてはいない。 In recent years, information processing using images has been performed, but the information in the images is not always properly used.
そこで、本発明の様々な実施形態は、上記の課題を解決するために、情報処理システム、情報処理装置、端末装置、サーバ装置、プログラム、又は方法を提供する。 Therefore, various embodiments of the present invention provide an information processing system, an information processing device, a terminal device, a server device, a program, or a method in order to solve the above problems.
一実施態様に係る第1のシステムは、
一又は複数の撮像装置が各々複数の駐車スペースを撮像視野とする、前記一又は複数の撮像装置から、一又は複数の画像を取得する画像取得部と、
一又は複数の前記画像に基づいて、前記複数の駐車スペース内の、第1駐車スペースの料金を設定する料金設定部と、
を備えるシステム。ここで、第1駐車スペースの料金は、1時間、3時間、6時間、12時間、24時間、1週間などの所庭の単位あたりの使用の料金でもよいし、当日中、翌日の9時までなどのように期限までの使用の料金でもよい。また、第1駐車スペースの料金を設定するのに使用される画像は、一枚の画像でもよいし、複数の画像でもよい。複数の画像である場合は、一の撮像装置によって撮像された複数の画像でもよいし、複数の撮像装置によって撮像された各々の画像であってもよい。なお、かかる発明は、一の駐車スペースを撮像視野とする撮像装置によって撮像された画像を用いてもよい。The first system according to one embodiment is
An image acquisition unit that acquires one or more images from the one or more imaging devices, each of which has a plurality of parking spaces as an imaging field of view.
A charge setting unit that sets a charge for the first parking space in the plurality of parking spaces based on the one or more images.
System with. Here, the charge for the first parking space may be the charge for use per unit of the garden such as 1 hour, 3 hours, 6 hours, 12 hours, 24 hours, and 1 week, or at 9:00 on the same day and the next day. It may be a charge for use until the deadline, such as up to. Further, the image used for setting the charge of the first parking space may be a single image or a plurality of images. When it is a plurality of images, it may be a plurality of images captured by one imaging device, or may be each image captured by a plurality of imaging devices. In the present invention, an image captured by an imaging device having one parking space as an imaging field of view may be used.
一実施態様に係る第2のシステムは、
前記料金設定部は、一又は複数の前記画像に基づいて、前記第1駐車スペースとは異なる前記複数の駐車スペース内の第2駐車スペースの料金を、前記第1駐車スペースの料金とは異なる料金に設定する、
第1のシステム。ここで、第2駐車スペースが第1駐車スペースと異なる駐車スペースであればよく、第1駐車スペースと第2駐車スペースとは同一の撮像装置で撮像されてもよいし、異なる撮像装置で撮像されてもよく、第1駐車スペースと第2駐車スペースとが同一の画像内に含まれてもよいし、異なる画像内に含まれてもよい。The second system according to one embodiment is
Based on the one or a plurality of the images, the charge setting unit charges a charge for the second parking space in the plurality of parking spaces different from the charge for the first parking space, and a charge different from the charge for the first parking space. Set to
The first system. Here, the second parking space may be a parking space different from the first parking space, and the first parking space and the second parking space may be imaged by the same imaging device or may be imaged by different imaging devices. The first parking space and the second parking space may be included in the same image, or may be included in different images.
一実施態様に係る第3のシステムは、
前記第1駐車スペースを含む第1駐車領域の満空情報が、前記第2駐車スペースを含む第2駐車領域の満空情報、よりも高い場合、前記料金設定部は、前記第1駐車スペースの料金を、前記第2駐車スペースの料金よりも、高く設定する、
第1又は第2のシステム。The third system according to one embodiment is
When the fullness information of the first parking area including the first parking space is higher than the fullness information of the second parking area including the second parking space, the charge setting unit of the first parking space The charge is set higher than the charge of the second parking space.
First or second system.
一実施態様に係る第4のシステムは、
画像利用部は、
前記第1駐車スペースを含む第1駐車領域を撮像視野に含む一又は複数の撮像装置によって撮像された画像を用いて、前記第1駐車領域の満空情報を生成し、
前記第2駐車スペースを含む第2駐車領域を撮像視野に含む一又は複数の撮像装置によって撮像された画像を用いて、前記第2駐車領域の満空情報を生成する、
第1乃至第3のいずれか一のシステム。The fourth system according to one embodiment is
The image utilization department
Using the images captured by one or more imaging devices including the first parking area including the first parking space in the imaging field of view, the full / empty information of the first parking area is generated.
Using the images captured by one or more imaging devices including the second parking area including the second parking space in the imaging field of view, the full / empty information of the second parking area is generated.
Any one of the first to third systems.
一実施態様に係る第5のシステムは、
第1所定時期に前記第1駐車スペースの料金が第1料金である場合において、前記料金設定部は、前記第1所定時期とは異なる第2所定時期に、前記第1駐車スペースの料金を、一又は複数の前記画像に基づいて、前記第1料金とは異なる第2料金に設定する、
第1乃至第4のいずれか一のシステム。ここで、第1所定時期と第2所定時期とは、各々、時間、日、曜日、月日、など種々の時間的情報であってよく。同一の第1駐車スペースの料金について、時間的に異なる時期において、異なる料金に設定することがあればよい。なお、同一の第1駐車スペースにおいて、時間的に異なる時期において、常に異なる料金に設定する必要はなく、同じ料金に設定することがあってもよい。The fifth system according to one embodiment is
When the charge for the first parking space is the first charge at the first predetermined time, the charge setting unit charges the charge for the first parking space at the second predetermined time different from the first predetermined time. A second charge different from the first charge is set based on one or more of the images.
Any one of the first to fourth systems. Here, the first predetermined time and the second predetermined time may be various temporal information such as time, day, day of the week, month and day, respectively. The charges for the same first parking space may be set at different charges at different times. In the same first parking space, it is not always necessary to set different charges at different times, and the same charges may be set.
一実施態様に係る第6のシステムは、
前記料金設定部は、前記第1駐車スペースを含む前記複数の駐車スペースの駐車利用履歴を用いて、前記第1駐車スペースの前記料金を設定する、
第1乃至第5のいずれか一のシステム。The sixth system according to one embodiment is
The charge setting unit sets the charge for the first parking space by using the parking usage history of the plurality of parking spaces including the first parking space.
Any one of the first to fifth systems.
一実施態様に係る第7のシステムは、
複数の駐車スペースを撮像視野とする、一又は複数の撮像装置から画像を取得する画像取得部と、
一又は複数の前記画像に基づいて、前記複数の駐車スペース内の、第1駐車スペースの駐車に対する金銭的価値を設定する料金設定部と、
を備えるシステム。The seventh system according to one embodiment is
An image acquisition unit that acquires images from one or more imaging devices with a plurality of parking spaces as the imaging field of view.
A rate setting unit that sets the monetary value for parking in the first parking space in the plurality of parking spaces based on the one or more images.
System with.
一実施態様に係る第8のシステムは、
前記金銭的価値は、前記駐車スペースに係る商業施設内で利用可能な金銭的価値を含む、
第7のシステム。ここで、商業施設内で利用可能な金銭的価値としては、例えば、かかる商業施設内で利用可能なクーポン、商品券、ポイントなどであってよい。The eighth system according to one embodiment is
The monetary value includes the monetary value available in the commercial facility relating to the parking space.
Seventh system. Here, the monetary value that can be used in the commercial facility may be, for example, a coupon, a gift certificate, points, or the like that can be used in the commercial facility.
一実施態様に係る第9のプログラムは、
システムを、
一又は複数の撮像装置が各々複数の駐車スペースを撮像視野とする、一又は複数の撮像装置から、画像を取得する画像取得手段、
一又は複数の前記画像に基づいて、前記複数の駐車スペース内の、第1駐車スペースの料金を設定する料金設定手段、
として動作させるためのプログラム。The ninth program according to one embodiment is
System,
An image acquisition means for acquiring an image from one or more imaging devices, each of which has a plurality of parking spaces as an imaging field of view.
A charge setting means for setting a charge for a first parking space in the plurality of parking spaces based on the one or more images.
A program to operate as.
一実施態様に係る第10のプログラムは、
前記システムが備えるメモリを使用する、
第9のプログラム。The tenth program according to one embodiment is
Use the memory provided by the system,
Ninth program.
一実施態様に係る第11のプログラムは、
前記システムが備える演算装置を使用する、
第9又は10のプログラム。The eleventh program according to one embodiment is
Use the arithmetic unit provided in the system,
Ninth or tenth program.
一実施態様に係る第12の方法は、
システムを、
一又は複数の撮像装置が各々複数の駐車スペースを撮像視野とする、一又は複数の撮像装置から、画像を取得する画像取得ステップ、
一又は複数の前記画像に基づいて、前記複数の駐車スペース内の、第1駐車スペースの料金を設定する料金設定ステップ、
として実行させるための方法。The twelfth method according to one embodiment is
System,
An image acquisition step of acquiring an image from one or more imaging devices, each of which has a plurality of parking spaces as an imaging field of view.
A charge setting step for setting a charge for a first parking space in the plurality of parking spaces based on one or more of the images.
How to run as.
一実施態様に係る第13の方法は、
前記システムが備えるメモリを用いる、
第12の方法。The thirteenth method according to one embodiment is
The memory provided in the system is used.
Twelfth method.
一実施態様に係る第14の方法は、
前記コンピュータが備える演算装置を用いる、
第12又は13の方法。The fourteenth method according to one embodiment is
The arithmetic unit provided in the computer is used.
The twelfth or thirteenth method.
一実施態様に係る第15のプログラムは、
コンピュータを、第1乃至8のいずれか一のシステムとして機能させるためのプログラム。The fifteenth program according to one embodiment is
A program for operating a computer as any one of the first to eighth systems.
本発明の一実施形態により、より適切に画像情報を活用できる。 According to one embodiment of the present invention, image information can be utilized more appropriately.
[図1]図1は、一実施形態に係るシステムの機能を示すブロック図である。
[図2]図2は、一実施形態に係るシステムの機能を示すブロック図である。
[図3]図3は、一実施形態に係るシステムの機能を示すブロック図である。
[図4]図4は、一実施例に係るシステムが表示する画面の一例である。
[図5A]図5Aは、一実施例に係るシステムが利用するデータ構造の一例である。
[図5B]図5Bは、一実施例に係るシステムが利用するデータ構造の一例である。
[図6]図6は、一実施例に係るシステムの表示画面の一例である。
[図7]図7は、一実施例に係るシステムの表示画面の一例である。
[図8]図8は、一実施例に係るシステムが利用するデータ構造の一例である。
[図9A]図9Aは、ナンバープレートの説明図である。
[図9B]図9Bは、一実施例のシステムが利用する現実撮像画像の一例である。
[図9C]図9Cは、一実施例のシステムが利用する疑似撮像画像の一例である。
[図10A]図10Aは、一実施例に係るシステムに係る撮像装置が撮像した画像を用いて識別している状況を示す一例である。
[図10B]図10Bは、一実施例に係るシステムに係る撮像装置が撮像した画像を用いて識別している状況を示す一例である。
[図10C]図10Cは、一実施例に係るシステムに係る撮像装置が撮像した画像を用いて識別している状況を示す一例である。
[図10D]図10Dは、一実施例に係るシステムに係る撮像装置が撮像した画像を用いて識別している状況を示す一例である。
[図11]図11は、一実施例に係るシステムに係る全体構成を示す一例である。
[図12]図12は、一実施例に係るシステムが対象とする駐車場の一例である。
[図13]図13は、一実施例に係るシステムが対象とする駐車場の一例である。
[図14]図14は、一実施例に係るシステムが対象とする駐車場の一例である。
[図15]図15は、一実施例に係るシステムに係る全体構成の一例である。
[図16]図16は、一実施例に係るシステムのフローの一例を示すものである。
[図17]図17は、一実施例に係るシステムのフローの一例を示すものである。
[図18]図18は、一実施例に係るシステムのフローの一例を示すものである。
[図19]図19は、一実施例に係るシステムのフローの一例を示すものである。
[図20]図20は、一実施例に係るシステムのフローの一例を示すものである。
[図21]図21は、一実施例に係るシステムが対象とする駐車場の一例である。
[図22]図22は、一実施例に係るシステムが利用するデータ構造の一例である。
[図23]図23は、一実施例に係る情報処理装置の構成を示すブロック図である。
なお、実施例1乃至3に対応する実施例は、本願請求項に記載の発明の参考例である。
FIG. 1 is a block diagram showing a function of a system according to an embodiment.
FIG. 2 is a block diagram showing a function of a system according to an embodiment.
FIG. 3 is a block diagram showing a function of a system according to an embodiment.
FIG. 4 is an example of a screen displayed by the system according to the embodiment.
FIG. 5A is an example of a data structure used by the system according to an embodiment.
FIG. 5B is an example of a data structure used by the system according to an embodiment.
FIG. 6 is an example of a display screen of a system according to an embodiment.
FIG. 7 is an example of a display screen of a system according to an embodiment.
FIG. 8 is an example of a data structure used by the system according to the embodiment.
FIG. 9A is an explanatory view of a license plate.
FIG. 9B is an example of a real-world captured image used by the system of one embodiment.
FIG. 9C is an example of a pseudo-captured image used by the system of one embodiment.
FIG. 10A is an example showing a situation in which an image pickup apparatus according to a system according to an embodiment identifies using an image captured.
FIG. 10B is an example showing a situation in which an image pickup apparatus according to a system according to an embodiment identifies using an image captured.
FIG. 10C is an example showing a situation in which an image pickup apparatus according to a system according to an embodiment identifies using an image captured.
FIG. 10D is an example showing a situation in which an image pickup apparatus according to a system according to an embodiment identifies using an image captured.
FIG. 11 is an example showing an overall configuration of a system according to an embodiment.
FIG. 12 is an example of a parking lot targeted by the system according to one embodiment.
FIG. 13 is an example of a parking lot targeted by the system according to one embodiment.
FIG. 14 is an example of a parking lot targeted by the system according to the embodiment.
FIG. 15 is an example of an overall configuration relating to a system according to an embodiment.
FIG. 16 shows an example of a system flow according to an embodiment.
FIG. 17 shows an example of a system flow according to an embodiment.
FIG. 18 shows an example of a system flow according to an embodiment.
FIG. 19 shows an example of a system flow according to an embodiment.
FIG. 20 shows an example of a system flow according to an embodiment.
FIG. 21 is an example of a parking lot targeted by the system according to one embodiment.
FIG. 22 is an example of a data structure used by the system according to an embodiment.
FIG. 23 is a block diagram showing a configuration of an information processing apparatus according to an embodiment.
The examples corresponding to Examples 1 to 3 are reference examples of the invention described in the claims of the present application.
1.概要
本願書類に係る一例のシステムは、駐車を支援するシステムである。一例のシステムは、車両の駐車を管理する管理システムを備えてよい。また、一例のシステムは、管理システムと、かかる管理システムと直接的又は間接的に接続された一又は複数の撮像装置と、を備えてよい。また、一例のシステムは、システムの利用者が利用する一又は複数の利用者端末装置と、かかる利用者端末と接続可能な管理システムと、かかる管理システムと直接的又は間接的に接続された一又は複数の撮像装置と、を備えてよい。また、管理システムは、かかる管理システムを制御する一又は複数の管理者端末装置と直接的又は間接的に接続されてよい。また、管理システムは、駐車場と関連付けられて設置され、駐車場の入口又は通路から視認可能な表示装置と直接的又は間接的に接続されてよい。 1. 1. Outline An example system according to the documents of the present application is a system that supports parking. One example system may include a management system that manages the parking of the vehicle. Also, an example system may include a management system and one or more imaging devices that are directly or indirectly connected to such a management system. In addition, an example system is one or a plurality of user terminal devices used by system users, a management system that can be connected to such a user terminal, and one that is directly or indirectly connected to the management system. Alternatively, a plurality of imaging devices may be provided. In addition, the management system may be directly or indirectly connected to one or more administrator terminal devices that control such a management system. In addition, the management system may be installed in association with the parking lot and directly or indirectly connected to a display device visible from the entrance or passage of the parking lot.
本願書類において、「システム」という用語は、管理システムと端末装置の上位概念として用いられ、システムは、管理システムを含み一又は複数の端末装置を含まなくてもよいし、一又は複数の端末装置を含み管理システムを含まなくてもよいし、管理システムと一又は複数の端末装置の両方を含んでもよい。端末装置は、利用者端末装置と管理者端末装置の上位概念として用いられてよい。システムは、一又は複数の情報処理装置から構成されてよい。また、「料金」という用語は、金銭的価値のある金額を意味する用語であってよい。 In the documents of the present application, the term "system" is used as a superordinate concept of a management system and a terminal device, and the system may include a management system and may not include one or more terminal devices, or may include one or more terminal devices. It may include the management system and may not include the management system, or may include both the management system and one or more terminal devices. The terminal device may be used as a superordinate concept of the user terminal device and the administrator terminal device. The system may consist of one or more information processing devices. Further, the term "fee" may be a term meaning an amount of monetary value.
利用者端末、管理者端末、管理システム、撮像装置、表示装置は、それぞれ、直接的又は間接的にインターネットなどの通信装置により接続されてよい。 The user terminal, the administrator terminal, the management system, the imaging device, and the display device may be directly or indirectly connected by a communication device such as the Internet.
端末装置は、一又は複数の位置測定装置を有してよい。位置測定装置は、GPSや基地局を用いた位置測定機能を有してよい。 The terminal device may have one or more position measuring devices. The position measuring device may have a position measuring function using GPS or a base station.
端末装置は、通信装置を備えてよい。通信装置は、端末装置が設置されている車両内に設置された撮像装置と通信可能であってもよい。通信装置は、無線式でもよいし、有線式でもよい。無線式の場合、WIFI、BLUETOOTHなどであってよい。駐車場に設置された撮像装置は、固定式であってもよいが、着脱式であってもよい。 The terminal device may include a communication device. The communication device may be capable of communicating with an image pickup device installed in the vehicle in which the terminal device is installed. The communication device may be a wireless type or a wired type. In the case of wireless type, it may be WIFI, BLUETOOTH or the like. The imaging device installed in the parking lot may be a fixed type or a detachable type.
端末装置は、人が携帯可能な携帯端末装置であってよい。例えば、携帯可能な端末装置としては、スマートフォン、PDA、などであってよい。 The terminal device may be a portable terminal device that can be carried by a person. For example, the portable terminal device may be a smartphone, a PDA, or the like.
2.一例のシステムの機能
一例のシステムの機能について、図1乃至3を参照して説明する。図1は、一例のシステムの利用者端末装置に係る機能の具体例を示すブロック図であり、図2は、一例のシステムの管理システムに係る機能の具体例を示すブロック図であり、図3は、一例のシステムの管理者端末装置に係る機能の具体例を示すブロック図である。 2. 2. Functions of an Example System The functions of an example system will be described with reference to FIGS. 1 to 3. FIG. 1 is a block diagram showing a specific example of a function related to a user terminal device of an example system, and FIG. 2 is a block diagram showing a specific example of a function related to a management system of an example system. Is a block diagram showing a specific example of the function related to the administrator terminal device of an example system.
2.1.利用者端末装置内の機能
利用者端末装置の以下の機能の一部又は全部は、以下の機能の一部又は全部を情報処理装置を実行できるように命令するソフトウェアにより実現されてよい。かかるソフトウェアは、情報処理装置にダウンロードされて、インストールされてよい。本願書類において、かかるソフトウェアを、「駐車アプリ」ということがある。なお、駐車アプリは、以下で説明する利用者端末装置内に含まれる機能の全てを有してもよいし、その一部の機能であってもよい。 2.1. Functions in the User Terminal Device Some or all of the following functions of the user terminal device may be realized by software that commands some or all of the following functions to execute the information processing device. Such software may be downloaded and installed in the information processing device. In the documents of the present application, such software may be referred to as a "parking application". The parking application may have all the functions included in the user terminal device described below, or may have some functions thereof.
なお、本願書類において、「利用者」とは、駐車アプリを利用する者であればよい。したがって、利用者は、後述する支払手段の支払者であってもよいし、かかる支払者でなくともよい。また、利用者は、駐車アプリをインストールした者であってもよいし、駐車アプリをインストールせずに、単に暫定的に利用する者であってもよい。 In the documents of the present application, the "user" may be a person who uses the parking application. Therefore, the user may or may not be the payer of the payment instrument described below. Further, the user may be a person who has installed the parking application, or may be a person who simply temporarily uses the parking application without installing it.
また、駐車アプリは、一又は複数の利用車両について、複数の者が利用できるよう構成されてもよい。複数の者が利用する場合において、一のIDと一の認証手段が設定されて複数の利用者を区別しない構成であってもよいし、IDと認証手段を用いることにより複数の利用者を区別する構成であってもよい。後者は、例えば、一のIDと複数の認証手段が設定されていてもよいし、複数のIDと同一又は異なる認証手段が設定されていてもよい。このように、ID及び/又は認証手段により、複数の利用者を区別できる構成であってよい。また、複数の利用者を区別できる構成である場合、以下で利用できる機能が異なってもよい。例えば、利用者情報管理部における利用者情報の設定が可能な利用者と、後述の利用者支援に係る機能を利用可能な利用者は異なってもよい。また、利用者情報管理部及び利用者支援部が備える各機能について、ここに利用可能な利用者が設定されていてもよい。 In addition, the parking application may be configured so that a plurality of persons can use one or a plurality of vehicles in use. When multiple users use it, one ID and one authentication means may be set to not distinguish between multiple users, or multiple users may be distinguished by using the ID and authentication means. It may be configured to be used. In the latter, for example, one ID and a plurality of authentication means may be set, or the same or different authentication means as the plurality of IDs may be set. In this way, the configuration may be such that a plurality of users can be distinguished by the ID and / or the authentication means. Further, when the configuration is such that a plurality of users can be distinguished, the functions that can be used below may be different. For example, a user who can set user information in the user information management unit and a user who can use the function related to user support described later may be different. In addition, available users may be set here for each function provided by the user information management unit and the user support unit.
以下においては、駐車アプリの機能として説明するが、利用者端末装置の以下の機能の一部又は全部は、インターネット上の一又は複数の特定のURLをアクセスすることによって、利用できてもよい。この場合、利用者端末装置内から、インターネット上の、一又は複数の特定のURLにアクセスすることにより、同様の機能が実現されてよい。すなわち、駐車アプリに対して入力されうる情報を、かかるインターネット上の一又は複数の特定のURL上でアクセスして入力が可能であってよい。また、駐車アプリにおいて出力表示されうる情報は、かかるインターネット上の一又は複数の特定のURL上でアクセスすることで表示が可能であってよい。なお、利用者の認証により、インターネット上におけるアクセスの安全性を向上させてよい。 Hereinafter, the function of the parking application will be described, but some or all of the following functions of the user terminal device may be available by accessing one or more specific URLs on the Internet. In this case, the same function may be realized by accessing one or more specific URLs on the Internet from within the user terminal device. That is, the information that can be input to the parking application may be accessed and input on one or more specific URLs on the Internet. In addition, the information that can be output and displayed in the parking application may be displayed by accessing it on one or more specific URLs on the Internet. It should be noted that the security of access on the Internet may be improved by authenticating the user.
2.1.1.利用者情報管理部
利用者情報管理部は、利用者情報を管理する機能を有する。本願書類において、利用者情報は、利用者の氏名、利用者のニックネーム、利用者の住所、利用者のID、利用者の登録の認証情報、利用者に係る車両情報、利用者に係る支払手段情報、利用者に係る利用履歴情報、などを含む用語であってよい。利用者情報管理部は、利用者情報に係る入力を受け付ける機能を有してよい。また、利用者情報管理部は、利用者情報に係る情報を表示する機能を有してよい。 2.1.1. User Information Management Department The user information management department has a function of managing user information. In the documents of the present application, the user information includes the user's name, the user's nickname, the user's address, the user's ID, the user's registration authentication information, the user's vehicle information, and the user's payment means. It may be a term including information, usage history information related to the user, and the like. The user information management unit may have a function of accepting input related to user information. In addition, the user information management unit may have a function of displaying information related to user information.
利用者に係る車両情報は、駐車アプリにおいて、利用者と関連付けられて登録される一又は複数の車両についての情報であって良い。例えば、車両情報は、車両を特定する情報、車両の外観に係る画像、車両についての情報、などであってよい。 The vehicle information related to the user may be information about one or more vehicles registered in association with the user in the parking application. For example, the vehicle information may be information that identifies the vehicle, an image related to the appearance of the vehicle, information about the vehicle, and the like.
車両を特定する情報は、前記車両の自動車番号標(ナンバープレート)に係る情報であってよく、ナンバープレート内の番号の一部又は全部や、ナンバープレートを撮像した画像であってよい。本願書類において、車両を特定する情報によって特定される車両が、利用する車両であることから、「利用車両」ということがある。 The information for identifying the vehicle may be information related to the vehicle license plate of the vehicle, or may be a part or all of the numbers in the license plate or an image obtained by capturing the license plate. In the documents of the present application, since the vehicle specified by the information for identifying the vehicle is the vehicle to be used, it may be referred to as "used vehicle".
車両の外観に係る画像は、利用車両を撮像したものであってよい。利用車両を撮像したものは、利用車両の前方向、後方向、横方向、斜め方法、などから撮像されたものであってよい。 The image relating to the appearance of the vehicle may be an image of the vehicle being used. The image of the vehicle to be used may be an image taken from the front direction, the rear direction, the lateral direction, the oblique method, or the like of the vehicle to be used.
車両についての情報は、例えば、利用車両のメーカー、利用車両の車種、利用車両の名称、利用車両の外観の特徴を示す情報、などであってよい。 The information about the vehicle may be, for example, the manufacturer of the vehicle used, the vehicle type of the vehicle used, the name of the vehicle used, information indicating the characteristics of the appearance of the vehicle used, and the like.
車両の車種は、種々の観点で分類が可能な情報であってよい。例えば、道路運送車両法において分類される、普通自動車、小型自動車、軽自動車、大型特殊自動車、などの分類でもよいし、バス、トラック、大型オートバイ、オートバイ、などで分類されてもよいし、車輪数で分類されてもよいし、車両の大きさや、エンジンの総排気量で分類されてもよい。 The vehicle type of the vehicle may be information that can be classified from various viewpoints. For example, it may be classified by the Road Transport Vehicle Law, such as ordinary automobiles, small automobiles, light automobiles, large special automobiles, etc., it may be classified by buses, trucks, large motorcycles, motorcycles, etc., and wheels. It may be classified by the number, the size of the vehicle, or the total exhaust amount of the engine.
利用者に係る支払手段情報は、駐車行為に対して支払うことが可能な手段の情報であればよい。例えば、支払手段情報は、クレジットカードを用いて支払う情報、デビットカードを用いて支払う情報、電子マネーを用いて支払う情報、金融機関で支払者の有する口座のついての情報、などが挙げられるが、これらに限られない。 The payment means information relating to the user may be any information on the means that can be paid for the parking act. For example, payment method information includes information on payment using a credit card, information on payment using a debit card, information on payment using electronic money, information on an account held by a payer at a financial institution, and the like. Not limited to these.
利用者情報管理部は、一又は複数の支払手段情報を、記憶してよい。また、利用者情報管理部は、一又は複数の利用者車両に対し、一の支払手段情報のみを、関連付けて記憶してもよいし、複数の支払手段情報を関連付けて記憶してもよい。前者の場合、一又は複数のいずれの利用車両についても、その車両の駐車行為に対する支払手段が一つにまとめられる利点がある。他方、複数の利用車両に対して、それぞれ別の支払手段情報を関連付けて記憶した場合、各利用車両の利用が、各々の支払手段によって支払うよう設定できる利点がある。例えば、一の家族が2台の車両を有している場合、各車両について、異なる支払手段を設定できる利点がある。 The user information management unit may store one or more payment means information. Further, the user information management unit may store only one payment means information in association with one or more user vehicles, or may associate and store a plurality of payment means information. In the former case, there is an advantage that payment means for parking of one or more vehicles are integrated into one. On the other hand, when different payment means information is associated and stored for a plurality of use vehicles, there is an advantage that the use of each use vehicle can be set to be paid by each payment means. For example, if one family has two vehicles, there is an advantage that different payment methods can be set for each vehicle.
また、利用者情報管理部は、一の利用車両に対して、複数の支払手段情報を、関連付けて記憶してもよい。この場合、一の利用者についての駐車行為についての駐車料金を、複数の支払手段情報に対してどのように割り振るかを設定する機能を有してよい。かかる割り振り機能により、例えば、一台の車両を、家族内で異なる人が利用する場合において、その駐車料金の支払い手段を変更できる利点がある。 In addition, the user information management unit may store a plurality of payment means information in association with each other for one vehicle. In this case, it may have a function of setting how to allocate the parking fee for the parking act for one user to a plurality of payment means information. With such an allocation function, for example, when one vehicle is used by different people in the family, there is an advantage that the payment method of the parking fee can be changed.
割り振りは、種々の設定が可能であって良い。割り振りは、手作業で(マニュアルで)割り振ることができてもよいし、自動的に割り振る機能があってもよい。後者の自動的に割り振る機能がある場合においては、かかる割り振りの条件を予め設定できてよい。 The allocation may be variously set. The allocation may be done manually (manually) or may have the ability to allocate automatically. If the latter has an automatic allocation function, the allocation conditions may be set in advance.
割り振りを設定可能な機能としては、例えば、駐車料金についての割り振りの機能であってもよいし、駐車場所を用いて割り振る機能であってもよいし、駐車日時を用いて割り振る機能であってもよいし、利用者端末の位置情報を用いて割り振る機能であってもよい。 The function that can set the allocation may be, for example, a function of allocating the parking fee, a function of allocating using the parking place, or a function of allocating using the parking date and time. Alternatively, it may be a function of allocating using the position information of the user terminal.
駐車料金についての割り振りの機能は、駐車料金について具体的な料金を少なくとも一の支払手段に設定するであってもよいし、駐車料金についての割り振りの割合を設定する機能であってもよい。ここで、駐車料金は、各一回の駐車に対する料金であってもよいし、所定期間における料金であってもよいし、1か月毎などの支払い時期における合計料金であってもよい。具体的な料金を、合計料金について、設定する例としては、例えば、一か月の利用代金が1万円である場合に、二つの支払手段情報として、クレジットカードAと口座Aがあった場合において、3000円をクレジットカードA、7000円を口座Aとする、などとしてよい。具体的な料金を設定できることにより、一の利用者の利用行為についても、利用者の要望に合わせて負担を設定可能な利点がある。 The function of allocating the parking fee may be a function of setting a specific fee for the parking fee as at least one payment means, or a function of setting the ratio of the allocation for the parking fee. Here, the parking fee may be a fee for each parking, a fee for a predetermined period, or a total fee at a payment time such as every month. As an example of setting a specific fee for the total fee, for example, when the monthly usage fee is 10,000 yen and there are two payment method information, credit card A and account A. In the above, 3000 yen may be used as a credit card A, 7000 yen may be used as an account A, and so on. By being able to set a specific charge, there is an advantage that the burden can be set according to the user's request even for the usage behavior of one user.
また、割り振りの割合を設定する機能としては、クレジットカードAに40%、口座Aに60%などであってよい。ここで、二つの支払い手段情報を例示したが、3つ以上であってもよい。これにより、具体的な料金での設定が面倒な場合でも、割合によって容易に設定可能な利点がある。 Further, the function of setting the allocation ratio may be 40% for the credit card A, 60% for the account A, or the like. Here, two payment method information are illustrated, but there may be three or more. This has the advantage that even if it is troublesome to set a specific charge, it can be easily set according to the ratio.
駐車場所についての割り振り機能は、例えば、都道府県毎、市町村毎、駐車場毎、などに支払手段情報を設定できてよい。例えば、勤務先の駐車場や出張先の駐車場は、予め利用者が判明していることから、一の利用車両を複数人で利用する家族などにおいても、支払手段情報の割り当てを効率的に設定できる利点がある。 As for the allocation function for parking places, payment means information may be set for each prefecture, each municipality, each parking lot, and the like. For example, since the users of the parking lot at work and the parking lot at business trips are known in advance, even a family member who uses one vehicle for multiple people can efficiently allocate payment method information. There is an advantage that it can be set.
また、駐車日時についての割り振り機能も、例えば、営業日と営業日以外に分けたり、日中(例えば、6時から18時など)と夜間(例えば18時から6時など)に分けたり、月の前半と後半などに分けることができてよい。 In addition, the parking date and time allocation function can be divided into, for example, business days and non-business days, daytime (for example, 6:00 to 18:00) and nighttime (for example, 18:00 to 6:00), and the month. It may be divided into the first half and the second half of.
また、利用者端末の位置情報を用いることができる場合には、利用者端末の位置情報と、支払手段情報とを関連付けて記憶させ、駐車場所と利用者端末の位置情報とが一致する者に対する支払手段情報を採用する割り振り機能であってもよい。この場合、利用者端末の位置情報と関連付けて駐車行為を特定できることから、利用者端末と関連付けられている支払手段を特定できる利点がある。 If the location information of the user terminal can be used, the location information of the user terminal and the payment method information are associated and stored, and the parking place and the location information of the user terminal are matched with each other. It may be an allocation function that adopts payment method information. In this case, since the parking action can be specified in association with the location information of the user terminal, there is an advantage that the payment method associated with the user terminal can be specified.
また、支払手段の設定や変更について、利用者毎に、設定や変更が可能な支払手段が異なっていてよい。すなわち、各支払手段について、一又は複数の利用者を特定する情報が、関連付けられて記憶されており、各関連づけられている利用者のみが、各支払手段を利用するか利用しないかを設定できてよい。例えば、一の利用者が支払手段A、B、Cに関連付けられているが、支払手段Dは関連付けられていない場合、かかる利用者は、A、B、Cについては支払手段として利用できるが、支払手段Dは利用できないよう、構成されてよい。ここで、支払手段A、B、Cは、かかる利用者が名義人又は支払責任者である口座情報、クレジットカード、デビットカードなどであってよい。他方、支払手段Dは、かかる利用者とは異なる利用者が名義人又は支払責任者であってよい。 Further, regarding the setting and change of the payment method, the payment method that can be set and changed may be different for each user. That is, for each payment method, information identifying one or more users is associated and stored, and only each associated user can set whether to use each payment method or not. You can. For example, if one user is associated with payment instruments A, B, C, but payment instrument D is not, such user can use A, B, C as payment instruments, Payment instrument D may be configured so that it cannot be used. Here, the payment means A, B, and C may be account information, a credit card, a debit card, or the like in which the user is the holder or the person responsible for payment. On the other hand, in the payment means D, a user different from such a user may be the holder or the person responsible for payment.
図4は、支払手段を設定する画面の一例である。ここで、利用者は、予め、自己が利用可能な支払手段情報を、利用者端末に入力してよい。例えば、支払手段情報1乃至6の6とおりの情報を入力してよく、利用者情報管理部は、かかる入力された情報を記憶し、かかる入力された情報を表示可能であってよい。利用者は、一又は複数の各利用車両について、支払手段を選択してよい。この場合、一の利用車両について、一又は複数の予め記憶させておいた支払手段の一を選択して入力してよく、利用者情報管理部は、かかる入力された情報を記憶し、かかる入力された情報を表示可能であってよい。ここで、支払手段として、複数を選択してもよい。また、利用者は、各支払手段を利用する場合の一又は複数の条件を入力してよく、利用者情報管理部は、かかる入力された情報を記憶し、かかる入力された情報を表示可能であってよい。例えば、各支払手段を適用する条件と共に設定してよい。本図においては、平日、休日、という条件と関連付けて、支払手段3と4を夫々関連付けて、設定している。 FIG. 4 is an example of a screen for setting a payment method. Here, the user may input the payment means information that he / she can use into the user terminal in advance. For example, six types of information of payment means information 1 to 6 may be input, and the user information management unit may be able to store the input information and display the input information. The user may select a payment method for each of the one or more vehicles used. In this case, one or a plurality of pre-stored payment methods may be selected and input for one vehicle to be used, and the user information management unit stores the input information and inputs the input. It may be possible to display the provided information. Here, a plurality of payment methods may be selected. In addition, the user may input one or more conditions when using each payment method, and the user information management unit can store the input information and display the input information. It may be there. For example, it may be set with the conditions to which each payment instrument applies. In this figure, payment means 3 and 4 are associated with each other and set in association with the conditions of weekdays and holidays.
利用者の認証情報は、利用者を認証可能な情報であって良い。利用者情報管理部は、かかる認証情報を用いて、利用者を認証可能な認証機能を有してよい。認証機能は、顔認証、指紋認証、声紋認証、暗証番号認証、パズル形式の認証、などの一又は複数の認証機能であってよい。支払手段情報の改ざんや情報漏洩を防止する利点がある。認証手段は、暗証番号、顔認証、指紋認証、声紋認証などであってよく、認証情報は、各認証手段に対応して対比されて合致が検証可能な情報であって良い。 The user authentication information may be information that can authenticate the user. The user information management unit may have an authentication function capable of authenticating a user by using such authentication information. The authentication function may be one or more authentication functions such as face authentication, fingerprint authentication, voiceprint authentication, PIN authentication, and puzzle-type authentication. It has the advantage of preventing falsification of payment method information and information leakage. The authentication means may be a personal identification number, face recognition, fingerprint authentication, voiceprint authentication, or the like, and the authentication information may be information that can be compared and verified to match each authentication means.
利用者に係る利用履歴情報は、駐車についての履歴情報を含んでよい。履歴情報は、利用者毎の駐車の履歴情報であってもよいし、利用車両毎の駐車の履歴情報であってもよい。駐車履歴情報は、例えば、駐車の時間に関する情報、駐車場に関する情報、駐車時に撮像された画像、駐車料金関連情報、等を含んでよいが、これらの一部又は全部であってよい。 The usage history information relating to the user may include history information regarding parking. The history information may be parking history information for each user or parking history information for each vehicle used. The parking history information may include, for example, information on parking time, information on parking lot, image captured at the time of parking, parking fee-related information, etc., but may be a part or all of them.
駐車の時間に関する情報は、駐車日、駐車開始時刻、駐車終了時刻、及び/又は、駐車継続時間、などを含んでよい。 Information about parking time may include parking date, parking start time, parking end time, and / or parking duration, and the like.
駐車場に関する情報は、駐車場の名称、駐車場の略称、駐車場の愛称、駐車場が所属する施設の名称、駐車場が付設されている施設の名称、かかる施設の住所、かかる施設の略称、駐車場に係るURL(例えば、駐車場のURL、駐車場が所属する施設のURL、駐車場が付設されている施設のURL)、及び/又は、駐車場に係る場所を示す地図(駐車場の地図、駐車場が所属する施設の地図、駐車場が付設されている施設の地図)、などを含んでよい。 Information about the parking lot includes the name of the parking lot, the abbreviation of the parking lot, the nickname of the parking lot, the name of the facility to which the parking lot belongs, the name of the facility to which the parking lot is attached, the address of the facility, and the abbreviation of the facility. , URL related to the parking lot (for example, URL of the parking lot, URL of the facility to which the parking lot belongs, URL of the facility to which the parking lot is attached), and / or a map showing the location related to the parking lot (parking lot) Map, map of the facility to which the parking lot belongs, map of the facility to which the parking lot is attached), etc. may be included.
駐車料金関連情報は、各駐車行為に対する駐車料金、支払済みの場合における支払者、支払済みでの場合における支払手段、などを含んでよい。 The parking fee-related information may include a parking fee for each parking act, a payer in the case of payment, a payment method in the case of payment, and the like.
図5Aは、利用者情報を記憶するデータの一例である。利用者情報として、利用者のID、利用者の氏名、認証情報、車両情報、支払手段情報、を関連付けて記憶している。本例は、一の家族が、3人から構成され、2台の車両を有し、各車両について、利用可能な状態となっている。そのため、各者について、各車両について、その支払手段情報が、関連付けられて記憶されている。すなわち、Aさんは、支払手段情報として、車両Aについては手段1が関連付けて記憶され、車両Bについては手段2が関連付けて記憶されている。他方、Bさんについては、車両Aと車両Bの両方について、同一の手段である手段1が関連付けて記憶されている。他方、Cさんは、車両Aについてのみ、手段2が関連付けられて記憶され、車両Bについては手段が記憶されていない。一例のシステムは、このような支払手段が記憶されていない状態において、車両Bの利用を可能としてもよいし、利用ができないようにしてもよい。前者の場合は、車両Bの利用について、支払時までに、支払手段が記憶されるようにする、又は、一の車両について、少なくとも一の支払手段を関連付けて記憶させることにより、対応する人についての支払いがない場合は、かかる関連付けて記憶されている少なくとも一の支払手段から自動的に支払いがされるよう処理されてもよい。後者の場合は、利用時に、支払手段が規定されておらず、駐車時に駐車料金を支払う必要があることを表示してもよい。かかる場合、一例のシステムは、利用者であるCさんが、利用車両(例えば、本例においては、車両B)を利用しようとアプリを起動させた時点で、支払手段が規定されていないこと、及び/又は、支払手段を規定する必要があること、についての情報を提供してもよい。提供の手段は、上述のとおり、音声、表示、などであってよい。なお、利用車両である車両Bの特定は、駐車アプリからの利用車両を特定する情報を、利用者であるCさんが入力することで特定されてもよいし、利用車両のGPSなどの位置情報と、Cさんを本アプリの起動による特定に基づくCさんに係る携帯端末の位置情報と、を比較することで特定されてもよい。 FIG. 5A is an example of data for storing user information. As the user information, the user ID, the user's name, the authentication information, the vehicle information, and the payment method information are stored in association with each other. In this example, one family is composed of three people, has two vehicles, and is available for each vehicle. Therefore, for each person, for each vehicle, the payment means information is associated and stored. That is, Mr. A stores the means 1 in association with the vehicle A and the means 2 in association with the vehicle B as payment means information. On the other hand, for Mr. B, the means 1 which is the same means is associated and stored for both the vehicle A and the vehicle B. On the other hand, Mr. C remembers the means 2 in association with only the vehicle A, and does not store the means for the vehicle B. One example system may allow the vehicle B to be used or may not be able to use it in a state where such payment means are not stored. In the former case, regarding the use of vehicle B, by making the payment means memorized by the time of payment, or by associating and memorizing at least one payment means for one vehicle, the corresponding person. If there is no payment, it may be processed so that payment is automatically made from at least one such associated and stored payment instrument. In the latter case, it may be indicated that the payment method is not specified at the time of use and the parking fee must be paid at the time of parking. In such a case, in the system of one example, the payment method is not specified when Mr. C, who is a user, starts the application to use the vehicle used (for example, vehicle B in this example). And / or may provide information about the need to specify payment instruments. The means of provision may be voice, display, or the like, as described above. The vehicle B, which is the vehicle to be used, may be specified by inputting the information for identifying the vehicle to be used from the parking application by Mr. C, who is the user, or the position information such as GPS of the vehicle to be used. And Mr. C may be identified by comparing with the position information of the mobile terminal related to Mr. C based on the identification by the activation of this application.
また、図5Bは、特に、各利用者と、支払手段と、その支払手段が適用される条件と、について、関連付けて記憶している一例である。例えば、利用者ID001は、車両Aの利用について、業務関連駐車場に駐車する場合は、支払手段1が適用されている。例えば、支払手段1が会社における清算と関連付けられている場合は、本図のように、車両Aにおいて、業務関連駐車場に駐車する場合、車両Bを平日に使用する場合、車両Bを夜間に利用する場合、利用者ID002が車両Aを場所Aに駐車する場合、利用者ID003が車両Aを使用する場合常に、支払手段1が利用されると構成することも可能である。このようにすることで、条件と関連付けることで、駐車場所や駐車時間などの条件と関連し、支払手段を各駐車行為について設定する必要なく、割り振りができる利点がある。 Further, FIG. 5B is an example in which each user, the payment means, and the conditions to which the payment means is applied are stored in association with each other. For example, for the user ID 001, the payment means 1 is applied to the use of the vehicle A when parking in a business-related parking lot. For example, when the payment method 1 is associated with the settlement in the company, as shown in this figure, when the vehicle A is parked in the business-related parking lot, the vehicle B is used on weekdays, and the vehicle B is used at night. In the case of use, it is also possible to configure that the payment means 1 is used whenever the user ID 002 parks the vehicle A at the place A and the user ID 003 uses the vehicle A. By doing so, by associating with the conditions, there is an advantage that the payment method can be allocated without having to set the payment method for each parking act in relation to the conditions such as the parking place and the parking time.
2.1.2.画像撮像部
画像撮像部は、画像を撮像する機能を有する。画像撮像部は、撮像した画像を、記憶する機能を有する。 2.1.2. Image capturing unit The image capturing unit has a function of capturing an image. The image capturing unit has a function of storing the captured image.
画像撮像部は、OCR機能を有してよい。画像撮像部は、撮像した画像から、OCR機能を用いて、情報を取得してよい。この場合、撮像する対象に応じて、すなわち、撮像した画像の対象に応じて、自動的に対象となる情報を取得してもよいし、予め撮像する画像の種類を、ユーザの入力によって受領した上で、対象となる情報を取得してもよい。 The image capturing unit may have an OCR function. The image capturing unit may acquire information from the captured image by using the OCR function. In this case, the target information may be automatically acquired according to the target to be imaged, that is, according to the target of the captured image, or the type of the image to be captured in advance is received by the input of the user. In the above, the target information may be acquired.
撮像する対象としては、支払手段であってよく、上述の、クレジットカード、デビットカード、電子マネー、銀行口座カード、銀行口座帳、等であって良い。画像撮像部は、各撮像する対象に合わせて、支払手段を特定する情報を取得してよい。なお、画像撮像部が、自動的に対象となる情報を取得する場合は、これらの支払手段の特徴に応じて、これらの対象を特定する機能を有してよい。例えば、クレジットカードを撮像している場合は、クレジットカードを撮像していることを特定し、銀行口座カードを撮像している場合は、銀行口座カードを撮像していることを特定する機能を有してよい。また、これらの撮像対象は、ユーザの入力によって、特定されてもよい。例えば、クレジットカードを撮像する、デビットカードを撮像する、銀行口座カードを撮像する、などのように、撮像対象の情報は、利用者によって入力されてもよい。駐車行為は、利用車両を複数の利用者で共用する場合があり、かかる複数の利用者の利用を、夫々支払手段が異なる場合があることから、支払手段を容易に入力できる利点は大きい。 The object to be imaged may be a payment means, and may be the above-mentioned credit card, debit card, electronic money, bank account card, bank account book, or the like. The image capturing unit may acquire information that identifies the payment means according to each image pickup target. When the image capturing unit automatically acquires the target information, it may have a function of specifying these targets according to the characteristics of these payment means. For example, if you are imaging a credit card, you can identify that you are imaging a credit card, and if you are imaging a bank account card, you can identify that you are imaging a bank account card. You can do it. In addition, these imaging targets may be specified by user input. For example, the information to be imaged may be input by the user, such as imaging a credit card, imaging a debit card, imaging a bank account card, and the like. In the parking act, the vehicle used may be shared by a plurality of users, and the payment means may be different for each of the users, so there is a great advantage that the payment means can be easily input.
また、画像撮像部は、撮像する対象として、ナンバープレートを含むものであってよい。この場合、画像撮像部は、OCR機能を用いて、ナンバープレートの具体的な文字列の情報を取得してもよいし、機械学習済み識別機能を用いて、ナンバープレートの具体的な文字列の情報を取得してもよい。後者の場合、機械学習済み識別機能は、端末装置内の画像撮像部自身が備えていてもよいし、端末装置外の機械学習済み識別装置を利用して、ナンバープレートの情報を取得してもよい。後者の端末装置外の機械学習済み識別装置を利用する場合、画像撮像部は、対象となる画像をかかる識別装置に送信し、かかる識別装置によって識別されたナンバープレートの情報を受信することで、かかるナンバープレートの情報を取得してもよい。機械学習済み識別機能は、端末装置内の情報処理装置内に格納されていてよい。識別する対象があらかじめ限定されていることにより、端末装置内のような簡易な情報処理装置においても、高い識別機能を実現できる利点がある。 Further, the image capturing unit may include a license plate as an image capturing target. In this case, the image capturing unit may use the OCR function to acquire information on the specific character string of the license plate, or use the machine-learned identification function to obtain information on the specific character string of the license plate. Information may be obtained. In the latter case, the machine-learned identification function may be provided by the image capturing unit itself in the terminal device, or the license plate information may be acquired by using the machine-learned identification device outside the terminal device. Good. When using the machine-learned identification device outside the terminal device of the latter, the image capturing unit transmits the target image to the identification device and receives the license plate information identified by the identification device. Information on such license plates may be obtained. The machine-learned identification function may be stored in the information processing device in the terminal device. Since the object to be identified is limited in advance, there is an advantage that a high identification function can be realized even in a simple information processing device such as in a terminal device.
なお、画像撮像部は、上述と異なり、単にナンバープレートを撮像し、その画像を取得し、かかる画像を、管理システムに送信するのみでもよい。また、画像撮像部は、撮像した画像のみを記憶し、対応するナンバープレートの具体的な文字列の情報を有しなくともよい。画像撮像部が、ナンバープレートを含む画像を記憶していることで、仮にナンバープレートの具体的な文字列の情報を有していなくとも、どの利用車両であるか、利用者は理解できるためである。 Note that, unlike the above, the image capturing unit may simply image the license plate, acquire the image, and transmit the image to the management system. Further, the image capturing unit does not have to store only the captured image and does not have the information of the specific character string of the corresponding license plate. This is because the image capturing unit stores the image including the license plate, so that the user can understand which vehicle is used even if he / she does not have the information of the specific character string of the license plate. is there.
画像撮像部が、画像を撮像する場合、撮像対象が表示されている端末装置内の表示画面上において、撮像対象となるナンバープレートの外枠の参考となる情報の表示がされてもよい。図6は、スマートフォンでナンバープレートを撮像しようとしている撮像対象を表示する表示画面の一例を示す。画面61内においてナンバープレート62が、画面内で右側に表示されている。そこで、参考となる情報の表示である外枠の表示63が表示され、かかる外枠に対応する程度の大きさになることが推奨されている状態である。このように、端末装置内の画像撮像部が、かかる参考となる情報の表示する機能を有することにより、ナンバープレートの情報の読み取りを正確に可能な程度の画像を撮像することを支援する機能を有してよい。 When the image capturing unit captures an image, information that can be used as a reference for the outer frame of the license plate to be imaged may be displayed on the display screen in the terminal device on which the imaging target is displayed. FIG. 6 shows an example of a display screen displaying an image pickup target for which a license plate is to be imaged with a smartphone. The license plate 62 is displayed on the right side of the screen in the screen 61. Therefore, the display 63 of the outer frame, which is a display of reference information, is displayed, and it is recommended that the size corresponds to the outer frame. In this way, the image capturing unit in the terminal device has a function of displaying such reference information, thereby providing a function of supporting the acquisition of an image to the extent that the information on the license plate can be accurately read. May have.
画像撮像部によって撮像された画像は、かかる画像から取得された支払手段の情報、又は、ナンバープレートの情報、と関連付けられて記憶されてよい。また、かかる画像及び/又はナンバープレートの情報は、管理システムに、送信されてよい。 The image captured by the image capturing unit may be stored in association with the payment means information obtained from such an image or the license plate information. In addition, such image and / or license plate information may be transmitted to the management system.
2.1.3.利用者支援部
利用車支援部は、利用者を支援する機能を有する。利用者支援部は、利用者の駐車行為を支援する機能を有してもよいし、利用者の駐車行為を促進する機能を有してもよい。 2.1.3. User Support Department The vehicle support department has a function of supporting users. The user support unit may have a function of supporting the parking behavior of the user, or may have a function of promoting the parking behavior of the user.
利用者支援部は、情報を表示することによって利用者を支援してよい。かかる表示される情報は、自動的に表示される情報であってもよいし、利用者からの入力を受けてかかる入力に対応する情報であってもよい。 The user support department may support the user by displaying the information. The displayed information may be information that is automatically displayed, or information that receives input from the user and corresponds to such input.
利用者支援部は、駐車領域を管理する機能を有する。本願書類において、一台の車両が駐車可能なものを駐車スペースということがある。駐車スペースは、車両が駐車中のものであってもよいし、車両が駐車していないものであってもよい。また、一又は複数の駐車スペースを、駐車領域ということがある。よって、駐車領域は、駐車スペースの上位概念の用語であってよい。また、駐車領域は、一又は複数の駐車スペースであるから、いわゆる駐車場よりも広い場合であってもよいし、駐車場よりも狭い場合であってもよい。また、一の駐車領域は、一の管理者のみが管理している場所であってもよいし複数の管理者が管理する場合もある。また、一の管理者が、複数の駐車領域を管理する場合もある。 The user support department has a function of managing the parking area. In the documents of the present application, a space in which one vehicle can be parked may be referred to as a parking space. The parking space may be one in which the vehicle is parked or one in which the vehicle is not parked. In addition, one or more parking spaces may be referred to as a parking area. Therefore, the parking area may be a term of a superordinate concept of the parking space. Further, since the parking area is one or more parking spaces, it may be wider than the so-called parking lot or narrower than the parking lot. Further, one parking area may be a place managed by only one manager, or may be managed by a plurality of managers. In addition, one manager may manage a plurality of parking areas.
また、本願書類において、駐車領域の状況を示す情報を、「満空情報」ということもある。満空情報という用語は、一台の駐車スペースのみから構成される駐車領域が駐車済み又は空車である情報、複数の駐車スペースから構成される駐車領域の一部又は全部が駐車済み又は駐車可能である場合についての情報、の上位概念であってよい。また、満空情報は、駐車済み又は駐車可能についての程度の情報、の上位概念であってよい。例えば、10台駐車可能な駐車スペースについて、3台駐車している状態についての満空情報は、ほぼ空車という情報であるが、8台駐車している状態についての満空情報は、ほぼ満車という情報であってよい。満空情報は、駐車可能なスペースの数を示す絶対数を含んでもよいし、駐車可能なスペースの割合を含む相対値を含んでもよい。また、満空情報は、満空の程度を示すランク付けしたものでもよい。例えば、全ての駐車スペースが駐車されている状態から全ての駐車スペースが駐車可能である状態を、順にA乃至Eとランク付けした場合において、満空情報は、かかるランク付けの一の情報を含むものであってもよい。また、駐車領域Aの満空情報αが、駐車領域Bの満空情報βよりも高いとは、満空情報が程度を示す情報であれば、満空情報αが満空情報βよりも混雑度が高い状態を示してよい。例えば、満空情報が絶対値又は割合であれば、満空情報αが満空情報βよりも高いとは満空情報αより満空情報βよりも高い値であってよい。なお、本願書類において、一又は複数の駐車スペースを含む駐車領域において、一又は複数の車両の駐車が可能なスペースを示す用語として、駐車可能領域ということもある。 Further, in the documents of the present application, the information indicating the status of the parking area may be referred to as "full vacancy information". The term full vacancy information means that the parking area consisting of only one parking space is parked or empty, and that part or all of the parking area consisting of multiple parking spaces is parked or parkable. It may be a superordinate concept of information about a certain case. In addition, the fullness information may be a superordinate concept of information on the degree of parking or parking. For example, for a parking space where 10 cars can be parked, the full vacancy information for the state where 3 cars are parked is almost empty, but the full vacancy information for the state where 8 cars are parked is almost full. It may be information. The fullness information may include an absolute number indicating the number of parkable spaces, or may include a relative value including the percentage of parkable spaces. In addition, the fullness information may be ranked to indicate the degree of fullness. For example, when the state in which all parking spaces are parked and the state in which all parking spaces are parkable are ranked as A to E in order, the full vacancy information includes one of the information in such ranking. It may be a thing. Further, the fact that the fullness information α of the parking area A is higher than the fullness information β of the parking area B means that the fullness information α is more crowded than the fullness information β if the information indicates the degree of the fullness information. It may indicate a high degree state. For example, if the full / empty information is an absolute value or a ratio, the fact that the full / empty information α is higher than the full / empty information β may be a value higher than the full / empty information α and higher than the full / empty information β. In the documents of the present application, in a parking area including one or more parking spaces, the term indicating a space in which one or more vehicles can be parked may be referred to as a parkable area.
利用者支援部は、駐車領域の満空情報を提供する機能を有してよい。満空情報を提供する機能は、利用者端末の画面上に表示する機能を含んでもよいし、利用者端末に備えられている音声発生装置を用いて音声によって案内する機能を含んでもよいし、その他の提供する機能を含んでもよい。 The user support unit may have a function of providing information on the availability of the parking area. The function of providing full / empty information may include a function of displaying on the screen of the user terminal, or may include a function of guiding by voice using a voice generator provided in the user terminal. Other provided functions may be included.
利用者支援部が、駐車可能領域を画面上に表示する場合、一又は複数の駐車可能なスペースを、視覚的に理解できる利点がある。また、駐車可能領域は、駐車場内における領域として、表示されてもよい。この場合、駐車場内における駐車可能領域を理解できる利点がある。また、駐車可能領域に加えて、前記駐車場内における対象となる利用車両の位置を、表示してもよい。また、この利用車両の位置は、現在のリアルタイムの利用車両の位置であって良い。この場合、駐車可能領域を、利用車両の位置との位置関係含めて、理解できる利点がある。 When the user support unit displays the parkable area on the screen, there is an advantage that one or more parkable spaces can be visually understood. Further, the parkable area may be displayed as an area in the parking lot. In this case, there is an advantage that the parkable area in the parking lot can be understood. Further, in addition to the parkable area, the position of the target vehicle to be used in the parking lot may be displayed. Further, the position of the used vehicle may be the position of the current real-time used vehicle. In this case, there is an advantage that the parkable area can be understood including the positional relationship with the position of the vehicle to be used.
図7は、利用者支援部が、駐車場内において、駐車可能領域を示す情報と、利用車両の現在の位置を示す情報と、端末装置内の表示画面に表示する一例である。駐車可能領域が、斜線71で示され、利用車両の現在の位置が●印72で示されている。なお、駐車可能領域や利用車両の現在の位置が、種々の情報によって表示されてよいことはいうまでもない。かかる表示によって、利用者は、現在の利用車両の位置と、駐車可能領域との位置関係を、容易に把握できる利点がある。 FIG. 7 is an example in which the user support unit displays information indicating a parkable area, information indicating the current position of the vehicle in use, and a display screen in the terminal device in the parking lot. The parkable area is indicated by diagonal lines 71, and the current position of the vehicle in use is indicated by ● mark 72. Needless to say, the parkable area and the current position of the vehicle used may be displayed by various information. Such a display has an advantage that the user can easily grasp the positional relationship between the position of the currently used vehicle and the parkable area.
駐車可能領域を音声で表示する場合、利用者は、運転中に利用者端末を確認する必要がなく、安全に駐車可能領域に移動できる利点がある。この場合、音声は、現在の位置との関係において、順次、誘導する情報を提供してもよい。例えば、「次は、右折です。」「〇メートルまっすぐ走行し、左折してください。」などの音声であってもよい。 When the parkable area is displayed by voice, the user does not need to check the user terminal while driving, and has an advantage that the user can safely move to the parkable area. In this case, the voice may provide information to sequentially guide in relation to the current position. For example, it may be a voice such as "Next is a right turn." "Please drive straight for 〇 meters and turn left."
駐車可能な駐車スペースの一部又は全部についての情報は、かかる駐車可能な駐車スペースに誘導可能な情報を含んでよい。例えば、かかる情報は、絶対的な位置を示す情報であってもよいし、現在の車両との関係における相対的な位置を示す情報であってもよい。前者の絶対的な位置を示す情報は、例えば、駐車場が複数の領域に区分されている場合において、かかる区分された領域を特定する情報を含んでよい。例えば、複数の領域として、A、B、Cという駐車場の領域がある場合において、このうちの、B領域、という情報であってもよい。他方、後者の相対的な位置を示す情報は、利用車両の現在の位置を基準として、誘導される駐車可能な駐車スペースの位置を誘導しうる情報であってよい。 Information about some or all of the parkable parking spaces may include information that can be directed to such parkable parking spaces. For example, such information may be information indicating an absolute position or information indicating a relative position in relation to the current vehicle. The information indicating the absolute position of the former may include, for example, information for identifying such a divided area when the parking lot is divided into a plurality of areas. For example, when there are parking lot areas A, B, and C as a plurality of areas, the information may be the B area among them. On the other hand, the latter information indicating the relative position may be information that can guide the position of the parkable parking space to be guided with reference to the current position of the vehicle to be used.
また、駐車可能な駐車スペースの一部又は全部についての情報は、上述の駐車可能な駐車スペースに誘導可能な情報と共に、駐車スペースの状況を示す情報である満空情報を含んでもよい。 Further, the information about a part or all of the parking space that can be parked may include the above-mentioned information that can be guided to the parking space that can be parked, as well as the fullness information that is information indicating the status of the parking space.
駐車スペースに誘導可能な情報は、利用者端末内で生成されてもよいし、管理システムから取得してもよい。 The information that can be guided to the parking space may be generated in the user terminal or may be acquired from the management system.
駐車スペースに誘導可能な情報を利用者端末内で生成する前者の場合、利用者端末が有している駐車場の満空情報を用いて、生成されてよい。かかる駐車場の満空情報は、管理システムから、取得されてよい。この場合、利用者端末は、特定の駐車場を利用すると判定された場合に、管理システムに対して、利用予定の駐車場を特定する情報を送信してよい。かかる情報に対し、管理システムは、対応する駐車場の満空情報を送信してよい。駐車スペースに誘導可能な情報を、利用者支援部は、種々の手法で生成してよく、その具体的な処理は、後述の管理システム内の個所において、まとめて説明する。 In the former case where information that can be guided to the parking space is generated in the user terminal, it may be generated by using the fullness information of the parking lot that the user terminal has. The fullness information of such a parking lot may be obtained from the management system. In this case, the user terminal may transmit information for identifying the parking lot to be used to the management system when it is determined that the specific parking lot will be used. In response to such information, the management system may transmit the corresponding parking lot fullness information. The user support unit may generate information that can be guided to the parking space by various methods, and the specific processing thereof will be collectively described at a place in the management system described later.
他方、駐車スペースに誘導可能な情報を管理システムから取得する後者の場合、管理システムから、駐車スペースに誘導可能な情報を取得してよい。この場合、利用者端末は、特定の駐車場を利用すると判定された場合に、管理システムに対して、利用予定の駐車場を特定する情報を送信してよい。かかる情報に対し、管理システムは、対応する駐車場についての駐車スペースに誘導可能な情報を送信してよい。 On the other hand, in the latter case of acquiring information that can be guided to the parking space from the management system, information that can be guided to the parking space may be acquired from the management system. In this case, the user terminal may transmit information for identifying the parking lot to be used to the management system when it is determined that the specific parking lot will be used. In response to such information, the management system may transmit information that can be directed to the parking space for the corresponding parking lot.
また、駐車スペースに誘導可能な情報の一部が、管理システムで生成され、残りが利用者端末内で生成されてもよい。かかる管理システムと端末装置との間の情報処理の分散は、種々の手法で行われてよい。 Further, a part of the information that can be guided to the parking space may be generated by the management system, and the rest may be generated in the user terminal. The distribution of information processing between the management system and the terminal device may be performed by various methods.
利用者支援部は、駐車スペースを使用する行為に対する対価である駐車料金の情報を、提供する機能を有してよい。かかる提供する機能は、情報を提供する機能は、利用者端末の画面上に表示してもよいし、利用者端末に備えられている音声発生装置を用いて音声によって案内してもよいし、その他の手段であってもよい。利用者端末の画面上に表示される場合において、複数の駐車料金が、駐車可能な各駐車スペースと関連付けられて表示される場合、利用者は、駐車料金を比較しつつ、駐車スペースを決定できる利点がある。なお、この場合、同一の駐車料金のスペースは、同一の表示がされてもよい。例えば、同一のマークであったり、同一の色彩であったり、同一の模様であったりしてよい。 The user support department may have a function of providing information on parking fees, which is a consideration for the act of using the parking space. The function to be provided may be displayed on the screen of the user terminal, or may be guided by voice using a voice generator provided in the user terminal. It may be other means. When displayed on the screen of the user terminal, when a plurality of parking fees are displayed in association with each parking space that can be parked, the user can determine the parking space while comparing the parking fees. There are advantages. In this case, spaces with the same parking fee may be displayed in the same manner. For example, they may have the same mark, the same color, or the same pattern.
音声で提供される場合、利用者は、運転中に利用者端末を確認する必要がなく、安全に駐車可能領域に移動できる利点がある。この場合、音声は、現在の位置との関係において、順次、駐車料金の情報を提供してもよい。 When provided by voice, the user does not need to check the user terminal while driving, and has the advantage of being able to safely move to the parkable area. In this case, the voice may sequentially provide parking fee information in relation to the current position.
利用者支援部は、駐車場内の駐車スペースを利用することに対応する金銭的価値を提供する機能を有してよい。金銭的価値は、クーポン、電子マネー、ポイント、などであってよい。クーポンは、駐車場に係る施設内におけるものであってよい。クーポンは、商品やサービスの代金を減少させるものであってよい。ポイントは、それ自身又は集積されることによって、商品やサービスの代金を減少させるものであってよい。 The user support department may have a function of providing monetary value corresponding to the use of the parking space in the parking lot. The monetary value may be coupons, electronic money, points, and the like. The coupon may be in the facility related to the parking lot. Coupons may reduce the price of goods or services. Points may be themselves or accumulated to reduce the price of goods or services.
2.2.管理システムの機能
2.2.1.利用者情報管理部
利用者情報管理部は、利用者情報を管理する機能を有する。利用者管理部は、利用者情報を有するデータベースを有してもよい。また、利用者管理部は、利用者情報の取得、記憶、及び/又は、管理が可能なように、外部のデータベースと連携可能であってよい。 2.2. Management system functions
2.2.1. User Information Management Department The user information management department has a function of managing user information. The user management unit may have a database having user information. In addition, the user management unit may be able to cooperate with an external database so that user information can be acquired, stored, and / or managed.
図9は、利用者管理部が管理する利用者情報のデータの一例である。各利用者について、利用者ID、氏名、認証情報、車両情報、支払手段情報などが記憶され、管理されている一例である。 FIG. 9 is an example of user information data managed by the user management unit. This is an example in which user ID, name, authentication information, vehicle information, payment method information, etc. are stored and managed for each user.
なお、利用者について、複数の利用者を、各々個別に設定してもよいし、複数の利用者について、一定の関係を有するよう、設定が可能であってもよい。例えば、一定の関係を有するよう複数の利用者について関係を作る態様としては、例えば、一の家族内の複数の利用者が、同一又は重複のある一又は複数の利用車両について、本例のシステムを利用する場合や、一の事業者が利用する一又は複数の利用車両について、かかる一の事業者内の複数の従業員や複数の関係者が利用する場合等が挙げられる。この場合、かかる一定の関係者内において、口座支払手段や利用車両が共通することから、一定の範囲において、かかる一定の関係を有する者において、情報の共有が可能であって良い。かかる状況を実現するために、一定の関係者の利用者IDを関連付けて記憶しておき、かかる関連付けのある場合は、他の利用者IDに係る利用者情報の一部又は全部を閲覧や変更ができるよう構成されてよい。この場合、利用者IDにおいて、例えば、代表者となる利用者IDと、通常の利用用の利用者IDと、を区別して入力し、記録し、管理できるようしておき、代表者に係るIDによって、代表者に係る利用者情報が、かかる代表者に係る利用者IDと一定の関係を有する利用者IDによってアクセスされた場合の閲覧、変更の可否の権限について、設定可能であってよい。 It should be noted that a plurality of users may be individually set for each user, or the plurality of users may be set so as to have a certain relationship. For example, as an embodiment in which a relationship is created for a plurality of users so as to have a certain relationship, for example, for a plurality of users in one family, the same or overlapping vehicles for one or more users, the system of this example. This may be the case, or the case where one or more vehicles used by one business operator are used by a plurality of employees or a plurality of related parties within the one business operator. In this case, since the account payment means and the vehicle used are common within such a certain related party, information may be shared by those having such a certain relationship within a certain range. In order to realize such a situation, the user IDs of certain related parties are associated and stored, and if there is such an association, part or all of the user information related to other user IDs is viewed or changed. May be configured to allow In this case, in the user ID, for example, a user ID to be a representative and a user ID for normal use are separately input, recorded, and managed so that the ID related to the representative can be managed. It may be possible to set the authority to view or change the user information when the user information related to the representative is accessed by the user ID having a certain relationship with the user ID related to the representative.
利用者情報管理部は、利用者端末から入力された利用者情報の一部又は全部を、利用者端末から取得し、記憶し、管理してよい。 The user information management unit may acquire, store, and manage a part or all of the user information input from the user terminal from the user terminal.
利用者情報管理部は、各利用者に対する、支払手段の管理において、第三者のシステムと連携してもよい。例えば、カーシェアーやレンタカーなどの場合、利用者情報管理部は、かかるカーシェアーやレンタカーなどを管理するシステム(本願書類において、「第三者管理システム」ということもある)と連携することにより、駐車料金の請求先を決定してよい。 The user information management unit may cooperate with a third-party system in managing payment means for each user. For example, in the case of a car share or a rental car, the user information management department cooperates with a system that manages the car share or the rental car (sometimes referred to as a "third-party management system" in the documents of the present application). You may decide where to bill the parking fee.
例えば、カーシェアーやレンタカーなどのシステムである第三者管理システムから、一の車両を特定する情報と関連付けられて、特定の時間帯における利用者を特定する情報を取得する場合、後述の画像利用部によって、特定の時間帯に特定の駐車領域において、ある車両を特定する情報を取得した場合、かかる車両を特定する情報に対応する、その時間帯における利用者を特定し、かかる利用者に対応して利用者履歴情報を生成してよい。この場合、一例のシステムにおいて、画像利用部において、ある車両を特定する情報を取得した場合、かかる車両を特定する情報を、かかる第三者管理システムに送信し、これに対応して、かかる第三者管理システムから利用者を特定する情報を取得し、かかる利用者について利用履歴を更新してもよい。この場合、一例のシステムにおいて、駐車行為をしたことを示す車両を特定する情報についてのみの情報を、かかる第三者管理システムから取得するため、必要な範囲での情報を取得し、利用者のプライバシーを向上できる利点がある。なお、この場合において、一例のシステムから第三者管理システムに対し、かかる駐車行為をしたことを示す一又は複数の車両を特定する情報を送信するタイミングは、種々のものであってよく、駐車行為の直後であってもよいし、所定期間毎であってもよいし、支払手段を特定するための所定の時期であってもよい。 For example, when acquiring information that identifies a user in a specific time zone in association with information that identifies one vehicle from a third-party management system that is a system such as car sharing or rental car, use the image described later. When the department acquires information that identifies a certain vehicle in a specific parking area at a specific time zone, it corresponds to the information that identifies such a vehicle, identifies the user in that time zone, and responds to such user. And user history information may be generated. In this case, in the system of one example, when the image utilization unit acquires the information for identifying a certain vehicle, the information for identifying the vehicle is transmitted to the third party management system, and in response to this, the first Information that identifies a user may be acquired from a third-party management system, and the usage history may be updated for such user. In this case, in the system of one example, in order to acquire only the information for identifying the vehicle indicating that the parking act has been performed from the third party management system, the information in the necessary range is acquired and the user's information is obtained. It has the advantage of improving privacy. In this case, the timing of transmitting information identifying one or more vehicles indicating that such parking has been performed from the system of one example to the third party management system may be various, and parking may be performed. It may be immediately after the act, every predetermined period, or at a predetermined time for specifying the payment method.
他方、かかる第三者管理システムから、かかる第三者管理システムにおいて管理する一又は複数の車両を特定する情報と関連付けられた利用者を特定する情報を、一例のシステムに予め送信してもよい。 On the other hand, from such a third party management system, information for identifying a user associated with information for identifying one or more vehicles managed by such a third party management system may be transmitted in advance to an example system. ..
また、その他の態様として、支払について、一例のシステムにおいて各利用者に請求するのではなく、一例のシステムが、第三者管理システムにおいての請求を依頼するよう構成されてもよい。例えば、一例のシステムの画像利用部が、駐車行為を示す一又は複数の車両を特定する情報を取得した場合において、かかる車両を特定する情報を、第三者管理システムに送信するとともに、各車両に対応する各駐車料金の情報を、第三者管理システムに送信してもよい。この場合、一例のシステムは、各駐車行為を推定する関連する画像を送ってもよいし、また、駐車の継続時間を示す時間情報として、例えば、駐車開始時刻、駐車終了時刻、駐車場入場時刻、駐車場出場時刻、などの情報を送信してもよい。なお、かかる情報の送信は、駐車行為を検知した段階で、順次送信してもよい。この場合、第三者管理システムが、車両のレンタル終了時点までに、かかる駐車料金を特定することができ、車両のレンタル利用者に対して、レンタル終了時点に請求できる利点がある。他方、カーシェアーなど、所定期間毎にクレジットカードや口座支払によって支払われている場合においては、上述の送信は、所定の期間毎や所定の時期にまとめて情報を送ってもよい。かかる構成の場合、一例のシステムは、第三者管理システムにおいて管理されている車両についての駐車料金についても情報を収集できる利点がある。なお、カーシェアーやレンタカーなどの第三者管理システムから、一例のシステムの管理者への支払いは、本例のシステムがその一部として有して処理可能であってもよいし、他の支払管理システムによって処理されてもよい。 Further, as another aspect, the payment may be configured so that the system of the example requests the billing in the third party management system instead of billing each user in the system of the example. For example, when the image utilization unit of an example system acquires information for identifying one or more vehicles indicating parking behavior, the information for identifying such vehicles is transmitted to a third-party management system and each vehicle is used. Information on each parking fee corresponding to the above may be transmitted to a third-party management system. In this case, the example system may send a relevant image that estimates each parking activity, and may include time information indicating the duration of parking, such as, for example, parking start time, parking end time, parking lot entry time. , Parking lot entry time, etc. may be transmitted. It should be noted that such information may be sequentially transmitted at the stage when the parking action is detected. In this case, there is an advantage that the third-party management system can specify the parking fee by the end of the rental of the vehicle and can charge the rental user of the vehicle at the end of the rental. On the other hand, in the case where payment is made by credit card or account payment at predetermined intervals such as car sharing, the above-mentioned transmission may collectively send information at predetermined periods or at a predetermined time. In such a configuration, one example system has the advantage of being able to collect information about parking fees for vehicles managed by a third party management system. It should be noted that payments from a third-party management system such as a car share or a rental car to the administrator of one system may be processed by the system of this example as a part of the payment, or other payments. It may be processed by the management system.
利用者情報管理部は、画像利用部から、画像に基づく情報を、取得し、記憶し、管理してよい。例えば、利用者情報管理部は、画像利用部から、撮像された画像に基づいた、車両を特定する情報を取得し、かかる車両を特定する情報を用いて、利用者情報管理部内の車両を特定する情報と比較して、照合し、利用者情報管理部内においてかかる車両を特定する情報と関連付けられている利用車両を特定してよい。この場合、かかる画像と関連付けられた、駐車履歴情報を、かかる利用車両と関連付けられている駐車履歴に記憶してよい。 The user information management unit may acquire, store, and manage image-based information from the image utilization unit. For example, the user information management unit acquires information for identifying a vehicle from the image utilization unit based on the captured image, and uses the information for identifying the vehicle to identify the vehicle in the user information management unit. You may specify the vehicle to be used that is associated with the information that identifies the vehicle in the user information management unit by comparing with the information to be used. In this case, the parking history information associated with the image may be stored in the parking history associated with the vehicle used.
利用者情報管理部は、駐車料金を計算する機能を有してよい。駐車料金は、所定の期間毎に計算されてもよいし、利用者端末や管理者端末から指定された期間について計算されてもよい。また、利用者情報管理部は、駐車料金を、新たな駐車行為に対応して、所定の期間や指定された期間の駐車料金の合計を計算してもよい。 The user information management unit may have a function of calculating a parking fee. The parking fee may be calculated for each predetermined period, or may be calculated for a period specified by the user terminal or the administrator terminal. In addition, the user information management unit may calculate the total parking fee for a predetermined period or a designated period in response to a new parking act.
利用者情報管理部は、所定の時期、所定の期間毎、所定のイベント、に対応して、利用者に対して請求処理を行ってよい。請求処理は、所定の時期、所定の期間、又は所定のイベントにおける、駐車料金又は駐車料金の合計額の請求であってよい。また、請求処理は、本例のシステムが請求処理機能を有して、利用者に対して直接請求処理をしてもよいし、他のシステムと連携して、請求処理をしてもよい。他のシステムと連携する場合、請求に利用される情報を、本例のシステムは、かかる他のシステムに対して、送信してよい。例えば、利用者を特定する情報、利用者が請求される料金の合計額、利用者が請求される駐車履歴情報の一部又は全部、などであってよい。かかる他のシステムは、金融機関における口座支払関係であってもよいし、クレジットカードやデビットカードなどに係るシステムであってもよいし、これらに限らず、支払手段に対応するシステムであってよい。 The user information management unit may perform billing processing to the user in response to a predetermined time, a predetermined period, and a predetermined event. The billing process may be a billing of the parking fee or the total amount of the parking fee at a predetermined time, a predetermined period, or a predetermined event. Further, in the billing process, the system of this example has a billing processing function, and the billing process may be performed directly to the user, or the billing process may be performed in cooperation with another system. When linking with other systems, the system of this example may transmit information used for billing to such other systems. For example, it may be information that identifies the user, the total amount of charges charged by the user, part or all of the parking history information charged by the user, and the like. The other system may be an account payment relationship at a financial institution, a system related to a credit card, a debit card, or the like, and is not limited to these, and may be a system corresponding to a payment method. ..
2.2.2.画像利用部
画像利用部は、画像を利用する機能を有する。画像利用部は、撮像された画像を取得する機能を有してよい。画像利用部は、駐車場と関連して設置された一又は複数の撮像装置から撮像された画像を取得してよい。画像利用部を含む管理システムは、かかる一又は複数の撮像装置と、直接的又は間接的に接続可能であってよい。本願書類において、画像は、静止画の上位概念を示す用語でよく、動画の上位概念を示す用語であってよい。そのほか、画像は、タイムラプスなど撮像された種々の撮像態様のものの上位概念であってよい。 2.2.2. Image utilization unit The image utilization unit has a function of utilizing an image. The image utilization unit may have a function of acquiring an captured image. The image utilization unit may acquire images captured from one or more image pickup devices installed in association with the parking lot. The management system including the image utilization unit may be directly or indirectly connectable to such one or more imaging devices. In the document of the present application, the image may be a term indicating a superordinate concept of a still image, or may be a term indicating a superordinate concept of a moving image. In addition, the image may be a superordinate concept of various imaging modes such as time lapse.
画像利用部は、撮像された画像に、撮像された時間的情報を示す情報を関連付けてよい。撮像時刻の関連手段は種々の手法であってよい。撮像された画像と関連付けて撮像時点をデータベースとして関連付けて記憶してもよいし、撮像された画像内に撮像時点を埋め込む手法により関連付けてもよい。撮像された時間的情報を示す情報は、撮像された年月日でもよいし、撮像した時刻であってもよいし、撮像した年月日及び撮像した時刻であってもよい。 The image utilization unit may associate the captured image with information indicating the captured temporal information. The means related to the imaging time may be various methods. The imaging time point may be associated and stored as a database in association with the captured image, or may be associated by a method of embedding the imaging time point in the captured image. The information indicating the time information captured may be the date of the image, the time of the image, the date of the image, and the time of the image.
画像利用部は、撮像された画像に、撮像した位置を示す情報を関連付けてよい。撮像の位置を示す情報は、画像を撮像した撮像装置の駐車場を特定可能な情報であってもよいし、その駐車場内のかかる撮像装置が設置された場所を特定可能な情報であってもよいし、他の情報と関連付けられることで撮像の場所を特定可能な情報であってもよい。 The image utilization unit may associate the captured image with information indicating the captured position. The information indicating the position of the image pickup may be information that can identify the parking lot of the image pickup device that captured the image, or information that can specify the location where the image pickup device is installed in the parking lot. It may be information that can specify the location of imaging by being associated with other information.
画像利用部は、撮像された画像が改ざんされないよう、種々の手段を採用してよい。例えば、画像利用部は、撮像した画像と関連付けられた日時の情報が改ざんされないような手段を採用してよい。例えば、画像利用部は、撮像した画像と関連付けられた日時の情報に対して、タイムスタンプを取得する手法を採用してもよいし、ブロックチェーンに記憶する手法を採用してもよい。 The image utilization unit may employ various means so that the captured image is not tampered with. For example, the image utilization unit may adopt a means for preventing falsification of the date and time information associated with the captured image. For example, the image utilization unit may adopt a method of acquiring a time stamp for information on the date and time associated with the captured image, or may adopt a method of storing it in the blockchain.
なお、画像利用部は、上述では、画像利用部自身が、撮像時点や撮像した位置を示す情報を関連付ける機能を有する説明をしたが、かかる撮像時点や撮像した位置は撮像された画像と画像利用部外で関連付けられ、かかる画像と、撮像時点及び/又は撮像した位置を示す情報と、が関連付けられたものを取得してもよい。 In the above description, the image utilization unit has a function of associating information indicating an imaging time point and an imaged position with the image utilization unit itself, but such an imaging time point and an imaged position are the captured image and the image utilization. It may be obtained that the image is associated with the outside, and the information indicating the time of imaging and / or the imaged position is associated with the image.
画像利用部は、機械学習済み識別機能を有する。機械学習済み識別機能は、予め定められた対象を識別可能な機能を有してよい。 The image utilization unit has a machine-learned identification function. The machine-learned identification function may have a function capable of identifying a predetermined object.
機械学習は、種々の人工知能技術が用いられてよい。人工知能技術としては、例えば、ニューラルネットワーク、遺伝的プログラミング、機能論理プログラミング、サポートベクターマシン、クラスタリング、回帰、分類、ベイジアンネットワーク、強化学習、表現学習、決定木、k平均法などの機械学習技術が用いられてよい。以下では、ニューラルネットワークを用いる例を使用するが、必ずしもニューラルネットワークに限定されるものではない。 Various artificial intelligence techniques may be used for machine learning. Artificial intelligence technologies include, for example, machine learning technologies such as neural networks, genetic programming, functional logic programming, support vector machines, clustering, regression, classification, Bayesian networks, reinforcement learning, expression learning, decision trees, and k-means clustering. May be used. In the following, an example using a neural network will be used, but the present invention is not necessarily limited to the neural network.
ニューラルネットワークを用いた機械学習技術は、ディープラーニング(深層学習)技術を用いてよい。これは、複数の層を用いて入力と出力の関係を学習することで、未知の入力に対しても入力に対応する出力を生成可能とする技術である。教師有りと教師なしの手法が存在するが、どちらが適用されてもよい。教師ありの手法の場合、学習用画像と、前記学習用画像に係る属性情報と、が関連付けられており、これらを学習データとして機械学習する。 As the machine learning technique using the neural network, a deep learning (deep learning) technique may be used. This is a technique that makes it possible to generate an output corresponding to an input even for an unknown input by learning the relationship between the input and the output using a plurality of layers. There are supervised and unsupervised methods, either of which may be applied. In the case of the supervised method, the learning image and the attribute information related to the learning image are associated with each other, and machine learning is performed using these as learning data.
ディープラーニング技術を用いる場合における学習アルゴリズム自体は、公知のものであってよい。また、ディープラーニング技術において使用されるプログラムは、オープンソースのものを用いてもよいし、それらを適宜修正されたものが用いられてもよい。 The learning algorithm itself when using the deep learning technique may be a known one. Further, as the program used in the deep learning technique, an open source program may be used, or a program obtained by modifying them as appropriate may be used.
また、機械学習済み機能は、学習機能を有してよい。学習機能は、識別可能な対象について、更に学習できる機能であってよい。例えば、ナンバープレートに係る情報を学習し、ナンバープレートの識別機能を向上できる機能であってよい。かかる学習機能は、プログラム又はそのパラメータをダウンロードして、インストールされる態様であってよい。 Further, the machine-learned function may have a learning function. The learning function may be a function that can further learn about an identifiable object. For example, it may be a function capable of learning information related to the license plate and improving the identification function of the license plate. Such a learning function may be in a mode in which the program or its parameters are downloaded and installed.
機械学習済み識別機能は、車両を含む画像から、かかる車両を特定する情報を、取得する機能を有してよい。例えば、車両のナンバープレートを含む画像から、かかるナンバープレートに係る情報を取得することにより、車両を特定する情報を取得してよい。また、車両のナンバープレートに係る情報に代えて、又は、ナンバープレートの情報に加えて、車両の車種、色、及び/又は、大きさの情報などを取得することにより、車両の特定の可能性を高める情報を取得してもよい。 The machine-learned identification function may have a function of acquiring information for identifying such a vehicle from an image including a vehicle. For example, information for identifying a vehicle may be acquired by acquiring information relating to such a license plate from an image including a license plate of the vehicle. In addition, instead of the information related to the license plate of the vehicle, or by acquiring the information on the vehicle type, color, and / or size of the vehicle in addition to the information on the license plate, there is a possibility of identifying the vehicle. You may obtain information that enhances the information.
例えば、画像利用部は、2種類の機械学習済み識別機能を備えてよい。一つ目の識別機能である識別装置Aは、画像から、ナンバープレートに相当する箇所を特定し、切り出す機能を有する。かかる識別装置Aは、車両に係る画像を入力とする。車両に係る画像は、ナンバープレートを画像内の一部に含む画像であって良い。車両に係る画像は、車両の前方から撮像した画像、及び/又は、車両の後方から撮像した画像、であってよい。 For example, the image utilization unit may include two types of machine-learned identification functions. The identification device A, which is the first identification function, has a function of identifying and cutting out a portion corresponding to a license plate from an image. The identification device A inputs an image related to the vehicle. The image relating to the vehicle may be an image including the license plate as a part of the image. The image relating to the vehicle may be an image taken from the front of the vehicle and / or an image taken from the rear of the vehicle.
識別装置Aは物体検知モデルを有してよい。識別装置Aは、機械学習済み識別装置を、ナンバープレートに特化したものでよい。機械学習済み識別装置としては、例えば、Yolo、SSD、などが挙げられるが、これらに限られない。 The identification device A may have an object detection model. The identification device A may be a machine-learned identification device specialized for a license plate. Examples of the machine-learned identification device include, but are not limited to, Yoro, SSD, and the like.
2つ目の識別装置である識別装置Bは、識別装置Aで特定されたナンバープレートに相当する箇所を入力とし、ナンバープレートに係る情報を出力とする機能を有する。ナンバープレートに係る情報としては、例えば、ナンバープレートの、軽自動車、バイク、商用車、乗用車、外国ナンバー、などのナンバープレートの種類を含んでよい。また、ナンバープレートに係る情報は、ナンバープレートの地域名、分類番号、ひらがな、及び/又は、一連指定番号を含んでよい。例えば、図9Aは、これらのナンバープレートの地域名、分類番号、ひらがな、及び/又は、一連指定番号の例である。 The identification device B, which is the second identification device, has a function of inputting a portion corresponding to the license plate specified by the identification device A and outputting information related to the license plate. The information related to the license plate may include, for example, the type of license plate such as a light vehicle, a motorcycle, a commercial vehicle, a passenger car, a foreign number, and the like. In addition, the information related to the license plate may include the area name, classification number, hiragana, and / or serial designation number of the license plate. For example, FIG. 9A is an example of the area name, classification number, hiragana, and / or serial designation number of these license plates.
識別装置Bは、地域名、について、個々の文字毎に特定してもよいし、複数の文字で特定してもよい。前者は、例えば、つ、く、ば、など文字毎を意味する。後者は、「つくば」、「いわき」、などであってよい。また、識別装置Bは、これらの複数の文字について、ありえる候補に対する確率を特定してよい。例えば、識別装置Bは、ナンバープレートに係る画像から、地域名として、「つくば」が97%、「いわき」が2%などのように、ナンバープレートは地域名としての候補が現在116個で限定されていることから、これらの限られた候補の中で可能性の高い地域名を、特定するものであってよい。なお、この特定する処理において、候補の少なくとも一部について、確率を生成してよい。 The identification device B may specify the area name for each individual character, or may specify the area name with a plurality of characters. The former means each character such as tsu, ku, ba, and so on. The latter may be "Tsukuba", "Iwaki", or the like. In addition, the identification device B may specify the probabilities for possible candidates for these plurality of characters. For example, in the identification device B, from the image related to the license plate, as the area name, "Tsukuba" is 97%, "Iwaki" is 2%, etc., and the number plate is currently limited to 116 candidates as the area name. Therefore, it may be possible to identify a region name that is likely to be among these limited candidates. In this specifying process, probabilities may be generated for at least a part of the candidates.
このように、複数の文字を対象とすることにより、個々の文字で特定することに比べて、例えば、一の文字が不明瞭であっても、3つの文字の組み合わせを、候補となるものから選択することにより、高い精度で、ナンバープレートに係る情報を出力できる利点がある。特にナンバープレートは、車両の前後に外部と接する位置に備えられることで塵やほこりによる汚れがあり、また、車両の移動に伴って生じる泥はねなどによる汚れで、汚れのないナンバープレートと全く異なる外見となる場合がある。人であれば認識可能であっても、そのような規則性のない汚れに対しても、高い精度で、ナンバープレートに係る情報を出力できる利点がある。なお、上述においては、地域名について、説明したが、同様に、種類についても、軽自動車、バイク、商用車、乗用車、外国ナンバーの、各々についての確率を生成し、その上で種類を特定してもよい。また、同様に、分類番号、ひらがな、一連指定番号についても、同様の処理がされてよい。 In this way, by targeting a plurality of characters, compared to specifying by individual characters, for example, even if one character is unclear, a combination of three characters can be selected from candidates. By selecting it, there is an advantage that the information related to the license plate can be output with high accuracy. In particular, the license plate is provided in a position where it comes into contact with the outside in front of and behind the vehicle, so it is dirty due to dust and dirt, and it is also dirty due to mud splashes that occur as the vehicle moves, so it is completely different from a clean license plate. It may look different. Even if it can be recognized by humans, it has the advantage of being able to output information related to the license plate with high accuracy even for such irregular stains. In the above, the area name has been explained, but similarly, for the type, the probability for each of the light vehicle, motorcycle, commercial vehicle, passenger car, and foreign number is generated, and then the type is specified. You may. Similarly, the same processing may be performed for the classification number, hiragana, and serial designation number.
関連する技術として、物体検出を用いた技術があるが(例えば、https://monoist.atmarkit.co.jp/mn/articles/1908/28/news041.html)、かかる関連技術は、単に上述の識別装置Aにおける「物体認識」を用いているものであり、「分類モデル」を用いているものではない。かかる関連技術は、物体認識を用いていることから、一般的にモデルサイズが大きくなり処理の負荷が大きいこと、および、検出ミスにより精度が上げづらい問題がある。ここで、検出ミスは、例えば、3つの文字の一つが不明瞭であると判定されてしまう場合などを指す。他方、上述の識別装置Bにおいて、特に、地域名、分類番号などに対する「分類」モデルを用いている場合、モデルサイズを物体認識よりも小さく可能とし、また、不明瞭という判定をせずに、文字表現が類似している地域名・分類番号などの確率を生成できる利点がある。特に、上述の手法によって、地域名において、漢字を含むナンバープレートに対して、機械学習モデルにおける分類モデルを用いた機械学習済み識別装置を適用することで、漢字を含めた地域名のナンバープレートの分類を可能としている。 As a related technology, there is a technology using object detection (for example, https://monoist.atmarkit.co.jp/mn/articles/1908/28/news041.html), but such related technology is simply described above. The "object recognition" in the identification device A is used, and the "classification model" is not used. Since such a related technique uses object recognition, there are problems that the model size is generally large and the processing load is heavy, and it is difficult to improve the accuracy due to a detection error. Here, the detection error refers to, for example, the case where one of the three characters is determined to be unclear. On the other hand, in the above-mentioned identification device B, especially when a "classification" model for a region name, a classification number, etc. is used, the model size can be made smaller than the object recognition, and the model size can be made smaller than the object recognition, and the judgment is not unclear. There is an advantage that it is possible to generate probabilities such as area names and classification numbers that have similar character expressions. In particular, by applying the machine-learned identification device using the classification model in the machine learning model to the license plate containing Chinese characters in the area name by the above method, the license plate of the area name including Chinese characters can be applied. It is possible to classify.
以上、ナンバープレートに係る情報の処理方法として、上述として、識別装置Aと識別装置Bとに分けて説明したが、上述が一つの識別装置によって処理されてもよいし、3つ以上の異なる種類の識別装置によって実現されてもよい。 As described above, the method of processing the information related to the license plate has been described separately for the identification device A and the identification device B, but the above may be processed by one identification device, or three or more different types. It may be realized by the identification device of.
一例のシステムは、
撮像されたナンバープレートを含む画像を取得する取得部と、
分類モデルによる機械学習済み識別装置を用いて、前記撮像されたナンバープレートを含む画像から、前記ナンバープレートに係る情報を生成する生成部と、
を備えるシステムであってよい。An example system is
An acquisition unit that acquires an image including the captured license plate,
Using a machine-learned identification device based on a classification model, a generator that generates information related to the license plate from an image including the captured license plate, and a generator.
It may be a system including.
一例のシステムは、
撮像されたナンバープレートを含む画像を取得する取得部と、
分類モデルによる機械学習済み識別装置を用いて、前記撮像されたナンバープレートを含む画像から、前記ナンバープレートに係る、地域名、種類、分類番号、ひらがな、及び/又は、一連指定番号、を含む前記ナンバープレートに係る情報を生成する生成部と、
を備えるシステムであってよい。An example system is
An acquisition unit that acquires an image including the captured license plate,
Using a machine-learned identification device based on a classification model, the image including the license plate captured, including the area name, type, classification number, hiragana, and / or serial designation number related to the license plate. A generator that generates information related to the license plate,
It may be a system including.
一例のシステムは、
撮像されたナンバープレートを含む画像を取得する取得部と、
複数の漢字を分類可能な分類モデルによる機械学習済み識別装置を用いて、前記撮像されたナンバープレートを含む画像から、前記ナンバープレートに係る、複数の漢字を含む地域名を含む前記ナンバープレートに係る情報を生成する生成部と、
を備えるシステムであってよい。An example system is
An acquisition unit that acquires an image including the captured license plate,
Using a machine-learned identification device based on a classification model capable of classifying a plurality of kanji, from the image including the license plate imaged, the license plate is related to the license plate including the area name including a plurality of kanji. A generator that generates information and
It may be a system including.
また、ナンバープレートに係る情報を出力する識別装置は、機械学習されたものであってよい。かかる機械学習は、ナンバープレートを含む画像と、かかる画像に関連付けられた、種類、地域名、分類番号、ひらがな、及び/又は、一連指定番号、とが関連付けられた教師データを用いて、行われてよい。ここで、機械学習を可能とするような大量のナンバープレートを含む画像データを収集することは困難である場合がある。特に固定された撮像装置によって車両を撮像することでナンバープレートを収集する場合、地域名116個に対し、それぞれ数千枚規模で学習データを収集することは事実上非常に困難であり、仮に集めることができたとしてもその規模の枚数に対して正解ラベルを付与する負担が大きい。そこで、ナンバープレートに近い見た目になるような「画像ジェネレーター」プログラムを準備し、欲しい地域名や分類番号などのラベル入力に応じて、画像を生成させる。この画像ジェネレータにより、機械学習の可能な教師データを作成できる。しかしながら、生成された画像は必ずしも現実のナンバープレートの見た目とは一致しておらず、「きれいすぎる」ものとなる。このきれいすぎる画像で学習させたAIモデルは、現実世界の汚い/掠れたナンバープレートに対して適用しても、同一のものとして判定されない。 Further, the identification device that outputs the information related to the license plate may be machine-learned. Such machine learning is performed using the teacher data associated with the image containing the license plate and the type, area name, classification number, hiragana, and / or sequence designation number associated with the image. You can. Here, it may be difficult to collect image data including a large amount of license plates that enables machine learning. In particular, when collecting license plates by imaging a vehicle with a fixed imaging device, it is practically very difficult to collect learning data on a scale of several thousand for each of 116 area names, and it is tentatively collected. Even if it can be done, it is a heavy burden to give a correct answer label to the number of sheets of that scale. Therefore, prepare an "image generator" program that looks like a license plate, and generate an image according to the label input such as the desired area name or classification number. With this image generator, teacher data capable of machine learning can be created. However, the generated image does not always match the appearance of the actual license plate and is "too beautiful". The AI model trained with this overly clean image is not determined to be the same when applied to a dirty / blurred license plate in the real world.
そこで、発明者らは、ナンバープレートを含む画像を人為的に生成する手法を適用した。すなわち、まず、1)種類、地域名、分類番号、ひらがな、及び/又は、一連指定番号などのナンバープレートに係る情報を入力情報として、対応する情報を含むナンバープレートの画像を生成する画像ジェネレータを用い、かかる画像と、対応するナンバープレートに係る情報とを関連付けた情報を生成する。かかる生成は、プログラムの実行であることから負担は少ない。次に、2)一定程度の枚数の現実に撮像されたナンバープレートを含む画像を準備する。かかる画像は、種類、地域名、分類番号、ひらがな、及び/又は、一連指定番号などのナンバープレートに係る情報が偏っていてもよい。例えば、特定の地域名が欠けていたり、特定のひらがなが欠けていたりしてもよい。かかる情報は、例えば、固定された撮像装置やドライブレコーダ等によって生成された画像であってよい。これらの1)と2)の画像を用いて学習させる技術を用いてよい。特に、日本のナンバープレートは、地域名を含みことによって画像の収集が困難であることを、上述の1)と2)の両方を用いることで解決する点に利点がある。 Therefore, the inventors applied a method of artificially generating an image including a license plate. That is, first, 1) an image generator that generates a license plate image including the corresponding information by inputting information related to the license plate such as type, area name, classification number, hiragana, and / or serial designation number as input information. It is used to generate information associating such an image with information relating to the corresponding license plate. Since such generation is the execution of a program, the burden is small. Next, 2) prepare a certain number of images including actually captured license plates. In such an image, information related to the license plate such as type, area name, classification number, hiragana, and / or serial designation number may be biased. For example, a specific area name may be missing, or a specific hiragana may be missing. Such information may be, for example, an image generated by a fixed imaging device, a drive recorder, or the like. A technique for learning using these images 1) and 2) may be used. In particular, Japanese license plates have the advantage of solving the difficulty of collecting images due to the inclusion of region names by using both 1) and 2) above.
なお、上述の1)の画像の生成において、現実に撮像されたナンバープレート画像により近づけた画像(本願書類において「疑似撮像画像」ということもある。)を生成することで、更に、機械学習の精度を向上できる利点がある。上述の、種類、地域名、分類番号、ひらがな、及び/又は、一連指定番号などのナンバープレートに係る情報を入力情報として、画一的なナンバープレートの外見のテンプレートに、かかる入力情報を対応する位置に含ませた画像を生成する画像ジェネレータによって生成された画像(本願書類において「単純生成画像」ということもある)は、現実に撮像されたナンバープレートの画像(本願書類において、「現実撮像画像」ということもある。)と異なりうる理由として、例えば、以下の観点が挙げられる。 In addition, in the generation of the image of 1) described above, by generating an image closer to the license plate image actually captured (sometimes referred to as a "pseudo-captured image" in the document of the present application), further machine learning can be performed. It has the advantage of improving accuracy. The above-mentioned information related to the license plate such as the type, area name, classification number, hiragana, and / or serial designation number is used as the input information, and the input information corresponds to the uniform license plate appearance template. The image generated by the image generator that generates the image included in the position (sometimes referred to as "simple generated image" in the document of the present application) is the image of the license plate actually captured (in the document of the present application, the "real image". ”), For example, the following viewpoints can be mentioned.
一つ目は、撮像される汚れ。撮像される汚れは、撮像されるナンバープレート自体の汚れ、及び/又は、ナンバープレートを撮像することによって生じるもの、であってよい。後者は、撮像する撮像装置自体のカメラやレンズが汚れや、撮像装置と撮像対象のナンバープレートの間の窓ガラスなどの汚れであってよい。さらに、後者は、例えば、車両の内部に設置された撮像装置を用いて、車両外を撮像する場合に、車両の窓ガラスの汚れや、保護ケース内に設置された撮像装置によってナンバープレートが撮像されている場合においてその保護ケースの汚れなどがあってよい。 The first is the dirt that is imaged. The stains to be imaged may be stains on the license plate itself to be imaged and / or those caused by imaging the license plate. In the latter case, the camera or lens of the image pickup apparatus itself for imaging may be dirty, or the window glass between the image pickup apparatus and the license plate to be imaged may be soiled. Further, in the latter case, for example, when an image pickup device installed inside the vehicle is used to image the outside of the vehicle, the license plate is imaged by the dirt on the window glass of the vehicle or the image pickup device installed inside the protective case. If it is, the protective case may be dirty.
二つ目は、動きによって生じるもの。撮影対象である車両が移動中に撮像されることもあれば、ドライブレコーダのような撮像装置が設置された車両が移動している場合もある。このように、動きによって生じるものは、撮像対象であるナンバープレートを備える車両の移動や、撮像装置の移動、によって生じるものであってよい。かかる動きによって生じるものは、例えば、ブレやピンボケによって生じる画像であってよい。 The second is caused by movement. The vehicle to be photographed may be imaged while moving, or the vehicle equipped with an imaging device such as a drive recorder may be moving. As described above, what is caused by the movement may be caused by the movement of the vehicle including the license plate to be imaged or the movement of the imaging device. What is produced by such movement may be, for example, an image generated by blurring or out-of-focus.
三つ目は、影の影響。ナンバ―プレートは、車両の低部に備えられることが多く、その場合、車両のバンパーや車両の低部の端の影が、ナンバ―プレートに映ることがある。すなわち、日の光が、車両のバンパーや車両の低部によって、ナンバ―プレート上に一部影が生じることがある。例えば、ナンバ―プレートの上方が影の影響で暗めとなり、ナンバ―プレートの下方が影の影響で明るめとなる。また、日の光が、車両のバンパーや車両の低部によって、ナンバ―プレート上に一部影が生じる場合、かかる影のある部分と影のない部分の境目は、車両のバンパーや車両の低部による境目であることから、略一直線であることが多い。かかる境目の略一直線を示す線は、ナンバ―プレートの下辺に並行である場合もあれば、並行でなくともよい。 The third is the influence of shadows. The number plate is often mounted on the lower part of the vehicle, in which case the bumper of the vehicle or the shadow of the lower edge of the vehicle may appear on the number plate. That is, the sunlight may partially cast a shadow on the number plate due to the bumper of the vehicle or the lower part of the vehicle. For example, the upper part of the number plate becomes dark due to the influence of the shadow, and the lower part of the number plate becomes bright due to the influence of the shadow. In addition, when the sunlight causes a partial shadow on the number plate due to the bumper of the vehicle or the lower part of the vehicle, the boundary between the shaded part and the non-shadowed part is the bumper of the vehicle or the low part of the vehicle. Since it is a boundary between departments, it is often in a straight line. The line indicating a substantially straight line of such a boundary may or may not be parallel to the lower edge of the number plate.
これらは一例であり、他の理由による違いもあってよい。現実撮像画像の例としては、例えば、図9Bが挙げられる。なお、本図では、生成された図ではあるもののプライバシーの観点から最後の一数字を黒塗りした。なお、かかるナンバープレートは現実のものであることから、プライバシーの観点で、右下個所を一部黒塗りとした。これらの理由によって生じる単純生成画像と現実撮像画像の違いを、画像上、より少なくするための手段として、例えば、単純生成画像又は上述の画一的なナンバープレートの外見のテンプレートに対して、種々の画像処理を適用してよい。例えば、ぼかしやフィルターを適用してよい。発明者らが作成した画像ジェネレータによって生成した疑似撮像画像の例としては、図9Cが挙げられる。なお、本図では、生成された図ではあるもののプライバシーの観点から最後の一数字を黒塗りした。疑似撮像画像は、上述の単純生成画像と現実撮像画像の違いとしての3つの観点のうち、一部の観点を模した画像でもよいし、全部の観点を模した画像でもよい。 These are just examples and may differ for other reasons. An example of a real-life captured image is FIG. 9B. In this figure, although it is a generated figure, the last number is blacked out from the viewpoint of privacy. Since such license plates are real, the lower right part is painted black from the viewpoint of privacy. As a means for reducing the difference between the simply generated image and the actually captured image caused by these reasons, for example, with respect to the simply generated image or the above-mentioned uniform license plate appearance template, there are various methods. Image processing may be applied. For example, blurring and filtering may be applied. FIG. 9C is an example of a pseudo-captured image generated by the image generator created by the inventors. In this figure, although it is a generated figure, the last number is blacked out from the viewpoint of privacy. The pseudo-captured image may be an image that imitates a part of the three viewpoints as a difference between the above-mentioned simply generated image and the actual captured image, or an image that imitates all the viewpoints.
なお、上述の3つ目の影を模したものを含む疑似撮像画像の場合、かかる疑似撮像画像は、略直線を含んでよい。また、かかる略直線は、影の境目を示すものであってよい。また、略直線は、ナンバ―プレートの左右方向の線であってよい。また、略直線は、一又は複数であってよい。また、略直線の上方の明度は、略直線の下方の明度よりも、明るいものであってよい。 In the case of a pseudo-captured image including the above-mentioned third shadow imitation, the pseudo-captured image may include a substantially straight line. Further, such a substantially straight line may indicate a boundary between shadows. Further, the substantially straight line may be a line in the left-right direction of the number plate. Further, the substantially straight line may be one or more. Further, the brightness above the substantially straight line may be brighter than the brightness below the substantially straight line.
このように、画像ジェネレータが現実撮像画像に見た目が近い疑似撮像画像を生成でいる場合、画像生成の負担を少なく、機械学習用のデータを生成できる利点がある。また、かかる画像ジェネレータが、生成された疑似撮像画像と、かかる疑似撮像内のナンバープレートに係る情報とを関連付けたデータを生成する場合、教師データとしての機械学習用のデータを、負担少なく、生成できる利点がある。 As described above, when the image generator generates a pseudo-captured image that looks similar to the actual captured image, there is an advantage that the burden of image generation is small and data for machine learning can be generated. Further, when the image generator generates data in which the generated pseudo-image is associated with the information related to the license plate in the pseudo-imaging, the data for machine learning as teacher data is generated with less burden. There are advantages that can be done.
一例のシステムは、
種類、地域名、分類番号、ひらがな、及び/又は、一連指定番号、を含むナンバープレートに含まれる情報を取得する第1取得部と、
ナンバープレートの外観を含む画像を取得する第2取得部と、
前記ナンバープレートに含まれる情報と、前記画像とを用いて、ナンバープレート情報含有画像を生成する第1生成部、
を備えるナンバープレートに係る画像生成システム、であってよい。An example system is
The first acquisition unit that acquires the information contained in the license plate including the type, area name, classification number, hiragana, and / or serial designation number,
The second acquisition part that acquires the image including the appearance of the license plate,
A first generation unit that generates a license plate information-containing image using the information contained in the license plate and the image.
It may be an image generation system relating to a license plate provided with.
前記ナンバープレートに含まれる情報における、種類、地域名、分類番号、ひらがな、及び/又は、一連指定番号における、各々の情報は、所定の順序に基づいて、選択されてよい。かかる構成に代えて、前記ナンバープレートに含まれる情報における、種類、地域名、分類番号、ひらがな、及び/又は、一連指定番号における、各々の情報は、乱数関数を用いて選択されてよい。前記乱数関数を用いて選択される、種類、地域名、分類番号、ひらがな、及び/又は、一連指定番号、の各々の各情報は、均一に選択されてよい。 Each piece of information in the type, area name, classification number, hiragana, and / or serial designation number in the information contained in the license plate may be selected based on a predetermined order. Instead of such a configuration, each information in the type, area name, classification number, hiragana, and / or serial designation number in the information contained in the license plate may be selected by using a random number function. Each information of the type, area name, classification number, hiragana, and / or serial designation number selected by using the random number function may be uniformly selected.
前記ナンバープレートの外観を含む画像は、画一的なナンバープレートの外見のテンプレートの画像であってよい。また、かかる画像に代えて、前記ナンバープレートの外観を含む画像は、現実を模した画像であってよい。現実を模した画像は、上述の、撮像される汚れ、及び/又は、動きによって生じるもの、を理由として生じた画像であってよい。 The image including the appearance of the license plate may be an image of a template of the appearance of a uniform license plate. Further, instead of such an image, the image including the appearance of the license plate may be an image imitating reality. The image that imitates reality may be an image generated because of the above-mentioned stains to be imaged and / or those caused by movement.
前記第1生成部は、前記ナンバープレートの外観を含む画像に対して、現実を模した画像とする処理をしてもよい。かかる画像のよごれを実現する処理は、上述のぼかしやフィルターの他、種々の手法の処理であってよい。 The first generation unit may process the image including the appearance of the license plate into an image imitating reality. The process for realizing such image contamination may be a process of various methods other than the above-mentioned blurring and filtering.
前記第1生成部によって生成されるナンバープレート情報含有画像は、機械学習用の学習データの画像であってよい。
また、前記第1生成部は、前記ナンバープレート情報含有画像と、前記前記ナンバープレート情報含有画像の生成に使用されたナンバープレートに含まれる情報と、を関連付ける処理をしてよい。かかる関連付けられたデータは、機械学習に使用されるデータであってよい。また、かかる関連付けられたデータは、機械学習に使用されてよい。The license plate information-containing image generated by the first generation unit may be an image of learning data for machine learning.
In addition, the first generation unit may perform a process of associating the license plate information-containing image with the information contained in the license plate used for generating the license plate information-containing image. Such associated data may be data used for machine learning. Also, such associated data may be used for machine learning.
これらの単純生成画像と現実撮像画像の違いを、画像の外見上、より少なくする処理を行う場合、機械学習に用いられる学習データとしての画像が、より現実撮像画像に近づき、機械学習済み識別装置を適用した倍における精度の向上が可能となる。 When processing is performed to reduce the difference between these simply generated images and the actual captured image in terms of the appearance of the image, the image as learning data used for machine learning becomes closer to the actual captured image, and the machine-learned identification device. It is possible to improve the accuracy by double the application of.
また、ナンバープレートに係る情報を取得する識別装置を機械学習するにあたり、ナンバープレートの傾きに対処する手法を適用してもよい。機械学習済み識別装置が適用されるナンバープレートを撮像した画像は、撮像装置の設置場所の関係で、ナンバープレートを真正面から撮影されることはまれである。すなわち、ナンバープレートは、車両の低部に設置されていることが多いが、かかる車両の低部を真正面から撮像可能な位置に撮像装置が設置されている場合はあるもののまれであり、一般的には人の往来などの影響を受けない程度の高さに撮像装置が設置され、車両を見下ろすように所定の俯角で撮像装置が設置されて車両を撮像することが多い。そのため、特に車両の低部に設置されたナンバープレートを真正面から撮像することはまれであり、ナンバープレートに係る情報を取得するために機械学習済み識別装置が適用される対象となる画像は、ナンバープレートの平面に対する垂線から所定の角度以上の角度で、撮像装置が撮像した画像であることが多い。 Further, in machine learning of the identification device that acquires the information related to the license plate, a method of dealing with the inclination of the license plate may be applied. The image of the license plate to which the machine-learned identification device is applied is rarely taken from the front of the license plate due to the installation location of the image pickup device. That is, the license plate is often installed in the lower part of the vehicle, but it is rare that the image pickup device is installed in a position where the lower part of the vehicle can be imaged from the front, which is common. In many cases, the image pickup device is installed at a height that is not affected by the traffic of people, and the image pickup device is installed at a predetermined depression angle so as to look down on the vehicle. Therefore, it is rare to image the license plate installed in the lower part of the vehicle from the front, and the image to which the machine-learned identification device is applied to acquire the information related to the license plate is the number. The image is often taken by the image pickup device at an angle equal to or higher than a predetermined angle from the perpendicular to the plane of the plate.
そこで、画像利用部は、ナンバープレートを撮像した画像内におけるナンバープレートの位置を示す情報を用いて、機械学習をしてよい。例えば、機械学習用のデータとして、画像と、ナンバープレートの位置を示す情報及び画像内に含まれているナンバープレートに係る情報と、を用いて、画像と、ナンバープレートの隅の位置を示す情報及び画像内に含まれているナンバープレートに係る情報と、関係づけて、機械学習してよい。ここで、ナンバープレートの位置を示す情報は、ナンバープレートを撮像した画像内のナンバープレートの位置を示す情報であってよく、例えば、ナンバープレートの位置を示す関数や座標であってよい。関数は、例えば、ナンバープレートの上下辺や左右辺を示すものであってよく、座標は、例えば、ナンバープレートの4隅の座標であってよい。 Therefore, the image utilization unit may perform machine learning using the information indicating the position of the license plate in the image obtained by capturing the license plate. For example, as data for machine learning, using an image, information indicating the position of the license plate, and information related to the license plate contained in the image, the image and information indicating the position of the corner of the license plate are used. And machine learning may be performed in relation to the information related to the license plate contained in the image. Here, the information indicating the position of the license plate may be information indicating the position of the license plate in the image obtained by capturing the license plate, and may be, for example, a function or coordinates indicating the position of the license plate. The function may indicate, for example, the upper and lower sides and the left and right sides of the license plate, and the coordinates may be, for example, the coordinates of the four corners of the license plate.
すなわち、機械学習の識別装置において、機械学習の入力として、一の画像と、かかる一の画像内のナンバープレートの位置を示す情報と、かかる一の画像内のナンバープレートに係る情報と、を関係づけて機械学習をさせてよい。そして、実際にナンバープレートに係る情報を取得する対象となる撮像された画像を、かかる機械学習済みの識別装置に対して入力し、ナンバープレートに係る情報を取得してよい。この場合、かかる機械学習済み識別装置から、実際にナンバープレートに係る情報を取得する対象となる撮像された画像内のナンバープレートの位置を示す情報を取得してもよいし、取得しなくてもよい。隅を取得した場合、かかる位置を示す情報を用いて、撮像された画像の補正に用いてよい。また、隅を取得しない場合においても、機械学習において画像内の情報を入力して学習させることによって、出力となるナンバープレートに係る情報の精度を向上できる利点がある。なお、上述の機械学習において入力させる画像内の情報としては、上述のナンバープレートの隅の情報(例えば、ナンバープレートの位置の一部又は全部を示す情報として、4隅の情報)、及び/又は、ナンバ―プレートの車種を示す情報(例えば、ナンバ―プレートの色や、ナンバ―プレートの形状など)を含んでよい。 That is, in the machine learning identification device, as input of machine learning, one image, information indicating the position of the license plate in the one image, and information related to the license plate in the one image are related. You may also let them do machine learning. Then, the captured image to be the target for actually acquiring the information related to the license plate may be input to the machine-learned identification device to acquire the information related to the license plate. In this case, the machine-learned identification device may or may not acquire information indicating the position of the license plate in the captured image for which the information related to the license plate is actually acquired. Good. When the corner is acquired, the information indicating the position may be used for correction of the captured image. Further, even when the corner is not acquired, there is an advantage that the accuracy of the information related to the license plate to be output can be improved by inputting and learning the information in the image in machine learning. The information in the image to be input in the above-mentioned machine learning includes the above-mentioned information on the corners of the license plate (for example, information on the four corners as information indicating a part or all of the position of the license plate) and / or. , Information indicating the vehicle type of the license plate (for example, the color of the license plate, the shape of the license plate, etc.) may be included.
画像利用部が、機械学習済み識別機能を有し、撮像された画像から、車両を特定する情報を取得できる場合、車両を特定できる利点がある。かかる情報は、上述のとおり、撮像された画像の位置及び/又は時間と関連付けて記憶されることで、特定の車両の位置及び/又は時間を特定する情報を取得できる利点がある。そのため、例えば、特定の駐車場において、特定の車両を特定する情報を取得することを用いて、かかる車両が、かかる駐車場を利用したことを示すことができ、かかる情報に基づいて、かかる車両を利用した者に対して、駐車料金の請求をしてよい。 If the image utilization unit has a machine-learned identification function and can acquire information for identifying the vehicle from the captured image, there is an advantage that the vehicle can be identified. As described above, such information is stored in association with the position and / or time of the captured image, so that there is an advantage that information for specifying the position and / or time of a specific vehicle can be acquired. Therefore, for example, by acquiring information that identifies a specific vehicle in a specific parking lot, it can be shown that the vehicle has used the parking lot, and based on such information, the vehicle can be used. You may charge the parking fee to the person who used the parking lot.
特に、特定の駐車場と関連付けられている撮像装置によって撮像される画像から、ある車両についての車両を特定する情報を、第1の時点と、第2の時点と、において、取得できた場合、かかる第1の時点から、かかる第2の時点まで、かかる車両は、かかる特定の駐車場を利用したと推定し、画像利用部は、かかる車両に係る利用者に対し、かかる駐車場における第1の時点から第2の時点までの駐車場の利用履歴に追加する機能を有してよい。なお、この場合、かかる利用者において、本願書類の他の個所で説明したとおり、かかる利用者の、かかる利用車両について、複数の支払手段を関連付けられている場合、各支払手段の条件を充足する支払手段に対し、かかる駐車料金が関連付けられてよい。 In particular, when the information for identifying a vehicle for a certain vehicle can be acquired at the first time point and the second time point from the image captured by the image pickup device associated with the specific parking lot. From such a first time point to such a second time point, it is estimated that the vehicle has used the specific parking lot, and the image utilization unit tells the user related to the vehicle that the vehicle has used the first parking lot in the parking lot. It may have a function to add to the usage history of the parking lot from the time point to the second time point. In this case, as explained elsewhere in the documents of the present application, if a plurality of payment methods are associated with the user's vehicle, the conditions of each payment method are satisfied. Such parking fees may be associated with the means of payment.
なお、駐車場への入場の時間と出場の時間とを特定するため、画像利用部は、予め定められた、車両を特定する情報を取得する元となる画像を撮像した撮像装置に基づいて、特定してよい。 In addition, in order to specify the time of entry to the parking lot and the time of entry, the image utilization unit is based on a predetermined image pickup device that captures an image that is a source for acquiring information for identifying the vehicle. May be specified.
例えば、撮像装置が、車両の通行方向が定まっている通路においては、かかる通路内の車両に係る車両を特定する情報を取得できた場合に、かかる車両の通行方向に応じて、かかる車両の入場又は出場を判定してよい。例えば、第1の通路の車両の進行方向が駐車場への入場方向の場合、かかる第1の通路上の車両を撮像可能とする撮像装置によって撮像された画像に基づいて、車両を特定する情報が取得できた場合は、かかる画像が撮像された時点を、かかる車両が、入場した時点と判定してよい。同様に、第2の通路の車両の進行方向が駐車場への出場方向の場合、かかる第2の通路上の車両を撮像可能とする撮像装置によって撮像された画像に基づいて、車両を特定する情報が取得できた場合は、かかる画像が撮像された時点を、かかる車両が、出場した時点と判定してよい。 For example, in a passage where the traffic direction of the vehicle is fixed, when the imaging device can acquire information for identifying the vehicle related to the vehicle in the passage, the entry of the vehicle is performed according to the traffic direction of the vehicle. Alternatively, participation may be determined. For example, when the traveling direction of the vehicle in the first passage is the entry direction to the parking lot, the information for identifying the vehicle is based on the image captured by the imaging device capable of imaging the vehicle on the first passage. If the vehicle can be obtained, it may be determined that the time when the image is captured is the time when the vehicle enters. Similarly, when the traveling direction of the vehicle in the second passage is the entry direction to the parking lot, the vehicle is identified based on the image captured by the imaging device capable of imaging the vehicle on the second passage. If the information can be obtained, the time when the image is captured may be determined as the time when the vehicle participates.
他方、通路が、駐車場への出入口共有の場合は、画像利用部は、画像内の車両の進行方向、及び/又は、車両を撮像した画像を用いて、車両の入場又は出場を判定してよい。例えば、撮像装置の撮像方向をベクトルとした場合、かかるベクトルが、地面から垂直方向と、地面と平行方向と、にベクトル分解する場合を考えて、かかる地面と平行方向にベクトル分解されたベクトルが、駐車場から出場する方向を正とするベクトルである場合、駐車場から出場する方向に向けて撮像していることから、かかる撮像装置の時系列上の画像において、所定期間内に車両の高さ及び/又は横幅の長さが増大していく場合は、駐車場に近づいていることから、駐車場の入場時点と判定してよい。他方、かかる撮像装置の時系列上の画像において、所定期間内に車両の高さ及び/又は横幅の長さが減少していく場合は、駐車場から離れていくことから、駐車場の出場時点と判定してよい。なお、ここで、車両の高さ及び/又は横幅に代えて、又は、加えて、車両の一部の特定の部分又は部品についての高さ及び/又は横幅を、用いてもよい。かかる車両の一部の特定の部分としては、ヘッドランプ、車両のタイヤ、ハンドル、車両内に人がいた場合におけるかかる人の顔の大きさ、などが挙げられるが、これらに限られない。要するに、車両の前後の移動に伴い、車両を時系列に沿って撮像した画像の大きさが、増大又は減少することがものであればよい。 On the other hand, when the passage is a shared entrance / exit to the parking lot, the image utilization unit determines the entry or exit of the vehicle by using the traveling direction of the vehicle in the image and / or the image of the vehicle. Good. For example, when the imaging direction of the imaging device is a vector, the vector decomposed in the direction parallel to the ground is obtained in consideration of the case where the vector is decomposed into the direction perpendicular to the ground and the direction parallel to the ground. , In the case of a vector in which the direction of entry from the parking lot is positive, since the image is taken in the direction of entry from the parking lot, the height of the vehicle within a predetermined period in the time-series image of the imaging device. If the width and / or the width increases, it may be determined that the vehicle is approaching the parking lot and / or the time when the parking lot is entered. On the other hand, in the time-series images of the image pickup device, if the height and / or width of the vehicle decreases within a predetermined period, the vehicle will move away from the parking lot, and therefore, when the vehicle enters the parking lot. May be determined. Here, instead of or / or the width of the vehicle, the height and / or the width of a specific part or part of the vehicle may be used. Specific parts of some of such vehicles include, but are not limited to, headlamps, vehicle tires, steering wheels, the size of the person's face when there is a person in the vehicle, and the like. In short, it suffices that the size of the image of the vehicle captured in chronological order increases or decreases as the vehicle moves back and forth.
また、画像利用部は、画像内の車両の特定のものを用いてもよい。例えば、画像内の車両に運転手、及び/又は、ハンドル、を識別した場合、車両の前方であると認定することができ、上述のとおり、駐車場の出場方向を向いた撮像装置の場合は、車両の入場と判定してよい。この場合、単に画像内の大きさの変動のみでなく、運転手やハンドルなどの特定のものを認定することにより、より、進行方向を特定できる利点がある。 Further, the image utilization unit may use a specific vehicle in the image. For example, if the driver and / or the steering wheel are identified for the vehicle in the image, it can be recognized as being in front of the vehicle, and as described above, in the case of an imaging device facing the entry direction of the parking lot. , It may be determined that the vehicle is entering. In this case, there is an advantage that the direction of travel can be more specified by certifying a specific object such as a driver or a steering wheel, in addition to simply changing the size in the image.
なお、撮像装置が、駐車場への入場方向を撮像している場合は、要するに、上述と逆であって良い。すなわち、撮像装置の撮像方向をベクトルとした場合、かかるベクトルが、地面から垂直方向と、地面と平行方向と、にベクトル分解する場合を考えて、かかる地面と平行方向にベクトル分解されたベクトルが、駐車場に入場する方向を正とするベクトルである場合、駐車場から入場する方向に向けて撮像していることから、かかる撮像装置の時系列上の画像において、所定期間内に車両の高さ及び/又は横幅の長さが増大していく場合は、駐車場から離れていることから、駐車場の出場時点と判定してよい。他方、かかる撮像装置の時系列上の画像において、所定期間内に車両の高さ及び/又は横幅の長さが減少していく場合は、駐車場に近づいていくことから、駐車場の入場時点と判定してよい。 When the imaging device captures the direction of entry into the parking lot, it may be the opposite of the above. That is, when the imaging direction of the imaging device is a vector, the vector decomposed in the direction parallel to the ground is obtained in consideration of the case where the vector is decomposed into the direction perpendicular to the ground and the direction parallel to the ground. In the case of a vector in which the direction of entry into the parking lot is positive, since the image is taken in the direction of entry from the parking lot, the height of the vehicle within a predetermined period in the time-series image of the image pickup device. If the width and / or the width increases, it may be determined that the vehicle is at the time of entry of the parking lot because it is far from the parking lot. On the other hand, in the time-series images of the image pickup device, if the height and / or width of the vehicle decreases within a predetermined period, the vehicle approaches the parking lot, and therefore, when the vehicle enters the parking lot. May be determined.
この場合においても、上述と同様に、画像利用部は、画像内の車両の特定のものを用いてもよい。例えば、画像内の車両に運転手、及び/又は、ハンドル、を識別した場合、車両の前方であると認定することができ、上述のとおり、駐車場の入場方向を向いた撮像装置の場合は、車両の出場と判定してよい。 In this case as well, as described above, the image utilization unit may use a specific vehicle in the image. For example, if the driver and / or the steering wheel are identified for the vehicle in the image, it can be recognized as being in front of the vehicle, and as described above, in the case of an imaging device facing the entrance direction of the parking lot. , It may be judged that the vehicle participates.
他方、画像利用部は、機械学習済み機能を利用し、上述の車両の進行方向を特定し、車両の入場時点及び/又は出場時点を特定してもよい。この場合、画像利用部は、特定の撮像装置によって撮像された画像に対して、入場又は出場の教師あり情報を用いることにより、機械学習を行ってよい。そして、かかる機械学習済み機能を有する画像利用部は、特定の撮像装置によって撮像された一又は複数の時系列上の静止画又は所定期間の動画に対して、車両の入場又は出場を判定できる機能を有してよい。 On the other hand, the image utilization unit may use the machine-learned function to specify the traveling direction of the vehicle described above, and specify the entry time and / or exit time of the vehicle. In this case, the image utilization unit may perform machine learning on the image captured by the specific imaging device by using the supervised information of entry or exit. Then, the image utilization unit having such a machine-learned function can determine the entry or exit of the vehicle with respect to one or a plurality of still images on a time series or a moving image of a predetermined period captured by a specific imaging device. May have.
なお、画像利用部は、上述の進行方向が定められた通路に基づく車両の入場及び/又は出場の判定、撮像された画像の大きさの変動に基づく車両の入場及び/又は出場の判定、機械学習済み機能を用いた車両の入場及び/又は出場の判定、の一部又は全部を用いてもよい。この場合、複数の判定機構により、より精度を向上できる利点がある。 In addition, the image utilization unit determines the entry and / or entry of the vehicle based on the passage in which the traveling direction is defined, determines the entry and / or entry of the vehicle based on the fluctuation of the size of the captured image, and the machine. Part or all of the vehicle entry and / or entry determination using the learned function may be used. In this case, there is an advantage that the accuracy can be further improved by the plurality of determination mechanisms.
画像利用部は、一又は複数の駐車領域に係る情報を管理する機能を有する。駐車領域に係る情報は、満空情報、駐車領域に係る駐車場、駐車場に関する情報、駐車料金、及び/又は、その他の情報、を含んでよい。画像利用部を有する管理システムは、駐車領域に係る情報を、一又は複数の端末装置に送信してよい。 The image utilization unit has a function of managing information relating to one or more parking areas. The information relating to the parking area may include full vacancy information, parking lots relating to the parking area, information regarding the parking lot, parking fees, and / or other information. A management system having an image utilization unit may transmit information relating to a parking area to one or more terminal devices.
<満空情報>
画像利用部は、駐車領域についての満空情報を、一又は複数の撮像装置によって撮像された画像から、生成してよい。画像利用部は、一の駐車領域に対応して、予めかかる一の駐車領域内の一又は複数の駐車スペースについて、駐車中、空車中、その他、等の情報を格納できるデータ構造を有してよい。画像利用部は、撮像された画像における、かかる一又は複数の駐車スペースに対応する位置の車両の有無やその他の物体の存在により、各位置又は複数の駐車スペースについて、駐車中、空車中、その他、等の情報を、記憶してよい。ここで、駐車中の判定は、画像利用部が、車両を識別可能な機械学習済み識別機能を用いて、駐車スペースに対応する画像内の位置に車両を識別できた場合に、駐車中の判定をしてよい。また、空車中の判定は、画像利用部が、車両を識別可能な機械学習済み識別機能を用いて、駐車スペースに対応する画像内の位置に物体が識別されない場合に、空車中の判定をしてよい。なお、画像利用部が、車両を識別可能な機械学習済み識別機能を用いて、駐車スペースに対応する画像内の位置に車両以外の何かの物体の存在を検知した場合、その他の判定をしてよい。これは、車両以外の何か物体が存在しており、駐車できない可能性があることから、その場合は、その他としての判定をすることで、少なくとも空車ではないようにしてよい。なお、隣の駐車スペースに車両を停車させた人が、車両の乗り降りに、例えば、商業施設の駐車場において購入物を移動するカートなどを用いているなど短時間の利用の場合には、空車という判定をしてもよい。<Full sky information>
The image utilization unit may generate full sky information about the parking area from images captured by one or more image pickup devices. The image utilization unit has a data structure capable of storing information such as parking, empty, etc. for one or more parking spaces in the one parking area in advance corresponding to one parking area. Good. Depending on the presence or absence of a vehicle at a position corresponding to such one or more parking spaces and the presence of other objects in the captured image, the image utilization unit may perform parking, empty vehicles, or the like for each position or multiple parking spaces. , Etc. may be stored. Here, the determination of parking is determined when the image utilization unit can identify the vehicle at a position in the image corresponding to the parking space by using the machine-learned identification function capable of identifying the vehicle. You may do. Further, in the determination of being empty, the image utilization unit uses the machine-learned identification function capable of identifying the vehicle to determine that the vehicle is empty when the object is not identified at the position in the image corresponding to the parking space. You can. If the image utilization unit detects the presence of an object other than the vehicle at a position in the image corresponding to the parking space by using the machine-learned identification function that can identify the vehicle, other judgments are made. You can. This is because there is some object other than the vehicle and there is a possibility that it cannot be parked. In that case, it may be determined that the vehicle is not empty at least. If the person who parked the vehicle in the next parking space uses the vehicle for a short time, such as using a cart to move the purchased items in the parking lot of a commercial facility, the vehicle is vacant. You may judge that.
図10Aは、駐車領域を撮像した画像の一例である。駐車場に設置された撮像装置によって撮像された画像内の各駐車スペースについて、画像を用いて、駐車と空車を区別して模式的に表示している。本図は、駐車スペースに駐車されている車両については、□で囲み、識別されていることを示し、かつ、車両の駐車されている駐車スペースは赤丸が表示されている。他方、空車スペースは、青丸が表示されている。なお、ここで、各車両に重複して示された各4桁の数字は、各車両を示すIDを示す。かかる車両を示すIDは、車両を一意的に特定可能なユニークな番号であってよい。なお、本図のように、撮像装置から遠方の場所のような一部の一又は複数の駐車スペースについては、駐車又は空車の区別がされていなくてもよい。遠方であったり、遮蔽物の存在などにより、画像による識別ができない部分があってもよい。また、図10Bは、駐車領域を撮像した画像の他の例である。本図においては、車両を識別することを示す車両を囲む線が表示されている。なお、かかる線は、車両の前方と後方のみでなく、車両の側方も識別している。かかる識別により、移動中の車両を追跡可能とされている。また、トラックは、荷台ではなく、前方の運転席部分を識別している。 FIG. 10A is an example of an image of the parking area. Each parking space in the image captured by the image pickup device installed in the parking lot is schematically displayed by distinguishing between parking and empty vehicles using images. In this figure, vehicles parked in the parking space are surrounded by □ to indicate that they are identified, and the parking space in which the vehicle is parked is indicated by a red circle. On the other hand, the empty car space is indicated by a blue circle. Here, each of the four-digit numbers duplicated for each vehicle indicates an ID indicating each vehicle. The ID indicating such a vehicle may be a unique number that can uniquely identify the vehicle. As shown in this figure, it is not necessary to distinguish between parking and empty vehicles for a part of one or more parking spaces such as a place far from the imaging device. There may be a part that cannot be identified by an image due to a distant place or the presence of a shield. Further, FIG. 10B is another example of an image obtained by capturing the parking area. In this figure, a line surrounding the vehicle is displayed to indicate that the vehicle is identified. It should be noted that such a line identifies not only the front and rear of the vehicle but also the side of the vehicle. Such identification makes it possible to track a moving vehicle. Also, the truck identifies the driver's seat in front, not the loading platform.
ここで、画像利用部が、一又は複数の画像から、満空情報を取得するためのいくつかの技術を説明する。画像利用部は、以下で説明する一又は複数の技術を用いてよい。画像利用部は、以下で説明する一のみの技術を利用してもよいし、以下で説明する技術以外の技術を利用してもよい。 Here, some techniques for the image utilization unit to acquire full / empty information from one or a plurality of images will be described. The image utilization unit may use one or more techniques described below. The image utilization unit may use only one technique described below, or may use a technique other than the technique described below.
まず、画像利用部は、駐車領域について、各駐車スペースを識別し、特定する。画像利用部は、各駐車スペースを、一又は複数の画像から、自動的に特定してもよいし、人為的な支援を経て特定してもよい。特に、一又は複数の画像が、駐車場に設置された固定された撮像装置によって撮像されている場合、画像の対象となる撮像視野が固定されて動かないため、人為的な支援を経て駐車スペースが特定されても負担は多くなく、信頼できる各駐車スペースの情報を記録可能である。すなわち、一例のシステムは、固定された撮像装置において撮像された画像に対して、かかる画像内の一又は複数の特定の個所を、駐車スペースとして、関連付けた情報を、有してよい。例えば、一の画像内の特定の複数の座標によって、一の駐車スペースを関連付けることにより、一の画像内の複数の特定の個所に対して、各々複数の座標によって、複数の駐車スペースと関連付けて、記憶させてよい。 First, the image utilization unit identifies and identifies each parking space for the parking area. The image utilization unit may automatically identify each parking space from one or more images, or may identify it with artificial support. In particular, when one or more images are captured by a fixed imaging device installed in the parking lot, the imaging field of view that is the target of the image is fixed and does not move, so the parking space is provided with artificial support. Even if it is specified, there is not much burden, and it is possible to record reliable information on each parking space. That is, an example system may have information associated with an image captured by a fixed imaging device, with one or more specific points in the image as parking spaces. For example, by associating one parking space with a plurality of specific coordinates in one image, it is associated with a plurality of parking spaces with a plurality of coordinates for each of a plurality of specific locations in one image. , You may remember.
次に、画像利用部は、画像内の一又は複数の車両を特定する。車両は、パターンマッチ技術を用いてもよいし、機械学習における識別機能を用いてもよい。機械学習における識別機能を用いる場合において、特に種々の車両について機械学習されたものを用いた場合、識別機能が向上できる利点がある。 Next, the image utilization unit identifies one or more vehicles in the image. The vehicle may use pattern matching technology or may use the identification function in machine learning. When the identification function in machine learning is used, there is an advantage that the identification function can be improved, particularly when the machine-learned ones for various vehicles are used.
次に、画像利用部は、駐車領域内において予め特定されている一の駐車スペースと、特定された車両と、を対比する。一の駐車スペースに対応した車両が特定された場合、かかる駐車スペースは、駐車済みと判定し、一の駐車スペースに対応した車両が特定されない場合、かかる駐車スペースは、空車と判定してよい。 Next, the image utilization unit compares one parking space specified in advance in the parking area with the specified vehicle. If a vehicle corresponding to one parking space is specified, the parking space may be determined to be parked, and if a vehicle corresponding to one parking space is not specified, the parking space may be determined to be empty.
この場合、複数の駐車スペースに対応して、一の車両のみが特定される場合など、所定の範囲内における第1の数の駐車スペースに対して、かかる第1の数よりも少ない第2の数の車両が特定される場合がある。例えば、撮像装置が、所定の角度以内の俯角(地面と平行の角度から地面方向への角度)で設置されている場合、第1の数の駐車スペースと、第1の数よりも少ない第2の数の車両とが対応付けられる場合がある。この場合、第1の数の駐車スペースのうち、撮像装置に近い順に、車両を1対1に対応付けてよく、第1の数から第2の数を減数した、第1の数駐車スペースのうちの残りの駐車スペースについては、駐車状況について、不明、と記録してよい。このような場所は、撮像装置から車両が見えていないだけである可能性があり、空車ではない可能性があるためである。また、かかる場所は、満空情報として、駐車領域内を表示する場合において、駐車又は空車のどちらかを表示などする場合は、駐車済みとして扱ってよい。他方、かかる不明と記録された駐車スペースについては、満空情報において統計情報を生成する場合には、駐車済みとして扱ってもよいし、駐車済みとして扱わなくてもよい。後者は、駐車済みを1とし空車を0として扱うような数値情報とする場合において不明は0.5などとしてよい。そのため、例えば、100の駐車スペースがある駐車領域において、42が駐車済み、52が空車、6の不明の駐車スペースがある場合、満空情報として、52が空車という情報を生成してもよいし、100中52が空車という情報を生成してもよいし、55%が空車という情報を生成してもよい。 In this case, the second number is less than the first number for the first number of parking spaces within a predetermined range, such as when only one vehicle is specified corresponding to a plurality of parking spaces. A number of vehicles may be identified. For example, when the imaging device is installed at a depression angle within a predetermined angle (an angle parallel to the ground toward the ground), the first number of parking spaces and the second number less than the first number. May be associated with as many vehicles as. In this case, among the first number of parking spaces, the vehicles may be associated with each other in a one-to-one manner in the order of proximity to the image pickup device, and the first number parking space is obtained by subtracting the second number from the first number. For the remaining parking space, it may be recorded that the parking situation is unknown. This is because such a place may simply not be visible to the vehicle from the image pickup device and may not be empty. In addition, such a place may be treated as parked when displaying the inside of the parking area as full vacancy information and displaying either parked or vacant car. On the other hand, the parking space recorded as unknown may or may not be treated as parked when statistical information is generated based on the full vacancy information. In the latter case, when the numerical information is such that the parked vehicle is treated as 1 and the empty vehicle is treated as 0, the unknown value may be 0.5 or the like. Therefore, for example, in a parking area with 100 parking spaces, when 42 is parked, 52 is empty, and 6 is unknown parking space, information that 52 is empty may be generated as full empty information. , 52 out of 100 may generate information that the vehicle is empty, or 55% may generate information that the vehicle is empty.
また、画像利用部は、上述の技術と共に又は代えて、複数の駐車スペースについて、駐車スペースの所定の領域単位で、満空情報を生成してもよい。例えば、複数の駐車スペースに対して、直線などのベクトルを設定し、かかるベクトルと重複する、識別された車両の数を用いて、満空情報を生成してもよい。例えば、図10Cにおける10C1や10C2の領域単位が挙げられる。この場合、かかる複数の駐車スペースの数を予め特定し、かかる数と対比して、満空情報を生成してもよい。ここで、予め各ベクトルに対して設定される数は、上述のように人為的な支援を経て設定された数であって良い。この場合、複数の隣り合った駐車スペースから構成される一の列の駐車スペースに対して重複するよう設定された一のベクトルと関連付けられて、かかる列の駐車スペースの数を関連付けておき、かかる数が用いられて、画像から得られた車両と認識された車両の数と、比較されてよい。 Further, the image utilization unit may generate full / empty information for a plurality of parking spaces in a predetermined area unit of the parking space, together with or in place of the above-mentioned technology. For example, a vector such as a straight line may be set for a plurality of parking spaces, and full / empty information may be generated using the number of identified vehicles that overlap with the vector. For example, the area units of 10C1 and 10C2 in FIG. 10C can be mentioned. In this case, the number of such a plurality of parking spaces may be specified in advance and compared with the number to generate full / empty information. Here, the number set in advance for each vector may be a number set in advance through artificial support as described above. In this case, the number of parking spaces in such a row is associated with a vector set to overlap for a row of parking spaces consisting of multiple adjacent parking spaces. Numbers may be used and compared to the number of vehicles recognized as vehicles obtained from the image.
また、かかるベクトルを用いた方法を用いた場合であっても用いない場合であっても、駐車スペースの所定の領域単位で、駐車可能な最大の数と、実際に特定された車両の数と、を用いて、駐車した車両の数や、空車率などの満空情報を生成してよい。駐車スペースの所定の領域単位であることから、より幅を持って、計算ができる利点がある。かかる駐車スペースの所定の領域単位の例としては、図10Dにおける10D1や10D2の領域単位が挙げられる。なお、この場合、駐車可能な最大の数は、上述のように人為的な支援を経て設定された数であってよい。 In addition, regardless of whether the method using such a vector is used or not, the maximum number of vehicles that can be parked and the number of vehicles actually specified in a predetermined area unit of the parking space are used. , May be used to generate full vacancy information such as the number of parked vehicles and the vacancy rate. Since it is a predetermined area unit of the parking space, there is an advantage that the calculation can be performed with a wider width. Examples of a predetermined area unit of such a parking space include the area units of 10D1 and 10D2 in FIG. 10D. In this case, the maximum number of cars that can be parked may be the number set with artificial support as described above.
また、かかる所定の領域単位で特定できた車両の数に対して、補正係数を乗じて、車両の数を計算してもよい。すなわち、特定された車両の数に対して、所定の補正係数を乗じることによって生成された数を、かかる所定の領域単位において駐車されている車両の数としてよい。この場合、補正係数は、経験則に応じて人為的に設定されたものを用いてもよいし、機械的に実測値に応じて設定されてもよい。撮像装置が固定されている場合は撮像視野も固定されているため、同一の駐車領域に駐車される車両の見え方にも一定の傾向があり、かかる補正係数によって、一定の予測が可能となる利点がある。 Further, the number of vehicles may be calculated by multiplying the number of vehicles specified in the predetermined area unit by a correction coefficient. That is, the number generated by multiplying the specified number of vehicles by a predetermined correction coefficient may be the number of vehicles parked in such a predetermined area unit. In this case, the correction coefficient may be artificially set according to an empirical rule, or may be mechanically set according to an actually measured value. When the image pickup device is fixed, the image pickup field of view is also fixed, so that the appearance of vehicles parked in the same parking area tends to be constant, and such a correction coefficient enables a constant prediction. There are advantages.
また、上述の技術と共に又は代えて、所定の駐車領域に対して入退出した車両の数を計測してもよい。すなわち、所定の駐車領域に対して入退出可能な通路を撮像可能な撮像装置によって撮像された一又は複数の画像を用いて、かかる通路内を走行する車両の数について、所定の駐車領域への進入車両数から退出車両数を減算することにより、駐車領域内の車両の数を推定してよい。通路の方が、駐車スペースと比較して、見通しがよいため、車両数をより正確に算出できる可能性があるためである。 In addition, with or in place of the above techniques, the number of vehicles entering and exiting a predetermined parking area may be measured. That is, the number of vehicles traveling in a predetermined parking area is determined by using one or a plurality of images captured by an imaging device capable of capturing an image of a passage that can enter and exit the predetermined parking area. The number of vehicles in the parking area may be estimated by subtracting the number of exiting vehicles from the number of entering vehicles. This is because the aisle has a better view than the parking space, so that the number of vehicles may be calculated more accurately.
また、所定の駐車領域に対して入退出可能な通路を撮像可能な撮像装置によって撮像している通路を連続して車両が通過した場合等、かかる撮像装置によって車両を検出しない場合もあるため、早朝や夜間などに、車両数を補正してもよい。例えば、夜間、駐車領域を施錠などして閉めて駐車させない場合は、その時点で、駐車車両の数を0にリセットしてもよい。また、駐車領域が閉めない場合でも、夜間や早朝に駐車する車両が少ない場合は車両数の誤検出は減少するため、夜間や早朝などの所定の時点における駐車領域内の車両の数によって、駐車車両の数を補正してもよい。このような場合、例えば、駐車領域内を撮像する画像に基づく駐車数の測定と、かかる駐車領域内に入退出可能な通路を撮像可能な画像に基づく入退出数の測定と、の両方を用いて、駐車領域についての満空情報を生成してもよい。ここで、駐車領域内を撮像する画像と通路を撮像する画像は、同一であってもよいし、異なってもよい。また、駐車領域内を撮像する撮像装置と、通路を撮像する撮像装置と、は同一であってもよいし、異なってもよい。 In addition, the vehicle may not be detected by such an imaging device, such as when a vehicle continuously passes through a passage that is imaged by an imaging device capable of imaging a passage that can enter and exit a predetermined parking area. The number of vehicles may be corrected in the early morning or at night. For example, when the parking area is locked at night to prevent parking, the number of parked vehicles may be reset to 0 at that time. Even if the parking area is not closed, if there are few vehicles parked at night or early in the morning, false detection of the number of vehicles will decrease. Therefore, depending on the number of vehicles in the parking area at a predetermined time such as at night or early morning, parking will be performed. The number of vehicles may be corrected. In such a case, for example, both the measurement of the number of parking lots based on the image of the inside of the parking area and the measurement of the number of entrances and exits based on the image of the passages that can enter and leave the parking area are used. And may generate full vacancy information about the parking area. Here, the image of the parking area and the image of the passage may be the same or different. Further, the image pickup device that images the inside of the parking area and the image pickup device that images the passage may be the same or different.
なお、本図のような画像を撮像する撮像装置において、撮像装置の解像度が一定程度ある場合、画像利用部は、かかる画像から、各車両について、車両を特定する情報を取得してもおい。すなわち、解像度の高さから、例えば、各車両のナンバープレートの情報を取得できる場合は、かかる複数の駐車スペースを撮像視野に含む画像から、車両を特定する情報を取得して、駐車スペースに駐車中の車両を特定してもよい。この場合、例えば、駐車場の出入り口などに撮像装置を設置して駐車場への入場及び/又は出場する車両を特定 しなくとも、かかる複数の駐車スペースを撮像する撮像装置のみから、駐車中の車両を特定できる利点がある。また、駐車中の車両の駐車領域内の位置を特定する情報を取得できる利点がある。 In the image pickup device for capturing an image as shown in this figure, when the resolution of the image pickup device is about a certain level, the image utilization unit may acquire information for identifying the vehicle for each vehicle from such an image. That is, for example, when the license plate information of each vehicle can be acquired from the high resolution, the information for identifying the vehicle is acquired from the image including the plurality of parking spaces in the imaging field of view, and the vehicle is parked in the parking space. You may identify the vehicle inside. In this case, for example, even if an image pickup device is installed at the entrance / exit of the parking lot and the vehicle entering and / or entering the parking lot is not specified, only the image pickup device that images the plurality of parking spaces is used for parking. It has the advantage of being able to identify the vehicle. In addition, there is an advantage that information for identifying the position of the parked vehicle in the parking area can be acquired.
なお、この場合においても、駐車場の出入り口などに撮像装置を設置してもよい。駐車場の出入口等に撮像装置を設置して駐車場への入場及び/又は出場する車両を特定できる場合、駐車領域内で駐車中の車両を特定するにあたり、かかる他の撮像装置で得られた情報を用いることで、駐車中の車両を特定する精度を向上できる利点がある。 In this case as well, an imaging device may be installed at the entrance / exit of the parking lot. When an imaging device can be installed at the entrance / exit of a parking lot to identify a vehicle entering and / or exiting the parking lot, the other imaging device can be used to identify a parked vehicle in the parking area. The use of information has the advantage of improving the accuracy of identifying parked vehicles.
画像利用部は、駐車領域についての満空情報を、撮像された画像に基づいて生成してよい。例えば、各駐車スペースについての空車、駐車済み等の情報を生成した後、一又は複数の駐車スペースを含む一の駐車領域について、空車スペース率を算出したり、空車スペースの量の程度などの情報を生成してよい。 The image utilization unit may generate full sky information about the parking area based on the captured image. For example, after generating information such as vacant cars and parked cars for each parking space, the vacant car space ratio can be calculated for one parking area including one or more parking spaces, and information such as the amount of vacant car spaces can be calculated. May be generated.
また、画像利用部は、一の駐車領域について、複数の撮像装置によって撮像された画像を用いて、かかる満空情報を生成してよい。ここで、複数の撮像装置が利用される場合、その撮像視野は、互いに重複してもよいし、重複しなくてもよい。また、複数の撮像装置の撮像視野が重複している場合、重複している一又は複数の駐車スペースについて生成された満空情報は、各画像から得られた情報を照合することにより、情報の正確性を向上できる利点がある。 In addition, the image utilization unit may generate such full-sky information for one parking area by using images captured by a plurality of imaging devices. Here, when a plurality of imaging devices are used, the imaging fields of view may or may not overlap with each other. Further, when the imaging fields of view of a plurality of imaging devices overlap, the full / empty information generated for one or a plurality of overlapping parking spaces can be obtained by collating the information obtained from each image. It has the advantage of improving accuracy.
画像利用部は、上述の満空情報を含む駐車場に係る情報を、画像利用部と同一の情報処理装置内に記憶してもよいし、画像利用部と異なる情報処理装置内に記憶させておきかかる異なる情報処理装置に駐車場に係る情報を送信し、記憶させ、そこから管理に応じて取得する構成を採用してもよい。画像利用部は、かかる駐車場に係る情報を、サーバ、クラウドなどに記憶させ、管理してもよい。 The image utilization unit may store the information related to the parking lot including the above-mentioned full / empty information in the same information processing device as the image utilization unit, or store it in an information processing device different from the image utilization unit. A configuration may be adopted in which information related to the parking lot is transmitted to different information processing devices, stored in the information processing device, and acquired from the information processing device according to management. The image utilization unit may store and manage the information related to the parking lot in a server, cloud, or the like.
画像利用部は、かかる一の駐車領域の満空情報を、どのようなタイミングで生成してもよい。所定の期間毎に満空情報を生成してもよいし、何かのイベントに対応して満空情報を生成してもよい。所定の期間毎としては、5分毎、10分毎、30分毎、1時間ごと、など種々のものであってよく、所定の期間を短くし、頻度を高めることによって、満空情報の精度を向上できる利点がある。イベントとしては、車両の入場及び/又は出場を検知した場合等が挙げられる。なお、上述の通り、駐車スペース内の人などの車両以外の者の検知する可能性の観点から、所定期間内の複数の検知の結果の平均値などを用いて、満空情報を生成してもよい。 The image utilization unit may generate full / empty information of such one parking area at any timing. Full / empty information may be generated at predetermined intervals, or full / empty information may be generated in response to some event. The predetermined period may be various, such as 5 minutes, 10 minutes, 30 minutes, 1 hour, etc., and the accuracy of the full / empty information is increased by shortening the predetermined period and increasing the frequency. There is an advantage that can be improved. Examples of the event include the case where the entry and / or entry of the vehicle is detected. As described above, from the viewpoint of the possibility of detecting a person other than the vehicle such as a person in the parking space, the full / empty information is generated by using the average value of the results of a plurality of detections within a predetermined period. May be good.
画像利用部は、駐車領域についての満空情報を、端末装置に送信してよい。満空情報を端末装置に送信するタイミングは、種々のものであってよい。例えば、端末装置からの要求に対応して、満空情報を送信してもよいし、かかる要求なくとも定期的又は特定のイベントに対応して、満空情報を端末装置に送信してもよい。 The image utilization unit may transmit the full / empty information about the parking area to the terminal device. The timing of transmitting the fullness information to the terminal device may be various. For example, the fullness information may be transmitted in response to a request from the terminal device, or the fullness information may be transmitted to the terminal device in response to a periodic or specific event without such a request. ..
端末装置からの要求としては、例えば、利用者が、駐車アプリを起動することに対応したタイミングで満空情報を要求してもよいし、利用者が駐車アプリ内で特定の駐車場を指定したタイミングで満空情報を要求してもよい。前者の場合、駐車アプリを起動した時点での駐車アプリが位置する位置情報を用いて、かかる位置情報と関連付けられる駐車領域についての満空情報を、かかる起動された駐車アプリに対して、送信してよい。また、後者の場合、利用者が指定した特定の駐車場に係る駐車領域についての満空情報を、かかる指定した駐車アプリに対して送信してよい。 As a request from the terminal device, for example, the user may request the fullness information at the timing corresponding to the activation of the parking application, or the user specifies a specific parking lot in the parking application. You may request full availability information at the timing. In the former case, the location information on which the parking application is located at the time when the parking application is activated is used to transmit the full / empty information about the parking area associated with the location information to the activated parking application. You can. Further, in the latter case, the full / empty information about the parking area related to the specific parking lot designated by the user may be transmitted to the designated parking application.
定期的なものとしては、例えば、利用者の過去の駐車利用履歴などから、駐車を利用しうる駐車領域についての満空情報を、利用履歴に基づくタイミングで、送信してもよい。 As a periodic one, for example, from the past parking usage history of the user, full vacancy information about the parking area where parking can be used may be transmitted at a timing based on the usage history.
また、特定のイベントとしては、例えば、駐車領域内で特定の利用車両を検知するイベントであってもよい。かかる場合、かかる検知された特定の利用車両に係る利用者IDの駐車アプリに対して、満空情報を送信してよい。 Further, the specific event may be, for example, an event for detecting a specific vehicle to be used in the parking area. In such a case, the full / empty information may be transmitted to the parking application of the user ID related to the detected specific vehicle.
また、その他の特定のイベントとしては、特定の駐車領域の使用と時間が予約されている場合において、かかる予約に対応して、対応する時間において、予約された駐車領域についての満空情報を、予約した利用車両に係る利用者の駐車アプリに対して、送信してよい。 In addition, as another specific event, when the use and time of a specific parking area is reserved, in response to such reservation, full availability information about the reserved parking area at the corresponding time is provided. It may be transmitted to the user's parking application related to the reserved vehicle.
また、管理システムが、駐車場と関連付けられた表示装置と直接的又は間接的に接続されている場合、画像利用部は、駐車領域についての満空情報を、かかる駐車領域に関連する表示装置に送信してもよい。表示装置は、駐車場の入口及び/又は駐車場内に設置されてよい。また、表示装置は、車両内から見ることができるものであってよく、駐車場内の状況を表示可能な装置であって良い。かかる表示装置は、かかる表示装置と関連する駐車領域を模式的に図示し、かかる駐車領域の満空情報を、かかる図示された駐車領域と対応付けて、表示可能であってよい。かかる表示装置により、駐車場への入口及び/又は駐車場内から、駐車場内の満空情報を、提供可能である。 In addition, when the management system is directly or indirectly connected to the display device associated with the parking lot, the image utilization unit transfers the fullness information about the parking area to the display device related to the parking lot area. You may send it. The display device may be installed at the entrance of the parking lot and / or in the parking lot. Further, the display device may be one that can be seen from inside the vehicle, and may be a device that can display the situation in the parking lot. Such a display device may be capable of schematically showing a parking area associated with such a display device and displaying the fullness information of the parking area in association with the illustrated parking area. With such a display device, it is possible to provide full / empty information in the parking lot from the entrance to the parking lot and / or the inside of the parking lot.
<待ち車列検知機能>
また、画像利用部は、一又は複数の画像を用いて、通路上で待ち車列中の車両数を生成してよい。例えば、画像利用部は、通路を視野内に含んで撮像可能な撮像装置によって撮像された一又は複数の画像を用いて、通路上の車両の数を生成してよい。この場合、画像利用部は、駐車領域のように、通路上に領域を設定し、かかる通路上にいる車両の数を生成してよい。この場合、上述の駐車領域についての満空情報を生成する技術が利用されてよい。<Waiting convoy detection function>
In addition, the image utilization unit may generate the number of vehicles in the waiting convoy on the aisle by using one or more images. For example, the image utilization unit may generate the number of vehicles on the aisle using one or more images captured by an imaging device capable of capturing the aisle in the field of view. In this case, the image utilization unit may set an area on the aisle, such as a parking area, and generate the number of vehicles on the aisle. In this case, the technique for generating full / empty information about the parking area described above may be used.
また、画像利用部は、通路上の待ち車列内で待つ時間に係る情報を生成してよい。画像利用部は、この場合、後述する駐車追跡機能を用いてよい。例えば、画像利用部は、通路上において、所定の期間内に移動する距離を用いて、通路上の待ち車列内で待つ時間に係る情報を生成してよい。また、画像利用部は、後述の速度の予測や所定期間後の画像内の車両の出現位置の予測や、Optical Flow技術を用いて、通路上の待ち車列内で待つ時間に係る情報を生成してよい。また、画像利用部は、通路上の特定の車両の移動時間を測定することにより、待ち車列内の車両の移動時間を測定してもよい。例えば、画像利用部は、かかる通路上の待ち車列の第1所定の位置から第2所定の位置までの移動時間を利用することにより、待ち車列の待ち時間を計測してもよい。第1所定の位置と第2所定の位置は、任意に定められてよい。第1所定の位置と第2所定の位置は、待ち車列の途中の一部でもよいし、待ち車列の最初と最後であってもよい。例えば、第1所定の位置と第2所定の位置との距離とその所定の倍数によって、待ち車列内の車両の移動時間を測定してもよいし、第1所定の位置を車列の最後尾として変動させ、第2所定の位置を待ち車列の先頭としてもよいし、これらの組み合わせでもよい。 In addition, the image utilization unit may generate information related to the waiting time in the waiting convoy on the aisle. In this case, the image utilization unit may use the parking tracking function described later. For example, the image utilization unit may generate information on the time to wait in the waiting convoy on the aisle by using the distance traveled within the predetermined period on the aisle. In addition, the image utilization unit generates information related to the waiting time in the waiting convoy on the aisle by using the speed prediction described later, the prediction of the appearance position of the vehicle in the image after a predetermined period, and the Optical Flow technology. You can do it. Further, the image utilization unit may measure the moving time of a vehicle in the waiting convoy by measuring the moving time of a specific vehicle on the aisle. For example, the image utilization unit may measure the waiting time of the waiting vehicle line by using the movement time from the first predetermined position to the second predetermined position of the waiting vehicle line on the aisle. The first predetermined position and the second predetermined position may be arbitrarily determined. The first predetermined position and the second predetermined position may be a part in the middle of the waiting vehicle line, or may be the beginning and the end of the waiting vehicle line. For example, the movement time of a vehicle in the waiting vehicle line may be measured by the distance between the first predetermined position and the second predetermined position and a predetermined multiple thereof, or the first predetermined position may be the end of the vehicle line. It may be varied as a tail, and the second predetermined position may be the head of the waiting convoy, or a combination thereof may be used.
待つ時間に係る情報は、一の車両について待ち車列内で待ち始めてから待ち車列を離れるまでの時間でもよいし、複数の車両についてのかかる時間の平均時間でもよい。また、かかる時間の一部の時間であってもよい。例えば、少なくとも〇分要する、等の情報であってもよい。 The information related to the waiting time may be the time from when one vehicle starts waiting in the waiting line to when it leaves the waiting line, or may be the average time taken for a plurality of vehicles. Moreover, it may be a part of the time taken. For example, the information may take at least 0 minutes.
画像利用部は、駐車場の入口から所定の範囲内の通路上の待ち車列の車両の数を生成できる場合、駐車場に入るまでの込み具合を検出できる利点がある。この場合、他の駐車場を推薦するなどが可能となる。そのため、管理システムは、一の駐車場における入口の待ち車列に係る情報を、かかる駐車場を目指す車両に係る利用者端末に係る利用者アプリに送信してもよい。かかる送信される情報は、待ち車列に係る車両数の数及び/又は待ち車列において予測される待ち時間であってよい。 When the image utilization unit can generate the number of vehicles in the waiting line on the aisle within a predetermined range from the entrance of the parking lot, it has an advantage that it can detect the degree of congestion until entering the parking lot. In this case, it is possible to recommend another parking lot. Therefore, the management system may transmit the information related to the waiting line at the entrance in one parking lot to the user application related to the user terminal related to the vehicle aiming at the parking lot. Such transmitted information may be the number of vehicles in the waiting convoy and / or the expected waiting time in the convoy.
また、画像利用部が、駐車場の出口から所定の範囲内の通路上の待ち車列の車両の数を生成できる場合、駐車場から出るまでの込み具合を検出できる利点がある。この場合、管理システムは、駐車場に係る出口の待ち車列に係る情報を、かかる駐車場と関連付けられている商業施設内にいる利用者アプリに送信してもよい。かかる送信される情報は、待ち車列に係る車両数の数及び/又は待ち車列において予測される待ち時間であってよい。この場合、駐車場の出口の込み具合を踏まえて商業施設内の利用者の利便性が向上できる利点がある。 Further, when the image utilization unit can generate the number of vehicles in the waiting line on the aisle within a predetermined range from the exit of the parking lot, there is an advantage that the degree of congestion from the exit of the parking lot can be detected. In this case, the management system may transmit the information related to the waiting line of the exit related to the parking lot to the user application in the commercial facility associated with the parking lot. Such transmitted information may be the number of vehicles in the waiting convoy and / or the expected waiting time in the convoy. In this case, there is an advantage that the convenience of the user in the commercial facility can be improved based on the congestion of the exit of the parking lot.
<誘導機能>
画像利用部は、車両の誘導機能を有してよい。画像利用部は、駐車場内の駐車スペースの満空情報を用いて、車両を、駐車可能領域に誘導する機能を有してよい。画像利用部は、車両の誘導に係る情報を生成し、かかる情報を、利用者端末に送信してよい。<Induction function>
The image utilization unit may have a vehicle guidance function. The image utilization unit may have a function of guiding the vehicle to the parkingable area by using the fullness information of the parking space in the parking lot. The image utilization unit may generate information related to vehicle guidance and transmit such information to the user terminal.
画像利用部は、車両の誘導に係る情報として、全ての駐車可能領域についての情報を提供してもよいし、一部の駐車可能領域についての情報を提供してもよいし、かかる一部又は全ての駐車可能領域の特定の所定の範囲の駐車可能領域に移動するのに有用な情報を提供してもよい。 The image utilization unit may provide information on all parkable areas, may provide information on some parkable areas, or part of such information or as information related to vehicle guidance. It may provide useful information for moving to a specific predetermined range of parkable areas of all parkable areas.
画像利用部が、全ての駐車可能領域についての情報を提供した場合、利用者は、かかる全ての駐車領域の中から、駐車を希望する駐車領域を選択できる利点がある。 When the image utilization unit provides information about all the parkable areas, the user has an advantage that the parking area desired to be parked can be selected from all the parking areas.
また、画像利用部が、一部の駐車可能領域についての情報を提供した場合、利用者は、過度に多い選択しから迷う必要がない利点がある。なお、画像利用部は、かかる一部の駐車可能領域を、種々の手法により特定してよい。例えば、画像利用部は、駐車領域の満空情報、誘導に係る情報、駐車領域との商業施設との距離、などを用いて、かかる一部の駐車可能領域を特定してよい。 Further, when the image utilization unit provides information about a part of the parkable area, the user has an advantage that he / she does not have to hesitate from making an excessively large number of selections. The image utilization unit may specify such a part of the parkable area by various methods. For example, the image utilization unit may specify a part of the parkable area by using the fullness information of the parking area, the information related to the guidance, the distance between the parking area and the commercial facility, and the like.
例えば、一部の駐車可能領域は、空車率が所定の値以上の満空情報を有する駐車領域、空車率が最も高い満空情報を有する駐車領域、商業施設から所定の距離の範囲内で空車率が所定の値以上の満空情報を有する駐車領域、などであってよい。また、これらの一部駐車可能領域は、所定のルールによって特定されてよい。また、かかる所定のルールの適用は、管理者端末から得られた情報に基づいて、特定されてもよい。この場合、管理者端末によって、管理者が駐車を希望する駐車領域を、誘導に係る情報に含ませることができる利点がある。 For example, some parkingable areas include a parking area having full vacancy information with a vacancy rate of a predetermined value or more, a parking area having vacancy information having the highest vacancy rate, and an empty vehicle within a predetermined distance from a commercial facility. It may be a parking area having full / empty information whose rate is equal to or higher than a predetermined value. In addition, these partially parkable areas may be specified by a predetermined rule. Further, the application of such a predetermined rule may be specified based on the information obtained from the administrator terminal. In this case, there is an advantage that the manager terminal can include the parking area that the manager wants to park in the information related to the guidance.
また、一部又は全ての駐車可能領域の特定の所定の範囲の駐車可能領域に移動するのに有用な情報は、利用車両が、空車スペースに移動する際に使用可能な情報であればよい。例えば、駐車場内の空車スペースが位置する領域、立体駐車場などの複数の階を有する駐車場において空車スペースが位置する階、または具体的な空車スペースの位置、などの空車スペースの方向性を示す情報であってよい。また、リアルタイムの利用車両の位置からの、かかる空車スペースとの相対的な関係性を示す情報を、生成してもよい。なお、かかる空車スペースとリアルタイムの利用車両の位置との相対的な関係性は、リアルタイムの利用車両の位置を管理システム内が取得して、管理システム内でかかる相対的な県警性を生成して利用者端末に送信してもよいし、駐車可能領域についての情報を利用者端末に送信し、利用者端末内で利用車両のリアルタイムの位置情報を用いて、かかる相対的な関係性を生成してもよい。 Further, the information useful for moving to a specific predetermined range of the parkable area of a part or all of the parkable area may be information that can be used when the vehicle to be used moves to the empty space. For example, the direction of the empty car space such as the area where the empty car space is located in the parking lot, the floor where the empty car space is located in the parking lot having multiple floors such as a multi-story parking lot, or the specific position of the empty car space is shown. It may be information. In addition, information indicating the relative relationship with the empty vehicle space from the position of the vehicle used in real time may be generated. The relative relationship between the empty space and the position of the vehicle used in real time is obtained by the management system acquiring the position of the vehicle used in real time and generating the relative prefectural police in the management system. It may be transmitted to the user terminal, or information about the parkable area is transmitted to the user terminal, and the real-time position information of the vehicle used in the user terminal is used to generate such a relative relationship. You may.
また、管理システムが、駐車場と関連付けられた表示装置と直接的又は間接的に接続されている場合、画像利用部は、駐車領域についての車両の誘導に係る情報を、かかる駐車領域に関連する表示装置に送信してもよい。表示装置は、駐車場の入口及び/又は駐車場内に設置されてよい。また、表示装置は、車両内から見ることができるものであってよく、駐車場内の状況を表示可能な装置であって良い。かかる表示装置は、かかる表示装置と関連する駐車領域を模式的に図示し、車両の誘導に係る情報を、表示可能であってよい。 In addition, when the management system is directly or indirectly connected to the display device associated with the parking lot, the image utilization unit relates the information related to the guidance of the vehicle about the parking area to the parking area. It may be transmitted to the display device. The display device may be installed at the entrance of the parking lot and / or in the parking lot. Further, the display device may be one that can be seen from inside the vehicle, and may be a device that can display the situation in the parking lot. Such a display device may be capable of schematically illustrating a parking area associated with such a display device and displaying information relating to vehicle guidance.
また、管理システムが、更に、かかる表示装置と関連付けられた撮像装置と直接的又は間接的に接続されている場合、画像利用部は、かかる撮像装置によって撮像された車両に対する車両の誘導に係る情報を、かかる表示装置に送信してもよい。ここで、かかる撮像装置は、例えば、かかる表示装置を閲覧可能な位置における車両を撮像視野に含めてよい。画像利用部は、かかる撮像装置によって撮像された画像を用いて、かかる表示装置を閲覧している車両を特定する情報を取得してよい。画像利用部は、かかる撮像装置を用いて特定された車両に対する誘導に係る情報を、かかる表示装置に表示させてよい。この場合、駐車場に設置された表示装置において、かかる表示装置を見る車両に対応した誘導の情報を表示させることができる。 Further, when the management system is further directly or indirectly connected to the image pickup device associated with the display device, the image utilization unit provides information relating to the guidance of the vehicle to the vehicle imaged by the image pickup device. May be transmitted to such a display device. Here, the imaging device may include, for example, a vehicle at a position where the display device can be viewed in the imaging field of view. The image utilization unit may acquire information for identifying the vehicle viewing the display device by using the image captured by the image pickup device. The image utilization unit may display the information related to the guidance for the vehicle specified by using the image pickup device on the display device. In this case, the display device installed in the parking lot can display guidance information corresponding to the vehicle viewing the display device.
かかる構成により、例えば、ある利用者が、特定の駐車領域への駐車する希望を、駐車アプリにおいて入力した場合、かかる利用者が利用する利用車両と連動させて、かかる利用車両に対応する駐車領域への誘導に係る情報を、かかる表示装置に表示できる利点がある。この場合、表示装置に表示される誘導に係る情報は、かかる表示装置を閲覧可能な位置に車両によって、異なってよい。 With such a configuration, for example, when a user inputs a desire to park in a specific parking area in the parking application, the parking area corresponding to the user vehicle is linked with the user vehicle used by the user. There is an advantage that the information related to the guidance to the vehicle can be displayed on the display device. In this case, the guidance information displayed on the display device may differ depending on the vehicle at a position where the display device can be viewed.
なお、上述においては、ある利用者が特定の駐車領域への駐車を希望する場合を説明したが、これは一例にすぎず、利用者が、特定の駐車領域への駐車を希望しない場合においても、表示装置は、利用者毎に、異なる誘導に係る情報を、表示してもよく、そのために、画像利用部は、利用車両毎に、異なる誘導に係る情報を、生成して、送信してもよい。 In the above description, the case where a certain user wants to park in a specific parking area has been described, but this is only an example, and even when the user does not want to park in a specific parking area. , The display device may display information related to different guidance for each user, and therefore, the image utilization unit generates and transmits information related to different guidance for each vehicle used. May be good.
例えば、かかる表示装置が設置されている箇所から、複数の駐車領域に車両が進行可能である場合において、表示装置を閲覧可能な位置にいる連続して連なる車両に対して、かかる複数の駐車領域を順次割り振ってよい。例えば、一の車両が表示装置を閲覧可能な位置にいる場合に、複数の駐車領域の一の駐車領域についての誘導に係る情報を画像利用部は生成し、表示装置に送信し、表示装置に表示させた場合、一の車両の後続の次の車両がかかる表示装置を閲覧可能な位置にいる場合には、かかる複数の駐車領域のうちの前記一の駐車領域とは異なる駐車領域についての誘導に係る情報を画像利用部は生成し、表示装置に送信し、表示装置に表示させてよい。また、かかる複数の駐車領域のうちの同一の一の駐車領域を連続する車両の両方に誘導しないように、誘導に係る情報を、生成してよい。これらの場合、連続する車両が、同一の駐車領域に誘導されないことから、駐車場内の混雑を緩和できる利点がある。 For example, when a vehicle can travel to a plurality of parking areas from a location where the display device is installed, the plurality of parking areas are provided for a continuous series of vehicles in a position where the display device can be viewed. May be allocated sequentially. For example, when one vehicle is in a position where the display device can be viewed, the image utilization unit generates information related to guidance for one parking area of a plurality of parking areas, transmits the information to the display device, and sends the information to the display device. When displayed, when the next vehicle following one vehicle is in a position where the display device can be viewed, guidance for a parking area different from the one parking area among the plurality of parking areas. The image utilization unit may generate the information related to the above, transmit it to the display device, and display it on the display device. In addition, information related to guidance may be generated so as not to guide the same one parking area among the plurality of parking areas to both consecutive vehicles. In these cases, since continuous vehicles are not guided to the same parking area, there is an advantage that congestion in the parking lot can be alleviated.
<車両追跡機能>
画像利用部は、機械学習済み識別機能を用いて、動画又は時系列上の複数の静止画像から、同一と判定される車両の移動、すなわち、車両の軌跡の情報を取得できる機能(本願書類において、「車両追跡機能」ということもある)を有してよい。<Vehicle tracking function>
The image utilization unit has a function of acquiring information on the movement of a vehicle determined to be the same, that is, the trajectory of the vehicle from a moving image or a plurality of still images on a time series by using a machine-learned identification function (in the document of the present application). , May be referred to as a "vehicle tracking function").
画像利用部は、一の撮像装置から取得した画像を用いた車両追跡機能を有してもよいし、複数の撮像装置から取得した各画像を用いた車両追跡機能を有してもよい。後者の場合、複数の撮像装置によって撮像された画像間における対象の同一性の判定は、従来技術を用いてもよいし、また、車両の同一性、複数の撮像装置の視野の重複性、画像内の車両の撮像された時刻の関連性、などが用いられてよい。視野の重複性は、撮像装置の撮像視野が重複している場合において、かかる重複視野内の同一位置で同一タイミングに識別された車両を用いて、車両の同一性の判定をしてもよい。 The image utilization unit may have a vehicle tracking function using images acquired from one imaging device, or may have a vehicle tracking function using each image acquired from a plurality of imaging devices. In the latter case, the determination of the identity of the object between the images captured by the plurality of imaging devices may use the prior art, or the identity of the vehicle, the overlap of the visual fields of the plurality of imaging devices, and the image. The relevance of the time when the vehicle in the vehicle was imaged, etc. may be used. Regarding the overlap of the visual fields, when the imaging visual fields of the imaging devices overlap, the identity of the vehicles may be determined by using the vehicles identified at the same position and at the same timing in the overlapping visual fields.
画像利用部が、車両追跡機能を有している場合、車両追跡機能が適用された画像自体から車両を特定する情報を取得できない場合においても、他の撮像装置で撮像された画像から車両を特定する情報を取得できる場合、かかる他の撮像装置で撮像された画像の情報と連動させて、車両追跡機能が適用される画像内の車両を特定できる利点がある。 When the image utilization unit has a vehicle tracking function, the vehicle is identified from the image captured by another imaging device even when the information for identifying the vehicle cannot be acquired from the image itself to which the vehicle tracking function is applied. If the information to be used can be obtained, there is an advantage that the vehicle in the image to which the vehicle tracking function is applied can be identified in conjunction with the information of the image captured by the other imaging device.
以上のとおり、車両を特定するために利用された画像と、車両の軌跡の情報を取得するのに使用される画像は、同一の画像であってもよいし、異なる画像であってもよい。また、車両を特定するために利用された画像を撮像する撮像装置と、車両の軌跡の情報を取得するのに使用された画像を撮像する撮像装置と、は同一の撮像装置であってもよいし、異なる撮像装置であってもよい。例えば、車両を特定するために利用された画像と、かかる車両が駐車スペースに移動する経過の車両の軌跡の情報を取得するのに使用された画像と、かかる車両が駐車スペースに駐車されたことを判定するのに利用された画像と、は全て同じ画像であってもよいし、一部の画像が同じで他の画像が異なってもよいし、全ての画像が異なってもよい。また、車両を特定するために利用された画像を撮像する撮像装置と、かかる車両が駐車スペースに移動する経過の車両の軌跡の情報を取得するのに使用された画像を撮像する撮像装置と、かかる車両が駐車スペースに駐車されたことを判定するのに利用された画像を撮像する撮像装置と、は全て同じ撮像装置であってもよいし、一部の撮像装置が同じで他の撮像装置が異なってもよいし、全ての撮像装置が異なってもよい。 As described above, the image used for identifying the vehicle and the image used for acquiring the information on the trajectory of the vehicle may be the same image or different images. Further, the imaging device that captures the image used to identify the vehicle and the imaging device that captures the image used to acquire the information on the trajectory of the vehicle may be the same imaging device. However, different imaging devices may be used. For example, the image used to identify the vehicle, the image used to obtain information on the trajectory of the vehicle as it moved into the parking space, and that the vehicle was parked in the parking space. The images used to determine the above may be all the same image, some images may be the same and other images may be different, or all images may be different. In addition, an imaging device that captures an image used to identify the vehicle, and an imaging device that captures an image used to acquire information on the trajectory of the vehicle as the vehicle moves to the parking space. The imaging device that captures the image used to determine that the vehicle is parked in the parking space may all be the same imaging device, or some imaging devices are the same and other imaging devices. May be different, or all imaging devices may be different.
画像利用部は、車両追跡機能として、種々の手法を用いてよいが、例えば、車両についての予測技術を用いてよい。車両の移動の予測技術は、車両の速度を予測し、現在の車両の位置とかかる予測に基づいて所定時間後の車両の位置を予測する技術を用いてよい。車両の速度を予測する技術としては、例えば、動画内の時系列上の所定の複数の画像から予測される車両の速度を用いてもよいし、カルマンフィルタを用いてもよい。例えば、動画内の過去5フレーム内等の所定の数のフレーム内の各画像内の同一車両の位置から、車両の速度を特定し、かかる速度が維持された場合の所定の期間後の車両の出現位置を予測して、車両を追跡してもよい。 The image utilization unit may use various methods as the vehicle tracking function, and for example, a prediction technique for a vehicle may be used. As the vehicle movement prediction technique, a technique of predicting the speed of the vehicle and predicting the position of the vehicle after a predetermined time based on the current position of the vehicle and such prediction may be used. As a technique for predicting the speed of the vehicle, for example, the speed of the vehicle predicted from a plurality of predetermined images on a time series in a moving image may be used, or a Kalman filter may be used. For example, the speed of the vehicle is specified from the position of the same vehicle in each image in a predetermined number of frames such as in the past 5 frames in the video, and the vehicle after a predetermined period when the speed is maintained. The vehicle may be tracked by predicting the position of appearance.
また、画像利用部は、車両追跡機能として、上述の機能と共に、又は代えて、Optical Flow技術を用いてもよい。この場合においても、車両の移動をベクトルによって表現することにより、所定期間経過後の車両の移動予測が可能であることから、かかる車両の所定時間後の位置を予測し、車両追跡機能の正確性を向上できる利点がある。 In addition, the image utilization unit may use the Optical Flow technology as the vehicle tracking function together with or in place of the above-mentioned functions. Even in this case, since it is possible to predict the movement of the vehicle after a predetermined period of time by expressing the movement of the vehicle by a vector, the position of the vehicle after a predetermined time can be predicted and the accuracy of the vehicle tracking function can be predicted. There is an advantage that can be improved.
また、画像利用部は、上述の機能と共に、他の技術と共に、又は、単独で、車両の色を用いて、車両追跡機能を実現してもよい。また、画像利用部は、上述の機能と共に、又は、他の技術と共に、車両の色を用いて、車両追跡機能の正確性を向上させてもよい。例えば、画像利用部は、或る時点や或るフレーム内で追跡対象の車両の色Xの情報を記憶し、所定の時間経過後や動画の所定の枚数後のフレーム内で追跡対象の車両を特定する処理において、追跡対象の候補の車両の色がかかる車両の色Xと一致するかを判定し、車両の色が異なる追跡対象の候補の車両を、追跡対象から外す処理をしてよい。各車両は種々のボディカラーを有することから、かかる色を用いて、明らかに異なる車両を除外することにより、車両追跡機能の正確性の向上が可能となる利点がある。 In addition, the image utilization unit may realize the vehicle tracking function by using the color of the vehicle together with the above-mentioned functions, together with other technologies, or independently. The image utilization unit may also use vehicle color to improve the accuracy of the vehicle tracking function, in combination with the above functions or with other techniques. For example, the image utilization unit stores the color X information of the vehicle to be tracked at a certain time point or within a certain frame, and stores the vehicle to be tracked within a frame after a predetermined time elapses or a predetermined number of moving images. In the specifying process, it may be determined whether the color of the candidate vehicle to be tracked matches the color X of the vehicle, and the candidate vehicles to be tracked having different vehicle colors may be excluded from the tracking target. Since each vehicle has various body colors, there is an advantage that the accuracy of the vehicle tracking function can be improved by excluding clearly different vehicles by using such a color.
また、画像利用部は、上述の機能と共に、他の技術と共に、又は、単独で、深層学習済み機械学習機能を用いて、車両の同一性判定をしてもよい。また、画像利用部は、上述の機能と共に、又は、他の技術と共に、深層学習済み機械学習機能を用いて、車両追跡機能の正確性を向上させてもよい。例えば、画像利用部は、或る時点や或るフレーム内で追跡対象の車両について深層学習済み機械学習機能を用いて識別された車種情報Xを記憶し、所定の時間経過後や動画の所定の枚数後のフレーム内で追跡対象の車両を特定する処理において、追跡対象の候補の車両の車種情報がかかる車両の車種情報Xと一致するかを判定し、車種が異なる追跡対象の候補の車両を、追跡対象から外す処理をしてよい。車種情報は、車両の色、車両の車種、車両の形式、などを含んでよい。駐車領域内において同色同型番の車両もあるため、異なる車両の追跡を防止できる利点がある。 Further, the image utilization unit may determine the identity of the vehicle by using the deep learning machine learning function together with the above-mentioned function, together with other techniques, or independently. In addition, the image utilization unit may improve the accuracy of the vehicle tracking function by using the deep learning machine learning function together with the above-mentioned functions or in combination with other techniques. For example, the image utilization unit stores the vehicle type information X identified by using the deep learning machine learning function for the vehicle to be tracked at a certain time point or within a certain frame, and after a predetermined time elapses or in a predetermined video. In the process of identifying the vehicle to be tracked in the frame after the number of sheets, it is determined whether the vehicle type information of the candidate vehicle to be tracked matches the vehicle type information X of the vehicle, and the candidate vehicle to be tracked with a different vehicle type is determined. , You may remove it from the tracking target. The vehicle type information may include the color of the vehicle, the vehicle type of the vehicle, the type of the vehicle, and the like. Since there are vehicles of the same color and model number in the parking area, there is an advantage that tracking of different vehicles can be prevented.
画像利用部は、撮像された画像を、利用者に対して提供する機能を有してよい。利用者に提供されることによって、利用者は、駐車に関連する情報を取得できる利点がある。 The image utilization unit may have a function of providing the captured image to the user. By being provided to the user, the user has the advantage of being able to obtain information related to parking.
上述のとおり、画像利用部は、画像から、ナンバープレートを含む車両を特定する情報を取得する機能を有する場合であって、かかる画像を撮像した撮像装置が特定の駐車場の入場及び/又は出場に合理的に必要な場所に設置されている場合、かかる撮像によって特定の車両を示す情報が取得された場合、かかる駐車場にかかる特定の車両がかかる画像が撮像された時点において存在したことを意味し、かかる存在は、駐車料金の請求に結び付くことから、かかる車両を特定する情報を取得する元となった画像は、車両の存在を利用者に示すものとなる。そこで、かかる、車両を特定する情報の元となった画像は、画像利用部において記憶されて管理され、利用者に対して、提供することにより、利用者も、かかる駐車行為を理解できる利点がある。かかる利用者に提供可能な情報としては、画像が、ナンバープレートのみを撮像してもよいが、ナンバープレートの周辺の情報も撮像してもよい。例えば、ナンバープレートを含む車両の全部及び/又は後部の一部又は全部を撮像してもよいし、車両内に乗車する人を含めて撮像してもよい。車両内に乗車する人を含めた画像の場合、利用者は、より駐車行為に対する記憶を喚起できる利点がある。 As described above, the image utilization unit has a function of acquiring information for identifying a vehicle including a license plate from an image, and an imaging device that has captured such an image enters and / or exits a specific parking lot. If it is installed in a reasonably necessary place, if the information indicating a specific vehicle is obtained by such imaging, it means that the specific vehicle in such parking lot existed at the time when such an image was taken. Meaning, since such existence leads to the billing of the parking fee, the image from which the information for identifying the vehicle is obtained indicates the existence of the vehicle to the user. Therefore, the image that is the source of the information for identifying the vehicle is stored and managed in the image utilization unit, and by providing the image to the user, the user can also understand the parking behavior. is there. As the information that can be provided to such a user, the image may capture only the license plate, but may also capture information around the license plate. For example, the whole and / or part or all of the rear part of the vehicle including the license plate may be imaged, or the person who gets in the vehicle may be included in the image. In the case of an image including a person getting in the vehicle, the user has an advantage that the memory of the parking act can be more aroused.
また、上述の図10のように、一定の距離から複数の車両を撮像可能な撮像装置である場合、その画像全体であってもよい。この場合も、利用者は、かかる駐車場に駐車したことの記憶を喚起しやすい利点がある。なお、かかる場合、対象となる利用車両以外の場所については、ぼやかす処理を行った上で、利用者に提供してもよい。かかる処理により、対象となる利用者以外のプライバシーを保護できる利点がある。特にかかるぼやかす処理が不可逆的な処理の場合、より対象者となる利用者以外のプライバシーを保護できる利点がある。 Further, as shown in FIG. 10 described above, in the case of an imaging device capable of imaging a plurality of vehicles from a certain distance, the entire image may be used. In this case as well, the user has an advantage that it is easy to recall the memory of parking in the parking lot. In such a case, the place other than the target vehicle to be used may be provided to the user after being blurred. Such processing has an advantage that the privacy of users other than the target user can be protected. Especially when the blurring process is irreversible, there is an advantage that the privacy of users other than the target user can be protected.
また、駐車されている車両スペースの所定の範囲内の画像のみを、利用者に提供してもよい。この場合、例えば、各駐車スペースに対応した画像にトリミングされたものが提供されてもよい。この場合、他の駐車スペースについての画像はないことから、対象となる利用者以外のプライバシーを保護できる利点がある。 In addition, only images within a predetermined range of the parked vehicle space may be provided to the user. In this case, for example, a cropped image may be provided corresponding to each parking space. In this case, since there is no image about other parking spaces, there is an advantage that the privacy of other than the target user can be protected.
また、かかる利用車両の少なくとも周辺を含む情報が利用者に提供される場合、利用者は、かかる利用車両に対する何らかの事件についての情報を得ることができる利点がある。例えば、かかる画像が、動画によって提供される場合、利用者は、例えば、利用車両に対する悪戯や盗難などの事件が生じた場合についての情報を収集できる利点がある。かかる動画が提供される場合、種々の開始時刻と終了時刻であってよい。例えば、開始時刻と終了時刻の例としては、例えば、駐車場内に入場した時点から、駐車場を退場する時点までの動画であってもよいし、駐車場内で駐車した時点から、駐車場内で駐車から発車した時点までの動画であってもよい。 Further, when the information including at least the periphery of the used vehicle is provided to the user, the user has an advantage that he / she can obtain information about some incident on the used vehicle. For example, when such an image is provided by a moving image, the user has an advantage that he / she can collect information about an incident such as mischief or theft of the vehicle used. When such moving images are provided, they may have various start and end times. For example, an example of the start time and the end time may be a video from the time of entering the parking lot to the time of leaving the parking lot, or from the time of parking in the parking lot to parking in the parking lot. It may be a video from the time of departure to the time of departure.
また、特定の車両を示す情報の元となった画像は、種々の解像度の画像であってよい。すなわち、撮像装置の解像度が所定の値よりも高いものであれば、撮像された車両の距離は、所定の長さよりも小さくても、所定の長さよりも長い場合であってもよい。 Further, the image that is the source of the information indicating a specific vehicle may be an image having various resolutions. That is, as long as the resolution of the image pickup device is higher than a predetermined value, the distance of the captured vehicle may be smaller than the predetermined length or longer than the predetermined length.
<駐車料金>
また、画像利用部は、駐車スペースについて、駐車料金を設定してよい。かかる駐車料金は、管理者端末から駐車料金の情報を取得して設定されてもよいし、所定のルールに基づいて設定されてもよい。<Parking fee>
In addition, the image utilization unit may set a parking fee for the parking space. The parking fee may be set by acquiring parking fee information from the administrator terminal, or may be set based on a predetermined rule.
前者は、管理者が、管理者端末を介して入力された情報に基づいて設定されてもよい。例えば、管理者が、駐車場内の各駐車スペースに対して、各駐車料金を入力し、かかる入力された駐車料金を管理者端末において受領し、管理者端末から管理システムに送信され、受信した管理システムにおいてかかる駐車料金を、駐車スペースと関連付けて記憶してよい。 The former may be set based on the information input by the administrator via the administrator terminal. For example, the manager inputs each parking fee for each parking space in the parking lot, receives the entered parking fee at the manager terminal, sends the input parking fee to the management system, and receives the management. The parking fee charged in the system may be stored in association with the parking space.
後者は、所定のルールは、はじめから管理者が一部または全部を設定したルールであってもよいし、予め定められたルールに対して管理者が一部又は全部を設定したルールであってもよいし、管理者が設定可能ではない予め定められたルールであってもよい。 In the latter case, the predetermined rule may be a rule in which the administrator sets a part or all from the beginning, or a rule in which the administrator sets a part or all with respect to a predetermined rule. It may be a predetermined rule that cannot be set by the administrator.
駐車料金は、各一の駐車スペースに対して駐車料金が設定可能とされてもよいし、複数の駐車スペースに対して駐車料金が設定可能とされてもよい。後者は、例えば、複数の駐車スペースを一の駐車領域として、かかる一の駐車領域について、一駐車スペースあたりの同一の駐車料金が設定可能とされてもよいし、複数の駐車スペースを含む一の駐車場について、一駐車スペースあたりの同一の駐車料金が設定可能とされてもよい。また、一の駐車場内の全ての駐車スペースについて、同一の駐車料金が設定可能であってもよいし、異なる駐車料金が設定可能であってもよい。また、同一の種類(例えば、乗用車、バス、二輪車、など駐車スペースとして、社会通念上、ほぼ類似の面積が必要な車両の種類)の駐車スペースについて、同一の駐車料金が設定可能であってもよいし、異なる駐車料金が設定可能であってもよい。 As for the parking fee, the parking fee may be set for each one parking space, or the parking fee may be set for a plurality of parking spaces. In the latter, for example, a plurality of parking spaces may be set as one parking area, and the same parking fee per parking space may be set for such one parking area, or one including a plurality of parking spaces. For parking lots, the same parking fee per parking space may be set. Further, the same parking fee may be set for all the parking spaces in one parking lot, or different parking fees may be set. In addition, even if the same parking fee can be set for the same type of parking space (for example, a type of vehicle that requires almost the same area as a parking space for passenger cars, buses, motorcycles, etc.). It may be possible to set different parking fees.
所定のルールは、同一の駐車スペースの駐車料金が変化するルールであってもよい。駐車料金の変化は、時間情報、駐車スペースの満空情報、及び/又は、駐車スペースの場所情報、などを用いてよい。 The predetermined rule may be a rule in which the parking fee of the same parking space changes. For the change of the parking fee, time information, parking space fullness information, and / or parking space location information may be used.
時間情報は、駐車される日、時間帯、を含んでよい。例えば、家族連れを主なターゲットとする商業施設であれば、平日の駐車料金を休日の駐車料金よりも安価とすることで、平日の来訪を促進し来訪の分散化が可能な可能性がある。また、同様に、休日における時間帯について、午前中の駐車料金を、午後の駐車料金を安価とすることで、午前中の来訪を促進して来訪の分散化が可能な可能性がある。また、この場合、昼食施設を有する商業施設であれば昼食訪問者を増加できる可能性がある。このように、過去の利用履歴を用いて、又は、社会通念上、来訪者数が日時Aよりも少ない日時Bの日時の駐車料金を、日時Aよりも安価とすることで、来訪者の分散化を可能な可能性がある利点がある。 The time information may include the day and time of parking. For example, in a commercial facility whose main target is families, it may be possible to promote weekday visits and decentralize visits by making weekday parking fees cheaper than holiday parking fees. .. Similarly, by reducing the parking fee in the morning and the parking fee in the afternoon for the time zone on holidays, it is possible to promote the visit in the morning and decentralize the visit. Also, in this case, a commercial facility having a lunch facility may be able to increase the number of lunch visitors. In this way, by using the past usage history or by making the parking fee of the date and time B, which has a smaller number of visitors than the date and time A, lower than the date and time A, the number of visitors is dispersed. There is an advantage that it may be possible.
また、駐車スペースの満空情報は、現在の駐車スペースの満空情報のみを含んでもよいし、過去の駐車スペースの満空情報のみを含んでもよいし、現在および過去の両方の駐車スペースの満空情報を含んでもよい。現在の満空情報を用いる場合、現在の満空情報に基づいてリアルタイムに料金を変化させて設定可能である利点がある。また、過去の満空情報を用いる場合、過去の利用者の傾向を用いて、料金を設定可能である利点がある。また、現在と過去の満空情報を用いることで、過去の利用者の傾向を踏まえつつ現在の利用者の状況を踏まえて料金を設定可能である利点がある。 Further, the parking space fullness information may include only the current parking space fullness information, the past parking space fullness information only, or both the current and past parking space fullness information. It may include empty information. When the current fullness information is used, there is an advantage that the charge can be changed and set in real time based on the current fullness information. Further, when using the past full / empty information, there is an advantage that the charge can be set by using the tendency of the past users. Further, by using the current and past full / empty information, there is an advantage that the charge can be set based on the current user's situation while taking into account the past user's tendency.
また、駐車スペースの満空情報は、駐車料金が設定される対象となる駐車スペースと同一の駐車領域と設定された駐車領域内の駐車スペースの満空情報のみを含んでもよいし、駐車料金が設定される対象となる駐車スペースと同一の駐車場内の駐車スペースの満空情報のみを含んでもよいし、これらの両方を含んでもよい。同一の駐車領域の満空情報を用いることで、駐車料金が設定される対象となる駐車スペースの周辺との関係で料金を設定可能である利点がある。例えば、駐車料金が設定される対象となる駐車スペースと同一の駐車領域と設定された駐車領域内の駐車スペースの満空情報が所定の閾値よりも低い場合、安価とすることにより、かかる駐車領域への駐車を促進できる可能性がある。この場合、例えば、商業施設に敷設する駐車場において、商業施設から遠い駐車領域又は駐車場の駐車料金を安価とすることにより、かかる遠い駐車領域又は駐車場への駐車を促進できる可能性があり、ひいては、駐車領域又は駐車場内の混雑を低下できる可能性がある利点がある。すなわち、画像利用部は、一の商業施設と関連付けられている駐車領域Aと駐車領域Bにおいて、かかる商業施設の所定の個所と駐車領域A内の所定の個所との距離が、かかる商業施設の所定の個所と駐車領域B内の所定の個所との距離よりも短い場合、かかる駐車領域Aの駐車料金を、駐車領域Bの駐車料金よりも安価に設定可能であってよい。 Further, the fullness information of the parking space may include only the fullness information of the parking space in the same parking area as the parking space for which the parking fee is set and the set parking area, or the parking fee is charged. Only the fullness information of the parking space in the same parking lot as the target parking space to be set may be included, or both of them may be included. By using the fullness information of the same parking area, there is an advantage that the charge can be set in relation to the vicinity of the parking space for which the parking charge is set. For example, if the parking space is the same as the parking space for which the parking fee is set and the fullness information of the parking space in the set parking area is lower than a predetermined threshold value, the parking area can be reduced to such a parking area. It may be possible to promote parking in. In this case, for example, in a parking lot laid in a commercial facility, there is a possibility that parking in the far parking area or parking lot can be promoted by reducing the parking fee of the parking area or parking lot far from the commercial facility. As a result, there is an advantage that the congestion in the parking area or the parking lot can be reduced. That is, in the parking area A and the parking area B associated with one commercial facility, the image utilization unit sets the distance between the predetermined location of the commercial facility and the predetermined location in the parking area A of the commercial facility. When the distance between the predetermined location and the predetermined location in the parking area B is shorter, the parking fee of the parking area A may be set lower than the parking fee of the parking area B.
また、駐車料金は、駐車領域の過去の利用履歴が用いられて、設定されてもよい。駐車スペースAの利用頻度が、Aと異なる駐車スペースBの利用頻度よりも、所定期間において少ない場合、かかる駐車スペースAの駐車料金を、駐車スペースBの駐車料金よりも低く設定することで、駐車スペースAの利用を促進可能である利点がある。 Further, the parking fee may be set by using the past usage history of the parking area. When the frequency of use of the parking space A is less than the frequency of use of the parking space B different from A in a predetermined period, the parking fee of the parking space A is set lower than the parking fee of the parking space B. There is an advantage that the use of space A can be promoted.
なお、上述の駐車料金に代えて、又は、駐車料金に加えて、金銭的価値を設定してもよい。金銭的価値も、上述の駐車料金と同様の種々の要素に基づいて、設定されてよい。なお、金銭的価値の設定は、駐車料金の減額と同様の機能を有してよい。例えば、駐車料金を所定の基準の料金を維持して変更せずに、金銭的価値を設定してよい。この場合、かかる金銭的価値が設定された駐車スペースは、利用者に、利用を促進する機能を有してよい。かかる金銭的価値は、上述の通り、種々の種類のものであってよい。 A monetary value may be set in place of the above-mentioned parking fee or in addition to the parking fee . The monetary value may also be set based on various factors similar to the parking fee described above. The monetary value setting may have the same function as the reduction of the parking fee. For example, the monetary value may be set without changing the parking fee while maintaining a predetermined standard fee. In this case, the parking space in which the monetary value is set may have a function of encouraging the user to use the parking space. Such monetary value may be of various types, as described above.
なお、管理システムは、複数の管理システムから構成されてもよい。例えば、一又は複数の撮像装置と接続されている地方管理システムと、かかる一または複数の管理システムと接続可能な中央管理システムを備えてよい。地方管理システムと中央管理システムは、同一の機能を有していてもよいし、異なる機能を有していてもよい。例えば、地方管理システムは、一の施設管理者が管理する一又は複数の駐車場について管理する画像利用部を有してよい。他方、中央管理システムは、一又は複数の地方管理システムが管理する一又は複数の駐車場を管理する画像利用部を有してよい。 The management system may be composed of a plurality of management systems. For example, a local management system connected to one or more imaging devices and a central management system connectable to such one or more management systems may be provided. The local management system and the central management system may have the same function or may have different functions. For example, a local management system may have an image utilization unit that manages one or more parking lots managed by one facility manager. On the other hand, the central management system may have an image utilization unit that manages one or more parking lots managed by one or more local management systems.
例えば、図11は、かかる地方管理システムと中央管理システムの関係の一例を示すものである。本図において、中央管理システム1101aに対し、地方管理システム1102a及び1103aがネットワークを介して、直接的又は間接的に、接続されている。中央管理システム1101aには、管理者端末1101bが接続されている。地方管理システム1102aには、撮像装置1102c及び1102dが接続され、また、管理者端末1102bが接続されている。地方管理システム1103aについても同様の構成であってもよいし、本図のように、異なってもよい。なお、利用者端末1104a及び1104bが、管理システムと接続可能であって良い。このように、撮像装置の数、管理者端末の数、管理システムの数、中央管理システムの数、地方管理システムの数、及び/又は、利用者端末の数は、一又は複数であってよい。 For example, FIG. 11 shows an example of the relationship between the local management system and the central management system. In this figure, the local management systems 1102a and 1103a are directly or indirectly connected to the central management system 1101a via a network. An administrator terminal 1101b is connected to the central management system 1101a. The image pickup devices 1102c and 1102d are connected to the local management system 1102a, and the administrator terminal 1102b is also connected. The local management system 1103a may have the same configuration, or may be different as shown in this figure. The user terminals 1104a and 1104b may be connectable to the management system. As described above, the number of imaging devices, the number of administrator terminals, the number of management systems, the number of central management systems, the number of local management systems, and / or the number of user terminals may be one or more. ..
2.3.管理者端末内の機能
管理者端末は、管理システムを管理する機能を有する。 2.3. Functions in the administrator terminal The administrator terminal has a function of managing the management system.
管理者端末は、利用者管理部、及び/又は、画像利用部、を管理可能であってよい。例えば、管理者端末は、利用者管理部における情報の確認、修正、など、利用者に関する情報の管理が可能であってよい。例えば、管理者端末は、駐車場において、窃盗、車両の損害、などの事件が生じた場合、画像利用部を介して、窃盗、車両の損害等の事件の究明に必要な情報を取得する機能を有してよい。また、管理者端末は、対応して、かかる事件に責任を負うべき利用者についての情報を取得できる機能を有してよい。 The administrator terminal may be able to manage the user management unit and / or the image utilization unit. For example, the administrator terminal may be able to manage information about the user, such as checking and correcting the information in the user management unit. For example, when an incident such as theft or vehicle damage occurs in a parking lot, the administrator terminal has a function of acquiring information necessary for investigating the incident such as theft or vehicle damage through the image utilization unit. May have. In addition, the administrator terminal may have a function of correspondingly acquiring information about the user who should be responsible for such an incident.
管理者端末は、また、利用者の利用状況を確認し、駐車場の改善をするための統計情報を生成する統計情報部を有してよい。例えば、各駐車スペースの利用について、利用時間帯、利用車両、利用頻度、駐車料金、などの情報を取得し、これらについて統計情報を生成し、表示する機能を有してよい。 The administrator terminal may also have a statistical information unit that confirms the usage status of the user and generates statistical information for improving the parking lot. For example, it may have a function of acquiring information such as usage time zone, usage vehicle, usage frequency, parking fee, etc. for the use of each parking space, and generating and displaying statistical information about these.
また、本例のシステムが、賃借形式である場合、管理者端末は、管理料金に係る情報を生成し、表示可能であってよい。管理料金に係る情報は、本システムの利用に係る料金を含んでよい。また、管理料金に係る情報は、所定の期間における管理料金の合計額を含んでよい。 Further, when the system of this example is in a rented format, the administrator terminal may be able to generate and display information related to the management fee. The information related to the management fee may include the fee related to the use of this system. In addition, the information related to the management fee may include the total amount of the management fee in a predetermined period.
管理者端末は、地方管理システムについて管理可能な地方管理者端末と、中央管理システムについて管理可能な中央管理者端末と、の2種類の管理者端末があってよい。 The administrator terminal may have two types of administrator terminals: a local administrator terminal that can manage the local management system and a central administrator terminal that can manage the central management system.
地方管理者端末は、地方管理システムのみを管理できてよい。中央管理者端末は、中央管理システムのみを管理できてもよいし、地方管理システムのみを管理できてもよいし、中央管理システム及び地方管理システムの両方を管理できてもよい。かかる管理は、管理料金に係る情報の設定、閲覧、を含んでよい。例えば、中央管理者端末は、地方管理システムによる管理料金に係る情報を閲覧可能であって良い。また、中央管理者端末は、各地方管理システムにおいて管理されている情報の閲覧も可能であって良い。例えば、中央管理者端末は、各地方管理システムにおいて、管理されている情報の全て又はその一部を取得可能であってよい。また、かかる管理されている情報を用いて生成された統計情報を生成し、中央管理システムにおいて、閲覧可能であってよい。なお、中央管理者端末は、一部の地方管理システムのみが管理可能であり、他の地方管理システムを管理できないものであってもよい。 The local manager terminal may be able to manage only the local management system. The central administrator terminal may be able to manage only the central management system, may be able to manage only the local management system, or may be able to manage both the central management system and the local management system. Such management may include setting, viewing, and viewing information relating to management fees. For example, the central administrator terminal may be able to browse information related to the management fee by the local management system. In addition, the central administrator terminal may be able to browse the information managed in each local management system. For example, the central administrator terminal may be able to acquire all or a part of the information managed in each local management system. In addition, statistical information generated using such managed information may be generated and can be viewed in a central management system. The central administrator terminal may be able to manage only some local management systems and may not be able to manage other local management systems.
3.実施例
3.1.実施例1
実施例1に係るシステム例は、上述の機能の一部又は全部の機能を用いて、利用者の支払いを容易にするものである。 3. 3. Example
3.1. Example 1
The system example according to the first embodiment uses some or all of the above-mentioned functions to facilitate payment by the user.
実施例1に係るシステム例は、車両が駐車される駐車スペースに、前記車両が到達可能な通路(本願書類において、「駐車通路」ということがある)を撮像視野に含める撮像装置(本願書類において、「駐車通路上撮像装置」ということもある)が設置されているような場面において、使用可能である。ここで、図12は、かかる駐車通路の一例である。 In the system example according to the first embodiment, an imaging device (in the document of the present application) that includes a passage (sometimes referred to as a “parking passage” in the document of the present application) that the vehicle can reach in the parking space in which the vehicle is parked. , Sometimes referred to as "imaging device on parking passage") can be used in situations where it is installed. Here, FIG. 12 is an example of such a parking passage.
駐車通路上撮像装置は、公道から、駐車場へ進入する駐車場の出入口付近(出入口から所定の距離の範囲内)に設置されていてもよいし、出入口付近から一定距離を離れた場所(出入口から所定の距離の範囲外)に設置されていてもよい。後者は、例えば、車道から駐車場へ向かう通路内のいずれかの場所に置かれている場合などが挙げられる。 The image pickup device on the parking passage may be installed near the entrance / exit of the parking lot (within a predetermined distance from the entrance / exit) that enters the parking lot from a public road, or a place (entrance / exit) that is a certain distance away from the vicinity of the entrance / exit. It may be installed outside the range of a predetermined distance from. The latter may be, for example, when it is placed somewhere in the passage from the roadway to the parking lot.
また、駐車通路上撮像装置は、一の駐車場について、一の撮像装置でもよいし、複数の撮像装置が備えられてもよい。例えば、一の駐車場について、複数の駐車通路上撮像装置が設置され、駐車場内のいずれか一の駐車スペースに通じる通路上に、少なくとも一の駐車通路上撮像装置が設置され、かかる駐車場内のいずれか一の駐車スペースに通じる通路を撮像視野に含める一の駐車通路上撮像装置が備えられていてよい。例えば、図13は、このようなケースである。 Further, the image pickup device on the parking aisle may be one image pickup device for one parking lot, or may be provided with a plurality of image pickup devices. For example, for one parking lot, a plurality of image pickup devices on a parking passage are installed, and at least one image pickup device on a parking passage is installed on a passage leading to any one parking space in the parking lot. An imaging device on one parking passage may be provided that includes a passage leading to any one parking space in the imaging field. For example, FIG. 13 shows such a case.
また、一の駐車場の領域が、複数の部分領域に分かれている場合において、駐車通路上撮像装置は、かかる複数の部分領域に至る通路上に設置されている撮像装置であってもよい。例えば、図14は、このようなケースである。 Further, when the area of one parking lot is divided into a plurality of partial areas, the image pickup device on the parking passage may be an image pickup device installed on the passage leading to the plurality of partial areas. For example, FIG. 14 shows such a case.
要するに、駐車通路上撮像装置は、一の駐車場内の全ての駐車スペース、又は、一の駐車場の部分領域内の全ての駐車スペースに、車両が到達可能な通路上に設置されている撮像装置を含んでよい。これにより、一の駐車場内の全ての駐車スペース、又は、一の駐車場の部分領域内の全ての駐車スペース、を利用する全ての車両について、駐車通路上撮像装置によって撮像可能にできる利点がある。 In short, the on-parking passage imaging device is an imaging device installed on a passage where vehicles can reach all parking spaces in one parking lot or all parking spaces in a partial area of one parking lot. May include. This has the advantage that all vehicles that use all the parking spaces in one parking lot or all the parking spaces in a partial area of one parking lot can be imaged by the image pickup device on the parking passage. ..
図15は、駐車通路上撮像装置によって撮像された画像を用いたシステムの一例である。一例のシステムは、管理システム1501を含んでよい。また、管理システム1501は、撮像装置1502a及び1502bと接続されてよい。また、管理システム1501を管理可能な管理者端末1501aと接続可能であってよい。また、利用者端末1503a及び1503bは、管理システムと接続可能であってよい。 FIG. 15 is an example of a system using an image captured by an image pickup device on a parking passage. An example system may include a management system 1501. Further, the management system 1501 may be connected to the image pickup devices 1502a and 1502b. Further, the management system 1501 may be connected to a manageable administrator terminal 1501a. Further, the user terminals 1503a and 1503b may be connectable to the management system.
次に、一例の管理システムが、利用者の駐車行為に対して、支払手段を特定する方法について、図16を参考にして、説明する。 Next, a method in which the management system of one example specifies a payment means for the parking act of the user will be described with reference to FIG.
まず、管理システムは、車両を特定する情報と、支払手段を特定する情報と、の各関係を記録する(ステップ1)。かかる特定は、利用者端末から入力された情報に基づいてもよいし、管理者端末からの入力に基づいてもよい。一又は複数の車両を特定する情報に対し、一又は複数の支払手段を特定する情報が関連付けられて記憶されてよい。なお、かかる情報において、車両を特定する情報は、ナンバープレートを撮像した画像から取得されたものを含んでもよいし、ナンバープレートを撮像した画像そのものを含んでもよいし、画像とは関係なく利用者又は管理者が入力したナンバープレートに係る文字列の情報を含んでもよい。 First, the management system records each relationship between the information that identifies the vehicle and the information that identifies the payment instrument (step 1). Such identification may be based on the information input from the user terminal or may be based on the input from the administrator terminal. Information that identifies one or more payment instruments may be associated and stored with information that identifies one or more vehicles. In the information, the information for identifying the vehicle may include the information obtained from the image obtained by capturing the license plate, the image itself obtained by capturing the license plate, or the user regardless of the image. Alternatively, the information of the character string related to the license plate input by the administrator may be included.
次に、管理システムは、撮像装置によって撮像された画像から、車両を特定する情報を取得する(ステップ2)。なお、管理システムは、駐車代金が開始と終了によって変動する駐車場の場合は、かかる車両を特定する情報を取得した複数の画像を用いて、駐車の開始を示す時間的情報と、駐車の終了を示す時間的情報と、を取得してよい。 Next, the management system acquires information for identifying the vehicle from the image captured by the image pickup device (step 2). In the case of a parking lot where the parking price fluctuates depending on the start and end of the parking lot, the management system uses a plurality of images obtained from the acquired information to identify the vehicle, and uses time information indicating the start of parking and the end of parking. You may acquire the temporal information indicating that.
次に、管理システムは、かかる車両を特定する情報に係る利用者情報を特定して、駐車履歴情報を更新する(ステップ3)。駐車履歴情報の更新は、一の駐車に対する、駐車り履歴情報に追加される情報であってよく、例えば、一の駐車についての、駐車の時間に関する情報、駐車場に関する情報、駐車時に撮像された画像、駐車料金関連情報、などであってよい。 Next, the management system identifies the user information related to the information that identifies the vehicle and updates the parking history information (step 3). The update of the parking history information may be information added to the parking history information for one parking, for example, information on parking time, information on parking lot, and imaged at the time of parking for one parking. It may be an image, parking fee related information, or the like.
次に、管理システムは、利用者履歴情報に基づいて、対象となる支払手段を用いて、請求処理を行う(ステップ4)。なお、管理システムが、駐車の利用行為に対して請求処理を行う場合は、上述のステップ3の履歴情報に追記したり、履歴情報を用いるステップはなくてもよい。 Next, the management system performs billing processing using the target payment means based on the user history information (step 4). When the management system performs billing processing for the parking use act, it is not necessary to add to the history information in step 3 described above or to use the history information.
次に、駐車アプリにおける処理を、利用者の利用態様を含めて、説明する。 Next, the processing in the parking application will be described including the usage mode of the user.
利用者は、利用者端末に、駐車アプリのダウンロード及びインストールを行う(ステップ1)。 The user downloads and installs the parking application on the user terminal (step 1).
利用者は、利用者端末における駐車アプリにおいて、利用者情報を、入力し、駐車アプリはかかる利用者情報を記録し、管理システムにその一部又は全部の利用者情報を送信する(ステップ2)。かかる利用者情報は、利用者の利用する車両を特定する情報と、駐車についての支払手段情報を含む、上述のものであってよい。 The user inputs user information in the parking application on the user terminal, the parking application records such user information, and transmits a part or all of the user information to the management system (step 2). .. Such user information may be the one described above, including information identifying the vehicle used by the user and payment instrument information for parking.
利用者が、利用車両を用いて、一例のシステムが利用する画像を撮像可能な撮像装置が設置された駐車場を利用する場合、かかる駐車場に入場する際に、入場した時刻を示すチケットを取得する必要はなく駐車を行う(ステップ3)。 When a user uses a parking lot equipped with an image pickup device capable of capturing an image used by an example system using a vehicle, when entering the parking lot, a ticket indicating the time of entry is issued. There is no need to acquire it and parking is done (step 3).
利用者は、駐車場から出場する際、その駐車場内で駐車料金を支払うことなく駐車場を出場する(ステップ4)。このように、車両を特定する情報を取得可能な画像を撮像可能な撮像装置が駐車場と関連付けて設置されている場合において、一例のシステムが、かかる撮像装置によって撮像された画像を利用可能な場合、利用者は、駐車場に入場する際の駐車チケットに係る負担や駐車場を出場する際の支払いに係る負担がない利点がある。また、駐車場も、かかる駐車までの混雑を減少できる利点がある。 When leaving the parking lot, the user exits the parking lot without paying the parking fee (step 4). In this way, when an image pickup device capable of capturing an image capable of acquiring information identifying the vehicle is installed in association with the parking lot, one system can use the image captured by the image pickup device. In this case, the user has an advantage that there is no burden related to the parking ticket when entering the parking lot and no burden related to payment when leaving the parking lot. The parking lot also has an advantage that the congestion until such parking can be reduced.
管理システムは、利用車両を撮像した画像から、利用車両を特定する情報を取得し、更にかかる利用車両の駐車行為に対する支払手段を特定し、かかる駐車行為に対する駐車料金をかかる支払手段によって支払するよう関連付ける(ステップ5)。なお、上記のステップ3及び4の時間情報が駐車料金に影響を与える場合、管理システムは、かかる時間情報を用いて、駐車料金を計算してよい。 The management system acquires information for identifying the vehicle to be used from the image of the vehicle to be used, further identifies the means of payment for the parking act of the vehicle to be used, and pays the parking fee for the parking act by the means of payment. Associate (step 5). If the time information in steps 3 and 4 above affects the parking fee, the management system may calculate the parking fee using the time information.
利用者は、駐車行為について、駐車行為後に、駐車アプリを介して入力した支払手段情報を用いて支払う(ステップ6)。なお、一例のシステム自体が支払請求処理が可能であってもよいし、他のシステムと連携して支払請求処理をしてもよい。利用者は、駐車時とは別の機会に支払いが可能となる。また、支払手段を設定できる場合、利用車両の利用の態様に応じて、適切な支払手段から支払うことができる利点がある。 The user pays for the parking act using the payment means information input via the parking application after the parking act (step 6). In addition, the payment request processing may be performed by the example system itself, or the payment request processing may be performed in cooperation with another system. The user can pay at a different time than when parking. Further, when the payment means can be set, there is an advantage that payment can be made from an appropriate payment means according to the mode of use of the vehicle to be used.
なお、上述の流れでは、駐車アプリを用いた例であるが、これに代えて、インターネット上の利用者IDと認証等を用いて、利用者を特定することによるWEB上の頁においても、同様の機能が処理されてよい。 In the above flow, the parking application is used, but instead, the same applies to the page on the WEB by identifying the user by using the user ID and authentication on the Internet. Functions may be processed.
一例の管理システムは、
ナンバープレートを用いて車両を特定する情報と、前記車両の駐車行為に対して支払われる支払手段を特定する情報と、を関連付けて記憶するデータベースと、
第1車両を特定する情報を取得する手段と、
前記第1車両を特定する情報を、前記データベース内で、検索する手段と、
前記第1車両を特定する情報に対応する第1支払手段を特定する情報
を特定する特定手段と、
を含むシステムであってよい。An example management system is
A database that stores information that identifies a vehicle using a license plate and information that identifies a payment method that is paid for parking the vehicle in association with each other.
A means of acquiring information that identifies the first vehicle,
A means for searching the database for information that identifies the first vehicle, and
The specific means for specifying the information for specifying the first payment means corresponding to the information for identifying the first vehicle, and the specific means for specifying the information.
It may be a system including.
車両を特定する情報と、前記車両の駐車行為に対して支払われる支払手段情報と、を関連付けて記憶するデータベースは、車両を特定する情報と、前記車両の駐車行為に対して支払われる支払手段情報と、を関連付けて記憶されているものであればよく、どのような形式であってもよい。データベースを用いる場合においても、どのようなデータベースの技術手法が用いられてもよい。例えば、リレーショナルデータベースや、階層型データベース、ネットワーク型データベース、NoSQLなどが挙げられるが、これらに限られない。また、データベースの数も、一又は複数であって良く、クラウド上の情報処理装置などであってもよい。 The database that stores the information that identifies the vehicle and the payment means information that is paid for the parking action of the vehicle in association with each other is the information that identifies the vehicle and the payment means information that is paid for the parking action of the vehicle. And, as long as they are stored in association with each other, and may be in any format. Even when a database is used, any database technical method may be used. Examples include, but are not limited to, relational databases, hierarchical databases, network databases, and NoSQL. Further, the number of databases may be one or more, and may be an information processing device on the cloud.
また、関連付けの態様についても限定はなく、例えば、一の車両を特定する情報に対し、一又は複数の支払手段情報が関連付けられていてもよい。なお、複数の支払手段情報が関連付けられている場合、特定の車両に対して、複数の支払手段情報が特定されることになりうるが、その複数の支払い手段情報の一が、所定のルール又は利用者によって選択されたことを示す情報などによって特定されることによって、駐車行為に対する料金を支払う手段を特定できる。 Further, the mode of association is not limited, and for example, one or more payment means information may be associated with the information identifying one vehicle. When a plurality of payment method information is associated with each other, a plurality of payment method information may be specified for a specific vehicle, and one of the plurality of payment method information is a predetermined rule or. By identifying by information indicating that the user has selected the parking activity, it is possible to identify the means for paying the fee for the parking act.
なお、一の車両を特定する情報に対して、複数の支払手段情報が関連付けて記憶されることにより、例えば、一の車両を複数の主体が使用する場合において、どの主体が料金を負担するかを選択できる利点がある。例えば、一の車両が、法人や個人事業主などのビジネス又は公的活動としての利用行為と、個人的な利用と、を区別することも可能であるし、一の家族が所有する車両について、利用者によって家族内の使用者に応じた負担とすることも可能であるし、一の車両を、複数の家族の関係者でシェアをするいわゆるカーシェアの場合は、カーシェアシステムと連携した上で、支払い手段情報と関連付けられてよい。 In addition, by storing a plurality of payment means information in association with the information identifying one vehicle, for example, when one vehicle is used by a plurality of entities, which entity bears the charge. There is an advantage that you can choose. For example, it is possible to distinguish between the use of a vehicle as a business or public activity such as a corporation or sole proprietor, and the personal use, and for a vehicle owned by a family. It is possible for the user to bear the burden according to the user in the family, and in the case of so-called car sharing where one vehicle is shared by people related to multiple families, it is linked with the car sharing system. And may be associated with payment instrument information.
また、他の一例の管理システムは、
ナンバープレートを用いて車両を特定する情報と、前記車両の駐車行為に対して支払いを行う支払者又は利用登録をした利用利用者を特定する情報と、を関連付けて記憶するデータベースと、
第1車両を特定する情報を取得する手段と、
前記第1車両を特定する情報を、前記データベース内で、検索する手段と、
前記第1車両を特定する情報に対応する第1支払者又は第1利用利用者を特定する情報
を特定する特定手段と、
を有するシステムであってよい。Another example of a management system is
A database that stores information that identifies a vehicle using a license plate in association with information that identifies a payer who pays for the parking of the vehicle or a user who has registered for use.
A means of acquiring information that identifies the first vehicle,
A means for searching the database for information that identifies the first vehicle, and
A specific means for specifying information that identifies the first payer or the first user corresponding to the information that identifies the first vehicle, and
It may be a system having.
ナンバープレートを用いて車両を特定する情報と、前記車両の駐車行為に対して支払いを行う支払者を特定する情報と、を関連付けて記憶するデータベースは、支払手段を特定する情報に代えて、支払を行う支払者を特定する情報であってよく、他は上述と同様のデータベースであってよい。支払者を特定することにより、支払手段が特定されていない場合においても、駐車行為に対する支払を追求できる利点がある。なお、支払者を特定した後、支払者に対する債務として登録してもよいし、別途のデータベースなどに記載の支払者の支払う支払手段を、特定してもよい。 The database that stores the information that identifies the vehicle using the license plate and the information that identifies the payer who pays for the parking act of the vehicle in association with each other pays instead of the information that identifies the payment method. It may be the information that identifies the payer who performs the above, and the others may be the same database as described above. By identifying the payer, there is an advantage that payment for parking can be pursued even when the payment method is not specified. After specifying the payer, it may be registered as a debt to the payer, or the payment method to be paid by the payer described in a separate database or the like may be specified.
また、ナンバープレートを用いて車両を特定する情報と、前記車両の駐車行為に対して利用登録をした利用利用者を特定する情報と、を関連付けて記憶するデータベースは、支払手段を特定する情報に代えて、利用登録をした利用利用者を特定する情報であってよく、他は上述と同様のデータベースであってよい。利用利用者を特定することにより、支払手段が特定されていない場合においても、駐車行為に対する支払を追求できる利点がある。利用利用者を特定した後、利用利用者に対する債務として登録してもよいし、別途のデータベースなどに記載の支払者の支払う支払手段を、特定してもよい。 In addition, the database that stores the information that identifies the vehicle using the license plate and the information that identifies the user who has registered for the parking of the vehicle in association with each other is the information that identifies the payment method. Instead, it may be information that identifies the user who has registered for use, and other information may be the same database as described above. By identifying the user, there is an advantage that payment for parking can be pursued even when the payment method is not specified. After specifying the user, it may be registered as a debt to the user, or the payment method to be paid by the payer described in a separate database or the like may be specified.
なお、本願書類において、「支払手段」、「利用者」、及び、「支払者」、などの駐車行為に対して支払いを追求可能な情報を、「支払追求可能情報」ということもある。 In the documents of the present application, information capable of pursuing payment for parking activities such as "payment means", "user", and "payer" may be referred to as "payment pursuitable information".
他の一例のシステムは、
ナンバープレートを用いて車両を特定する情報と、前記車両の駐車行為に対して支払追求可能情報を特定する情報と、を関連付けて記憶するデータベースと、
第1車両を特定する情報を取得する手段と、
前記第1車両を特定する情報を、前記データベース内で、検索する手段と、
前記第1車両を特定する情報に対応する支払追求可能情報を特定する情報
を特定する特定手段と、
を有するシステムであってよい。Another example system is
A database that stores information that identifies a vehicle using a license plate and information that identifies information that can be paid for parking of the vehicle in association with each other.
A means of acquiring information that identifies the first vehicle,
A means for searching the database for information that identifies the first vehicle, and
A specific means for specifying information for specifying payment pursuitable information corresponding to the information for identifying the first vehicle, and
It may be a system having.
3.2.実施例2
本システムに係る実施例2は、画像利用部が、満空情報を生成可能な例である。次に図18を用いて、かかる処理を説明する。 3.2. Example 2
The second embodiment related to this system is an example in which the image utilization unit can generate full / empty information. Next, such a process will be described with reference to FIG.
まず、一例のシステムは、一又は複数の撮像装置によって撮像された画像から、満空情報を生成する(ステップ1)。かかる情報は、所定期間毎、車両の出入りのタイミング、など種々のタイミングで生成されてよい。 First, the system of one example generates full sky information from images captured by one or more imaging devices (step 1). Such information may be generated at various timings such as every predetermined period and the timing of entering and exiting the vehicle.
一例のシステムは、かかる満空情報を、利用者が閲覧可能なように提供する(ステップ2)。特に、かかる満空情報と関連付けられる駐車領域に駐車予定の利用車両に係る利用者に提供できてよい。提供する態様は、種々の情報処理装置を利用してよく、例えば、駐車場と関連付けられて設置された表示装置、利用者に係る利用者端末の表示装置、などであってよい。かかる提供のタイミングは、利用者端末からの要求に対応するタイミング、利用車両が対応する駐車領域と所定の関係を有したタイミング、など種々のものであってよい。かかる構成により、利用者は、駐車領域の満空情報を、理解することができる利点がある。 An example system provides such full / empty information so that the user can view it (step 2). In particular, it may be provided to the user related to the vehicle to be parked in the parking area associated with the fullness information. Various information processing devices may be used, for example, a display device installed in association with the parking lot, a display device of a user terminal related to the user, and the like. The timing of such provision may be various, such as a timing corresponding to a request from the user terminal, a timing in which the user vehicle has a predetermined relationship with the corresponding parking area, and the like. With such a configuration, the user has an advantage that he / she can understand the full / empty information of the parking area.
次に、利用者が、満空情報に係る駐車領域内の位置の駐車スペースに駐車する(ステップ3)。 Next, the user parks in the parking space located in the parking area related to the fullness information (step 3).
次に、一例のシステムは、かかる駐車スペースを撮像視野に含む撮像装置によって撮像された画像に基づいて、対応する駐車スペースについて、駐車済みの情報に変更する(ステップ4)。なお、満空情報の一例として、例えば、図21の駐車場に対し、図22のような満空情報が生成されてよい。 Next, the system of the example changes the corresponding parking space to parked information based on the image captured by the imaging device including the parking space in the imaging field of view (step 4). As an example of the full / empty information, for example, the full / empty information as shown in FIG. 22 may be generated for the parking lot of FIG.
3.3.実施例3
実施例3に係るシステムは、画像利用部が、車両を誘導する機能を有する例であり、図19を参考に説明する。 3.3. Example 3
The system according to the third embodiment is an example in which the image utilization unit has a function of guiding the vehicle, and will be described with reference to FIG.
まず、一例のシステムは、一又は複数の撮像装置によって撮像された画像から、満空情報を生成する(ステップ1)。 First, the system of one example generates full sky information from images captured by one or more imaging devices (step 1).
一例のシステムは、満空情報に係る駐車領域の一部又は全部について、空車領域を提示するとともに、その空車領域に移動するのに役立つ情報を、利用者に提供する(ステップ2)。上述のように、利用者に提供する態様は種々のものであってよい。また、一例のシステムは、満空情報に係る駐車領域のうち、全ての空車領域を提供してもよいが、全ての空車領域を提供せず、一部の空車領域を提供してもよい。後者の場合、一例のシステムは、かかる提供の前に、誘導する一又は複数の空車領域を決定してもよい。かかる空車領域の決定は、種々の観点で決定されてよい。例えば、駐車場内の混乱の防止目的で決定されてもよいし、駐車場内の空車率の均一化目的で、決定されてもよいし、利用者の希望実現目的で決定されてもよいし、これらの一部又は全部の目的で、決定してもよい。各目的の具体的な達成手段としては、上述のとおりであってよい。 The system of one example presents an empty car area for a part or all of the parking area related to the fullness information, and provides the user with information useful for moving to the empty car area (step 2). As described above, the mode provided to the user may be various. Further, the system of the example may provide all the vacant vehicle areas among the parking areas related to the full vacancy information, but may not provide all the vacant vehicle areas and may provide some vacant vehicle areas. In the latter case, an example system may determine one or more empty vehicle areas to guide prior to such offer. The determination of such an empty vehicle area may be determined from various viewpoints. For example, it may be determined for the purpose of preventing confusion in the parking lot, for the purpose of equalizing the vacancy rate in the parking lot, for the purpose of realizing the user's wishes, and these. It may be decided for the purpose of a part or all of. The specific means for achieving each purpose may be as described above.
次に、利用車両が、空車領域に近づく(ステップ3)。一例のシステムは、誘導中の利用車両が、空車領域に近づくにつれて、これに対応して、空車領域に移動するのに役立つ情報を、利用者に提供してよい。 Next, the vehicle to be used approaches the empty vehicle area (step 3). An example system may provide the user with information useful to move to the empty vehicle area correspondingly as the vehicle being guided approaches the empty vehicle area.
次に、利用車両が、空車領域において、駐車する(ステップ4)。 Next, the vehicle to be used parks in the empty vehicle area (step 4).
一例のシステムは、駐車された空車領域を、駐車済みに変更する(ステップ5)。ここで、一例のシステムは、一又は複数の撮像装置によって撮像された画像から、かかる情報を取得してよい。 An example system changes a parked empty car area to parked (step 5). Here, an example system may acquire such information from images captured by one or more imaging devices.
3.4.実施例4
実施例4に係るシステムは、画像利用部が、駐車領域について、駐車料金を変化させる例であり、図20を参考にしつつ、説明する。なお、実施例1乃至3は、本願請求項に記載の発明の参考例である。
3.4. Example 4
The system according to the fourth embodiment is an example in which the image utilization unit changes the parking fee for the parking area, and will be described with reference to FIG. Examples 1 to 3 are reference examples of the invention described in the claims of the present application.
まず、一例のシステムは、一の駐車領域について、料金を設定する(ステップ1)。かかる料金は、種々の情報に基づいて、設定されてよい。また、料金が設定される駐車領域は、各駐車スペースについて異なってもよいし、同じでもよい。 First, one example system sets a charge for one parking area (step 1). Such charges may be set based on various information. Further, the parking area where the charge is set may be different or the same for each parking space.
次に、一例のシステムは、かかる駐車料金を、かかる一の駐車領域と関連付けて、利用者に提示する(ステップ2)。利用の態様は種々の手法であってよく、駐車領域に関連付けられたディスプレイに表示してもよいし、利用者端末に表示させてもよい。 Next, the system of the example associates the parking fee with the parking area and presents it to the user (step 2). The mode of use may be various methods, and may be displayed on a display associated with the parking area or displayed on a user terminal.
次に、利用者が、駐車領域の一の駐車スペースに駐車する(ステップ3)。 Next, the user parks in one parking space in the parking area (step 3).
一例のシステムは、かかる現在の駐車行為による満空情報の変化によって、駐車料金を変更するルールを採用している場合においては、かかる満空情報の変化を用いて、新たに駐車料金を設定する(ステップ4)。なお、一例のシステムが、駐車料金を、現在の満空情報の変化によって駐車料金を設定していない場合には、現在の満空情報の変化を用いて、駐車料金を設定しなくてよい。 In the case where the system of one example adopts the rule of changing the parking fee due to the change of the full vacancy information due to the current parking action, the parking fee is newly set by using the change of the full vacancy information. (Step 4). If the system of one example does not set the parking fee due to the change in the current full vacancy information, it is not necessary to set the parking fee by using the change in the current full vacancy information.
第1態様の一実施形態のシステムは、
ナンバープレートを用いて車両を特定する情報と、前記車両の駐車行為に対する支払追求可能情報と、を関連付けて記憶するデータベースと、
第1車両を特定する情報を取得する取得部と、
前記第1車両を特定する情報を、前記データベース内で、検索する検索部と、
前記第1車両を特定する情報に対応する第1支払追求可能情報を特定する特定部と、
を有するシステム。The system of one embodiment of the first aspect is
A database that stores information that identifies a vehicle using a license plate and information that can be paid for parking of the vehicle in association with each other.
An acquisition unit that acquires information that identifies the first vehicle,
A search unit that searches the database for information that identifies the first vehicle, and
A specific unit that specifies the first payment pursuitable information corresponding to the information that identifies the first vehicle, and
System with.
第2態様の一実施形態のシステムは、
前記第1車両を特定する情報は、ナンバープレートを含む画像に対して機械学習済み機能が適用されて、生成された情報を含む、
第1実施形態のシステム。The system of one embodiment of the second aspect is
The information for identifying the first vehicle includes information generated by applying a machine learning function to an image including a license plate.
The system of the first embodiment.
第3態様の一実施形態のシステムは、
前記画像は、駐車場内の複数の駐車スペースを含む、
第1又は2実施形態のシステム。The system of one embodiment of the third aspect is
The image includes a plurality of parking spaces in a parking lot.
The system of the first or second embodiment.
第4態様の一実施形態のシステムは、
前記画像は、駐車場内の複数の駐車スペースを撮像可能な撮像装置によって撮像されたものである、
第1乃至第3実施形態のいずれか一のシステム。The system of one embodiment of the fourth aspect is
The image was taken by an imaging device capable of capturing a plurality of parking spaces in the parking lot.
The system of any one of the first to third embodiments.
第5態様の一実施形態のシステムは、
前記画像を用いて、駐車場内の各駐車スペースについて、駐車の有無を管理する、画像利用部を備える、
第1乃至第4実施形態のいずれか一のシステム。The system of one embodiment of the fifth aspect is
Each parking space in the parking lot is provided with an image utilization unit that manages the presence or absence of parking using the image.
The system of any one of the first to fourth embodiments.
第6態様の一実施形態のシステムは、
前記画像を用いて、駐車場内の各駐車スペースへ移動する車両の軌跡を追跡する、
第1乃至第5実施形態のいずれか一のシステム。The system of one embodiment of the sixth aspect is
Using the image, the trajectory of a vehicle moving to each parking space in the parking lot is tracked.
The system of any one of the first to fifth embodiments.
第7態様の一実施形態のシステムは、
前記画像利用部は、前記駐車の有無を用いて、駐車予定の車両に対して誘導される、少なくとも一つの駐車スペースを特定する、
第1乃至第3実施形態のいずれか一のシステム。The system of one embodiment of the seventh aspect is
The image utilization unit identifies at least one parking space to be guided to the vehicle to be parked by using the presence or absence of parking.
The system of any one of the first to third embodiments.
第8態様の一実施形態のシステムは、
前記画像利用部は、前記各駐車スペースについて、駐車料金を示す情報と関連付けて記憶する、
第1乃至第7実施形態のいずれか一のシステム。The system of one embodiment of the eighth aspect is
The image utilization unit stores each of the parking spaces in association with information indicating a parking fee.
The system of any one of the first to seventh embodiments.
第9態様の一実施形態のシステムは、
前記画像利用部は、第1駐車スペースと関連付けられた第1駐車料金と、前記第1駐車スペースに駐車される車両と同一種類の車両を対象とする前記第1駐車スペースと異なる第2駐車スペースと関連付けられた第2駐車料金と、を異なる料金に設定する、
第1乃至第8実施形態のいずれか一のシステム。The system of one embodiment of the ninth aspect is
The image utilization unit has a first parking fee associated with the first parking space and a second parking space different from the first parking space for vehicles of the same type as the vehicle parked in the first parking space. Set a different fee for the second parking fee associated with,
The system of any one of the first to eighth embodiments.
第10態様の一実施形態のシステムは、
前記画像利用部は、第1駐車スペースと関連付けられた駐車料金を、前記第1駐車スペース以外の駐車スペースの駐車の有無に応じて、変更する、
第1乃至第9実施形態のいずれか一のシステム。The system of one embodiment of the tenth aspect is
The image utilization unit changes the parking fee associated with the first parking space according to whether or not the parking space other than the first parking space is parked.
The system of any one of the first to ninth embodiments.
第11態様の一実施形態のシステムは、
前記第1車両を特定する情報と、前記第1車両の駐車時間と、を関連付けて記憶し、
前記駐車時間は、駐車開始時刻及び駐車終了時刻、又は、駐車継続時間、を含む、
第1乃至第10実施形態のいずれか一のシステム。The system of one embodiment of the eleventh aspect is
The information for identifying the first vehicle and the parking time of the first vehicle are stored in association with each other.
The parking time includes a parking start time and a parking end time, or a parking duration.
The system of any one of the first to tenth embodiments.
第12態様の一実施形態のシステムは、
第2車両を特定する情報を取得する手段と、
前記第2車両を特定する情報と、前記第1車両を特定する情報とを用いて、前記第1車両と前記第2車両が同一の車両であるかを判定し、
前記第1車両と前記第2車両が同一の車両である場合、
前記第2車両に係る駐車料金を用いて、前記第1車両に係る駐車料金を計算する、
第1乃至第11実施形態のいずれか一のシステム。The system of one embodiment of the twelfth aspect is
A means of acquiring information that identifies the second vehicle,
Using the information for identifying the second vehicle and the information for identifying the first vehicle, it is determined whether the first vehicle and the second vehicle are the same vehicle.
When the first vehicle and the second vehicle are the same vehicle,
The parking fee for the first vehicle is calculated using the parking fee for the second vehicle.
The system of any one of the first to eleventh embodiments.
第13態様の一実施形態のシステムは、
前記第1車両を特定する情報を取得する取得部は、
ナンバープレートを含む画像と、かかるナンバープレート内の数字及び文字列と、の関係を機械学習済みの機械学習部を備える、
第1乃至第12実施形態のいずれか一のシステム。The system of one embodiment of the thirteenth aspect is
The acquisition unit that acquires the information that identifies the first vehicle is
A machine learning unit that has machine-learned the relationship between an image including a license plate and numbers and character strings in the license plate is provided.
The system of any one of the first to twelfth embodiments.
第14態様の一実施形態のシステムは、
前記第1支払追求可能情報は、クレジットカード、デビットカード、電子マネー、口座情報、利用者、支払者、に係る情報のいずれか一つを少なくとも含む、
第1乃至第13実施形態のいずれか一のシステム。The system of one embodiment of the fourteenth aspect is
The first payment pursuitable information includes at least one of information relating to a credit card, a debit card, electronic money, account information, a user, and a payer.
The system of any one of the first to thirteenth embodiments.
第15態様の一実施形態の携帯端末装置は、
駐車行為の対象となる車両を特定する情報を取得する取得部と、
前記車両の駐車行為に対する料金の支払手段情報を取得可能な取得部と、
前記車両の駐車行為に対する料金が、前記支払手段情報によって支払われることを示す情報を表示する表示部と、
を有する携帯端末装置。The mobile terminal device of the embodiment of the fifteenth aspect is
The acquisition department that acquires information that identifies the vehicle that is the target of parking,
An acquisition unit that can acquire information on payment means for the parking of the vehicle,
A display unit that displays information indicating that the fee for parking the vehicle is paid by the payment means information.
Mobile terminal device having.
第16態様の一実施形態の携帯端末装置は、
駐車行為の対象となる車両に係るナンバープレートを撮像可能な撮像部と、
前記車両の駐車行為に対する料金の支払手段情報を取得可能な取得部と、
前記車両の駐車行為に対する料金が、前記支払手段情報によって支払われることを示す情報を表示する表示部と、
を有する携帯端末装置。The mobile terminal device of the embodiment of the 16th aspect is
An image pickup unit that can image the license plate of the vehicle subject to parking,
An acquisition unit that can acquire information on payment means for the parking of the vehicle,
A display unit that displays information indicating that the fee for parking the vehicle is paid by the payment means information.
Mobile terminal device having.
第17態様の一実施形態のプログラムは、
コンピュータを、
ナンバープレートを用いて車両を特定する情報と、前記車両の駐車行為に対する支払追求可能情報と、を関連付けて記憶する記憶手段、
第1車両を特定する情報を取得する取得手段、
前記第1車両を特定する情報を、前記データベース内で、検索する検索手段、
前記第1車両を特定する情報に対応する第1支払追求可能情報を特定する特定手段、
として動作させるプログラム。The program of one embodiment of the 17th aspect is
Computer,
A storage means for associating and storing information for identifying a vehicle using a license plate and information for pursuing payment for parking of the vehicle.
Acquisition means for acquiring information that identifies the first vehicle,
A search means for searching the database for information identifying the first vehicle,
A specific means for identifying the first payment pursuitable information corresponding to the information for identifying the first vehicle,
A program that operates as.
第18態様の一実施形態の方法は、
コンピュータが、
ナンバープレートを用いて車両を特定する情報と、前記車両の駐車行為に対する支払追求可能情報と、を関連付けて記憶するステップ、
第1車両を特定する情報を取得するステップ、
前記第1車両を特定する情報を、前記データベース内で、検索するステップ、
前記第1車両を特定する情報に対応する第1支払追求可能情報を特定するステップ、
を実行する方法。The method of one embodiment of the eighteenth aspect is
The computer
A step of associating and storing information for identifying a vehicle using a license plate and information for pursuing payment for parking of the vehicle.
Steps to obtain information that identifies the first vehicle,
A step of searching the database for information identifying the first vehicle,
The step of identifying the first payment pursuitable information corresponding to the information identifying the first vehicle,
How to do.
第19態様の一実施形態のプログラムは、
コンピュータを、第1乃至第14実施形態のいずれか一のシステムとして機能させるためのプログラム。The program of one embodiment of the nineteenth aspect is
A program for operating a computer as a system according to any one of the first to fourteenth embodiments.
4.システムを構成するハードウェア構成
本願発明に係るシステムは、一又は複数の情報処理装置から構成されてよい。本願発明に係る情報処理装置10は、図23のように、バス15、演算装置11、記憶装置12、及び通信装置16を備えてよい。また、一実施態様における情報処理装置10は、入力装置13、表示装置14を備えてよい。また、ネットワーク17と、直接または間接的に接続される。 4. Hardware Configuration of System The system according to the present invention may be composed of one or a plurality of information processing devices. As shown in FIG. 23, the information processing device 10 according to the present invention may include a bus 15, an arithmetic device 11, a storage device 12, and a communication device 16. Further, the information processing device 10 in one embodiment may include an input device 13 and a display device 14. It is also directly or indirectly connected to the network 17.
バス15は、演算装置11、記憶装置12、入力装置13、表示装置14及び通信装置16の間の情報を伝達する機能を有してよい。 The bus 15 may have a function of transmitting information between the arithmetic unit 11, the storage device 12, the input device 13, the display device 14, and the communication device 16.
演算装置11の例としては、例えばプロセッサが挙げられる。これは、CPUであってもよいし、MPUであってもよい。また、一実施態様における演算装置は、グラフィックスプロセッシングユニット、デジタルシグナルプロセッサなどを有してもよい。要するに、演算装置12は、プログラムの命令を実行できる装置であればよい。 An example of the arithmetic unit 11 is a processor. This may be a CPU or an MPU. Further, the arithmetic unit in one embodiment may include a graphics processing unit, a digital signal processor, and the like. In short, the arithmetic unit 12 may be any device capable of executing program instructions.
記憶装置12は、情報を記録する装置である。これは、外部メモリと内部メモリのいずれでもよく、主記憶装置と補助記憶装置のいずれでもよい。また、磁気ディスク(ハードディスク)、光ディスク、磁気テープ、半導体メモリなどでもよい。また、ネットワークを介した記憶装置又は、ネットワークを介したクラウド上の記憶装置を有してもよい。 The storage device 12 is a device that records information. This may be either an external memory or an internal memory, and may be either a main storage device or an auxiliary storage device. Further, a magnetic disk (hard disk), an optical disk, a magnetic tape, a semiconductor memory, or the like may be used. Further, it may have a storage device via a network or a storage device on the cloud via a network.
なお、演算装置に物理的に近い位置で情報を記憶する、レジスタ、L1キャッシュ、L2キャッシュなどは、本ブロック図においては、演算装置11内に含まれる場合もあるが、計算機アーキテクチャのデザインにおいて、情報を記録する装置としては、記憶装置12がこれらを含んでもよい。要するに、演算装置11、記憶装置12及びバス11が協調して、情報処理を実行できるよう構成されていればよい。 In this block diagram, the registers, L1 cache, L2 cache, etc. that store information at a position physically close to the arithmetic unit may be included in the arithmetic unit 11, but in the design of the computer architecture, As a device for recording information, the storage device 12 may include these. In short, the arithmetic unit 11, the storage device 12, and the bus 11 may be configured to cooperate with each other to execute information processing.
記憶装置12は、本願発明に係る処理を実行可能なプログラムの一部又は全部を備えることができる。また、本願発明に係る処理を実行する際に必要なデータを、適宜記録することもできる。また、一実施態様における記憶装置12は、データベースを含んでもよい。 The storage device 12 may include a part or all of a program capable of executing the process according to the present invention. In addition, data necessary for executing the process according to the present invention can be appropriately recorded. The storage device 12 in one embodiment may also include a database.
また、上記は、演算装置11が、記憶装置12に備えられたプログラムに基づいて実行される場合を記載したが、上記のバス15、演算装置11と記憶装置12が組み合わされた形式の一つとして、本願発明に係る情報処理の一部又は全部を、ハードウェア回路自体を変更することができるプログラマブルロジックデバイス又は実行する情報処理が決まっている専用回路で実現されてもよい。 Also, one of the above, the arithmetic unit 11, has been described the case where it is performed based on a provided program in a storage device 12, the above-mentioned bus 15, the arithmetic unit 11 and the storage device 12 are combined format As a result, part or all of the information processing according to the present invention may be realized by a programmable logic device capable of changing the hardware circuit itself or a dedicated circuit in which the information processing to be executed is determined.
入力装置13は、情報を入力するものであるが、他の機能を有してもよい。入力装置14としては、キーボード、マウス、タッチパネル、又はペン型の指示装置などの入力装置が挙げられる。 The input device 13 inputs information, but may have other functions. Examples of the input device 14 include an input device such as a keyboard, a mouse, a touch panel, or a pen-type instruction device.
表示装置14は、情報を表示する機能を有する。例えば、液晶ディスプレイ、プラズマディスプレイ、有機ELディスプレイなどが挙げられるが、要するに、情報を表示できる装置であればよい。また、タッチパネルのように入力装置13を一部に備えてもよい。 The display device 14 has a function of displaying information. For example, a liquid crystal display, a plasma display, an organic EL display, and the like can be mentioned, but in short, any device capable of displaying information may be used. Further, the input device 13 may be partially provided like a touch panel.
ネットワーク17は、通信装置16と共に、情報を伝達する。すなわち、情報処理装置である10の情報を、ネットワーク17を介して他の情報端末(図示しない)に伝達できるようにする機能を有する。通信装置16は、どのような接続形式を用いてもよく、IEEE1394、イーサネット(登録商標)、PCI、SCSI、USB、2G、3G、4G、5Gなどでもよい。ネットワーク17への接続は、有線と無線のいずれでもよい。 The network 17 transmits information together with the communication device 16. That is, it has a function of enabling information of 10 information processing devices to be transmitted to other information terminals (not shown) via the network 17. The communication device 16 may use any connection type, such as IEEE1394, Ethernet (registered trademark), PCI, SCSI, USB, 2G, 3G, 4G, 5G, and the like. The connection to the network 17 may be either wired or wireless.
本願発明に係る情報処理装置は、汎用型であってもよいし、専用型であってもよい。また、当該情報処理装置は、ワークステーション、デスクトップパソコン、ラップトップパソコン、ノートパソコン、PDA、携帯電話、スマートフォンなどでもよい。 The information processing device according to the present invention may be a general-purpose type or a dedicated type. Further, the information processing device may be a workstation, a desktop personal computer, a laptop personal computer, a laptop computer, a PDA, a mobile phone, a smartphone or the like.
本図では、一台の情報処理装置10として説明したが、本願発明に係るシステムは、複数の情報処理装置によって構成されてもよい。当該複数の情報処理装置は、内部的に接続されていてもよいし、外部的に接続されていてもよい。 Although described as one information processing device 10 in this figure, the system according to the present invention may be composed of a plurality of information processing devices. The plurality of information processing devices may be internally connected or may be externally connected.
また、本願発明に係るシステムは、種々の態様の装置形式であってよい。例えば、本願発明に係るシステムは、スタンドアローンであってもよいし、サーバクライアント形式であってもよいし、ピアツーピア形式であってもよいし、クラウド形式であってもよい。本願発明に係るシステムは、スタンドアローンの情報処理装置であってもよいし、サーバクライアント形式の一部又は全部の情報処理装置から構成されてもよいし、ピアツーピア形式の一部又は全部の情報処理装置から構成されてもよいし、クラウド形式の一部又は全部の情報処理装置から構成されてもよい。 Further, the system according to the present invention may be of various types of devices. For example, the system according to the present invention may be a stand-alone system, a server-client system, a peer-to-peer system, or a cloud system. The system according to the present invention may be a stand-alone information processing device, may be composed of a part or all of the information processing device of the server-client type, or may be a part or all of the information processing of the peer-to-peer type. It may be composed of devices, or may be composed of some or all information processing devices in cloud format.
また、本願発明に係るシステムが複数の情報処理装置で構成される場合、各情報処理装置の所有者や管理者は、異なってもよい。 Further, when the system according to the present invention is composed of a plurality of information processing devices, the owner and the manager of each information processing device may be different.
また、情報処理装置10は、物理的な存在であってもよいし、仮想的なものであってもよい。例えば、クラウドコンピューティングを用いて、情報処理装置10を仮想的に実現してもよい。 Further, the information processing device 10 may be a physical existence or a virtual one. For example, the information processing device 10 may be virtually realized by using cloud computing.
上述では、本例のシステムが実施する構成として説明したが、これらは、システム内の一又は複数の情報処理装置が実施する構成であってもよい。また、上述において、携帯可能な情報処理装置として説明されたものは、適宜、設置され、固定化された情報処理装置であってもよい。 In the above description, the configurations implemented by the system of this example have been described, but these may be configurations implemented by one or more information processing devices in the system. Further, the information processing device described above as the portable information processing device may be an information processing device that is appropriately installed and fixed.
本願書類の実施例において述べた発明例は、本願書類で説明されたものに限らず、その技術的思想の範囲内で、種々の例に適用できることはいうまでもない。例えば、本願書類の実施例において、情報処理装置の画面に提示される情報は、他の情報処理装置における画面で表示できるために前記他の情報処理装置に対して送信できるよう、各実施例のシステムが構成されてもよい。また、各種図面内の〇の表示は、各文脈に沿った適宜の値が入ってよく、全て同じであってもよいし、異なってもよい。 It goes without saying that the invention examples described in the examples of the documents of the present application are not limited to those described in the documents of the present application, and can be applied to various examples within the scope of the technical idea. For example, in the embodiment of the document of the present application, the information presented on the screen of the information processing device can be displayed on the screen of the other information processing device, so that the information can be transmitted to the other information processing device. The system may be configured. In addition, the indication of ◯ in various drawings may contain appropriate values according to each context, and may be the same or different.
また、本願書類で説明される処理及び手順は、実施形態において明示的に説明されたものによってのみならず、ソフトウェア、ハードウェア又はこれらの組み合わせによっても実現可能なものであってよい。また、本願書類で説明される処理及び手順は、それらの処理・手順をコンピュータプログラムとして実装し、各種のコンピュータに実行させることが可能であってよい。またこれらのコンピュータプログラムは、記憶媒体に記憶されてよい。また、これらのプログラムは、非一過性又は一時的な記憶媒体に記憶されてよい。 In addition, the processes and procedures described in the documents of the present application may be feasible not only by those explicitly described in the embodiments, but also by software, hardware or a combination thereof. Further, the processes and procedures described in the documents of the present application may be able to be implemented by various computers by implementing the processes and procedures as a computer program. Further, these computer programs may be stored in a storage medium. Also, these programs may be stored on a non-transient or temporary storage medium.
10 情報処理装置
11 演算装置
12 記憶装置
13 入力装置
14 表示装置
15 バス
16 通信装置
71 表示画面
72 ナンバープレート
73 外枠を示す線
81 駐車可能領域
82 現在の位置
1101a 中央管理システム
1101b 管理者端末
1102a 1103a 地方管理システム
1102b 1103b、1103c 管理者端末
1102c 1102d 1103c 1103d 1103e 撮像装置
1104a 1104b 利用者端末
02 駐車スペース
03 撮像装置
04 撮像視野
03A 03B 出入口
04A 04B 撮像装置
05A 05B 撮像視野
01 02A 02B 通路
1501 管理システム
1501a 管理者端末
1502a 1502b 撮像装置
1503a 1503b 利用者端末10 Information processing device 11 Computing device 12 Storage device 13 Input device 14 Display device 15 Bus 16 Communication device 71 Display screen 72 Number plate 73 Line indicating outer frame 81 Parkable area 82 Current position 1101a Central management system 1101b Administrator terminal 1102a 1103a Local management system 1102b 1103b 1103c Administrator terminal 1102c 1102d 1103c 1103d 1103e Imaging device 1104a 1104b User terminal 02 Parking space 03 Imaging device 04 Imaging field 03A 03B Entrance / exit 04A 04B Imaging device 05A 01 1501a Administrator terminal 1502a 1502b Imaging device 1503a 1503b User terminal
Claims (9)
一又は複数の前記画像内の複数の駐車スペースを含む第1領域についての満空情報に基づいて、前記第1領域内の第1駐車スペースの料金を設定する料金設定部と、
を備えるシステムであって、
前記料金設定部は、一又は複数の前記画像内の前記第1領域と異なる、複数の駐車スペースを含む第2領域についての満空情報に基づいて、前記第2領域内の第2駐車スペースの料金を、前記第1駐車スペースの料金とは異なる料金に設定する、
システム。 An image acquisition unit that acquires an image from the one or more image pickup devices, in which one or more image pickup devices each have a plurality of parking spaces related to one commercial facility as an image pickup field of view.
A charge setting unit that sets a charge for the first parking space in the first area based on the availability information for the first area including a plurality of parking spaces in the image.
It is a system equipped with
The charge setting unit of the second parking space in the second area is based on the fullness information about the second area including the plurality of parking spaces, which is different from the first area in the one or more images. The charge is set to a charge different from the charge of the first parking space.
system.
請求項1に記載のシステム。 When the charge for the first parking space related to the one commercial facility is the first charge at the first predetermined time, the charge setting unit performs the first predetermined time at a second predetermined time different from the first predetermined time. The charge for one parking space is set to a second charge different from the first charge based on the fullness information for the first area .
The system according to claim 1.
を更に備え、
前記金銭的価値は、前記駐車スペースに係る前記一の商業施設内で利用可能な金銭的価値を含む、
請求項1又は2のいずれか1項に記載のシステム。 A monetary value setting unit that sets a monetary value for parking in the first parking space in the plurality of parking spaces based on the fullness information for the first area .
With more
The monetary value includes the monetary value available in the one commercial facility pertaining to the parking space.
The system according to any one of claims 1 or 2.
前記複数の駐車スペースを含む前記第1領域及び前記複数の駐車スペースを含む前記第2領域についての満空情報が、いずれも、混雑度である場合、前記第1領域に係る満空情報が、前記第2領域に係る満空情報よりも高い場合、前記第1駐車スペースの料金を、前記第2駐車スペースの料金よりも、高い料金に設定し、
前記複数の駐車スペースを含む前記第1領域及び前記複数の駐車スペースを含む前記第2領域についての満空情報が、いずれも、空車率である場合、前記第1領域に係る満空情報が、前記第2領域に係る満空情報よりも高い場合、前記第1駐車スペースの料金を、前記第2駐車スペースの料金よりも、低い料金に設定する、
請求項1乃至3のいずれか1項に記載のシステム。 The charge setting unit
Full sky information about the second area including the first area and the plurality of parking spaces comprises a plurality of parking spaces, both when it is congestion degree, full air information according to the first region If the information is higher than the full / empty information related to the second area, the charge for the first parking space is set to be higher than the charge for the second parking space.
Full sky information about the second area including the first area and the plurality of parking spaces comprises a plurality of parking spaces, both when it is unladen rate, is fully empty information according to the first region If the information is higher than the full / empty information related to the second area, the charge for the first parking space is set to be lower than the charge for the second parking space.
The system according to any one of claims 1 to 3.
請求項1乃至4のいずれか1項に記載のシステム。 The vacancy information is based on a number generated by multiplying the number of vehicles specified in the parking area including the plurality of parking spaces by a predetermined correction coefficient.
The system according to any one of claims 1 to 4.
請求項1乃至5のいずれか1項に記載のシステム。 The fullness information is based on an association between a parking space and a vehicle in the parking area including the plurality of parking spaces in the order of proximity to the imaging device including the parking area in the imaging range.
The system according to any one of claims 1 to 5.
一又は複数の撮像装置が各々一の商業施設に係る複数の駐車スペースを撮像視野とする、前記一又は複数の撮像装置から、画像を取得する画像取得手段、
一又は複数の前記画像内の複数の駐車スペースを含む第1領域についての満空情報に基づいて、前記第1領域内の第1駐車スペースの料金を設定する料金設定手段、
として機能させるためのプログラムであって、
前記料金設定手段は、一又は複数の前記画像内の前記第1領域と異なる、複数の駐車スペースを含む第2領域についての満空情報に基づいて、前記第2領域内の第2駐車スペースの料金を、前記第1駐車スペースの料金とは異なる料金に設定する、
プログラム。 The computers that make up the system
An image acquisition means for acquiring an image from the one or more image pickup devices, wherein each one or more image pickup devices has a plurality of parking spaces related to one commercial facility as an image pickup field.
A charge setting means for setting a charge for a first parking space in the first area based on fullness information about a first area including a plurality of parking spaces in the image.
It is a program to function as
The charge setting means of the second parking space in the second area is based on the fullness information about the second area including the plurality of parking spaces, which is different from the first area in the one or more images. The charge is set to a charge different from the charge of the first parking space.
program.
前記システムに係る料金設定部が、一又は複数の前記画像内の複数の駐車スペースを含む第1領域についての満空情報に基づいて、前記第1領域内の第1駐車スペースの料金を設定する料金設定ステップ、
を実行する方法であって、
前記料金設定ステップは、一又は複数の前記画像内の前記第1領域と異なる、複数の駐車スペースを含む第2領域についての満空情報に基づいて、前記第2領域内の第2駐車スペースの料金を、前記第1駐車スペースの料金とは異なる料金に設定する、
方法。 Image acquiring section according to the system, and the imaging field of view several parking spaces according to each one commercial establishment one or more imaging devices, from the one or more imaging devices, an image acquisition step of acquiring an image,
The charge setting unit related to the system sets the charge of the first parking space in the first area based on the fullness information about the first area including the plurality of parking spaces in the image. Pricing step,
Is a way to do
The rate setting step is based on the availability information of the second area including the plurality of parking spaces, which is different from the first area in the one or more images, and is based on the availability information of the second parking space in the second area. The charge is set to a charge different from the charge of the first parking space.
Method.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020184251A JP6843362B1 (en) | 2020-05-29 | 2020-11-04 | Information processing system, information processing device, terminal device, server device, program, or method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2020/021354 WO2021240785A1 (en) | 2020-05-29 | 2020-05-29 | Information processing system, information processing device, terminal device, server device, program, or method |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020184251A Division JP6843362B1 (en) | 2020-05-29 | 2020-11-04 | Information processing system, information processing device, terminal device, server device, program, or method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6796301B1 true JP6796301B1 (en) | 2020-12-09 |
JPWO2021240785A1 JPWO2021240785A1 (en) | 2021-12-02 |
Family
ID=73646772
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020529647A Active JP6796301B1 (en) | 2020-05-29 | 2020-05-29 | Information processing system, information processing device, terminal device, server device, program, or method |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP6796301B1 (en) |
KR (1) | KR20220156939A (en) |
WO (1) | WO2021240785A1 (en) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001256521A (en) * | 2000-03-10 | 2001-09-21 | Toshiba Corp | Managing method and device for charge of parking lot |
JP2002288698A (en) * | 2001-03-27 | 2002-10-04 | Oki Electric Ind Co Ltd | Setting system for parking fee |
JP2003058925A (en) * | 2001-08-17 | 2003-02-28 | Toshiba Corp | Parking lot management system |
JP2005135070A (en) * | 2003-10-29 | 2005-05-26 | Fuji Photo Film Co Ltd | System and device for information distribution, detecting device, and information communication terminal |
JP2016045806A (en) * | 2014-08-25 | 2016-04-04 | 日本信号株式会社 | Parking lot reservation system |
US20160171785A1 (en) * | 2014-12-16 | 2016-06-16 | International Business Machines Corporation | Dynamically managing parking space utilization |
JP2018142834A (en) * | 2017-02-27 | 2018-09-13 | パナソニックIpマネジメント株式会社 | Monitor camera system and monitoring method |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06223299A (en) | 1993-01-27 | 1994-08-12 | Fuji Xerox Co Ltd | Parking lot management device |
US9064417B2 (en) | 2012-12-21 | 2015-06-23 | Palo Alto Research Center Incorporated | Computer-implemented system and method for directing users to available parking spaces |
JP6293633B2 (en) | 2014-10-03 | 2018-03-14 | 株式会社ゼンリンデータコム | Parking lot decision support device and computer program |
-
2020
- 2020-05-29 JP JP2020529647A patent/JP6796301B1/en active Active
- 2020-05-29 KR KR1020227036913A patent/KR20220156939A/en active IP Right Grant
- 2020-05-29 WO PCT/JP2020/021354 patent/WO2021240785A1/en active Application Filing
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001256521A (en) * | 2000-03-10 | 2001-09-21 | Toshiba Corp | Managing method and device for charge of parking lot |
JP2002288698A (en) * | 2001-03-27 | 2002-10-04 | Oki Electric Ind Co Ltd | Setting system for parking fee |
JP2003058925A (en) * | 2001-08-17 | 2003-02-28 | Toshiba Corp | Parking lot management system |
JP2005135070A (en) * | 2003-10-29 | 2005-05-26 | Fuji Photo Film Co Ltd | System and device for information distribution, detecting device, and information communication terminal |
JP2016045806A (en) * | 2014-08-25 | 2016-04-04 | 日本信号株式会社 | Parking lot reservation system |
US20160171785A1 (en) * | 2014-12-16 | 2016-06-16 | International Business Machines Corporation | Dynamically managing parking space utilization |
JP2018142834A (en) * | 2017-02-27 | 2018-09-13 | パナソニックIpマネジメント株式会社 | Monitor camera system and monitoring method |
Also Published As
Publication number | Publication date |
---|---|
KR20220156939A (en) | 2022-11-28 |
JPWO2021240785A1 (en) | 2021-12-02 |
WO2021240785A1 (en) | 2021-12-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210279451A1 (en) | Tracking the Use of at Least One Destination Location | |
US9460623B2 (en) | Parking management | |
US20190050634A1 (en) | Tolling with vehicle tracking | |
US11295312B1 (en) | System and method for accumulation and maintenance of money in a vehicle maintenance savings account | |
CN108256904B (en) | Rental vehicle operation management system | |
US20090018902A1 (en) | Commuter credits system and method | |
Dodge et al. | The automatic management of drivers and driving spaces | |
US20120330696A1 (en) | Car Sharing | |
JP6875078B2 (en) | Information processing system, information processing device, information processing method, and program | |
US20070094069A1 (en) | Method and system for charging a vehicle for parking | |
CN105849750A (en) | Apparatus and method for managing access to a resource | |
US11227496B1 (en) | Parking lot use monitoring for small businesses | |
CN104981377A (en) | Controlling use of a single multi-vehicle parking space using multiple cameras | |
CN107111940B (en) | Traffic violation management system and traffic violation management method | |
JP6928339B2 (en) | Facility management equipment, facility management methods, programs, and facility management systems | |
CN114446056A (en) | Vehicle information code generation and vehicle passing control method, device and equipment | |
JP6235799B2 (en) | Parking lot management system | |
CN107004352B (en) | Traffic violation management system and traffic violation management method | |
US20220261924A1 (en) | Systems and methods for managing insurance premiums based upon peer-to-peer property sharing | |
JP6843362B1 (en) | Information processing system, information processing device, terminal device, server device, program, or method | |
KR100737921B1 (en) | Management method of a parking place using a system for recognition of a number plate | |
Caroles et al. | Concept of an intelligent parking system; efforts to resolve traffic conflicts regulations | |
JP6796301B1 (en) | Information processing system, information processing device, terminal device, server device, program, or method | |
JP2001076194A (en) | Accounting system for parking lot | |
CN114387816B (en) | Mall traffic guiding system and method based on consumer behavior prediction analysis |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200529 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20200529 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200623 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200714 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200812 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200825 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200918 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201006 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201104 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6796301 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |