JP7265404B2 - Information processing device and information processing method - Google Patents
Information processing device and information processing method Download PDFInfo
- Publication number
- JP7265404B2 JP7265404B2 JP2019081257A JP2019081257A JP7265404B2 JP 7265404 B2 JP7265404 B2 JP 7265404B2 JP 2019081257 A JP2019081257 A JP 2019081257A JP 2019081257 A JP2019081257 A JP 2019081257A JP 7265404 B2 JP7265404 B2 JP 7265404B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- person
- presentation
- input
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 65
- 238000003672 processing method Methods 0.000 title claims description 3
- 238000004891 communication Methods 0.000 claims description 65
- 230000033001 locomotion Effects 0.000 claims description 7
- 238000000034 method Methods 0.000 description 32
- 230000008569 process Effects 0.000 description 30
- 238000010586 diagram Methods 0.000 description 20
- 238000012545 processing Methods 0.000 description 18
- 238000001514 detection method Methods 0.000 description 11
- 238000012544 monitoring process Methods 0.000 description 11
- 238000012986 modification Methods 0.000 description 6
- 230000004048 modification Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 239000000470 constituent Substances 0.000 description 3
- 240000004050 Pentaglottis sempervirens Species 0.000 description 2
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000032683 aging Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000035559 beat frequency Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000003930 cognitive ability Effects 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000008450 motivation Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000001429 visible spectrum Methods 0.000 description 1
Images
Landscapes
- Traffic Control Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本開示は、車両を制御する技術に関するものである。 The present disclosure relates to technology for controlling a vehicle.
特許文献１には、無人自動走行が可能で、かつ乗車を可能とする自動走行カートが開示されている。具体的には、特許文献１には、手動走行と自動走行との切り替えを指示する切替レバーを備え、切替レバーが自動側に倒されると、自動走行を開始する技術が開示されている。 Patent Literature 1 discloses an automatically traveling cart capable of unmanned automatic traveling and allowing boarding. Specifically, Patent Literature 1 discloses a technique in which a switching lever for instructing switching between manual driving and automatic driving is provided, and automatic driving is started when the switching lever is pushed to the automatic side.
しかし、特許文献１では、自動走行する車両を不特定のユーザが利用することが難しい場合がある。例えば、特許文献１では、カートの利用者という特定人がユーザとして想定されているため、切替レバーの操作がユーザの乗車完了を意味する。そのため、不特定人がユーザである場合、車両を利用するユーザが乗車完了したか否かを切替レバーの操作で判定することは難しい。これは、ユーザを取り残したり、又は乗車途中で車両が発車したりすることを引き起こすおそれがある。特許文献１は、この点で改善の必要がある。 However, in Patent Literature 1, it may be difficult for an unspecified user to use the automatically traveling vehicle. For example, in Patent Literature 1, a specific person who uses a cart is assumed as a user, so operation of the switching lever means completion of boarding by the user. Therefore, when the user is an unspecified person, it is difficult to determine whether or not the user who uses the vehicle has completed boarding by operating the switching lever. This can cause the user to be left behind or the vehicle to start in the middle of the ride. Patent Document 1 needs improvement in this respect.
本開示は、上記の課題を解決するためになされたものであり、その目的は、自動運転車両に乗車しようとする不特定のユーザの取り残しの抑制又は当該ユーザの乗車の安全性を向上させる技術を提供することである。 The present disclosure has been made to solve the above problems, and the purpose thereof is to suppress unspecified users who are going to get on an automatic driving vehicle or to improve the safety of the user's boarding. is to provide
本開示の一態様に係る情報処理装置は、車両の外の物体をセンシングする第１センサから第１センシングデータを取得する第１取得部と、
前記第１センシングデータに基づいて提示情報を生成し、前記車両内に存在する提示装置に前記提示情報を提示させる提示制御部と、
前記車両内に存在する入力装置を介して前記提示情報の提示に対する入力データを取得する第２取得部と、
前記第２取得部が取得した前記入力データに応じて、前記車両への人の乗車を制御する乗車制御部と、を備える。
An information processing apparatus according to an aspect of the present disclosure includes a first acquisition unit that acquires first sensing data from a first sensor that senses an object outside a vehicle;
a presentation control unit that generates presentation information based on the first sensing data and causes a presentation device present in the vehicle to present the presentation information;
a second acquisition unit that acquires input data for presentation of the presentation information via an input device present in the vehicle;
and a boarding control unit that controls boarding of a person to the vehicle according to the input data acquired by the second acquisition unit.
本開示によれば、自動運転車両に乗車しようとする不特定のユーザの取り残し又は当該ユーザの乗車の安全性を向上させることができる。 Advantageous Effects of Invention According to the present disclosure, it is possible to improve the safety of leaving an unspecified user who is going to get on an automatic driving vehicle or getting on by the user.
（本開示に至る経緯）
近年、（ＡＩ：ａｒｔｉｆｉｃｉａｌ ｉｎｔｅｌｌｉｇｅｎｃｅ）技術の発展に伴い、ドライバーレスの自動運転車を利用したライドシェアサービスの研究が進められている。このようなライドシェアサービスの一形態として路線バスの運行がある。路線バスを自動運行させた場合、人間であるドライバーが従来行っていた様々な業務をコンピュータが行うことになるが、これらの業務をコンピュータに担わせることは容易ではない。
(Background leading up to this disclosure)
In recent years, with the development of (AI: artificial intelligence) technology, research on ride-sharing services using driverless self-driving cars is underway. As one form of such ride-sharing service, there is a route bus service. If a route bus is operated automatically, computers will perform various tasks that were conventionally performed by human drivers, but it is not easy to make computers handle these tasks.
例えば、路線バスではバス停があり、バス停には路線の異なる複数の路線バスが往来するため、ドライバーはバス停にいる人物がこのバスに乗車しようとしている人物であるか、このバスに乗車しようとしていない人物であるかを判断する。そして、この人物がこのバスに乗車しようとしている人物であると判断した場合、ドライバーは、この人物を取り残すことなく安全にバスに乗車させるために、この人物が完全にバスに乗車するのを待った後、バスの走行を開始させる。 For example, a route bus has a bus stop, and multiple buses with different routes come and go at the bus stop. determine if it is a person. Then, if the driver determined that this person was the person who was about to board the bus, the driver waited until the person was completely on the bus in order to allow the person to safely board the bus without being left behind. Then start running the bus.
また、バス停では発車時刻間際になってバスに駆け寄ってくる人物もいるため、ドライバーはバスの周囲で歩行する人物がいる場合、この人物がこのバスに乗ろうとしている人物であるか否かも見極め、バスの走行を開始させる。 Also, at the bus stop, there are people who run up to the bus just before the departure time, so if there is a person walking around the bus, the driver can also determine whether this person is the person who is going to get on the bus. , start the bus.
このように、バス停において、乗客を取り残すことなく安全に乗車させるためには、ドライバーは、バスの周囲にいる人物の行動、表情、及び位置といったバスの周囲の様々な状況を総合的に判断して、バスの走行を開始する。しかし、このような総合的な判断を、コンピュータが行うのは技術的に困難であり、路線バスを完全自動化するには困難が多い。 In this way, at a bus stop, in order to let passengers get on safely without being left behind, the driver must comprehensively judge various situations around the bus, such as the behavior, facial expressions, and positions of people around the bus. to start running the bus. However, it is technically difficult for a computer to make such a comprehensive judgment, and there are many difficulties in fully automating a route bus.
上述の特許文献１は、ゴルフ場で使用されるカートに関する技術であり、このようなカートでは、顔見知りである特定の人物がカートに乗車した後に、乗車しているある人物が走行開始をカートに指示すると自動運転が開始される。したがって、特許文献１は、顔見知りでない不特定の人物が発車間際になってカートに駆け寄ってくるような場面が想定できず、上述のような課題は生じない。 The above-mentioned Patent Document 1 is a technology related to a cart used at a golf course. When instructed, automatic operation starts. Therefore, in Patent Literature 1, it is not possible to assume a scene in which an unspecified person who is not acquainted runs up to the cart just before departure, and the problem described above does not occur.
そこで、本発明者は、このような判断をコンピュータのみに行わせるのではなく路線バスの乗客の協力を得ることで、自動運転車両に乗車しようとする不特定のユーザの取り残し又は乗車の安全性を向上させることができるとの着想を得て本開示をするに至った。 Therefore, the inventors of the present invention obtained the cooperation of the passengers of the route bus instead of letting the computer make such a judgment alone, so that unspecified users who are going to get on the automatic driving vehicle may be left behind or boarding safety. The present disclosure was made based on the idea that it is possible to improve the
本開示の一態様に係る情報処理装置は、車両の外の物体をセンシングする第１センサから第１センシングデータを取得する第１取得部と、
前記第１センシングデータに基づいて提示情報を生成し、前記車両内に存在する提示装置に前記提示情報を提示させる提示制御部と、
前記車両内に存在する入力装置を介して前記提示情報の提示に対する入力データを取得する第２取得部と、
前記第２取得部が取得した前記入力データに応じて、前記車両への人の乗車を制御する乗車制御部と、を備える。
An information processing apparatus according to an aspect of the present disclosure includes a first acquisition unit that acquires first sensing data from a first sensor that senses an object outside a vehicle;
a presentation control unit that generates presentation information based on the first sensing data and causes a presentation device present in the vehicle to present the presentation information;
a second acquisition unit that acquires input data for presentation of the presentation information via an input device present in the vehicle;
and a boarding control unit that controls boarding of a person to the vehicle according to the input data acquired by the second acquisition unit.
本構成によれば、センサにより得られた車外の物体をセンシングした第１センシングデータを用いて提示情報が提示され、提示情報に対する入力が取得され、その入力に応じて車両の乗車が制御される。これにより、例えば、車両に乗車しようとする人の有無の判断結果を車内の人に入力させ、入力された内容に応じて車両に乗車しようとする人の車両への乗車を制御することが可能となる。したがって、本構成は、車両に乗車しようとしている人の有無の判断処理について車内の人の判断を利用することができ、車両に乗車しようとする不特定の人の取り残し又は乗車の安全性を向上させることができる。 According to this configuration, the presentation information is presented using the first sensing data obtained by sensing the object outside the vehicle obtained by the sensor, an input for the presentation information is acquired, and boarding of the vehicle is controlled according to the input. . As a result, for example, it is possible to have people in the vehicle enter the judgment result of whether or not there is a person who is going to board the vehicle, and to control the boarding of the person who is going to board the vehicle according to the input content. becomes. Therefore, this configuration can use the judgment of the people in the vehicle for the judgment processing of the presence or absence of people who are going to get on the vehicle, and improves the safety of leaving unspecified people who are going to get on the vehicle or getting on. can be made
上記態様において、前記提示情報は、画像を含み、
前記入力データは、操作画像に対する操作を示す操作データを含み、
前記提示制御部は、前記操作画像を生成してもよい。
In the above aspect, the presentation information includes an image,
the input data includes operation data indicating an operation on the operation image;
The presentation control unit may generate the operation image.
本構成によれば、提示情報において、車両の外の物体を示す画像を含ませることができので、車内の人はその画像を見ながら車両に乗車しようとしている人の有無を適切に判断し、その判断結果を操作画像を用いて容易に入力することができる。 According to this configuration, since the presentation information can include an image showing an object outside the vehicle, a person inside the vehicle can appropriately determine whether or not a person is about to board the vehicle while viewing the image, The determination result can be easily input using the operation image.
上記態様において、前記操作画像は、前記車両の乗車口のドアの操作のための画像を含み、
前記乗車制御部は、前記操作データが示す操作に応じてドアを制御させてもよい。
In the above aspect, the operation image includes an image for operating the entrance door of the vehicle,
The boarding control unit may control the door according to the operation indicated by the operation data.
本構成によれば、車両の乗車口のドアを操作するための操作画像を提示できるため、車内の人の操作で直接的に物理的な乗車の制御を行うことができる。例えば、車内の人は、車両に乗車しようとしている人が居ると判断した場合、ドアを閉めない操作を入力することにより、当該人を取り残すことなく安全に乗車させることができる。一方、車内の人は、車両に乗車しようとしている人が居ないと判断した場合、ドアを閉める操作を入力することで、車両を速やかに走行させることができる。 According to this configuration, since it is possible to present an operation image for operating the door of the entrance of the vehicle, it is possible to perform physical boarding control directly by the operation of the person in the vehicle. For example, when a person inside the vehicle determines that there is a person trying to get into the vehicle, the person can enter the vehicle safely without being left behind by inputting an operation not to close the door. On the other hand, when the person in the vehicle determines that there is no one trying to get into the vehicle, the vehicle can be made to run quickly by inputting an operation to close the door.
上記態様において、前記操作画像は、前記車両に乗車しようとする人がいるか否かを選択するための画像を含み、
前記乗車制御部は、前記操作データが示す操作に応じて前記車両の乗車口のドアを制御させてもよい。
In the above aspect, the operation image includes an image for selecting whether or not there is a person trying to get into the vehicle,
The boarding control unit may control a boarding door of the vehicle according to the operation indicated by the operation data.
本構成によれば、車両に乗車しようとする人の有無を選択するための操作画像が表示されるため、車内の人の操作で間接的に物理的な乗車の制御を行うことができる。これにより、車内の人は心理的に乗車させない判断をしにくくなり、ドアの開閉操作の場合よりも乗車しようとしている人を乗車させやすくすることができる。そのため、乗車しようとする人の取り残しを抑制することができる。 According to this configuration, since the operation image for selecting the presence or absence of a person who is going to get into the vehicle is displayed, it is possible to indirectly physically control boarding by the operation of the person inside the vehicle. This makes it difficult for people in the car to psychologically decide not to let them get in, and makes it easier for people who are going to get in to get in than in the case of opening and closing the door. Therefore, it is possible to prevent people who are going to get on the train from being left behind.
上記態様において、前記提示情報は、画像に映る人を強調する画像を含んでもよい。 In the above aspect, the presentation information may include an image that emphasizes a person appearing in the image.
本構成によれば、提示情報には画像に写る人が強調表示された画像が含まれるため、車内の人に、車両に乗車しようとする人の有無の判断を容易に行わせることができる。その結果、誤判断が抑制され、車両に乗車しようとする人の取り残しの抑制と安全確保ができる。 According to this configuration, since the presentation information includes an image in which the person in the image is highlighted, it is possible to allow the person in the vehicle to easily judge whether or not there is a person who is going to get on the vehicle. As a result, erroneous judgments are suppressed, and it is possible to suppress people who are going to get on the vehicle from being left behind and to ensure safety.
上記態様において、前記提示情報は、画像に映る人の動きを示す画像を含んでもよい。 In the above aspect, the presentation information may include an image showing movement of a person appearing in the image.
本構成によれば、提示情報には、画像に写る人の動きを示す画像が含まれるため、例えば車内の人に、車両に駆け寄ってくる人の有無を正確に判断させることができる。その結果、誤判断が抑制され、車両に乗車しようとする人の取り残しの抑制と安全確保ができる。 According to this configuration, since the presentation information includes an image showing the movement of the person in the image, for example, it is possible for the person in the vehicle to accurately determine whether or not there is a person running up to the vehicle. As a result, erroneous judgments are suppressed, and it is possible to suppress people who are going to get on the vehicle from being left behind and to ensure safety.
上記態様において、前記第１取得部はさらに、前記車両に取り付けられた前記車両内をセンシングする第２センサから第２センシングデータを取得し、
前記第２センシングデータを用いて前記車両内の人を特定する特定部を更に備え、
前記提示制御部は、特定された前記人に前記提示情報を提示させてもよい。
In the above aspect, the first acquisition unit further acquires second sensing data from a second sensor attached to the vehicle that senses the inside of the vehicle,
further comprising an identification unit that identifies a person in the vehicle using the second sensing data;
The presentation control unit may cause the specified person to present the presentation information.
本構成によれば、車両内に取り付けられたセンサが取得した第２センシングデータを用いて車両内の特定の人が特定され、特定された人に車両に乗車しようとする人の有無を判断させることができる。そのため、例えば、入力装置の近くに位置する人、判断について信頼のおけそうな人、及び車両に乗車しようとしている人を目視しやすい位置に乗車している人等の前記判断を利用することができ、前記判断の信頼性を高めることができる。 According to this configuration, a specific person in the vehicle is identified by using the second sensing data acquired by the sensor installed in the vehicle, and the identified person is allowed to determine whether or not there is a person trying to get into the vehicle. be able to. Therefore, for example, it is possible to use the judgment of a person who is located near the input device, a person who is likely to be reliable in the judgment, and a person who is in a position where the person who is about to get into the vehicle can be easily seen. It is possible to improve the reliability of the judgment.
上記態様において、前記特定部は、前記入力データの履歴から人を特定してもよい。 In the above aspect, the identification unit may identify the person from the history of the input data.
本構成によれば、過去の入力履歴から人が特定されるため、例えば、過去の入力履歴から判断について信頼できる人に、車両に乗車しようとする人の有無の判断をさせることができ、前記判断の信頼性を高めることができる。 According to this configuration, since the person is specified from the past input history, for example, it is possible to let a person who can be trusted to judge from the past input history judge whether or not there is a person trying to get on the vehicle. The reliability of judgment can be improved.
上記態様において、前記第１取得部はさらに、前記車両に取り付けられた前記車両内をセンシングする第２センサから第２センシングデータを取得し、
前記第２センシングデータを用いて前記車両内に人がいるか否かを判定する判定部を更に備え、
前記提示制御部は、前記判定部が前記車両内に前記人がいると判定した場合に前記提示情報を提示させてもよい。
In the above aspect, the first acquisition unit further acquires second sensing data from a second sensor attached to the vehicle that senses the inside of the vehicle,
Further comprising a determination unit that determines whether or not there is a person in the vehicle using the second sensing data,
The presentation control unit may present the presentation information when the determination unit determines that the person is present in the vehicle.
本構成によれば、車両内に人がいる場合に提示情報を提示させることができるため、車両内に人がいない場合に提示情報が提示されることを防止でき、無駄な処理の発生を防止することができる。 According to this configuration, the presentation information can be presented when there is a person in the vehicle, so it is possible to prevent the presentation information from being presented when there is no person in the vehicle, and the occurrence of wasteful processing can be prevented. can do.
上記態様において、前記入力装置に入力を行った人を特定する操作者特定部と、
特定された前記人にインセンティブを付与するインセンティブ付与部と、を更に備えてもよい。
In the above aspect, an operator identification unit that identifies a person who has made an input to the input device;
and an incentive granting unit that grants an incentive to the identified person.
本構成によれば、入力を行った人にインセンティブが付与されるので、車両に乗車しようとする人の有無の判断結果を入力する動機付けを車内の人に付与することができ、判断結果が入力されない事態を回避できる。 According to this configuration, since the incentive is given to the person who has made the input, it is possible to give motivation to the person in the vehicle to input the determination result of whether or not there is a person who is going to get into the vehicle, and the determination result is satisfied. It is possible to avoid situations where no input is made.
上記態様において、前記入力装置は、前記車両内の人によって所持され、前記情報処理
装置と通信する通信端末を含み、
前記第２取得部は、前記通信端末から通信を介して前記入力データを取得してもよい。
In the above aspect, the input device includes a communication terminal carried by a person in the vehicle and communicating with the information processing device,
The second acquisition unit may acquire the input data from the communication terminal via communication.
本構成によれば、車両に乗車しようとする人の判断結果の入力が車内の人の通信端末から行うことが可能であるため、当該人に当該入力を容易に行わせることができる。また、車両に入力装置を設置せずに済むため、コストを低減することができる。 According to this configuration, since it is possible for a person who intends to get into the vehicle to input the determination result from the communication terminal of the person in the vehicle, it is possible to allow the person to easily perform the input. Moreover, since it is not necessary to install an input device in the vehicle, the cost can be reduced.
上記態様において、前記提示装置は、前記車両内の人によって所持され、前記情報処理装置と通信する通信端末を含み、
前記第２取得部は、前記提示情報を前記通信端末に送信し、
前記通信端末は、送信された前記提示情報を提示してもよい。
In the above aspect, the presentation device includes a communication terminal carried by a person in the vehicle and communicating with the information processing device,
The second acquisition unit transmits the presentation information to the communication terminal,
The communication terminal may present the transmitted presentation information.
本構成によれば、車内の人の通信端末に提示情報が表示されるので、車両に乗車しようとする人の有無の判断を当該人に容易に行わせることができる。また、車両に提示装置を設置せずに済むため、コストを低減することができる。 According to this configuration, the presentation information is displayed on the communication terminal of the person in the vehicle, so that the person can easily determine whether or not there is a person who is going to get into the vehicle. Moreover, since it is not necessary to install the presentation device in the vehicle, the cost can be reduced.
本開示は、このような情報処理装置に含まれる特徴的な各構成をコンピュータに実行させる情報処理方法、コンピュータプログラム、或いはこのコンピュータプログラムによって動作するシステムとして実現することもできる。また、このようなコンピュータプログラムを、ＣＤ－ＲＯＭ等のコンピュータ読取可能な非一時的な記録媒体あるいはインターネット等の通信ネットワークを介して流通させることができるのは、言うまでもない。 The present disclosure can also be implemented as an information processing method, a computer program that causes a computer to execute each characteristic configuration included in such an information processing apparatus, or a system that operates with this computer program. It goes without saying that such a computer program can be distributed via a computer-readable non-temporary recording medium such as a CD-ROM or a communication network such as the Internet.
なお、以下で説明する実施の形態は、いずれも本開示の一具体例を示すものである。以下の実施の形態で示される数値、形状、構成要素、ステップ、ステップの順序などは、一例であり、本開示を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。また全ての実施の形態において、各々の内容を組み合わせることもできる。 It should be noted that each of the embodiments described below is a specific example of the present disclosure. Numerical values, shapes, components, steps, order of steps, and the like shown in the following embodiments are examples and are not intended to limit the present disclosure. In addition, among the constituent elements in the following embodiments, constituent elements that are not described in independent claims representing the highest concept will be described as arbitrary constituent elements. Moreover, each content can also be combined in all the embodiments.
（実施の形態１）
図１は、本開示の実施の形態１に係る情報処理装置が適用された車両１において、車両１の外部構成と車両１の内部構成との一例を示す図である。図１において、上図は車両１の外部構成を示し、下図は車両１の内部構成を示している。本実施の形態では、車両１として路線バスが採用される。また、車両１は、ＡＩが実装されたコンピュータによって自動運転されるドライバーレスの自動運転車両で構成される。
(Embodiment 1)
FIG. 1 is a diagram showing an example of an external configuration of a vehicle 1 and an example of an internal configuration of the vehicle 1 in which an information processing device according to Embodiment 1 of the present disclosure is applied. In FIG. 1, the upper diagram shows the external configuration of the vehicle 1, and the lower diagram shows the internal configuration of the vehicle 1. As shown in FIG. In this embodiment, a route bus is adopted as the vehicle 1 . In addition, the vehicle 1 is configured as a driverless automatic driving vehicle that is automatically driven by a computer in which AI is implemented.
図１の上図を参照し、車両１は、車外センサ１１及びドア１６を備える。図１の上図の例では、車外センサ１１は、車両１の前面の上部に設けられた車外センサ１１１と、車両１の側面中央の上部に設置された車外センサ１１２とを含む。なお、車外センサ１１２は、車両１ではなく車両とは別の場所に設けられてもよい。例えば、車外センサ１１２は、道路に面した建物又はバス停等の車両１の外部をセンシング可能な場所に設けられてよい。
Referring to the upper diagram of FIG. 1 , vehicle 1 includes
ドア１６は、車両１の側面の前方に設けられたドア１６１と車両１の側面の後方に設けられたドア１６２とを含む。ここでは、ドア１６１は乗客が車両１から降車する際に利用され、且つ、ドア１６２は乗客が車両１に乗車する場合に利用される。但し、これは一例である。例えば、ドア１６１は乗客が車両１に乗車する場合に利用され、且つ、ドア１６２は乗客が車両１から降車する場合に利用されてもよい。
The
車外センサ１１１は、車両１の前方の物体（例えば、別の車両及び人物等）を検出して、車両１を自動運転させるために必要なセンシングデータを取得するために使用される。ここでは、車外センサ１１１は、車両１の前面上部に設けられているが、これは一例であり、車両１の後方の物体を検出するために、車両１の後面に更に設けられてもよい。
The
車外センサ１１２は、車両１に乗車しようとしている人物が居るか否かを判断するために必要なセンシングデータを取得するために使用される。ここでは、車外センサ１１２は、車両の側面の上部に設置されているが、これは一例であり、車両１に乗車しようとしている人物を検出することができる位置であればどのような位置に設置されていてもよく、例えば、車両１の側面であってドア１６の周囲に設置されていてもよい。例えば、前方のドア１６１から乗客が乗車する路線バスであれば、ドア１６１の上部に車外センサ１１２は設置されていてもよく、後方のドア１６２から乗客が乗車する路線バスであれば、ドア１６２の上部に車外センサ１１２は設置さていてもよい。或いは、ドア１６１及びドア１６２の両方に車外センサ１１２は設置されていてもよい。
The
図１の下図を参照し、車両１の内部には、通常の路線バスと同様、乗客が着座するために複数の座席１ａと、座席１ａの側方の上端から天井に向けて立設された複数のパイプ１ｂとを備えている。複数の座席１ａは、通路を挟んで車両の長手方向に配列されている。車両１の内部には、入出力端末１３及び車内センサ１２が設けられている。
Referring to the lower diagram of FIG. 1, inside the vehicle 1, as in a normal route bus, there are a plurality of
入出力端末１３（入力装置の一例）は、例えば、ＣＰＵ等のプロセッサ、液晶パネル等の表示装置、及び乗客からの操作が入力されるタッチパネル等の入力装置を含む情報処理装置で構成されている。入出力端末１３は、バス停で車両１が発車しようとする際に、車両１に乗車しようとする人物Ｂの有無を車両１内の乗客Ａに判断させるための画像を表示する。また、入出力端末１３は、乗客Ａによる判断結果を乗客Ａが入力するための操作を受け付けるための操作画像を表示する。この例では、車両１はバス停で停車しており、人物Ｂがドア１６２に向けて駆け寄ってきている。そのため、乗客Ａは、車両１に乗車しようとする人物Ｂがいると判断し、車両１に対してその人物Ｂが居るとの判断結果を入力している。これにより、車両１は人物Ｂの車内への乗車が完了したことを確認した後、バス停を発車する。そのため、車両１は人物Ｂをバス停に取り残すことなく安全に乗車させることができる。
The input/output terminal 13 (an example of an input device) is configured by an information processing device including, for example, a processor such as a CPU, a display device such as a liquid crystal panel, and an input device such as a touch panel for inputting operations from passengers. . The input/
ここでは、車外から乗客が乗車する際に利用されるドア１６２付近に設けられたパイプ１ｂにおいて１つの入出力端末１３が設置されているが、これは一例である。例えば、入出力端末１３は、各座席１ａに１つずつ設置されてもよいし、２以上の所定数の座席１ａごとに１つ設置されてもよい。なお、以下の説明では、説明の便宜のため、特に断らない限り、入出力端末１３は車内に１つ設置されているものとして説明する。
Here, one input/
或いは、入出力端末１３は、最前列の座席の付近に１つ設置されていてもよい。この場合、全ての乗客に画像を視認させるために、入出力端末１３は、大型ディスプレイを備えて構成されてもよい。このように、入出力端末１３の個数及び設置位置は特に限定はされない。
Alternatively, one input/
車内センサ１２は、例えば、車内の天井に設置されたカメラで構成され、車内に乗客が居るか否かを情報処理装置が判断するために使用されるセンシングデータを取得する。ここでは、車内センサ１２は、車内の全域を撮影するために天井の中央部に１つ設置された広角カメラで構成されているがこれは一例である。例えば、車内センサ１２は、車内の全域を分担して撮影する複数のカメラで構成されてもよい。この場合、複数のカメラの通常の画角を持つカメラで構成されればよい。
The in-
図２は、図１に示す車両１の構成を示すブロック図である。車両１は、図１に示す車外センサ１１（第１センサの一例）、車内センサ１２（第２センサの一例）、入出力端末１３、及びドア１６に加えて、さらに情報処理装置１４及び車両制御部１５を備えている。
FIG. 2 is a block diagram showing the configuration of vehicle 1 shown in FIG. In addition to the vehicle exterior sensor 11 (an example of a first sensor), the vehicle interior sensor 12 (an example of a second sensor), the input/
車外センサ１１は、例えば、ＬＩＤＡＲ（ｌｉｇｈｔ ｄｅｔｅｃｔｉｏｎ ａｎｄ ｒａｎｇｉｎｇ）、ステレオカメラ、又はミリ波センサで構成され、車両１の前方の物体を示すセンシングデータ及び車両１の側方の物体を示すセンシングデータを、例えば、所定のフレームレートで定期的に取得する。
The
ＬＩＤＡＲは、レーザを使って可視スペクトル外の光のパルスを方向を変えながら発射し、そのパルスが戻ってくる時間を計測することで、周囲に存在する物体の方向及び距離を測定するセンサである。ミリ波センサはミリ波を照射して、反射波と元の照射波とを加算して得られるビート周波数を測定することで周囲に存在する物体の方向及び距離を測定するセンサである。ステレオカメラは、例えば複数のカメラで撮影された画像に含まれる物体の視差から周囲に存在する物体の距離及び方向を測定するセンサである。 LIDAR is a sensor that measures the direction and distance of surrounding objects by emitting redirecting pulses of light outside the visible spectrum using lasers and measuring the time it takes for the pulses to return. . A millimeter wave sensor is a sensor that measures the direction and distance of an object existing in the surroundings by irradiating millimeter waves and measuring the beat frequency obtained by adding the reflected waves and the original radiated waves. A stereo camera is a sensor that measures the distance and direction of a surrounding object from the parallax of an object included in images captured by a plurality of cameras, for example.
車内センサ１２は、例えば、カメラで構成され、車内の乗客を示す画像を所定のフレームレートで取得する。
The in-
情報処理装置１４は、プロセッサ１４０及び通信部１５０を備える。プロセッサ１４０は、例えば、ＣＰＵで構成され、運行制御部１４１、車内乗客検出部１４２、及び表示情報生成部１４３を備えている。運行制御部１４１～表示情報生成部１４３は、例えば図略のメモリに記憶されたプログラムをプロセッサ１４０が実行することで実現される。
The
運行制御部１４１（乗車制御部の一例）は、車両１に対する人物の乗車の制御を司るものである。具体的には、運行制御部１４１は、例えば、予め定められた車両１の運行スケジュールを管理しており、この運行スケジュールにしたがって車両１を走行させる。
The operation control unit 141 (an example of a boarding control unit) controls the boarding of the vehicle 1 by a person. Specifically, the
ここで、運行スケジュールには、例えば、停車するべき複数のバス停の位置情報（例えば、緯度及び経度）と、各バス停の到着時刻及び発車時刻と、車庫を発車してから停車するべきバス停を通って再び車庫に戻るまでの最適経路を示す経路情報等が含まれている。 Here, the operation schedule includes, for example, positional information (for example, latitude and longitude) of a plurality of bus stops to be stopped, arrival and departure times of each bus stop, and the bus stop to be stopped after leaving the garage. It contains information such as route information that indicates the optimum route to return to the garage again.
したがって、運行制御部１４１は、例えば、車両１の現在地の位置情報とバス停の位置情報とを照合して、あるバス停に車両１が到着したことを検出すると車両１を停車させる制御コマンド及びドア１６を開ける制御コマンドを、通信部１５０を用いて車両制御部１５に送信する。なお、運行制御部１４１は、例えば図略のＧＰＳセンサによって検出された位置情報を車両１の現在地の位置情報として取得すればよい。
Therefore, the
また、運行制御部１４１は、当該バス停の発車時刻になるとそのことを車内乗客検出部１４２通知する。また、運行制御部１４１は、車両１に乗車しようとしている人物の有無を示す判断結果が乗客によって入力され、その判断結果が入出力端末１３から送信されると、その判断結果に応じてドア１６の開閉を制御する。この判断結果は入力データ及び操作データの一例に相当する。ここで、運行制御部１４１は、車両制御部１５に通信部１５０を介して制御コマンドを送信することでドア１６の開閉を制御すればよい。これにより、車両１に乗車しようとする人物が居るにも拘わらず、発車時刻になったからといって直ちに車両１が発車することが防止される。
In addition, the
車内乗客検出部１４２（判定部の一例）は、運行制御部１４１から発車時刻になったことが通知されると、車内センサ１２が検出したセンシングデータ（第２センシングデータの一例）を通信部１５０を介して取得し、当該センシングデータ用いて、車内に乗客が居るか否かを検出する。ここで、車内センサ１２はカメラで構成されているので、車内センサ１２が検出したセンシングデータは車内の状況を示す画像データで構成されることになる。したがって、車内乗客検出部１４２は、この画像データに対して所定の画像処理を適用することで車内に居る乗客を検出すればよい。
In-vehicle passenger detection unit 142 (an example of a determination unit) transmits sensing data (an example of second sensing data) detected by in-
ここで、所定の画像処理としては、例えば、ディープラーニングによって生成された分類器を使用して乗客を検出する処理が採用されてもよいし、テンプレートマッチングにより乗客を検出する処理が採用されてもよい。なお、車内乗客検出部１４２は、車内に乗客が居ることを検出した場合、そのことを表示情報生成部１４３に通知する。
Here, as the predetermined image processing, for example, a process of detecting passengers using a classifier generated by deep learning may be adopted, or a process of detecting passengers by template matching may be adopted. good. When detecting that there is a passenger in the vehicle, the in-vehicle
表示情報生成部１４３（提示制御部の一例）は、車内乗客検出部１４２から車内に乗客が居ることが通知された場合、車外センサ１１が取得したセンシングデータを通信部１５０を用いて取得する。そして、表示情報生成部１４３は、取得したセンシングデータを用いて、車両を発車させるか否かの判断結果（入力データの一例）を乗客に入力させるための提示情報を生成し、通信部１５０を介して入出力端末１３に送信する。例えば、提示情報は、車両１に乗車しようとしている人物の有無の判断結果（操作データの一例）を乗客に入力させるための提示画像（操作画像の一例）であってよい。
The display information generation unit 143 (an example of the presentation control unit) acquires the sensing data acquired by the
通信部１５０（第１取得部及び第２取得部の一例）は、情報処理装置１４、車外センサ１１、車内センサ１２、及び入出力端末１３を通信可能に接続するための通信インターフェースで構成される。
The communication unit 150 (an example of the first acquisition unit and the second acquisition unit) is configured by a communication interface for communicably connecting the
車両制御部１５は、ＥＣＵ等のコンピュータと、車両１を走行させる走行モータと、車両１を制動させるブレーキと、ドア１６を開閉させる開閉モータ等で構成され、情報処理装置１４から送信される種々の制御コマンドにしたがって車両１を動作させる。例えば、車両制御部１５は、通信部１５０からドア１６を閉じる制御コマンドを受信すると開閉モータを動作させてドア１６を閉じる。また、車両制御部１５は、通信部１５０から車両１を発車させる制御コマンドを受信すると、走行モータを動作させ、車両１を発車させる。
The
また、車両制御部１５は、車外センサ１１が取得したセンシングデータを通信部１５０を介して所定周期で受信し、ＡＩ技術を用いて車両１を自動運転させる。
In addition, the
入出力端末１３は、通信部１３１及び入出力部１３２を備える。通信部１３１は、入出力端末１３を情報処理装置１４と通信可能に接続する通信装置で構成されている。本開示では、通信部１５０は、情報処理装置１４から送信される提示画像を受信すると共に、入出力部１３２が取得した提示画像に対する乗客の判断結果を情報処理装置１４に送信する。入出力部１３２は、例えば、ディスプレイ等の出力装置と、タッチパネル等の入力装置と、出力装置及び入力装置を制御するプロセッサ等で構成されている。
The input/
本開示では、入出力部１３２は、情報処理装置１４から送信された提示画像の画像データに基づいて提示画像を生成してディスプレイに表示すると共に、提示画像に対する乗客の入力を受け付ける。
In the present disclosure, the input/
続いて、情報処理装置１４の処理について説明する。図３は、図１に示す情報処理装置１４の処理の一例を示すフローチャートである。Ｓ１１では、運行制御部１４１は、車両１がバス停に到着したか否かを判定する。ここで、運行制御部１４１は、車両１の現在地の位置情報と、運行スケジュールに含まれるバス停の位置情報とを照合することで、車両１がバス停に到着したか否かを判定する。なお、運行制御部１４１は、車両１の現在地がバス停に対して所定距離以下に位置すると、車両１をバス停で正確に停止させるために車両１を制動させる制御コマンドを通信部１５０を介して車両制御部１５に送信すればよい。
Next, processing of the
車両１がバス停に到着したと判定されると（Ｓ１１でＹＥＳ）、処理はＳ１２に進み、車両１がバス停に到着していないと判定されると（Ｓ１１でＮＯ）、処理は終了する。 If it is determined that the vehicle 1 has arrived at the bus stop (YES at S11), the process proceeds to S12, and if it is determined that the vehicle 1 has not arrived at the bus stop (NO at S11), the process ends.
Ｓ１２では、運行制御部１４１は、ドア１６を開ける制御コマンドを通信部１５０を介して車両制御部１５に送信することで、車両制御部１５にドア１６を開けさせる。これにより、車両１はドア１６を開けた状態でバス停で停車することになる。
In S<b>12 , the
Ｓ１３では、運行制御部１４１は、現在時刻が当該バス停に対応する発車時刻になったか否かを判定する。ここで、運行制御部１４１は、情報処理装置１４が備える時計（図略）と運行スケジュールに含まれる当該バス停の発車時刻とを照合することで、Ｓ１３の判定を行う。現在時刻が発車時刻になったと判定されると（Ｓ１３でＹＥＳ）、処理はＳ１４に進み、現在時刻が発車時刻になっていないと判定されると（Ｓ１３でＮＯ）、処理はＳ１３に戻る。
In S13, the
Ｓ１４では、車内乗客検出部１４２は、車内センサ１２が取得したセンシングデータを用いて車内の乗客の有無を判定する。車内に乗客がいると判定された場合（Ｓ１５でＹＥＳ）、処理はＳ１６に進み、車内に乗客がいないと判定された場合（Ｓ１５でＮＯ）、乗客判断処理の判断主体が車内に存在しないため、乗客判断処理を行うことなく、処理はＳ１７に進む。これにより、判断主体がいない場合に無駄な処理が発生することを省くことができる。
In S<b>14 , the in-vehicle
Ｓ１６では、乗客判定処理が実行される。乗客判定処理は、車内の乗客に車両１に乗車しようとしている人物の有無を判断させ、判断結果を入力させる処理であり、詳しくは図４で説明する。 In S16, passenger determination processing is executed. The passenger determination process is a process of having passengers in the vehicle determine whether or not there is a person who is going to board the vehicle 1, and inputting the determination result. Details will be described with reference to FIG.
Ｓ１７では、運行制御部１４１は、車外センサ１１が取得したセンシングデータを用いて乗車口の周囲に人物がいるか否かを判定する。ここで、運行制御部１４１は、例えば、上述した分類器にセンシングデータを入力することで人物を抽出し、その人物が乗車口から所定距離内に位置する場合、乗車口の周囲に人物が居ると判定し、乗車口から所定距離内に人物が居なければ、乗車口の周囲に人物は居ないと判定すればよい。ここで、乗車口とは人物が乗車するドア１６が開閉される箇所を指す。また、所定距離としては、乗車口を基準にして例えば１ｍ、２ｍ、５ｍといった距離が採用できる。これにより、乗車中の人物が居るにも拘わらず車両１のドア１６が閉じることが防止される。
In S17, the
乗車口の周辺に人物が居なければ（Ｓ１７でＹＥＳ）、処理はＳ１８に進み、乗車口の周辺に人物が居れば（Ｓ１７でＮＯ）、処理はＳ１６に戻り、再度、乗客判定処理が実行される。 If there is no person around the entrance (YES at S17), the process proceeds to S18, and if there is a person around the entrance (NO at S17), the process returns to S16, and the passenger determination process is executed again. be done.
Ｓ１８では、運行制御部１４１は、ドア１６を閉めるための制御コマンドを通信部１５０を用いて車両制御部１５に送信し、車両制御部１５に開閉モータを動作させることでドア１６を閉める。
In S<b>18 , the
Ｓ１９では、運行制御部１４１は、車両１を走行させる制御コマンドを通信部１５０を用いて車両制御部１５に送信し、車両制御部１５に走行モータを動作させることで車両１をバス停から発車させる。
In S19, the
図４は、図３に示す乗客判断処理の詳細を示すフローチャートである。Ｓ１６１では、表示情報生成部１４３は、車外センサ１１が取得したセンシングデータを通信部１５０を介して取得する。Ｓ１６２では、表示情報生成部１４３は、車外センサ１１が取得したセンシングデータを用いて車両１の周囲に人物が居るか居ないかを判定する。
FIG. 4 is a flow chart showing details of the passenger determination process shown in FIG. In S<b>161 , the display
ここで、表示情報生成部１４３は、車外センサ１１が取得したセンシングデータに含まれる種々の物体を複数のクラスに分類する分類器を用いて、車両１の周囲に人物が居るか居ないかを判定すればよい。
Here, the display
分類器は、例えばディープラーニング等の機械学習により予め作成されたデータである。複数のクラスとしては、例えば、人物を示す人物クラス、自転車を示す自転車クラス、自動車を示す自動車クラスというような車両１の周囲に位置することが想定される物体に対応するクラスが採用される。ここでは、分類器を用いて車両１の周囲の人物の有無を検出したが、本開示はこれに限定されず、表示情報生成部１４３は、テンプレートマッチング等の公知の画像認識手法を用いて車両１周囲の人物の有無を検出してもよい。 A classifier is, for example, data created in advance by machine learning such as deep learning. As the plurality of classes, for example, classes corresponding to objects assumed to be positioned around the vehicle 1, such as a person class representing a person, a bicycle class representing a bicycle, and a car class representing a car, are adopted. Here, the presence or absence of a person around the vehicle 1 is detected using a classifier, but the present disclosure is not limited to this. 1. Presence or absence of a person in the vicinity may be detected.
車両１の周囲とは、例えば、車両１の重心から所定距離（例えば４０ｍ）内の領域を指す。なお、この４０ｍは一例であり、１０ｍ、２０ｍ、３０ｍ等の他の距離が採用されてもよい。これにより、表示情報生成部１４３は、バス停に居る人物及び車両１に駆け寄ってくる人物等の車両１の周囲の人物を検出できる。
The surroundings of the vehicle 1 refer to an area within a predetermined distance (for example, 40 m) from the center of gravity of the vehicle 1, for example. Note that this 40 m is an example, and other distances such as 10 m, 20 m, and 30 m may be adopted. Thereby, the display
具体的には、表示情報生成部１４３は、車外センサ１１１、１１２が取得したセンシングデータを分類器に入力し、人物クラスとして出力された物体のうち、車両１からの距離が所定距離内に位置する物体があれば、車両１の周囲に人物が居ると判定すればよい。一方、人物クラスとして出力された物体のうち、車両１からの距離が所定距離内に位置する物体がない又は人物クラスとして出力された物体がいない場合、表示情報生成部１４３は、車両１の周囲に人物が居ないと判定すればよい。
Specifically, the display
車両１の周囲に人物が居ると判定された場合（Ｓ１６２でＹＥＳ）、処理はＳ１６３に進み、車両１の周囲に人物が居ないと判定された場合（Ｓ１６２でＮＯ）、処理は図３に戻る。 If it is determined that there is a person around the vehicle 1 (YES at S162), the process proceeds to S163. return.
Ｓ１６３では、表示情報生成部１４３は、車両１の周囲に居る人物を示す画像と、その人物が車両１に乗車しようとしているか否かの車内の乗客による判断結果を入力させるための操作画像とを含む提示画像を生成し、通信部１５０を用いて入出力端末１３に送信する。これにより、入出力端末１３の入出力部１３２は、提示画像を表示する。
In S163, the display
図５は、入出力端末１３に表示される提示画像Ｇ１の一例を示す図である。提示画像Ｇ１は、車両１の前方の状況を表示する画像Ｇ１１と、車両側方の状況を表示するための画像Ｇ１２と、乗客からの判断結果が入力される操作画像Ｇ１３とを含む。
FIG. 5 is a diagram showing an example of the presentation image G1 displayed on the input/
画像Ｇ１１は、車両１の前面に設置された車外センサ１１１が取得したセンシングデータに基づいて生成された画像である。画像Ｇ１２は、車両１の側面に設置された車外センサ１１２が取得したセンシングデータに基づいて生成された画像である。例えば、車外センサ１１１及び車外センサ１１２がＬＩＤＡＲ又はミリ波センサで構成されている場合は、センシングデータに対して色付加工された画像が画像Ｇ１１及び画像Ｇ１２として採用されてもよい。また、車外センサ１１１及び車外センサ１１２がステレオカメラで構成されている場合は、ステレオカメラを構成するいずれか１つのカメラが取得した画像データが画像Ｇ１１及び画像Ｇ１２として表示されればよい。
The image G<b>11 is an image generated based on sensing data acquired by the
画像Ｇ１１及び画像Ｇ１２は車外センサ１１が取得したセンシングデータが所定のフレームレートで切り替えて表示される動画像で構成される。この例では、車両１の周囲に人物が居たため、画像Ｇ１２には、車両１に乗車しようとする人物Ｂが含まれている。また、画像Ｇ１２には、人物Ｂを強調表示するために強調画像Ｌ１２１が人物Ｂを取り囲むように画像Ｇ１２対して重畳表示されている。この例では、強調画像Ｌ１２１は、人物Ｂを点線で取り囲む四角形の画像が採用されている。但し、これは一例であり、強調画像Ｌ１２１としては、例えば、人物Ｂの近傍に表示されるアノテーションマークが採用されてもよい。また、強調画像Ｌ１２１の形状は四角形に限らず円形又は楕円形であってもよいし、実線が採用されてもよい。
The image G11 and the image G12 are composed of moving images in which sensing data acquired by the
また、画像Ｇ１２おいては、人物Ｂが動く方向を示す動きベクトル画像Ｌ１２３が強調画像Ｌ１２１に代えて又は加えて表示されてもよい。この場合、表示情報生成部１４３は、車外センサ１１２が取得したセンシングデータから抽出した人物Ｂを示す座標のフレーム間での差分を算出することで動きベクトルを算出し、動きベクトル画像Ｌ１２３を生成すればよい。
Also, in the image G12, a motion vector image L123 indicating the direction in which the person B moves may be displayed instead of or in addition to the emphasized image L121. In this case, the display
また、画像Ｇ１２においては、人物Ｂを正面から撮像した画像が表示されているが、これは一例であり、車両１の上方から見たときの車両１周囲の状況を表示する俯瞰画像が採用されてもよい。この場合、車両１の前面、左側面、右側面、及び後面のそれぞれにカメラを車外センサ１１として設ける。そして、表示情報生成部１４３は、これらのカメラで撮像された画像データを用いて俯瞰画像を生成して画像Ｇ１２として採用すればよい。この俯瞰画像には、車両１周囲の地図画像がマッピングされていてもよい。
Also, in the image G12, an image of the person B captured from the front is displayed, but this is an example, and a bird's-eye view image that displays the situation around the vehicle 1 when viewed from above the vehicle 1 is adopted. may In this case, a camera is provided as an
操作画像Ｇ１３は、ドア１６を開状態に維持するために乗客により選択される「ドア開」と記載された開ボタンＢ１４１と、ドア１６を開状態から閉状態にするために乗客により選択される「ドア閉」と記載された閉ボタンＢ１４２とを備えている。
The operation image G13 includes an open button B141 labeled "door open" selected by the passenger to keep the
開ボタンＢ１４１は、画像Ｇ１１，Ｇ１２を見た乗客が車両１に乗車しようとする人物が居ると判断した場合に選択されるボタンである。閉ボタンＢ１４２は、画像Ｇ１１，Ｇ１２を見た乗客が車両１に乗車しようとする人物が居ないと判断した場合に選択されるボタンである。 The open button B141 is a button that is selected when the passenger who has seen the images G11 and G12 determines that there is a person trying to get into the vehicle 1 . The close button B142 is a button that is selected when the passenger who has seen the images G11 and G12 determines that there is no person trying to get into the vehicle 1 .
画像Ｇ１２には車両１に向かって人物Ｂが走っていることが示されており、車内の乗客が、画像Ｇ１２及び目視により確認した車両１周囲の状況から、人物Ｂは車両１に乗車しようとしていると判断したとする。この場合、この乗客は開ボタンＢ１４１を選択する操作を入力する。すると、入出力端末１３は、開ボタンＢ１４１の選択指示を判断結果として情報処理装置１４に送信する。すなわち、開ボタンＢ１４１の選択指示は、車両１に乗車しようとする人物が居ると乗客が判断したときの判断結果を示すことになる。
The image G12 shows that the person B is running toward the vehicle 1. From the image G12 and the situation around the vehicle 1 visually confirmed by the passengers in the vehicle, the person B is about to board the vehicle 1. Suppose we decide that there is In this case, the passenger inputs an operation to select the open button B141. Then, the input/
一方、画像Ｇ１１及び画像Ｇ１２には人物が含まれているが、この人物は車両１に向けて進行しておらず、画像Ｇ１１、画像Ｇ１２、及び、目視により確認した車両１周囲の状況から、車両１に乗りそうな人物でないと車内の乗客が判断したとする。この場合、乗客は閉ボタンＢ１４２を選択する操作を入力する。すると、入出力端末１３は、閉ボタンＢ１４２の選択指示を判断結果として情報処理装置１４に送信する。すなわち、閉ボタンＢ１４２の選択指示は、車両１に乗車しようとする人物が居ないと乗客が判断したときの判断結果を示すことになる。
On the other hand, the image G11 and the image G12 include a person, but this person is not moving toward the vehicle 1, and from the image G11, the image G12, and the visually confirmed situation around the vehicle 1, Assume that the passengers in the vehicle have decided that the person is not likely to get on the vehicle 1 . In this case, the passenger inputs an operation to select the close button B142. Then, the input/
図４に参照を戻す。Ｓ１６４では、表示情報生成部１４３は、入出力端末１３から送信された提示画像Ｇ１に対して乗客が入力した判断結果を、通信部１５０を介して取得する。判断結果が開ボタンＢ１４１の選択指示であれば（Ｓ１６５でＹＥＳ）、処理はＳ１６６に進み、判断結果が閉ボタンＢ１４２の選択指示であれば（Ｓ１６５でＮＯ）、処理は図３に戻る。
Refer back to FIG. In S<b>164 , the display
Ｓ１６６では、表示情報生成部１４３は、車両１の人物の乗車が完了していないため、車両を停車させていることを示す情報を通信部１５０を介して入出力端末１３に送信する。この情報を受信した入出力端末１３は、当該情報を示すメッセージを入出力部１３２に表示する。これにより、車両１が発車しない理由を乗客に知らせることができる。
In S<b>166 , the display
一方、Ｓ１６４において、表示情報生成部１４３は、乗客よる判断結果を取得しなかった場合（Ｓ１６４でＮＯ）、処理を１６７に進める。Ｓ１６７では、表示情報生成部１４３は、発車時刻になってから所定時間が経過したか否かを判定し、所定時間が経過していなければ（Ｓ１６７でＮＯ）、乗客からの判断結果の入力を待機するために処理をＳ１６４に戻す。一方、発車時刻になってから所定時間が経過していれば（Ｓ１６７でＹＥＳ）、処理を図３に戻す。すなわち、本フローは、発車時刻になってから所定時間内に乗客による判断結果の入力がなければ、処理をタイムアウトさせ、いつまでたっても車両１が発車しない事態を回避している。
On the other hand, in S<b>164 , the display
このように、本実施の形態によれば、車両１の周囲の人物を示す画像Ｇ１１及び画像Ｇ１２を含む提示画像Ｇ１が入出力端末１３に表示される。そして、車両１に乗車しようとする人物が居るとの判断結果が車内の乗客によって入力された場合、当該人物が車両１に乗車した後、ドア１６が閉じられて車両１が発車される。したがって、本実施の形態は、車両１に乗車しようとしている人物の有無の判断処理について車内の乗客の判断を利用することができ、車両１に乗車しようとする人物の取り残し、又は乗車の安全性を向上させることができる。
As described above, according to the present embodiment, the input/
（提示画像のバリエーション）
続いて、提示画像のバリエーションについて説明する。図６は、本開示の実施の形態１の他の一例に係る提示画像を示す図である。提示画像Ｇ２は図４のＳ１６３で入出力端末１３に表示される画像である。なお、図６において図５に示す提示画像Ｇ１と同じ構成要素には同一の符号が付されている。このことは、後述する実施の形態の提示画像でも同じである。
(Variation of presented image)
Next, variations of presentation images will be described. FIG. 6 is a diagram showing a presentation image according to another example of Embodiment 1 of the present disclosure. The presentation image G2 is an image displayed on the input/
提示画像Ｇ２において、提示画像Ｇ１との相違点は、操作画像Ｇ１３に代えて操作画像Ｇ１５が表示されている点にある。操作画像Ｇ１３はドア１６の開閉を車内の乗客に選択させる画像であったが、操作画像Ｇ１５は車両１に乗車しようとする人物が居るか居ないかを車内の乗客に選択させる画像となっている。なお、操作画像は、車両１の周辺にいる人物が車両１に乗車しそうかどうかを入力させる画像であってもよい。
The presentation image G2 differs from the presentation image G1 in that an operation image G15 is displayed instead of the operation image G13. The operation image G13 is an image for allowing the passengers inside the vehicle to select whether to open or close the
操作画像Ｇ１５は、車両１に乗車しようとする人物が居ると車内の乗客が判断した場合に選択されるＹＥＳボタンＢ１５１と、車両１に乗車しようとする人物が居ないと車内の乗客が判断した場合に選択されるＮＯボタンＢ１５２とを備えている。 The operation image G15 includes a YES button B151 selected when a passenger inside the vehicle determines that there is a person trying to get on the vehicle 1, and a YES button B151 selected when the passenger inside the vehicle determines that there is no person trying to get on the vehicle 1. and a NO button B152 that is selected when
このように、提示画像Ｇ２は、操作画像Ｇ１５を備えているため、車内の乗客の操作で間接的に物理的な乗車の制御を行うことができる。これにより、車内の乗客は心理的に乗車させない判断をしにくくなり、ドア１６の開閉操作の場合よりも乗車しようとしている人物を乗車させやすくすることができる。そのため、乗車しようとする人物の取り残しを抑制することができる。
Thus, since the presentation image G2 includes the operation image G15, it is possible to indirectly physically control boarding by the operation of the passenger in the vehicle. As a result, it becomes difficult for the passengers in the car to psychologically decide not to let them get on, and it is possible to make it easier for the person who is about to get on to get on than when the
操作画像Ｇ１５において、ＹＥＳボタンＢ１５１が車内の乗客により選択され、その選択指示が入出力端末１３から送信されると、表示情報生成部１４３は、提示画像Ｇ３を入出力端末１３に表示させる。提示画像Ｇ３は、提示画像Ｇ２に対して操作画像Ｇ１６の内容が異なる。操作画像Ｇ１６は、車両１を発車させるか否かの判断結果を車内の乗客に入力させる画像である。操作画像Ｇ１６は、車内の乗客が車両を発車させてもよいと判断した場合に選択されるＹＥＳボタンＢ１６１と、車内の乗客が車両を発車させないと判断した場合に選択されるＮＯボタンＢ１６２とを備えている。
In the operation image G15, when the YES button B151 is selected by the passenger in the vehicle and the selection instruction is transmitted from the input/
車内の乗客は、画像Ｇ１１及び画像Ｇ１２が示す車両１の周囲の状況、並びに窓越しから実際に目視した車両１の状況等を総合的に判断して、車両１に乗車しようとしている人物が車両１の周囲に残っていないと判断した場合、ＹＥＳボタンＢ１６１を選択する。ＹＥＳボタンＢ１６１の選択指示が入出力端末１３から送信されると、運行制御部１４１は、ドア１６を閉める制御コマンド及び車両１を走行させる制御コマンドを車両制御部１５に送信することで、車両制御部１５にドア１６を閉じさせた後、車両１を走行させる。
Passengers in the vehicle comprehensively judge the situation around the vehicle 1 shown by the images G11 and G12 and the situation of the vehicle 1 actually viewed through the window, and the like. 1, the user selects the YES button B161. When the selection instruction of the YES button B161 is transmitted from the input/
一方、車両１に乗車しようとしている人物が車両１の周囲に残っていると判断した場合、車内の乗客はＮＯボタンＢ１６２を選択する。ＮＯボタンＢ１６２の選択指示が入出力端末１３から送信されると、運行制御部１４１は、ドア１６を閉める制御コマンド及び車両１を走行させる制御コマンドを車両制御部１５に送信しない。これにより、車両１への乗車が完了しいない人物がいるにも拘わらず、ドア１６が閉じて車両１が走行を開始する事態を回避でき、当該人物の安全を確保できる。
On the other hand, when it is determined that the person who is about to board the vehicle 1 remains around the vehicle 1, the passenger in the vehicle selects the NO button B162. When the selection instruction of the NO button B162 is transmitted from the input/
提示画像Ｇ４は、提示画像Ｇ２の操作画像Ｇ１５においてＮＯボタンＢ１５２が車内の乗客により選択され、その選択指示が入出力端末１３から送信されたときに、表示情報生成部１４３が入出力端末１３に表示させる画像である。
The presentation image G4 is generated by the display
提示画像Ｇ４では、提示画像Ｇ２に対して操作画像Ｇ１５に代えて報知欄Ｇ１７が表示されている点が相違している。報知欄Ｇ１７は、車両１がバス停での停車時間を延長する旨を車内の乗客に報知するための画像である。ここでは、「乗降の待機中です。」とのメッセージが表示されると共に、「あと３０秒」というように、車両が発車するまでの残り時間が表示されている。これにより、車内の乗客はまだ乗降中の人物が残っているため、車両１が発車しないことを認識すると共に、あとどのくらいの時間待機すれば車両１が発車するかを知ることができる。 The presentation image G4 is different from the presentation image G2 in that a notification column G17 is displayed instead of the operation image G15. The notification column G17 is an image for notifying passengers in the vehicle that the vehicle 1 will extend the stop time at the bus stop. Here, the message "Waiting for boarding and alighting" is displayed, and the remaining time until the vehicle departs is displayed, such as "30 seconds left". As a result, the passengers in the vehicle can recognize that the vehicle 1 will not start because there are still persons getting on and off, and can know how much longer the vehicle 1 will have to wait.
ここで、提示画像Ｇ２の操作画像Ｇ１５においてＮＯボタンＢ１５２が選択されると、運行制御部１４１は、予め定められた所定時間（例えば、３０秒、１分等）、車両１の停車時間を延長する。そして、所定時間経過すると、表示情報生成部１４３は、提示画像Ｇ３を入出力端末１３に表示させる。そして、提示画像Ｇ３において、ＹＥＳボタンＢ１６１が車内の乗客により選択されると、運行制御部１４１は、ドア１６を閉じた後、車両１を発車させればよい。一方、提示画像Ｇ３において、ＮＯボタンＢ１６２が車内の乗客により選択されると、運行制御部１４１は、ドア１６を開けた状態での車両１の停車を継続させればよい。なお、提示画像Ｇ３を表示してから所定時間が経過するまでに、ＹＥＳボタンＢ１６１及びＮＯボタンＢ１６２のいずれもが選択されなかった場合、運行制御部１４１は、車両１の周囲に乗車しようとする人物が残っていないことを確認した後、ドア１６を閉じて車両１を発車させればよい。
Here, when the NO button B152 is selected in the operation image G15 of the presentation image G2, the
（実施の形態１の変形例）
以下、実施の形態１の変形例が説明される。なお、これらの変形例は後述の実施の形態にも適用可能である。
(Modification of Embodiment 1)
Modifications of the first embodiment will be described below. It should be noted that these modified examples are also applicable to embodiments described later.
（１）上記説明では、入出力端末１３は１つであるとしたが、本開示はこれに限定されず、複数であってもよい。この場合、例えば、ある乗客は車両１に乗車しようとする人物は居ないとの判断結果を入力したのに対して、別の乗客は車両１に乗車しようとする人物は居るとの判断結果を入力するというように、複数の乗客による判断結果が異なることが想定される。この場合、少なくとも１人の乗客が車両１に乗車しようとする人物が居るとの判断結果を入力した場合は、運行制御部１４１は、その判断結果を採用し、車両１の停車を継続させればよい。これにより、安全が確保される。
(1) In the above description, the number of input/
なお、複数の入出力端末１３を設ける態様としては、例えば、図５に示す提示画像Ｇ１のうち画像Ｇ１１及び画像Ｇ１２を車内先頭付近に設けられた大画面ディスプレイに表示し、各座席１ａに設けられた入出力端末１３には操作画像Ｇ１３のみを表示させる態様が採用できる。
In addition, as a mode in which a plurality of input/
（２）上記説明では、図３のＳ１５において、車内に乗客が存在しない場合（Ｓ１５でＮＯ）、乗客判断処理は実行されないとして説明したが、本開示はこれに限定されず、外部者に判断を委ねてもよい。ここで、外部者とは、例えば車両１を遠隔から監視及び制御する監視者である。この場合、車両１を監視及び制御するための監視サーバが別途設けられ、この監視サーバを車両１と通信可能に接続させる。また、監視サーバは、ディスプレイ及び入力装置が設けられた端末と接続される。端末のディスプレイには、車外センサ１１が取得したセンシングデータに基づき生成される提示情報が表示される。監視サーバが車両１から車内に乗客が存在しない旨の通知を受けると、監視サーバはアラーム等を鳴らすなどして、監視者にその旨を伝える。
(2) In the above description, in S15 of FIG. 3, if there is no passenger in the vehicle (NO in S15), the passenger determination process is not executed. may entrust Here, the outsider is, for example, an observer who remotely monitors and controls the vehicle 1 . In this case, a monitoring server for monitoring and controlling the vehicle 1 is separately provided, and this monitoring server is connected to the vehicle 1 so as to be communicable. Also, the monitoring server is connected to a terminal provided with a display and an input device. Presentation information generated based on the sensing data acquired by the
監視者は、端末のディスプレイに表示される提示情報を確認し、車両１に乗車しようとする人物がいないと判断すれば、その判断結果を端末の入力装置を介して入力する。入力された判断結果は、監視サーバに送信され、監視サーバは、通信を介して車両１に発車指示を通知し、車両１を発車させる。一方、監視者は、車両１に乗車しようとする人物がいると判断すれば、その判断結果を端末の入力装置を介して入力する。入力された判断結果は、監視サーバに送信され、監視サーバは、通信を介して車両１に待機指示を通知し、車両１の停車を継続させればよい。これにより、車内に乗客が居ない場合であっても、車両１に乗車しようとする人物を取り残すことなく安全に乗車させることができる。 The supervisor confirms the presentation information displayed on the display of the terminal, and if it determines that there is no person trying to get into the vehicle 1, inputs the determination result through the input device of the terminal. The input determination result is transmitted to the monitoring server, and the monitoring server notifies the vehicle 1 of a start instruction via communication, and causes the vehicle 1 to start. On the other hand, if the observer judges that there is a person who is going to board the vehicle 1, the observer inputs the judgment result through the input device of the terminal. The input determination result is transmitted to the monitoring server, and the monitoring server notifies the vehicle 1 of a standby instruction via communication, and the vehicle 1 may continue to stop. As a result, even when there are no passengers in the vehicle, a person who is going to get on the vehicle 1 can be safely boarded without being left behind.
（３）上記説明では、提示画像は入出力端末１３に表示されるものとして説明したが、本開示はこれに限定されず、例えば、プロジェクションマッピング等の技術を適用して車両１の窓に提示画像は表示されてもよい。この場合、入出力端末１３又は車内の適所にプロジェクタを設け、窓に提示画像を表示させればよい。
(3) In the above description, the presentation image is displayed on the input/
（４）図４のＳ１６６では、人物の乗車が完了していないため、車両を停車させていることを示すメッセージが入出力端末１３の画面上に表示されるとして説明したが、本開示はこれに限定されず、当該情報を示す音声メッセージが車内にアナウンスされてもよい。
(4) In S166 of FIG. 4, a message indicating that the vehicle is stopped is displayed on the screen of the input/
（５）上記説明では、運行制御部１４１は、乗客の判断結果によってドア１６の開閉を制御するとしたが、本開示はこれに限定されない。例えば、バス停に開閉可能なドアを備えるホーム柵が設けられているのであれば、運行制御部１４１は、このホーム柵に設けられたドアの開閉を、判断結果に応じて制御してもよい。この場合、車両１とホーム柵のプロセッサとを通信可能に接続させればよい。そして、車両１の情報処理装置１４とホーム柵のプロセッサとは通信を介して種々のデータを送受すればよい。
(5) In the above description, the
（６）上記説明では、提示情報はセンシングデータに基づく情報であると説明したが、停車位置における過去の乗車制御結果又は乗車制御時のセンシングデータに基づく情報が含まれてもよい。例えば、提示情報は、過去に乗車のために待機制御が実行された停車位置であることを示す情報、又は当該待機制御が実行された時の画像もしくは当該画像に対する画像処理結果を含んでもよい。 (6) In the above description, the presentation information is information based on sensing data, but may include information based on past boarding control results at the stop position or sensing data during boarding control. For example, the presentation information may include information indicating a stop position where standby control was performed for boarding in the past, an image when the standby control was performed, or an image processing result for the image.
（実施の形態２）
実施の形態２は、車両１に乗車しようとしている人物が居るか否かの判断結果を入力した乗客に対してインセンティブ（特典）を付与するものである。ここでは、インセンティブとして、例えば、クレジットカード、マイレッジカード、乗車カード、及びキャッシュカード等のポイントカードに付与されるポイントが採用される。
(Embodiment 2)
図７は、実施の形態２に係る情報処理装置１４が適用された車両管理システムの構成を示すブロック図である。なお、本実施の形態において実施の形態１と同一の構成要素には同一の符号を付して説明を省略する。このことは後述する実施の形態でも同じである。
FIG. 7 is a block diagram showing the configuration of a vehicle management system to which the
車両管理システムは、車両１に加えて更に、サーバ２、外部サーバ３、及び乗客端末４を備えている。サーバ２及び乗客端末４は車両１と通信可能に接続され、外部サーバ３はサーバ２と通信可能に接続されている。
The vehicle management system further includes a
乗客端末４（通信端末の一例）は、例えば、スマートフォン及びタブレット端末等の携帯端末で構成され、車内の乗客によって所持される。乗客端末４は、所定の通信路を介して入出力端末１３と通信可能に接続される。ここで、所定の通信路としては、ＮＦＣ及びブルーツース（登録商標）等の近接無線が採用できる。但し、これは一例であり、所定の通信路としては、無線ＬＡＮが採用されてもよい。
A passenger terminal 4 (an example of a communication terminal) is configured by a mobile terminal such as a smart phone and a tablet terminal, and is carried by a passenger in the vehicle. The passenger terminal 4 is communicably connected to the input/
サーバ２は、１又は複数のコンピュータで構成され、インターネット通信網及び携帯電話通信網等の広域通信ネットワークを介して情報処理装置１４と通信可能に接続されている。サーバ２は、通信部２１及びプロセッサ２２を備える。通信部２１は、サーバ２を広域通信ネットワークに接続する通信回路で構成されている。
The
プロセッサ２２は、操作者特定部２２１（特定部の一例）及びインセンティブ付与部２２２を備えている。操作者特定部２２１は、車両１に乗車しようとしている人物が居るか否かの判断結果を入力した車内の乗客を特定する。
The
ここで、乗客端末４は、車内の乗客による判断結果の入力の受け付けに先だって、乗客端末４を所持する乗客のユーザ識別子を含む特定依頼を入出力端末１３に送信する。ここで、特定依頼は、乗客がサーバ２に対して自己を特定してもらうための依頼である。
Here, the passenger terminal 4 transmits, to the input/
入出力端末１３は、この特定依頼を情報処理装置１４を介してサーバ２に送信する。操作者特定部２２１は、この特定依頼に含まれるユーザ識別子を乗客として特定する。操作者特定部２２１は、乗客を特定すると、特定した乗客に対する判断結果の入力を許可する入力許可を情報処理装置１４に送信する。
The input/
情報処理装置１４が入力許可を受信すると、表示情報生成部１４３は、乗客に判断結果を入力させる操作画像を含む提示画像を入出力部１３２に表示させる。
When the
インセンティブ付与部２２２は、操作者特定部２２１によって特定された乗客に対してインセンティブを付与する。ここで、インセンティブ付与部２２２は、特定された乗客に対して所定のポイントをインセンティブとして付与するための依頼通知を通信部２１を介して外部サーバ３に送信する。依頼通知には、付与するポイント及びユーザ識別子が含まれる。
The
外部サーバ３は、例えば、インセンティブの付与対象となるポイントカードの管理会社によって管理されるサーバである。外部サーバ３は、ポイントカードを所持する１以上の顧客のユーザ識別子と、各顧客が所持するポイントとを対応付けて記憶する顧客データベースを備えている。したがって、外部サーバ３は、サーバ２から依頼通知を受信すると、その依頼通知に含まれるユーザ識別子をキーにして、顧客データベースに記憶されている当該乗客のポイントを依頼通知に含まれるポイント分加算することで、当該乗客にポイントを付与する。
The external server 3 is, for example, a server managed by a point card management company to which incentives are given. The external server 3 has a customer database that associates and stores the user identifiers of one or more customers who possess point cards and the points possessed by each customer. Therefore, when receiving the request notification from the
図８は、実施の形態２に係る乗客判断処理を示すフローチャートである。なお、図８において、図４と同じ処理には同じ符号を付して説明を省く。 FIG. 8 is a flow chart showing passenger determination processing according to the second embodiment. In FIG. 8, the same processing as in FIG. 4 is denoted by the same reference numeral, and the description thereof is omitted.
Ｓ１６２に続くＳ１７１では、表示情報生成部１４３は、乗客に特定依頼を送信させるための提示画像を生成し、入出力端末１３に表示させる。この場合、例えば、図９で後述する提示画像Ｇ５が表示される。この提示画像Ｇ５を用いて乗客端末４から特定依頼が送信される。
In S171 following S162, the display
Ｓ１７２では、サーバ２の操作者特定部２２１は、Ｓ１７１で送信された特定依頼を入出力端末１３及び情報処理装置１４を介して取得し、取得した特定依頼に含まれるユーザ識別子を用いて当該乗客を特定する。なお、操作者特定部２２１は、乗客を特定した場合、特定できた旨を示す情報を情報処理装置１４に送信する。
In S172, the
Ｓ１７３では、表示情報生成部１４３は、特定できた旨を示す情報がサーバ２から送信されると、乗客に判断結果を入力させる操作画像を含む提示画像を生成し、入出力端末１３に表示される。この場合、例えば、図９で後述する提示画像Ｇ１が表示される。この提示画像Ｇ１を用いて、実施の形態１と同様、乗客により判断結果が入力され、処理はＳ１６４に進められる。
At S<b>173 , the display
Ｓ１６５のＹＥＳに続くＳ１７４では、インセンティブ付与部２２２は、Ｓ１７２で特定された乗客に対してインセンティブを付与し、処理をＳ１６６に進める。また、Ｓ１６５のＮＯに続くＳ１７５でも、インセンティブ付与部２２２は、Ｓ１７２で特定された乗客は、閉じるの判断結果を入力したため、当該乗客に対してインセンティブを付与し、処理を図３に戻す。
In S174 following YES in S165, the
図９は、実施の形態２において入出力端末１３に表示される提示画像の一例を示す図である。提示画像Ｇ５は図８のＳ１７１で入出力端末１３に表示される画像である。提示画像Ｇ５において、提示画像Ｇ１との相違点は、操作画像Ｇ１３に代えてＱＲコード（登録商標）の表示欄Ｇ１８が表示されている点にある。表示欄Ｇ１８には、乗客が乗客端末４を用いてサーバ２にアクセスするためのＱＲコードが表示されている。判断結果の入力に先だって、乗客は乗客端末４にＱＲコードを読み取らせる。すると、乗客端末４は、乗客をサーバ２に特定させるための特定依頼を入出力端末１３及び情報処理装置１４を介してサーバ２に送信する。そして、サーバ２の操作者特定部２２１により乗客が特定されて特定された旨の通知が情報処理装置１４に送信されると、表示情報生成部１４３は、提示画像Ｇ１を入出力端末１３に表示させる。この提示画像Ｇ１は図５で示した提示画像Ｇ１と同じである。
FIG. 9 is a diagram showing an example of a presentation image displayed on input/
この提示画像Ｇ１を用いて、乗客により、開ボタンＢ１４１又は閉ボタンＢ１４２が選択されると、入出力端末１３は、いずれか一方のボタンの選択指示を乗客の判断結果として情報処理装置１４に送信し、情報処理装置１４は、判断結果の入力の完了通知をサーバ２に送信する。サーバ２が完了通知を受信すると、インセンティブ付与部２２２は、外部サーバ３にポイント付与の依頼通知を送信すると共に、ポイントが付与されたことを示す付与通知を情報処理装置１４に送信する。この付与通知を情報処理装置１４が受信すると、表示情報生成部１４３は、ポイント付与を乗客に通知するための提示画像Ｇ６を生成し、入出力端末１３に表示させる。
When the passenger selects the open button B141 or the close button B142 using this presentation image G1, the input/
提示画像Ｇ６には、表示欄Ｒ６１が含まれている。表示欄Ｒ６１は、ポイントが付与された旨を乗客に通知するためのメッセージが含まれている。ここでは、「ご協力ありがとうございました１０ポイントを付与しましたのでご確認ください。」とのメッセージが表示欄Ｒ６１に表示されている。これにより、判断結果を入力した乗客はポイントが付与されたことを認識できる。 The presentation image G6 includes a display field R61. The display field R61 contains a message for notifying passengers that points have been awarded. Here, the message "Thank you for your cooperation, 10 points have been given, please confirm." is displayed in the display field R61. As a result, the passenger who has entered the judgment result can recognize that points have been given.
このように、本実施の形態によれば、判断結果を入力した人物にインセンティブが付与されるので、判断結果を入力する動機付けを乗客に付与することができ、判断結果がいつまでたっても入力されない事態を回避できる。 As described above, according to the present embodiment, since the incentive is given to the person who has input the judgment result, the passenger can be motivated to input the judgment result, and the judgment result is not inputted for a long time. You can avoid the situation.
（実施の形態２の変形例）
以下、実施の形態２の変形例が説明される。なお、これらの変形例は前述及び後述の実施の形態にも適用可能である。
(Modification of Embodiment 2)
Modifications of the second embodiment will be described below. It should be noted that these modifications are also applicable to the embodiments described above and below.
（１）上記説明では、乗客端末４から特定依頼を送信させることで、乗客が特定されたが本開示はこれに限定されず、画像から人物が特定されてもよい。この場合、入出力端末１３にカメラ（図略）を設け、判断結果の入力に先だってカメラに乗客の顔を撮影させればよい。この場合、図９に示す提示画像Ｇ５に撮影ボタンを設け、撮影ボタンを乗客に押させることで入出力端末１３に乗客の顔を撮影させればよい。撮影された乗客の顔の画像データは入出力端末１３から情報処理装置１４を介してサーバ２に送信され、サーバ２の操作者特定部２２１は、この画像データを用いて乗客を特定すればよい。
(1) In the above description, the passenger is identified by transmitting the identification request from the passenger terminal 4, but the present disclosure is not limited to this, and the person may be identified from the image. In this case, the input/
（２）上記説明では、ＱＲコードを乗客端末４に読み取らせた場合、特定依頼は乗客端末４から入出力端末１３及び情報処理装置１４を介してサーバ２に送信されたが、本開示はこれに限定されない。例えば、ＱＲコードを乗客端末４に読み取らせた場合、特定依頼は乗客端末４からサーバ２に直接送信されてもよい。
(2) In the above description, when the QR code is read by the passenger terminal 4, the specific request is transmitted from the passenger terminal 4 to the
（３）上記説明では、サーバ２と外部サーバ３とは別のサーバであるとして説明したが、外部サーバ３の機能はサーバ２が備えていてもよい。この場合、サーバ２が各乗客が所持するポイントを管理することになる。
(3) In the above description, the
（４）上記説明では、判断結果を入力した乗客に対してポイントを付与するとして説明したが、本開示はこれに限定されず、ポイントカードとして乗車カードが採用されるのであれば、車両１の運賃をディスカウントする態様が採用されてもよい。また、商品券等のクーポンを乗客に付与する態様が採用されてもよい。この場合、乗客に後日、クーポンが郵送される態様が採用されてもよいし、百貨店等のカードに電子的にクーポンを記録する態様が採用されてもよい。 (4) In the above description, points are given to passengers who have input the judgment result. A form of discounting the fare may be adopted. Moreover, the mode which gives a coupon, such as a gift certificate, to a passenger may be employ|adopted. In this case, a mode in which the coupon is mailed to the passenger at a later date may be adopted, or a mode in which the coupon is electronically recorded on a card at a department store or the like may be adopted.
（５）上記説明では、提示画像は、入出力端末１３に表示されるものとして説明したが、本開示はこれに限定されず、提示画像は乗客端末４に表示されてもよい。この場合、乗客は自己の乗客端末４から判断結果を入力できるので、当該入力を容易に行うことができる。
(5) In the above description, the presentation image is displayed on the input/
（実施の形態３）
車内に複数の入出力端末１３が設置される態様が採用された場合、複数の乗客により判断結果が入力されることが想定される。この場合、乗客に応じて判断結果が相違すると、どの乗客の判断結果を採用するべきかが困難となる。そこで、実施の形態３は、車内の乗客の中から１人の乗客を特定し、その乗客に判断結果を入力させる。なお、本実施の形態では、入出力端末１３は、複数の座席１ａに対応して複数設けられているものとする。
(Embodiment 3)
When a mode in which a plurality of input/
図１０は、実施の形態３に係る情報処理装置１４が適用された車両１の構成を示すブロック図である。本実施の形態において、実施の形態１との相違点は、プロセッサ１４０に更に特定部１４４が設けられ、且つ、メモリ１７０が情報処理装置１４に設けられている点にある。
FIG. 10 is a block diagram showing the configuration of vehicle 1 to which
メモリ１７０は例えば、半導体メモリで構成され、入力履歴１７１を記憶する。入力履歴１７１は、判断結果を入力した乗客のユーザ識別情報と、判断結果の正否と、判断結果の入力日時とを対応付けて記憶する。ユーザ識別情報としては、例えば、車内センサ１２が取得したセンシングデータから抽出された判断結果を入力した乗客を示す画像の特徴量が採用されればよい。
The
表示情報生成部１４３は、乗客により判断結果が入力されると車内センサ１２が取得したセンシングデータから当該判断結果を入力した乗客を特定する。この場合、表示情報生成部１４３は、判断結果が入力された入出力端末１３の設置位置に対応するセンシングデータの座標を特定し、その座標に対して最も近くに位置する乗客を判断結果を入力した乗客として特定すればよい。
When a judgment result is input by a passenger, the display
そして、表示情報生成部１４３は、判断結果が入力されてから車両１が発車するまでに車内センサ１２で取得されたセンシングデータを分析することで、当該判断結果の正否を判断すればよい。例えば、表示情報生成部１４３は、乗車しそうな人物が居るとの判断結果が入力された場合、入力後、車両１が発車するまでのセンシングデータから乗車した人物が検出できなかった場合、当該判断結果の正誤を「誤」と判定し、センシングデータから乗車人物が検出できた場合、当該判断結果の正誤を「正」と判定する。
Then, the display
一方、表示情報生成部１４３は、乗車しそうな人物が居ないとの判断結果が入力された場合、入力後、車両１が発車するまでのセンシングデータから乗車した人物を検出できなかった場合、当該判断結果の正誤を「正」と判定し、乗車した人物を検出できた場合、当該判断結果の正誤を「誤」と判定する。そして、表示情報生成部１４３は、判断結果を入力した乗客のユーザ識別情報と、判断結果の正誤を示す情報（「正」又は「誤」）と、入力日時とを対応付けて入力履歴１７１に記憶する。
On the other hand, if the display
ここでは、入力履歴１７１は、車両１が今回の運行スケジュールにしたがって運行を開始してからの乗客の判断結果の正誤を記憶するものとする。但し、これは一例であり、入力履歴１７は、今回の運行スケジュールによる判定結果の正誤のみならず、車両１が過去に運行したときの乗客の判断結果の正誤を記憶するものであってもよい。
Here, it is assumed that the
特定部１４４は、車内センサ１２が取得したセンシングデータを通信部１５０を介して取得し、取得したセンシングデータ及び入力履歴１７１を用いて判断結果を入力する１人の乗客を特定する。以下、特定される１人の乗客を特定乗客と記述する。
The specifying
例えば、特定部１４４は、発車時刻になって特定乗客の特定タイミングが到来すると、車内センサ１２が取得したセンシングデータを用いて現在、車内に居る乗客を抽出する。この場合、特定部１４４は、バス停に降車しようとする乗客は抽出する乗客から省けばよい。そして、特定部１４４は、抽出した乗客の判断結果の正誤を入力履歴１７１から読み出し、判断結果の正誤が「正」である数が最も多い乗客を特定乗客として特定すればよい。
For example, when the departure time comes and the specific timing for the specific passenger arrives, the identifying
ここで、判断結果の正誤が「正」である数が最も多い乗客が複数居た場合、特定部１４４は、（１）乗車口の近い方に着座している乗客を特定乗客として特定してもよいし、（２）窓側に着座している乗客を特定乗客として特定してもよいし、（３）年齢に基づいて特定乗客を特定してもよい。（１）、（２）を採用する理由は、乗車口の近くに着座する乗客又は窓側に座っている乗客は乗車口に駆け寄ってくる人物が視認し易いという考えに基づいている。したがって、乗車口の近くに着座する乗客に判断結果を入力する権限を付与することで、判断結果の信頼性を高めることができる。 Here, if there are a plurality of passengers with the largest number of “correct” judgment results, the identification unit 144 (1) identifies the passenger seated closer to the boarding gate as the specific passenger. Alternatively, (2) the passenger seated on the window side may be specified as the specific passenger, or (3) the specific passenger may be specified based on age. The reason for adopting (1) and (2) is based on the idea that a passenger sitting near the boarding gate or a passenger sitting on the window side can easily see a person running towards the boarding gate. Therefore, the reliability of the judgment result can be improved by giving the authority to input the judgment result to the passenger seated near the boarding gate.
（３）の態様を採用する場合、例えば、判断結果に信頼のおける年代の乗客が優先的に特定乗客として特定される手法が採用されればよい。例えば、幼児及び子供であれば、ふざけて判断結果を入力する可能性が高い。また、老人であれば、老化によって認知能力が低下していることもあり、誤った判断結果を入力する可能性が高い。したがって、信頼のおける年代としては、例えば、１５歳～６０歳が採用できる。（３）の態様を採用する場合、特定部１４４は、車内センサ１２のセンシングデータに含まれる各乗客の画像の特徴量から各乗客の年齢を推定すればよい。
When adopting the aspect (3), for example, a method of preferentially specifying as a specific passenger a passenger of a reliable age in the determination result may be adopted. For example, infants and children are more likely to playfully enter judgment results. Also, in the case of an elderly person, there is a high possibility of inputting an erroneous judgment result, partly because cognitive ability has deteriorated due to aging. Therefore, for example, 15 to 60 years old can be adopted as a reliable age. When adopting the aspect (3), the
なお、入力履歴１７１が車両１の運行開始直後は入力履歴１７１には判断結果の正誤が記憶されていない。この場合、特定部１４４は、車内の乗客の中からランダムに１の乗客を特定乗客として特定してもよいし、（１）～（３）の態様を用いて特定乗客を特定してもよい。
Note that the
ここでは、特定部１４４は、まず、入力履歴１７１を参照して特定乗客を特定するとして説明したが、本開示はこれに限定されず、入力履歴１７１を参照せずに、上記の（１）～（３）のいずれかの１つの態様を用いて特定乗客を特定してもよいし、（１）～（３）の態様を組み合わせて特定乗客を特定してもよい。（１）～（３）の態様を組み合わせる場合、（１）～（３）の態様の各々について評価値を算出し、各評価値の合計値が最も高い乗客が特定顧客として特定されればよい。
Here, the
図１１は、実施の形態３に係る乗客判断処理を示すフローチャートである。なお、図１１において、図４と同じ処理には同じ符号を付して説明を省く。 FIG. 11 is a flow chart showing passenger determination processing according to the third embodiment. In FIG. 11, the same processing as in FIG. 4 is given the same reference numerals and the description thereof is omitted.
Ｓ１６２に続くＳ１８１では、特定部１４４は、入力履歴１７１及びセンシングデータを用いて、判断結果を入力する特定乗客を特定する。
In S181 following S162, the identifying
Ｓ１８２では、表示情報生成部１４３は、特定乗客に対応する入出力端末１３を特定し、その入出力端末１３に対してのみ提示画像を表示させる。ここで、対応する入出力端末１３とは、特定乗客が着座する座席１ａの前列の座席１ａの背面、又は、特定乗客が着座する座席１ａの近くのパイプ１ｂに取り付けられた入出力端末１３が採用される。
In S182, the display
これにより、特定乗客のみが判断結果を入力することが可能となる。そして、特定乗客が提示画像に対して判断結果を入力すると、図４で説明したＳ１６４以降の処理が実行される。 This allows only the specific passenger to input the judgment result. Then, when the specific passenger inputs the determination result for the presentation image, the processes after S164 described with reference to FIG. 4 are executed.
このように、本実施の形態によれば、特定乗客として特定された乗客のみが判断結果を入力することができるので、例えば、過去の判断結果から信頼性の高い乗客に判断を委ねることができ、判断の信頼性を高めることができる。 As described above, according to the present embodiment, only the passenger specified as the specific passenger can input the judgment result. , can increase the reliability of judgment.
（実施の形態３の変形例）
（１）図１１のＳ１８２では、特定乗客に対応する入出力端末１３にのみ提示画像を表示するとして説明したが、本開示はこれに限定されない。例えば、全ての入出力端末１３に提示画像を表示させ、特定乗客の判断結果の入力のみを受け付ける態様が採用されてもよい。この場合、特定部１４４は、予め特定乗客の画像の特徴量を入出力端末１３に送信しておく。そして、入出力端末１３は、カメラによって提示画像を操作する乗客を撮影し、撮影した乗客の画像の特徴量と予め送信された特定乗客の画像の特徴量とを照合することで、操作した乗客が特定乗客であるか否かを判定する。そして、入出力端末１３は、特定乗客と判定した場合、その乗客からの操作を受け付け、特定乗客と判断しなかった場合、その乗客からの操作を受け付けなければよい。
(Modification of Embodiment 3)
(1) In S182 of FIG. 11, the presentation image is displayed only on the input/
（２）図１１のＳ１８２では、特定乗客が所持する乗客端末４に提示画像を表示させてもよい。この場合、情報処理装置１４のメモリ１７０には事前に特定乗客の乗客端末４の通信アドレスが記憶されているものとする。情報処理装置１４は、例えば、乗車時に乗客に対してユーザ登録を課すことでメモリ１７０に乗客端末４の通信アドレスを記憶させればよい。
(2) In S182 of FIG. 11, the presentation image may be displayed on the passenger terminal 4 possessed by the specific passenger. In this case, it is assumed that the
（実施の形態４）
実施の形態４は、車両１のプロセッサ１４０が実行していた処理をサーバ２で実行させるものである。図１２は、実施の形態４に係る情報処理装置１４が適用された車両管理システムの構成を示すブロック図である。
(Embodiment 4)
Embodiment 4 causes the
図１２において、図７との相違点は、情報処理装置１４からプロセッサ１４０が省かれ、プロセッサ１４０が備えていた運行制御部１４１、車内乗客検出部１４２、及び表示情報生成部１４３をサーバ２に設けた点にある。 In FIG. 12, the difference from FIG. It is at the established point.
具体的には、サーバ２のプロセッサ２２は、図７に示す操作者特定部２２１及びインセンティブ付与部２２２に加えて、運行制御部２２３、車内乗客検出部２２４、及び表示情報生成部２２５を備える。これらのブロックの詳細は上述した実施の形態のものと同じである。
Specifically, the
具体的には、通信部１５０は、車外センサ１１及び車内センサ１２のそれぞれが取得したセンシングデータをサーバ２に送信し、サーバ２の通信部２１は、センシングデータを受信する。そして、運行制御部２２３、車内乗客検出部２２４、及び表示情報生成部２２５は、それぞれ、通信部２１が受信したセンシングデータを用いて各種の処理を実行する。また、表示情報生成部２２５は、生成した提示画像を通信部２１を用いて車両１に送信させることで、入出力端末１３に提示画像を表示させる。また、運行制御部２２３は、種々の制御コマンドを通信部２１を用いて車両１に送信することで、車両１の動作を制御する。また、入出力端末１３に入力された乗客の判断結果は、通信部１５０を介してサーバ２に送信され、運行制御部２２３は、この判断結果に応じてドア１６の開閉を制御する。
Specifically, the
このように、本実施の形態では、情報処理装置１４の機能をサーバ２に設けた場合であっても、上述した実施の形態と同じ効果が得られる。
As described above, in this embodiment, even if the functions of the
本開示は、ドライバーレスの自動運転車を利用したライドシェアサービスにとって有用である。 INDUSTRIAL APPLICABILITY The present disclosure is useful for ride-sharing services using driverless self-driving vehicles.
１ ：車両
２ ：サーバ
３ ：外部サーバ
４ ：乗客端末
１１ ：車外センサ
１２ ：車内センサ
１３ ：入出力端末
１４ ：情報処理装置
１５ ：車両制御部
１６ ：ドア
１３１ ：通信部
１３２ ：入出力部
１４０ ：プロセッサ
１４１ ：運行制御部
１４２ ：車内乗客検出部
１４３ ：表示情報生成部
１４４ ：特定部
１５０ ：通信部
１７０ ：メモリ
１７１ ：入力履歴
２２１ ：操作者特定部
２２２ ：インセンティブ付与部
Ｇ１，Ｇ２，Ｇ３，Ｇ４，Ｇ５，Ｇ６ ：提示画像
Ｌ１２１ ：強調画像
Ｌ１２３ ：動きベクトル画像
1 : Vehicle 2 : Server 3 : External Server 4 : Passenger Terminal 11 : Exterior Sensor 12 : Interior Sensor 13 : Input/Output Terminal 14 : Information Processing Device 15 : Vehicle Control Unit 16 : Door 131 : Communication Unit 132 : Input/Output Unit 140 : Processor 141 : Operation control unit 142 : In-vehicle passenger detection unit 143 : Display information generation unit 144 : Identification unit 150 : Communication unit 170 : Memory 171 : Input history 221 : Operator identification unit 222 : Incentive provision unit G1, G2, G3 , G4, G5, G6: presentation image L121: enhanced image L123: motion vector image
Claims (13)
前記第１センシングデータに基づいて提示情報を生成し、前記車両内に存在する提示装置に前記提示情報を提示させる提示制御部と、
前記車両内に存在する入力装置を介して前記提示情報の提示に対する入力データを取得する第２取得部と、
前記第２取得部が取得した前記入力データに応じて、前記車両への人の乗車を制御する乗車制御部と、を備え、
前記提示制御部は、前記第１センサにより撮影された動画像であって前記車両に乗車しようとする人を含む前記動画像を含む前記提示情報を前記提示装置に表示する、
情報処理装置。 A first acquisition unit that acquires first sensing data from a first sensor that senses an object outside the vehicle of automatic operation ;
a presentation control unit that generates presentation information based on the first sensing data and causes a presentation device present in the vehicle to present the presentation information;
a second acquisition unit that acquires input data for presentation of the presentation information via an input device present in the vehicle;
a boarding control unit that controls boarding of a person on the vehicle according to the input data acquired by the second acquisition unit ;
The presentation control unit displays, on the presentation device, the presentation information including the moving image captured by the first sensor and including a person about to board the vehicle.
Information processing equipment.
前記入力データは、操作画像に対する操作を示す操作データを含み、
前記提示制御部は、前記操作画像を生成する
請求項１記載の情報処理装置。 The presentation information includes an image,
the input data includes operation data indicating an operation on the operation image;
The information processing apparatus according to claim 1, wherein the presentation control section generates the operation image.
前記乗車制御部は、前記操作データが示す操作に応じてドアを制御させる
請求項２記載の情報処理装置。 The operation image includes an image for operating the entrance door of the vehicle,
The information processing apparatus according to claim 2, wherein the boarding control unit controls the door according to the operation indicated by the operation data.
前記乗車制御部は、前記操作データが示す操作に応じて前記車両の乗車口のドアを制御させる
請求項２又は３に記載の情報処理装置。 The operation image includes an image for selecting whether or not there is a person trying to get on the vehicle,
The information processing apparatus according to claim 2 or 3, wherein the boarding control unit controls a boarding door of the vehicle according to the operation indicated by the operation data.
請求項２～４のいずれか１項に記載の情報処理装置。 The information processing apparatus according to any one of claims 2 to 4, wherein the presentation information includes the moving image that emphasizes a person who is about to board the vehicle .
請求項２～５のいずれか１項に記載の情報処理装置。 6. The information processing apparatus according to any one of claims 2 to 5, wherein the presentation information includes the moving image showing movement of a person trying to get on the vehicle .
前記第２センシングデータを用いて前記車両内の人を特定する特定部を更に備え、
前記提示制御部は、特定された前記人に前記提示情報を提示させる
請求項１～６のいずれか１項に記載の情報処理装置。 The first acquisition unit further acquires second sensing data from a second sensor attached to the vehicle for sensing inside the vehicle,
further comprising an identification unit that identifies a person in the vehicle using the second sensing data;
The information processing apparatus according to any one of claims 1 to 6, wherein the presentation control section causes the identified person to present the presentation information.
請求項７記載の情報処理装置。 The information processing apparatus according to Claim 7, wherein the identifying unit identifies a person from a history of the input data.
前記第２センシングデータを用いて前記車両内に人がいるか否かを判定する判定部を更に備え、
前記提示制御部は、前記判定部が前記車両内に前記人がいると判定した場合に前記提示情報を提示させる
請求項１～８のいずれか１項に記載の情報処理装置。 The first acquisition unit further acquires second sensing data from a second sensor attached to the vehicle for sensing inside the vehicle,
Further comprising a determination unit that determines whether there is a person in the vehicle using the second sensing data,
The information processing apparatus according to any one of claims 1 to 8, wherein the presentation control section causes the presentation information to be presented when the determination section determines that the person is present in the vehicle.
特定された前記人にインセンティブを付与するインセンティブ付与部と、を更に備える
請求項１～９のいずれか１項に記載の情報処理装置。 an operator identification unit that identifies a person who has made an input to the input device;
The information processing apparatus according to any one of claims 1 to 9, further comprising an incentive granting unit that grants an incentive to the specified person.
前記第２取得部は、前記通信端末から通信を介して前記入力データを取得する
請求項１～１０のいずれか１項に記載の情報処理装置。 The input device includes a communication terminal carried by a person in the vehicle and communicating with the information processing device,
The information processing apparatus according to any one of claims 1 to 10, wherein the second acquisition unit acquires the input data from the communication terminal via communication.
前記第２取得部は、前記提示情報を前記通信端末に送信し、
前記通信端末は、送信された前記提示情報を提示する
請求項１～１１のいずれか１項に記載の情報処理装置。 The presentation device includes a communication terminal carried by a person in the vehicle and communicating with the information processing device,
The second acquisition unit transmits the presentation information to the communication terminal,
The information processing apparatus according to any one of claims 1 to 11, wherein the communication terminal presents the transmitted presentation information.
自動運転の車両の外の物体をセンシングする第１センサから第１センシングデータを取得し、
前記第１センシングデータに基づいて提示情報を生成し、前記車両内に存在する提示装置に前記提示情報を提示させ、
前記車両内に存在する入力装置を介して前記提示情報の提示に対する入力データを取得し、
前記入力データに応じて、前記車両への人の乗車を制御するための制御情報を出力し、
前記提示では、前記第１センサにより撮影された動画像であって前記車両に乗車しようとする人物を含む前記動画像を含む前記提示情報を前記提示装置に表示する、
情報処理方法。 the computer
Acquiring first sensing data from a first sensor that senses an object outside the autonomous vehicle;
generating presentation information based on the first sensing data, causing a presentation device present in the vehicle to present the presentation information;
Acquiring input data for presentation of the presentation information via an input device present in the vehicle;
outputting control information for controlling boarding of a person in the vehicle according to the input data;
In the presentation, the presentation information including the moving image captured by the first sensor and including a person about to board the vehicle is displayed on the presentation device.
Information processing methods.
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US16/552,529 US11455835B2 (en) | 2018-08-30 | 2019-08-27 | Information processing apparatus and information processing method |
| CN201910793695.6A CN110874077A (en) | 2018-08-30 | 2019-08-27 | Information processing apparatus and information processing method |
| EP19193788.7A EP3617941A1 (en) | 2018-08-30 | 2019-08-27 | Information processing apparatus and information processing method |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018161784 | 2018-08-30 | ||
| JP2018161784 | 2018-08-30 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020038608A JP2020038608A (en) | 2020-03-12 |
| JP7265404B2 true JP7265404B2 (en) | 2023-04-26 |
Family
ID=69738123
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019081257A Active JP7265404B2 (en) | 2018-08-30 | 2019-04-22 | Information processing device and information processing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7265404B2 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7491241B2 (en) * | 2021-03-08 | 2024-05-28 | トヨタ自動車株式会社 | CONTROL DEVICE, SYSTEM, VEHICLE, AND CONTROL METHOD |
| JP7480770B2 (en) | 2021-12-22 | 2024-05-10 | トヨタ自動車株式会社 | Vehicle image processing device and vehicle |
| JP7226597B1 (en) * | 2022-01-17 | 2023-02-21 | いすゞ自動車株式会社 | door open/close controller |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006295267A (en) | 2005-04-06 | 2006-10-26 | Navitime Japan Co Ltd | Information distribution system, communication terminal, and operating program therefor |
| JP2017024652A (en) | 2015-07-27 | 2017-02-02 | トヨタ自動車株式会社 | Vehicular seat control device |
| JP2017076324A (en) | 2015-10-16 | 2017-04-20 | 株式会社デンソー | Display controller and vehicle controller |
| WO2018037954A1 (en) | 2016-08-26 | 2018-03-01 | ソニー株式会社 | Moving object control device, moving object control method, and moving object |
| JP2018073351A (en) | 2016-11-04 | 2018-05-10 | 本田技研工業株式会社 | Vehicle control system, vehicle control method, and vehicle control program |
| JP2018133015A (en) | 2017-02-17 | 2018-08-23 | コガソフトウェア株式会社 | Operation information production server, operation information production method, and operation information production program |
-
2019
- 2019-04-22 JP JP2019081257A patent/JP7265404B2/en active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006295267A (en) | 2005-04-06 | 2006-10-26 | Navitime Japan Co Ltd | Information distribution system, communication terminal, and operating program therefor |
| JP2017024652A (en) | 2015-07-27 | 2017-02-02 | トヨタ自動車株式会社 | Vehicular seat control device |
| JP2017076324A (en) | 2015-10-16 | 2017-04-20 | 株式会社デンソー | Display controller and vehicle controller |
| WO2018037954A1 (en) | 2016-08-26 | 2018-03-01 | ソニー株式会社 | Moving object control device, moving object control method, and moving object |
| JP2018073351A (en) | 2016-11-04 | 2018-05-10 | 本田技研工業株式会社 | Vehicle control system, vehicle control method, and vehicle control program |
| JP2018133015A (en) | 2017-02-17 | 2018-08-23 | コガソフトウェア株式会社 | Operation information production server, operation information production method, and operation information production program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020038608A (en) | 2020-03-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11455835B2 (en) | Information processing apparatus and information processing method | |
| JP7265404B2 (en) | Information processing device and information processing method | |
| CN110103878B (en) | Method and device for controlling unmanned vehicle | |
| EP3041775B1 (en) | Elevator dispatch using facial recognition | |
| JP5191658B2 (en) | Elevator control device | |
| KR101869391B1 (en) | Intelligent parking management system | |
| JP7110996B2 (en) | Vehicle information processing device and vehicle information processing method | |
| CN109311622B (en) | Elevator system and car call estimation method | |
| JP7020560B2 (en) | Notification device, notification control device, notification system, notification method and program | |
| WO2020157531A1 (en) | Boarding permission determination device and boarding permission determination method | |
| JP5403526B2 (en) | Elevator group management control system | |
| JP7172464B2 (en) | Vehicles and vehicle operation methods | |
| KR101757750B1 (en) | Unified notice method for congestion information of subway | |
| JP2021039582A (en) | Guidance system, information processing device, guidance method, and program | |
| KR101815885B1 (en) | Traffic information system for visual handicapped person, method for controlling thereof and recording medium for performing the method | |
| JP7294538B2 (en) | building traffic control system | |
| JP7430080B2 (en) | Management devices, management methods, and programs | |
| JP7448682B2 (en) | Automatic door device, display control device, display control method, and display control program | |
| JP7438800B2 (en) | Management devices, management methods, and programs | |
| KR102085645B1 (en) | Passenger counting system and method | |
| JP7327560B1 (en) | elevator group control system | |
| US20220207577A1 (en) | Shared vehicle and method of controlling the same | |
| JP7312635B2 (en) | Vehicle authentication method and vehicle authentication device | |
| JP5737752B2 (en) | Image display system, image display apparatus, image display method, and program | |
| JP7472369B1 (en) | Elevator System |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211109 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221227 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230131 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230329 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230411 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230414 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7265404 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |