CN118163743A - 用于对车辆中的乘客进行监测的方法和*** - Google Patents

用于对车辆中的乘客进行监测的方法和*** Download PDF

Info

Publication number
CN118163743A
CN118163743A CN202311690713.0A CN202311690713A CN118163743A CN 118163743 A CN118163743 A CN 118163743A CN 202311690713 A CN202311690713 A CN 202311690713A CN 118163743 A CN118163743 A CN 118163743A
Authority
CN
China
Prior art keywords
passenger
seat
vehicle
alarm
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311690713.0A
Other languages
English (en)
Inventor
B·勒泽纳
K·哈默
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of CN118163743A publication Critical patent/CN118163743A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/593Recognising seat occupancy
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Health & Medical Sciences (AREA)
  • Alarm Systems (AREA)
  • Emergency Alarm Devices (AREA)

Abstract

提出了一种用于对车辆(20)中的乘客(24)进行监测的方法(30),该方法具有下述步骤:接收观察设备(22)的数据和/或乘客(24)在车辆(20)的本地网络中的登录的数据;借助于所接收的数据来鉴别车辆(20)中的乘客(24);将乘客(24)与车辆(20)中的座位相关联;在可能更换座位至新座位的情况下跟踪乘客(24);如果识别到更换座位至新座位,则更新乘客(24)与新座位的关联;识别乘客(24)的输入和/或手势,其中,查明乘客(24)是否触发或想要触发警报;如果识别到乘客(24)想要触发或已经触发警报,则将乘客(24)以及当前座位的相关信息发送给外部服务器。

Description

用于对车辆中的乘客进行监测的方法和***
技术领域
本发明涉及用于对车辆中的乘客进行监测的一种方法和一种***。
背景技术
由DE 102014214352 A1已知用于运行乘员观察***的一种方法和一种布置结构。
发明内容
提出了一种用于对车辆中的乘客进行监测的方法,该方法具有下述步骤:
接收观察设备的数据和/或乘客在车辆的本地网络中的登录的数据,
借助于所接收的数据来鉴别车辆中的乘客,
将乘客与车辆中的座位相关联,
在可能更换座位至新座位的情况下跟踪乘客,
如果识别到更换座位至新座位,则更新乘客与新座位的关联,
识别乘客的输入和/或手势,其中,查明乘客是否触发或想要触发警报,
如果识别到乘客想要触发或已经触发警报,则将乘客以及当前座位的相关信息发送给外部服务器。
本发明的优点在于,能够可靠地鉴别乘客并且追踪其座位。由此能够在触发警报的情况下有针对性地救助触发了警报的乘客。因为能够尤其快速和/或有针对性地救助例如感觉到威胁或遭受健康紧急情况的人员,所以由此能够尤其提高车辆中的安全性。以有利的方式,乘客由此能够感觉到更加安全和更加舒适。由此能够尤其提高车辆中的安全性。
在一种示例性的实施方案中,在对车辆中的乘客的鉴别的步骤中能够提供关于乘客的名字、性别、年龄和/或照片的信息。在一种继续改进方案中,在将乘客以及当前座位的相关信息发送给外部服务器的步骤中,能够发送关于乘客、乘客的行程、可能的另外的乘客、和/或车辆的信息。如果乘客触发警报,则能够借助于信息来以有利的方式有针对性地和/或可靠地救助该乘客。由此能够尤其提高针对车辆中乘客的安全性。
在一种有利的设计方案中,该方法具有借助于观察设备来观察乘客的另外的步骤。由此能够尤其安全地和/或可靠地产生观察数据,借助于该观察数据能够鉴别车辆中的乘客和/或将其与座位相关联。此外,在可能更换座位的情况下能够尤其可靠地观察或跟踪乘客。由此能够尤其安全地和/或可靠地监测乘客。
以有利的方式,为了关于可能更换座位来跟踪乘客,能够估计乘客的姿势。借助于对姿势的估计能够尤其安全地和/或可靠地识别出座位的更换。
在一种示例性的设计方案中,该方法此外能够具有,如果识别到乘客触发警报则输出信息的步骤,其中,借助于一个或多个用户接口来输出信息。在一种继续改进方案中,一个或多个用户接口能够构造为输出仪器并且/或者构造为相对于乘客的智能电话的接口。由此能够尤其安全地和/或可靠地给乘客输出信息。由此能够尤其安全地和/或可靠地通知乘客。
以有利的方式,所输出的信息能够仅对于已经触发了警报的乘客可见。由此其他乘客无法识别出,该乘客已经触发了警报。这例如能够在威胁情形中是有利的,因为威胁该乘客的人员不会意识到已经触发了警报,否则由此可能会恶化情况。由此能够尤其提高车辆中的安全性。
在一种继续改进方案中,该方法能够具有根据所鉴别的乘客来适配座位的配置的步骤。由此能够将座位的配置个性化地与乘客相适配。此外,在乘客更换到其他座位的情况下能够尤其同样适配新座位的配置。由此能够以有利的方式提高针对乘客的舒适性。由此,即使在车辆内的乘客已经更换座位之后,在具有多个座位的车辆内部空间中,乘客也能够以有利的方式实现不受限制地使用布置在座位处的用户接口和与此相关的服务。
此外提出了,用于对车辆中的乘客进行监测的***包括接收单元和计算单元以及发送设备,该接收单元构造用于接收观察设备的数据和/或乘客在车辆的本地网络中的登录的数据,该计算单元构造用于:鉴别车辆中的乘客;将乘客与车辆中的座位相关联;关于可能更换座位至新座位来跟踪乘客;如果识别到更换座位至新座位,则更新乘客与新座位的关联;以及识别乘客的输入和/或手势,其中,查明乘客是否触发或想要触发警报;该发送设备构造用于,如果识别到乘客想要触发或已经触发警报,则将乘客以及当前座位的相关信息发送给外部服务器。
本发明的优点在于,能够可靠地鉴别乘客并且尤其在更换的情况下追踪其座位。由此能够在触发警报时有针对性救助触发了警报的乘客。因为能够尤其快速和/或有针对性地救助例如感觉到威胁或遭受健康紧急情况的人员,所以由此能够尤其提高车辆中的安全性。由此能够尤其提高车辆中的安全性。
在一种继续改进方案中,***能够包括用于观察乘客的观察设备,其中,能够借助于观察设备的数据来鉴别乘客。由此能够尤其安全地和/或可靠地观察乘客,由此能够尤其安全地和/或可靠地鉴别车辆中的乘客并且/或者将其与座位相关联。此外,在可能更换座位的情况下能够以有利的方式可靠地观察或跟踪乘客。
在一种示例性的实施方案中,***能够包括一个或多个用户接口,其中,乘客能够借助于一个或多个用户接口来进行输入,并且/或者其中,能够借助于一个或多个用户接口来为乘客显示信息。在一种继续改进方案中,一个或多个用户接口能够构造为输出仪器并且/或者构造为相对于乘客的智能电话的接口。由此能够尤其安全地和/或可靠地给乘客输出信息。由此能够尤其安全地和/或可靠地通知乘客。
附图说明
本发明的实施例在附图中示出并且在下文的说明书中更详细地阐释。对于不同图中所示出的且起类似作用的元件使用相同的附图标记,其中,省去对元件的重复说明。其中:
图1示出了具有用于观察车辆乘员的设备的车辆的示意图;
图2示出了按照本发明的一种实施例的方法的示意图;
图3示出了按照本发明的一种实施例的方法的示意图;
图4示出了按照本发明的一种实施例的方法的示意图;
图5示出了按照本发明的一种实施例的方法的示意图;
图6示出了按照本发明的一种实施例的***的示意图;
图7示出了按照本发明的一种实施例的***的示意图;
图8示出了按照本发明的一种实施例的方法的示意图;
图9示出了按照本发明的一种实施例的车辆的内部空间的示意图;
图10示出了按照本发明的一种实施例的车辆的内部空间的示意图;
图11示出了按照本发明的一种实施例的车辆座椅的示意图。
具体实施方式
图1示出了车辆20、例如机动车辆的示意图,其具有用于观察一个或多个乘客24或车辆乘员24的观察设备22。车辆能够尤其构造用于输送多个乘客,车辆例如能够是出租车、轿车、共享自主车辆、机器人出租车、运输车辆、公共汽车、或用于运输多个乘客的另外的车辆。车辆例如也能够构造为火车和/或有轨电车。车辆20尤其具有内部空间26或车辆内部空间26,其中,在车辆内部空间26中尤其能够布置有用于一个或多个车辆乘员24的一个或多个座椅27。此外,车辆20具有观察设备22,该观察设备用于观察车辆内部空间26和/或一个或多个车辆乘员24、例如驾驶员和/或副驾驶员和/或一个或多个另外的乘客。观察设备22也能够被称为观察***、驾驶员监控***、乘员观察***和/或被称为监测***。观察设备22例如能够构造用于,对车辆乘员24的视线方向、身体姿态、和/或头部或面部的或眼睛的位置、或者车辆乘员24的疲劳状态和/或其他生命体征进行检测。此外,例如能够对车辆乘员24的身份进行检测。
观察设备22能够尤其布置在仪表板中、仪表指示板中、方向盘中、车顶处、窗板处、后视镜处或车柱处,例如车辆20的A柱和/或B柱处,或者布置在车辆20中的其他部位处。
为了观察车辆乘员24,观察设备22能够具有拍摄单元。在一种继续改进方案中,观察设备22能够具有用于发送光束、尤其红外线的照明单元。替代地,观察设备22能够不具有单独的照明单元,并且借助于来自周围环境的光来对车辆内部空间或车辆乘员进行照明。
照明单元尤其朝车辆乘员24的方向并且因此朝车辆座椅27的方向指向,以便用光束、尤其用红外线来照射车辆乘员24。换句话说,能够借助于照明单元来朝车辆乘员24的方向发送光束、尤其红外线。照明单元例如能够构造为发光单元、发光元件、发光二极管、LED、OLED和/或激光二极管,并且/或者具有发光单元、发光元件、发光二极管、LED、OLED和/或激光二极管。
拍摄单元例如能够构造为图像拍摄单元,例如构造为传感器或摄像机,尤其构造为红外摄像机模块,其中,拍摄单元朝车辆乘员24的方向并且因此朝车辆座椅27的方向指向,以便在视觉方面检测车辆乘员24。通过作为红外摄像机模块的构造方案,也能够在夜间执行观察,而不会使车辆乘员24被照亮并且由此受到干扰或目眩。
换句话说,观察设备22构造用于观察车辆的车辆内部空间。观察设备22能够具有照明单元以及拍摄单元,该照明单元用于朝车辆内部空间的方向发送光束、例如红外线,该拍摄单元用于记录光束、例如红外线。由照明单元所发送的光束优选能够在车辆内部空间之处或之中反射,其中,所反射的光束能够朝拍摄单元的方向转向。
此外,观察设备22具有控制单元28或测评单元28或计算单元28,以用于操控照明单元和/或拍摄单元,并且/或者用于处理借助于拍摄单元所记录的数据。
图2示出了按照本发明的一种实施例的用于对车辆中的乘客进行监测的方法30的示意图。车辆例如能够根据按照图1的车辆来构造。方法30能够借助于根据按照图6和/或图7的***的***来实施。
在方法30的第一步骤32中,接收观察设备的数据和/或乘客在车辆的本地网络中的登录的数据。例如能够借助于观察设备来记录或查明观察设备的数据。车辆例如能够具备本地网络,其中,乘客能够在本地网络中登录。乘客例如能够借助于其智能电话来在本地网络中登录。在第一步骤32中能够接收由此形成的数据。
在方法30的第二步骤34中,借助于所接收的数据来鉴别车辆中的乘客。例如能够借助于测评算法、尤其图像测评算法来鉴别乘客。鉴别例如能够通过面部识别、指纹传感器、登录过程或另外的方式来实现。以有利的方式,通过对乘客的鉴别能够提供关于乘客的名字、性别、年龄和/或照片的信息。在一种继续改进方案中,能够结合对身份的关联来估计乘客的姿势。姿势是代表性的身体部位的坐标集,并且因此是具有降低的信息量的抽象化概念。
优选乘客例如能够创建具有其数据的用户帐号,其中,尤其对其面部、其身体和/或其姿势进行学习。由此能够借助于所学习的数据来鉴别乘客。
在方法30的第三步骤36中,将乘客与车辆中的座位相关联。以有利的方式,能够查明乘客的座位号或者说座位的编号。换句话说,能够查明乘客坐在或者说已经就座在哪个座椅上。
在方法30的第四步骤38中,在可能更换座位至新座位的情况下跟踪乘客。换句话说,能够跟踪车辆中的乘客。因此能够鉴别出乘客何时更换其座位。为了关于更换座位来跟踪乘客,能够尤其使用观察设备的所更新的数据。换句话说,能够测评观察设备的数据,由此识别出乘客更换或已经更换其座位。
优选为了关于可能更换座位来跟踪乘客而能够估计乘客的姿势。姿势尤其是对人的抽象化。能够以有利的方式使用姿势,以便跟踪乘客。如果乘客更换座位,则乘客于是必须运动。能够尤其事先学习一个或多个姿势或者说姿势的更换、例如人员的运动。一种学习尤其用于从所有视角并且在所有可能的身体姿态的情况下来进行稳健的人员识别。
在方法30的第五步骤40中,如果识别到更换座位至新座位,则更新乘客与新座位的关联。如果乘客更换座位,则于是在该第五步骤中将乘客与新座位相关联。换句话说,识别到乘客已经更换至新座位,其中,将该座位与乘客相关联。以有利的方式,将乘客与具有新座位号的新座位相关联。
在方法30的第六步骤42中,识别乘客的输入和/或手势,其中,查明乘客是否触发或想要触发警报。乘客例如可能按压按键、说出特定的代码字、和/或实施规定的手势。能够识别这一点,由此查明乘客想要触发警报。如果乘客感觉受到威胁、因此处于危险情况中,并且/或者如果乘客遭受健康紧急情况,则该乘客于是例如能够触发警报。所触发的警报例如能够转接至外部服务器和/或车辆的提供商,并且/或者转接至安全服务供应商,并且/或者转接至警方,并且/或者转接给紧急情况服务部门。
在方法30的第七步骤44中,如果识别到乘客想要触发或已经触发警报,则将乘客以及当前座位的相关信息发送给外部服务提供商。优选乘客以及当前座位的相关信息能够是关于乘客、乘客的行程、可能的另外的乘客、和/或车辆的信息。当前座位能够是原座位或新座位。
外部服务提供商例如能够构造为车辆的提供商、和/或安全服务供应商、和/或警方、和/或紧急情况服务部门。
图3示出了按照本发明的一种实施例的用于对车辆中的乘客进行监测的方法30的示意图。车辆例如能够根据按照图1的车辆来构造。方法30能够借助于根据按照图6和/或图7的***的一种***来实施。按照图3的方法30例如能够根据按照图2的方法30来构造。因此,按照图3的方法30能够尤其具有按照图2的方法30的步骤,因此具有第一步骤32、第二步骤34、第三步骤36、第四步骤38、第五步骤40、第六步骤42和第七步骤44。
此外,按照图3的方法30具有第八步骤46。在方法30的第八步骤46中,借助于观察设备来观察一个或多个乘客。第八步骤46能够尤其在第一步骤32之前实施。作为替代方案或附加方案,第八步骤46能够持续地在整个方法期间实施。因此,观察设备例如能够持续地提供车辆内部空间的数据。观察设备例如能够根据按照图1的观察设备来构造。借助于观察设备能够查明或创建数据或者说观察数据,其中,在第一步骤32中接收这些数据。借助于这些数据例如能够鉴别乘客并且/或者将其与座位相关联。
图4示出了按照本发明的一种实施例的用于对车辆中的乘客进行监测的方法30的示意图。车辆例如能够根据按照图1的车辆来构造。方法30能够借助于根据按照图6和/或图7的***的一种***来实施。按照图4的方法30例如能够根据按照图2和/或图3的方法30来构造。因此,按照图4的方法30能够尤其具有按照图2的方法30的步骤,因此具有第一步骤32、第二步骤34、第三步骤36、第四步骤38、第五步骤40、第六步骤42和第七步骤44。在一种继续改进方案中,按照图4的方法30能够尤其具有按照图3的方法30的第八步骤46。
此外,按照图4的方法30具有第九步骤48。在方法30的第九步骤48中,如果识别到乘客触发警报则输出信息,其中,借助于一个或多个用户接口来输出信息。第九步骤48能够尤其在第七步骤44之后实施。例如能够输出,已经识别到警报和/或救助正在途中。作为替代方案或附加方案,能够输出操作指示。
以有利的方式,一个或多个用户接口能够构造为输出仪器、相对于输出仪器的接口、和/或相对于乘客的个人智能电话的接口。输出仪器例如能够构造为显示设备或扬声器。
在一种继续改进方案中,所输出的信息能够仅对于已经触发了警报的乘客可见。例如能够仅在位于已经触发了警报的乘客的视场范围中的显示设备上显示信息。作为替代方案或附加方案,能够在乘客的智能电话上输出、例如显示信息。
图5示出了按照本发明的一种实施例的用于对车辆中的乘客进行监测的方法30的示意图。车辆例如能够根据按照图1的车辆来构造。方法30能够借助于根据按照图6和/或图7的***的一种***来实施。按照图5的方法30例如能够根据按照图2、图3和/或图4的方法30来构造。因此,按照图5的方法30能够尤其具有按照图2的方法30的步骤,因此具有第一步骤32、第二步骤34、第三步骤36、第四步骤38、第五步骤40、第六步骤42和第七步骤44。在一种继续改进方案中,按照图5的方法30能够尤其具有按照图3的方法30的第八步骤46。在一种继续改进方案中,按照图5的方法30能够尤其具有按照图4的方法30的第九步骤48。
此外,按照图5的方法30具有第十步骤50。在方法30的第十步骤50中,根据所鉴别的乘客来适配座位的配置。例如能够适配对座椅的设定、靠背的高度和/或倾斜度、和/或对娱乐***的设定。座位或座位的配置例如能够按照图10来构造。
图6示出了按照本发明的一种实施例的用于对车辆中的乘客进行监测的***60的示意图。借助于***60例如能够实施按照图2、图3、图4和/或图5的方法。
***60具有接收单元62,其中,接收单元62构造用于接收观察设备的数据和/或乘客在车辆的本地网络中的登录的数据。借助于接收单元62进行的接收例如能够根据按照图2、图3、图4和/或图5的方法的第一步骤来实施。以有利的方式,能够持续地接收观察设备的数据。
此外,***60包括计算单元64,其中,计算单元64构造用于:尤其按照该方法的第二步骤来鉴别车辆中的乘客;尤其按照方法的第三步骤来将乘客与车辆中的座位相关联;尤其按照方法的第四步骤,关于可能更换座位至新座位来跟踪乘客;尤其按照方法的第五步骤,如果识别到更换座位至新座位,则更新乘客与新座位的关联;并且尤其按照方法的第六步骤来识别乘客的输入和/或手势,其中,查明是否乘客触发或想要触发警报。为此,能够在计算单元64上实施一种测评算法或特定的测评算法。例如能够将存储器66的数据供应给计算单元64。例如能够在存储器66上存储用户配置文件(Nutzerprofile)。例如能够借助于机器学习来对用户配置文件进行学习。
此外,***60包括发送设备68,该发送设备构造用于,尤其按照方法的第七步骤,如果识别到乘客想要触发或已经触发警报,则将乘客以及当前座位的相关信息发送给外部服务器。当前座位能够是原座位或新座位。
在一种继续改进方案中,***能够包括相对于一个或多个用户接口的接口70。用户接口例如能够布置在车辆中或车辆处,例如布置在座椅处。作为替代方案或附加方案,用户接口能够构造为乘客的智能电话。乘客能够尤其借助于一个或多个用户接口来进行输入。乘客例如能够通过用户接口来触发警报,其中,通过接口来传递该警报。作为替代方案或附加方案,能够借助于一个或多个用户接口来为乘客显示信息。
在一种继续改进方案中,***此外能够包括用于观察乘客的观察设备,其中,能够借助于观察设备的数据来鉴别乘客。借助于观察设备来查明或测量数据或者说观察数据,其中,借助于接收单元62来接收数据或者说观察数据。例如能够按照所述方法的第八步骤来实施所述观察的步骤。
图7示出了按照本发明的一种实施例的用于对车辆中的乘客进行监测的***60的示意图。借助于***60例如能够实施按照图2、图3、图4和/或图5的方法。***60能够尤其根据按照图6的***60来构造。
因此,***60包括接收单元62、计算单元64、存储器66、发送设备68、以及相对于按照图6的一个或多个用户接口的接口70。接收单元62、计算单元64、存储器66、发送设备68和接口70优选是控制中心72的组件。控制中心72例如能够在车辆外布置在外部服务器上。在一种替代的实施方案中,控制中心72的部件、例如计算单元64和/或接收单元62和/或接口70和/或发送设备68能够布置在车辆中。
在按照图7的这种有利的实施方案中,***60此外包括车辆***74。车辆***74优选布置在车辆中或者说是车辆的一部分。车辆例如能够根据按照图1的车辆来构造。在这种有利的实施方案中,车辆***74包括观察设备22、尤其摄像机22、视频数据处理部76、座位管理***78以及一个或多个用户接口80、82、84。在这种示例性的实施方案中,车辆***74能够包括第一用户接口80、第二用户接口82和第三用户接口84。观察设备22例如能够根据按照图1的观察设备22来构造。优选能够借助于观察设备22来观察车辆内部空间和/或一个或多个乘客,由此尤其产生数据或者说观察数据。能够尤其借助于视频数据处理部76和/或座位管理***78来处理这些数据。经处理的数据尤其被发送到控制中心72处,其中,接收单元62接收数据。而后能够尤其借助于计算单元64来处理和分析数据。在一种替代的实施方案中,视频数据处理部76和/或座位管理***78也能够是控制中心72的一部分。
乘客例如能够借助于用户接口(Nutzerschnittstelle)、例如借助于第一用户接口80来触发警报。该警报能够通过接口(Schnittstelle)70来传递到计算单元处。计算单元能够分析警报并且将该警报通过发送设备68来传递或发送给外部服务提供商、例如对应的服务供应商或呼叫中心。外部服务器例如能够构造为车辆的提供商和/或安全服务供应商和/或警方和/或紧急情况服务部门。由此能够触发警报,由此能够启动紧急呼叫。外部服务提供商能够发起对应的步骤,并且例如呼叫警方和/或救护车,并且于是救助乘客。作为替代方案或附加方案,能够通过接口70来将警报直接传递给一个外部服务提供商或所述外部服务提供商。外部服务提供商除了警报之外还能够接收或获得关于乘客、尤其其身份和/或与该乘客相关联的座位的另外的信息。以有利的方式,外部服务提供商除了警报之外还能够将关于乘客、尤其其身份和/或与该乘客相关联的座位的另外的信息传递给警方和/或紧急情况服务部门。由此,警方或紧急情况服务部门、例如救护车例如能够直接救助已经触发了警报的乘客。
优选能够通过一个或多个用户接口82、尤其通过接口70来给乘客输出信息。例如能够通过第二用户接口82来给乘客输出信息。第二用户接口82例如能够构造为显示设备、音频仪器或扬声器,或者构造为另外的输出仪器。由此能够给乘客显示和/或朗读信息。
在一种继续改进方案中,能够通过作为第三用户接口84的接口70来对针对乘客的不同的设定进行个性化。例如能够关于所鉴别到的且与座位相关联的乘客来个性化地设定座椅调节、如例如靠背的高度或倾斜度。换句话说,第三用户接口84能够构造为车辆座椅的调节可行方案,该调节可行方案能够与乘客相适配。
在一种继续改进方案中,能够通过接口70来将信息输出给智能电话88或其他电子仪器88,尤其通过智能电话88的应用程序90来将信息输出给乘客。例如能够在智能电话88上给乘客显示信息,该信息通过接口来发送给智能电话。例如能够给乘客显示操作指示和/或关于行程的信息。在一种替代的实施方案中,乘客能够通过其智能电话88或智能电话上的应用程序90来触发警报。警报能够通过接口70来传递给计算单元64。
换句话说,***能够构造为基于视频的监测***,其中,借助于算法能够跟踪或追踪所鉴别的乘客。由此能够实现的是,在数据处理、以及提供与对相应的座位处的用户接口的使用相关的服务时,车载***始终考虑到当前实际占用座位的用户。即使在更换座位时也保持获得通过与座位有关的用户接口来提供特定于用户的服务。如果例如通过存在于座位处的按钮来触发安静的警报,则能够随后给呼叫中心员工传送在车载***中对于实际处在座位的区域中的人员而言可供使用的数据。在此能够涉及对于处理警报和/或就调动应急服务部门而言很重要的数据。此外,呼叫中心员工可能必须联系有关人员,以便获取另外的信息并且查询个人数据。在其中涉及另外的车辆乘员的威胁场景中,这种处理方式然而是有问题,因为后者不应该知道触发警报的情况。同样,在一种继续改进方案中可行的是,通过属于座位的输出仪器、例如显示屏或扬声器来给乘客提供私人化的内容。
优选该***能够使用在例如根据按照图10和/或图11的车辆的车辆或运输工具中,其中多个乘客不依赖于彼此地参与出行。在此,乘客能够具有不同的行程目的地和旅行动机。所示出的***例如能够使用在公共交通工具中,例如使用在公共汽车、火车或拼车出租车中,然而尤其也能够使用在私人交通工具、例如通过行车业务中间商所组织的“合乘(Pooled Rides)”中。特别地,该***能够使用在共享自主车辆或者说共用自主车辆中,因为这里没有驾驶员或陪同人员会监测内部空间中的情况。
优选地,在上车之后,能够通过车辆内部空间摄像机22连同后置的视频数据处理部76来在车载***中探测乘客。作为替代方案或附加方案,也能够在外部服务器上执行识别或视频数据处理部76。例如能够通过首次在上车之后成功地估计人员的姿势和/或检测到乘客的面部来实现这一点。在通过摄像机22探测之后,后置的视频数据处理部76能够跟踪车辆中的用户的停留地点。为此,能够以有利的方式以定期的时间间隔来重新估计乘员的姿势。此外,能够使用所谓的姿势***,即使在所估计的姿势在时间走势中变化的情况下,该姿势***也能够确保姿势与开头所检测到的人员持久且明确地相关联。在一种继续改进方案中,能够使用多个摄像机22,这些摄像机的视场部分地重叠,或者这些摄像机的视场无缝地结合到彼此处。利用这样的布置方案,即使当乘客离开摄像机22的视场并且出现在邻近摄像机22的视场中时,也能够随时将姿势与开头所检测到的人员相关联。由此原则上也能够对具有较大的内部空间的车辆、如例如来自公共短途交通***或者说公共交通***的公共汽车进行监测。
视频数据处理部76尤其已知现有座位的位置。在进行探测之后,视频数据处理部76将乘客与鉴别符相关联。随后由***存储该鉴别符。在示例性的实施方式中,将鉴别符在分布式***内传递给车辆外的子***,这里尤其传递给控制中心72或者说操控中心72并且在那里例如存储在存储器66中。在此,该子***72有利地作为后端服务在云中运行。这样的后端能够典型地由移动服务供应商或行车业务中间商提供。如果用户或乘客已经通过移动服务供应商或行车业务中间商的移动应用预订了行程,则能够以有利的方式通过所提及的后端来提供行程数据、如例如起点和/或目的地以及尤其用户的个人数据。此外,在该后端中也能够针对车辆中的与座位有关的用户接口来存储个人设定。
视频数据处理部76识别所检测和所跟踪的乘客何时占用座位,其方式为:例如确定姿势的例如也能被称为关键点的支撑部位是否位于视频***所已知的座位几何形状内。由此,在能处在车辆之内或之外的座位管理***78内实现座位与乘客相关的鉴别符之间的关联。
在一种继续改进方案中,紧接着在上车之后,例如一旦乘客已经占用座位,该乘客就能够利用移动式终端仪器来执行登录过程。在此,登录能够一方面通过由车辆***所提供的本地网络来实现。另一方面,登录也能够在车辆外的服务器处实现,该服务器能够通过互联网连接由终端仪器访问。例如能够要求乘客确认所占用的座位。为了可靠地设计登录并且避免错误输入,同样能够设想到的是,用户输入在车辆中所显示的且例如仅从该座位可见的鉴别码。作为替代方案或附加方案,也能够设想到读取被安装或显示在座位处的QR码。另外的实现可行方案在于,在座位处通过NFC(近场无线电通信)来进行登录过程。
在后端中现在能够将由视频***或测评算法所产生的与乘客相关的鉴别符与已知的用户或乘客清楚地相关联起来。如果现在乘客在最初的登录过程之后更换座位,则能够通过姿势***来跟踪有关人员现在占用了哪个座位。如果识别到这样的更换,则座位管理***78更新针对该人员的数据记录并且给其分派新座位号。
由视频数据处理部76、座位管理***78和后端与用户-及行程数据的结合能够实现的是,当乘客动用座位处的用户接口时,则能够有利地利用现有的用户数据。以有利的方式即使在更换座位时也保持获得这种使用可能性。
一种有利的实施方案例如设置了布置在座位处的按钮,乘客能够通过该按钮来要求服务。按钮例如能够按照图11来构造。通过这类按钮例如能够触发安静的警报。在操纵按钮时,车载***而后能够通过后端调用来要求呼叫中心员工或代理商86应该处理事故。整个***而后通过后端接口来给代理商86提供另外的数据。在一种有利的实现方案中,例如能够给代理商提供已经触发了警报的人员的名字和姓氏、性别、年龄以及照片。为此,在触发警报时首先在座位管理***78中查询与乘客相关的鉴别符。由此创建包括该鉴别符以及附加地座位号的消息。现在将该消息发送到车辆外的后端处。在后端中而后能够基于鉴别符来组合另外的数据、如例如用户的个人数据、关于有关人员的行程的数据、关于另外的出行人员的数据、以及关于车辆的数据。能够将这些数据提供给接待事故的呼叫中心员工86。随后代理商做出决定,是否应该向应急服务部门发出警报。如果而后例如呼叫警方,则能够给代理商或另外的呼叫中心员工传送现有的数据。如果例如因为乘客受其他出行人员威胁而触发警报,则警方在到达现场时能够利用现有的信息,以便快速地查明情况并且快速地鉴别违法者。如果不存在通过车载***和后端所提供的、通过代理商转发给应急服务部门的信息,则警方可能遇到下述人群,在该人群中不清楚是谁触发了警报。可能地,经受威胁的人员在这种情况下也可能无法畅所欲言,因为威胁以未被察觉的方式持续存在,例如由于针对经受威胁的人员揭穿威胁分子的情况而会出现身体上的暴力威胁。
此外能够设想到,还在可能被请求的应急服务部门到达之前,呼叫中心员工86有针对性地通过安装在座位处的输出仪器82来与经受威胁的人员交谈并且给出另外的提示。这样的内容例如能够显示在仅能从经受威胁的人员的座位观看的显示屏上。为此,能够使用有关人员与座位的可供使用的、并且也相对于更换座位稳健的关联。
除了所说明的紧急情况场景外,也能够设想到与实际在场的用户相配合的其他服务。例如能够设想到一种按钮,该按钮触发输出行程信息。如果具有不同的行程目的地的多个乘员使用车辆,则能够以这种方式依赖于用户地输出分别相关的信息。能够设想到例如对在个性化的目的地之前的预期的行程时间进行广播或屏幕显示。
图8示出了按照本发明的一种实施例的方法的示意图。该方法能够根据按照图2、图3、图4和/或图5的方法来构造。该方法能够尤其借助于按照图6和/或图7的***来实施。
在这种有利的实施方案中,该方法示出为流程图,其中,方法步骤合并成四个不同的列。乘客的步骤合并在第一列92中。换句话说,乘客所执行的步骤合并或示出在第一列92中。在第二列94中示出了车辆中的观察设备的步骤。在第三列96中示出了座位管理***的步骤。在第四列98中示出了控制中心的步骤。
在合并在第一列92中的第一步骤100中,乘客预订行程。由此在第四列98中的第二步骤102中借助于控制中心来为乘客创建或建立的行程。以有利的方式,乘客在控制中心中记录为用户。在第一列92中的第三步骤104中,乘客进入车辆或者说乘客上车到车辆中。借助于观察设备在第二列94中的第四步骤106中观察乘客。在第四步骤106中或者在另外的第五步骤108中能够分析观察设备的数据。此外,在第四列中的第五步骤108中存储对乘客的鉴别。在第一列92中的第六步骤110中乘客占用座位。在第二列94中的第七步骤112中借助于观察设备来观察该过程。在第七步骤112中或者在第四列98中的另外的步骤中能够分析借助于观察设备所建立的数据。由此能够分析乘客已经占用了哪个座位,其中,尤其能够分析座位号。在第三列96中的第八步骤114中将所分析的座位与乘客或乘客的身份相关联。在一种有利的实施方案中,尤其能够针对所鉴别的乘客以个性化的方式来设定对座位的一个或多个设定。换句话说,能够将座位与乘客的个人设定相适配。
在第一列92中的第九步骤116中,乘客能够例如借助于其智能电话来确定座位。借助于该确定,例如能够在第四列98中的第十步骤118中检测和确定所鉴别的乘客与座位的关联。在一种替代的实施方案中,在第三列96中的第十一步骤120中能够将例如座椅的个人设定与所鉴别的乘客相适配。
在第一列92中的第十二步骤122中乘客从第一座位更换至第二座位。能够尤其借助于第十三步骤124来观察这种更换。乘客与新座位的关联能够在第十二步骤122中或者在第四列98中的另外的步骤中执行。在一种继续改进方案中,在第三列96中的第十四步骤126中能够将新座椅的设定与乘客相适配。此外,能够将第一座位的状况标记为空。
乘客能够在第一列92中的第十五步骤128中触发警报、例如触发安静的警报,例如其方式为:该乘客按压警报按钮。在第三列96中的第十六步骤130中给警报附加对乘客的鉴别以及当前的座椅号。第十六步骤130能够替代地也布置在第四列98中。在第四列98中的第十七步骤132中,控制中心能够接收由乘客所触发的警报。在第十八步骤134中能够借助于控制中心来分析所接收的数据,其中,能够分析乘客的身份及其所预订的行程的数据。在第四列98中的第十九步骤136中能够将警报传递给对应的服务或者说服务部门。例如能够通知警方和/或救护车。在此能够转发乘客的身份的数据及其座位。
图9示出了按照本发明的一种实施例的车辆的内部空间26的示意图。车辆例如能够根据按照图1的车辆来构造。借助于该车辆能够实现根据按照图6和/或图7的***的一种***。在这种有利的实施方案中,在车辆的内部空间26中布置两个观察设备22、尤其第一摄像机22和第二摄像机22,借助于该观察设备能够观察乘客24。在车辆中布置有多个座椅27,其中,乘客24已经就座到座椅上。乘客因此能够与相应的座椅相关联。
图10示出了按照本发明的一种实施例的车辆的内部空间26的示意图。车辆例如能够根据按照图1的车辆来构造。借助于该车辆能够实现根据按照图6和/或图7的***的一种***。在车辆中有多个座椅27,其中,乘客24已经就座到座椅上。乘客因此能够与相应的座椅相关联。在这种有利的实施方案中,座椅具有多个用户接口。用户接口能够尤其根据按照图11的用户接口来构造。
图11示出了按照本发明的一种实施例的车辆的车辆座椅27的示意图。车辆座椅27能够根据按照图9和/或图10的车辆座椅27来构造。车辆例如能够根据按照图1的车辆来构造。借助于该车辆能够实现根据按照图6和/或图7的***的一种***。在这种有利的实施方案中,车辆座椅27具有多个用户接口80。乘客例如能够借助于用户接口来触发警报。用户接口例如能够构造为按钮。在一种继续改进方案中,用户接口能够构造为显示设备或者构造为显示器。

Claims (12)

1.用于对车辆(20)中的乘客(24)进行监测的方法(30),该方法具有下述步骤:
接收观察设备(22)的数据和/或所述乘客(24)在所述车辆(20)的本地网络中的登录的数据,
借助于所接收的数据来鉴别所述车辆(20)中的乘客(24),
将所述乘客(24)与所述车辆(20)中的座位相关联,
在可能更换所述座位至新座位的情况下跟踪所述乘客(24),
如果识别到更换所述座位至新座位,则更新所述乘客(24)与新座位的关联,
识别所述乘客(24)的输入和/或手势,其中,查明所述乘客(24)是否触发或想要触发警报,
如果识别到所述乘客(24)想要触发或已经触发警报,则将所述乘客(24)以及当前座位的相关信息发送给外部服务器。
2.根据前述权利要求中任一项所述的方法(30),其中,在鉴别车辆(20)中的乘客(24)的步骤中,提供关于所述乘客(24)的名字、性别、年龄和/或照片的信息。
3.根据前述权利要求中任一项所述的方法(30),其中,在将所述乘客(24)以及当前座位的相关信息发送给外部服务器的步骤中,发送关于所述乘客(24)、所述乘客(24)的行程、可能的另外的乘客(24)、和/或所述车辆(20)的信息。
4.根据前述权利要求中任一项所述的方法(30),该方法具有借助于观察设备(22)来观察所述乘客(24)的步骤。
5.根据前述权利要求中任一项所述的方法(30),其中,为了跟踪所述乘客(24)关于可能更换所述座位,估计所述乘客(24)的姿势。
6.根据前述权利要求中任一项所述的方法(30),该方法具有如果识别到所述乘客(24)触发警报则输出信息的步骤,其中,借助于一个或多个用户接口来输出所述信息。
7.根据权利要求6所述的方法(30),其中,所述一个或多个用户接口构造为输出仪器并且/或者构造为相对于所述乘客(24)的智能电话的接口。
8.根据前述权利要求6至7中任一项所述的方法(30),其中,所输出的信息仅对于已经触发所述警报的乘客(24)可见。
9.根据前述权利要求中任一项所述的方法(30),该方法具有根据所鉴别的乘客(24)来适配所述座位的配置的步骤。
10.用于对车辆(20)中的乘客(24)进行监测的***(60),该***包括:
接收单元(62),该接收单元构造用于接收观察设备(22)的数据和/或所述乘客(24)在所述车辆(20)的本地网络中的登录的数据;
计算单元(64),该计算单元构造用于
鉴别车辆(20)中的所述乘客(24),
将所述乘客(24)与所述车辆(20)中的座位相关联,
跟踪所述乘客(24)关于可能更换所述座位至新座位,
如果识别到更换所述座位至新座位,则更新所述乘客(24)与新座位的关联,并且
识别所述乘客(24)的输入和/或手势,其中,查明所述乘客(24)是否触发或想要触发警报;
以及发送设备(68),该发送设备构造用于,如果识别到所述乘客(24)想要触发或已经触发警报,则将所述乘客(24)以及所述当前座位的相关信息发送给外部服务器。
11.根据权利要求10所述的***(60),其中,所述***(60)包括用于观察所述乘客(24)的观察设备(22),其中,能够借助于所述观察设备(22)的数据来鉴别所述乘客(24)。
12.根据前述权利要求10至11中任一项所述的***(60),其中,所述***(60)包括一个或多个用户接口,其中,所述乘客(24)能够借助于一个或多个用户接口来进行输入,并且/或者其中,能够借助于一个或多个用户接口来为所述乘客(24)显示信息。
CN202311690713.0A 2022-12-08 2023-12-07 用于对车辆中的乘客进行监测的方法和*** Pending CN118163743A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102022213278.5 2022-12-08
DE102022213278.5A DE102022213278A1 (de) 2022-12-08 2022-12-08 Verfahren und System zum Überwachen eines Passagiers in einem Fahrzeug

Publications (1)

Publication Number Publication Date
CN118163743A true CN118163743A (zh) 2024-06-11

Family

ID=91186194

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311690713.0A Pending CN118163743A (zh) 2022-12-08 2023-12-07 用于对车辆中的乘客进行监测的方法和***

Country Status (3)

Country Link
US (1) US20240193991A1 (zh)
CN (1) CN118163743A (zh)
DE (1) DE102022213278A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE539493C2 (sv) 2014-05-28 2017-10-03 Scania Cv Ab Förarvarning och begränsning av fordons framförande vid olyckstillbud
DE102014214352A1 (de) 2014-07-23 2016-01-28 Robert Bosch Gmbh Verfahren und Anordnung zum Betreiben eines Insassenbeobachtungssystems
DE102014219692A1 (de) 2014-09-29 2015-10-22 Siemens Aktiengesellschaft Verfahren zum Erkennen einer Gefahrensituation in einem Fahrzeuginnenraum eines Fahrzeugs und Gefahrenerkennungssystem
DE102021001374A1 (de) 2021-03-16 2021-04-29 Daimler Ag Verfahren zur Überwachung eines Fahrzeuginnenraums und Fahrzeug

Also Published As

Publication number Publication date
US20240193991A1 (en) 2024-06-13
DE102022213278A1 (de) 2024-06-13

Similar Documents

Publication Publication Date Title
US12033446B2 (en) Safety for vehicle users
US10095229B2 (en) Passenger tracking systems and methods
JP6713656B2 (ja) 自動運転車及び自動運転車の盗難防止プログラム
US20180074494A1 (en) Passenger tracking systems and methods
US20180345909A1 (en) Vehicle with wearable for identifying one or more vehicle occupants
US20180075565A1 (en) Passenger validation systems and methods
KR101800508B1 (ko) 음주운전 방지 방법 및 이를 제공하는 차량 보조 장치
US9701265B2 (en) Smartphone-based vehicle control methods
US20190054874A1 (en) Smartphone-based vehicle control method to avoid collisions
US10916139B2 (en) System and method for post-vehicle crash intelligence
US20130267194A1 (en) Method and System for Notifying a Remote Facility of an Accident Involving a Vehicle
US20200001892A1 (en) Passenger assisting apparatus, method, and program
US20070159309A1 (en) Information processing apparatus and information processing method, information processing system, program, and recording media
US10666901B1 (en) System for soothing an occupant in a vehicle
JP6912507B2 (ja) 車両用記憶システム
JP2017021745A (ja) 情報収集装置、情報収集サーバ及び情報収集システム
KR20210016160A (ko) 스마트 밴드를 활용한 택시 모니터링 시스템, 스마트 밴드를 활용한 택시 서비스와 연계된 게이트웨이 모듈 및 통합 제어 장치
US11654937B2 (en) Reporting device sending collision information based on driving mode and occupant presence
CN112583885A (zh) 用于车辆的紧急***以及为车辆用户提供救援构件的方法
CN118163743A (zh) 用于对车辆中的乘客进行监测的方法和***
EP3945489A1 (en) Ride evaluation in a ride sharing service
KR20170127322A (ko) 스마트카 컨버전 시스템
CN111267864A (zh) 信息处理***、程序和控制方法
US20240181980A1 (en) System and method for use of a sensor matrix in a vehicle interior
WO2023171253A1 (ja) 提示制御装置及び提示制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication