CN110942571A - 一种基于行人驻留判别的语音播报***及方法 - Google Patents
一种基于行人驻留判别的语音播报***及方法 Download PDFInfo
- Publication number
- CN110942571A CN110942571A CN201811116685.0A CN201811116685A CN110942571A CN 110942571 A CN110942571 A CN 110942571A CN 201811116685 A CN201811116685 A CN 201811116685A CN 110942571 A CN110942571 A CN 110942571A
- Authority
- CN
- China
- Prior art keywords
- pedestrian
- residence
- pedestrians
- unit
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B3/00—Audible signalling systems; Audible personal calling systems
- G08B3/10—Audible signalling systems; Audible personal calling systems using electric transmission; using electromagnetic transmission
Landscapes
- Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- General Physics & Mathematics (AREA)
- Image Analysis (AREA)
- Alarm Systems (AREA)
Abstract
本发明公开了一种基于行人驻留判别的语音播报***,包括:行人采集单元,行人检测单元,行人分类单元,行人驻留检测单元,语音播报单元,信息通讯单元,所述行人采集单元、行人检测单元、行人驻留检测单元、语音播报单元依次通过信息通讯单元连接,所述行人分类单元分别与行人检测单元、行人驻留检测单元通过信息通讯单元连接,所述行人驻留检测单元可触发语音播报单元播放语音信息。本发明可通过对行人驻留的判别对在公共空间中驻留观看艺术墙(品)的行人提供语音介绍,具有判断精准的特点。
Description
技术领域
本发明涉及智能交通监控领域,更为具体的是涉及一种基于行人驻留判别的语音播报***及方法。
背景技术
地铁已经是不少城市市民出行的主要交通工具之一。为了凸显城市的特色,不少城市都会在地铁站中设计符合城市定位、富含城市历史文化韵味的艺术墙,使得地铁站成为另外一种文化展厅。在南昌、成都、武汉、南京、长春等等城市,都建有这样的“地下艺术长廊”。这些含有艺术墙的站点像一枚枚经过精雕细琢的璞玉,展现着城市人文历史,既有时间深处的沧桑过往,又有让人们引以为豪的现代记忆,淋漓尽致地演绎了“公共艺术作品”概念。
但是,并不是每个人都能很好地解读这些“不会说话”的艺术作品。比如,很多人不太理解以浮雕的形式展示城市历史文化的艺术墙(品),或者用抽象符号展示城市特点的艺术墙(品)。行人往往扫一眼就匆匆离开了。如果有人能对这些艺术墙(品)进行简短的讲解,则能让人加深对这座城市的印象和认知。
发明内容
为了解决上述问题,本发明提供了一种基于行人驻留判别的语音播报***,可自动过滤对艺术墙(品)毫无兴趣的过客,仅针对有驻足行为的特定人群提供有声播报,具有判断精准的特点。
本发明采用的技术方案是:一种基于行人驻留判别的语音播报***,包括:
行人采集单元,用于采集经过艺术墙(品)前的行人图像;
行人检测单元,用于根据行人采集单元采集的图像检测行人数量及所在的位置;
行人分类单元,用于根据行人检测单元的行人检测结果,对行人进行分类;
行人驻留检测单元,用于根据行人检测单元的行人检测结果,判断行人是否处于驻留状态,并保留检测处于驻留状态的行人检测结果;
语音播报单元,用于在行人驻留检测单元判断行人处于驻留状态后,播放语音信息;
信息通讯单元,用于各单元之间的信息传输;
所述行人采集单元、行人检测单元、行人驻留检测单元、语音播报单元依次通过信息通讯单元连接,所述行人分类单元分别与行人检测单元、行人驻留检测单元通过信息通讯单元连接,所述行人驻留检测单元可触发语音播报单元播放语音信息。
作为上述方案的进一步设置,所述行人采集单元包括设置于艺术墙(品)周边的摄像机。
作为上述方案的进一步设置,所述行人分类单元可将行人分为正常行人、拄拐杖行人、坐轮椅行人三类。
作为上述方案的进一步设置,所述行人驻留检测单元可根据行人检测单元的行人检测结果,跟踪行人运动路径,同时保存处于驻留状态的行人运动路径图像。
本发明还提供了一种基于行人驻留判别的语音播报方法,包括如下步骤:
S1,通过包括数个高清摄像机的行人采集单元采集行人图像;
S2,行人检测单元根据采集到的行人图像,检测图像中的行人数量,以及各自的位置;
S3,行人分类单元根据行人检测单元的检测结果将检测到的行人分类并建立运动轨迹,所述行人分为正常行人、拄拐杖行人、坐轮椅行人三类,针对不同类别的行人,设置不同的驻留时间阈值;
S4,行人驻留检测单元根据检测到的行人,跟踪行人运动路径,在行人目标驻留的时间超过驻留时间阈值后,触发语音播报单元;
S5,语音播报单元接收到行人驻留检测单元的触发信号,播放语音信息,同时,行人驻留检测单元保存行人运动路径的图像,用于后期的统计与算法改进。
作为上述方案的进一步设置,所述步骤S2具体为:行人检测单元根据采集到的行人图像检测画面中出现的行人,检测图像中的行人数量,以及各自的位置,并将首次检测到的新行人作为新目标送入行人分类单元进行分类。
作为上述方案的进一步设置,所述步骤S3具体为:行人分类单元针对行人检测单元的检测结果,通过每一帧图像中行人目标所在的位置及相应的图像数据记录每个行人的运动路径,并针对每个行人目标建立一个长度为L的运动轨迹队列Q,并将行人分为正常行人、拄拐杖行人、坐轮椅行人三类,针对不同类别的行人,设置不同的驻留时间阈值T。
作为上述方案的进一步设置,所述步骤S4具体为,行人驻留检测单元跟踪每个运动轨迹队列Q,将其分为以下两类:
S4a,在某一个点或者其周围,停留的时间超过了阈值T;
S4b,在连续的几个点或者其周围,停留的时间总和,超过了阈值T;
若存在S4a、S4b中的任意一种,则判定行人存在驻留行为,触发语音播报单元。
作为上述方案的进一步设置,所述步骤S5具体为,若行人驻留检测单元检测到驻留行为,则同时触发以下两个事件:
S5a,触发语音播报单元,***自动播放语音信息;特别地,如果整个***中有多个摄像头,则同时只触发一次语音播报;若语音播报未结束,不会有新的语音播报被触发;
S5b,行人驻留检测单元从驻留行为运动轨迹队列Q中,保存驻留行为运动轨迹队列Q中的图像。
作为上述方案的进一步设置,所述行人驻留检测单元保存的驻留行为运动轨迹队列Q的图像至少为三张,所述三张图像为:行人目标刚出现时的截图,目标走到文化墙(品)前开始驻留观看的截图,以及目标停留了一段时间后的截图。
本发明可为公共空间中驻留观看艺术墙(品)的行人提供语音介绍,自动过滤对艺术墙(品)毫无兴趣的过客,仅针对有驻足行为的部分特定人群提供有声播报,介绍艺术墙(品)的相关信息,具有判断精准的特点。
附图说明
图1为本发明的***结构示意图;
图2为第一种行人驻留行为轨迹示意图;
图3为第二种行人驻留行为轨迹示意图。
具体实施方式
为了使本发明的技术方案更加清晰,下面结合附图及实施例对本发明做进一步描述,但是本发明的保护范围并不仅限于此。
如图1所示,本发明采用的技术方案是:一种基于行人驻留判别的语音播报***,包括:
行人采集单元,用于采集经过艺术墙(品)前的行人图像,所述行人采集单元包括设置于艺术墙(品)周边的至少一个摄像机,由于艺术墙可能会比较长,范围比较大,采集单元可由数个高清摄像机组成。
行人检测单元,用于根据行人采集单元采集的图像检测行人数量及所在的位置;
行人分类单元,用于根据行人检测单元的行人检测结果,对行人进行分类,所述行人分类单元可将行人分为正常行人、拄拐杖行人、坐轮椅行人三类;
行人驻留检测单元,用于根据行人检测单元的行人检测结果,可根据行人检测单元的行人检测结果,跟踪行人运动路径,判断行人是否处于驻留状态,同时保存处于驻留状态的行人运动路径图像;
语音播报单元,用于在行人驻留检测单元判断行人处于驻留状态后,播放语音信息;
信息通讯单元,用于各单元之间的信息传输;
所述行人采集单元、行人检测单元、行人驻留检测单元、语音播报单元依次通过信息通讯单元连接,所述行人分类单元分别与行人检测单元、行人驻留检测单元通过信息通讯单元连接,所述行人驻留检测单元可触发语音播报单元播放语音信息。
本发明还提供了一种基于行人驻留判别的语音播报方法,包括如下步骤:
S1,通过包括数个高清摄像机的行人采集单元采集行人图像;
S2,行人检测单元根据采集到的行人图像,检测图像中的行人数量,以及各自的位置;
行人检测单元根据采集到的行人图像检测画面中出现的行人,检测图像中的行人数量,以及各自的位置,并将首次检测到的新行人作为新目标送入行人分类单元进行分类。
S3,行人分类单元根据行人检测单元的检测结果将检测到的行人分类并建立运动轨迹,所述行人分为正常行人、拄拐杖行人、坐轮椅行人三类,针对不同类别的行人,设置不同的驻留时间阈值;
行人分类单元针对行人检测单元的检测结果,通过每一帧图像中行人目标所在的位置及相应的图像数据记录每个行人的运动路径,并针对每个行人目标建立一个长度为L的运动轨迹队列Q,并将行人分为正常行人、拄拐杖行人、坐轮椅行人三类,针对不同类别的行人,设置不同的驻留时间阈值T。
S4,行人驻留检测单元根据检测到的行人,跟踪行人运动路径,在行人目标驻留的时间超过驻留时间阈值后,触发语音播报单元;
行人驻留检测单元跟踪每个运动轨迹队列Q,将其分为以下两类:
S4a,如图2所示,在某一个点或者其周围,停留的时间超过了阈值T;
S4b,如图3所示,在连续的几个点或者其周围,停留的时间总和,超过了阈值T;
若存在S4a、S4b中的任意一种,则判定行人存在驻留行为,触发语音播报单元。
S5,语音播报单元接收到行人驻留检测单元的触发信号,播放语音信息,同时,行人驻留检测单元保存行人运动路径的图像,用于后期的统计与算法改进。
若行人驻留检测单元检测到驻留行为,则同时触发以下两个事件:
S5a,触发语音播报单元,***自动播放语音信息;特别地,如果整个***中有多个摄像头,则同时只触发一次语音播报;若语音播报未结束,不会有新的语音播报被触发;
S5b,行人驻留检测单元从驻留行为运动轨迹队列Q中,保存驻留行为运动轨迹队列Q中的图像,所述行人驻留检测单元保存的驻留行为运动轨迹队列Q的图像至少为三张,所述三张图像为:行人目标刚出现时的截图,目标走到文化墙(品)前开始驻留观看的截图,以及目标停留了一段时间后的截图,截图中要保留原始的视频时间戳。
本发明通过对行人驻留的判别对在公共空间中驻留观看艺术墙(品)的行人提供语音介绍,具有判断精准的特点。
上面结合附图对本发明的具体实施方式作了详细说明,但是本发明并不限于上述实施方式,在本领域普通技术人员所具备的知识范围内,还可以在不脱离本发明宗旨的前提下作出各种变化。
Claims (10)
1.一种基于行人驻留判别的语音播报***,其特征在于,包括:
行人采集单元,用于采集经过艺术墙(品)前的行人图像;
行人检测单元,用于根据行人采集单元采集的图像检测行人数量及所在的位置;
行人分类单元,用于根据行人检测单元的行人检测结果,对行人进行分类;
行人驻留检测单元,用于根据行人检测单元的行人检测结果,判断行人是否处于驻留状态,并保留检测处于驻留状态的行人检测结果;
语音播报单元,用于在行人驻留检测单元判断行人处于驻留状态后,播放语音信息;
信息通讯单元,用于各单元之间的信息传输;
所述行人采集单元、行人检测单元、行人驻留检测单元、语音播报单元依次通过信息通讯单元连接,所述行人分类单元分别与行人检测单元、行人驻留检测单元通过信息通讯单元连接,所述行人驻留检测单元可触发语音播报单元播放语音信息。
2.根据权利要求1所述的一种基于行人驻留判别的语音播报***,其特征在于,所述行人采集单元包括设置于艺术墙(品)周边的摄像机。
3.根据权利要求1所述的一种基于行人驻留判别的语音播报***,其特征在于,所述行人分类单元可将行人分为正常行人、拄拐杖行人、坐轮椅行人三类。
4.根据权利要求1所述的一种基于行人驻留判别的语音播报***,其特征在于,所述行人驻留检测单元可根据行人检测单元的行人检测结果,跟踪行人运动路径,同时保存处于驻留状态的行人运动路径图像。
5.一种基于行人驻留判别的语音播报方法,其特征在于,包括如下步骤:
S1,通过包括数个高清摄像机的行人采集单元采集行人图像;
S2,行人检测单元根据采集到的行人图像,检测图像中的行人数量,以及各自的位置;
S3,行人分类单元根据行人检测单元的检测结果将检测到的行人分类并建立运动轨迹,所述行人分为正常行人、拄拐杖行人、坐轮椅行人三类,针对不同类别的行人,设置不同的驻留时间阈值;
S4,行人驻留检测单元根据检测到的行人,跟踪行人运动路径,在行人目标驻留的时间超过驻留时间阈值后,触发语音播报单元;
S5,语音播报单元接收到行人驻留检测单元的触发信号,播放语音信息,同时,行人驻留检测单元保存行人运动路径的图像,用于后期的统计与算法改进。
6.根据权利要求5所述的基于行人驻留判别的语音播报方法,其特征在于,所述步骤S2具体为:行人检测单元根据采集到的行人图像检测画面中出现的行人,检测图像中的行人数量,以及各自的位置,并将首次检测到的新行人作为新目标送入行人分类单元进行分类。
7.根据权利要求5或6所述的基于行人驻留判别的语音播报方法,其特征在于,所述步骤S3具体为:行人分类单元针对行人检测单元的检测结果,通过每一帧图像中行人目标所在的位置及相应的图像数据记录每个行人的运动路径,并针对每个行人目标建立一个长度为L的运动轨迹队列Q,并将行人分为正常行人、拄拐杖行人、坐轮椅行人三类,针对不同类别的行人,设置不同的驻留时间阈值T。
8.根据权利要求7所述的基于行人驻留判别的语音播报方法,其特征在于,所述步骤S4具体为,行人驻留检测单元跟踪每个运动轨迹队列Q,将其分为以下两类:
S4a,在某一个点或者其周围,停留的时间超过了阈值T;
S4b,在连续的几个点或者其周围,停留的时间总和,超过了阈值T;
若存在S4a、S4b中的任意一种,则判定行人存在驻留行为,触发语音播报单元。
9.根据权利要求8所述的基于行人驻留判别的语音播报方法,其特征在于,所述步骤S5具体为,若行人驻留检测单元检测到驻留行为,则同时触发以下两个事件:
S5a,触发语音播报单元,***自动播放语音信息;特别地,如果整个***中有多个摄像头,则同时只触发一次语音播报;若语音播报未结束,不会有新的语音播报被触发;
S5b,行人驻留检测单元从驻留行为运动轨迹队列Q中,保存驻留行为运动轨迹队列Q中的图像。
10.根据权利要求9所述的基于行人驻留判别的语音播报方法,其特征在于,所述行人驻留检测单元保存的驻留行为运动轨迹队列Q的图像至少为三张,所述三张图像为:行人目标刚出现时的截图,目标走到文化墙(品)前开始驻留观看的截图,以及目标停留了一段时间后的截图。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811116685.0A CN110942571A (zh) | 2018-09-25 | 2018-09-25 | 一种基于行人驻留判别的语音播报***及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811116685.0A CN110942571A (zh) | 2018-09-25 | 2018-09-25 | 一种基于行人驻留判别的语音播报***及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110942571A true CN110942571A (zh) | 2020-03-31 |
Family
ID=69905592
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811116685.0A Pending CN110942571A (zh) | 2018-09-25 | 2018-09-25 | 一种基于行人驻留判别的语音播报***及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110942571A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113654169A (zh) * | 2021-07-29 | 2021-11-16 | 青岛海尔空调器有限总公司 | 空调消毒机功能展示装置及方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101145997A (zh) * | 2006-09-14 | 2008-03-19 | 上海真灼电子技术有限公司 | 一种多功能电子导游*** |
JP2010128952A (ja) * | 2008-11-28 | 2010-06-10 | Yamaha Corp | 受信装置および音声ガイドシステム |
CN102368306A (zh) * | 2011-06-28 | 2012-03-07 | 于佳辉 | 一种旅游物联网控制***及用于旅游的物联网方法 |
CN108182611A (zh) * | 2018-02-09 | 2018-06-19 | 广东智助星科技股份有限公司 | 一种低成本高智能展台信息显示*** |
CN108470532A (zh) * | 2018-03-29 | 2018-08-31 | 姜力菲 | 一种用于景点介绍的智能播音装置及其工作方法 |
-
2018
- 2018-09-25 CN CN201811116685.0A patent/CN110942571A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101145997A (zh) * | 2006-09-14 | 2008-03-19 | 上海真灼电子技术有限公司 | 一种多功能电子导游*** |
JP2010128952A (ja) * | 2008-11-28 | 2010-06-10 | Yamaha Corp | 受信装置および音声ガイドシステム |
CN102368306A (zh) * | 2011-06-28 | 2012-03-07 | 于佳辉 | 一种旅游物联网控制***及用于旅游的物联网方法 |
CN108182611A (zh) * | 2018-02-09 | 2018-06-19 | 广东智助星科技股份有限公司 | 一种低成本高智能展台信息显示*** |
CN108470532A (zh) * | 2018-03-29 | 2018-08-31 | 姜力菲 | 一种用于景点介绍的智能播音装置及其工作方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113654169A (zh) * | 2021-07-29 | 2021-11-16 | 青岛海尔空调器有限总公司 | 空调消毒机功能展示装置及方法 |
WO2023005260A1 (zh) * | 2021-07-29 | 2023-02-02 | 青岛海尔空调器有限总公司 | 空调消毒机功能展示装置及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Albiol et al. | Detection of parked vehicles using spatiotemporal maps | |
CN104303193B (zh) | 基于聚类的目标分类 | |
US8285044B2 (en) | Image-processing device, surveillance system, method for establishing a scene reference image, and computer program | |
EP3208743A1 (en) | Object detection along pre-defined trajectory | |
EP2903261B1 (en) | Apparatus and method for detecting event from plurality of photographed images | |
CN106998444A (zh) | 一种大数据人脸监控***及装置 | |
US20050073585A1 (en) | Tracking systems and methods | |
CN111860318A (zh) | 一种建筑工地行人徘徊检测方法、装置、设备及存储介质 | |
CN105574506A (zh) | 基于深度学习和大规模集群的智能人脸追逃***及方法 | |
CN108769598A (zh) | 基于行人重识别的跨摄像头视频浓缩方法 | |
KR20060100341A (ko) | 객체식별이 가능한 영상처리 감시시스템 | |
CN106803936B (zh) | 基于内存编码机制的视频抓拍方法及装置 | |
CN102469303A (zh) | 视频监视 | |
JP6013923B2 (ja) | ビデオエピソードの閲覧及び検索のためのシステム及び方法 | |
US10373015B2 (en) | System and method of detecting moving objects | |
JP2013152669A (ja) | 画像監視装置 | |
CN107862072B (zh) | 基于大数据技术分析车辆入城套牌作案的方法 | |
CN104134067A (zh) | 基于智能视觉物联网的道路车辆监控*** | |
CN112270253A (zh) | 一种高空抛物的检测方法及装置 | |
US8432444B2 (en) | Method for monitoring surveillance area | |
CN110942571A (zh) | 一种基于行人驻留判别的语音播报***及方法 | |
Li et al. | Robust real-time detection of abandoned and removed objects | |
US7738009B2 (en) | Method for following at least one object in a scene | |
EP2064666A1 (de) | Verfahren zur überwachung von personenansammlungen | |
KR20150084237A (ko) | 스마트로테이션 감시 방법을 이용하는 영상촬영장치에서 후보 감시영역을 자동으로 갱신하는 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200331 |