CN114096999A - 显示处理装置、显示处理方法和程序 - Google Patents
显示处理装置、显示处理方法和程序 Download PDFInfo
- Publication number
- CN114096999A CN114096999A CN201980098382.7A CN201980098382A CN114096999A CN 114096999 A CN114096999 A CN 114096999A CN 201980098382 A CN201980098382 A CN 201980098382A CN 114096999 A CN114096999 A CN 114096999A
- Authority
- CN
- China
- Prior art keywords
- motion
- area
- unit
- average
- division
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims description 38
- 238000003672 processing method Methods 0.000 title claims description 5
- 238000000605 extraction Methods 0.000 claims abstract description 26
- 238000004364 calculation method Methods 0.000 claims abstract description 23
- 238000012935 Averaging Methods 0.000 claims abstract description 13
- 239000000284 extract Substances 0.000 claims abstract description 13
- 238000000034 method Methods 0.000 claims description 49
- 230000008569 process Effects 0.000 claims description 37
- 238000005070 sampling Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 22
- 238000004519 manufacturing process Methods 0.000 description 17
- 238000013523 data management Methods 0.000 description 9
- 230000010365 information processing Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 238000009434 installation Methods 0.000 description 3
- 239000000047 product Substances 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000004806 packaging method and process Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000011265 semifinished product Substances 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/203—Drawing of straight lines or curves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30241—Trajectory
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
- User Interface Of Digital Computer (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Stereo-Broadcasting Methods (AREA)
- Circuits Of Receivers In General (AREA)
- Image Generation (AREA)
- Train Traffic Observation, Control, And Security (AREA)
Abstract
描绘对表示从第1区域出发而到达第2区域的运动体的轨迹和/或从第2区域出发而到达第1区域的运动体的轨迹的多个运动线路进行平均而得到的运动线路,由此,容易掌握运动体的移动方式。运动线路提取部(109)提取表示在由区域确定部(108)确定的区域间移动的运动体的移动轨迹的多个运动线路。分割点取得部(110)分别以分割数N(N为2以上的整数)对由运动线路提取部(109)提取出的运动线路进行分割,由此取得N‑1个分割点的坐标。平均点计算部(111)对由分割点取得部(110)取得的属于不同的运动线路的分割点的坐标彼此进行平均,由此计算N‑1个平均点的坐标。描绘部(112)描绘穿过由平均点计算部(111)计算出的N‑1个平均点、出发区域(a1)的平均出发点和到达区域(a2)的到达平均点的运动线路。
Description
技术领域
本发明涉及显示处理装置、显示处理方法和程序。
背景技术
以往,公知有如下技术:在交通工具、商业设施等规定的空间内,计算表示行人等的移动轨迹的坐标,根据计算出的坐标显示运动体的运动线路。
例如,在专利文献1中公开有如下技术:从图像数据中提取人物,与运动线路一起显示人物朝向对象的方向和时间。
此外,例如,在专利文献2中公开有如下技术:跟踪在规定的空间内通行的行人的位置而求出通行轨迹(运动线路),显示在规定的空间内在规定时间内通行的全部行人的运动线路。
现有技术文献
专利文献
专利文献1:WO2017-170084号公报(图5)
专利文献2:日本特开2005-346617号公报(图6)
发明内容
发明要解决的课题
在专利文献1公开的技术中,存在仅设想显示一条运动线路这样的课题。
此外,在上述专利文献2公开的技术中显示多条运动线路,但是,在重合的状态下显示多条运动线路,因此,存在如下课题:随着要显示的运动线路的条数增加,很难掌握运动体的移动方式。
本发明正是为了解决上述问题而完成的,其目的在于,描绘对表示从第1区域出发而到达第2区域的运动体的轨迹和/或从第2区域出发而到达第1区域的运动体的轨迹的多个运动线路进行平均而得到的运动线路,由此,容易掌握运动体的移动方式。
用于解决课题的手段
本发明的显示处理装置的特征在于,该显示处理装置具有:运动线路提取部,其提取表示从第1区域出发而到达第2区域的运动体的轨迹和/或从第2区域出发而到达第1区域的运动体的轨迹的多个运动线路;分割点取得部,其以分割数N(N为2以上的整数)分别对由所述运动线路提取部提取出的运动线路进行分割,由此取得N-1个分割点;平均点计算部,其对由所述分割点取得部取得的属于不同的运动线路的分割点的坐标彼此进行平均,由此计算N-1个平均点;以及描绘部,其描绘穿过由所述平均点计算部取得的N-1个平均点、所述第1区域和所述第2区域的运动线路。
发明效果
本发明的显示处理装置发挥如下效果:描绘对表示从第1区域出发而到达第2区域的运动体的轨迹和/或从第2区域出发而到达第1区域的运动体的轨迹的多个运动线路进行平均而得到的运动线路,由此,能够容易掌握运动体的移动方式。
附图说明
图1是本发明的一个实施方式的显示处理装置的结构图。
图2是示出工厂内的摄像机的设置例的图。
图3是示出运动线路数据管理表107的一例的图。
图4是示出由运动线路提取部109提取出的运动线路的一例的图。
图5是示出对运动线路D1、D2、D3进行3分割而得到的2个分割点的图。
图6是示出基于运动线路D1、D2、D3的代表性运动线路R的图。
图7是示出显示处理装置100的处理的流程图。
图8是示出构成图1的***的硬件装置的一例的图。
图9是使用箭头示出代表性运动线路的图。
图10是使用箭头示出代表性运动线路的图。
图11是实施方式3的显示处理装置的结构图。
图12是示出显示画面11的一例的图。
图13是示出显示装置11中显示的滑动条的图。
具体实施方式
1.实施方式1
图1是本发明的一个实施方式的显示处理装置的结构图。摄像机10a~10n设置于设施内的顶棚附近等视野良好的场所,拍摄移动的人物和物体(以后在不需要区分它们的情况下称作运动体)。摄像机10a~10n设置于彼此协作而不管运动***于设施内的什么场所都能够不间断地进行拍摄的位置。图2是示出工厂内的摄像机的设置例的图。在工厂中,除了配置有摄像机10a~10n以外,还配置有工厂的柱子和墙壁等主体200、制造装置、机器人、作业台等设备207。摄像机10a~10n使用视场角大的镜头来拍摄较宽范围,以减少拍摄对象的死角。
识别部105从由摄像机10a~10n拍摄到的影像中识别在设施内移动的同一运动体,并且,在摄像机10a~10n的全部拍摄区域内追踪识别出的运动体。作为识别运动体的方法,能够使用识别粘贴于作业服或头盔的固有的标记或条形码的图像识别法。此外,也可以使用基于机器学习的运动体估计法。在机器学习中,在多个运动体交错的情况下或运动体的一部分被遮挡在物体的背后的情况下,也可以进行学习以能够正确地识别该运动体。
位置计算部106计算表示追踪到的运动体的移动轨迹的坐标。一般而言,根据摄像机的拍摄影像计算出的运动体的坐标由各个摄像机固有的局部坐标系(摄像机坐标系)来表现,因此,位置计算部106使用摄像机10a~10n的设置位置、朝向、镜头的视场角、镜头的焦距、镜头的像差等参数,将摄像机坐标系坐标转换成全局的世界坐标系。为了求出坐标转换中使用的式子,使用所述参数事先进行摄像机间的位置对齐调整(校准)。
在运动线路数据管理表107中记录有从位置计算部106输出的表示运动体的移动轨迹的运动线路数据。图3是示出运动线路数据管理表107的一例的图。运动线路数据管理表107记录有表示运动体的移动轨迹的坐标303、表示规定的时间间隔的时刻且是运动体存在于各坐标的时刻的时间信息300、运动体的识别信息301和运动体的属性信息302作为运动线路数据。时间信息300例如由年4位、月2位、日2位、时2位(24小时制)、分2位、秒2位、毫秒3位表示。识别信息301例如是作业者ID等用于唯一地识别运动体的信息。属性信息302是与识别信息301对应的信息,是表示特定的运动体存在的区域的信息。在运动体是作业者的情况下,属性信息302例如表示作业者负责的作业区域。此外,在运动体是物体的情况下,属性信息302例如表示暂时保管物体的区域或仓库。这些信息能够以摄像机拍摄的帧单位进行记录,但是,也可以根据识别部105和位置计算部106的处理负荷、希望可视化的运动线路的时间间隔等来决定。
区域确定部108根据运动线路数据管理表107中记录的运动线路数据,确定运动体的停留时间长的区域。
运动线路提取部109提取表示在由区域确定部108确定的区域间移动的运动体的移动轨迹的多个运动线路。图4是示出由运动线路提取部109提取出的运动线路的一例的图。a1、a2是由区域确定部108确定的区域,将a1称作出发区域,将a2称作到达区域。D1、D2、D3是表示从出发区域a1向到达区域a2移动的运动体的移动轨迹的运动线路,分别由坐标P100~P110、P200~P206、P300~P307表示。运动线路提取部109取得运动线路数据管理表107(图3)中记录的运动线路的坐标,由此提取运动线路D1、D2、D3。
分割点取得部110分别以分割数N(N为2以上的整数)对由运动线路提取部109提取出的运动线路进行分割,由此取得N-1个分割点的坐标。图5是示出对运动线路D1、D2、D3进行3分割而得到的2个分割点的图。分割点取得部110从分别构成运动线路D1、D2、D3的坐标中的属于出发区域a1的坐标(出发点)P100、P200、P300与属于到达区域a2的坐标(到达点)P110、P206、P307之间存在的坐标P101~P109、P201~P205、P301~P306中,分别取得2个坐标作为分割点。以采样间隔相等的方式取得分割点,关于运动线路D1,取得坐标P103、P106作为分割点B103、B106。同样,关于运动线路D2,取得坐标P202、P204作为分割点B202、B204,关于运动线路D3,取得坐标P302、P304作为分割点B302、B304。
平均点计算部111对由分割点取得部110取得的属于不同的运动线路的分割点的坐标彼此进行平均,由此计算N-1个平均点的坐标。此外,平均点计算部111计算出发区域a1中包含的出发点的坐标的平均值作为平均出发点,计算到达区域a2中包含的到达点的坐标的平均值作为平均到达点。
描绘部112描绘穿过由平均点计算部111计算出的平均出发点、N-1个平均点和平均到达点的线。由此,能够得到基于由运动线路提取部109提取出的多个运动线路的代表性运动线路。图6是示出基于运动线路D1、D2、D3的代表性运动线路R的图。在图6中,H0是平均出发点,H3是平均到达点,H1是分割点B103、B202、B302的平均点,H2是分割点B106、B204、B304的平均点。通过连接平均出发点H0、平均点H1、H2、平均到达点H3,描绘代表运动线路D1、D2、D3的运动线路R。
显示装置11例如是液晶显示器,显示从显示处理装置100输出的各种数据。
图7是示出显示处理装置100的处理的流程图。首先,区域确定部108根据运动线路数据管理表107中记录的运动线路数据,确定运动体的停留时间长的区域(S400)。接着,运动线路提取部109提取表示在由区域确定部108确定的区域间移动的运动体的移动轨迹的多个运动线路(S401)。接着,分割点取得部110分别以分割数N(N为2以上的整数)对由运动线路提取部109提取出的运动线路进行分割,由此取得N-1个分割点的坐标(S402)。接着,平均点计算部111对由分割点取得部110取得的属于不同的运动线路的分割点的坐标彼此进行平均,由此计算N-1个平均点的坐标。此外,平均点计算部111计算出发区域a1中包含的坐标的平均值作为平均出发点,计算到达区域a2中包含的坐标的平均值作为平均到达点(S403)。描绘部112描绘穿过由平均点计算部111计算出的N-1个平均点、出发区域a1中包含的平均出发点和到达区域a2中包含的到达平均点的运动线路(S404)。
图8是示出构成图1的***的硬件装置的一例的图。CPU808执行主存储809中存储的程序等,由此实现图1所示的识别部105、位置计算部106、区域确定部108、运动线路提取部109、分割点取得部110、平均点计算部111和描绘部112这样的各功能。主存储809例如是非易失性存储器,存储由CPU808执行的各种程序。GPU(Graphical Processing Unit:图形处理单元)810是用于进行描绘的图形处理器,进行运动线路和GUI(Graphical UserInterface:图形用户界面)等的描绘处理。针对专用的图像存储器(帧缓冲器)来进行GPU810的描绘。GPU810将描绘出的图像输出到显示装置11。显示装置11例如是液晶显示器,显示从显示处理装置100输出的图像。另外,显示装置11也可以设置于显示处理装置100。网络接口804是用于经由网络803输入由网络摄像机801拍摄到的影像数据的接口。网络803可以是有线的,也可以是无线的。I/O接口805例如是用于经由USB(Universal Serial Bus:通用串行总线)这样的接口输入由摄像机802拍摄到的影像数据的接口。另外,网络摄像机801和摄像机802是图1的摄像机10a~10n的一例。存储部806存储由CPU808和GPU810处理的各种数据(影像数据、运动线路数据、程序数据等)。存储部806经由***总线807将存储的数据转送到CPU808、GPU810。
根据本实施方式,显示处理装置100描绘对多个运动线路进行平均而得到的运动线路,由此,能够容易掌握运动体的移动方式。此外,显示处理装置100描绘对从运动体的停留时间长的区域出发或到达运动体的停留时间长的区域的多个运动线路进行平均而得到的运动线路,由此,例如,能够容易掌握以作业者进行作业的区域或保管有部件的区域为中心的作业者或部件的移动方式。
2.实施方式2
使用图9、图10对本发明的实施方式2的显示处理装置进行说明。图9和图10是使用箭头示出代表性运动线路的图。在图9中,与图6相同的标号表示相同部分。实施方式1中的描绘部112通过分别连接平均出发点、平均点、平均到达点而描绘出表示代表性运动线路的线,但是,如图9所示,实施方式2中的描绘部112使用箭头R11、R12、R13描绘代表性运动线路。如图9所示,以连接平均出发点H0和平均点H1、平均点H1和下一个平均点H2、平均点H2和到达平均点H3的方式描绘箭头R11、R12、R13。由此,发挥能够掌握运动体的移动方向这样的效果。另外,除了图9所示的这种箭头以外,描绘部112也可以描绘由V字形状、矢量形状等表示的箭头,由此表示运动体移动的方向。
在图10中,由V字形状表示的箭头R101~R119表示将a3设为出发区域、将a4设为到达区域的运动体的代表性运动线路。箭头R201~R212表示将a4设为出发区域、将a3设为到达区域的运动体的代表性运动线路。箭头R301~R308表示将a5设为出发区域、将a6设为到达区域的运动体的代表性运动线路。
这里,描绘部112也可以描绘根据运动体的移动速度改变了颜色(浓度、明度、彩度)和/或宽度方向的长度的箭头。具体而言,描绘部112在如箭头R106~R115那样相邻的平均点的距离小于阈值(即运动体的移动速度小于阈值)的情况下,使箭头的颜色的浓度变浅,降低彩度,或者减小与背景色的明度差,在如箭头R101~R105、R116~R119那样相邻的平均点的距离为阈值以上(即运动体的移动速度为阈值以上)的情况下,使箭头的颜色的浓度变深,提高彩度,或者增大与背景色的明度差。由此,发挥如下效果:根据描绘部112描绘出的箭头,能够容易掌握运动体的移动速度的变化。另外,作为使箭头的颜色(浓度、明度、彩度)变化的基准的阈值也可以设定多个。此外,描绘部112在运动体的移动速度小于阈值的情况下,如箭头R106~R115那样使宽度方向的长度变短,在运动体的移动速度为阈值以上的情况下,如箭头R101~R105、R116~R119那样使宽度方向的长度变长。
此外,描绘部112也可以描绘根据由运动线路提取部109提取出的运动线路的条数改变了宽度方向的长度和/或颜色(浓度、明度、彩度)的箭头。具体而言,描绘部112在由运动线路提取部109提取出的运动线路的条数小于阈值的情况下,如箭头R301~308那样使宽度方向的长度变短,在提取出的运动线路的条数为阈值以上的情况下,如箭头R201~212那样使宽度方向的长度变长。此外,描绘部112在提取出的运动线路的条数小于阈值的情况下,如箭头R301~308那样使颜色的浓度变浅,降低彩度,或者减小与背景色的明度差,在提取出的运动线路的条数为阈值以上的情况下,如箭头R201~212那样使颜色的浓度变深,提高彩度,或者增大与背景色的明度差。由此,发挥如下效果:根据描绘部112描绘出的箭头,能够容易掌握运动体移动的频度。另外,作为使箭头的宽度方向的长度和/或颜色(浓度、明度、彩度)变化的基准的阈值也可以设定多个。
3.实施方式3
使用图11、图12对本发明的实施方式3的显示处理装置进行说明。图11是实施方式3的显示处理装置的结构图,其特征在于,在与图1所示的实施方式1有关的显示处理装置的基础上,还具有工序路径描绘部113和生产工序管理表114。在生产工序管理表114中记录有生产工序管理数据、别名被称作MES(Manufacturing Execution System:制造执行***)数据的用于对作业工序顺序、入厂/出厂、质量、维护、设备、制造执行、半成品等进行管理的数据,至少包含确定生产线中的各工序的内容的工序信息(加工、组装、检查、包装等)、以及确定工序的顺序的工序路径信息。工序路径信息表示部件、材料、产品等物品的流动和/或作业工序、生产工序的流动这样的工序的路径。工序路径描绘部113从生产工序管理数据中提取工序路径信息和工序信息,描绘表示工序路径的箭头和/或工序信息。由该工序路径描绘部113描绘出的表示工序路径的箭头和/或工序信息与由描绘部112描绘出的箭头一起重叠显示于显示装置11。以后,在不区分各个箭头进行说明的情况下,将由工序路径描绘部113描绘出的箭头称作工序路径箭头,将由描绘部112描绘出的箭头称作运动体箭头。
图12示出显示画面的一例。1000a~l表示工序路径箭头,2000表示运动体箭头。以至少颜色(浓度、明度、彩度)、实线、虚线、宽度方向的长度中的任意一方不同的显示方式的箭头描绘工序路径箭头1000和运动体箭头2000,以区分它们。此外,工序路径描绘部113也可以描绘根据各工序的内容、作业工序和物品的种类改变了颜色(浓度、明度、彩度)、实线、虚线、宽度方向的长度的工序路径箭头1000。在图12的例子中,示出工序路径箭头1000a~c和运动体箭头2000朝向相同的方向,且作业者沿着工序路径移动。此外,在经由鼠标等未图示的操作单元选择了运动体箭头2000的情况下,如1100那样显示作业者的属性信息和移动历史等。同样,在选择了表示作业工序的工序路径箭头1000的情况下,显示负责相应作业工序的设备的工作状况、生产状况、维护状况、质量状况等。这样,不仅显示表示作业者的移动方式的运动体箭头2000,还重叠显示表示工序路径的工序路径箭头1000,由此,能够使作业者的移动和工序路径的相关关系可视化。由此,容易掌握作业者的移动、工序路径的浪费,能够有助于工厂的布局改善、人员配置等作业的高效化。
4.其他应用例
上述实施例只不过是本发明的实施的一例,考虑追加/变更了以下这种结构的应用例。
图1所示的分割点取得部110也可以受理经由显示装置11中显示的滑动条从未图示的操作部指定的分割数。图13是示出显示装置11中显示的滑动条的图。702是用于指定分割数的滑动条。分割点取得部110也可以使用经由滑动条702指定的分割数对运动线路进行分割。此外,703是用于指定时间信息的范围的滑动条,作为本发明的时间信息指定部的一例发挥功能。图1所示的运动线路提取部109也可以从运动线路数据管理表107提取包含经由滑动条703指定的时间信息的范围中包含的时间信息的运动线路数据,提取由该运动线路数据表示的多个运动线路。进而,描绘部112也可以描绘根据经由滑动条702、703指定的分割数和时间信息的范围而逐次变化的运动线路。此外,分割点取得部110也可以使用与显示装置11的画面尺寸或分辨率预先对应的分割数,还可以使用从未图示的操作部指定的数值作为分割数。
图1所示的运动线路提取部109也可以从运动线路数据管理表107提取包含从未图示的操作部指定的作业者ID等识别信息301和作业者负责的作业区域等属性信息302的运动线路数据,从由该运动线路数据表示的多个运动线路中提取穿过出发区域和到达区域的多个运动线路。由此,发挥能够容易掌握与期望的识别信息301或属性信息302相关联的运动体的移动方式这样的效果。
图1所示的区域确定部108也可以不仅根据运动体的停留时间的长度,还根据作业区域、专用机械/机器人设置区域、部件/产品保管区域、事务所等运动体停留一定时间的区域的种类来确定出发区域。进而,也可以根据将已确定的出发区域的种类,不同功能的生产、生产线生产、单元生产等生产方式,以及加工、组装、检查、包装、操作或运输等生产工序这样的运动体的移动方式模式化的作业种类的组合来确定到达区域。具体而言,在某个作业区域中进行基于单元生产方式的生产的情况下,作业区域以外的区域中的作业者的停留时间总体变短,因此,将与作业相关的部件/产品保管区域优先确定为到达区域。
图1所示的区域确定部108也可以将表示由区域确定部108确定的区域的中心的位置坐标等代表性地表示各个区域的位置坐标设为平均出发点或平均到达点。而且,描绘部112也可以描绘穿过出发区域的平均出发点、N-1个平均点和到达区域的平均到达点的线。该情况下,平均点计算部111不需要分别计算平均出发点、平均到达点。
上述信息处理装置实施的描绘对多个运动线路进行平均而得到的代表性运动线路的处理也可以构成为信息处理方法,还可以构成为用于使计算机发挥功能的程序。
在上述实施方式中,区域确定部108根据运动体的停留时间等确定出发区域和/或到达区域,但是,确定出发区域和/或到达区域的方法不限于此。例如,出发区域和/或到达区域也可以通过信息处理装置的用户的操作而手动设定,还可以在信息处理装置的导入时等进行设定
在上述实施方式中,根据由摄像机拍摄到的影像计算运动体的坐标,但是,计算运动体的坐标的方法不限于此,也可以使用能够计算运动体的坐标的任意技术。例如,信息处理装置也可以取得由运动体持有或设置于运动体的通信终端测定出的坐标。此外,例如,信息处理装置也可以根据运动体持有或设置于运动体的RFID(radio frequencyidentifier:射频标识符)标签或信标等无线标签的电波来计算运动体的坐标。此外,例如,信息处理装置也可以将设置有检测到运动体的各种传感器的位置视为运动体的坐标。
标号说明
100:显示处理装置;108:区域确定部;109:运动线路提取部;110:分割点取得部;111:平均点计算部;112:描绘部。
Claims (10)
1.一种显示处理装置,其特征在于,该显示处理装置具有:
运动线路提取部,其提取表示从第1区域出发而到达第2区域的运动体的轨迹和/或从第2区域出发而到达第1区域的运动体的轨迹的多个运动线路;
分割点取得部,其以分割数N(N为2以上的整数)分别对由所述运动线路提取部提取出的运动线路进行分割,由此取得N-1个分割点;
平均点计算部,其对由所述分割点取得部取得的属于不同的运动线路的分割点的坐标彼此进行平均,由此计算N-1个平均点;以及
描绘部,其描绘穿过由所述平均点计算部取得的N-1个平均点、所述第1区域和所述第2区域的运动线路。
2.根据权利要求1所述的显示处理装置,其特征在于,
所述运动线路由运动线路数据表示,该运动线路数据包含表示运动体的移动轨迹的坐标和表示运动体存在于该坐标的时刻的时间信息,
所述分割点取得部从表示由所述运动线路提取部提取出的运动线路的所述运动线路数据中取得构成各运动线路的所述坐标的数量,取得将该数量除以所述分割数N而得到的值作为采样间隔的N-1个分割点。
3.根据权利要求2所述的显示处理装置,其特征在于,
所述显示处理装置具有时间信息指定部,该时间信息指定部用于指定时间信息的范围,
所述运动线路提取部提取包含由所述时间信息指定部指定的时间信息的范围中包含的时间信息在内的运动线路数据所示的多个运动线路。
4.根据权利要求2或3所述的显示处理装置,其特征在于,
所述显示处理装置具有区域确定部,该区域确定部根据所述运动线路数据确定运动体的停留时间长的区域,
所述运动线路提取部提取将由所述区域确定部确定的区域设为所述第1区域和/或所述第2区域的运动线路。
5.根据权利要求1~4中的任意一项所述的显示处理装置,其特征在于,
所述描绘部描绘表示所述运动体移动的方向的运动线路。
6.根据权利要求1~5中的任意一项所述的显示处理装置,其特征在于,
所述描绘部描绘根据由所述运动线路提取部提取出的运动线路的条数改变了颜色和/或宽度方向的长度的运动线路。
7.根据权利要求1~6中的任意一项所述的显示处理装置,其特征在于,
所述描绘部描绘根据所述运动体的移动速度改变了颜色和/或宽度方向的长度的运动线路。
8.根据权利要求1~7中的任意一项所述的显示处理装置,其特征在于,
所述显示处理装置还具有工序路径描绘部,该工序路径描绘部描绘表示物品或工序的流动的箭头。
9.一种显示处理方法,其特征在于,该显示处理方法具有以下步骤:
运动线路提取步骤,提取表示从第1区域出发而到达第2区域的运动体的轨迹和/或从第2区域出发而到达第1区域的运动体的轨迹的多个运动线路;
分割点取得步骤,以分割数N(N为2以上的整数)分别对在所述运动线路提取步骤中提取出的运动线路进行分割,由此取得N-1个分割点;
平均点计算步骤,对在所述分割点取得步骤中取得的属于不同的运动线路的分割点的坐标彼此进行平均,由此计算N-1个平均点;以及
描绘步骤,描绘穿过在所述平均点计算步骤中取得的N-1个平均点、所述第1区域和所述第2区域的运动线路。
10.一种程序,其特征在于,该程序使计算机执行以下步骤:
运动线路提取步骤,提取表示从第1区域出发而到达第2区域的运动体的轨迹和/或从第2区域出发而到达第1区域的运动体的轨迹的多个运动线路;
分割点取得步骤,以分割数N(N为2以上的整数)分别对在所述运动线路提取步骤中提取出的运动线路进行分割,由此取得N-1个分割点;
平均点计算步骤,对在所述分割点取得步骤中取得的属于不同的运动线路的分割点的坐标彼此进行平均,由此计算N-1个平均点;以及
描绘步骤,描绘穿过在所述平均点计算步骤中取得的N-1个平均点、所述第1区域和所述第2区域的运动线路。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/028383 WO2021014479A1 (ja) | 2019-07-19 | 2019-07-19 | 表示処理装置、表示処理方法及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114096999A true CN114096999A (zh) | 2022-02-25 |
Family
ID=74193731
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980098382.7A Pending CN114096999A (zh) | 2019-07-19 | 2019-07-19 | 显示处理装置、显示处理方法和程序 |
Country Status (7)
Country | Link |
---|---|
US (1) | US20220122272A1 (zh) |
JP (1) | JP7004116B2 (zh) |
KR (1) | KR102436618B1 (zh) |
CN (1) | CN114096999A (zh) |
DE (1) | DE112019007455T5 (zh) |
TW (1) | TWI785269B (zh) |
WO (1) | WO2021014479A1 (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20210158057A1 (en) * | 2019-11-26 | 2021-05-27 | Scanalytics, Inc. | Path analytics of people in a physical space using smart floor tiles |
JP2023155637A (ja) * | 2022-04-11 | 2023-10-23 | 株式会社日立製作所 | 軌跡表示装置および方法 |
WO2024142543A1 (ja) * | 2022-12-27 | 2024-07-04 | コニカミノルタ株式会社 | 人流分析装置、プログラムおよび人流分析方法 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005346617A (ja) * | 2004-06-07 | 2005-12-15 | East Japan Railway Co | 通行人行動解析システム |
CN1777281A (zh) * | 2004-11-17 | 2006-05-24 | 株式会社日立制作所 | 使用多个摄像机的监视*** |
JP2014123186A (ja) * | 2012-12-20 | 2014-07-03 | Nippon Telegr & Teleph Corp <Ntt> | 線情報入力装置、映像再生装置、線情報入力方法、線情報入力プログラム及び映像再生プログラム |
US20150120237A1 (en) * | 2013-10-29 | 2015-04-30 | Panasonic Corporation | Staying state analysis device, staying state analysis system and staying state analysis method |
CN105376527A (zh) * | 2014-08-18 | 2016-03-02 | 株式会社理光 | 轨迹描绘装置和轨迹描绘方法以及轨迹描绘*** |
CN105589939A (zh) * | 2015-12-15 | 2016-05-18 | 北京百度网讯科技有限公司 | 识别群体运动轨迹方法和装置 |
US20170263024A1 (en) * | 2014-09-11 | 2017-09-14 | Nec Corporation | Information processing device, display method, and program storage medium |
CN109033424A (zh) * | 2018-08-10 | 2018-12-18 | 北京航天控制仪器研究所 | 一种基于公交车运营轨迹精确提取公交车行驶路径的方法 |
CN109697221A (zh) * | 2018-11-22 | 2019-04-30 | 东软集团股份有限公司 | 轨迹规律的挖掘方法、装置、存储介质及电子设备 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06223198A (ja) * | 1993-01-26 | 1994-08-12 | Hitachi Ltd | 光線追跡による画像生成装置及び方法 |
US20090138188A1 (en) * | 2005-07-22 | 2009-05-28 | Andrej Kores | Method, device and system for modeling a road network graph |
US8139818B2 (en) * | 2007-06-28 | 2012-03-20 | Toshiba Tec Kabushiki Kaisha | Trajectory processing apparatus and method |
JP2009110408A (ja) * | 2007-10-31 | 2009-05-21 | Toshiba Tec Corp | 動線編集装置及び動線編集プログラム |
KR101498124B1 (ko) * | 2008-10-23 | 2015-03-05 | 삼성전자주식회사 | 움직임 궤적을 이용한 프레임률 향상 장치 및 방법 |
US8213681B2 (en) * | 2009-01-09 | 2012-07-03 | Panasonic Corporation | Moving object detection method and moving object detection apparatus |
KR101048045B1 (ko) * | 2009-05-07 | 2011-07-13 | 윈스로드(주) | 객체의 이동궤적을 이용한 철도건널목 위험지역의 지장물 영상검지장치 및 그 제어방법 |
MX2012009579A (es) * | 2010-02-19 | 2012-10-01 | Toshiba Kk | Sistema de rastreo de objetos en movimiento y metodo de rastreo de objetos en movimiento. |
TWI570666B (zh) * | 2013-11-15 | 2017-02-11 | 財團法人資訊工業策進會 | 電子裝置及其影片物體追蹤方法 |
JP6200306B2 (ja) * | 2013-12-09 | 2017-09-20 | 株式会社日立製作所 | 映像検索装置、映像検索方法、および記憶媒体 |
CN104700434B (zh) * | 2015-03-27 | 2017-10-31 | 北京交通大学 | 一种用于复杂结构化场景的人群运动轨迹异常检测方法 |
JP6587435B2 (ja) * | 2015-06-29 | 2019-10-09 | キヤノン株式会社 | 画像処理装置、情報処理方法及びプログラム |
JP6433389B2 (ja) * | 2015-08-04 | 2018-12-05 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP6798549B2 (ja) | 2016-03-31 | 2020-12-09 | 日本電気株式会社 | 動線表示システム、動線表示方法および動線表示プログラム |
JP6898165B2 (ja) * | 2017-07-18 | 2021-07-07 | パナソニック株式会社 | 人流分析方法、人流分析装置及び人流分析システム |
WO2020066043A1 (ja) * | 2018-09-28 | 2020-04-02 | オリンパス株式会社 | 顕微鏡システム、投影ユニット、及び、画像投影方法 |
-
2019
- 2019-07-19 CN CN201980098382.7A patent/CN114096999A/zh active Pending
- 2019-07-19 DE DE112019007455.5T patent/DE112019007455T5/de active Pending
- 2019-07-19 WO PCT/JP2019/028383 patent/WO2021014479A1/ja active Application Filing
- 2019-07-19 JP JP2021534843A patent/JP7004116B2/ja active Active
- 2019-07-19 KR KR1020227000612A patent/KR102436618B1/ko active IP Right Grant
- 2019-09-02 TW TW108131490A patent/TWI785269B/zh active
-
2021
- 2021-12-23 US US17/561,341 patent/US20220122272A1/en not_active Abandoned
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005346617A (ja) * | 2004-06-07 | 2005-12-15 | East Japan Railway Co | 通行人行動解析システム |
CN1777281A (zh) * | 2004-11-17 | 2006-05-24 | 株式会社日立制作所 | 使用多个摄像机的监视*** |
JP2014123186A (ja) * | 2012-12-20 | 2014-07-03 | Nippon Telegr & Teleph Corp <Ntt> | 線情報入力装置、映像再生装置、線情報入力方法、線情報入力プログラム及び映像再生プログラム |
US20150120237A1 (en) * | 2013-10-29 | 2015-04-30 | Panasonic Corporation | Staying state analysis device, staying state analysis system and staying state analysis method |
CN105376527A (zh) * | 2014-08-18 | 2016-03-02 | 株式会社理光 | 轨迹描绘装置和轨迹描绘方法以及轨迹描绘*** |
US20170263024A1 (en) * | 2014-09-11 | 2017-09-14 | Nec Corporation | Information processing device, display method, and program storage medium |
CN105589939A (zh) * | 2015-12-15 | 2016-05-18 | 北京百度网讯科技有限公司 | 识别群体运动轨迹方法和装置 |
CN109033424A (zh) * | 2018-08-10 | 2018-12-18 | 北京航天控制仪器研究所 | 一种基于公交车运营轨迹精确提取公交车行驶路径的方法 |
CN109697221A (zh) * | 2018-11-22 | 2019-04-30 | 东软集团股份有限公司 | 轨迹规律的挖掘方法、装置、存储介质及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
TW202105313A (zh) | 2021-02-01 |
JPWO2021014479A1 (ja) | 2021-12-09 |
TWI785269B (zh) | 2022-12-01 |
KR102436618B1 (ko) | 2022-08-25 |
DE112019007455T5 (de) | 2022-03-03 |
US20220122272A1 (en) | 2022-04-21 |
WO2021014479A1 (ja) | 2021-01-28 |
JP7004116B2 (ja) | 2022-01-21 |
KR20220009491A (ko) | 2022-01-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11710322B2 (en) | Surveillance information generation apparatus, imaging direction estimation apparatus, surveillance information generation method, imaging direction estimation method, and program | |
CN114096999A (zh) | 显示处理装置、显示处理方法和程序 | |
JP6558579B2 (ja) | 動線分析システム及び動線分析方法 | |
JP5866564B1 (ja) | モニタリング装置、モニタリングシステムおよびモニタリング方法 | |
US9870684B2 (en) | Information processing apparatus, information processing method, program, and information processing system for achieving a surveillance camera system | |
US9191633B2 (en) | Tracking assistance device, tracking assistance system and tracking assistance method | |
US9965701B2 (en) | Image processing apparatus and method | |
AU2011352408B2 (en) | Tracking moving objects using a camera network | |
US20180139416A1 (en) | Tracking support apparatus, tracking support system, and tracking support method | |
EP2793183B1 (en) | Image processing device and recording medium for image processing program | |
US20170295953A1 (en) | Monitoring device, monitoring system, and monitoring method | |
EP2874100B1 (en) | Slow change detection system | |
JP6289762B1 (ja) | 映像処理装置、映像処理方法、映像処理プログラム、及び映像監視システム | |
JP2018077837A (ja) | 位置認識方法およびシステム、ならびに異常判定方法およびシステム | |
CN113610835B (zh) | 看护摄像机的人形检测方法 | |
JP2023100805A (ja) | 撮像装置、撮像方法及び撮像プログラム | |
JP2017034511A (ja) | 移動体検出システム | |
US20130265420A1 (en) | Video processing apparatus, video processing method, and recording medium | |
KR20140134505A (ko) | 영상 객체 추적 방법 | |
JP2016099633A (ja) | 携帯端末を利用した保全点検システム | |
KR20160043484A (ko) | 팬틸트줌 카메라를 이용한 이벤트 감지방법 및 장치 | |
EP4099264B1 (en) | Learning device and learning method | |
JP6996669B2 (ja) | 表示処理装置、表示処理方法及びプログラム | |
CN112640444A (zh) | 车站监控装置、车站监控方法及程序 | |
WO2022254890A1 (ja) | 動線解析装置、動線解析方法及びコンピュータプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |