TWI785269B - 顯示處理裝置、顯示處理方法及記錄有程式的媒體 - Google Patents

顯示處理裝置、顯示處理方法及記錄有程式的媒體 Download PDF

Info

Publication number
TWI785269B
TWI785269B TW108131490A TW108131490A TWI785269B TW I785269 B TWI785269 B TW I785269B TW 108131490 A TW108131490 A TW 108131490A TW 108131490 A TW108131490 A TW 108131490A TW I785269 B TWI785269 B TW I785269B
Authority
TW
Taiwan
Prior art keywords
moving
area
average
aforementioned
moving line
Prior art date
Application number
TW108131490A
Other languages
English (en)
Other versions
TW202105313A (zh
Inventor
中田悠介
加藤義幸
今村圭子
Original Assignee
日商三菱電機股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商三菱電機股份有限公司 filed Critical 日商三菱電機股份有限公司
Publication of TW202105313A publication Critical patent/TW202105313A/zh
Application granted granted Critical
Publication of TWI785269B publication Critical patent/TWI785269B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/20—Drawing from basic elements, e.g. lines or circles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/20—Drawing from basic elements, e.g. lines or circles
    • G06T11/203—Drawing of straight lines or curves
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30232—Surveillance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30241—Trajectory

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Stereo-Broadcasting Methods (AREA)
  • Circuits Of Receivers In General (AREA)
  • Image Generation (AREA)
  • Train Traffic Observation, Control, And Security (AREA)

Abstract

描繪出將顯示自第一區域出發且到達第二區域之移動體的軌跡及／或自第二區域出發且到達第一區域之移動體的軌跡之複數條動線經平均後的動線，藉此以易於掌握移動體之移動的態樣 。 動線抽出部109係抽出顯示在經由區域特定部108所特定之區域間移動之移動體之移動軌跡的複數條動線。分割點取得部110係將經由動線抽出部109所抽出的動線分別以分割數N（N係2以上的整數）作分割，藉此取得N-1個分割點的座標。平均點算出部111係將經由分割點取得部110所取得之不同的動線所屬之分割點的座標彼此予以平均，藉此算出N-1個平均點的座標。描繪部112係描繪出通過經由平均點算出部所算出之N-1個平均點、出發區域a1之平均出發點及到達區域a2之平均到達點的動線。

Description

顯示處理裝置、顯示處理方法及記錄有程式的媒體
本發明係關於一種顯示處理裝置、顯示處理方法及記錄有程式的媒體。
自以往以來，已知有一種在商業設施等的預定空間中，算出顯示行人等之移動軌跡的座標，且根據所算出的座標而顯示移動體之動線的技術。
例如，在專利文獻1中，已揭示一種從圖像資料抽出人物，且將人物朝向對象的方向與時間隨同動線一併顯示的技術。
此外，例如，在專利文獻2中，已揭示一種追蹤通行於預定空間之行人的位置而求出通行軌跡（動線），且將在預定時間內通行於預定空間之行人所有的動線予以顯示的技術。 [先前技術文獻] [專利文獻]
專利文獻1：WO2017-170084號公報（第5圖） 專利文獻2：日本特開2005-346617號公報（第6圖）
[發明所欲解決之課題]
在專利文獻1所揭示的技術中，會有僅假想顯示一條動線的課題。
此外，在上述專利文獻2所揭示的技術中，雖顯示有複數條動線，但複數條動線是在重疊的狀態下顯示，因此會有隨著所顯示之動線的條數增加而難以掌握移動體之移動之態樣的課題。
本發明係有鑑於解決上述的問題而研創者，其目的為描繪出將顯示自第一區域（area）出發且到達第二區域之移動體的軌跡及／或自第二區域出發且到達第一區域之移動體的軌跡之複數條動線經平均後的動線，藉此以易於掌握移動體之移動的態樣。 [用以解決問題的手段]
本發明之顯示處理裝置係包括：動線抽出部，係抽出複數條動線，該複數條動線係顯示自第一區域出發且到達第二區域之移動體的軌跡及／或自第二區域出發且到達第一區域之移動體的軌跡；分割點取得部，係將經由前述動線抽出部所抽出的動線分別以分割數N（N係2以上的整數）作分割，藉此取得N-1個分割點的座標；平均點算出部，係將經由前述分割點取得部所取得之不同的動線所屬之分割點的座標彼此予以平均，藉此算出N-1個平均點；及描繪部，係描繪出通過經由前述平均點算出部所取得之N-1個平均點、前述第一區域及前述第二區域的動線。 [發明之功效]
本發明之顯示處理裝置係可達成描繪出將顯示自第一區域出發且到達第二區域之移動體的軌跡及／或自第二區域出發且到達第一區域之移動體的軌跡之複數條動線經平均後的動線，藉此以易於掌握移動體之移動的態樣的效果。
1、實施形態1 第1圖係為本發明之一實施形態之顯示處理裝置的構成圖。攝像機10a至10n係設置在設施內之頂棚附近等視野良好的場所，用以拍攝移動的人物或物體（以下在無須分別區別的情形下稱為移動體）。攝像機10a至10n係彼此連動，且設置在移動體於設施內的任何場所都可無間斷地拍攝的位置。第2圖係為顯示工場內之攝像機之設置例的圖。在工廠中，除攝像機10a至10n外，還配置有工廠的柱子與牆壁等的軀體200、製造裝置、機器人（robot）、作業台等的設備207。攝像機10a至10n係使用視野角度大的透鏡（lens）來拍攝較廣的範圍，以減少攝影對象的死角。
識別部105係從藉由攝像機10a至10n所拍攝的影像來識別在設施內移動之相同的移動體，並且涵蓋攝像機10a至10n的整個攝影區域來追跡所識別出的移動體。作為識別移動體的方法，可使用辨識貼附於作業服或頭盔（helmet）上之固有的標誌（marker）或條碼（barcode）的圖像識別法。此外，亦可使用藉由機械學習所進行的移動體推定法。在機械學習方面，亦可進行學習，俾可在無論是複數個移動體交錯的情形、或是移動體的一部分隱蔽在陰影的情形下都可正確地識別出該移動體。
位置算出部106係算出表示所追跡之移動體之移動軌跡的座標。一般而言，從攝像機的攝影影像所算出之移動體的座標，係以各個攝像機固有的本地（local）座標系統（攝像機座標系統）來表現，因此位置算出部106係使用攝像機10a至10n的設置位置、方向、透鏡的視野角度、透鏡的焦點距離、及透鏡之像差等參數，而將攝像機座標系統進行座標轉換為全球性的世界座標系統。為了求出要用於座標轉換的公式，故假設使用前述的參數，事先進行了攝像機間的對位調整（calibration，校準）。
動線資料管理表單107係供記錄動線資料，該動線資料係顯示從位置算出部106所輸出之移動體的移動軌跡。第3圖係為顯示動線資料管理表單107之一例的圖。動線資料管理表單107係記錄有顯示移動體之移動軌跡的座標303、顯示預定之時間間隔的時刻且顯示各座標存在有移動體之時刻的時間資訊300、移動體的識別資訊301及移動體的屬性資訊302作為動線資料。時間資訊300係例如以年4位數、月2位數、日2位數、時2位數（24小時制）、分2位數、秒2位數、毫秒3位數來表示。識別資訊301係例如為作業者ID等用以將移動體識別為一個的資訊。屬性資訊302係為與識別資訊301建立了對應關係的資訊，且為顯示存在特定之移動體之區域的資訊。當移動體為作業者時，屬性資訊302係例如表示作業者要負責的作業區域。此外，當移動體為物體時，屬性資訊302係例如表示要暫時地保管物體的區域或倉庫。此等資訊雖可以攝像機攝影的訊框（frame）單位來記錄，但亦可依據識別部105及位置算出部106的處理負荷、及欲可視覺化之動線的時間間隔等來決定。
區域特定部108係從被記錄於動線資料管理表單107中的動線資料而特定出移動體之停留時間較長的區域。
動線抽出部109係抽出複數條動線，該複數條動線係顯示在經由區域特定部108所特定出之區域間移動之移動體的移動軌跡。第4圖係為顯示藉由動線抽出部109所抽出之動線之一例的圖。a1、a2係為經由區域特定部108所特定出的區域，茲將a1稱為出發區域、a2稱為到達區域。D1、D2、D3係為表示從出發區域a1移動至到達區域a2之移動體之移動軌跡的動線，分別藉由座標P100至P110、P200至P206、P300至P307來表示。動線抽出部109係藉由取得被記錄於動線資料管理表單107（第3圖）中之動線的座標來抽出動線D1、D2、D3。
分割點取得部110係將經由動線抽出部109所抽出的動線，分別以分割數N（N係2以上的整數）作分割，藉此取得N-1個分割點的座標。第5圖係為顯示將動線D1、D2、D3分割為三個所獲得之二個分割點的圖。分割點取得部110係從分別構成動線D1、D2、D3的座標中之存在於出發區域a1所屬之座標（出發點）P100、P200、P300、與到達區域a2所屬之座標（到達點）P110、P206、P307之間的座標P101至P109、P201至P205、P301至P306的各者，取得二個座標作為分割點。分割點係以取樣（sampling）間隔相等之方式取得，關於動線D1，係取得座標P103、P106作為分割點B103、B106。同樣地，關於動線D2，係取得座標P202、P204作為分割點B202、B204，關於動線D3，係取得座標P302、P304作為分割點B302、B304。
平均點算出部111係將經由分割點取得部110所取得之不同動線所屬之分割點的座標彼此予以平均，藉此算出N-1個平均點的座標。此外，平均點算出部111係算出出發區域a1中所含之出發點之座標的平均值作為平均出發點，且算出到達區域a2中所含之到達點之座標的平均值作為平均到達點。
描繪部112係描繪出通過經由平均點算出部111所算出的平均出發點、N-1個平均點、及平均到達點的線。藉此，即可獲得根據經由動線抽出部109所抽出之複數條動線而來之具代表性的動線。第6圖係為顯示根據動線D1、D2、D3而來之具代表性之動線R的圖。在第6圖中，H0係為平均出發點，H3係為平均到達點，H1係為分割點B103、B202、B302的平均點，H2係為分割點B106、B204、B304的平均點。藉由連結平均出發點H0、平均點H1、H2、平均到達點H3，而描繪出代表動線D1、D2、D3的動線R。
顯示裝置11係例如為液晶顯示器（display），顯示從顯示處理裝置100所輸出的各種資料。
第7圖係為顯示顯示處理裝置100之處理的流程圖。首先，區域特定部108係從被記錄於動線資料管理表單107中的動線資料特定出移動體之停留時間較長的區域（S400）。接著，動線抽出部109係抽出顯示在經由區域特定部108所特定出之區域間移動之移動體之移動軌跡的複數條動線（S401）。接著，分割點取得部110係將經由動線抽出部109所抽出的動線，分別以分割數N（N係2以上的整數）作分割，藉此取得N-1個分割點的座標（S402）。接著，平均點算出部111係將經由分割點取得部110所取得之不同動線所屬之分割點的座標彼此予以平均，藉此算出N-1個平均點的座標。此外，平均點算出部111係算出出發區域a1中所含之座標的平均值作為平均出發點，且算出到達區域a2中所含之座標的平均值作為平均到達點（S403）。描繪部112係描繪出通過經由平均點算出部111所算出之N-1個平均點、出發區域a1中所含的平均出發點及到達區域a2中所含之平均到達點的動線（S404）。
第8圖係為顯示構成第1圖之系統之硬體裝置之一例的圖。CPU（Central Processing Unit，中央處理單元）808係執行被儲存於主記憶體809中的程式等，藉此實現第1圖所示之識別部105、位置算出部106、區域特定部108、動線抽出部109、分割點取得部110、平均點算出部111及描繪部112的各功能。主記憶體809係例如為非揮發性的記憶體，記憶要被CPU808所執行的各種程式。GPU（Graphical Processing Unit，圖形處理單元）810係為用以進行描繪的圖形處理器（Graphical Processor），進行動線及GUI（Graphical User Interface，圖形使用者介面）等的描繪處理。GPU810的描繪係對應專用的圖像記憶體（訊框緩衝器（frame buffer））來進行。GPU810係將描繪出的圖像輸出至顯示裝置11。顯示裝置11係例如為液晶顯示器，顯示從顯示處理裝置100所輸出的圖像。另外，顯示裝置11亦可備置於顯示處理裝置100中。網路介面（network interface）804係為用以經由網路803而輸入被網路攝像機801所拍攝之影像資料的介面。網路803係可為有線或無線的任一者。I（input，輸入）/O（output，輸出）介面805係例如用以經由如USB（Universal Serial Bus，通用序列匯流排）的介面而輸入被攝像機802所拍攝之影像資料的介面。另外，網路攝像機801及攝像機802係為第1圖之攝像機10a至10n的一例。記憶部806係記憶要被CPU808或GPU810處理的各種資料（影像資料、動線資料、程式資料等）。記憶部806係經由系統匯流排（system bus）807而將所記憶的資料轉送至CPU808或GPU810。
依據本實施形態，顯示處理裝置100係描繪出複數條動線經平均後的動線，藉此可易於掌握移動體之移動的態樣。此外，顯示處理裝置100係描繪出自移動體之停留時間較長的區域出發、或到達移動體之停留時間較長之區域的複數條動線經平均後的動線，藉此例如可易於掌握以作業者所作業的區域或保管有零件之區域為中心之作業者或零件之移動的態樣。
2、實施形態2 茲使用第9圖、第10圖來說明本發明之實施形態2的顯示處理裝置。第9圖及第10圖係為使用箭頭符號來顯示具代表性之動線的圖。在第9圖中，與第6圖相同的符號係顯示相同部分。實施形態1中的描繪部112，雖藉由連結平均出發點、平均點、平均到達點的各者而描繪出表示具代表性之動線的線，但實施形態2中的描繪部112，如第9圖所示，係使用箭頭符號R11、R12、R13而描繪出具代表性的動線。如第9圖所示，箭頭符號R11、R12、R13係以連結平均出發點H0與平均點H1、平均點H1與下一個平均點H2、平均點H2與平均到達點H3之方式描繪。藉此，可達成能夠掌握移動體之移動方向的效果。另外，描繪部112亦可除第9圖所示的箭頭符號以外，描繪出以V字形狀、向量（vector）形狀等所表示的箭頭符號，以顯示移動體移動的方向。
在第10圖中，以V字形狀所表示的箭頭符號R101至R119係顯示以a3為出發區域、a4為到達區域之移動體之具代表性的動線。箭頭符號R201至R212係顯示以a4為出發區域、a3為到達區域之移動體之具代表性的動線。箭頭符號R301至R308係顯示以a5為出發區域、a6為到達區域之移動體之具代表性的動線。
在此，描繪部112亦可依據移動體的移動速度，而描繪出顏色（濃度、亮度、彩度）及／或寬度方向之長度改變後的箭頭符號。具體而言，描繪部112係當如箭頭符號R106至R115般相鄰之平均點的距離未達臨限值（亦即移動體的移動速度未達臨限值）時，淡化箭頭符號之顏色的濃度、降低彩度、或是縮小與背景色的亮度差，而當如箭頭符號R101至R105、R116至R119般相鄰之平均點的距離為臨限值以上（亦即移動體的移動速度為臨限值以上）時，加深箭頭符號之顏色的濃度、提高彩度、或是增大與背景色的亮度差。藉此，可達成可根據描繪部112所描繪的箭頭符號，而易於掌握移動體之移動速度之變化的效果。另外，作為使箭頭符號之顏色（濃度、亮度、彩度）變化之基準的臨限值，亦可設定複數個。此外，描繪部112係當移動體的移動速度未達臨限值時，如箭頭符號R106至R115般縮短寬度方向的長度，而當移動體的移動速度為臨限值以上時，如箭頭符號R101至R105、R116至R119般增長寬度方向的長度。
此外，描繪部112亦可依據經由動線抽出部109所抽出之動線的條數，而描繪出寬度方向之長度、及／或顏色（濃度、亮度、彩度）改變後的箭頭符號。具體而言，描繪部112係當經由動線抽出部109所抽出之動線的條數未達臨限值時，如箭頭符號R301至308般縮短寬度方向的長度，而當所抽出之動線的條數為臨限值以上時，如箭頭符號R201至212般增長寬度方向的長度。此外，描繪部112係當所抽出之動線的條數未達臨限值時，如箭頭符號R301至308般淡化顏色的濃度、降低彩度、或是減少與背景色的亮度差，而當所抽出之動線的條數為臨限值以上時，如箭頭符號R201至212般加深顏色的濃度、提高彩度、或是增大與背景色的亮度差。藉此，可達成能夠從描繪部112所描繪的箭頭符號，掌握移動體移動之頻率的效果。另外，作為使箭頭符號之寬度方向的長度、及／或顏色（濃度、亮度、彩度）變化之基準的臨限值，亦可設定複數個。
3、實施形態3 茲使用第11圖、第12圖來說明本發明之實施形態3的顯示處理裝置。第11圖係為實施形態3之顯示處理裝置的構成圖，其特徵為除了第1圖所示之實施形態1的顯示處理裝置外，還具備有步驟路徑描繪部113、及生產步驟管理清單114。生產步驟管理清單114係供記錄用以管理生產步驟管理資料、及別名稱為MES（Manufacturing Execution System：製造執行系統）資料之作業步驟程序、進貨、出貨、品質、維修、設備、製造執行、半成品等的資料，至少包含特定出生產線上之各步驟之內容的步驟資訊（加工、組裝、檢查、捆包等）、及特定出步驟之順序的步驟路徑資訊。步驟路徑資訊係顯示零件、材料、製品等之物件的流程及／或作業步驟、生產步驟之流程之類之步驟的路徑。步驟路徑描繪部113係從生產步驟管理資料抽出步驟路徑資訊與步驟資訊，且描繪出顯示步驟路徑的箭頭符號及／或步驟資訊。顯示藉由此步驟路徑描繪部113所描繪之步驟路徑的箭頭符號及／或步驟資訊，係與經由描繪部112所描繪的箭頭符號一同重疊顯示於顯示裝置11。以下，當要區別各個箭頭符號進行說明時，茲將經由步驟路徑描繪部113所描繪的箭頭符號稱為步驟路徑箭頭符號、且將經由描繪部112所描繪的箭頭符號稱為移動體箭頭符號。
第12圖係顯示顯示畫面的一例。1000a至1係顯示步驟路徑箭頭符號，2000係顯示移動體箭頭符號。步驟路徑箭頭符號1000與移動體箭頭符號2000係至少將顏色（濃度、亮度、彩度）、實線、虛線、寬度方向之長度的任一者以不同之顯示態樣的箭頭符號來描繪，以區別各者。此外，步驟路徑描繪部113亦可依據各步驟的內容或作業步驟或物件的種類，來描繪顏色（濃度、亮度、彩度）、實線、虛線、寬度方向之長度改變後的步驟路徑箭頭符號1000。在第12圖之例中，係顯示了步驟路徑箭頭符號1000a至c、與移動體箭頭符號2000朝向相同的方向，作業者沿著步驟路徑移動。此外，當經由滑鼠等之未圖示的操作手段而選擇了移動體箭頭符號2000時，係如1100般顯示作業者的屬性資訊或移動歷程等。同樣地，當選擇了顯示作業步驟的步驟路徑箭頭符號1000時，係顯示擔任該作業步驟之設備的運轉狀況、生產狀況、維修狀況、品質狀況等。如此，不僅顯示作業者之移動之態樣的移動體箭頭符號2000，還會重疊顯示顯示步驟路徑的步驟路徑箭頭符號1000，藉此可將作業者的移動、步驟路徑的相關關係予以視覺化。藉此，易於掌握作業者的移動、步驟路徑的無效，而可有助於工廠的配置（layout）改善或人員配置等作業的效率化。
4、其他應用例 上述的實施例僅係本發明之實施的一例，亦可考慮追加／變更如下所述之構成後的應用例。
第1圖所示之分割點取得部110亦可經由顯示裝置11上所顯示的滑動條，接受從未圖示之操作部所指定的分割數。第13圖係為顯示顯示裝置11上所顯示之滑動條的圖。702係為用以指定分割數的滑動條。分割點取得部110亦可使用經由滑動條702所指定的分割數來分割動線。此外，703係為用以指定時間資訊之範圍的滑動條，其作為本發明之時間資訊指定部的一例而發揮作用。第1圖所示的動線抽出部109，亦可從動線資料管理表單107抽出包含經由滑動條703所指定之時間資訊之範圍中所含之時間資訊的動線資料，且抽出藉由該動線資料所表示的複數條動線。再者，描繪部112亦可描繪出因應經由滑動條702、703所指定的分割數、時間資訊的範圍而使之逐步變化後的動線。此外，分割點取得部110係可使用預先與顯示裝置11的畫面大小或解析度建立了對應關係的分割數，亦可使用從未圖示之操作部所指定的數值作為分割數。
第1圖所示的動線抽出部109亦可從動線資料管理表單107抽出包含從未圖示之操作部所指定之作業者ID等之識別資訊301、或作業者所負責之作業區域等之屬性資訊302的動線資料，且從藉由該動線資料所表示的複數條動線，來抽出通過出發區域及到達區域的複數條動線。藉此，即可達成能夠易於掌握與所期望之識別資訊301或屬性資訊302相關之移動體之移動之態樣的效果。
第1圖所示之區域特定部108亦可不僅根據移動體之停留時間的長度，而且可根據作業區域、專用機械／機器人設置區域、零件／製品保管區域、事務所等，移動體會停留一定時間之區域的種類而特定出出發區域。再者，亦可根據將已被特定出之出發區域的種類、與功能別生產、線上生產、單元（cell）生產等之生產方式、及加工、組裝、檢查、捆包、操作或搬運等之生產步驟之類之移動體之移動之態樣模式（pattern）化之作業之種類的組合來特定出到達區域。具體而言，當在某作業區域中要進行根據單元生產方式的生產時，作業區域以外之區域中之作業者的停留時間基本上會變短，因此亦可優先地將作業相關之零件／製品保管區域特定為到達區域。
第1圖所示之區域特定部108亦可將顯示已被區域特定部108所特定出之區域之中心的位置座標等代表性地顯示各個區域的位置座標，設為平均出發點或平均到達點。再者，描繪部112亦可描繪出通過出發區域之平均出發點、N-1個平均點、到達區域之平均到達點的線。此時，平均點算出部111不需分別算出平均出發點、平均到達點。
描繪出上述之資訊處理裝置所實施之複數條動線經平均後之具代表性之動線的處理，係可構成作為資訊處理方法，亦可構成作為記錄有用以使電腦發揮作用之程式的媒體。
在上述的實施形態中，雖由區域特定部108根據移動體的停留時間等而特定出出發區域及/或到達區域，但特定出出發區域及/或到達區域的方法不限定於此。例如，出發區域及/或到達區域係可藉由資訊處理裝置之使用者的操作以手動方式來設定，亦可於導入資訊處理裝置時等設定。
在上述的實施形態中，雖根據由攝像機所拍攝的影像來算出移動體的座標，但算出移動體之座標的方法不限定於此，亦可使用可算出移動體之座標的任何技術。例如，資訊處理裝置亦可取得經由移動體所攜帶或設置之通訊終端所定位後的座標。此外，例如，資訊處理裝置亦可從移動體所攜帶或設置的RFID(radio frequency identifier，射頻識別)標籤(tag)或信標(beacon)等之無線標籤的電波算出移動體的座標。此外，例如，資訊處理裝置亦可將設有檢測出移動體之各種感測器(sensor)的位置視為移動體的座標。
10a~10n:攝像機
11:顯示裝置
100:顯示處理裝置
105:識別部 106:位置算出部 107:動線資料管理表單 108:區域特定部 109:動線抽出部 110:分割點取得部 111:平均點算出部 112:描繪部 113:步驟路徑描繪部 114:生產步驟管理清單 200:軀體 207:設備 300:時間資訊 301:識別資訊 302:屬性資訊 303:座標 702:滑動條 703:滑動條 801:網路攝像機 802:攝像機 803:網路 804:網路介面 805:I/O介面 806:記憶部
807:系統匯流排
808:CPU
809:主記憶體
810:GPU
1000a~1000l:步驟路徑箭頭符號
1100:作業者的屬性資訊或移動歷程
2000:移動體箭頭符號
a1,a5:出發區域
a2,a6:到達區域
a3,a4:出發區域/到達區域
B103,B106,B202,B204,B302,B304:分割點
D1,D2,D3:動線
H0:平均出發點
H1:平均點
H2:平均點
H3:平均到達點
N:分割數
P100~P110,P200~206,P300~P307:座標
R11~R13,R101~R119,R201~R212,R301~R308:箭頭符號
R:動線
S400~S404:步驟
第1圖係為本發明之一實施形態之顯示處理裝置的構成圖。 第2圖係為顯示工廠內之攝像機（camera）之設置例的圖。 第3圖係為顯示動線資料管理表單（table）107之一例的圖。 第4圖係為顯示藉由動線抽出部109所抽出之動線之一例的圖。 第5圖係為顯示將動線D1、D2、D3分割為三個所獲得之二個分割點的圖。 第6圖係為顯示根據動線D1、D2、D3而來之具代表性之動線R的圖。 第7圖係為顯示顯示處理裝置100之處理的流程圖。 第8圖係為顯示構成第1圖之系統之硬體（hardware）裝置之一例的圖。 第9圖係為顯示使用箭頭符號而顯示具代表性之動線的圖。 第10圖係為顯示使用箭頭符號而顯示具代表性之動線的圖。 第11圖係為實施形態3之顯示處理裝置的構成圖。 第12圖係為顯示顯示畫面11之一例的圖。 第13圖係為顯示顯示裝置11上所顯示之滑動條（slider bar）的圖。
10a:攝像機
10b:攝像機
10n:攝像機
11:顯示裝置
100:顯示處理裝置
105:識別部
106:位置算出部
107:動線資料管理表單
108:區域特定部
109:動線抽出部
110:分割點取得部
111:平均點算出部
112:描繪部

Claims (10)

  1. 一種顯示處理裝置，係包括：動線抽出部，係抽出複數條動線，該複數條動線係顯示自第一區域出發且到達第二區域之移動體的軌跡及/或自第二區域出發且到達第一區域之移動體的軌跡；分割點取得部，係將經由前述動線抽出部所抽出的動線分別以分割數N(N係2以上的整數)作分割，藉此取得N-1個分割點的座標；平均點算出部，係將經由前述分割點取得部所取得之不同的動線所屬之分割點的座標彼此予以平均，藉此算出N-1個平均點；及描繪部，係描繪出通過經由前述平均點算出部所取得之N-1個平均點、前述第一區域及前述第二區域的動線。
  2. 如申請專利範圍第1項之顯示處理裝置，其中前述動線係藉由包含顯示移動體之移動軌跡的座標、及顯示該座標存在有移動體之時刻之時間資訊的動線資料來表示；前述分割點取得部係從表示經由前述動線抽出部所抽出之動線的前述動線資料，取得構成各動線之前述座標的數目，且取得以該數目除以前述分割數N所得出之值作為取樣間隔的N-1個分割點。
  3. 如申請專利範圍第2項之顯示處理裝置，係包括用以指定時間資訊之範圍的時間資訊指定部；前述動線抽出部係抽出藉由動線資料所表示的複數條動線，該動線資料係包含經由前述時間資訊指定部所指定之時間資訊之範圍中所含的時間資訊。
  4. 如申請專利範圍第2項之顯示處理裝置，係包括從前述動線資料特定出移動體之停留時間較長之區域的區域特定部；前述動線抽出部係抽出以經由前述區域特定部所特定出之區域作為前述第一區域及/或前述第二區域的動線。
  5. 如申請專利範圍第1項之顯示處理裝置，其中前述描繪部係描繪出顯示前述移動體所移動之方向的動線。
  6. 如申請專利範圍第1項之顯示處理裝置，其中前述描繪部係描繪出因應前述動線抽出部所抽出之動線的條數而改變顏色及/或寬度方向之長度後的動線。
  7. 如申請專利範圍第1項之顯示處理裝置，其中前述描繪部係描繪出因應前述移動體的移動速度而改變顏色及/或寬度方向之長度後的動線。
  8. 如申請專利範圍第1項至第7項中任一項之顯示處理裝置，係更包括步驟路徑描繪部，該步驟路徑描繪部係描繪出顯示物件或步驟之流程的箭頭符號。
  9. 一種顯示處理方法，係包括：動線抽出步驟，以動線抽出部抽出複數條動線，該複數條動線係顯示自第一區域出發且到達第二區域之移動體的軌跡及/或自第二區域出發且到達第一區域之移動體的軌跡；分割點取得步驟，以分割點取得部將在前述動線抽出步驟中由前述動線抽出部所抽出的動線分別以分割數N(N係2以上的整數)作分割，藉此取得N-1個分割點的座標；平均點算出步驟，以平均點算出部將在前述分割點取得步驟中由前述分割點取得部所取得之不同的動線所屬之分割點的座標彼此予以平均，藉此算出N-1個平均點；及描繪步驟，以描繪部描繪出通過在前述平均點算出步驟中由前述平均點算出部所取得之N-1個平均點、前述第一區域及前述第二區域的動線。
  10. 一種記錄有程式的媒體，係令電腦執行下列步驟：動線抽出步驟，係抽出複數條動線，該複數條動線係顯示自第一區域出發且到達第二區域之移動體的軌跡及/或自第二區域出發且到達第一區域之移動體的軌跡；分割點取得步驟，係將在前述動線抽出步驟中所抽出的動線分別以分割數N(N係2以上的整數)作分割，藉此取得N-1個分割點的座標；平均點算出步驟，係將在前述分割點取得步驟中所取得之不同的動線所屬之分割點的座標彼此予以平均，藉此算出N-1個平均點；及描繪步驟，係描繪出通過在前述平均點算出步驟 中所取得之N-1個平均點、前述第一區域及前述第二區域的動線。
TW108131490A 2019-07-19 2019-09-02 顯示處理裝置、顯示處理方法及記錄有程式的媒體 TWI785269B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
WOPCT/JP2019/028383 2019-07-19
PCT/JP2019/028383 WO2021014479A1 (ja) 2019-07-19 2019-07-19 表示処理装置、表示処理方法及びプログラム

Publications (2)

Publication Number Publication Date
TW202105313A TW202105313A (zh) 2021-02-01
TWI785269B true TWI785269B (zh) 2022-12-01

Family

ID=74193731

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108131490A TWI785269B (zh) 2019-07-19 2019-09-02 顯示處理裝置、顯示處理方法及記錄有程式的媒體

Country Status (7)

Country Link
US (1) US20220122272A1 (zh)
JP (1) JP7004116B2 (zh)
KR (1) KR102436618B1 (zh)
CN (1) CN114096999A (zh)
DE (1) DE112019007455T5 (zh)
TW (1) TWI785269B (zh)
WO (1) WO2021014479A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210158057A1 (en) * 2019-11-26 2021-05-27 Scanalytics, Inc. Path analytics of people in a physical space using smart floor tiles
JP2023155637A (ja) * 2022-04-11 2023-10-23 株式会社日立製作所 軌跡表示装置および方法
WO2024142543A1 (ja) * 2022-12-27 2024-07-04 コニカミノルタ株式会社 人流分析装置、プログラムおよび人流分析方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101218486A (zh) * 2005-07-22 2008-07-09 特拉戈公司 用于对道路网图进行建模的方法、装置及***
US8139818B2 (en) * 2007-06-28 2012-03-20 Toshiba Tec Kabushiki Kaisha Trajectory processing apparatus and method
CN104700434A (zh) * 2015-03-27 2015-06-10 北京交通大学 一种用于复杂结构化场景的人群运动轨迹异常检测方法
CN105593850A (zh) * 2013-12-09 2016-05-18 株式会社日立制作所 影像检索装置、影像检索方法以及存储介质
TWI570666B (zh) * 2013-11-15 2017-02-11 財團法人資訊工業策進會 電子裝置及其影片物體追蹤方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06223198A (ja) * 1993-01-26 1994-08-12 Hitachi Ltd 光線追跡による画像生成装置及び方法
JP4493415B2 (ja) * 2004-06-07 2010-06-30 東日本旅客鉄道株式会社 通行人行動解析システム
JP4759988B2 (ja) * 2004-11-17 2011-08-31 株式会社日立製作所 複数カメラを用いた監視システム
JP2009110408A (ja) * 2007-10-31 2009-05-21 Toshiba Tec Corp 動線編集装置及び動線編集プログラム
KR101498124B1 (ko) * 2008-10-23 2015-03-05 삼성전자주식회사 움직임 궤적을 이용한 프레임률 향상 장치 및 방법
US8213681B2 (en) * 2009-01-09 2012-07-03 Panasonic Corporation Moving object detection method and moving object detection apparatus
KR101048045B1 (ko) * 2009-05-07 2011-07-13 윈스로드(주) 객체의 이동궤적을 이용한 철도건널목 위험지역의 지장물 영상검지장치 및 그 제어방법
MX2012009579A (es) * 2010-02-19 2012-10-01 Toshiba Kk Sistema de rastreo de objetos en movimiento y metodo de rastreo de objetos en movimiento.
JP5876409B2 (ja) * 2012-12-20 2016-03-02 日本電信電話株式会社 映像再生装置及び映像再生プログラム
JP5613815B1 (ja) * 2013-10-29 2014-10-29 パナソニック株式会社 滞留状況分析装置、滞留状況分析システムおよび滞留状況分析方法
JP6524619B2 (ja) * 2014-08-18 2019-06-05 株式会社リコー 軌跡描画装置、軌跡描画方法、軌跡描画システム、及びプログラム
US10297051B2 (en) * 2014-09-11 2019-05-21 Nec Corporation Information processing device, display method, and program storage medium for monitoring object movement
JP6587435B2 (ja) * 2015-06-29 2019-10-09 キヤノン株式会社 画像処理装置、情報処理方法及びプログラム
JP6433389B2 (ja) * 2015-08-04 2018-12-05 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
CN105589939B (zh) * 2015-12-15 2020-02-11 北京百度网讯科技有限公司 识别群体运动轨迹方法和装置
JP6798549B2 (ja) 2016-03-31 2020-12-09 日本電気株式会社 動線表示システム、動線表示方法および動線表示プログラム
JP6898165B2 (ja) * 2017-07-18 2021-07-07 パナソニック株式会社 人流分析方法、人流分析装置及び人流分析システム
CN109033424B (zh) * 2018-08-10 2021-03-26 北京航天控制仪器研究所 一种基于公交车运营轨迹精确提取公交车行驶路径的方法
WO2020066043A1 (ja) * 2018-09-28 2020-04-02 オリンパス株式会社 顕微鏡システム、投影ユニット、及び、画像投影方法
CN109697221B (zh) * 2018-11-22 2021-07-09 东软集团股份有限公司 轨迹规律的挖掘方法、装置、存储介质及电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101218486A (zh) * 2005-07-22 2008-07-09 特拉戈公司 用于对道路网图进行建模的方法、装置及***
US8139818B2 (en) * 2007-06-28 2012-03-20 Toshiba Tec Kabushiki Kaisha Trajectory processing apparatus and method
TWI570666B (zh) * 2013-11-15 2017-02-11 財團法人資訊工業策進會 電子裝置及其影片物體追蹤方法
CN105593850A (zh) * 2013-12-09 2016-05-18 株式会社日立制作所 影像检索装置、影像检索方法以及存储介质
CN104700434A (zh) * 2015-03-27 2015-06-10 北京交通大学 一种用于复杂结构化场景的人群运动轨迹异常检测方法

Also Published As

Publication number Publication date
TW202105313A (zh) 2021-02-01
JPWO2021014479A1 (ja) 2021-12-09
KR102436618B1 (ko) 2022-08-25
DE112019007455T5 (de) 2022-03-03
US20220122272A1 (en) 2022-04-21
WO2021014479A1 (ja) 2021-01-28
JP7004116B2 (ja) 2022-01-21
KR20220009491A (ko) 2022-01-24
CN114096999A (zh) 2022-02-25

Similar Documents

Publication Publication Date Title
TWI785269B (zh) 顯示處理裝置、顯示處理方法及記錄有程式的媒體
US10977499B2 (en) Surveillance information generation apparatus, imaging direction estimation apparatus, surveillance information generation method, imaging direction estimation method, and program
JP6558579B2 (ja) 動線分析システム及び動線分析方法
US10567677B2 (en) Flow line analysis system and flow line analysis method
AU2011352408B2 (en) Tracking moving objects using a camera network
JP5866564B1 (ja) モニタリング装置、モニタリングシステムおよびモニタリング方法
US9191633B2 (en) Tracking assistance device, tracking assistance system and tracking assistance method
US10334965B2 (en) Monitoring device, monitoring system, and monitoring method
JP6610640B2 (ja) 位置認識方法およびシステム、ならびに異常判定方法およびシステム
US20180181815A1 (en) Person counting area setting method, person counting area setting program, moving line analysis system, camera device, and person counting program
JP2019513274A5 (zh)
EP3518146A1 (en) Image processing apparatus and image processing method
CN109357673A (zh) 基于图像的视觉导航方法和装置
KR101645959B1 (ko) 복수의 오버헤드 카메라와 사이트 맵에 기반한 객체 추적 장치 및 그 방법
US20150139494A1 (en) Slow change detection system
Lira et al. A computer-vision approach to traffic analysis over intersections
CN112801965A (zh) 一种基于卷积神经网络的烧结皮带异物监测方法及***
Nielsen et al. Taking the temperature of pedestrian movement in public spaces
JP6996669B2 (ja) 表示処理装置、表示処理方法及びプログラム
JP7274298B2 (ja) 撮像装置、撮像方法及び撮像プログラム
KR102468685B1 (ko) 가상현실 기반의 작업현장 안전관리장치 및 그 장치의 구동방법
JPWO2018110377A1 (ja) 映像監視装置
CN108058170A (zh) 一种视觉机器人数据采集处理***
Konieczka et al. Smart real-time multi-camera people locating system
JP2012084078A (ja) 動体情報解析装置、動体情報解析システム、動体情報解析装置の制御方法、および動体情報解析装置の制御プログラム