JP2018112983A - メンテナンスナビゲーション携帯端末 - Google Patents
メンテナンスナビゲーション携帯端末 Download PDFInfo
- Publication number
- JP2018112983A JP2018112983A JP2017004438A JP2017004438A JP2018112983A JP 2018112983 A JP2018112983 A JP 2018112983A JP 2017004438 A JP2017004438 A JP 2017004438A JP 2017004438 A JP2017004438 A JP 2017004438A JP 2018112983 A JP2018112983 A JP 2018112983A
- Authority
- JP
- Japan
- Prior art keywords
- target
- image
- housing
- photographing
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012423 maintenance Methods 0.000 title claims abstract description 42
- 238000013500 data storage Methods 0.000 claims abstract description 17
- 238000012544 monitoring process Methods 0.000 claims description 20
- 238000012545 processing Methods 0.000 claims description 20
- 239000000284 extract Substances 0.000 claims description 3
- 238000004891 communication Methods 0.000 abstract description 5
- 230000003068 static effect Effects 0.000 abstract 4
- 238000010586 diagram Methods 0.000 description 10
- 238000000034 method Methods 0.000 description 8
- 238000012806 monitoring device Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 4
- 230000003190 augmentative effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 229910052742 iron Inorganic materials 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Testing And Monitoring For Control Systems (AREA)
Abstract
【解決手段】携帯端末(15)は、画像データ記憶部(24)、画像認識部(25)、情報表示部(26)を備える。画像データ記憶部(24)は、建屋内に配置された筐体群を撮影した静止画像と、該静止画像および目標筐体を特定する番号を関連付けたデータと、を予め記憶する。画像認識部(25)は、撮影中の動画像の所定フレームと、目標筐体を特定する番号に関連付いた静止画像とを照合する。情報表示部(26)は、所定フレームと目標筐体を特定する番号に関連付いた静止画像とが一致する場合に、表示装置に目標筐体が表示された位置に、目標筐体を強調する情報を表示させる。
【選択図】図1
Description
<システム構成>
図1は、本発明の実施の形態1に係る設備監視システムの機能ブロック図である。設備監視システム10は、電子制御装置11、監視装置12、HMI13、ネットワーク14、メンテナンスナビゲーション携帯端末(以下、携帯端末15)を備える。
目標筐体を強調する情報を情報表示部26へ送信する。目標筐体を強調する情報は、目標筐体を着色した画像やアイコンや文字等であり、例えば、図4に示すように目標筐体に表示用マーキングが付された静止画像である。
図5は、上述の動作を実現するために、実施の形態1における携帯端末15が実行する処理ルーチンのフローチャートである。
以上説明したように、本実施形態に係るメンテナンスナビゲーション携帯端末は、電子制御装置11、監視装置12、および、HMI13の接続されたネットワーク14に接続しない。この携帯端末によれば、有線、無線の通信を使用せずに、撮影した画像に情報を付与した直感的な形で表示して、保全員を、故障が発生した電子制御装置まで迅速に誘導できる。そのため、保全員は電子制御装置の交換、復旧作業を迅速に開始することができる。
携帯端末15のハードウェア構成について図10を参照して説明する。なお、実施の形態2および3も同様である。
<システム構成>
次に、図6、図7を参照して本発明の実施の形態2について説明する。本実施形態のシステムは、図6に示す構成において、後述する図7のルーチンを実行させることで実現することができる。
図7は、上述の機能を実現するために、実施の形態2における携帯端末15が実行する処理ルーチンのフローチャートである。このルーチンは、ステップS100の処理がステップS200に置き換えられている点を除き、図5に示すルーチンと同様である。以下、図7において、図5に示すステップと同一のステップについては、同一の符号を付してその説明を省略または簡略する。
以上説明したように、本実施形態に係るメンテナンスナビゲーション携帯端末によれば、保全員の手動による番号入力作業が不要である。そのため、入力手間や入力ミスを軽減できる。
<システム構成>
次に、図8、図9を参照して本発明の実施の形態3について説明する。本実施形態のシステムは、図8に示す構成において、後述する図9のルーチンを実行させることで実現することができる。
図9は、上述の機能を実現するために、携帯端末15が実行する処理ルーチンのフローチャートである。このルーチンは、ステップS150の処理がステップS350に、ステップS160の処理がステップS360に置き換えられている点を除き、図7に示すルーチンと同様である。以下、図9において、図5および図7に示すステップと同一のステップについては、同一の符号を付してその説明を省略または簡略する。
以上説明したように、本実施形態に係るメンテナンスナビゲーション携帯端末によれば、マーカーレスARの画像認識技術を適用して、撮影中の動画像にリアルタイムに情報を付与して表示することを可能とし、保全員の視認性を向上させることができる。
ところで、上述した実施の形態3のシステムにおいては、実施の形態2のシステム構成にマーカーレスAR部29をさらに設けることとしているが、実施の形態3のシステム構成はこれに限定されるものではない。実施の形態1のシステム構成にマーカーレスAR部29を設ける構成としても良い。
10 設備監視システム
11 電子制御装置
12 監視装置
13 HMI
14 ネットワーク
15 携帯端末(メンテナンスナビゲーション携帯端末)
20 撮影装置
21 表示装置
22 制御装置
23 対象情報取得部
24 画像データ記憶部
25 画像認識部
26 情報表示部
27 ユーザインタフェース部
28 対象情報読取部
29 マーカーレスAR(Augmented Reality)部
101 CPU(Central Processing Unit)
102 ROM(Read Only Memory)
103 RAM(Random Access Memory)
104 入出力インターフェース
105 システムバス
106 入力装置
107 表示装置
108 ストレージ
109 撮影装置
Claims (3)
- 被写体を撮影する撮影装置と、
前記撮影装置で撮影中の動画像を表示可能な表示装置と、
監視対象の電子制御装置が収納された目標筐体を特定する番号を取得する対象情報取得部と、
建屋内に配置された筐体群を撮影した静止画像と、該静止画像および前記番号を関連付けたデータと、を予め記憶する画像データ記憶部と、
前記撮影装置で撮影中の動画像の所定フレームと、前記番号に関連付いた静止画像とを照合する画像認識部と、
前記所定フレームと前記番号に関連付いた静止画像とが一致する場合に、前記表示装置に前記目標筐体が表示された位置に、前記目標筐体を強調する情報を表示させる情報表示部と、
を備えることを特徴とするメンテナンスナビゲーション携帯端末。 - 前記対象情報取得部は、前記監視対象の電子制御装置の状態を表示した監視画面を前記撮影装置で撮影した画像から前記番号を読み取る対象情報読取部を備えること、
を特徴とする請求項1記載のメンテナンスナビゲーション携帯端末。 - 前記画像認識部は、前記所定フレームと前記番号に関連付いた静止画像とが一致する場合に、前記目標筐体の画像をトラッキング対象物として選別して取り出し、リアルタイム処理にて認識し追従するマーカーレスAR部を備えること、
前記情報表示部は、前記表示装置に表示された動画像中の前記目標筐体の移動に合せて、前記目標筐体を強調する情報を重ね合せて表示させること、
を特徴とする請求項1又は2記載のメンテナンスナビゲーション携帯端末。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017004438A JP6743716B2 (ja) | 2017-01-13 | 2017-01-13 | メンテナンスナビゲーション携帯端末 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017004438A JP6743716B2 (ja) | 2017-01-13 | 2017-01-13 | メンテナンスナビゲーション携帯端末 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018112983A true JP2018112983A (ja) | 2018-07-19 |
JP6743716B2 JP6743716B2 (ja) | 2020-08-19 |
Family
ID=62912302
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017004438A Active JP6743716B2 (ja) | 2017-01-13 | 2017-01-13 | メンテナンスナビゲーション携帯端末 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6743716B2 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012155403A (ja) * | 2011-01-24 | 2012-08-16 | Yokogawa Electric Corp | フィールド機器監視システム |
JP2013117812A (ja) * | 2011-12-02 | 2013-06-13 | Toshiba Corp | プラント監視情報表示システム、およびプラント監視情報表示装置、プラント監視情報表示方法 |
JP2014042250A (ja) * | 2013-09-13 | 2014-03-06 | Casio Comput Co Ltd | 撮像装置、撮影方法及びプログラム |
JP2017004156A (ja) * | 2015-06-08 | 2017-01-05 | 株式会社東芝 | 中央監視端末、現場操作端末、及びプラント監視制御システム |
-
2017
- 2017-01-13 JP JP2017004438A patent/JP6743716B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012155403A (ja) * | 2011-01-24 | 2012-08-16 | Yokogawa Electric Corp | フィールド機器監視システム |
JP2013117812A (ja) * | 2011-12-02 | 2013-06-13 | Toshiba Corp | プラント監視情報表示システム、およびプラント監視情報表示装置、プラント監視情報表示方法 |
JP2014042250A (ja) * | 2013-09-13 | 2014-03-06 | Casio Comput Co Ltd | 撮像装置、撮影方法及びプログラム |
JP2017004156A (ja) * | 2015-06-08 | 2017-01-05 | 株式会社東芝 | 中央監視端末、現場操作端末、及びプラント監視制御システム |
Also Published As
Publication number | Publication date |
---|---|
JP6743716B2 (ja) | 2020-08-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9892559B2 (en) | Portable terminal device, and portable control device | |
US10771350B2 (en) | Method and apparatus for changeable configuration of objects using a mixed reality approach with augmented reality | |
JP2014078122A (ja) | 点検システム及び点検方法 | |
US20180027218A1 (en) | Work assistance device, work assistance system, work assistance method, and recording medium storing work assistance program | |
JP2015204615A (ja) | 機器と移動デバイスとの間でインタラクトする方法及びシステム | |
US20190333633A1 (en) | Medical device information providing system, medical device information providing method, and program | |
CN107203196B (zh) | 工业设备检测***及方法 | |
JP2015061339A (ja) | 結線作業支援システム | |
CN111049687A (zh) | 设备检修视频操作指导文件处理方法、装置、ar终端 | |
JP2023065371A (ja) | 製造支援システム,方法,プログラム | |
CN110061755B (zh) | 作业辅助方法和***、可穿戴设备及工程车辆 | |
JP5891191B2 (ja) | 稼動実績取得システム及び稼動実績取得方法 | |
JP6743716B2 (ja) | メンテナンスナビゲーション携帯端末 | |
JP6226859B2 (ja) | 作業監視システム | |
US11816802B2 (en) | Method for configuring and displaying, in augmented or mixed or extended reality, the information relating to equipment installed in a real site, and associated computer program product and electronic device | |
KR102367965B1 (ko) | 인지인자를 이용한 증강현실 기반 원격 가이던스 시스템 및 그 방법 | |
WO2018179223A1 (ja) | 遠隔作業支援システム、遠隔作業支援方法およびプログラム | |
CN111736539B (zh) | 一种监控数据显示方法、装置、***、服务器及存储介质 | |
JP6818795B2 (ja) | 情報処理装置、情報処理方法及びコンピュータプログラム | |
CN104995573B (zh) | 用于监视并控制工业过程的方法和装置 | |
WO2019093170A1 (ja) | 制御プログラム開発支援装置、制御プログラム開発支援システム、制御プログラム開発支援方法、および、制御プログラム開発支援プログラム | |
US20240233113A9 (en) | Method and system of providing assistance during an operation performed on an equipment | |
JP2017004156A (ja) | 中央監視端末、現場操作端末、及びプラント監視制御システム | |
KR102221898B1 (ko) | 가이드 도구 기반의 가상 객체 시각화 방법 | |
JP2016099757A (ja) | 監視制御システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190201 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200107 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191226 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200213 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200630 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200713 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6743716 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |