KR100910239B1 - 분산 독립형 영상원격감시제어 시스템 - Google Patents

분산 독립형 영상원격감시제어 시스템 Download PDF

Info

Publication number
KR100910239B1
KR100910239B1 KR1020080138002A KR20080138002A KR100910239B1 KR 100910239 B1 KR100910239 B1 KR 100910239B1 KR 1020080138002 A KR1020080138002 A KR 1020080138002A KR 20080138002 A KR20080138002 A KR 20080138002A KR 100910239 B1 KR100910239 B1 KR 100910239B1
Authority
KR
South Korea
Prior art keywords
field
unit
information
data
site
Prior art date
Application number
KR1020080138002A
Other languages
English (en)
Inventor
안종율
안태형
Original Assignee
주식회사 대영
(주) 휴스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 대영, (주) 휴스 filed Critical 주식회사 대영
Priority to KR1020080138002A priority Critical patent/KR100910239B1/ko
Application granted granted Critical
Publication of KR100910239B1 publication Critical patent/KR100910239B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/21805Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/65Control of camera operation in relation to power supply
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Selective Calling Equipment (AREA)

Abstract

본 발명은 분산 독립형 영상원격 감시제어시스템에 관한 것으로서, 더욱 상세하게는 현장정보수집수단에서 측정되는 계측값이 자체 저장되고 현장정보수집수단의 변화된 값 발생시에만 중앙관리수단으로 값 변화 상태를 실시간으로 알려줄 뿐만아니라 중앙관리수단과의 통신 이상유무에 관계없이 별도로 자체 자동운전을 시행할 수 있으며, 통신 두절시 발생되는 실시간 데이터는 현장정보수집수단에서 자체 저장되고 통신 정상화시 현장정보수집수단의 모든 데이터를 중앙관리수단에 전달하여 연속 데이터를 유지할 수 있게 함으로써 전체 시스템의 신뢰도를 높일 수 있도록 하는 분산 독립형 영상원격 감시제어시스템에 관한 것이다.
본 발명인 분산 독립형 영상원격감시제어시스템은,
영상원격 감시제어시스템에 있어서,
각각 현장의 영상정보 수집을 위한 영상 취득장치와,
각각의 주변상황 음향정보 수집을 위한 음향취득장치와,
각각 현장에 설치 구성된 계측 장치의 동작을 제어하기 위한 계측제어장치와,
각각 현장에 설치 구성된 전동 장치의 동작을 제어하기 위한 전동제어장치와,
비상시 혹은 경고시 외부에 음성 송출을 위한 방송장치와,
상기 각각의 장치로부터 현장 정보를 수집하는 현장정보수집장치를 포함하여 구성되는 현장정보수집수단과;
상기 현장정보수집장치로부터 수신된 현장 데이터 정보 및 영상 정보를 처리하기 위한 현장데이터영상정보처리부와,
현장의 데이터 정보 및 영상 정보를 기록하는 현장값기록부와,
제어를 위해 각각의 현장정보수집장치 및 현장정보수집수단마다 식별 포인트를 정의되는 현장포인트정의부와,
현장값기록부와 현장포인트정의부의 데이터를 처리하는 실시간데이터처리부를 포함하여 구성되는 현장수집데이터처리수단과;
여러개의 현장수집데이터처리수단의 제어를 위해 정의되는 데이터를 저장하는 각원격소정의데이터저장모듈과,
모든 현장수집데이터처리수단의 데이터를 저장하고 있는 전체참조데이터저장모듈과,
현장수집데이터처리수단의 현장값기록부에 저장된 데이터를 호출하여 저장하는 현장누적데이터저장모듈을 포함하여 구성되는 내부데이터베이스부와,
현장수집데이터처리수단의 호출 및 제어를 수행하며, 내부데이터베이스부를 검색 및 참조하여 제어하는 중앙관리제어부를 포함하여 구성되는 중앙관리수단;을 포함하여 구성되되, 상기 중앙관리수단에서 제어신호를 보내면 해당하는 현장수집데이터처리수단의 현장값기록부에 저장된 현장기록값을 중앙관리수단으로 송신하여 이를 중앙관리수단의 내부데이터베이스부에 저장 기록하는 것을 특징으로 한다.
본 발명을 통해 현장수집데이터처리수단 및 중앙관리수단에 포인트 정보를 내장함으로써 제어의 실시간성 보장으로 신뢰도가 향상되도록 하며 다양한 응용이 가능해지고 자동운전 기능 등 유연성 있는 제어가 가능한 효과를 제공하게 된다.
원격 제어, 독립 운영, 포인트 정의.

Description

분산 독립형 영상원격감시제어 시스템{stand alone image remote watch-control system.}
본 발명은 분산 독립형 영상원격 감시제어시스템에 관한 것으로서, 더욱 상세하게는 현장정보수집수단에서 측정되는 계측값이 자체 저장되고 현장정보수집수단의 변화된 값 발생시에만 중앙관리수단으로 값 변화 상태를 실시간으로 알려줄 뿐만아니라 중앙관리수단과의 통신 이상유무에 관계없이 별도로 자체 자동운전을 시행할 수 있으며, 통신 두절시 발생되는 실시간 데이터는 현장정보수집수단에서 자체 저장되고 통신 정상화시 현장정보수집수단의 모든 데이터를 중앙관리수단에 전달하여 연속 데이터를 유지할 수 있게 함으로써 전체 시스템의 신뢰도를 높일 수 있도록 하는 분산 독립형 영상원격 감시제어시스템에 관한 것이다.
종래 방식은 중앙관리소 서버에서 프로세스 데이터의 입력, 출력 및 현장감시, 조작, 제어 등을 모두 집중화시켜 관리하는 시스템이다.
이러한 경우 모든 제어기능이 한대의 서버에 집중되어 있으므로 서버에 이상 이 발생하면 원격소 전체(1~N)가 제어 불능상태가 되어 신뢰성 저하라는 문제가 발생할 수 밖에 없었다.
또한, 중앙관리소 데이터베이스 서버 내에 현장의 모든 데이터가 초단위로 저장됨에 따라 관리하는 현장 개소의 증가에 따라 용량 증가 및 데이터베이스 검색 지연 또는 검색프로세스 다운 등의 치명적 문제가 발생하여 중앙집중 관리가 어려운 실정이다.
따라서 본 발명은 상기와 같은 종래의 문제점을 해결하기 위해 제안된 것으로서, 본 발명의 목적은 현장수집데이터처리수단 및 중앙관리수단에 포인트 정보를 내장함으로써 제어의 실시간성 보장으로 신뢰도가 향상되도록 하며 다양한 응용이 가능해지고 자동운전 기능 등 유연성 있는 제어가 가능하도록 하는데 있다.
본 발명의 다른 목적은 현장에서 측정되는 계측값이 자체 저장되고 현장의 변화된 값 발생시에만 중앙관리수단으로 값 변화 상태를 실시간으로 알려줄 뿐만아니라 중앙관리수단과의 통신 이상유무에 관계없이 별도로 현장 자체에서 자동운전을 시행할 수 있도록 하는데 있다.
본 발명의 또 다른 목적은 통신두절시 발생되는 실시간 데이터는 현장에서 자체 저장되고 통신 정상화시 현장의 모든 데이터를 중앙관리수단에 전달하여 연속 데이터를 유지할 수 있게 함으로써 전체 시스템의 신뢰도를 높일 수 있도록 하는데 있다.
본 발명의 또 다른 목적은 현장 데이터는 현장 운영체제 내의 설정 스케줄링에 따라 일정별(시간, 일, 월 단위)로 선택 저장되어 시스템 유휴시(idle time)에 패킷 단위로 중앙관리수단에 업로드 함으로써 보고서 등 통계자료 활용이 용이하도록 하는데 있다.
본 발명의 또 다른 목적은 한 명의 관리자가 제어처리에 대한 많은 정보처리 및 제어기능을 수행하며 대규모 중앙집중 관리가 가능할 뿐만 아니라 복잡한 자동 운전 기능을 구성할 수 있고 데이터 수집 및 보고서 작성시 유리하며 다수의 원격소 증가에도 중앙관리수단의 부하를 최소화함으로써 확장성이 우수하도록 하는데 있다.
본 발명의 또 다른 목적은 현장 포인트를 중앙관리수단에서 원격으로 설정 및 수정할 수 있으며 현장수집데이터처리수단의 고장으로 기기 변경시 중앙관리수단에 백업된 원격소 정의 데이터를 다운로드시켜줌으로써 교체와 동시에 즉시 운영이 가능하여 인력의 효율적 활용 및 유지보수가 용이하도록 하는데 있다.
본 발명의 또 다른 목적은 데이터 이중화로 인한 데이터 손실의 최소화와 정보 동시성으로 데이터 무결성을 보장함으로써 데이터에 대한 신뢰도를 높일 수 있을 뿐만 아니라 향후 효율적 현장 운영에 중요한 통계자료로 활용할 수 있도록 하는데 있다.
본 발명이 해결하고자 하는 과제를 달성하기 위하여,
본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어시스템은,
영상원격 감시제어시스템에 있어서,
각각 현장의 영상정보 수집을 위한 영상 취득장치와,
각각의 주변상황 음향정보 수집을 위한 음향취득장치와,
각각 현장에 설치 구성된 계측 장치의 동작을 제어하기 위한 계측제어장치와,
각각 현장에 설치 구성된 전동 장치의 동작을 제어하기 위한 전동제어장치와,
비상시 혹은 경고시 외부에 음성 송출을 위한 방송장치와,
상기 각각의 장치로부터 현장 정보를 수집하는 현장정보수집장치를 포함하여 구성되는 현장정보수집수단과;
상기 현장정보수집장치로부터 수신된 현장 데이터 정보 및 영상 정보를 처리하기 위한 현장데이터영상정보처리부와,
현장의 데이터 정보 및 영상 정보를 기록하는 현장값기록부와,
각각의 현장정보수집수단의 고유한 현장정보수집수단 식별포인트와 현장정보수집장치 식별포인트로 정의하여 중앙관리수단에서 제어하고자 하는 현장정보수집수단 및 현장정보수집장치들의 식별 부호(포인트)를 공유메모리에 저장하여 제어하는 현장포인트정의부와,
현장값기록부와 현장포인트정의부의 데이터를 처리하는 실시간데이터처리부를 포함하여 구성되는 현장수집데이터처리수단과;
삭제
여러개의 현장수집데이터처리수단의 제어를 위해 정의되는 데이터를 저장하는 각원격소정의데이터저장모듈과,
모든 현장수집데이터처리수단의 데이터를 저장하고 있는 전체참조데이터저장모듈과,
현장수집데이터처리수단의 현장값기록부에 저장된 데이터를 호출하여 저장하는 현장누적데이터저장모듈을 포함하여 구성되는 내부데이터베이스부와,
현장수집데이터처리수단의 호출 및 제어를 수행하며, 내부데이터베이스부를 검색 및 참조하여 제어하는 중앙관리제어부를 포함하여 구성되는 중앙관리수단;을 포함하여 구성되되, 상기 중앙관리수단에서 제어신호를 보내면 해당하는 현장수집데이터처리수단의 현장값기록부에 저장된 현장기록값을 중앙관리수단으로 송신하여 이를 중앙관리수단의 내부데이터베이스부에 저장 기록하는 것을 특징으로 한다.
이상의 구성 및 작용을 지니는 본 발명에 따른 분산 독립형 영상원격감시제어 시스템은,
현장수집데이터처리수단 및 중앙관리수단에 포인트 정보를 내장함으로써 제어의 실시간성 보장으로 신뢰도가 향상되도록 하며 다양한 응용이 가능해지고 자동운전 기능 등 유연성 있는 제어가 가능한 효과를 제공하게 된다.
또한, 현장에서 측정되는 계측값이 자체 저장되고 현장의 변화된 값 발생시에만 중앙관리수단으로 값 변화 상태를 실시간으로 알려줄 뿐만아니라 중앙관리수단과의 통신 이상유무에 관계없이 별도로 현장 자체에서 자동운전을 시행할 수 있게 된다.
또한, 통신두절시 발생되는 실시간 데이터는 현장에서 자체 저장되고 통신 정상화시 현장의 모든 데이터를 중앙관리수단에 전달하여 연속 데이터를 유지할 수 있게 함으로써 전체 시스템의 신뢰도를 높일 수 있게 된다.
또한, 현장 데이터는 현장 운영체제 내의 설정 스케줄링에 따라 일정별(시간, 일, 월 단위)로 선택 저장되어 시스템 유휴시(idle time)에 패킷 단위로 중앙관리수단에 업로드 함으로써 보고서 등 통계자료 활용할 수 있게 된다.
또한, 한 명의 관리자가 제어처리에 대한 많은 정보처리 및 제어기능을 수행하며 대규모 중앙집중 관리가 가능할 뿐만 아니라 복잡한 자동운전 기능을 구성할 수 있고 데이터 수집 및 보고서 작성시 유리하며 다수의 원격소 증가에도 중앙관리수단의 부하를 최소화함으로써 확장성이 우수한 효과를 제공하게 된다.
또한, 현장 포인트를 중앙관리수단에서 원격으로 설정 및 수정할 수 있으며 현장수집데이터처리수단의 고장으로 기기 변경시 중앙관리수단에 백업된 원격소 정의 데이터를 다운로드시켜줌으로써 교체와 동시에 즉시 운영이 가능하여 인력의 효율적 활용 및 유지보수가 용이한 효과를 제공하게 된다.
또한, 데이터 이중화로 인한 데이터 손실의 최소화와 정보 동시성으로 데이터 무결성을 보장함으로써 데이터에 대한 신뢰도를 높일 수 있을 뿐만 아니라 향후 효율적 현장 운영에 중요한 통계자료로 활용할 수 있게 된다.
상기 과제를 달성하기 위한 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템은,
영상원격 감시제어시스템에 있어서,
각각 현장의 영상정보 수집을 위한 영상 취득장치와,
각각의 주변상황 음향정보 수집을 위한 음향취득장치와,
각각 현장에 설치 구성된 계측 장치의 동작을 제어하기 위한 계측제어장치와,
각각 현장에 설치 구성된 전동 장치의 동작을 제어하기 위한 전동제어장치와,
비상시 혹은 경고시 외부에 음성 송출을 위한 방송장치와,
상기 각각의 장치로부터 현장 정보를 수집하는 현장정보수집장치를 포함하여 구성되는 현장정보수집수단과;
상기 현장정보수집장치로부터 수신된 현장 데이터 정보 및 영상 정보를 처리하기 위한 현장데이터영상정보처리부와,
현장의 데이터 정보 및 영상 정보를 기록하는 현장값기록부와,
각각의 현장정보수집수단의 고유한 현장정보수집수단 식별포인트와 현장정보수집장치 식별포인트로 정의하여 중앙관리수단에서 제어하고자 하는 현장정보수집수단 및 현장정보수집장치들의 식별 부호(포인트)를 공유메모리에 저장하여 제어하는 현장포인트정의부와,
현장값기록부와 현장포인트정의부의 데이터를 처리하는 실시간데이터처리부를 포함하여 구성되는 현장수집데이터처리수단과;
여러개의 현장수집데이터처리수단의 제어를 위해 정의되는 데이터를 저장하는 각원격소정의데이터저장모듈과,
모든 현장수집데이터처리수단의 데이터를 저장하고 있는 전체참조데이터저장모듈과,
현장수집데이터처리수단의 현장값기록부에 저장된 데이터를 호출하여 저장하는 현장누적데이터저장모듈을 포함하여 구성되는 내부데이터베이스부와,
현장수집데이터처리수단의 호출 및 제어를 수행하며, 내부데이터베이스부를 검색 및 참조하여 제어하는 중앙관리제어부를 포함하여 구성되는 중앙관리수단;을 포함하여 구성되되, 상기 중앙관리수단에서 제어신호를 보내면 해당하는 현장수집데이터처리수단의 현장값기록부에 저장된 현장기록값을 중앙관리수단으로 송신하여 이를 중앙관리수단의 중앙관리제어부에 의해 내부데이터베이스부에 저장 기록하는 것을 특징으로 한다.
이때, 상기 현장값기록부는,
공유메모리를 사용하여 현장값을 실시간으로 기록 저장하여 일정기간이 지난 데이터는 패킷화하여 중앙관리수단으로 보내어 서버부하를 줄이는 것을 특징으로 한다.
이때, 상기 현장포인트정의부는,
각각의 현장정보수집수단의 고유한 현장정보수집수단 식별포인트와 현장정보수집장치 식별포인트로 정의하여 중앙관리수단에서 제어하고자 하는 현장정보수집수단 및 현장정보수집장치들을 정의하여 식별 부호를 공유메모리에 저장하여 제어하는 것을 특징으로 한다.
이때, 상기 현장데이터영상정보처리부의 처리에 의해,
현장의 영상을 중앙관리수단으로 전송하여 중앙관리소에서 실시간으로 감시하고 현장포인트정의부에 저장된 식별포인트로 제어하고자 하는 장치를 선택하여 제어하는 것을 특징으로 한다.
이때, 상기 현장수집데이터처리수단에,
문제 발생시 중앙관리수단의 내부데이터베이스부의 현장 누적데이터와 각원격소 정의데이터를 전송하여 현장수집데이터처리수단의 데이터를 보수할 수 있는 것을 특징으로 한다.
이때, 상기 중앙관리수단에,
문제발생시 각각의 현장수집데이터처리수단에 저장된 현장 식별포인트와 현장 기록값을 중앙관리수단으로 전송하여 유지보수를 수행하는 것을 특징으로 한다.
이때, 상기 현장정보수집수단에,
저장된 데이터에 대해서 공유메모리를 이용하여 중앙관리수단이 아닌 웹을 통해 데이터접근을 수행할 수 있는 것을 특징으로 한다.
이때, 상기 중앙관리수단의 중앙관리제어부에서는,
제어시퀸스 신호를 스케줄링하여 정해진 시간에 여러 개의 현장정보수집수단을 제어할 수 있는 것을 특징으로 한다.
이때, 상기 현장정보수집수단은,
현장정보수집장치에 낙뢰발생시 낙뢰를 감지하는 낙뢰감지부와,
낙뢰로 인한 전류를 차단하는 낙뢰차단부와,
낙뢰차단부에 의해 모뎀의 전원을 차단시키는 통신모뎀전원제어부와,
비상시 전원공급을 위한 유피에스에 비상전원 공급 신호를 전송하는 비상전원공급신호전송부와,
상기 유피에스에서 비상전원을 공급하게 되면 다시 현장정보수집장치의 데이터복구를 요청하는 기록요청부와,
상기 유피에스에서 비상전원을 공급하게 되면 영상 취득장치와 음향취득장치에 동작 신호를 전송하는 영상음향동작부와,
상기 유피에스에서 비상전원을 공급하게 되면 비상시 동안에 계측제어장치에 계측 동작 신호를 전송하여 자체검침을 수행하는 자체검침부와,
자체 검침 데이터에 대한 임계치 정보를 저장하고 있는 임계치정보관리부와,
상기 자체검침부에 의해 자체 검침된 정보와 임계치정보관리부에 저장된 임계치 정보를 비교 판단하여 임계치를 초과하게 되면 영상 취득장치, 음향취득장치, 계측제어장치, 전동제어장치에 제어 신호를 전송하는 자체제어신호처리부를 더 포함하여 구성되는 것을 특징으로 한다.
이때, 상기 기록요청부에서,
비상시 자체적으로 데이터를 현장정보수집장치에 기록 저장하는 것을 특징으로 한다.
이하, 본 발명에 의한 분산 독립형 영상원격감시제어 시스템의 실시예를 통해 상세히 설명하도록 한다.
도 1은 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 전체 구성도이다.
도 1에 도시한 바와 같이, 본 발명의 분산 독립형 영상원격감시제어 시스템은,
영상원격 감시제어시스템에 있어서,
각각 현장의 영상정보 수집을 위한 영상 취득장치(120)와,
각각의 주변상황 음향정보 수집을 위한 음향취득장치(130)와,
각각 현장에 설치 구성된 계측 장치의 동작을 제어하기 위한 계측제어장치(140)와,
각각 현장에 설치 구성된 전동 장치의 동작을 제어하기 위한 전동제어장치(150)와,
비상시 혹은 경고시 외부에 음성 송출을 위한 방송장치(160)와,
상기 각각의 장치로부터 현장 정보를 수집하는 현장정보수집장치(110)를 포함하여 구성되는 현장정보수집수단(100)과;
상기 현장정보수집장치로부터 수신된 현장 데이터 정보 및 영상 정보를 처리하기 위한 현장데이터영상정보처리부(210)와,
현장의 데이터 정보 및 영상 정보를 기록하는 현장값기록부(220)와,
각각의 현장정보수집수단의 고유한 현장정보수집수단 식별포인트와 현장정보수집장치 식별포인트로 정의하여 중앙관리수단에서 제어하고자 하는 현장정보수집수단 및 현장정보수집장치들의 식별 부호(포인트)를 공유메모리에 저장하여 제어하는 현장포인트정의부(230)와,
현장값기록부와 현장포인트정의부의 데이터를 처리하는 실시간데이터처리부(240)를 포함하여 구성되는 현장수집데이터처리수단(220)과;
삭제
여러개의 현장수집데이터처리수단의 제어를 위해 정의되는 데이터를 저장하는 각원격소정의데이터저장모듈(311)과,
모든 현장수집데이터처리수단의 데이터를 저장하고 있는 전체참조데이터저장모듈(312)과,
현장수집데이터처리수단의 현장값기록부에 저장된 데이터를 호출하여 저장하는 현장누적데이터저장모듈(313)을 포함하여 구성되는 내부데이터베이스(310)부와,
현장수집데이터처리수단의 호출 및 제어를 수행하며, 내부데이터베이스부를 검색 및 참조하여 제어하는 중앙관리제어부(320)를 포함하여 구성되는 중앙관리수단(300);을 포함하여 구성되되, 상기 중앙관리수단에서 제어신호를 보내면 해당하는 현장수집데이터처리수단의 현장값기록부에 저장된 현장기록값을 중앙관리수단으로 송신하여 이를 중앙관리수단의 중앙관리제어부에 의해 내부데이터베이스부에 저장 기록하는 것을 특징으로 한다.
본 발명인 분산 독립형 영상원격감시시스템의 현장정보수집장치(100)와 현장수집데이터처리수단(200)사이의 데이터흐름과 제어에 대하여 쉽게 이해할 수 있도록 배수갑문으로 예를 들어 설명하고 있으나, 배수갑문 이외에도 수문, 상수도, 하수도, 농작물재배 등과 같은 수많은 원격소를 중앙에서 관리하는 곳에서 적용할 수 있는 것은 당연한 것이다.
배수갑문 1~N까지의 배수갑문의 수위 및 수문의 계페여부와 정도를 계측하고 제어하는 계측제어장치와, 각각 현장의 영상정보 수집을 위한 영상 취득장치와, 각각의 주변상황 음향정보 수집을 위한 음향취득장치와, 각각 현장에 설치 구성된 계측 장치의 동작을 제어하기 위한 계측제어장치와, 각각 현장에 설치 구성된 전동 장치의 동작을 제어하기 위한 전동제어장치와, 비상시 혹은 경고시 외부에 음성 송출을 위한 방송장치로부터 전송되는 데이터를 현장정보수집장치(110)에서 수집하게 되며 이때 현장정보수집장치의 데이터들은 현장수집데이터처리수단에서 수신받게 되며, 현장정보수집장치로부터 수신된 현장 데이터 정보 및 영상 정보를 현장데이터영상정보처리부에서 처리하여 현장값기록부에 현장의 데이터 정보 및 영상 정보를 기록하게 된다.
상기 실시간데이터처리부는 현장포인트정의부의 정보와 현장값기록부에 저장 된 데이터를 호출하고 제어시퀸스에 따라 현장포인트 정의에 따라 장치 검색후 제어 명령으로 현장정보수집장치를 제어하여 각각의 장치들을 제어하게 되는 것이다.
다음은 현장수집데이터처리수단 및 중앙관리수단에 대해서 설명하도록 한다.
상기 중앙관리수단은 여러 개의 현장수집데이터처리수단을 제어하기 위한 각각의 식별부호를 정의하여 저장하는 각원격소정의데이터저장모듈과,
모든 현장수집데이터처리수단의 현장기록값 데이터를 저장하고 있는 전체참조데이터저장모듈과,
현장수집데이터처리수단의 현장값기록부에 저장된 데이터를 호출하여 저장하는 현장누적데이터저장모듈을 포함하여 구성되는 내부데이터베이스부로 구성된다.
구체적으로 설명하자면, 현장수집데이터처리수단로부터 받은 현장기록부에 저장된 데이터들은 현장누적데이터저장모듈로 저장되며 현장수집데이터처리수단로부터 받은 현장 정의 포인트(식별부호)는 각원격소정의데이터저장모듈에 저장되며, 현장기록값 데이터는 전체참조데이터저장모듈에 저장된다.
중앙관리수단의 중앙관리제어부는 제어 대상이 되는 현장수집데이터처리수단을 선택하기 위해 각원격소정의데이터와 명령 신호를 포함하는 제어시퀸스를 각각의 현장수집데이터처리수단에 보내면 거기에 해당하는 현장수집데이터처리수단의 실시간데이터처리부에 의해 제어시퀸스에 따라 동작하게 된다.
현장정보수집장치에서 현장의 배수갑문의 상태와 환경을 데이터로 수집하여 현장수집데이터처리수단에 보내면 이를 현장수집데이터처리수단는 정보화하여 현장데이터영상정보처리부에 의해 정보화하여 현장값기록부에 현장의 데이터 정보 및 영상 정보를 기록하게 된다.
중앙관리수단에서는 내부데이터베이스부에 저장된 여러개의 현장수집데이터처리수단의 정보를 호출하고 처리 통계자료나 유지보수에 사용된다.
또한 중앙관리수단에는 관리프로그램을 탑재하여 내부데이터베이스부의 정보를 전체 검색하거나 보고서용을 위한 데이터검색을 선택하여 사용할 수도 있다.
상기 현장값기록부는 공유메모리를 사용하여 현장값을 실시간으로 기록 저장하여 일정기간이 지난 데이터는 패킷화하여 중앙관리수단으로 보내어 서버부하를 줄이게 되며, 상기 현장포인트정의부는,
각각의 현장정보수집수단의 고유한 현장정보수집수단 식별포인트와 현장정보수집장치 식별포인트로 정의하여 중앙관리수단에서 제어하고자 하는 현장정보수집수단 및 현장정보수집장치들을 정의하여 식별 부호를 공유메모리에 저장하여 제어하는 것을 특징으로 한다.
이를 통해 독립적인 운영을 현장에서도 처리할 수 있게 된다.
또한, 상기 현장데이터영상정보처리부의 처리에 의해 현장의 영상을 중앙관리수단으로 전송하여 중앙관리소에서 실시간으로 감시하고 현장포인트정의부에 저장된 식별포인트로 제어하고자 하는 장치를 선택하여 제어할 수 있게 된다.
상기 현장수집데이터처리수단에 문제 발생시 중앙관리수단의 내부데이터베이스부의 현장 누적데이터와 각원격소 정의데이터를 전송하여 현장수집데이터처리수단의 데이터를 보수할 수 있게 되며, 상기 중앙관리수단에 문제발생시 각각의 현장수집데이터처리수단에 저장된 현장 식별포인트와 현장 기록값을 중앙관리수단으로 전송하여 유지보수를 수행할 수 있게 된다.
이는 현장수집데이터처리수단 및 중앙관리수단에 동일한 현장 정의 포인트(식별부호)를 저장하고 있기 때문에 가능한 것이다.
또한, 상기 현장정보수집수단에 저장된 데이터에 대해서 공유메모리를 이용하기 때문에 중앙관리수단이 아닌 웹을 통해 데이터접근을 수행할 수 있게 된다.
또한, 상기 중앙관리수단의 중앙관리제어부에서는 제어시퀸스 신호를 스케줄링하여 정해진 시간에 여러 개의 현장정보수집수단을 제어할 수 있는 것을 특징으로 하며, 설정 스케줄링에 따라 일정별(시간, 일, 월 단위)로 선택 저장되어 시스템 유휴시(idle time)에 패킷 단위로 중앙관리수단에 업로드 함으로써 보고서 등 통계자료 활용할 수 있게 된다.
도 2는 본 발명의 다른 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 전체 구성도이다.
도 2에 도시한 바와 같이, 상기 현장정보수집수단(100)은,
현장정보수집장치에 낙뢰발생시 낙뢰를 감지하는 낙뢰감지부(171)와,
낙뢰로 인한 전류를 차단하는 낙뢰차단부(172)와,
낙뢰차단부에 의해 모뎀의 전원을 차단시키는 통신모뎀전원제어부(173)와,
비상시 전원공급을 위한 유피에스에 비상전원 공급 신호를 전송하는 비상전원공급신호전송부(174)와,
상기 유피에스에서 비상전원을 공급하게 되면 다시 현장정보수집장치의 데이터복구를 요청하는 기록요청부(175)와,
상기 유피에스에서 비상전원을 공급하게 되면 영상 취득장치와 음향취득장치에 동작 신호를 전송하는 영상음향동작부(176)와,
상기 유피에스에서 비상전원을 공급하게 되면 비상시 동안에 계측제어장치에 계측 동작 신호를 전송하여 자체검침을 수행하는 자체검침부(177)와,
자체 검침 데이터에 대한 임계치 정보를 저장하고 있는 임계치정보관리부(178)와,
상기 자체검침부에 의해 자체 검침된 정보와 임계치정보관리부에 저장된 임계치 정보를 비교 판단하여 임계치를 초과하게 되면 영상 취득장치, 음향취득장치, 계측제어장치, 전동제어장치에 제어 신호를 전송하는 자체제어신호처리부(179)를 더 포함하여 구성된다.
도 3은 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 전체 동작 시퀸스를 나타낸 순서도이다.
중앙관리수단의 관리프로그램으로 제어하고자 하는 현장수집데이터처리수단을 찾기 위해 해당 내부데이터베이스부에 저장된 각원격소정의데이터저장모듈에서 키 값을 검색하여 전송하고 화면에 표시한다.
신호를 받은 해당 현장수집데이터처리수단에서는 현장포인트정의부에 해당 키 값을 검색하여 여기에 해당하는 장치를 실시간데이터처리부를 통해 제어하게 된다.
해당 포인트가 키 값 대로 수행되면 해당되는 신호를 다시 중앙관리수단으로 전송하여 수행여부를 판단하게 된다.
도 4는 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 데이터전달시퀸스를 나타내는 순서도이다.
현장수집데이터처리수단은 수위나 수문의 계폐 정도등 변화된 정보를 감지하면 해당 장치 데이터와 변화된 데이터를 현장값기록부와 해당 포인트정의부에 저장한다.
현장수집데이터처리수단의 실시간데이터처리부는 저장된 현장값기록부와 해당 포인트정의부의 주소를 탐색하여 이를 중앙관리수단으로 송신하게 된다.
이때, 중앙관리수단은 수신한 정보를 내부데이터베이스부에 저장하고 화면에 표시하게 된다.
도 5는 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 의 실시간데이터처리부 교체시 작동 시퀸스를 나타내는 순서도이다.
실시간데이터처리부가 정지시에 실시간데이터처리부를 교체하고 작동하면 중앙관리수단과 통신을 위해 통신가능을 판단하게 되며, 만일 통신이 이루어지지 않으면 통신장치를 점검한다.
점검후 통신이 수행가능하게 되면 중앙관리수단의 내부데이터베이스부의 해당 정보를 다운받게 된다.
도 6은 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 현장수집데이터처리수단에 낙뢰 발생시 동작 시퀸스를 나타내는 순서도이다.
낙뢰발생시 낙뢰감지부에 의해 낙뢰를 감지하여 낙뢰차단부로 인하여 낙뢰로 인한 전류를 차단하게 되며, 통신모뎀전원제어부에 의해 모뎀의 전원을 차단하게 된다.
이때, 비상전원공급신호전송부를 통해 유피에스(무정전전원장치)에 비상전원 공급 신호를 전송하여 전원이 정상 동작하게 되면 중앙관리수단과의 소통을 위해 통신 여부를 점검하게 된다.
점검 후에 통신가능 상태가 되면 중앙관리수단과 연결하여 통신 두절 동안에 발생한 현장수집데이터처리수단에 저장된 정보를 중앙관리수단으로 전송한다.
즉, 기록요청부에 의해 상기 유피에스에서 비상전원을 공급하게 되면 다시 현장정보수집장치의 데이터복구를 요청하게 되며, 영상음향동작부를 동작시켜 영상 취득장치와 음향취득장치에 동작 신호를 전송하게 된다.
또한, 유피에스에서 비상전원을 공급하게 되면 자체검침부에 의해 비상시 동안에 계측제어장치에 계측 동작 신호를 전송하여 자체 검침을 수행하게 된다.
이때, 상기 자체제어신호처리부를 통해 자체검침부에 의해 자체 검침된 정보와 임계치정보관리부에 저장된 임계치 정보를 비교 판단하여 임계치를 초과하게 되면 영상 취득장치, 음향취득장치, 계측제어장치, 전동제어장치에 제어 신호를 전송하게 되어 중앙관리수단의 제어없이도 자체 판단에 따른 제어 신호를 발생시켜 동작하게 되며 동작 후 결과 신호를 현장수집데이터처리수단으로 전송하여 통신 두절 동안에 발생한 현장수집데이터처리수단에 저장된 정보를 중앙관리수단으로 전송한다.
상기와 같은 구성 및 동작을 통해 현장수집데이터처리수단 및 중앙관리수단에 포인트 정보를 내장함으로써 제어의 실시간성 보장으로 신뢰도가 향상되도록 하며 다양한 응용이 가능해지고 자동운전 기능 등 유연성 있는 제어가 가능한 효과를 제공하게 된다.
삭제
또한, 현장에서 측정되는 계측값이 자체 저장되고 현장의 변화된 값 발생시에만 중앙관리수단으로 값 변화 상태를 실시간으로 알려줄 뿐만아니라 중앙관리수단과의 통신 이상유무에 관계없이 별도로 현장 자체에서 자동운전을 시행할 수 있게 된다.
또한, 통신두절시 발생되는 실시간 데이터는 현장에서 자체 저장되고 통신 정상화시 현장의 모든 데이터를 중앙관리수단에 전달하여 연속 데이터를 유지할 수 있게 함으로써 전체 시스템의 신뢰도를 높일 수 있게 된다.
상기와 같은 내용의 본 발명이 속하는 기술분야의 당업자는 본 발명의 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시 예들은 모든 면에서 예시된 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구 범위의 의미 및 범위 그리고 그 등가 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명인 분산 독립형 영상원격감시제어 시스템은,
현장수집데이터처리수단 및 중앙관리수단에 포인트 정보를 내장함으로써 제어의 실시간성 보장으로 신뢰도가 향상되도록 하며 다양한 응용이 가능해지고 자동운전 기능 등 유연성 있는 제어가 가능한 효과를 제공하게 되어 원격제어 분야에 널리 유용하게 활용될 것이다.
도 1은 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 전체 구성도이다.
도 2는 본 발명의 다른 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 전체 구성도이다.
도 3은 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 전체 동작 시퀸스를 나타낸 순서도이다.
도 4는 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 데이터전달시퀸스를 나타내는 순서도이다.
도 5는 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 의 실시간데이터처리부 교체시 작동 시퀸스를 나타내는 순서도이다.
도 6은 본 발명의 일실시예에 따른 분산 독립형 영상원격감시제어 시스템의 현장수집데이터처리수단에 낙뢰 발생시 동작 시퀸스를 나타내는 순서도이다.
* 도면의 주요 부분에 대한 부호의 설명 *
100 : 현장정보수집수단
200 : 현장수집데이터처리수단
300 : 중앙관리수단

Claims (10)

  1. 삭제
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 영상원격 감시제어시스템에 있어서,
    각각 현장의 영상정보 수집을 위한 영상 취득장치와,
    각각의 주변상황 음향정보 수집을 위한 음향취득장치와,
    각각 현장에 설치 구성된 계측 장치의 동작을 제어하기 위한 계측제어장치와,
    각각 현장에 설치 구성된 전동 장치의 동작을 제어하기 위한 전동제어장치와,
    비상시 혹은 경고시 외부에 음성 송출을 위한 방송장치와,
    상기 각각의 장치로부터 현장 정보를 수집하는 현장정보수집장치와,
    현장정보수집장치에 낙뢰발생시 낙뢰를 감지하는 낙뢰감지부와,
    낙뢰로 인한 전류를 차단하는 낙뢰차단부와,
    낙뢰차단부에 의해 모뎀의 전원을 차단시키는 통신모뎀전원제어부와,
    비상시 전원공급을 위한 유피에스에 비상전원 공급 신호를 전송하는 비상전원공급신호전송부와,
    상기 유피에스에서 비상전원을 공급하게 되면 다시 현장정보수집장치의 데이터복구를 요청하는 기록요청부와,
    상기 유피에스에서 비상전원을 공급하게 되면 영상 취득장치와 음향취득장치에 동작 신호를 전송하는 영상음향동작부와,
    상기 유피에스에서 비상전원을 공급하게 되면 비상시 동안에 계측제어장치에 계측 동작 신호를 전송하여 자체검침을 수행하는 자체검침부와,
    자체 검침 데이터에 대한 임계치 정보를 저장하고 있는 임계치정보관리부와,
    상기 자체검침부에 의해 자체 검침된 정보와 임계치정보관리부에 저장된 임계치 정보를 비교 판단하여 임계치를 초과하게 되면 영상 취득장치, 음향취득장치, 계측제어장치, 전동제어장치에 제어 신호를 전송하는 자체제어신호처리부를 포함하여 구성되는 현장정보수집수단과;
    상기 현장정보수집장치로부터 수신된 현장 데이터 정보 및 영상 정보를 처리하기 위한 현장데이터영상정보처리부와,
    현장의 데이터 정보 및 영상 정보를 기록하는 현장값기록부와,
    각각의 현장정보수집수단의 고유한 현장정보수집수단 식별포인트와 현장정보수집장치 식별포인트로 정의하여 중앙관리수단에서 제어하고자 하는 현장정보수집수단 및 현장정보수집장치들의 식별 부호(포인트)를 공유메모리에 저장하여 제어하는 현장포인트정의부와,
    현장값기록부와 현장포인트정의부의 데이터를 처리하는 실시간데이터처리부를 포함하여 구성되는 현장수집데이터처리수단과;
    여러개의 현장수집데이터처리수단의 제어를 위해 정의되는 데이터를 저장하는 각원격소정의데이터저장모듈과,
    모든 현장수집데이터처리수단의 데이터를 저장하고 있는 전체참조데이터저장모듈과,
    현장수집데이터처리수단의 현장값기록부에 저장된 데이터를 호출하여 저장하는 현장누적데이터저장모듈을 포함하여 구성되는 내부데이터베이스부와,
    현장수집데이터처리수단의 호출 및 제어를 수행하며, 내부데이터베이스부를 검색 및 참조하여 제어하는 중앙관리제어부를 포함하여 구성되는 중앙관리수단;을 포함하여 구성되되, 상기 중앙관리수단에서 제어신호를 보내면 해당하는 현장수집데이터처리수단의 현장값기록부에 저장된 현장기록값을 실시간데이터처리부에 의해 중앙관리수단으로 송신하여 이를 중앙관리수단의 중앙관리제어부에 의해 내부데이터베이스부에 저장 기록하는 것을 특징으로 하는 분산 독립형 영상원격감시제어시스템.
  10. 삭제
KR1020080138002A 2008-12-31 2008-12-31 분산 독립형 영상원격감시제어 시스템 KR100910239B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080138002A KR100910239B1 (ko) 2008-12-31 2008-12-31 분산 독립형 영상원격감시제어 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080138002A KR100910239B1 (ko) 2008-12-31 2008-12-31 분산 독립형 영상원격감시제어 시스템

Publications (1)

Publication Number Publication Date
KR100910239B1 true KR100910239B1 (ko) 2009-07-31

Family

ID=41338128

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080138002A KR100910239B1 (ko) 2008-12-31 2008-12-31 분산 독립형 영상원격감시제어 시스템

Country Status (1)

Country Link
KR (1) KR100910239B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101835522B1 (ko) * 2017-06-28 2018-04-19 주식회사 대영 현장 데이터 보상 기능을 포함한 수리시설 원격제어장치
CN109750716A (zh) * 2019-03-14 2019-05-14 中交上海三航科学研究院有限公司 一种码头泥面监测及处理装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040001725A (ko) * 2002-06-28 2004-01-07 주식회사 비츠로시스 인터넷을 이용한 현장감시제어장치
KR20040106964A (ko) * 2003-06-10 2004-12-20 주식회사 아이오코리아 실시간 동영상 원격 감시 시스템
KR20070105430A (ko) * 2006-04-26 2007-10-31 동원대학 산학협력단 웹카메라를 이용한 감시장치의 데이터 전송시스템
KR20080096462A (ko) * 2007-04-27 2008-10-30 주식회사 아이캔텍 원격 영상 제어와 로컬 영상 제어를 동시에 수행할 수 있는영상 감시 시스템 및 이를 이용한 영상 감시 수행 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040001725A (ko) * 2002-06-28 2004-01-07 주식회사 비츠로시스 인터넷을 이용한 현장감시제어장치
KR20040106964A (ko) * 2003-06-10 2004-12-20 주식회사 아이오코리아 실시간 동영상 원격 감시 시스템
KR20070105430A (ko) * 2006-04-26 2007-10-31 동원대학 산학협력단 웹카메라를 이용한 감시장치의 데이터 전송시스템
KR20080096462A (ko) * 2007-04-27 2008-10-30 주식회사 아이캔텍 원격 영상 제어와 로컬 영상 제어를 동시에 수행할 수 있는영상 감시 시스템 및 이를 이용한 영상 감시 수행 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101835522B1 (ko) * 2017-06-28 2018-04-19 주식회사 대영 현장 데이터 보상 기능을 포함한 수리시설 원격제어장치
CN109750716A (zh) * 2019-03-14 2019-05-14 中交上海三航科学研究院有限公司 一种码头泥面监测及处理装置

Similar Documents

Publication Publication Date Title
US9224286B2 (en) Security system health monitoring
CN202282837U (zh) 视频质量诊断***
KR101314964B1 (ko) 네트워크 자동복구 기능이 있는 지능형 장비의 원격 관리 시스템
KR20210143819A (ko) 원격 모니터링 시스템
KR100853757B1 (ko) 영상 원격 감시제어시스템을 이용한 태양광 발전관리시스템
RU2535630C2 (ru) Способ и устройство для сбора данных мобильной связи
CN100440160C (zh) 监控设备、监控方法和监控***
KR102138340B1 (ko) 지능형 원격단말장치를 이용한 사물인터넷 기반의 관내 시설물 자율 점검 및 고장 알림 운영시스템
CN101131787A (zh) 实时水文信息自动监测和灾情预警报警***
CN101777951B (zh) 一种数据监测的方法和***
US10153966B1 (en) Hybrid mesh network monitoring signaling environment
KR100833615B1 (ko) 원격 감시 시스템 및 원격 감시 방법
CN103580914A (zh) 基于远程数字安防***故障监控平台运行的方法和装置
CN103763127A (zh) 一种设备状态告警监控方法及***
CN113791571A (zh) 一种智能建筑楼宇设备自控报警装置
KR100910239B1 (ko) 분산 독립형 영상원격감시제어 시스템
KR20090087372A (ko) 유비쿼터스 문화재 보호 관리시스템
KR101948010B1 (ko) 센서용 터미널 서버 및 이를 이용한 분산형 센서 네트워크 관제 시스템
JP2010147804A (ja) 伝送装置と伝送装置に実装されるユニット
KR101891926B1 (ko) 자동화 설비 원격 제어 시스템
KR20220085160A (ko) 클라우드 기반 재난 감지 방법 및 이를 수행하는 재난 분석 시스템
CN111581107A (zh) Ftp程序疲劳测试方法及***
CN112865312A (zh) 一种电力调度***及电力数据处理方法
CN112769913A (zh) 微环境就地监控***及电气箱柜微环境监控***
JP2003202921A (ja) プラント運転監視システム

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130614

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140613

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150612

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20160630

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20181024

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20190731

Year of fee payment: 11

R401 Registration of restoration