KR101371384B1 - 트랙킹 시스템 및 이를 이용한 트랙킹 방법 - Google Patents

트랙킹 시스템 및 이를 이용한 트랙킹 방법 Download PDF

Info

Publication number
KR101371384B1
KR101371384B1 KR1020130002841A KR20130002841A KR101371384B1 KR 101371384 B1 KR101371384 B1 KR 101371384B1 KR 1020130002841 A KR1020130002841 A KR 1020130002841A KR 20130002841 A KR20130002841 A KR 20130002841A KR 101371384 B1 KR101371384 B1 KR 101371384B1
Authority
KR
South Korea
Prior art keywords
markers
image
imaging unit
dimensional coordinates
reflector
Prior art date
Application number
KR1020130002841A
Other languages
English (en)
Inventor
홍종규
이현기
정재헌
김민영
Original Assignee
경북대학교 산학협력단
주식회사 고영테크놀러지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 경북대학교 산학협력단, 주식회사 고영테크놀러지 filed Critical 경북대학교 산학협력단
Priority to KR1020130002841A priority Critical patent/KR101371384B1/ko
Priority to PCT/KR2014/000131 priority patent/WO2014109520A1/ko
Priority to EP14737829.3A priority patent/EP2944285B1/en
Priority to CN201480004280.1A priority patent/CN104902840B/zh
Priority to JP2015552571A priority patent/JP6147360B2/ja
Priority to US14/370,549 priority patent/US9576366B2/en
Application granted granted Critical
Publication of KR101371384B1 publication Critical patent/KR101371384B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/313—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for introducing through surgical openings, e.g. laparoscopes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2055—Optical tracking systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2055—Optical tracking systems
    • A61B2034/2057—Details of tracking cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/363—Use of fiducial points
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3937—Visible markers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3937—Visible markers
    • A61B2090/3945—Active visible markers, e.g. light emitting diodes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3983—Reference marker arrangements for use with image guided surgery
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30204—Marker

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Veterinary Medicine (AREA)
  • Robotics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Biophysics (AREA)
  • Optics & Photonics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

한 대의 결상 유닛만으로도 각각의 마커들의 3차원 좌표를 산출할 수 있도록 하여 제작비용의 감소와 더불어 장비의 컴팩트화를 실현하여 수술 공간의 제약을 최소화할 수 있는 트랙킹 시스템 및 이를 이용한 트랙킹 방법이 개시된다. 상기 트랙킹 시스템 및 이를 이용한 트랙킹 방법은 각각의 마커들로부터 방출되는 광이 2개의 경로로 한 대의 결상 유닛에 전달되어 상기 결상 유닛의 이미지 센서에 각각의 마커에 대해 각각의 경로에 의한 2개(다이렉트 영상과 리플렉트 영상)의 영상을 결상시키므로 한 대의 결상 유닛만으로도 목적물에 부착된 마커들의 공간 위치와 방향을 산출하여 확인할 수 있으므로, 트랙킹 시스템의 제작비용의 절감과 더불어 장비의 소형 경량화를 이룰 수 있어 종래의 트랙킹 시스템에 비하여 수술 공간의 제약을 상대적으로 덜 받는다는 효과가 있다.

Description

트랙킹 시스템 및 이를 이용한 트랙킹 방법{TRACKING SYSTEM AND METHOD FOR TRACKING USING THE SAME}
본 발명은 트랙킹 시스템 및 이를 이용한 트랙킹 방법에 관한 것으로, 보다 상세하게는 환자의 환부나 수술도구와 같은 목적물에 부착된 마커들의 좌표를 추적하여 목적물의 공간 위치 정보와 방향 정보를 검출하는 수술용 트랙킹 시스템 및 이를 이용한 트랙킹 방법에 관한 것이다.
최근에는 복강경 수술이나 이비인후과 수술을 할 시 보다 환자의 고통을 덜어주고 보다 빠르게 환자가 회복할 수 있도록 하기 위한 로봇 수술이 연구 및 도입되고 있는 실정이다.
이러한, 로봇 수술 시에는 수술의 위험을 최소화하고 보다 정밀한 수술을 진행할 수 있도록 하기 위하여 환부나 수술도구와 같은 목적물의 공간 위치와 방향을 정확히 추적하여 검출한 후 상기 수술도구를 환자의 환부로 정확히 조종(NAVIGATE)할 수 있는 내비게이션이 사용된다.
상기와 같은 수술용 내비게이션에는 상술한 바와 같이 환부나 수술도구와 같은 목적물의 공간 위치와 방향을 정확히 추적하여 검출할 수 있는 트랙킹 시스템이 포함된다.
상기와 같은 트랙킹 시스템은 통상 환부나 수술도구와 같은 목적물에 부착되는 마커들과, 상기 마커들에 의해 방출되는 광을 결상시키는 제1, 2 결상 유닛과, 상기 제1, 2 결상 유닛과 연결되어 상기 마커들의 3차와 좌표를 산출한 후 기 저장된 상기 서로 이웃하는 마커들을 연결하는 직선들의 정보와 서로 이웃하는 한 쌍의 직선이 이루는 각도 정보를 상기 마커들의 3차원 좌표와 비교하여 상기 목적물의 공간 위치와 방향을 산출하는 프로세서를 포함한다.
여기서, 상기 마커들의 3차원 좌표를 프로세서를 통해 산출하기 위해서는 통상적으로 하나의 마커로부터 방출되어 제1 결상 유닛에 결상된 상기 마커의 좌표와 상기 제2 결상 유닛에 결상된 상기 마커의 좌표가 동일하다는 가정 하에 삼각법을 통해 상기 프로세서에 의해 검출됨으로써 각각의 마커의 3차원 좌표가 프로세서를 통해 산출되기 위해서는 반드시 2대의 디텍터가 필요하였다.
따라서, 종래의 일반적인 트랙킹 시스템은 서로 다른 위치에서 각각의 마커들로부터 방출되는 광을 결상시키기 위한 2대의 결상 유닛을 구비해야만 함으로써 제작비용의 상승과 더불어 시스템 전체 사이즈가 커지게 됨으로써 수술 공간의 제약을 많이 받는다는 문제점이 있었다.
따라서, 본 발명의 목적은 한 대의 결상 유닛만으로도 각각의 마커들의 3차원 좌표를 산출할 수 있도록 하여 제작비용의 감소와 더불어 장비의 컴팩트화를 실현하여 수술 공간의 제약을 최소화할 수 있는 트랙킹 시스템 및 이를 이용한 트랙킹 방법에 관한 것이다.
본 발명의 일실시예에 의한 트랙킹 시스템은 목적물에 부착되어 광을 방출하거나 적어도 하나의 광원으로부터 방출되는 광을 반사시키는 적어도 3개의 마커와, 상기 마커들로부터 방출되거나 상기 마커들에 의해 반사되어 방출되는 광을 반사시키는 리플렉터와, 상기 마커들로부터 방출되는 광을 직접적으로 받아 들여 다이렉트 영상을 결상시킴과 동시에, 상기 마커들로부터 방출된 후 상기 리플렉터에 의해 반사되어 방출되는 광을 받아 들여 리플렉트 영상을 결상시키는 결상 유닛 및, 상기 결상 유닛에 결상된 상기 마커들의 다이렉트 영상과 리플렉트 영상을 이용하여 상기 마커들의 3차원 좌표를 각각 산출한 후 상기 마커들의 3차원 좌표와 기 저장된 서로 이웃하는 마커들 간의 기하학적 정보를 비교하여 상기 목적물의 공간 위치와 방향을 산출하는 프로세서를 포함한다.
일예를 들면, 상기 리플렉터는 상기 마커들로부터 방출되는 광을 상기 결상 유닛 측으로 반사시켜 리플렉트 영상을 결상시킬 수 있도록 하는 미러일 수 있다.
일예를 들면, 상기 리플렉터는 상기 결상 유닛과 동일 광 경로 상에 위치하며, 상기 프로세서의 제어 하에 설치 위치나 각도, 반사면의 형상 중 적어도 하나를 변경하여, 상기 리플렉트 영상의 결상 위치를 변화시킬 수 있다.
일예를 들면, 상기 결상 유닛은 상기 마커들로부터 직접적으로 방출되는 광과 상기 리플렉터에 의해 반사된 광을 받아들여 영상을 결상시키는 카메라일 수 있다.
한편, 상기 마커들 간의 기하학적 정보는 상기 서로 이웃하는 마커들을 연결하는 직선들의 길이 정보와, 상기 서로 이웃하는 한 쌍의 직선이 이루는 각도 정보일 수 있다.
본 발명의 일실시예에 의한 트랙킹 방법은 목적물에 부착된 적어도 3개의 마커들로부터 방출되는 광을 직접적으로 받아 들여 다이렉트 영상을 결상 유닛에 결상시킴과 동시에, 상기 마커들로부터 방출된 후 특정 위치에 설치되어 광을 반사시키는 리플렉터에 의해 방출되는 광을 받아들여 리플렉트 영상을 결상 유닛에 결상시키는 단계와, 상기 결상 유닛에 결상된 상기 마커들의 다이렉트 영상과 리플렉트 영상을 이용하여 프로세서를 통해 상기 각각의 마커들의 3차원 좌표를 산출하는 단계 및, 상기 각각의 마커들의 3차원 좌표와 상기 프로세서에 기 저장된 서로 이웃하는 마커들 간의 기하학적 정보를 비교하여 상기 목적물의 공간 위치와 방향을 산출하는 단계를 포함한다.
여기서, 상기 마커들 간의 기하학적 정보는 상기 서로 이웃하는 마커들을 연결하는 직선들의 길이 정보와, 상기 서로 이웃하는 한 쌍의 직선이 이루는 각도 정보일 수 있다.
한편, 상기 리플렉트 영상을 결상 유닛에 결상시키는 단계는, 상기 프로세서에서 리플렉터의 설치 위치, 각도 및 반사면의 형상 변경 중 적어도 하나를 제어하여 상기 결상 유닛과의 동일한 광 경로상에서 상기 리플렉트 영상의 결상 위치를 변화시키는 단계를 포함할 수 있다.
일예를 들면, 상기 마커들의 3차원 좌표를 산출하는 단계는 상기 프로세서를 통해 상기 결상 유닛에 결상된 상기 마커들의 다이렉트 영상과 리플렉트 영상의 2차원 좌표를 산출하는 단계 및, 상기 마커들의 다이렉트 영상의 2차원 좌표와 상기 리플렉트 영상의 2차원 좌표를 이용하여 상기 프로세서를 통해 상기 마커들의 3차원 좌표를 산출하는 단계를 포함할 수 있다.
이와 같이 본 발명의 일실시예에 의한 트랙킹 시스템 및 이를 이용한 트랙킹 방법은 각각의 마커들로부터 방출되는 광이 직접적으로 결상 유닛으로 유입됨과 동시에 리플렉터에 의해 반사되어 상기 결상 유닛으로 유입되도록 한다. 즉, 각각의 마커들로부터 방출되는 광이 2개의 경로(제1 경로 : 마커->결상유닛, 제2 경로 : 마커-> 리플렉터 -> 결상유닛)로 결상 유닛에 전달되어 상기 결상 유닛의 이미지 센서에 각각의 마커에 대해 각각의 경로에 의한 2개(다이렉트 영상과 리플렉트 영상)의 영상을 결상시키므로 한 대의 결상 유닛만으로도 목적물에 부착된 마커들의 공간 위치와 방향을 산출하여 확인할 수 있다
그러므로, 트랙킹 시스템의 제작비용의 절감과 더불어 장비의 소형 경량화를 이룰 수 있어 종래의 트랙킹 시스템에 비하여 수술 공간의 제약을 상대적으로 덜 받는다는 효과가 있다.
도 1은 본 발명의 일실시예에 의한 트랙킹 시스템의 개략도
도 2는 마커들이 목적물에 부착된 예시도
도 3은 렌즈의 동일 광 경로 상에서 마커의 위치가 바뀔 시 리플렉트 영상이 결상되는 위치의 변화를 설명하기 위한 예시도
도 4는 본 발명의 일실시예에 의한 트랙킹 방법을 설명하기 위한 블록도
도 5는 마커들의 3차원 좌표를 산출하는 과정을 설명하기 위한 블록도
도 6은 결상 유닛의 이미지 센서를 다이렉트 영상의 좌표계와 리플렉트 영상의 좌표계로 가상 분할한 예시도
도 7은 영상에서의 2차원 좌표와 실제 마커의 3차원 좌표와의 관계를 설명하기 위한 도면
본 발명은 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 본문에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성 요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소도 제1 구성 요소로 명명될 수 있다.
본 출원에서 사용한 용어는 단지 특정한 실시예들을 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 갖는다.
일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하 도면을 참조하여, 본 발명의 바람직한 실시예들을 보다 상세하게 설명한다.
본 발명의 일실시예에 의한 트랙킹 시스템 및 이를 이용한 트랙킹 방법은 환부나 수술도구와 같은 목적물에 적어도 3개의 마커들을 부착한 후 상기 마커들의 3차원 좌표를 산출하여 프로세서에 기 저장된 서로 이웃하는 마커들 간의 기하학적 정보와 상기 마커들의 3차원 좌표를 프로세서를 통해 비교하여 상기 환부나 수술도구와 같은 목적물의 공간 위치와 방향을 산출할 수 있도록 하는 것으로서, 그 상세한 구성에 대해서는 도면을 참조하여 설명한다.
도 1은 본 발명의 일실시예에 의한 트랙킹 시스템의 개략도이며, 도 2는 마커들이 목적물에 부착된 예시도이며, 도 3은 렌즈의 동일 광 경로 상에서 마커의 위치가 바뀔 시 리플렉트 영상이 결상되는 위치의 변화를 설명하기 위한 예시도이다.
먼저, 도 1 및 도 3에서는 설명의 편의를 위하여 1개의 마커만을 도시하였으나, 본 발명의 일실시예에 의한 트랙킹 시스템(100)은 도 2에 도시된 바와 같이 적어도 3개의 마커들(110)(111)(112)이 환부나 수술도구와 같은 목적물(200)에 부착된다.
도 1 내지 도 3을 참조하면, 본 발명의 일실시예에 의한 트랙킹 시스템(100)은 적어도 3개의 마커들(110)(111)(112), 리플렉터(reflector : 120), 결상 유닛(130), 프로세서(processor : 140)를 포함한다.
상기 적어도 3개의 마커들(110)(111)(112)은 환부나 수술도구와 같은 목적물(200)에 부착된다. 여기서, 상기 적어도 3개의 마커들(110)(111)(112)은 서로 이웃하는 마커들(110)(111)(112) 간에 일정 간격 이격되며, 서로 이웃하는 마커들(110)(111)(112)을 가상으로 연결하여 각 마커마다 이웃하는 한 쌍의 직선들(L1)(L2)(L3)이 일정한 각도(A1)(A2)(A3)를 이루도록 배치되어 상기 환부나 수술도구와 같은 목적물(200)에 부착된다.
여기서, 상기 서로 이웃하는 마커들(110)(111)(112) 간의 기하학적 정보, 즉 서로 이웃하는 마커들(110)(111)(112)을 연결하는 직선들(L1)(L2)(L3)의 길이 정보와 서로 이웃하는 마커들(110)(111)(112)을 연결하는 이웃하는 한 쌍의 직선들이 이루는 각도(A1)(A2)(A3) 정보는 상기 프로세서(140)에 실장된 메모리(memory : 141)에 기 저장된다.
예를 들면, 상기 마커들(110)(111)(112)은 3개가 환부나 수술도구와 같은 목적물(200)에 삼각형 형태로 부착될 수 있으며, 상기 3개의 마커들(110)(111)(112)을 꼭지점으로 하는 삼각형의 변을 이루는 각각의 직선(L1)(L2)(L3)의 길이 정보와, 상기 마커들(110)(111)(112)을 연결하는 서로 이웃하는 한 쌍의 직선이 이루는 각도(A1)(A2)(A3) 정보는 상기 프로세서(140)에 포함된 메모리(141)에 기 저장될 수 있다.
한편, 상기 마커들(110)(111)(112)은 자체적으로 광을 방출하는 액티브(active) 마커일 수 있다. 상술한 바와 같이 상기 마커들(110)(111)(112)을 액티브 마커로 사용할 경우에는 별도의 광원을 사용할 필요가 없다.
이와는 다르게, 상기 마커들(110)(111)(112)은 적어도 하나의 광원(150)으로부터 방출되는 광을 반사시키는 패시브(passive) 마커일 수 있다. 상술한 바와 같이 상기 마커들(110)(111)(112)을 패시브 마커로 사용할 경우에는 상기 마커들(110)(111)(112)로 광을 방출하는 적어도 하나의 광원(150)을 상기 결상 유닛(130) 주변에 배치할 수 있다. 예를 들면, 한 쌍의 광원(150)이 상기 결상 유닛(130)의 양측에 배치될 수 있다.
상기 리플렉터(120)는 상기 마커들(110)(111)(112)로부터 방출되거나 상기 마커들(110)(111)(112)에 의해 반사되어 방출되는 광을 반사시킨다. 예를 들면, 상기 리플렉터(120)는 상기 액티브 마커로부터 방출되는 광을 반사시키거나, 상기 광원(150)으로부터 방출된 후 상기 패시브 마커에 의해 반사되어 방출되는 광을 재 반사시킨다.
여기서, 상기 리플렉터(120)는 상기 마커들(110)(111)(112)로부터 방출되는 광을 상기 결상 유닛(130) 측으로 반사시켜 리플렉트(reflect) 영상을 상기 결상 유닛(130)에 결상시킬 수 있도록 하는 미러일 수 있다. 예를 들면, 상기 리플렉터(120)로는 구면 미러를 사용할 수 있다. 이와 같이, 상기 리플렉터(120)로 구면 미러를 사용하게 되면 도 3에 도시된 바와 같이 결상 유닛(130)의 렌즈(131)의 동일 광 경로(AX1) 상에서 마커(110)의 위치가 바뀔 시 θ값을 줄일 수 있으므로 이를 토대로 마커의 위치를 측정할 수 있다.
한편, 상기 리플렉터(120)는 설치 위치나 설치 각도를 변경하거나, 반사면의 형상을 변경하여 상기 리플렉터(120)에 의해 반사되어 상기 결상 유닛(130)에 결상되는 리플렉트 영상의 결상 위치의 변화를 줄 수 있다. 즉, 상기 리플렉터(120)의 설치 위치나 설치 각도 또는 반사면의 형상을 변경함으로써 다양한 실 측정 가능 범위의 변경이 가능하도록 한다.
이때, 리플렉터(120)의 설치 위치나 각도, 반사면의 형상 변경은 유무선 방식으로 네트워크 연동된 상기 프로세서(140)의 제어에 의해 변경될 수 있다. 이를 통해 수술 로봇의 스탠드, 암, 의사, 간호사 등에 의해 광 경로가 가려지는 경우, 리플렉터(120)의 이동을 통해 리플렉터 영상의 광 경로를 변경할 수 있는 이점이 있다.
또는, 프로세서(140)에서 상기 마커들(110)(111)(112)의 다이렉트 영상을 수신한 후, 일정 시간 동안 리플렉트 영상의 수신을 대기하여 수신하지 못하는 경우에는 리플렉터 영상의 광 경로가 장애물에 의해 차단된 것으로 판단할 수 있으므로, 이 경우에는 기 설정된 수치만큼 기 설치된 위치에서 이동, 각도 조절, 반사면 형상 변경 중 적어도 하나를 제어하는 제어 정보를 리플렉터(120)로 전송할 수 있다.
이러한, 상기 리플렉터(120)의 공간 위치와 방향 정보 및 변경된 공간 위치와 방향 정보는 상기 프로세서(140)에 실장된 메모리(141)에 기 저장될 수 있다.
상기 결상 유닛(130)은 상기 마커들(110)(111)(112)로부터 방출되는 광을 직접적으로 받아 들여 다이렉트(direct) 영상을 결상시킴과 동시에, 상기 마커들(110)(111)(112)로부터 방출된 후 상기 리플렉터(120)에 의해 반사되어 방출되는 광을 받아 들여 리플렉트 영상을 결상시킨다.
예를 들면, 상기 결상 유닛(130)은 상기 마커들(110)(111)(112)로부터 직접적으로 방출되는 광과 상기 리플렉터(120)에 의해 반사된 광을 받아들여 영상을 결상시키는 카메라일 수 있다. 즉, 상기 결상 유닛(130)은 상기 마커들(110)(111)(112)로부터 방출되는 광과 상기 리플렉터(120)에 의해 반사되는 광이 초점을 통과하는 렌즈(131)와, 상기 렌즈(131)의 후방부에 배치되어 상기 마커들(110)(111)(112)로부터 방출되는 광과 상기 리플렉터(120)에 의해 반사되는 광이 결상되는 이미지 센서(133)가 실장된 본체부(132)를 포함할 수 있다.
상기 프로세서(140)는 상기 결상 유닛(130)에 결상된 상기 마커들(110)(111)(112)의 다이렉트 영상과 리플렉트 영상을 이용하여 상기 각각의 마커들(110)(111)(112)의 3차원 좌표를 산출하며, 상기 마커들(110)(111)(112)의 3차원 좌표를 기 저장된 서로 이웃하는 마커들(110)(111)(112) 간의 기하학적 정보와 비교하여 환부나 수술도구와 같은 상기 목적물(200)의 공간 위치와 방향을 산출할 수 있다.
여기서, 상기 프로세서(140)에는 메모리(141)가 실장된다. 한편, 상기 프로세서(140)에 실장된 메모리(141)에는 상기 서로 이웃하는 마커들(110)(111)(112) 간의 기하학적 정보, 즉 서로 이웃하는 마커들(110)(111)(112)을 연결하는 직선들(L1)(L2)(L3)의 길이 정보와 서로 이웃하는 마커들(110)(111)(112)을 연결하는 이웃하는 한 쌍의 직선들이 이루는 각도(A1)(A2)(A3) 정보가 기 저장될 수 있다.
이에 더하여, 상기 프로세서(140)에 실장된 메모리(141)에는 상기 리플렉터(120)의 공간 위치와 방향이 기 저장될 수 있다.
상술한 바와 같이 본 발명의 일실시예에 의한 트랙킹 시스템(100)은 마커들(110)(111)(112)로부터 방출되는 광이 결상 유닛(130)으로 유입되어 다이렉트 영상이 결상될 뿐만 아니라, 상기 마커들(110)(111)(112)로부터 방출되는 광이 리플렉터(120)에 의해 반사된 후 상기 결상 유닛(130)으로 유입되어 리플렉트 영상 또한 결상되도록 하여, 한 대의 결상 유닛(130)을 사용하고도 도 1 및 도 3에서 리플렉터(120)의 좌측에 점선으로 표시한 바와 같이 한 대의 결상 유닛을 더 사용한 것과 같은 효과를 볼 수 있다.
도 1 내지 도 7을 참조하여 본 발명의 일실시예에 의한 트랙킹 시스템을 이용하여 목적물의 공간 위치와 방향을 트랙킹하는 과정에 대하여 설명한다.
도 4는 본 발명의 일실시예에 의한 트랙킹 방법을 설명하기 위한 블록도이며, 도 5는 마커들의 3차원 좌표를 산출하는 과정을 설명하기 위한 블록도이고, 도 6은 결상 유닛의 이미지 센서를 다이렉트 영상의 좌표계와 리플렉트 영상의 좌표계로 가상 분할한 예시도이며, 도 7은 영상에서의 2차원 좌표와 실제 마커의 3차원 좌표와의 관계를 설명하기 위한 도면이다.
도 1 내지 도 7을 참조하면, 본 발명의 일실시예에 의한 트랙킹 시스템을 이용하여 목적물(200)의 공간 위치와 방향을 트랙킹 하기 위해서는, 먼저 목적물(200)에 부착된 적어도 3개의 마커들(110)(111)(112)을 활성화시켜 상기 마커들(110)(111)(112)로부터 광이 방출되도록 하거나, 적어도 하나의 광원(150)을 작동시켜 상기 광원(150)으로부터 상기 목적물(200)에 부착된 적어도 3개의 마커들(110)(111)(112)에 광을 조사하여 상기 마커들(110)(111)(112)에 의해 광이 반사되어 방출되도록 한다.(S110)
보다 상세하게 설명하면, 상기 목적물(200)에 자체에서 광을 방출하는 적어도 3개의 액티브 마커들(110)(111)(112)이 부착되었을 경우에는 상기 마커들(110)(111)(112)을 활성화시켜 상기 마커들(110)(111)(112)로부터 광이 방출되도록 한다. 이와는 다르게 상기 목적물(200)에 자체적으로 광을 방출하지 못하는 적어도 3개의 패시브 마커들(110)(111)(112)이 부착되었을 경우에는 적어도 하나의 광원(150)을 작동시켜 상기 광원(150)으로부터 상기 목적물(200)에 부착된 적어도 3개의 패시브 마커들(110)(111)(112)에 광을 조사하여 상기 패시브 마커들(110)(111)(112)에 의해 광이 반사되어 방출되도록 한다.
상기 적어도 3개의 마커들(110)(111)(112)에 의해 방출된 광은 상기 결상 유닛(130)에 직접적으로 전달되어 상기 결상 유닛(130)에 상기 각각의 마커들(110)(111)(112)의 다이렉트 영상을 결상시킴과 동시에, 상기 적어도 3개의 마커들(110)(111)(112)에 의해 방출된 광은 리플렉터(120)로 전달되어 상기 리플렉터(120)에 의해 반사된 후 상기 결상 유닛(130)으로 전달되어 상기 결상 유닛(130)에 상기 각각의 마커들(110)(111)(112)의 리플렉트 영상을 결상시킨다.(S120)
즉, 상기 목적물(200)에 부착된 적어도 3개의 마커들(110)(111)(112)로부터 방출되는 광을 직접적으로 받아들여 다이렉트 영상을 상기 결상 유닛(130)에 결상시킴과 동시에, 상기 마커들(110)(111)(112)로부터 방출된 후 상기 리플렉터(120)에 의해 반사되어 방출되는 광을 받아들여 리플렉트 영상을 상기 결상 유닛(130)에 결상시킨다.
보다 상세하게 설명하면, 상기 적어도 3개의 마커들(110)(111)(112)에 의해 방출된 광은 제1 경로를 통해 직접적으로 상기 결상 유닛(130) 측으로 전달되어 상기 결상 유닛(130)의 렌즈를 통과한 후 상기 결상 유닛(130)의 본체부(132)에 실장된 이미지 센서(133)에 상기 마커들(110)(111)(112)의 다이렉트 영상을 결상시킴과 동시에, 상기 적어도 3개의 마커들(110)(111)(112)에 의해 방출된 광은 제2 경로를 통해 상기 리플렉터(120)에 의해 반사된 후 상기 결상 유닛(130) 측으로 전달되어 상기 결상 유닛(130)의 렌즈(131)를 통과한 후 상기 결상 유닛(130)의 본체부(132)에 실장된 이미지 센서(133)에 상기 마커들(110)(111)(112)의 리플렉트 영상을 결상시킨다. 즉, 상기 마커들에 의해 방출된 광은 2개의 경로(제1 경로 : 마커->결상유닛, 제2 경로 : 마커-> 리플렉터 -> 결상유닛)로 결상 유닛(130)에 전달되어 상기 결상 유닛(130)의 이미지 센서(133)에 각각의 마커들(110)(111)(112)에 대해 각각의 경로(제1, 2 경로)에 의한 2개(다이렉트 영상과 리플렉트 영상)의 영상을 결상시킨다.
상기와 같이 각각의 마커들(110)(111)(112)의 다이렉트 영상과 리플렉트 영상이 상기 결상 유닛(130)에 결상되면 프로세서(140)에 의해 상기 각각의 마커들(110)(111)(112)의 3차원 좌표를 산출한다.(S130)
상기 각각의 마커들(110)(111)(112)의 3차원 좌표를 산출하는 단계에 대하여 도 5의 블록도를 통해 상세하게 설명하면 다음과 같다.
상기 각각의 마커들(110)(111)(112)의 3차원 좌표를 산출하기 위해서는, 먼저 상기 프로세서(140)를 통해 상기 결상 유닛(130)에 결상된 상기 마커들(110)(111)(112)의 다이렉트 영상과 리플렉트 영상의 2차원 좌표를 산출한다.(S131)
여기서, 상기 마커들(110)(111)(112)의 다이렉트 영상의 2차원 좌표와 상기 리플렉트 영상의 2차원 좌표를 산출한 다음에는, 각 좌표계 별로 카메라 캘리브레이션(calibration)을 수행하게 된다.(S132)
상기와 같이 각 좌표계 별로 카메라 캘리브레이션을 수행한 다음에는, 상기 마커들(110)(111)(112)의 다이렉트 영상의 2차원 좌표와 상기 리플렉트 영상의 2차원 좌표를 이용하여 상기 프로세서(140)를 통해 상기 각각의 마커들(110)(111)(112)의 3차원 좌표를 산출한다.(S133)
상기 각각의 마커들(110)(111)(112)의 3차원 좌표를 산출하는 단계에 대하여 도 6 및 도 7을 참조하여 보다 상세하게 설명하면 다음과 같다.
도 6에 도시된 바와 같이 이미지 센서(133)의 일측을 다이렉트 영상의 FOV(FIELD OF VIEW), 타측을 리플렉트 영상의 FOV라고 가상으로 분할하고, 상기 이미지 센서(133)의 다이렉트 영상의 2차원 좌표를 (U,V) 좌표계로 표시하며, 상기 리플렉트 영상의 2차원 좌표를 (U', V')이라고 표시하고 도 7을 참조하면, 영상에서의 마커들(110)(111)(112)의 2차원 좌표와 실 공간에서의 마커들(110)(111)(112)의 3차원 좌표는 수학식 1과 같은 관계식으로 표현될 수 있다.
Figure 112013002613505-pat00001
여기서, m은 영상에서의 마커의 2차원 좌표이며, M은 실 공간에서의 마커의 3차원 좌표이고, A(R, t)는 카메라 매트릭스이다.
이를 보다 간략하게 설명하기 위하여, 실제 마커들(110)(111)(112)의 3차원 좌표를 X라 하면, 상기 실제 마커들(110)(111)(112)의 3차원 좌표(X)와 다이렉트 영상의 좌표(xL)의 관계식과, 상기 실제 마커들(110)(111)(112)의 3차원 좌표(X)와 리플렉트 영상의 좌표(xR)의 관계식은 수학식 2와 같이 표시할 수 있다.
Figure 112013002613505-pat00002
여기서, 상기 P1은 다이렉트 영상의 카메라 매트릭스이며, P2는 리플렉트 영상의 카메라 매트릭스이다.
그리고, 각각의 마커들(110)(111)(112)의 다이렉트 영상과 리플렉트 영상에 대해서 xL = P1X, xR = P2X 관계식은 AX = 0의 선형 방정식으로 표현이 가능하며, 이를 정리하면 수학식 3과 같이 나타낼 수 있다.
Figure 112013002613505-pat00003
여기서, PiT는 행렬 P의 행벡터이다.
위 식을 다시 정리하면, 수학식 4와 같이 나타낼 수 있다.
Figure 112013002613505-pat00004
여기서, W는 스케일 인자이다.
수학식 4와 같이 표현된 선형 방정식을 풀어 X, Y, Z를 구하면 그 해가 마커들(110)(111)(112)의 3차원 좌표가 된다.
상술한 바와 같이 프로세서(140)에 의해 각각의 마커들(110)(111)(112)의 실 공간에서의 3차원 좌표를 산출한 다음에는, 상기 각각의 마커들(110)(111)(112)의 실 공간에서의 3차원 좌표와 상기 프로세서(140)에 기 저장된 서로 이웃하는 마커들(110)(111)(112) 간의 기하학적 정보를 프로세서(140)를 통해 비교하여 상기 마커들(110)(111)(112)이 부착된 목적물(200)의 공간 위치와 방향을 산출한다.(S140)
여기서, 상기 서로 이웃하는 마커들(110)(111)(112) 간의 기하학적 정보는 상술한 바와 같이 서로 이웃하는 마커들(110)(111)(112)을 연결하는 직선들(L1)(L2)(L3)의 길이 정보와, 상기 마커들(110)(111)(112)을 연결하는 서로 이웃하는 한 쌍의 직선이 이루는 각도(A1)(A2)(A3) 정보일 수 있다.
즉, 상기 프로세서(140)를 통해 상기 각각의 마커들(110)(111)(112)의 실 공간에서의 3차원 좌표와 상기 프로세서(140)에 기 저장된 서로 이웃하는 마커들(110)(111)(112)을 연결하는 직선들(L1)(L2)(L3)의 길이 정보와, 각각의 마커들(110)(111)(112)을 서로 연결하는 서로 이웃하는 한 쌍의 직선이 이루는 각도(A1)(A2)(A3) 정보를 비교하여 상기 마커들(110)(111)(112)이 부착된 목적물(200)의 공간 위치와 방향을 산출하게 된다.
상술한 바와 같이 본 발명의 일실시예에 의한 트랙킹 시스템 및 이를 이용한 트랙킹 방법은 각각의 마커들(110)(111)(112)로부터 방출되는 광이 직접적으로 결상 유닛(130)으로 유입되어 다이렉트 영상이 결상됨과 동시에 리플렉터(120)에 의해 반사되어 상기 결상 유닛(130)으로 유입됨으로써 리플렉트 영상이 유입되도록 한다. 즉, 각각의 마커들(110)(111)(112)로부터 방출되는 광이 2개의 경로(제1 경로 : 마커->결상유닛, 제2 경로 : 마커-> 리플렉터 -> 결상유닛)로 결상 유닛(130)에 전달되어 상기 결상 유닛(130)의 이미지 센서(133)에 각각의 마커들(110)(111)(112)에 대해 각각의 경로에 의한 2개(다이렉트 영상과 리플렉트 영상)의 영상을 결상시킨다.
따라서, 본 발명의 일실시예에 의한 트랙킹 시스템 및 이를 이용한 트랙킹 방법은 한 대의 결상 유닛(130)만으로도 목적물(200)에 부착된 마커들(110)(111)(112)의 공간 위치와 방향을 산출하여 확인할 수 있다
그러므로, 트랙킹 시스템의 제작비용의 절감과 더불어 소형 경량화를 이룰 수 있으므로 종래의 트랙킹 시스템에 비하여 수술 공간의 제약을 상대적으로 덜 받는다는 장점이 있다.
앞서 설명한 본 발명의 상세한 설명에서는 본 발명의 바람직한 실시예들을 참조하여 설명하였지만, 해당 기술분야의 숙련된 당업자 또는 해당 기술분야에 통상의 지식을 갖는 자라면 후술될 특허청구범위에 기재된 본 발명의 사상 및 기술 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
(100) : 트랙킹 시스템 (110)(111)(112) : 마커
(120) : 리플렉터 (130) : 결상 유닛
(140) : 프로세서 (150) : 광원

Claims (9)

  1. 목적물에 부착되어 광을 방출하거나 적어도 하나의 광원으로부터 방출되는 광을 반사시키는 적어도 3개의 마커;
    상기 마커들로부터 방출되거나 상기 마커들에 의해 반사되어 방출되는 광을 반사시키는 리플렉터;
    상기 마커들로부터 방출되는 광을 직접적으로 받아 들여 다이렉트 영상을 결상시킴과 동시에, 상기 마커들로부터 방출된 후 상기 리플렉터에 의해 반사되어 방출되는 광을 받아 들여 리플렉트 영상을 결상시키는 결상 유닛; 및
    상기 결상 유닛에 결상된 상기 마커들의 다이렉트 영상과 리플렉트 영상을 이용하여 상기 마커들의 3차원 좌표를 각각 산출한 후 상기 마커들의 3차원 좌표와 기 저장된 서로 이웃하는 마커들 간의 기하학적 정보를 비교하여 상기 목적물의 공간 위치와 방향을 산출하는 프로세서를 포함하는 트랙킹 시스템.
  2. 제 1 항에 있어서,
    상기 리플렉터는,
    상기 마커들로부터 방출되는 광을 상기 결상 유닛 측으로 반사시켜 리플렉트 영상을 결상시킬 수 있도록 하는 미러인 것을 특징으로 하는 트랙킹 시스템.
  3. 제 1 항에 있어서,
    상기 리플렉터는,
    상기 결상 유닛과 동일 광 경로 상에 위치하며, 상기 프로세서의 제어 하에 설치 위치나 각도, 반사면의 형상 중 적어도 하나를 변경하여, 상기 리플렉트 영상의 결상 위치를 변화시키는 것을 특징으로 하는 트랙킹 시스템.
  4. 제 1 항에 있어서,
    상기 결상 유닛은,
    상기 마커들로부터 직접적으로 방출되는 광과 상기 리플렉터에 의해 반사된 광을 받아들여 영상을 결상시키는 카메라인 것을 특징으로 하는 트랙킹 시스템.
  5. 제 1 항에 있어서,
    상기 마커들 간의 기하학적 정보는,
    상기 서로 이웃하는 마커들을 연결하는 직선들의 길이 정보와,
    상기 서로 이웃하는 한 쌍의 직선이 이루는 각도 정보인 것을 특징으로 하는 트랙킹 시스템.
  6. 목적물에 부착된 적어도 3개의 마커들로부터 방출되는 광을 직접적으로 받아 들여 다이렉트 영상을 결상 유닛에 결상시킴과 동시에, 상기 마커들로부터 방출된 후 특정 위치에 설치되어 광을 반사시키는 리플렉터에 의해 방출되는 광을 받아들여 리플렉트 영상을 결상 유닛에 결상시키는 단계;
    상기 결상 유닛에 결상된 상기 마커들의 다이렉트 영상과 리플렉트 영상을 이용하여 프로세서를 통해 상기 각각의 마커들의 3차원 좌표를 산출하는 단계; 및
    상기 각각의 마커들의 3차원 좌표와 상기 프로세서에 기 저장된 서로 이웃하는 마커들 간의 기하학적 정보를 비교하여 상기 목적물의 공간 위치와 방향을 산출하는 단계를 포함하는 트랙킹 방법.
  7. 제 6 항에 있어서,
    상기 마커들 간의 기하학적 정보는,
    상기 서로 이웃하는 마커들을 연결하는 직선들의 길이 정보와,
    상기 서로 이웃하는 한 쌍의 직선이 이루는 각도 정보인 것을 특징으로 하는 트랙킹 방법.
  8. 제 6 항에 있어서,
    상기 리플렉트 영상을 결상 유닛에 결상시키는 단계는,
    상기 프로세서에서 리플렉터의 설치 위치, 각도 및 반사면의 형상 변경 중 적어도 하나를 제어하여 상기 결상 유닛과의 동일한 광 경로상에서 상기 리플렉트 영상의 결상 위치를 변화시키는 단계를 포함하는 것을 특징으로 하는 트랙킹 방법.
  9. 제 6 항에 있어서,
    상기 마커들의 3차원 좌표를 산출하는 단계는,
    상기 프로세서를 통해 상기 결상 유닛에 결상된 상기 마커들의 다이렉트 영상과 리플렉트 영상의 2차원 좌표를 산출하는 단계; 및
    상기 마커들의 다이렉트 영상의 2차원 좌표와 상기 리플렉트 영상의 2차원 좌표를 이용하여 상기 프로세서를 통해 상기 마커들의 3차원 좌표를 산출하는 단계를 포함하는 트랙킹 방법.
KR1020130002841A 2013-01-10 2013-01-10 트랙킹 시스템 및 이를 이용한 트랙킹 방법 KR101371384B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020130002841A KR101371384B1 (ko) 2013-01-10 2013-01-10 트랙킹 시스템 및 이를 이용한 트랙킹 방법
PCT/KR2014/000131 WO2014109520A1 (ko) 2013-01-10 2014-01-07 트랙킹 시스템 및 이를 이용한 트랙킹 방법
EP14737829.3A EP2944285B1 (en) 2013-01-10 2014-01-07 Tracking system and method for tracking by using same
CN201480004280.1A CN104902840B (zh) 2013-01-10 2014-01-07 跟踪***及利用上述跟踪***的跟踪方法
JP2015552571A JP6147360B2 (ja) 2013-01-10 2014-01-07 トラッキングシステム及びこれを用いたトラッキング方法
US14/370,549 US9576366B2 (en) 2013-01-10 2014-01-07 Tracking system and tracking method using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130002841A KR101371384B1 (ko) 2013-01-10 2013-01-10 트랙킹 시스템 및 이를 이용한 트랙킹 방법

Publications (1)

Publication Number Publication Date
KR101371384B1 true KR101371384B1 (ko) 2014-03-07

Family

ID=50647854

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130002841A KR101371384B1 (ko) 2013-01-10 2013-01-10 트랙킹 시스템 및 이를 이용한 트랙킹 방법

Country Status (6)

Country Link
US (1) US9576366B2 (ko)
EP (1) EP2944285B1 (ko)
JP (1) JP6147360B2 (ko)
KR (1) KR101371384B1 (ko)
CN (1) CN104902840B (ko)
WO (1) WO2014109520A1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101371387B1 (ko) * 2013-01-18 2014-03-10 경북대학교 산학협력단 트랙킹 시스템 및 이를 이용한 트랙킹 방법
KR101638477B1 (ko) 2014-09-19 2016-07-11 주식회사 고영테크놀러지 옵티컬 트래킹 시스템 및 옵티컬 트래킹 시스템의 좌표계 정합 방법
US10363667B2 (en) * 2015-11-30 2019-07-30 Autodesk, Inc. Optical measurement of object location in three dimensions
CN109186947B (zh) * 2018-09-26 2019-11-12 福州大学 一种电器三维动态特性自动测试***及方法
FR3103097B1 (fr) * 2019-11-19 2021-11-05 Quantum Surgical Méthode de navigation pour positionner un robot médical

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007130398A (ja) * 2005-11-14 2007-05-31 Toshiba Corp 光学式位置計測装置
US20070183041A1 (en) * 2006-02-09 2007-08-09 Northern Digital Inc. Retroreflective marker-tracking systems
JP2009529145A (ja) * 2006-03-08 2009-08-13 カール ツァイス サージカル ゲーエムベーハー 顕微鏡システム
KR20110118640A (ko) * 2008-12-31 2011-10-31 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 기기 트래킹을 위한 컨피규레이션 마커 디자인 및 탐지

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5394875A (en) * 1993-10-21 1995-03-07 Lewis; Judith T. Automatic ultrasonic localization of targets implanted in a portion of the anatomy
US5923417A (en) * 1997-09-26 1999-07-13 Northern Digital Incorporated System for determining the spatial position of a target
US6973202B2 (en) * 1998-10-23 2005-12-06 Varian Medical Systems Technologies, Inc. Single-camera tracking of an object
CA2416139C (en) 2000-07-06 2009-03-31 Synthes (U.S.A.) Method and device for impingement detection
CN100491914C (zh) * 2001-01-30 2009-05-27 Z-凯特公司 器具的校准器及******
JP4628566B2 (ja) * 2001-03-12 2011-02-09 三菱電機株式会社 画像投写装置
EP1447644A1 (en) * 2003-02-14 2004-08-18 Metronor ASA Measurement of spatial coordinates
EP1617779A1 (en) * 2003-04-28 2006-01-25 BRACCO IMAGING S.p.A. Surgical navigation imaging system
DE10321749B4 (de) * 2003-05-09 2018-05-30 Trimble Jena Gmbh Verfahren und Anordnung zur Bestimmung der räumlichen Lage und Position eines Reflektorstabes in Bezug zu einem Aufhaltepunkt
US8128871B2 (en) * 2005-04-22 2012-03-06 Alverix, Inc. Lateral flow assay systems and methods
EP1645241B1 (de) * 2004-10-05 2011-12-28 BrainLAB AG Positionsmarkersystem mit Punktlichtquellen
US7390089B2 (en) * 2005-02-25 2008-06-24 20/10 Perfect Vision Optische Geraete Gmbh Device and method for aligning an eye with a surgical laser
JP4396564B2 (ja) 2005-04-01 2010-01-13 株式会社島津製作所 物体のモニタリング方法およびこれを用いたモーショントラッカ
US7720259B2 (en) * 2005-08-26 2010-05-18 Sony Corporation Motion capture using primary and secondary markers
US9186046B2 (en) * 2007-08-14 2015-11-17 Koninklijke Philips Electronics N.V. Robotic instrument systems and methods utilizing optical fiber sensor
JP4864516B2 (ja) * 2006-04-07 2012-02-01 株式会社トプコン 眼科装置
US8131348B2 (en) * 2006-05-12 2012-03-06 Northshore University Healthsystem Systems, methods and apparatuses of elastic light scattering spectroscopy and low coherence enhanced backscattering spectroscopy
KR100835186B1 (ko) * 2007-01-29 2008-06-04 주식회사 프리진 액티브 마커를 이용한 모션 캡춰용 마커 구분 시스템
WO2009033111A2 (en) * 2007-09-06 2009-03-12 Lensx Lasers, Inc. Precise targeting of surgical photodisruption
JP4307511B1 (ja) * 2008-06-04 2009-08-05 横浜ゴム株式会社 移動体の挙動計測装置および移動体の挙動計測方法
ES2641598T3 (es) 2009-03-24 2017-11-10 Masmec S.P.A. Sistema asistido por ordenador para guiar un instrumento quirúrgico durante operacioes percutáneas de diagnóstico o terapéuticas
JP5548482B2 (ja) * 2010-02-26 2014-07-16 キヤノン株式会社 位置姿勢計測装置、位置姿勢計測方法、プログラム及び記憶媒体
DE102010010192A1 (de) * 2010-03-04 2011-09-08 Siemens Aktiengesellschaft Medizinische Untersuchungs- und/oder Behandlungsvorrichtung

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007130398A (ja) * 2005-11-14 2007-05-31 Toshiba Corp 光学式位置計測装置
US20070183041A1 (en) * 2006-02-09 2007-08-09 Northern Digital Inc. Retroreflective marker-tracking systems
JP2009529145A (ja) * 2006-03-08 2009-08-13 カール ツァイス サージカル ゲーエムベーハー 顕微鏡システム
KR20110118640A (ko) * 2008-12-31 2011-10-31 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 기기 트래킹을 위한 컨피규레이션 마커 디자인 및 탐지

Also Published As

Publication number Publication date
CN104902840A (zh) 2015-09-09
JP2016502905A (ja) 2016-02-01
JP6147360B2 (ja) 2017-06-14
CN104902840B (zh) 2017-08-01
EP2944285A1 (en) 2015-11-18
WO2014109520A1 (ko) 2014-07-17
EP2944285A4 (en) 2016-08-17
EP2944285B1 (en) 2017-10-18
US9576366B2 (en) 2017-02-21
US20150302590A1 (en) 2015-10-22

Similar Documents

Publication Publication Date Title
US8885177B2 (en) Medical wide field of view optical tracking system
KR102288574B1 (ko) 깊이 정보 결정을 위한 다중 이미터 조명
KR101371387B1 (ko) 트랙킹 시스템 및 이를 이용한 트랙킹 방법
KR101371384B1 (ko) 트랙킹 시스템 및 이를 이용한 트랙킹 방법
WO2018116790A1 (ja) 不整合検出システム、複合現実システム、プログラム及び不整合検出方法
EP3076892B1 (en) A medical optical tracking system
US20220175464A1 (en) Tracker-Based Surgical Navigation
EP3108266B1 (en) Estimation and compensation of tracking inaccuracies
US20200129240A1 (en) Systems and methods for intraoperative planning and placement of implants
US20180005457A1 (en) Visual positioning device and three-dimensional surveying and mapping system and method based on same
JP2011504769A (ja) 光学追跡ｃａｓシステム
CN105190235A (zh) 以六自由度跟踪的结构光扫描仪的补偿
JP2006284442A (ja) 物体のモニタリング方法およびこれを用いたモーショントラッカ
US20210038323A1 (en) Optical tracking system and tracking method using the same
JP2018106661A (ja) 不整合検出システム、複合現実システム、プログラム及び不整合検出方法
WO2019037605A1 (zh) Ar眼镜及其追踪***
KR101446173B1 (ko) 트랙킹 시스템 및 이를 이용한 트랙킹 방법
JP2016122380A (ja) 位置検出装置、位置検出方法、注視点検出装置、及び画像生成装置
NL2031065B1 (en) Method for verifying precision of calibration parameter, medium and electronic device

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161206

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20171204

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20191210

Year of fee payment: 7