KR20220033213A - Artificial intelligence customized exercise provision service system and method for rehabilitation of paralysis patients - Google Patents
Artificial intelligence customized exercise provision service system and method for rehabilitation of paralysis patients Download PDFInfo
- Publication number
- KR20220033213A KR20220033213A KR1020200115345A KR20200115345A KR20220033213A KR 20220033213 A KR20220033213 A KR 20220033213A KR 1020200115345 A KR1020200115345 A KR 1020200115345A KR 20200115345 A KR20200115345 A KR 20200115345A KR 20220033213 A KR20220033213 A KR 20220033213A
- Authority
- KR
- South Korea
- Prior art keywords
- rehabilitation exercise
- rehabilitation
- exercise
- user
- providing
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/30—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
- A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
- A63B24/0006—Computerised comparison for qualitative assessment of motion sequences or the course of a movement
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/0009—Games or sports accessories not covered in groups A63B1/00 - A63B69/00 for handicapped persons
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
- A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2225/00—Miscellaneous features of sport apparatus, devices or equipment
- A63B2225/12—Miscellaneous features of sport apparatus, devices or equipment with mirrors
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Physical Education & Sports Medicine (AREA)
- Biomedical Technology (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Pathology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biophysics (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Rehabilitation Tools (AREA)
Abstract
Description
본 발명은 인공지능 맞춤형 운동제공 서비스 기술에 관한 것으로, 보다 상세하게는 동작분석과 증강현실 기술을 이용하여 시간과 장소의 제약 조건을 최소화한 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 시스템 및 방법에 관한 것이다.The present invention relates to an artificial intelligence customized exercise providing service technology, and more particularly, an artificial intelligence customized exercise providing service system and method for the rehabilitation of the paralyzed disabled by minimizing the constraints of time and place by using motion analysis and augmented reality technology is about
뇌병변 또는 척추 질환의 대부분은 마비 등의 후유증을 유발하는 경향을 가진다. 특히 신체 기능에서의 운동능력 저하 현상은 일상 생활의 동작에 있어 실질적인 어려움에 부딪히게 하는 주요 요소로서 환자 본인의 자신감을 떨어뜨리고, 사회 구성원으로서의 복귀에 장애가 되며 재활에 대한 의욕이나 동기를 저하하는 우울증의 발생에도 영향을 미친다.Most of the brain lesions or spinal diseases have a tendency to cause sequelae such as paralysis. In particular, the decrease in motor ability in physical function is a major factor that causes practical difficulties in daily life. Depression that lowers the patient's self-confidence, becomes an obstacle to returning as a member of society, and lowers the motivation or motivation for rehabilitation. also affects the occurrence of
척수손상(Spinal Cord Injury)은 척수의 외상에 따라 진탕(Commotio), 압박(compression), 좌상(contusion)으로 분류될 수 있고, 영속성의 장애는 척수손상에서 흔히 발생하며, 일단 손상된 척수에서는 기능회복이 영구히 불가능한 것을 알려져 있다. 또한, 뇌졸증(Stroke)은 뇌기능의 부분적 또는 전체적으로 급속히 발생한 장애가 상당 기간 이상 지속되는 것으로, 뇌혈관의 병 이외에는 다른 원인을 찾을 수 없는 상태에 해당한다.Spinal Cord Injury can be classified into concussion, compression, and contusion depending on the trauma to the spinal cord. It is known that this is permanently impossible. In addition, a stroke is a partially or entirely rapid disorder of brain function that continues for a considerable period of time or longer, and corresponds to a state in which no other cause can be found other than cerebrovascular disease.
척수손상 또는 뇌졸증으로 병원에 입원하는 경우 2개월 이내에 병원을 이동하는 상황이 자주 발생하여 재활난민 발생 가능성이 크고, 발병 2년 후 의료보험 혜택이 축소된다는 문제가 존재하며, 퇴원 후에도 지속적인 재활운동이 필요함에도 불구하고 재활운동 전문기관이 부족하여 체계적 건강관리가 쉽지 않은 문제점이 존재한다.If hospitalized for spinal cord injury or stroke, there is a high possibility of rehabilitating refugees because the situation frequently occurs within 2 months of being hospitalized, and there is a problem that medical insurance benefits are reduced two years after the onset. Despite the necessity, there is a problem that systematic health management is not easy due to the lack of specialized institutions for rehabilitation exercise.
실요양일수, 총입원일수, 총통원일수를 기준으로 사지마비, 척수손상, 뇌손상 순으로 통계적 순위가 나타나며, 척수손상의 경우 경추손상 발병비율이 높아 작업치료기능의 필요성이 높다고 할 수 있다. 이에 따라, 사고 후 지속적 요양 과정에서 요양 공백은 신체적 기능의 저하를 가져올 수 있어 충분한 대비가 필요하다.Based on the number of days of actual care, total hospitalization, and total number of days out of hospital, the statistical ranking appears in the order of quadriplegia, spinal cord injury, and brain injury. Accordingly, in the continuous care process after an accident, a gap in care may lead to a decrease in physical function, so sufficient preparation is required.
재활에 관련된 여러 훈련 중 치료사의 재활 훈련 활동은 노동집약적 업무 요소를 많이 갖고 있으므로, 환자가 자율적으로 사용할 수 있는 재활 콘텐츠가 필요하다. 또한, 재활 훈련 활동 시 소모되는 비용, 의료기관의 인력, 시설, 장비 부족 등으로 환자가 원하는 시간에 지속해서 재활 훈련을 받는 것 또한 현실적으로 많은 어려움이 있다. 이에 의료기관이 아닌 장소, 예를 들면 집 같은 곳에서도 자율적이고 손쉽게 사용할 수 있는 도구의 개발이 절실한 상황이다.Among the various rehabilitation-related training, the rehabilitation training activity of the therapist has many labor-intensive work elements, so rehabilitation contents that the patient can use autonomously are required. In addition, it is also practically difficult to continuously receive rehabilitation training at a time desired by the patient due to the cost consumed in the rehabilitation training activity, the shortage of manpower, facilities, and equipment of the medical institution. Accordingly, there is an urgent need to develop a tool that can be used autonomously and easily in places other than medical institutions, for example, at home.
본 발명의 일 실시예는 동작분석과 증강현실 기술을 이용하여 시간과 장소의 제약 조건을 최소화한 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 시스템 및 방법을 제공하고자 한다.An embodiment of the present invention is to provide an artificial intelligence customized exercise providing service system and method for the rehabilitation of paralyzed persons with minimal constraints of time and place by using motion analysis and augmented reality technology.
본 발명의 일 실시예는 환자가 병원에 직접 방문하지 않고도 시간 및 장소에 상관없이 신체적 기능 향상을 위한 재활운동을 수행할 수 있는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 시스템 및 방법을 제공하고자 한다.An embodiment of the present invention is to provide an artificial intelligence customized exercise providing service system and method for the rehabilitation of the paralyzed disabled that can perform rehabilitation exercise for improving physical function regardless of time and place without the patient visiting the hospital directly do.
본 발명의 일 실시예는 재활운동 과정에서 스마트 미러를 통해 자신의 모습을 모니터링 하면서도 증강현실에 의한 보조 기능을 활용함으로써 환자 스스로의 재활 운동에 대한 집중도와 향상도를 높일 수 있는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 시스템 및 방법을 제공하고자 한다.An embodiment of the present invention is for the rehabilitation of the paralyzed person who can increase the concentration and improvement of the patient's own rehabilitation exercise by using the auxiliary function by augmented reality while monitoring his/her appearance through a smart mirror in the rehabilitation exercise process. We want to provide a system and method for providing artificial intelligence customized exercise service.
실시예들 중에서, 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법은 사용자 단말로부터 스마트 미러에 대한 연결 요청을 수신하여 상기 스마트 미러에 관한 제어 권한을 획득하는 단계; 상기 사용자 단말에 의해 선택된 재활운동 컨텐츠에 따라 재활운동 기구 및 스마트 카메라에 대한 선택적 연결을 제공하는 단계; 상기 스마트 미러를 통해 상기 재활운동 컨텐츠를 제공하면서 상기 사용자 단말, 상기 재활운동 기구 및 상기 스마트 카메라 각각으로부터 사용자의 재활운동에 관한 실시간 재활운동 데이터를 수집하는 단계; 표준 재활운동 데이터를 기초로 구축된 재활운동 모델을 이용하여 상기 실시간 재활운동 데이터를 분석하는 단계; 상기 분석의 결과에 따라 상기 재활운동 컨텐츠의 제공을 동적으로 조절하는 단계; 및 상기 분석의 결과를 기초로 상기 사용자의 재활운동에 관한 향상도 및 운동 추천 리포트를 생성하여 상기 사용자 단말에 제공하는 단계를 포함한다.Among the embodiments, the method for providing artificial intelligence customized exercise for the rehabilitation of paralyzed persons includes: receiving a connection request for a smart mirror from a user terminal and obtaining a control right for the smart mirror; providing a selective connection to a rehabilitation exercise device and a smart camera according to the rehabilitation exercise content selected by the user terminal; collecting real-time rehabilitation exercise data on the user's rehabilitation exercise from each of the user terminal, the rehabilitation exercise device, and the smart camera while providing the rehabilitation exercise contents through the smart mirror; analyzing the real-time rehabilitation exercise data using a rehabilitation exercise model built on the basis of standard rehabilitation exercise data; dynamically adjusting the provision of the rehabilitation exercise contents according to the result of the analysis; and generating an improvement level and exercise recommendation report for the user's rehabilitation exercise based on the result of the analysis and providing the report to the user terminal.
상기 재활운동 컨텐츠는 증강현실을 이용한 컨텐츠를 포함할 수 있다.The rehabilitation exercise content may include content using augmented reality.
상기 제어 권한을 획득하는 단계는 상기 사용자 단말의 위치를 기초로 해당 사용자 단말과 연결 가능한 스마트 미러들에 관한 선택 리스트를 생성하여 제공하는 단계를 포함할 수 있다.The acquiring of the control authority may include generating and providing a selection list of smart mirrors connectable to the corresponding user terminal based on the location of the user terminal.
상기 제어 권한을 획득하는 단계는 복수의 스마트 미러들과 각각 연관된 복수의 연결 요청들 사이에 시간적 유사성이 존재하는 경우 상기 복수의 스마트 미러들에 관한 그룹화된 제어 권한을 획득하는 단계를 포함할 수 있다.The obtaining of the control authority may include obtaining grouped control authority regarding the plurality of smart mirrors when there is a temporal similarity between the plurality of smart mirrors and a plurality of connection requests respectively associated with the plurality of smart mirrors. .
상기 선택적 연결을 제공하는 단계는 상기 사용자 단말의 식별 정보를 기초로 해당 사용자의 재활 레벨에 따른 맞춤형 재활운동 컨텐츠를 추천하는 단계를 포함할 수 있다.The providing of the selective connection may include recommending customized rehabilitation exercise content according to the user's rehabilitation level based on the identification information of the user terminal.
상기 실시간 재활운동 데이터를 수집하는 단계는 상기 사용자 단말 또는 상기 재활운동 기구를 통해 측정된 상기 사용자의 생체정보 및 움직임정보에 관한 재활운동 활동 데이터와, 상기 스마트 카메라를 통해 촬영된 상기 사용자의 움직임에 관한 재활운동 영상 데이터를 상기 실시간 재활운동 데이터로서 수집하는 단계를 포함할 수 있다.The step of collecting the real-time rehabilitation exercise data includes rehabilitation exercise activity data related to the user's bio-information and movement information measured through the user terminal or the rehabilitation exercise device, and the user's movement captured through the smart camera. It may include collecting the rehabilitation exercise image data as the real-time rehabilitation exercise data.
상기 실시간 재활운동 데이터를 분석하는 단계는 가상 트레이너 또는 실제 트레이너의 운동을 측정하여 후보 재활운동 데이터를 획득하는 단계; 상기 후보 재활운동 데이터로부터 적어도 하나의 키 동작을 추출하는 단계; 및 상기 적어도 하나의 키 동작에 관한 분석 정보를 학습하여 상기 재활운동 모델을 구축하는 단계를 포함할 수 있다.The step of analyzing the real-time rehabilitation exercise data may include: obtaining candidate rehabilitation exercise data by measuring an exercise of a virtual trainer or a real trainer; extracting at least one key operation from the candidate rehabilitation exercise data; and learning the analysis information on the at least one key operation to build the rehabilitation exercise model.
상기 실시간 재활운동 데이터를 분석하는 단계는 상기 재활운동 모델에 상기 실시간 재활운동 데이터를 입력으로 제공하여 상기 표준 재활운동 데이터와의 유사도를 출력으로 획득하는 단계를 포함할 수 있다.The analyzing of the real-time rehabilitation exercise data may include providing the real-time rehabilitation exercise data to the rehabilitation exercise model as an input to obtain a similarity with the standard rehabilitation exercise data as an output.
상기 동적으로 조절하는 단계는 상기 분석의 결과를 기초로 상기 사용자의 현재 동작에서 요구되는 다음 동작에 관한 증강현실 가이드를 상기 스마트 미러를 통해 제공하는 단계를 포함할 수 있다.The dynamically adjusting may include providing, through the smart mirror, an augmented reality guide for a next operation required in the current operation of the user based on the result of the analysis.
상기 동적으로 조절하는 단계는 상기 분석의 결과를 기초로 상기 사용자의 현재 동작과 상기 표준 재활운동 데이터의 표준 동작 간의 시간적 및 공간적 오류들을 상기 재활운동 컨텐츠로서 제공하는 단계를 포함할 수 있다.The dynamically adjusting may include providing temporal and spatial errors between the user's current motion and the standard motion of the standard rehabilitation exercise data as the rehabilitation exercise content based on the result of the analysis.
상기 동적으로 조절하는 단계는 상기 실시간 재활운동 데이터를 상기 재활운동 컨텐츠와 연관된 다른 사용자의 재활운동 데이터와 비교 분석한 결과로서 1)상기 다른 사용자가 선택한 재활운동 컨텐츠의 종류, 순서, 시간 및 횟수에 관한 제1 정보와, 2)상기 제1 정보에 따른 재활운동으로 획득한 향상도 및 도달 예측 시간에 관한 제2 정보와, 3)상기 재활운동 컨텐츠를 이용한 사용자 랭킹에 관한 제3 정보를 상기 재활운동 컨텐츠로서 제공하는 단계를 포함할 수 있다.The step of dynamically adjusting is a result of comparing and analyzing the real-time rehabilitation exercise data with the rehabilitation exercise data of other users related to the rehabilitation exercise content 1) The type, sequence, time and number of rehabilitation exercise contents selected by the other user First information about, 2) second information about the degree of improvement and arrival prediction time obtained by the rehabilitation exercise according to the first information, and 3) the third information about the user ranking using the rehabilitation exercise content It may include providing as exercise content.
상기 사용자 단말에 제공하는 단계는 표준 동작과의 시간적 및 공간적 오류들에 관한 정보를 수집하여 관절의 각도(ROM, Range of Motor)를 포함한 재활운동 향상도, 단편적이거나 연속적인 재활운동의 횟수 및 지속시간을 기초로 유연성, 근력 및 근지구력에 관한 정보를 제공하는 단계를 포함할 수 있다.In the step of providing to the user terminal, information on temporal and spatial errors with standard motion is collected and rehabilitation exercise improvement including joint angle (ROM, Range of Motor), number and duration of fragmentary or continuous rehabilitation exercise It may include providing information about flexibility, strength, and muscular endurance based on time.
상기 사용자 단말에 제공하는 단계는 상기 재활운동 향상도에 기반하여 상기 사용자 단말 만을 이용하여 수행 가능한 재활운동 컨텐츠를 선택적으로 제공하는 단계를 포함할 수 있다.The providing to the user terminal may include selectively providing content for rehabilitation exercise that can be performed using only the user terminal based on the improvement of the rehabilitation exercise.
실시예들 중에서, 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 시스템은 사용자 단말; 상기 사용자 단말과 연동하는 스마트 미러; 상기 스마트 미러에 연결되어 사용자의 재활운동을 보조하는 재활운동 기구; 상기 스마트 미러에 연결되어 상기 재활운동의 과정에서 상기 사용자의 영상을 획득하는 스마트 카메라; 및 상기 사용자 단말로부터의 연결 요청에 따라 제어 권한을 획득한 상기 스마트 미러를 통해 재활운동 컨텐츠를 제공하면서 사용자의 재활운동에 관한 실시간 재활운동 데이터를 수집 분석하여 맞춤형 운동 서비스를 제공하는 맞춤형 운동제공 서버를 포함한다.Among the embodiments, the artificial intelligence customized exercise providing service system for the rehabilitation of the paralyzed is a user terminal; a smart mirror that works with the user terminal; a rehabilitation exercise device connected to the smart mirror to assist the user in rehabilitation exercise; a smart camera connected to the smart mirror to obtain an image of the user in the course of the rehabilitation exercise; and a customized exercise providing server that provides a customized exercise service by collecting and analyzing real-time rehabilitation exercise data related to a user's rehabilitation exercise while providing rehabilitation exercise contents through the smart mirror, which has obtained a control right according to a connection request from the user terminal includes
개시된 기술은 다음의 효과를 가질 수 있다. 다만, 특정 실시예가 다음의 효과를 전부 포함하여야 한다거나 다음의 효과만을 포함하여야 한다는 의미는 아니므로, 개시된 기술의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.The disclosed technology may have the following effects. However, this does not mean that a specific embodiment should include all of the following effects or only the following effects, so the scope of the disclosed technology should not be understood as being limited thereby.
본 발명의 일 실시예에 따른 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 시스템 및 방법은 사용자 단말과 연동하는 스마트 미러를 통해 사용자 맞춤형 재활운동 컨텐츠를 제공하면서 사용자 움직임에 대한 인공지능 분석 결과를 제공하여 효과적인 재활운동을 지원할 수 있다.The artificial intelligence customized exercise providing service system and method for the rehabilitation of the paralyzed person according to an embodiment of the present invention provide user-customized rehabilitation exercise contents through a smart mirror interworking with a user terminal while providing artificial intelligence analysis results for user movement This can support effective rehabilitation exercises.
본 발명의 일 실시예에 따른 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 시스템 및 방법은 시간 및 장소에 상관없이 재활운동을 수행함으로써 환자 스스로의 재활 운동에 대한 집중도와 향상도를 높일 수 있다.The artificial intelligence customized exercise providing service system and method for the rehabilitation of the paralyzed person according to an embodiment of the present invention can increase the concentration and improvement of the patient's own rehabilitation exercise by performing the rehabilitation exercise regardless of time and place.
도 1은 본 발명에 따른 맞춤형 운동제공 서비스 시스템을 설명하는 도면이다.
도 2는 도 1의 맞춤형 운동제공 서비스 장치의 시스템 구성을 설명하는 도면이다.
도 3은 도 1의 맞춤형 운동제공 서비스 장치의 기능적 구성을 설명하는 도면이다.
도 4 및 5는 본 발명의 일 실시예에 따른 인공지능 맞춤형 운동제공 서비스 과정을 설명하는 순서도이다.1 is a view for explaining a customized exercise providing service system according to the present invention.
FIG. 2 is a view for explaining the system configuration of the customized exercise providing service device of FIG. 1 .
3 is a view for explaining the functional configuration of the customized exercise providing service apparatus of FIG. 1 .
4 and 5 are flowcharts for explaining the artificial intelligence customized exercise providing service process according to an embodiment of the present invention.
본 발명에 관한 설명은 구조적 내지 기능적 설명을 위한 실시예에 불과하므로, 본 발명의 권리범위는 본문에 설명된 실시예에 의하여 제한되는 것으로 해석되어서는 아니 된다. 즉, 실시예는 다양한 변경이 가능하고 여러 가지 형태를 가질 수 있으므로 본 발명의 권리범위는 기술적 사상을 실현할 수 있는 균등물들을 포함하는 것으로 이해되어야 한다. 또한, 본 발명에서 제시된 목적 또는 효과는 특정 실시예가 이를 전부 포함하여야 한다거나 그러한 효과만을 포함하여야 한다는 의미는 아니므로, 본 발명의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.Since the description of the present invention is merely an embodiment for structural or functional description, the scope of the present invention should not be construed as being limited by the embodiment described in the text. That is, since the embodiment may have various changes and may have various forms, it should be understood that the scope of the present invention includes equivalents capable of realizing the technical idea. In addition, since the object or effect presented in the present invention does not mean that a specific embodiment should include all of them or only such effects, it should not be understood that the scope of the present invention is limited thereby.
한편, 본 출원에서 서술되는 용어의 의미는 다음과 같이 이해되어야 할 것이다.On the other hand, the meaning of the terms described in the present application should be understood as follows.
"제1", "제2" 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위한 것으로, 이들 용어들에 의해 권리범위가 한정되어서는 아니 된다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.Terms such as “first” and “second” are for distinguishing one component from another, and the scope of rights should not be limited by these terms. For example, a first component may be termed a second component, and similarly, a second component may also be termed a first component.
어떤 구성요소가 다른 구성요소에 "연결되어"있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결될 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어"있다고 언급된 때에는 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 한편, 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.When a component is referred to as being “connected to” another component, it may be directly connected to the other component, but it should be understood that other components may exist in between. On the other hand, when it is mentioned that a certain element is "directly connected" to another element, it should be understood that the other element does not exist in the middle. Meanwhile, other expressions describing the relationship between elements, that is, "between" and "between" or "neighboring to" and "directly adjacent to", etc., should be interpreted similarly.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함하다"또는 "가지다" 등의 용어는 실시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The singular expression is to be understood as including the plural expression unless the context clearly dictates otherwise, and terms such as "comprises" or "have" refer to the embodied feature, number, step, action, component, part or these It is intended to indicate that a combination exists, and it should be understood that it does not preclude the possibility of the existence or addition of one or more other features or numbers, steps, operations, components, parts, or combinations thereof.
각 단계들에 있어 식별부호(예를 들어, a, b, c 등)는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 단계들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.In each step, identification numbers (eg, a, b, c, etc.) are used for convenience of description, and identification numbers do not describe the order of each step, and each step clearly indicates a specific order in context. Unless otherwise specified, it may occur in a different order from the specified order. That is, each step may occur in the same order as specified, may be performed substantially simultaneously, or may be performed in the reverse order.
본 발명은 컴퓨터가 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있고, 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.The present invention can be embodied as computer-readable codes on a computer-readable recording medium, and the computer-readable recording medium includes all types of recording devices in which data readable by a computer system is stored. . Examples of the computer-readable recording medium include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, and the like. In addition, the computer-readable recording medium is distributed in a computer system connected to a network, so that the computer-readable code can be stored and executed in a distributed manner.
여기서 사용되는 모든 용어들은 다르게 정의되지 않는 한, 본 발명이 속하는 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한 이상적이거나 과도하게 형식적인 의미를 지니는 것으로 해석될 수 없다.All terms used herein have the same meaning as commonly understood by one of ordinary skill in the art to which the present invention belongs, unless otherwise defined. Terms defined in the dictionary should be interpreted as being consistent with the meaning of the context of the related art, and cannot be interpreted as having an ideal or excessively formal meaning unless explicitly defined in the present application.
도 1은 본 발명에 따른 맞춤형 운동제공 서비스 시스템을 설명하는 도면이다.1 is a view for explaining a customized exercise providing service system according to the present invention.
도 1을 참조하면, 본 발명에 따른 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 시스템(이하, 맞춤형 운동제공 서비스 시스템)(100)은 사용자 단말(110), 스마트 미러(120), 재활운동 기구(130), 맞춤형 운동제공 서비스 장치(140) 및 데이터베이스(150)를 포함할 수 있다.Referring to FIG. 1 , the artificial intelligence customized exercise providing service system (hereinafter, the customized exercise providing service system) 100 for the rehabilitation of the paralyzed according to the present invention includes a
사용자 단말(110)은 스마트 미러(120)와 연동하여 재활운동에 관한 정보를 확인하고 이용할 수 있는 컴퓨팅 장치에 해당할 수 있고, 스마트폰, 노트북 또는 컴퓨터로 구현될 수 있으며, 반드시 이에 한정되지 않고, 태블릿 PC 등 다양한 디바이스로도 구현될 수 있다. 사용자 단말(110)은 맞춤형 운동제공 서비스 장치(140)와 네트워크를 통해 연결될 수 있고, 복수의 사용자 단말(110)들은 맞춤형 운동제공 서비스 장치(140)와 동시에 연결될 수 있다. 또한, 사용자 단말(110)은 스마트 미러(120)와의 연결을 요청하고 재활운동에 관한 다양한 서비스에 접근하기 위한 전용 프로그램을 설치하여 실행시킬 수 있다.The
스마트 미러(120)는 거울(Mirror)과 디스플레이(Display)의 결합으로 생성된 컴퓨팅 장치에 해당할 수 있다. 스마트 미러(120)는 평소에 거울로 사용될 수 있으며, 사용자의 접근과 같은 이벤트 발생 시 관련 정보를 표시하는 디스플레이로 활용될 수 있다. 스마트 미러(120)는 디스플레이 동작을 제어하기 위한 내부 시스템을 포함하여 구현될 수 있고, 필요에 따라 인터페이스를 통해 사용자와 상호작용을 수행할 수 있다. 또한, 스마트 미러(120)는 사용자 단말(110), 재활운동 기구(130) 및 맞춤형 운동제공 서비스 장치(140)와 네트워크를 통해 연결될 수 있다.The
일 실시예에서, 스마트 미러(120)는 내부 또는 외부에 스마트 카메라를 포함하여 구현될 수 있다. 스마트 카메라는 스마트 미러(120)의 인근에서 재활운동을 수행하는 환자의 영상을 촬영하는 카메라 장치에 해당할 수 있으며, 통신 기능을 통해 촬영된 영상을 외부 장치, 예를 들어, 사용자 단말(110) 또는 맞춤형 운동제공 서비스 장치(140)에게 전송할 수 있다. 스마트 카메라가 스마트 미러(120) 내부에 포함되어 구현된 경우 해당 영상은 스마트 미러(120)를 통해 외부로 전달될 수 있음은 물론이다. 스마트 미러(120)는 스마트 카메라와 연동하여 증강현실 영상으로 구현된 재활운동 컨텐츠를 디스플레이 함으로써 사용자의 집중도를 향상시키고 흥미를 유발하여 재활운동의 효과를 개선시킬 수 있다.In one embodiment, the
재활운동 기구(130)는 사용자의 재활운동을 보조하는 다양한 기구에 해당할 수 있다. 예를 들어, 재활운동 기구(130)는 재활운동에 사용되는 컵, 공, 막대 등을 포함할 수 있다. 재활운동 기구(130)는 스마트 미러(120)와 네트워크를 통해 연결될 수 있고, 사용자의 움직임을 측정하기 위한 다양한 센서들을 포함할 수 있다.The
맞춤형 운동제공 서비스 장치(140)는 동작분석과 증강현실 기술을 이용하여 사용자 맞춤형의 재활운동 서비스를 제공할 수 있는 컴퓨터 또는 프로그램에 해당하는 서버로 구현될 수 있다. 맞춤형 운동제공 서비스 장치(140)는 사용자 단말(110) 및 스마트 미러(120)와 네트워크를 통해 연결될 수 있고 정보를 주고받을 수 있다.The customized exercise providing
일 실시예에서, 맞춤형 운동제공 서비스 장치(140)는 데이터베이스(150)와 연동하여 인공지능 기반의 맞춤형 운동제공 서비스에 필요한 데이터를 저장할 수 있다. 또한, 맞춤형 운동제공 서비스 장치(140)는 프로세서, 메모리, 사용자 입출력부 및 네트워크 입출력부를 포함하여 구현될 수 있으며, 이에 대해서는 도 2에서 보다 자세히 설명한다. In one embodiment, the customized exercise providing
또한, 맞춤형 운동제공 서비스 장치(140)는 적어도 하나의 외부 시스템과 연동하여 동작할 수 있다. 예를 들어, 외부 시스템은 인공지능 학습을 수행하는 전용 서버에 해당하는 인공지능 서버, 서비스 결제를 위한 결제 서버 등을 포함할 수 있다.In addition, the customized exercise providing
데이터베이스(150)는 맞춤형 운동제공 서비스 장치(140)의 동작 과정에서 필요한 다양한 정보들을 저장하는 저장장치에 해당할 수 있다. 데이터베이스(150)는 재활운동 과정에서 수집된 재활운동 데이터를 저장할 수 있고 학습을 위한 학습 데이터 및 학습 모델에 관한 정보를 저장할 수 있으며, 반드시 이에 한정되지 않고, 맞춤형 운동제공 서비스 과정에서 다양한 형태로 수집 또는 가공된 정보들을 저장할 수 있다.The
도 2는 도 1의 맞춤형 운동제공 서비스 장치의 시스템 구성을 설명하는 도면이다.FIG. 2 is a view for explaining the system configuration of the customized exercise providing service device of FIG. 1 .
도 2를 참조하면, 맞춤형 운동제공 서비스 장치(140)는 프로세서(210), 메모리(220), 사용자 입출력부(230) 및 네트워크 입출력부(240)를 포함하여 구현될 수 있다.Referring to FIG. 2 , the customized exercise providing
프로세서(210)는 맞춤형 운동제공 서비스 장치(140)가 동작하는 과정에서의 각 단계들을 처리하는 프로시저를 실행할 수 있고, 그 과정 전반에서 읽혀지거나 작성되는 메모리(220)를 관리할 수 있으며, 메모리(220)에 있는 휘발성 메모리와 비휘발성 메모리 간의 동기화 시간을 스케줄할 수 있다. 프로세서(210)는 맞춤형 운동제공 서비스 장치(140)의 동작 전반을 제어할 수 있고, 메모리(220), 사용자 입출력부(230) 및 네트워크 입출력부(240)와 전기적으로 연결되어 이들 간의 데이터 흐름을 제어할 수 있다. 프로세서(210)는 맞춤형 운동제공 서비스 장치(140)의 CPU(Central Processing Unit)로 구현될 수 있다.The
메모리(220)는 SSD(Solid State Drive) 또는 HDD(Hard Disk Drive)와 같은 비휘발성 메모리로 구현되어 맞춤형 운동제공 서비스 장치(140)에 필요한 데이터 전반을 저장하는데 사용되는 보조기억장치를 포함할 수 있고, RAM(Random Access Memory)과 같은 휘발성 메모리로 구현된 주기억장치를 포함할 수 있다.The
사용자 입출력부(230)는 사용자 입력을 수신하기 위한 환경 및 사용자에게 특정 정보를 출력하기 위한 환경을 포함할 수 있다. 예를 들어, 사용자 입출력부(230)는 터치 패드, 터치 스크린, 화상 키보드 또는 포인팅 장치와 같은 어댑터를 포함하는 입력장치 및 모니터 또는 터치스크린과 같은 어댑터를 포함하는 출력장치를 포함할 수 있다. 일 실시예에서, 사용자 입출력부(230)는 원격 접속을 통해 접속되는 컴퓨팅 장치에 해당할 수 있고, 그러한 경우, 맞춤형 운동제공 서비스 장치(140)는 서버로서 수행될 수 있다.The user input/output unit 230 may include an environment for receiving a user input and an environment for outputting specific information to the user. For example, the user input/output unit 230 may include an input device including an adapter such as a touch pad, a touch screen, an on-screen keyboard, or a pointing device, and an output device including an adapter such as a monitor or a touch screen. In an embodiment, the user input/output unit 230 may correspond to a computing device accessed through a remote connection, and in such a case, the customized exercise providing
네트워크 입출력부(240)은 네트워크를 통해 외부 장치 또는 시스템과 연결하기 위한 환경을 포함하고, 예를 들어, LAN(Local Area Network), MAN(Metropolitan Area Network), WAN(Wide Area Network) 및 VAN(Value Added Network) 등의 통신을 위한 어댑터를 포함할 수 있다.The network input/
도 3은 도 1의 맞춤형 운동제공 서비스 장치의 기능적 구성을 설명하는 도면이다.3 is a view for explaining the functional configuration of the customized exercise providing service apparatus of FIG. 1 .
도 3을 참조하면, 맞춤형 운동제공 서비스 장치(140)는 연결요청 수신부(310), 제어 권한 획득부(320), 선택적 연결 제공부(330), 재활운동 컨텐츠 제공부(340), 재활운동 분석부(350) 및 제어부(360)를 포함할 수 있다.Referring to FIG. 3 , the customized exercise providing
연결요청 수신부(310)는 사용자 단말(110)로부터 스마트 미러(120)에 대한 연결 요청을 수신할 수 있다. 즉, 사용자는 스마트폰 등의 사용자 단말(110)를 통해 재활운동 컨텐츠를 선택하거나 또는 스마트 미러(120)와의 연동을 관리할 수 있다. 사용자가 사용자 단말(110)을 통해 특정 스마트 미러(120)에 대한 연결을 요청하는 경우, 연결요청 수신부(310)는 해당 연결 요청을 수신하여 제어 권한 획득부(320)의 동작을 개시할 수 있다.The connection
한편, 사용자 단말(110)은 스마트 미러(120)와 직접 연결되어 동작할 수 있으며, 맞춤형 운동제공 서비스 장치(140)는 스마트 미러(120)와 사용자 단말(110) 간의 연결을 제어함으로써 관리의 효율성 및 사용자의 편의성을 제공할 수 있다.On the other hand, the
일 실시예에서, 연결요청 수신부(310)는 사용자 단말(110)의 위치를 기초로 해당 사용자 단말(110)과 연결 가능한 스마트 미러(120)들에 관한 선택 리스트를 생성하여 제공할 수 있다. 예를 들어, 사용자 단말(110) 상에서 스마트 미러(120)와의 연동을 위한 전용 애플리케이션이 실행되는 경우, 연결요청 수신부(310)는 사용자 단말(110)로부터 수신한 위치 좌표를 기초로 기 설정된 유효 반경 이내에 존재하는 스마트 미러(120)를 검색할 수 있고, 해당 사용자 단말(110)과 연동 가능한 스마트 미러(120)들에 대한 목록을 리스트 형태로 생성하여 사용자 단말(110)에 미리 제공할 수 있다. 이를 통해, 사용자는 자신 주변에 존재하는 스마트 미러(120)들에 대한 정보를 획득할 수 있고, 연동하고자 하는 스마트 미러(120)를 직접 선택하여 연결을 요청할 수 있다.In an embodiment, the connection
제어 권한 획득부(320)는 사용자 단말(110)의 연결 요청에 따라 스마트 미러(120)에 관한 제어 권한을 획득할 수 있다. 제어 권한 획득부(320)는 연결 요청에 연관된 스마트 미러(120)의 동작 상태를 확인할 수 있으며, 동작 상태를 기초로 연결 요청 시점에서의 가용 여부를 결정할 수 있다. 제어 권한 획득부(320)는 스마트 미러(120)의 제어 권한을 획득한 경우 해당 사용자 단말(110)의 연결 요청을 허용함으로써 스마트 미러(120)와 사용자 단말(110) 간의 동기화 연결을 제공할 수 있다. The control
한편, 스마트 미러(120)에 대한 제어 권한은 사용 제약 조건을 포함할 수 있다. 예를 들어, 제어 권한은 사용자 계정에 따라 스마트 미러(120)가 제공하는 다양한 기능들 중 일부가 제한되도록 차등적으로 적용될 수 있으며, 사용 시간 등의 제약 조건이 추가적으로 적용될 수도 있다.Meanwhile, the control right for the
일 실시예에서, 제어 권한 획득부(320)는 복수의 스마트 미러(120)들과 각각 연관된 복수의 연결 요청들 사이에 시간적 유사성이 존재하는 경우 복수의 스마트 미러(120)들에 관한 그룹화된 제어 권한을 획득할 수 있다. 보다 구체적으로, 제어 권한 획득부(320)는 다양한 사용자 단말(110)들에 의해 복수의 연결 요청들이 수신된 경우 해당 연결 요청들 중 소정의 유사성이 존재하는 경우 이를 기준으로 스마트 미러(120)들을 그룹화 하여 해당 그룹에 대한 제어 권한을 획득할 수 있다. 이 때, 연결 요청들 간의 유사성은 기본적으로 시간적 유사성, 예를 들어, 특정 시간 구간 내에서 연결 요청들이 다수 집중적으로 수신되는 경우를 포함할 수 있고, 공간적 유사성이나 단말들 간의 유사성도 필요에 따라 그룹화의 기준으로 활용될 수 있다.In an embodiment, the control
즉, 제어 권한 획득부(320)에 의해 스마트 미러(120)들의 그룹에 대한 제어 권한이 획득된 경우, 맞춤형 운동제공 서비스 장치(140)는 해당 그룹에 속한 스마트 미러(120)들을 통해 동일한 재활운동 컨텐츠를 동시에 디스플레이 하도록 제어할 수 있다. 이를 통해, 맞춤형 운동제공 서비스 장치(140)는 개별 환자의 재활운동 뿐 아니라 다수의 환자들에 대한 단체 재활운동에도 관련 서비스를 효과적으로 제공할 수 있다.That is, when the control authority for the group of
일 실시예에서, 제어 권한 획득부(320)는 사용자 단말(110)과 연관된 사용자 계정에 따라 단계적으로 정의된 제어 권한을 획득할 수 있다. 즉, 스마트 미러(120)에 대한 제어 권한은 등급별로 차등적으로 정의될 수 있으며, 해당 정보는 테이블 형태로 구축되어 데이터베이스(150)에 저장될 수 있다. 예를 들어, 제어 권한의 등급이 높을수록 스마트 미러(120)가 제공하는 기능들을 더 많이 사용할 수 있다. 제어 권한 획득부(320)는 사용자 단말(110)과 연관된 사용자 계정을 식별하고, 해당 식별 정보를 기초로 스마트 미러(120)에 대한 차등적인 제어 권한을 획득할 수 있다.In an embodiment, the control
선택적 연결 제공부(330)는 사용자 단말(110)에 의해 선택된 재활운동 컨텐츠에 따라 재활운동 기구(130) 및 스마트 카메라에 대한 선택적 연결을 제공할 수 있다. 여기에서, 재활운동 컨텐츠는 환자의 재활운동을 지원하기 위해 구현된 다양한 컨텐츠에 해당할 수 있다. 예를 들어, 재활운동 컨텐츠는 신체적 기능 향상을 위한 신체 재활운동 영상 또는 일상생활 동작들 중 어느 하나를 목표로 하는 목적 지향 재활운동 영상을 포함할 수 있다. The selective
또한, 신체 재활운동 영상은 손가락, 손목, 상지 등의 상체 부위 또는 발가락 발목, 하지 등의 하체 부위 중 어느 하나에 관한 영상에 해당할 수 있고, 신체부위 별로 해당 신체부위의 움직임을 위한 운동(예를 들어, 가동성, 근력, 근지구력, 유연성 등)에 관한 영상을 포함할 수 있다. 즉, 사용자 단말(110)에 의해 신체 재활운동 영상에 관한 신체부위가 선택되는 경우 해당하는 신체부위의 형상이 스마트 미러(120)를 통해 디스플레이 될 수 있다. 이 때, 사용자는 해당 형상의 가이드 라인에 맞춰 신체를 움직임으로써 재활 운동을 수행할 수 있다.In addition, the physical rehabilitation exercise image may correspond to an image relating to any one of upper body parts such as fingers, wrists, and upper limbs, or lower body parts such as toes, ankles, and lower extremities, For example, it may include an image about mobility, muscle strength, muscular endurance, flexibility, etc.). That is, when a body part related to the physical rehabilitation exercise image is selected by the
또한, 목적 지향 재활운동 영상은 컵잡기, 문열기, 빗 빗기 등의 일상생활 동작 중 어느 하나에 관한 영상에 해당할 수 있다. 보다 구체적으로, 사용자 단말(110)에 의해 목적 지향 재활운동 영상 중 어느 하나의 일상생활 동작이 선택되는 경우, 스마트 미러(120)를 통해 해당 일상생활 도구가 디스플레이 될 수 있다. 이 때, 사용자는 해당 영상의 일상생활 도구를 사용할 수 있도록 신체를 움직임으로써 재활 운동을 수행할 수 있다.In addition, the goal-oriented rehabilitation exercise image may correspond to an image relating to any one of daily life motions, such as holding a cup, opening a door, and combing a comb. More specifically, when any one of the goal-oriented rehabilitation exercise images is selected by the
여기에서, 일상생활 도구는 재활운동 기구(130)에 해당할 수 있으며, 사용자의 움직임을 측정하기 위한 다양한 센서를 포함하여 구현될 수 있다. 또한, 재활운동 기구(130)는 와이파이를 통해 스마트 미러(120)와 연결될 수 있으며, 선택적 연결 제공부(330)는 사용자 단말(110)에 의해 선택된 재활운동 컨텐츠에 따라 재활운동 기구(130)를 선택적으로 연결시킬 수 있다.Here, the daily life tool may correspond to the
일 실시예에서, 재활운동 컨텐츠는 증강현실을 이용한 컨텐츠를 포함할 수 있다. 이 때, 재활운동 컨텐츠는 스마트 미러(120) 또는 사용자 단말(110)을 통해 디스플레이 될 수 있고, 증강현실 전용 디스플레이 장치를 통해 재생될 수 있다. 재활운동 컨텐츠는 데이터베이스(150)에 저장될 수 있으며, 맞춤형 운동제공 서비스 장치(140)를 통해 스마트 미러(120) 또는 사용자 단말(110)로 전달될 수 있다.In one embodiment, the rehabilitation exercise content may include content using augmented reality. At this time, the rehabilitation exercise content may be displayed through the
일 실시예에서, 선택적 연결 제공부(330)는 사용자 단말(110)의 식별 정보를 기초로 해당 사용자의 재활 레벨에 따른 맞춤형 재활운동 컨텐츠를 추천할 수 있다. 예를 들어, 사용자는 사용자 단말(110)을 통해 전용 애플리케이션을 실행시킬 수 있고, 해당 애플리케이션의 실행에 동기화되어 선택적 연결 제공부(330)에 의한 추천 동작이 개시될 수 있다. 즉, 선택적 연결 제공부(330)는 사용자 단말(110)의 식별 정보, 예를 들어, 사용자의 성별, 질병시기, 휠체어 구분, 신체 손상부위, 손상 정도, 재활 경과 및 기간 등을 기초로 해당 사용자의 재활 레벨을 결정할 수 있고, 해당 재활 레벨에 따른 맞춤형 재활운동 컨텐츠를 사용자 단말(110)에 제공할 수 있다.In an embodiment, the selective
재활운동 컨텐츠 제공부(340)는 스마트 미러(120)를 통해 재활운동 컨텐츠를 제공할 수 있다. 또한, 재활운동 컨텐츠 제공부(340)는 사용자 단말(110), 재활운동 기구(130) 및 스마트 카메라 각각으로부터 사용자의 재활운동에 관한 실시간 재활운동 데이터를 수집할 수 있다. 재활운동 컨텐츠 제공부(340)를 통해 수집된 실시간 재활운동 데이터는 사용자의 재활운동 평가에 사용될 수 있으며, 재활운동의 난이도 조절, 재활운동의 향상도 평가 또는 맞춤형 재활운동 컨텐츠 추천 등에 활용될 수 있다.The rehabilitation exercise
일 실시예에서, 재활운동 컨텐츠 제공부(340)는 사용자 단말(110) 또는 재활운동 기구(130)를 통해 측정된 사용자의 생체정보 및 움직임정보에 관한 재활운동 활동 데이터와, 스마트 카메라를 통해 촬영된 사용자의 움직임에 관한 재활운동 영상 데이터를 실시간 재활운동 데이터로서 수집할 수 있다. 사용자 단말(110) 또는 재활운동 기구(130)는 사용자의 생체정보와 움직임정보를 측정할 수 있는 다양한 센서들을 포함하여 구현될 수 있다. 스마트 카메라는 재활운동을 수행 중인 사용자의 움직임을 효과적으로 촬영하기 위하여 설치 위치 및 개수가 가변적으로 적용될 수 있다.In one embodiment, the rehabilitation exercise
또한, 재활운동 활동 데이터는 사용자의 심박수, 체온, 움직임 변화량 등을 포함할 수 있고, 움직임 변화량은 단위시간당 이동벡터, 즉 이동방향과 이동거리에 관한 정보를 포함할 수 있다. 특히, 재활운동 활동 데이터는 사용자의 움직임 정보로서 속도 및 방향을 포함할 수 있고, 재활운동 컨텐츠 제공부(340)는 해당 정보를 기초로 사용자의 움직임과 연관된 근력 정보 및 동작의 정확성 정보를 수집할 수 있다. 재활운동 영상 데이터는 적어도 하나의 스마트 카메라로부터 수신될 수 있으며, 스마트 카메라는 스마트 미러(120)의 내부 또는 외부에 고정적으로 설치되어 동작할 수 있다.In addition, the rehabilitation exercise activity data may include a user's heart rate, body temperature, movement variation, and the like, and the motion variation may include information about a movement vector per unit time, that is, a movement direction and a movement distance. In particular, the rehabilitation exercise activity data may include speed and direction as the user's movement information, and the rehabilitation exercise
재활운동 분석부(350)는 표준 재활운동 데이터를 기초로 구축된 재활운동 모델을 이용하여 실시간 재활운동 데이터를 분석할 수 있다. 재활운동 분석부(350)는 분석의 결과에 따라 재활운동 컨텐츠의 제공을 동적으로 조절할 수 있다. 또한, 재활운동 분석부(350)는 분석의 결과를 기초로 사용자의 재활운동에 관한 향상도 및 운동 추천 리포트를 생성하여 사용자 단말(110)에 제공할 수 있다.The rehabilitation
일 실시예에서, 재활운동 분석부(350)는 가상 트레이너 또는 실제 트레이너의 운동을 측정하여 후보 재활운동 데이터를 획득하고, 후보 재활운동 데이터로부터 적어도 하나의 키 동작을 추출하며, 적어도 하나의 키 동작에 관한 분석 정보를 학습하여 재활운동 모델을 구축할 수 있다. 재활운동 모델은 표준 재활운동 데이터를 학습한 결과로서 구축될 수 있으며, 표준 재활운동 데이터는 가상 또는 실제 트레이너의 운동을 측정하여 획득될 수 있다. In one embodiment, the rehabilitation
특히, 표준 재활운동 데이터는 측정된 재활운동 데이터 중에서 키 동작과 연관된 데이터로 구성될 수 있다. 여기에서, 키 동작이란 재활운동 과정에서 발생하는 다양한 움직임들 중에서 각 운동에 관한 주요 동작으로 정의될 수 있다. 즉, 키 동작은 각 운동에서 필수적으로 요구되는 동작이나 난이도 높은 동작을 포함할 수 있다. 재활운동 분석부(350)는 키 동작에 관한 학습 데이터를 기초로 재활운동 모델을 사전에 구축하여 데이터베이스(150)에 저장할 수 있다. 재활운동 모델은 학습 데이터의 유형(예를 들어, 영상, 이미지, 텍스트 등)에 따라 독립적으로 구축될 수 있고, 재활운동의 유형이나 난이도 별로 독립적으로 구축되어 활용될 수 있다.In particular, the standard rehabilitation exercise data may be composed of data associated with a key operation among the measured rehabilitation exercise data. Here, the key motion may be defined as a main motion related to each motion among various motions occurring in the rehabilitation exercise process. That is, the key operation may include an operation required for each exercise or a high difficulty operation. The
일 실시예에서, 재활운동 분석부(350)는 재활운동 모델에 실시간 재활운동 데이터를 입력으로 제공하여 표준 재활운동 데이터와의 유사도를 출력으로 획득할 수 있다. 재활운동 분석부(350)는 사용자로부터 실시간으로 획득한 실시간 재활운동 데이터를 표준 재활운동 데이터와 비교한 결과로서 사용자의 재활운동을 평가할 수 있으며, 평가 과정에서 기 구축된 재활운동 모델이 활용될 수 있다. 재활운동 분석부(350)는 재활운동 모델이 출력하는 유사도를 기초로 해당 사용자의 재활운동의 평가를 등급화할 수 있다.In an embodiment, the
일 실시예에서, 재활운동 분석부(350)는 분석의 결과를 기초로 사용자의 현재 동작에서 요구되는 다음 동작에 관한 증강현실 가이드를 스마트 미러(120)를 통해 제공할 수 있다. 재활운동 분석부(350)는 실시간 재활운동 데이터를 기초로 사용자의 현재 동작을 평가할 수 있고, 해당 평가 결과에 따라 표준 동작에 관한 다음 동작을 증강현실 영상으로 가이드할 수 있다.In one embodiment, the
일 실시예에서, 재활운동 분석부(350)는 분석의 결과를 기초로 사용자의 현재 동작과 표준 재활운동 데이터의 표준 동작 간의 시간적 및 공간적 오류들을 재활운동 컨텐츠로서 제공할 수 있다. 예를 들어, 표준 동작과의 차이가 수치화된 정보로서 스마트 미러(120)를 통해 디스플레이 되는 증강현실 영상에 오버레이(overlay)되어 표시될 수 있다. 이를 통해, 사용자는 자신의 움직임에 대한 평가 결과를 직관적으로 인지할 수 있고, 이후 다음 동작을 위한 움직임에 집중할 수 있다.In an embodiment, the
일 실시예에서, 재활운동 분석부(350)는 분석의 결과를 기초로 사용자의 현재 동작과 상기 표준 재활운동 데이터의 표준 동작 간의 시간적 및 공간적 오류들을 각각 결정하고 시간적 및 공간적 오류들을 단계적으로 제거하는 동작들을 다음 동작으로 연속하여 결정할 수 있다. 즉, 재활운동 분석부(350)는 사용자의 현재 동작을 기초로 표준 동작에 관한 다음 동작을 결정할 수 있으며, 현재 동작과 표준 동작 간의 차이가 큰 경우라면 다음 동작으로의 변경이 어렵다는 점을 고려하여 표준 동작으로의 변경을 위한 다음 동작들을 단계적으로 결정하여 순차적으로 제공할 수 있다.In one embodiment, the
일 실시예에서, 재활운동 분석부(350)는 사용자의 실시간 재활운동 데이터를 해당 재활운동 컨텐츠와 연관된 다른 사용자의 재활운동 데이터와 비교 분석한 결과를 스마트 미러(120)를 통해 재활운동 컨텐츠로서 제공할 수 있다. 보다 구체적으로, 재활운동 분석부(350)는 사용자의 실시간 재활운동 데이터와 다른 사용자의 재활운동 데이터를 비교 분석하여 다른 사용자가 선택한 재활운동 컨텐츠의 종류, 순서, 시간 및 횟수에 관한 정보를 사용자에게 실시간으로 제공할 수 있다. 또한, 재활운동 분석부(350)는 사용자의 실시간 재활운동 데이터와 다른 사용자의 재활운동 데이터를 비교 분석하여 다른 사용자가 채택한 재활운동 방법에 의한 향상도와 해당 향상도에 도달할 때까지의 시간을 예측하여 사용자에게 실시간으로 제공할 수 있다.In one embodiment, the rehabilitation
또한, 재활운동 분석부(350)는 사용자가 선택한 재활운동 컨텐츠의 사용자 랭킹 정보를 사용자에게 실시간으로 제공할 수 있다. 예를 들어, 사용자 랭킹 정보는 해당 재활운동 컨텐츠를 이용한 결과 획득한 향상도에 관한 순위 리스트에 해당할 수 있다. 즉, 재활운동 분석부(350)는 사용자의 실시간 재활운동 과정에서 스마트 미러(120)를 통해 다른 사용자들의 재활운동 정보를 제공할 수 있고, 백데이터 분석과 인공지능을 활용하여 예측된 관련 정보를 실시간으로 제공함으로써 사용자의 재활운동의 집중도를 높이고 운동 효과를 개선시킬 수 있다.In addition, the rehabilitation
일 실시예에서, 재활운동 분석부(350)는 표준 동작과의 시간적 및 공간적 오류들에 관한 정보를 수집하여 관절의 각도(ROM, Range of Motor)를 포함한 재활운동 향상도, 단편적이거나 연속적인 재활운동의 횟수 및 지속시간을 기초로 유연성, 근력 및 근지구력에 관한 정보를 제공할 수 있다. 사용자의 재활운동에 관한 정보는 누적되어 데이터베이스(150)에 저장될 수 있으며, 재활운동 분석부(350)는 누적 저장된 데이터를 기초로 사용자의 재활운동에 관한 이전 정보와 현재 정보 간의 비교를 수행하여 재활운동의 향상도, 횟수 등의 분석 정보를 생성할 수 있다. 한편, 재활운동의 향상도는 누적된 데이터를 기초로 기간별 운동 수행 여부와 운동량을 분석한 결과에 따라 한 주 또는 한 달 단위로 수치화 되어 그래프 등의 형태로 표현될 수 있다.In one embodiment, the rehabilitation
일 실시예에서, 재활운동 분석부(350)는 표준 동작과의 시간적 및 공간적 오류들이 특정 기준 이내인 경우 해당 사용자의 재활운동 레벨을 증가시킬 수 있다. 재활운동 과정에서 사용자의 움직임이 표준 동작과 비슷하게 유지되는 경우 해당 사용자의 운동 능력이 향상되었음을 의미하므로 재활운동 분석부(350)는 사용자의 재활운동 과정에서 수행되는 표준 동작과의 비교 분석에 따라 사용자의 재활운동 레벨을 조정할 수 있다. 사용자의 재활운동 레벨의 조정에 따라 재활운동을 가이드 하는 재활운동 컨텐츠의 난이도 역시 증가될 수 있다.In an embodiment, the
일 실시예에서, 재활운동 분석부(350)는 재활운동 향상도에 기반하여 사용자 단말(110) 만을 이용하여 수행 가능한 재활운동 컨텐츠를 선택적으로 제공할 수 있다. 즉, 재활운동 분석부(350)는 스마트 미러(120)가 존재하지 않는 일반적 환경에서도 활용 가능한 재활운동 컨텐츠를 제공할 수 있다.In an embodiment, the
한편, 사용자 단말(110)은 재활운동 컨텐츠로서 목적 지향 재활운동 영상의 디스플레이 시 화면을 통해 마커를 함께 표시할 수 있고, 평면이 감지되면 일상생활과 관련된 재활운동 기구(130)를 디스플레이 할 수 있다.On the other hand, the
예를 들어, 재활운동 분석부(350)에 의해 재활운동 컨텐츠로서 '머그컵 들기'에 관한 목적 지향 재활운동 영상이 제공되는 경우, 사용자 단말(110)은 화면을 통해 마커를 디스플레이 할 수 있고, 평면이 감지되면 화면에 가상의 머그컵을 디스플레이 할 수 있다. 이 때, 사용자가 머그컵을 잡는 움직임을 수행하고 사용자 단말(110)을 통해 촬영된 사용자의 움직임이 정확한 경우 사용자 단말(110)은 머그컵의 색깔을 변경하거나 정확도에 관한 텍스트를 표시하는 등 직관적인 운동 결과를 제공함으로써 사용자가 운동 수행여부를 정확하게 이해하도록 할 수 있다.For example, when a goal-oriented rehabilitation exercise image related to 'lifting a mug' is provided as rehabilitation exercise content by the rehabilitation
한편, 사용자 단말(110)은 내부 카메라를 통해 촬영되어 화면을 통해 디스플레이 되는 사용자의 신체 영상 중 재활운동을 수행할 시 촬영되는 최초 위치를 기준으로 사용자의 움직임에 따른 관절 움직임 각도를 실시간으로 측정하여 화면 상에 표시할 수 있다.On the other hand, the
예를 들어, 재활운동 분석부(350)에 의해 재활운동 컨텐츠로서 '손가락 기억만들기'에 관한 신체 재활운동 영상이 제공되는 경우, 사용자 단말(110)은 화면을 통해 손 형태의 가이드 라인 영상을 디스플레이 할 수 있다. 이때, 손 형태의 가이드 라인에 맞춰 사용자의 손을 위치시켜 최초 위치를 인식시킨 후 재생되는 손 형태의 가이드 라인 영상을 따라 재활운동을 시작하여 사용자가 손을 움직이면, 사용자 단말(110)은 손 관절의 움직임 각도를 실시간으로 측정하여 화면 상에 숫자로 표시함으로써 사용자가 운동 수행여부를 정확하게 이해하도록 할 수 있다.For example, when a physical rehabilitation exercise image related to 'finger memory creation' is provided as rehabilitation exercise content by the rehabilitation
제어부(360)는 맞춤형 운동제공 서비스 장치(140)의 전체적인 동작을 제어하고, 연결요청 수신부(310), 제어 권한 획득부(320), 선택적 연결 제공부(330), 재활운동 컨텐츠 제공부(340) 및 재활운동 분석부(350) 간의 제어 흐름 또는 데이터 흐름을 관리할 수 있다.The
도 4 및 5는 본 발명의 일 실시예에 따른 인공지능 맞춤형 운동제공 서비스 과정을 설명하는 순서도이다.4 and 5 are flowcharts for explaining the artificial intelligence customized exercise providing service process according to an embodiment of the present invention.
도 4를 참조하면, 맞춤형 운동제공 서비스 장치(140)는 연결요청 수신부(310)를 통해 사용자 단말(110)로부터 스마트 미러(120)에 대한 연결 요청을 수신할 수 있다(단계 S410). 또한, 맞춤형 운동제공 서비스 장치(140)는 제어 권한 획득부(320)를 통해 사용자 단말(110)과 연관된 스마트 미러(120)에 관한 제어 권한을 획득할 수 있다(단계 S420).Referring to FIG. 4 , the customized exercise providing
또한, 맞춤형 운동제공 서비스 장치(140)는 선택적 연결 제공부(330)를 통해 사용자 단말(110)에 의해 선택된 재활운동 컨텐츠에 따라 재활운동 기구(130) 및 스마트 카메라에 대한 선택적 연결을 제공할 수 있다(단계 S430). 또한, 맞춤형 운동제공 서비스 장치(140)는 재활운동 컨텐츠 제공부(340)를 통해 재활운동 컨텐츠를 제공할 수 있다(단계 S440). 보다 구체적으로, 재활운동 컨텐츠 제공부(340)는 스마트 미러를 통해 재활운동 컨텐츠를 디스플레이할 수 있다.In addition, the customized exercise providing
도 5를 참조하면, 맞춤형 운동제공 서비스 장치(140)는 재활운동 컨텐츠 제공부(340)를 통해 재활운동 과정에서 실시간 재활운동 데이터를 수집할 수 있다(단계 S510). 보다 구체적으로, 재활운동 컨텐츠 제공부(340)는 사용자 단말(110), 재활운동 기구(130) 및 스마트 카메라 각각으로부터 사용자의 재활운동에 관한 데이터를 실시간 재활운동 데이터로서 수집할 수 있다. 또한, 맞춤형 운동제공 서비스 장치(140)는 재활운동 분석부(350)를 통해 표준 재활운동 데이터를 기초로 구축된 재활운동 모델을 이용하여 실시간 재활운동 데이터를 분석할 수 있다(단계 S520).Referring to FIG. 5 , the customized exercise providing
또한, 맞춤형 운동제공 서비스 장치(140)는 재활운동 분석부(350)를 통해 분석의 결과에 따라 재활운동 컨텐츠의 제공을 동적으로 조절할 수 있다(단계 S530). 이를 위하여, 재활운동 분석부(350)는 재활운동 컨텐츠 제공부(340)와 연동하여 동작할 수 있다. 또한, 맞춤형 운동제공 서비스 장치(140)는 재활운동 분석부(350)를 통해 분석의 결과를 기초로 사용자의 재활운동에 관한 향상도 및 운동 추천 리포트를 생성하여 사용자 단말(110)에 제공할 수 있다(단계 S540).In addition, the customized exercise providing
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although the above has been described with reference to preferred embodiments of the present invention, those skilled in the art can variously modify and change the present invention within the scope without departing from the spirit and scope of the present invention as set forth in the claims below. You will understand that it can be done.
100: 맞춤형 운동제공 서비스 시스템
110: 사용자 단말
120: 스마트 미러
130: 재활운동 기구
140: 맞춤형 운동제공 서비스 장치
150: 데이터베이스
210: 프로세서
220: 메모리
230: 사용자 입출력부
240: 네트워크 입출력부
310: 연결요청 수신부
320: 제어 권한 획득부
330: 선택적 연결 제공부
340: 재활운동 컨텐츠 제공부
350: 재활운동 분석부
360: 제어부100: customized exercise service system
110: user terminal 120: smart mirror
130: rehabilitation exercise equipment
140: customized exercise providing service device
150: database
210: processor 220: memory
230: user input/output unit 240: network input/output unit
310: connection request receiving unit 320: control authority acquiring unit
330: optional connection providing unit 340: rehabilitation exercise content providing unit
350: rehabilitation exercise analysis unit 360: control unit
Claims (14)
상기 사용자 단말에 의해 선택된 재활운동 컨텐츠에 따라 재활운동 기구 및 스마트 카메라에 대한 선택적 연결을 제공하는 단계;
상기 스마트 미러를 통해 상기 재활운동 컨텐츠를 제공하면서 상기 사용자 단말, 상기 재활운동 기구 및 상기 스마트 카메라 각각으로부터 사용자의 재활운동에 관한 실시간 재활운동 데이터를 수집하는 단계;
표준 재활운동 데이터를 기초로 구축된 재활운동 모델을 이용하여 상기 실시간 재활운동 데이터를 분석하는 단계;
상기 분석의 결과에 따라 상기 재활운동 컨텐츠의 제공을 동적으로 조절하는 단계; 및
상기 분석의 결과를 기초로 상기 사용자의 재활운동에 관한 향상도 및 운동 추천 리포트를 생성하여 상기 사용자 단말에 제공하는 단계를 포함하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
obtaining a control right for the smart mirror by receiving a connection request for the smart mirror from the user terminal;
providing a selective connection to a rehabilitation exercise device and a smart camera according to the rehabilitation exercise content selected by the user terminal;
collecting real-time rehabilitation exercise data on the user's rehabilitation exercise from each of the user terminal, the rehabilitation exercise device, and the smart camera while providing the rehabilitation exercise contents through the smart mirror;
analyzing the real-time rehabilitation exercise data using a rehabilitation exercise model built on the basis of standard rehabilitation exercise data;
dynamically adjusting the provision of the rehabilitation exercise contents according to the result of the analysis; and
Based on the result of the analysis, generating an improvement level and an exercise recommendation report for the user's rehabilitation exercise and providing the report to the user terminal.
증강현실을 이용한 컨텐츠를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
According to claim 1, wherein the rehabilitation exercise content is
Artificial intelligence customized exercise service method for the rehabilitation of the paralyzed, characterized in that it includes content using augmented reality.
상기 사용자 단말의 위치를 기초로 해당 사용자 단말과 연결 가능한 스마트 미러들에 관한 선택 리스트를 생성하여 제공하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
The method of claim 1, wherein acquiring the control right comprises:
Based on the location of the user terminal, artificial intelligence customized exercise providing service method for the rehabilitation of the paralytic, characterized in that it comprises the step of generating and providing a selection list of smart mirrors connectable to the user terminal.
복수의 스마트 미러들과 각각 연관된 복수의 연결 요청들 사이에 시간적 유사성이 존재하는 경우 상기 복수의 스마트 미러들에 관한 그룹화된 제어 권한을 획득하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
The method of claim 1, wherein acquiring the control right comprises:
Artificial for the rehabilitation of paralyzed persons comprising the step of acquiring a grouped control right for the plurality of smart mirrors when there is temporal similarity between the plurality of smart mirrors and the plurality of connection requests respectively associated with the plurality of smart mirrors A service method for providing intelligent customized exercise.
상기 사용자 단말의 식별 정보를 기초로 해당 사용자의 재활 레벨에 따른 맞춤형 재활운동 컨텐츠를 추천하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
2. The method of claim 1, wherein providing the optional connection comprises:
Based on the identification information of the user terminal, the artificial intelligence customized exercise providing service method for the rehabilitation of the paralyzed person comprising the step of recommending customized rehabilitation exercise contents according to the user's rehabilitation level.
상기 사용자 단말 또는 상기 재활운동 기구를 통해 측정된 상기 사용자의 생체정보 및 움직임정보에 관한 재활운동 활동 데이터와, 상기 스마트 카메라를 통해 촬영된 상기 사용자의 움직임에 관한 재활운동 영상 데이터를 상기 실시간 재활운동 데이터로서 수집하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
According to claim 1, wherein the step of collecting the real-time rehabilitation exercise data
Rehabilitation exercise activity data regarding the user's biometric information and movement information measured through the user terminal or the rehabilitation exercise device, and the rehabilitation exercise image data regarding the user's movement captured through the smart camera, the real-time rehabilitation exercise Artificial intelligence customized exercise service method for the rehabilitation of the paralyzed, characterized in that it comprises the step of collecting as data.
가상 트레이너 또는 실제 트레이너의 운동을 측정하여 후보 재활운동 데이터를 획득하는 단계;
상기 후보 재활운동 데이터로부터 적어도 하나의 키 동작을 추출하는 단계; 및
상기 적어도 하나의 키 동작에 관한 분석 정보를 학습하여 상기 재활운동 모델을 구축하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
The method of claim 1, wherein the analyzing the real-time rehabilitation exercise data comprises:
Obtaining candidate rehabilitation exercise data by measuring the motion of a virtual trainer or a real trainer;
extracting at least one key operation from the candidate rehabilitation exercise data; and
Artificial intelligence customized exercise providing service method for the rehabilitation of paralyzed persons, characterized in that it comprises the step of learning the analysis information about the at least one key operation to build the rehabilitation exercise model.
상기 재활운동 모델에 상기 실시간 재활운동 데이터를 입력으로 제공하여 상기 표준 재활운동 데이터와의 유사도를 출력으로 획득하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
The method of claim 1, wherein the analyzing the real-time rehabilitation exercise data comprises:
Providing the real-time rehabilitation exercise data to the rehabilitation exercise model as an input, and acquiring a similarity with the standard rehabilitation exercise data as an output.
상기 분석의 결과를 기초로 상기 사용자의 현재 동작에서 요구되는 다음 동작에 관한 증강현실 가이드를 상기 스마트 미러를 통해 제공하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
The method of claim 1, wherein the dynamically adjusting comprises:
Based on the result of the analysis, an augmented reality guide for the next motion required for the user's current motion is provided through the smart mirror. .
상기 분석의 결과를 기초로 상기 사용자의 현재 동작과 상기 표준 재활운동 데이터의 표준 동작 간의 시간적 및 공간적 오류들을 상기 재활운동 컨텐츠로서 제공하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
The method of claim 1, wherein the dynamically adjusting comprises:
Based on the result of the analysis, temporal and spatial errors between the user's current motion and the standard motion of the standard rehabilitation exercise data are provided as the rehabilitation exercise content. How to provide exercise service.
상기 실시간 재활운동 데이터를 상기 재활운동 컨텐츠와 연관된 다른 사용자의 재활운동 데이터와 비교 분석한 결과로서 1)상기 다른 사용자가 선택한 재활운동 컨텐츠의 종류, 순서, 시간 및 횟수에 관한 제1 정보와, 2)상기 제1 정보에 따른 재활운동으로 획득한 향상도 및 도달 예측 시간에 관한 제2 정보와, 3)상기 재활운동 컨텐츠를 이용한 사용자 랭킹에 관한 제3 정보를 상기 재활운동 컨텐츠로서 제공하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
The method of claim 1, wherein the dynamically adjusting comprises:
As a result of comparing and analyzing the real-time rehabilitation exercise data with the rehabilitation exercise data of other users related to the rehabilitation exercise content, 1) first information about the type, sequence, time and number of rehabilitation exercise contents selected by the other user; ) providing, as the rehabilitation exercise content, second information about the degree of improvement and arrival prediction time obtained by the rehabilitation exercise according to the first information, and 3) third information about the user ranking using the rehabilitation exercise content Artificial intelligence customized exercise service method for the rehabilitation of the paralyzed, characterized in that it comprises.
표준 동작과의 시간적 및 공간적 오류들에 관한 정보를 수집하여 관절의 각도(ROM, Range of Motor)를 포함한 재활운동 향상도, 단편적이거나 연속적인 재활운동의 횟수 및 지속시간을 기초로 유연성, 근력 및 근지구력에 관한 정보를 제공하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
The method of claim 1, wherein the providing to the user terminal comprises:
By collecting information on temporal and spatial errors with standard motion, flexibility, muscle strength and Artificial intelligence customized exercise service method for the rehabilitation of paralyzed persons, characterized in that it comprises the step of providing information on muscular endurance.
상기 재활운동 향상도에 기반하여 상기 사용자 단말 만을 이용하여 수행 가능한 재활운동 컨텐츠를 선택적으로 제공하는 단계를 포함하는 것을 특징으로 하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 방법.
The method of claim 12, wherein the providing to the user terminal comprises:
Artificial intelligence customized exercise providing service method for the rehabilitation of the paralyzed, characterized in that it comprises the step of selectively providing rehabilitation exercise contents that can be performed using only the user terminal based on the improvement of the rehabilitation exercise.
상기 사용자 단말과 연동하는 스마트 미러;
상기 스마트 미러에 연결되어 사용자의 재활운동을 보조하는 재활운동 기구;
상기 스마트 미러에 연결되어 상기 재활운동의 과정에서 상기 사용자의 영상을 획득하는 스마트 카메라; 및
상기 사용자 단말로부터의 연결 요청에 따라 제어 권한을 획득한 상기 스마트 미러를 통해 재활운동 컨텐츠를 제공하면서 사용자의 재활운동에 관한 실시간 재활운동 데이터를 수집 분석하여 맞춤형 운동 서비스를 제공하는 맞춤형 운동제공 서버를 포함하는 마비장애인 재활을 위한 인공지능 맞춤형 운동제공 서비스 시스템.
user terminal;
a smart mirror that works with the user terminal;
a rehabilitation exercise device connected to the smart mirror to assist the user in rehabilitation exercise;
a smart camera connected to the smart mirror to obtain an image of the user in the course of the rehabilitation exercise; and
A customized exercise providing server that provides a customized exercise service by collecting and analyzing real-time rehabilitation exercise data related to a user's rehabilitation exercise while providing rehabilitation exercise contents through the smart mirror that has obtained control authority according to a connection request from the user terminal Artificial intelligence customized exercise service system for the rehabilitation of the paralyzed including the paralyzed.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200115345A KR102411138B1 (en) | 2020-09-09 | 2020-09-09 | Artificial intelligence customized exercise provision service system and method for rehabilitation of paralysis patients |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200115345A KR102411138B1 (en) | 2020-09-09 | 2020-09-09 | Artificial intelligence customized exercise provision service system and method for rehabilitation of paralysis patients |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20220033213A true KR20220033213A (en) | 2022-03-16 |
| KR102411138B1 KR102411138B1 (en) | 2022-06-21 |
Family
ID=80937736
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200115345A KR102411138B1 (en) | 2020-09-09 | 2020-09-09 | Artificial intelligence customized exercise provision service system and method for rehabilitation of paralysis patients |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102411138B1 (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20220139521A1 (en) * | 2020-10-29 | 2022-05-05 | Ping-Chia Li | Augmented reality interactive rehabilitation system |
| KR102566378B1 (en) * | 2023-01-02 | 2023-08-17 | 주식회사 데브언리밋 | Method, computing device and computer program for providing home-training guide based on video analysis through artificial intelligence |
| KR102596555B1 (en) * | 2022-08-29 | 2023-10-31 | 주식회사 힐링사운드 | Exercise therapy managing system and method for musculoskeletal disease |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101064891B1 (en) | 2008-09-03 | 2011-09-16 | 건양대학교산학협력단 | Gait Training System of Hemiplegic Patients |
| KR20130021934A (en) * | 2011-08-24 | 2013-03-06 | 아주대학교산학협력단 | Apparatus and method assisting exercise, system for managing exercise ability of the members |
| KR20190019824A (en) * | 2017-08-18 | 2019-02-27 | 강다겸 | Method for providing posture guide and apparatus thereof |
| KR20190062837A (en) * | 2017-11-29 | 2019-06-07 | 권기범 | smart exercise equipment, system method thereof |
| KR20190113265A (en) * | 2018-03-28 | 2019-10-08 | 주식회사 스탠스 | Augmented reality display apparatus for health care and health care system using the same |
| KR102054134B1 (en) * | 2018-09-10 | 2019-12-10 | 인하대학교 산학협력단 | Method and system for exercise coaching based on exercise machine |
-
2020
- 2020-09-09 KR KR1020200115345A patent/KR102411138B1/en active IP Right Grant
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101064891B1 (en) | 2008-09-03 | 2011-09-16 | 건양대학교산학협력단 | Gait Training System of Hemiplegic Patients |
| KR20130021934A (en) * | 2011-08-24 | 2013-03-06 | 아주대학교산학협력단 | Apparatus and method assisting exercise, system for managing exercise ability of the members |
| KR20190019824A (en) * | 2017-08-18 | 2019-02-27 | 강다겸 | Method for providing posture guide and apparatus thereof |
| KR20190062837A (en) * | 2017-11-29 | 2019-06-07 | 권기범 | smart exercise equipment, system method thereof |
| KR20190113265A (en) * | 2018-03-28 | 2019-10-08 | 주식회사 스탠스 | Augmented reality display apparatus for health care and health care system using the same |
| KR102054134B1 (en) * | 2018-09-10 | 2019-12-10 | 인하대학교 산학협력단 | Method and system for exercise coaching based on exercise machine |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20220139521A1 (en) * | 2020-10-29 | 2022-05-05 | Ping-Chia Li | Augmented reality interactive rehabilitation system |
| US11935639B2 (en) * | 2020-10-29 | 2024-03-19 | Ping-Chia Li | Augmented reality interactive rehabilitation system |
| KR102596555B1 (en) * | 2022-08-29 | 2023-10-31 | 주식회사 힐링사운드 | Exercise therapy managing system and method for musculoskeletal disease |
| WO2024048805A1 (en) * | 2022-08-29 | 2024-03-07 | 주식회사 힐링사운드 | System and method for managing therapeutic exercise for musculoskeletal disorders |
| KR102566378B1 (en) * | 2023-01-02 | 2023-08-17 | 주식회사 데브언리밋 | Method, computing device and computer program for providing home-training guide based on video analysis through artificial intelligence |
Also Published As
| Publication number | Publication date |
|---|---|
| KR102411138B1 (en) | 2022-06-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102411138B1 (en) | Artificial intelligence customized exercise provision service system and method for rehabilitation of paralysis patients | |
| JP7083809B2 (en) | Systems and methods for identifying and / or identifying and / or pain, fatigue, mood, and intent with privacy protection | |
| US11948401B2 (en) | AI-based physical function assessment system | |
| US20210174934A1 (en) | Remote assessment of emotional status | |
| CN110060753B (en) | System and method for evaluating intervention effect of cognitive disorder patient | |
| US20130260357A1 (en) | Skill Screening | |
| KR102370703B1 (en) | An user exercise management system, method and apparatus therefor | |
| KR102360284B1 (en) | System and method for intelligent healthcare based on smart mirror | |
| Cvetkoska et al. | Smart mirror E-health assistant—Posture analyze algorithm proposed model for upright posture | |
| KR20200005780A (en) | Apparatus for personal fitness management | |
| Smith et al. | Movement measurements at home for multiple sclerosis: walking speed measured by a novel ambient measurement system | |
| CN111210912A (en) | Parkinson prediction method and device | |
| Patil et al. | Body posture detection and motion tracking using AI for medical exercises and recommendation system | |
| Epstein et al. | Using kernels for a video-based mouse-replacement interface | |
| CN112749321B (en) | Data processing method, client, server, system and storage medium | |
| US11527332B2 (en) | Sensor data analyzing machines | |
| KR102402684B1 (en) | Method for providing an information of self skin condition based on big data in non-facing environment | |
| Amundsen et al. | Fall risk assessment and visualization through gait analysis | |
| CN109766456A (en) | A kind of Intelligent mirror management-control method and system | |
| US10943693B2 (en) | Concise datasets platform | |
| CN113743292B (en) | Video sequence-based activity capability assessment method, device, medium and equipment | |
| US11238992B2 (en) | Configurable concise datasets platform | |
| KR102566213B1 (en) | Method and system for digital based musculoskeletal rehabilitation treatment | |
| KR102593277B1 (en) | Method and system for creating a customized treatment program | |
| US20240149115A1 (en) | Method and system for providing digitally-based musculoskeletal rehabilitation therapy |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |