WO2023234512A1 - 골프 스윙에 관한 피드백 정보를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체 - Google Patents

골프 스윙에 관한 피드백 정보를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체 Download PDF

Info

Publication number
WO2023234512A1
WO2023234512A1 PCT/KR2023/000772 KR2023000772W WO2023234512A1 WO 2023234512 A1 WO2023234512 A1 WO 2023234512A1 KR 2023000772 W KR2023000772 W KR 2023000772W WO 2023234512 A1 WO2023234512 A1 WO 2023234512A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
gaze
user
swing
ball
Prior art date
Application number
PCT/KR2023/000772
Other languages
English (en)
French (fr)
Inventor
석용호
김진현
양준석
지상원
Original Assignee
주식회사 크리에이츠
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 크리에이츠 filed Critical 주식회사 크리에이츠
Publication of WO2023234512A1 publication Critical patent/WO2023234512A1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00—Training appliances or apparatus for special sports
    • A63B69/36—Training appliances or apparatus for special sports for golf
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00—Training appliances or apparatus for special sports
    • A63B69/36—Training appliances or apparatus for special sports for golf
    • A63B69/3623—Training appliances or apparatus for special sports for golf for driving
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/04—Games or sports accessories not covered in groups A63B1/00 - A63B69/00 for small-room or indoor sporting games
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/193—Preprocessing; Feature extraction
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2102/00—Application of clubs, bats, rackets or the like to the sporting activity ; particular sports involving the use of balls and clubs, bats, rackets, or the like
    • A63B2102/32—Golf
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/806—Video cameras

Definitions

  • the present invention relates to a method, system, and non-transitory computer-readable recording medium for providing feedback information regarding a golf swing.
  • This virtual golf system acquires multiple images of the golf ball when the golfer hits the golf ball, measures physical quantities related to the golf ball based on its trajectory, spacing, size, etc., and performs simulation based on this.
  • the basic concept is to display golf shot simulation results on the screen.
  • club movements e.g., club speed, swing plane
  • club movements can be adjusted based on the coordination of the upper and lower body joints during the golf swing.
  • beginners as well as experts practice hitting the ball with the same timing for each shot, and the basic sensory performance of looking at the ball must be preceded.
  • the gaze should be fixed on the ball for about 1 to 2 seconds.
  • the gaze tends to move or blink unconsciously, momentarily losing the timing of the club hitting the ball, which weakens concentration on the ball or reduces coordination between joints, which tends to reduce the accuracy of the swing.
  • the present inventor(s) obtains at least one information of hitting information, user's gaze information, and swing information regarding the ball acquired using at least one module, and combines the gaze information with at least one of hitting information and swing information. improve swing accuracy and concentration by visualizing and providing feedback information to the user that is generated by analyzing the correlation between gaze information and swing information or between gaze information and hitting information based on the synchronized information. I am proposing a technique to do this.
  • the purpose of the present invention is to solve all the problems of the prior art described above.
  • the present invention determines the degree of dispersion of the user's gaze at the time of the address, back swing, or impact stage, accurately measures where the user was looking, and provides feedback information. Another purpose is to enable the user to focus his or her gaze on the ball.
  • Another purpose of the present invention is to improve the user's concentration on the timing at which the club hits the ball by analyzing the frequency of the user's eye blinks in the process of hitting the ball.
  • Another purpose of the present invention is to improve hitting accuracy by analyzing the relationship between the ball and the user's gaze at the time of address to adjust the space and position between the golf club and the user's body.
  • a representative configuration of the present invention to achieve the above object is as follows.
  • a method of providing feedback information about a golf swing includes obtaining at least one of a user's gaze information, a user's swing information, and ball hitting information using at least one module.
  • a method is provided that includes analyzing a relationship, and visualizing and providing feedback information generated with reference to the analyzed relationship.
  • a system for providing feedback information about a golf swing wherein at least one of a user's gaze information, a user's swing information, and a ball hitting information is obtained using at least one module; , an information synchronization unit that synchronizes the gaze information with at least one of the hitting information and the swing information, a correlation between the gaze information and the swing information or a correlation between the gaze information and the hitting information based on the synchronized information.
  • a system is provided that includes a relationship analysis unit that analyzes the correlation, and an information provision unit that visualizes and provides feedback information generated with reference to the analyzed relationship.
  • the degree of dispersion of the user's gaze is determined at the time of the address, back swing, or impact stage, and feedback information is provided by accurately measuring where the user was looking. This allows the user to keep his or her eyes on the ball.
  • the accuracy of hitting can be improved by analyzing the relationship between the ball and the user's gaze at the time of address and adjusting the space and position between the golf club and the user's body.
  • FIG. 1 is a diagram illustrating in detail the internal configuration of an information provision system according to an embodiment of the present invention.
  • Figure 2 is a diagram illustrating a situation in which the information providing system according to the present invention is utilized in a virtual golf simulation system according to an embodiment of the present invention.
  • the module may include a gaze tracking camera module, a swing motion camera module, a sensing module, and a main module.
  • the eye tracking camera module detects the direction of the head (e.g., up, down, left, right) and the direction of the eyes (e.g., on the head) based on an eye tracking algorithm.
  • Information about the direction of the eyeball (or the direction of the eyeball itself), eye size, or eye blinking can be obtained, and the obtained information can be transmitted to the main module.
  • the swing motion camera module can obtain information about the direction of the body or head and transmit the obtained information to the main module.
  • the sensing module can acquire shot data (e.g., launch angle, side angle, ball speed, back spin, side spin) or information about the point of impact, and transmit the acquired information to the main module. It can be sent to .
  • shot data e.g., launch angle, side angle, ball speed, back spin, side spin
  • the main module may combine and analyze information received from the eye tracking camera module, swing motion camera module, or sensing module to provide feedback information to the user.
  • FIG. 1 is a diagram illustrating in detail the internal configuration of an information provision system 100 according to an embodiment of the present invention.
  • the information provision system 100 includes an information synchronization unit 110, a relationship analysis unit 120, an information provision unit 130, a communication unit 140, and It may be configured to include a control unit 150.
  • the information synchronization unit 110, the relationship analysis unit 120, the information provision unit 130, the communication unit 140, and the control unit 150 are at least some of them connected to an external system (not It may be a program module that communicates with (shown).
  • These program modules may be included in the information provision system 100 in the form of an operating system, application program module, or other program module, and may be physically stored in various known storage devices. Additionally, these program modules may be stored in a remote memory device capable of communicating with the information provision system 100. Meanwhile, such program modules include, but are not limited to, routines, subroutines, programs, objects, components, data structures, etc. that perform specific tasks or execute specific abstract data types according to the present invention.
  • the information provision system 100 has been described as above, this description is illustrative, and at least some of the components or functions of the information provision system 100 are realized in a known virtual golf simulation system or are known as required. It is obvious to those skilled in the art that it may be included in a virtual golf simulation system. Additionally, in some cases, all functions and all components of the information provision system 100 may be fully executed within the virtual golf simulation system 200 according to the present invention or may be entirely included within the virtual golf simulation system 200.
  • the information synchronization unit 110 may obtain at least one of the user's gaze information, the user's swing information, and the hitting information about the ball using at least one module. .
  • hitting information about the ball is information about physical quantities that may occur when the ball is hit from the user's swing (e.g., launch angle, side angle, point of impact, back spin, side spin) , ball speed, club speed, impulse, etc.).
  • Swing information may mean information about the user's swing motion (eg, body or head direction, space and position between the club and the body, club path, etc.).
  • the user's gaze information may include at least one of gaze fixation information, gaze tracking information, and gaze blink information.
  • gaze fixation information may be information regarding whether the user's gaze is fixed on the ball.
  • gaze fixation information may refer to information regarding whether the user's gaze is included in an area set based on the ball within a hitting section set based on the time when the ball is hit.
  • Eye tracking information is based on the direction of the head (e.g., up, down, left, right) or the direction of the eyes (e.g., the direction of the eyeball relative to the head or the direction of the eyeball itself). It can mean information about.
  • eye tracking information can be used to categorize the eight stages of a golf swing (i.e., address, take away, back swing, top of swing, and down swing). ), impact, follow through, finish).
  • Eye blink information may mean information about the frequency of eye blinks. For example, information can be obtained that the greater the frequency of eye blinks, the greater the error in the speed and impact timing at which the club hits the ball.
  • the information synchronization unit 110 may synchronize the acquired user's gaze information with at least one of the user's swing information and ball hitting information.
  • hitting information about the ball, user's gaze information, or swing information may be acquired and synchronized at intervals of a predetermined time or a predetermined frame.
  • the user's gaze information obtained according to an embodiment of the present invention may be synchronized with at least one of the hitting information about the ball and the user's swing information at a predetermined time or a predetermined frame interval.
  • the information synchronization unit 110 transmits a plurality of images from at least one module (e.g., eye tracking camera module, swing motion camera module, sensing module) for a predetermined time or It can be acquired at predetermined frame intervals (for example, it can be set based on the number of frames per second (FPS)), and the user's gaze information obtained from a plurality of images can be used to determine the hit on the ball. It can be synchronized with information or the user's swing information and time.
  • time errors may occur in the process of acquiring the above information from each module, and this can be corrected by setting a standard for common time flow and interpolating or extrapolating multiple images to match the standard. .
  • the relationship analysis unit 120 determines the correlation between the user's gaze information and the user's swing information or between the user's gaze information and the hitting information about the ball based on the synchronized information.
  • the correlation can be analyzed.
  • the correlation according to an embodiment of the present invention may mean a relationship indicating the degree to which hitting information or swing information about the ball changes as the user's gaze information changes.
  • correlation according to an embodiment of the present invention may mean a relationship indicating the degree to which the user's gaze information changes as hitting information or swing information about the ball changes.
  • the correlation between the user's gaze information and hitting information about the ball according to an embodiment of the present invention may be related to the user's gaze processing (e.g., gaze fixation, gaze dispersion, eye blinking) when the ball is impacted. It can refer to a relationship that indicates whether the movement of the club has been affected due to (e.g., etc.).
  • the correlation between the user's gaze information and swing information according to an embodiment of the present invention is the user's swing classification stage (e.g., address, back swing, impact) in the user's swing process. It may refer to a relationship representing gaze processing (for example, gaze fixation, gaze dispersion, eye blinking, etc.).
  • the relationship analysis unit 120 includes gaze information of a plurality of users (e.g., direction of the eyes, direction of the eyeball itself), hitting information about the ball (e.g., launch angle, aspect angle, point of impact, backspin, sidespin, ball speed, club speed, impact, etc.) and swing information (e.g. body or head orientation, space and position between club and body, club path, etc.) Based on a pre-trained artificial intelligence model, it is possible to analyze how the accuracy of hitting the ball or the user's swing changes as the user's gaze changes.
  • gaze information of a plurality of users e.g., direction of the eyes, direction of the eyeball itself
  • hitting information about the ball e.g., launch angle, aspect angle, point of impact, backspin, sidespin, ball speed, club speed, impact, etc.
  • swing information e.g. body or head orientation, space and position between club and body, club path, etc.
  • the appropriate club path predicted by a pre-trained artificial intelligence model may vary depending on the user's gaze position.
  • the appropriate swing motion may vary as the appropriate club path changes, and the difference between the appropriate swing motion and the user's swing can be analyzed.
  • the relationship analysis unit 120 may analyze the relationship between the ball and the user's gaze based on synchronized information.
  • the relationship analysis unit 120 is an area in which the user's gaze is set based on the ball within the hitting section set based on the time when the ball is hit (or the time of impact). You can determine whether or not it is included.
  • the relationship analysis unit 120 determines whether the user's gaze is fixed on the ball for about 0.05 seconds based on the time the ball is hit (or the time of impact), The space and location between the club and the user's body can be analyzed.
  • the relationship analysis unit 120 may determine the user's concentration level based on the frequency of the user's eye blinks while the ball is being hit.
  • the relationship analysis unit 120 may determine the user's degree of concentration by analyzing changes in the space and position between the club and the user's body according to changes in the frequency of the user's eye blinks.
  • the information provider 130 may visualize and provide feedback information generated with reference to the analyzed relationship.
  • Feedback information is information to remind the user of the need for changes in the direction, position, or distance of the user's body, head, or gaze so that the ball hitting can be optimized from the user's swing, and includes voice, It can mean text, graphics, subtitles, etc.
  • feedback information according to an embodiment of the present invention may be generated with reference to the user's gaze information.
  • subtitles can provide instructions to keep your eyes on the ball (or adjust the distance between the club and your body) on your next hit.
  • the accuracy of hitting can be improved by providing feedback information that can correct the user's gaze error in view of the swing error occurring based on the user's gaze error.
  • the information provider 130 may provide a phrase to the effect of reducing eye blinking.
  • the information provider 130 determines the correlation between the user's gaze information analyzed by the relationship analysis unit 120 and the hitting information about the ball or the correlation between the user's gaze information and the swing information. Feedback information generated by referring to correlations can be visualized and provided.
  • the information provider 130 may visualize and provide generated feedback information so that the user can perceive that the accuracy of hitting the ball or the user's swing changes as the user's gaze changes.
  • feedback information may be provided in combination with swing information. For example, assuming that there is a first hit, which is the first hit, and a second hit, which is the second hit, the information provider 130 records the user's gaze and the user's swing motion in the first hit before the second hit. It can be visualized and provided to users.
  • the information provider 130 may visualize the user's gaze and the user's swing motion corresponding to when an optimized hit occurs and provide the visualization to the user.
  • the communication unit 140 performs a function that enables data transmission and reception from/to the information synchronization unit 110, relationship analysis unit 120, and information provider 130. You can.
  • control unit 150 has a function of controlling the flow of data between the information synchronization unit 110, the relationship analysis unit 120, the information provision unit 130, and the communication unit 140. It can be done. That is, the control unit 150 according to an embodiment of the present invention controls the data flow to/from the outside of the information provision system 100 or the data flow between each component of the information provision system 100, thereby controlling the information synchronization unit. (110), the relationship analysis unit 120, the information provision unit 130, and the communication unit 140 can each be controlled to perform their own functions.
  • FIG. 2 is a diagram illustrating a situation in which the information providing system 100 according to the present invention is utilized in a virtual golf simulation system 200 according to an embodiment of the present invention.
  • the virtual golf simulation system 200 includes a hitting unit 10, It may be configured to include a lighting device 20, a photographing device 210, a simulator 220, and a display device 230. Additionally, the simulator 220 according to an embodiment of the present invention may include the information providing system 100 according to the present invention.
  • the hitting unit 10 may be a part where a golfer stands with his feet and places a golf ball and hits it when using the virtual golf simulation system 200.
  • This hitting unit 10 may include a known swing plate whose inclination angle can be adjusted.
  • those skilled in the art will be able to determine the configuration of the hitting unit 10, if necessary, along with the configuration of other components interlocked with it, depending on the characteristics of the sport. You can change it appropriately to fit.
  • the lighting device 20 may be a device that can artificially emit light when a golfer enjoys virtual golf indoors or outdoors.
  • This lighting device 20 can be turned on and off or its brightness can be adjusted as needed.
  • the lighting device 20 may be an infrared lighting (eg, LED lighting) to prevent natural deterioration of a plurality of images due to light tremor.
  • the imaging device 210 includes at least one module (e.g., a gaze tracking camera module, a swing motion camera module, a sensing module, etc.) (not shown) and It is possible to perform a function of acquiring a plurality of images related to hitting information, user's gaze information, and swing information.
  • This imaging device 210 may be placed in a position where the moving golf club head is viewed from above, but may also be placed in other positions.
  • the imaging device 210 according to an embodiment of the present invention implements performance similar to that of a high-speed camera by sequentially acquiring a plurality of images using at least two cameras with different shooting speeds, or by using two two-dimensional cameras. By acquiring multiple images simultaneously, performance similar to that of a 3D camera can be realized.
  • the simulator 220 combines and analyzes information received from the eye tracking camera module, swing motion camera module, or sensing module, including the main module, and provides feedback information to the user. It can perform its function. Meanwhile, the simulator 220 according to an embodiment of the present invention may communicate with the imaging device 210 and the display device 230, and may include a dedicated processor for the virtual golf simulation system 200. Such a dedicated processor may be equipped with memory means and may be equipped with numerical computing capabilities and graphics processing capabilities.
  • the display device 230 can perform a function of visualizing and displaying feedback information according to analysis by the simulator 220.
  • This display device 230 can display a predetermined image through a predetermined display means, for example, a screen that absorbs the impact of a hit golf ball but does not emit light directly, and an image output on this screen. It may consist of a projector.
  • a plurality of images related to the hitting information about the ball, the user's gaze information, and the swing information are generated by the photographing device 210. can be obtained.
  • the simulator 220 synchronizes the above plurality of images according to time, analyzes the relationship between the ball and the user's gaze, or changes the ball as the user's gaze changes. Changes in hitting or accuracy of the user's swing can be analyzed.
  • the simulator 220 refers to the analyzed relationship and provides feedback information (e.g., in case of a user's gaze error (or when the gaze is not fixed on the ball), appropriate information that reminds the user of the need to adjust the distance between the club and the body for a swing.
  • feedback information e.g., in case of a user's gaze error (or when the gaze is not fixed on the ball)
  • appropriate information that reminds the user of the need to adjust the distance between the club and the body for a swing.
  • the display device 230 can visualize the above generated feedback information and provide it to the user.
  • the embodiments according to the present invention described above can be implemented in the form of program instructions that can be executed through various computer components and recorded on a computer-readable recording medium.
  • the computer-readable recording medium may include program instructions, data files, data structures, etc., singly or in combination.
  • Program instructions recorded on the computer-readable recording medium may be specially designed and configured for the present invention, or may be known and usable by those skilled in the computer software field.
  • Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical recording media such as CD-ROMs and DVDs, and magneto-optical media such as floptical disks. medium), and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, etc.
  • Examples of program instructions include not only machine language code such as that created by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.
  • a hardware device can be converted into one or more software modules to perform processing according to the invention and vice versa.

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Eye Examination Apparatus (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 일 태양에 따르면, 골프 스윙에 관한 피드백 정보를 제공하는 방법으로서, 적어도 하나의 모듈을 이용하여 사용자의 시선 정보, 사용자의 스윙 정보 및 공에 관한 타격 정보 중 적어도 하나의 정보를 획득하는 단계, 상기 시선 정보를 상기 타격 정보 및 상기 스윙 정보 중 적어도 하나와 동기화하는 단계, 상기 동기화된 정보에 기초하여 상기 시선 정보와 상기 스윙 정보 사이의 상관 관계 또는 상기 시선 정보와 상기 타격 정보 사이의 상관 관계를 분석하는 단계, 및 상기 분석된 관계를 참조하여 생성되는 피드백 정보를 시각화하여 제공하는 단계를 포함하는 방법이 제공된다.

Description

골프 스윙에 관한 피드백 정보를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
본 발명은 골프 스윙에 관한 피드백 정보를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체에 관한 것이다.
최근 들어, 골퍼들이 도심 등에서 적은 비용으로 가상적으로 골프를 즐기거나 골프 실력을 향상시킬 수 있도록 하는 가상 골프 시스템이 널리 보급되고 있다. 이와 같은 가상 골프 시스템은, 골퍼가 골프 공을 치면 그 골프 공을 촬영한 이미지를 다수 획득하고, 그 궤적, 간격, 크기 등에 기초하여 골프 공에 관한 물리량을 측정하며, 이를 바탕으로 시뮬레이션을 행함으로써 골프 샷의 시뮬레이션 결과를 스크린상에 표시하여 주는 것을 그 기본 컨셉으로 할 수 있다.
한편, 골프 스윙 시 상, 하체 관절의 협응력을 바탕으로 클럽 움직임(예를 들어, 클럽 스피드, 스윙 플레인)을 조정할 수 있다. 골프 스윙 실력의 향상을 위해, 초보자는 물론 숙련자는 매 샷마다 동일한 타이밍으로 공을 타격하도록 연습하는데, 시선이 볼을 응시하는 기초적인 감각 퍼포먼스가 선행되어야 한다. 즉, 골프 스윙 과정(예를 들어, 어드레스, 백 스윙, 다운 스윙 및 임팩트 단계까지의 과정)에서 약 1~2초 내외로 시선이 볼에 고정되어야 한다.
하지만, 골프 스윙 중 무의식적으로 시선을 움직이거나 깜빡이게 되어 순간적으로 클럽이 볼을 타격하는 타이밍을 잃게 됨으로써 볼에 대한 집중력이 약화되거나, 관절 간의 협응력이 감소하여 스윙의 정확성이 떨어지게 되는 경향이 있다.
따라서, 골프 실력의 향상을 위해서 골퍼의 시선 처리에 대한 피드백 제공이 필수적이나, 지금까지 가상 골프 시뮬레이션과 관련하여 소개된 기술에 의하면, 골프 공 타격으로부터 획득되는 샷 데이터(공 속도, 발사각, 백 스핀, 사이드 스핀 등)에 의존하여 골프 샷에 대한 피드백을 제공한다는 한계가 있었다.
이에 본 발명자(들)는, 적어도 하나의 모듈을 이용하여 획득되는 공에 관한 타격 정보, 사용자의 시선 정보 및 스윙 정보 중 적어도 하나의 정보를 획득하고, 시선 정보를 타격 정보 및 스윙 정보 중 적어도 하나와 동기화하고, 동기화된 정보에 기초하여 시선 정보와 스윙 정보 사이의 상관 관계 또는 시선 정보와 타격 정보 사이의 상관 관계를 분석하여 생성되는 피드백 정보를 시각화하여 사용자에게 제공함으로써 스윙의 정확성 및 집중력을 향상시키는 기술을 제안하는 바이다.
본 발명은 전술한 종래 기술의 문제점을 모두 해결하는 것을 그 목적으로 한다.
또한, 본 발명은, 시선 추적(eye tracking) 기술을 기초로 어드레스, 백 스윙 또는 임팩트 단계의 시점에 사용자의 시선의 분산도를 파악하고, 사용자가 어디를 보고 있었는지를 정확하게 측정하여 피드백 정보를 제공함으로써 사용자가 공에 시선을 고정할 수 있도록 하는 것을 다른 목적으로 한다.
또한, 본 발명은, 공이 타격되는 과정에서 사용자의 눈 깜빡임의 빈도수를 분석하여 클럽이 공을 타격하는 타이밍에 대한 사용자의 집중력을 향상시키는 것을 또 다른 목적으로 한다.
또한, 본 발명은, 어드레스 시 공과 사용자의 시선 사이의 관계를 분석하여 골프 클럽과 사용자의 신체 사이의 공간 및 위치를 조정할 수 있도록 함으로써 타격의 정확성을 높이는 것을 또 다른 목적으로 한다.
또한, 본 발명은 사용자에게 시선 처리 피드백을 제공하여 사용자가 실제로 공을 응시하고 있는지 인식할 수 있도록 함으로써 실내 연습장에서의 골프 스윙 역량과 실외 골프장에서의 골프 스윙 역량 간의 오차를 줄이는 것을 또 다른 목적으로 한다.
상기 목적을 달성하기 위한 본 발명의 대표적인 구성은 다음과 같다.
본 발명의 일 태양에 따르면, 골프 스윙에 관한 피드백 정보를 제공하는 방법으로서, 적어도 하나의 모듈을 이용하여 사용자의 시선 정보, 사용자의 스윙 정보 및 공에 관한 타격 정보 중 적어도 하나의 정보를 획득하는 단계, 상기 시선 정보를 상기 타격 정보 및 상기 스윙 정보 중 적어도 하나와 동기화하는 단계, 상기 동기화된 정보에 기초하여 상기 시선 정보와 상기 스윙 정보 사이의 상관 관계 또는 상기 시선 정보와 상기 타격 정보 사이의 상관 관계를 분석하는 단계, 및 상기 분석된 관계를 참조하여 생성되는 피드백 정보를 시각화하여 제공하는 단계를 포함하는 방법이 제공된다.
본 발명의 다른 태양에 따르면, 골프 스윙에 관한 피드백 정보를 제공하는 시스템으로서, 적어도 하나의 모듈을 이용하여 사용자의 시선 정보, 사용자의 스윙 정보 및 공에 관한 타격 정보 중 적어도 하나의 정보를 획득하고, 상기 시선 정보를 상기 타격 정보 및 상기 스윙 정보 중 적어도 하나와 동기화하는 정보 동기화부, 상기 동기화된 정보에 기초하여 상기 시선 정보와 상기 스윙 정보 사이의 상관 관계 또는 상기 시선 정보와 상기 타격 정보 사이의 상관 관계를 분석하는 관계 분석부, 및 상기 분석된 관계를 참조하여 생성되는 피드백 정보를 시각화하여 제공하는 정보 제공부를 포함하는 시스템이 제공된다.
이 외에도, 본 발명을 구현하기 위한 다른 방법, 다른 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 비일시성의 컴퓨터 판독 가능한 기록 매체가 더 제공된다.
본 발명에 의하면, 시선 추적(eye tracking) 기술을 기초로 어드레스, 백 스윙 또는 임팩트 단계의 시점에 사용자의 시선의 분산도를 파악하고, 사용자가 어디를 보고 있었는지를 정확하게 측정하여 피드백 정보를 제공함으로써 사용자가 공에 시선을 고정할 수 있게 된다.
또한, 본 발명에 의하면, 공이 타격되는 과정에서 사용자의 눈 깜빡임의 빈도수를 분석하여 클럽이 공을 타격하는 타이밍에 대한 사용자의 집중력을 향상시킬 수 있게 된다.
또한, 본 발명에 의하면, 어드레스 시 공과 사용자의 시선 사이의 관계를 분석하여 골프 클럽과 사용자의 신체 사이의 공간 및 위치를 조정할 수 있도록 함으로써 타격의 정확성을 높일 수 있게 된다.
또한, 본 발명에 의하면, 사용자에게 시선 처리 피드백을 제공하여 사용자가 실제로 공을 응시하고 있는지 인식할 수 있도록 함으로써 실내 연습장에서의 골프 스윙 역량과 실외 골프장에서의 골프 스윙 역량 간의 오차를 줄일 수 있게 된다.
도 1은 본 발명의 일 실시예에 따른 정보 제공 시스템의 내부 구성을 상세하게 도시하는 도면이다.
도 2는 본 발명의 일 실시예에 따른 가상 골프 시뮬레이션 시스템에서 본 발명에 따른 정보 제공 시스템이 활용되는 상황을 예시적으로 도시하는 도면이다.
<부호의 설명>
10: 타격부
20: 조명장치
100: 정보 제공 시스템
110: 정보 동기화부
120: 관계 분석부
130: 정보 제공부
140: 통신부
150: 제어부
200: 가상 골프 시뮬레이션 시스템
210: 촬영 장치
220: 시뮬레이터
230: 표시 장치
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이러한 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 본 명세서에 기재되어 있는 특정 형상, 구조 및 특성은 본 발명의 정신과 범위를 벗어나지 않으면서 일 실시예로부터 다른 실시예로 변경되어 구현될 수 있다. 또한, 각각의 실시예 내의 개별 구성요소의 위치 또는 배치도 본 발명의 정신과 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 행하여지는 것이 아니며, 본 발명의 범위는 특허청구범위의 청구항들이 청구하는 범위 및 그와 균등한 모든 범위를 포괄하는 것으로 받아들여져야 한다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 구성요소를 나타낸다.
이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 여러 바람직한 실시예에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.
본 발명의 일 실시예에 따른 모듈은 시선 추적 카메라 모듈, 스윙 동작 카메라 모듈, 센싱 모듈, 메인 모듈을 포함할 수 있다.
본 발명의 일 실시예에 따른 시선 추적 카메라 모듈은 시선 추적(eye tracking) 알고리즘에 기초하여 머리의 방향(예를 들어, 상, 하, 좌, 우), 눈의 방향(예를 들어, 머리에 대한 안구의 방향 또는 안구 자체의 방향), 눈 크기 또는 눈 깜빡임에 관한 정보를 획득할 수 있고, 획득한 정보를 메인 모듈로 전송할 수 있다.
본 발명의 일 실시예에 따른 스윙 동작 카메라 모듈은 신체 또는 머리의 방향에 관한 정보를 획득할 수 있고, 획득한 정보를 메인 모듈로 전송할 수 있다.
본 발명의 일 실시예에 따른 센싱 모듈은 샷 데이터(예를 들어, 발사각, 측면각, 공 속도, 백 스핀, 사이드 스핀) 또는 임팩트 시점에 대한 정보를 획득할 수 있고, 획득한 정보를 메인 모듈로 전송할 수 있다.
본 발명의 일 실시예에 따른 메인 모듈은 시선 추적 카메라 모듈, 스윙 동작 카메라 모듈 또는 센싱 모듈로부터 전송받은 정보를 조합하고, 분석하여 사용자에게 피드백 정보를 제공할 수 있다.
정보 제공 시스템의 구성
도 1는 본 발명의 일 실시예에 따른 정보 제공 시스템(100)의 내부 구성을 상세하게 도시하는 도면이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 정보 제공 시스템(100)은, 정보 동기화부(110), 관계 분석부(120), 정보 제공부(130), 통신부(140) 및 제어부(150)를 포함하여 구성될 수 있다. 본 발명의 일 실시예에 따르면, 정보 동기화부(110), 관계 분석부(120), 정보 제공부(130), 통신부(140) 및 제어부(150)는 그 중 적어도 일부가 외부의 시스템(미도시됨)과 통신하는 프로그램 모듈일 수 있다. 이러한 프로그램 모듈은 운영 시스템, 응용 프로그램 모듈 또는 기타 프로그램 모듈의 형태로 정보 제공 시스템(100)에 포함될 수 있고, 물리적으로는 여러 가지 공지의 기억 장치에 저장될 수 있다. 또한, 이러한 프로그램 모듈은 정보 제공 시스템(100)과 통신 가능한 원격 기억 장치에 저장될 수도 있다. 한편, 이러한 프로그램 모듈은 본 발명에 따라 후술할 특정 업무를 수행하거나 특정 추상 데이터 유형을 실행하는 루틴, 서브루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포괄하지만, 이에 제한되지는 않는다.
한편, 정보 제공 시스템(100)에 관하여 위와 같이 설명되었으나, 이러한 설명은 예시적인 것이고, 정보 제공 시스템(100)의 구성요소 또는 기능 중 적어도 일부가 필요에 따라 공지의 가상 골프 시뮬레이션 시스템에서 실현되거나 공지의 가상 골프 시뮬레이션 시스템 내에 포함될 수도 있음은 당업자에게 자명하다. 또한, 경우에 따라서는, 정보 제공 시스템(100)의 모든 기능과 모든 구성요소가 본 발명에 따른 가상 골프 시뮬레이션 시스템(200) 내에서 전부 실행되거나 가상 골프 시뮬레이션 시스템(200) 내에 전부 포함될 수도 있다.
먼저, 본 발명의 일 실시예에 따른 정보 동기화부(110)는, 적어도 하나의 모듈을 이용하여 사용자의 시선 정보, 사용자의 스윙 정보 및 공에 관한 타격 정보 중 적어도 하나의 정보를 획득할 수 있다.
구체적으로, 본 발명의 일 실시예에 따른 공에 관한 타격 정보는 사용자의 스윙으로부터 공이 타격됨에 따라 발생할 수 있는 물리량에 관한 정보(예를 들어, 발사각, 측면각, 임팩트 시점, 백 스핀, 사이드 스핀, 공 속도, 클럽 속도, 충격량 등)를 의미할 수 있다. 본 발명의 일 실시예에 따른 스윙 정보는 사용자의 스윙 동작에 관한 정보(예를 들어, 신체 또는 머리의 방향, 클럽과 신체 사이의 공간 및 위치, 클럽 패스 등)를 의미할 수 있다. 본 발명의 일 실시예에 따른 사용자의 시선 정보는 시선 고정 정보, 시선 추적 정보 및 시선 깜빡임 정보 중 적어도 하나를 포함할 수 있다.
보다 구체적으로, 본 발명의 일 실시예에 따른 시선 고정 정보는 사용자의 시선이 공에 고정되어 있는지 여부에 관한 정보일 수 있다. 예를 들어, 시선 고정 정보는 공이 타격되는 시점을 기준으로 하여 설정되는 타격 구간 내에서 사용자의 시선이 공을 기준으로 하여 설정되는 영역 내에 포함되어 있는지에 관한 정보를 의미할 수 있다.
본 발명의 일 실시예에 따른 시선 추적 정보는 머리의 방향(예를 들어, 상, 하, 좌, 우) 또는 눈의 방향(예를 들어, 머리에 대한 안구의 방향 또는 안구 자체의 방향)에 관한 정보를 의미할 수 있다. 예를 들어, 시선 추적 정보는 골프 스윙의 8단계적 구분(즉, 어드레스(address), 테이크 어웨이(take away), 백 스윙(back swing), 탑 오브 스윙(top of swing), 다운 스윙(down swing), 임팩트(impact), 팔로우 스루(follow through), 피니쉬(finish))에 따라 획득되는 머리의 방향 또는 눈의 방향에 관한 정보를 의미할 수 있다.
본 발명의 일 실시예에 따른 시선 깜빡임 정보는 눈 깜빡임의 빈도수에 관한 정보를 의미할 수 있다. 예를 들어, 눈 깜빡임의 빈도수가 클수록 클럽이 공을 타격하는 속도 및 임팩트 타이밍에서 오차가 커질 수 있다는 정보를 얻을 수 있다.
또한, 본 발명의 일 실시예에 따른 정보 동기화부(110)는, 획득한 사용자의 시선 정보를 사용자의 스윙 정보 및 공에 관한 타격 정보 중 적어도 하나와 동기화할 수 있다.
구체적으로, 본 발명의 일 실시예에 따른 공에 관한 타격 정보, 사용자의 시선 정보 또는 스윙 정보는 소정의 시간이나 소정의 프레임의 간격으로 획득되어 동기화될 수 있다. 예를 들어, 본 발명의 일 실시예에 따라 획득된 사용자의 시선 정보는 공에 관한 타격 정보 및 사용자의 스윙 정보 중 적어도 하나와 소정의 시간이나 소정의 프레임 간격으로 동기화될 수 있다.
보다 구체적으로, 본 발명의 일 실시예에 따른 정보 동기화부(110)는 적어도 하나의 모듈(예를 들어, 시선 추적 카메라 모듈, 스윙 동작 카메라 모듈, 센싱 모듈)로부터 복수의 이미지를 소정의 시간이나 소정의 프레임의 간격(예를 들어, 1초당 프레임 수(FPS; Frame Per Second)에 기초하여 설정될 수 있음)으로 획득할 수 있고, 복수의 이미지로부터 획득된 사용자의 시선 정보를 공에 관한 타격 정보 또는 사용자의 스윙 정보와 시간에 따라 동기화할 수 있다. 여기서, 각각의 모듈로부터 위의 정보들이 획득되는 과정에서 시간 오차가 발생할 수 있는데, 공통적인 시간 흐름을 위한 기준을 설정하고, 기준에 맞게 복수의 이미지를 내삽 또는 외삽하는 방식으로 이를 보정할 수 있다.
다음으로, 본 발명의 일 실시예에 따른 관계 분석부(120)는, 동기화된 정보에 기초하여 사용자의 시선 정보와 사용자의 스윙 정보 사이의 상관 관계 또는 사용자의 시선 정보와 공에 관한 타격 정보 사이의 상관 관계를 분석할 수 있다. 여기서, 본 발명의 일 실시예에 따른 상관 관계는 사용자의 시선 정보가 변화함에 따라 공에 관한 타격 정보 또는 스윙 정보가 변화하는 정도를 나타내는 관계를 의미할 수 있다. 또한, 본 발명의 일 실시예에 따른 상관 관계는 공에 관한 타격 정보 또는 스윙 정보가 변화함에 따라 사용자의 시선 정보가 변화하는 정도를 나타내는 관계를 의미할 수 있다.
예를 들어, 본 발명의 일 실시예에 따른 사용자의 시선 정보와 공에 관한 타격 정보 사이의 상관 관계는 공이 임팩트 될 때 사용자의 시선 처리(예를 들어, 시선의 고정, 시선의 분산, 눈 깜빡임 등)로 인하여 클럽의 움직임이 영향을 받았는지에 대해 나타내는 관계를 의미할 수 있다. 또 다른 예를 들어, 본 발명의 일 실시예에 따른 사용자의 시선 정보와 스윙 정보 사이의 상관 관계는 사용자의 스윙 과정에서 스윙 구분 단계(예를 들어, 어드레스, 백 스윙, 임팩트)에 따른 사용자의 시선 처리(예를 들어, 시선의 고정, 시선의 분산, 눈 깜빡임 등)에 대해 나타내는 관계를 의미할 수 있다.
보다 구체적으로, 본 발명의 일 실시예에 따른 관계 분석부(120)는 복수의 사용자의 시선 정보 (예를 들어, 눈의 방향, 안구 자체의 방향), 공에 관한 타격 정보 (예를 들어, 발사각, 측면각, 임팩트 시점, 백 스핀, 사이드 스핀, 공 속도, 클럽 속도, 충격량 등) 및 스윙 정보 (예를 들어, 신체 또는 머리의 방향, 클럽과 신체 사이의 공간 및 위치, 클럽 패스 등)를 기초로 사전 학습된 인공지능 모델에 기반하여, 사용자의 시선이 달라짐에 따라 공에 관한 타격 또는 사용자의 스윙의 정확성이 달라지는 것에 대하여 분석할 수 있다.
예를 들어, 사용자의 시선 위치에 따라 사전 학습된 인공지능 모델에 의해 예상되는 적절한 클럽 패스가 달라질 수 있다. 여기서, 적절한 클럽 패스가 달라짐에 따라 적절한 스윙 동작이 달라질 수 있고, 적절한 스윙 동작과 사용자의 스윙과의 차이를 분석할 수 있게 된다.
한편, 본 발명의 일 실시예에 따른 관계 분석부(120)는 동기화된 정보에 기초하여 공과 사용자의 시선 사이의 관계를 분석할 수 있다.
구체적으로, 본 발명의 일 실시예에 따르면, 관계 분석부(120)는 공이 타격되는 시점(또는 임팩트 시점)을 기준으로 하여 설정되는 타격 구간 내에서 사용자의 시선이 공을 기준으로 하여 설정되는 영역 내에 포함되어 있는지 여부를 판단할 수 있다.
보다 구체적으로, 본 발명의 일 실시예에 따르면, 관계 분석부(120)는 공이 타격되는 시점(또는 임팩트 시점)을 기준으로 약 0.05초 동안 사용자의 시선이 공에 고정되어 있는지 여부를 판단하고, 클럽과 사용자의 신체 사이의 공간 및 위치에 대하여 분석할 수 있다.
또한, 본 발명의 일 실시예에 따르면, 관계 분석부(120)는 공이 타격되는 과정에서 사용자의 눈 깜빡임의 빈도수에 근거하여 사용자의 집중도를 판단할 수 있다.
보다 구체적으로, 관계 분석부(120)는 사용자의 눈 깜빡임의 빈도수의 변화에 따른 클럽과 사용자의 신체 사이의 공간 및 위치의 변화를 분석함으로써 사용자의 집중도를 판단할 수 있다.
다음으로, 본 발명의 일 실시예에 따른 정보 제공부(130)는, 분석된 관계를 참조하여 생성되는 피드백 정보를 시각화하여 제공할 수 있다.
본 발명의 일 실시예에 따른 피드백 정보는 사용자의 스윙으로부터 공의 타격이 최적화될 수 있도록 사용자의 신체, 머리 또는 시선의 방향, 위치 또는 거리에 관한 변화의 필요성을 상기시키기 위한 정보로서, 음성, 텍스트, 그래픽, 자막 등을 의미할 수 있다. 예를 들어, 본 발명의 일 실시예에 따른 피드백 정보는 사용자의 시선 정보를 참조하여 생성될 수 있다.
보다 구체적으로, 본 발명의 일 실시예에 따른 정보 제공부(130)는 공을 타격하는 과정에서 사용자의 시선이 공을 기준으로 하여 설정되는 영역을 벗어난 경우(또는 사용자의 시선 오류가 발생한 경우), 자막을 통해 다음 타격에서는 공에 시선을 고정하라는 문구(또는 클럽과 신체 사이의 거리를 조정하라는 문구)를 제공할 수 있다. 이를 통해, 사용자의 시선 오류를 기초로 스윙 오류가 발생한다는 관점에서 사용자의 시선 오류를 바로잡을 수 있는 피드백 정보를 제공함으로써 타격의 정확성을 향상시킬 수 있다.
또 다른 예를 들어, 정보 제공부(130)는 공을 타격하는 과정에서 사용자의 눈 깜빡임 빈도수가 크다고 판단되는 경우, 눈 깜빡임을 줄이라는 취지의 문구를 제공할 수 있다.
한편, 본 발명의 일 실시예에 따른 정보 제공부(130)는 관계 분석부(120)에서 분석된 사용자의 시선 정보와 공에 관한 타격 정보 사이의 상관 관계 또는 사용자의 시선 정보와 스윙 정보 사이의 상관 관계를 참조하여 생성된 피드백 정보를 시각화하여 제공할 수 있다.
예를 들어, 정보 제공부(130)는 사용자의 시선이 달라짐에 따라 공에 관한 타격 또는 사용자의 스윙의 정확성이 달라지는 것에 관하여 사용자가 인지할 수 있도록 생성된 피드백 정보를 시각화하여 제공할 수 있다.
또한, 본 발명의 일 실시예에 따른 피드백 정보는 스윙 정보와 결합되어 제공될 수 있다. 예를 들어, 첫 번째 타격인 제1 타격과 두 번째 타격인 제2 타격이 있다고 가정하였을 때, 정보 제공부(130)는 제2 타격 전에 제1 타격에서의 사용자의 시선 및 사용자의 스윙 동작을 시각화하여 사용자에게 제공할 수 있다.
또 다른 예를 들어, 정보 제공부(130)는 최적화된 타격이 발생하였을 경우에 대응하는 사용자의 시선 및 사용자의 스윙 동작을 시각화하여 사용자에게 제공할 수 있다.
다음으로, 본 발명의 일 실시예에 따른 통신부(140)는 정보 동기화부(110), 관계 분석부(120) 및 정보 제공부(130)로부터의/로의 데이터 송수신이 가능하도록 하는 기능을 수행할 수 있다.
마지막으로, 본 발명의 일 실시예에 따른 제어부(150)는 정보 동기화부(110), 관계 분석부(120), 정보 제공부(130) 및 통신부(140) 간의 데이터의 흐름을 제어하는 기능을 수행할 수 있다. 즉, 본 발명의 일 실시예에 따른 제어부(150)는 정보 제공 시스템(100)의 외부로부터의/로의 데이터 흐름 또는 정보 제공 시스템(100)의 각 구성요소 간의 데이터 흐름을 제어함으로써, 정보 동기화부(110), 관계 분석부(120), 정보 제공부(130) 및 통신부(140)에서 각각 고유 기능을 수행하도록 제어할 수 있다.
도 2는 본 발명의 일 실시예에 따른 가상 골프 시뮬레이션 시스템(200)에서 본 발명에 따른 정보 제공 시스템(100)이 활용되는 상황을 예시적으로 도시하는 도면이다.
도 2에 도시된 바와 같이, 가상 골프 시뮬레이션 시스템(200)은 타격부(10), 조명 장치(20), 촬영 장치(210), 시뮬레이터(220) 및 표시 장치(230)를 포함하여 구성될 수 있다. 또한, 본 발명의 일 실시예에 따른 시뮬레이터(220)에는 본 발명에 따른 정보 제공 시스템(100)이 포함될 수 있다.
먼저, 본 발명의 일 실시예에 따른 타격부(10)는 골퍼가 가상 골프 시뮬레이션 시스템(200)을 이용할 때에 발을 딛고 올라서서 골프 공을 놓고 치는 부분일 수 있다. 이러한 타격부(10)는 그 경사각이 조절될 수 있는 공지의 스윙 플레이트를 포함할 수 있다. 참고로, 본 발명이 다른 종류의 가상 스포츠 시뮬레이터 시스템에 적용되는 경우에, 당업자는 타격부(10)의 구성을, 필요한 경우 그와 함께 연동하는 다른 구성요소의 구성과 함께, 해당 스포츠의 특성에 맞도록 적절하게 변경할 수 있다.
다음으로, 본 발명의 일 실시예에 따른 조명 장치(20)는 골퍼가 실내나 실외에서 가상 골프를 즐기는 경우에 인위적으로 빛을 조사할 수 있는 장치일 수 있다. 이러한 조명 장치(20)는 필요에 따라 켜지고 꺼지거나 그 밝기가 조절될 수 있다. 바람직하게는, 조명 장치(20)는 빛의 떨림 현상으로 인한 복수의 이미지의 자연적인 열화를 막기 위한 적외선 조명(예를 들어, LED 조명)일 수 있다.
다음으로, 본 발명의 일 실시예에 따른 촬영 장치(210)는 적어도 하나의 모듈(예를 들어, 시선 추적 카메라 모듈, 스윙 동작 카메라 모듈, 센싱 모듈 등)(미도시됨)를 포함하여 공에 관한 타격 정보, 사용자의 시선 정보, 스윙 정보에 관한 복수의 이미지를 획득하는 기능을 수행할 수 있다. 이러한 촬영 장치(210)는 움직이는 골프 클럽 헤드를 위에서 아래로 내려다보는 위치에 배치될 수 있지만, 기타 다른 위치에 배치될 수도 있다. 한편, 본 발명의 일 실시예에 따른 촬영 장치(210)는 촬영 속도가 상이한 적어도 두 개의 카메라를 이용하여 복수의 이미지를 순차적으로 획득함으로써 고속 카메라와 유사한 성능을 구현하거나, 두 개의 2차원 카메라를 이용하여 복수의 이미지를 동시에 획득함으로써 3차원 카메라와 유사한 성능을 구현할 수 있다.
다음으로, 본 발명의 일 실시예에 따른 시뮬레이터(220)는 메인 모듈을 포함하여 시선 추적 카메라 모듈, 스윙 동작 카메라 모듈 또는 센싱 모듈로부터 전송받은 정보를 조합하고, 분석하여 사용자에게 피드백 정보를 제공하는 기능을 수행할 수 있다. 한편, 본 발명의 일 실시예에 따른 시뮬레이터(220)는 촬영 장치(210) 및 표시 장치(230)와 통신할 수 있고, 가상 골프 시뮬레이션 시스템(200)을 위한 전용 프로세서를 포함할 수 있다. 이러한 전용 프로세서는 메모리 수단을 구비하고 수치 연산 능력과 그래픽 처리 능력을 갖춘 것일 수 있다.
마지막으로, 본 발명의 일 실시예에 따른 표시 장치(230)는 시뮬레이터(220)의 분석에 따른 피드백 정보를 시각화하여 표시하여 주는 기능을 수행할 수 있다. 이러한 표시 장치(230)는 소정의 디스플레이 수단을 통하여 소정의 영상을 표시할 수 있는데, 예를 들면, 타격된 골프 공의 충격을 흡수하는 한편 직접 발광하지는 않는 스크린과, 이러한 스크린에 영상을 출력하는 프로젝터로 구성될 수 있다.
이하에서는, 이상에서 살펴본 가상 골프 시뮬레이션 시스템(200)을 이용하여 사용자가 골프 공을 타격하는 경우에 공과 사용자의 시선 사이의 관계를 분석하여 피드백 정보를 사용자에게 제공하는 과정을 살펴본다.
먼저, 본 발명의 일 실시예에 따른 타격부(10)에서 사용자에 의해 골프 공이 타격되면, 촬영 장치(210)에 의해 공에 관한 타격 정보, 사용자의 시선 정보 및 스윙 정보에 관한 복수의 이미지가 획득될 수 있다.
그 다음에, 본 발명의 일 실시예에 따른 시뮬레이터(220)는 위의 복수의 이미지를 시간에 따른 동기화를 진행하고, 공과 사용자의 시선 사이의 관계를 분석하거나 사용자의 시선이 달라짐에 따라 공에 관한 타격 또는 사용자의 스윙의 정확성이 달라지는 것에 대하여 분석할 수 있다.
그 다음에, 본 발명의 일 실시예에 따른 시뮬레이터(220)는 분석된 관계를 참조하여 피드백 정보(예를 들어, 사용자의 시선 오류(또는 시선이 공에 고정되어 있지 않은 경우)의 경우, 적절한 스윙을 위해 클럽과 신체 사이의 거리를 조정해야 할 필요성을 사용자에게 상기시키는 정보)를 생성할 수 있다.
그 다음에, 본 발명의 일 실시예에 따른 표시장치(230)는 위의 생성된 피드백 정보를 시각화하여 사용자에게 제공할 수 있다.
이상 설명된 본 발명에 따른 실시예는 다양한 컴퓨터 구성요소를 통하여 실행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위하여 하나 이상의 소프트웨어 모듈로 변경될 수 있으며, 그 역도 마찬가지이다.
이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항과 한정된 실시예 및 도면에 의하여 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위하여 제공된 것일 뿐, 본 발명이 상기 실시예에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정과 변경을 꾀할 수 있다.

Claims (13)

  1. 골프 스윙에 관한 피드백 정보를 제공하는 방법으로서,
    적어도 하나의 모듈을 이용하여 사용자의 시선 정보, 사용자의 스윙 정보 및 공에 관한 타격 정보 중 적어도 하나의 정보를 획득하는 단계,
    상기 시선 정보를 상기 타격 정보 및 상기 스윙 정보 중 적어도 하나와 동기화하는 단계,
    상기 동기화된 정보에 기초하여 상기 시선 정보와 상기 스윙 정보 사이의 상관 관계 또는 상기 시선 정보와 상기 타격 정보 사이의 상관 관계를 분석하는 단계, 및
    상기 분석된 관계를 참조하여 생성되는 피드백 정보를 시각화하여 제공하는 단계를 포함하는
    방법.
  2. 제1항에 있어서,
    상기 사용자의 시선 정보는 시선 고정 정보, 시선 추적 정보 및 시선 깜빡임 정보 중 적어도 하나의 정보를 포함하는
    방법.
  3. 제1항에 있어서,
    상기 획득 단계에서, 상기 적어도 하나의 정보는 소정의 시간이나 소정의 프레임의 간격으로 획득되는
    방법.
  4. 제2항에 있어서,
    상기 분석 단계에서, 상기 공이 타격되는 시점을 기준으로 하여 설정되는 타격 구간 내에서 상기 사용자의 시선이 상기 공을 기준으로 하여 설정되는 영역 내에 포함되어 있는지 여부를 판단하는
    방법.
  5. 제2항에 있어서,
    상기 분석 단계에서, 상기 공이 타격되는 과정에서 상기 사용자의 눈 깜빡임의 빈도수에 근거하여 상기 사용자의 집중도를 판단하는
    방법.
  6. 제1항에 있어서,
    상기 제공 단계에서, 상기 피드백 정보는 상기 스윙 정보와 결합되어 제공되는
    방법.
  7. 제1항에 따른 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 비일시성의 컴퓨터 판독 가능 기록 매체.
  8. 골프 스윙에 관한 피드백 정보를 제공하는 시스템으로서,
    적어도 하나의 모듈을 이용하여 사용자의 시선 정보, 사용자의 스윙 정보 및 공에 관한 타격 정보 중 적어도 하나의 정보를 획득하고, 상기 시선 정보를 상기 타격 정보 및 상기 스윙 정보 중 적어도 하나와 동기화하는 정보 동기화부,
    상기 동기화된 정보에 기초하여 상기 시선 정보와 상기 스윙 정보 사이의 상관 관계 또는 상기 시선 정보와 상기 타격 정보 사이의 상관 관계를 분석하는 관계 분석부, 및
    상기 분석된 관계를 참조하여 생성되는 피드백 정보를 시각화하여 제공하는 정보 제공부를 포함하는
    시스템.
  9. 제8항에 있어서,
    상기 사용자의 시선 정보는 시선 고정 정보, 시선 추적 정보 및 시선 깜빡임 정보 중 적어도 하나의 정보를 포함하는
    시스템.
  10. 제8항에 있어서,
    상기 적어도 하나의 정보는 소정의 시간이나 소정의 프레임의 간격으로 획득되는
    시스템.
  11. 제9항에 있어서,
    상기 관계 분석부는, 상기 공이 타격되는 시점을 기준으로 하여 설정되는 타격 구간 내에서 상기 사용자의 시선이 상기 공을 기준으로 하여 설정되는 영역 내에 포함되어 있는지 여부를 판단하는
    시스템.
  12. 제9항에 있어서,
    상기 관계 분석부는, 상기 공이 타격되는 과정에서 상기 사용자의 눈 깜빡임의 빈도수에 근거하여 상기 사용자의 집중도를 판단하는
    시스템.
  13. 제8항에 있어서,
    상기 정보 제공부는, 상기 피드백 정보를 상기 스윙 정보와 결합하여 제공하는
    시스템.
PCT/KR2023/000772 2022-06-02 2023-01-17 골프 스윙에 관한 피드백 정보를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체 WO2023234512A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020220067855A KR20230167668A (ko) 2022-06-02 2022-06-02 골프 스윙에 관한 피드백 정보를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
KR10-2022-0067855 2022-06-02

Publications (1)

Publication Number Publication Date
WO2023234512A1 true WO2023234512A1 (ko) 2023-12-07

Family

ID=89025119

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2023/000772 WO2023234512A1 (ko) 2022-06-02 2023-01-17 골프 스윙에 관한 피드백 정보를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체

Country Status (3)

Country Link
KR (1) KR20230167668A (ko)
TW (1) TW202412895A (ko)
WO (1) WO2023234512A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110122656A (ko) * 2011-09-29 2011-11-10 한준희 골프 연습 장치와 이를 이용한 방법
KR101247748B1 (ko) * 2011-05-04 2013-03-26 경북대학교 산학협력단 사용자 집중도 분석장치 및 방법
KR20130071068A (ko) * 2011-12-20 2013-06-28 양성경 골프 스윙 분석기
KR101282953B1 (ko) * 2011-05-25 2013-07-08 한국과학기술연구원 스포츠 동작 코칭 시스템 및 방법
JP2018175496A (ja) * 2017-04-14 2018-11-15 美津濃株式会社 スイング解析装置、スイング解析方法、およびスイング解析システム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100918302B1 (ko) 2008-01-14 2009-09-22 (주) 골프존 모의 골프시스템의 센서장치 및 이를 이용한 센싱 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101247748B1 (ko) * 2011-05-04 2013-03-26 경북대학교 산학협력단 사용자 집중도 분석장치 및 방법
KR101282953B1 (ko) * 2011-05-25 2013-07-08 한국과학기술연구원 스포츠 동작 코칭 시스템 및 방법
KR20110122656A (ko) * 2011-09-29 2011-11-10 한준희 골프 연습 장치와 이를 이용한 방법
KR20130071068A (ko) * 2011-12-20 2013-06-28 양성경 골프 스윙 분석기
JP2018175496A (ja) * 2017-04-14 2018-11-15 美津濃株式会社 スイング解析装置、スイング解析方法、およびスイング解析システム

Also Published As

Publication number Publication date
KR20230167668A (ko) 2023-12-11
TW202412895A (zh) 2024-04-01

Similar Documents

Publication Publication Date Title
US11132533B2 (en) Systems and methods for creating target motion, capturing motion, analyzing motion, and improving motion
WO2013043020A2 (ko) 복수의 카메라로 운동하는 피사체를 촬영하고 그 촬영 이미지에 기초하여 피사체의 실제의 운동 궤적을 획득하기 위한 방법 및 시스템
US9720230B2 (en) Head mounted display, detection device, control method for head mounted display, and computer program
WO2011065802A2 (en) Virtual golf simulation device, system including the same and terminal device, and method for virtual golf simulation
WO2013115529A1 (en) Virtual golf simulation apparatus and method for supporting generation of virtual green
WO2019177363A1 (ko) 가상 테니스 시뮬레이션을 위한 테니스 인공지능 구현 방법, 이를 이용한 가상 테니스 시뮬레이션 시스템 및 방법과, 이를 기록한 컴퓨팅장치에 의해 판독 가능한 기록매체
US7740352B2 (en) Sports vision training device and method
JP7051315B2 (ja) ボールの回転を測定するための方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体
GB2567579A (en) Billiard ball striking assistance method, billiard ball striking assistance system, and portable electronic device
WO2012128568A2 (ko) 가상 골프 시뮬레이션 장치와, 이에 이용되는 센싱장치 및 센싱방법
WO2022004961A1 (ko) 두 개의 골프영상과 결과 데이터를 하나로 겹쳐서 확인하는 어플리케이션을 이용한 자세비교 및 교정 방법
WO2017052008A1 (ko) 관람위치 변경이 가능한 가상현실안경을 포함하는 가상현실 시스템
WO2011065804A2 (en) Apparatus for virtual golf simulation and method for the same
WO2011081470A2 (en) Apparatus and method for virtual golf simulation imaging sub display and replay display
JP7076955B2 (ja) ボールの画像の明るさを補正するための方法、システム、及び非一時的なコンピュータ読み取り可能な記録媒体
US20230285832A1 (en) Automatic ball machine apparatus utilizing player identification and player tracking
WO2018139810A1 (ko) 운동하는 객체의 위치 정보를 산출하기 위한 센싱장치 및 이를 이용한 센싱방법
WO2023234512A1 (ko) 골프 스윙에 관한 피드백 정보를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
TW202146084A (zh) 高爾夫球桿揮桿動作追蹤與分析的可攜式裝置、方法與系統
WO2023211034A1 (ko) 골프 공에 관한 구질 정보를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
WO2017179884A1 (ko) 골프스윙 보조기구
WO2015030534A1 (en) Golf practice system for providing golf lesson information and information processing method for providing golf lesson information using the same
CN206162397U (zh) 虚拟屏幕射击游戏***
WO2021075753A2 (ko) 골프 스윙에 관한 정보를 추정하기 위한 방법, 디바이스 및 비일시성의 컴퓨터 판독 가능한 기록 매체
WO2021145654A1 (ko) 골프 클럽과 연관되는 물리량을 측정하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23816185

Country of ref document: EP

Kind code of ref document: A1