WO2018220948A1 - 情報処理装置、情報処理方法およびプログラム - Google Patents

情報処理装置、情報処理方法およびプログラム Download PDF

Info

Publication number
WO2018220948A1
WO2018220948A1 PCT/JP2018/010434 JP2018010434W WO2018220948A1 WO 2018220948 A1 WO2018220948 A1 WO 2018220948A1 JP 2018010434 W JP2018010434 W JP 2018010434W WO 2018220948 A1 WO2018220948 A1 WO 2018220948A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
user
swing
terminal
generation information
Prior art date
Application number
PCT/JP2018/010434
Other languages
English (en)
French (fr)
Inventor
哲志 山崎
基行 杉岡
鈴木　毅
一浩 中込
嘉行 宮本
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US16/617,249 priority Critical patent/US20200094122A1/en
Priority to EP18808846.2A priority patent/EP3632512B1/en
Priority to KR1020197032982A priority patent/KR20200015890A/ko
Priority to JP2019521968A priority patent/JPWO2018220948A1/ja
Priority to CA3064504A priority patent/CA3064504A1/en
Publication of WO2018220948A1 publication Critical patent/WO2018220948A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/003—Repetitive work cycles; Sequence of movements
    • G09B19/0038—Sports
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006—Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00—Training appliances or apparatus for special sports
    • A63B69/36—Training appliances or apparatus for special sports for golf
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00—Training appliances or apparatus for special sports
    • A63B69/36—Training appliances or apparatus for special sports for golf
    • A63B69/3605—Golf club selection aids informing player of his average or expected shot distance for each club
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00—Training appliances or apparatus for special sports
    • A63B69/36—Training appliances or apparatus for special sports for golf
    • A63B69/3623—Training appliances or apparatus for special sports for golf for driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0625—Emitting sound, noise or music
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B2071/0694—Visual indication, e.g. Indicia
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/05—Image processing for measuring physical parameters
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/806—Video cameras
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/83—Special sensors, transducers or devices therefor characterised by the position of the sensor
    • A63B2220/833—Sensors arranged on the exercise apparatus or sports implement

Definitions

  • This disclosure relates to an information processing apparatus, an information processing method, and a program.
  • the feedback information for the first generation information generated using the detection result of the event based on the sensor information indicating the information related to the first user playing golf is the first information.
  • An information processing apparatus comprising: an acquisition unit that acquires from a terminal of a second user different from one user; and a transmission control unit that controls transmission of the feedback information to the terminal of the first user is provided.
  • the feedback information for the first generation information generated using the detection result of the event based on the sensor information indicating the information related to the first user playing golf is the first information.
  • An information processing method including: obtaining from a terminal of a second user different from one user; and controlling transmission of the feedback information to the terminal of the first user by a processor.
  • the computer provides feedback information for the first generated information generated using the detection result of the event based on the sensor information indicating the information related to the first user playing golf.
  • An information processing apparatus comprising: an acquisition unit that acquires from a terminal of a second user different from the first user; and a transmission control unit that controls transmission of the feedback information to the terminal of the first user. A program for functioning is provided.
  • FIG. It is a figure showing an example of composition of an information processing system concerning an embodiment of this indication. It is a block diagram showing an example of functional composition of a server concerning an embodiment of this indication.
  • 3 is a block diagram illustrating a functional configuration example of a terminal according to an embodiment of the present disclosure.
  • FIG. It is a figure which shows the sensor list which comprises a sensor apparatus. It is a figure which shows the list
  • a plurality of constituent elements having substantially the same or similar functional configuration may be distinguished by adding different numerals after the same reference numerals. However, when it is not necessary to particularly distinguish each of a plurality of constituent elements having substantially the same or similar functional configuration, only the same reference numerals are given.
  • similar components in different embodiments may be distinguished by attaching different alphabets after the same reference numerals. However, if it is not necessary to distinguish each similar component, only the same reference numerals are given.
  • FIG. 1 is a diagram illustrating a configuration example of an information processing system according to an embodiment of the present disclosure.
  • the information processing system 1 includes a server 10, a terminal 20-1, a terminal 20-2, and a sensor device 30.
  • the server 10, the terminal 20-1, and the terminal 20-2 are connected to a network and configured to be able to communicate with each other via the network.
  • the server 10 is configured by a computer, and is configured to be able to communicate with the terminal 20-1 and the terminal 20-2 via a network. Further, when another terminal is connected to the network, the server 40 can also communicate with the other terminal via the network. Note that the server 10 can function as an information processing apparatus.
  • the terminal 20-1 is used by the first user.
  • the first user is a student who takes a sports lesson from the second user.
  • the first user is not limited to this example.
  • the terminal 20-1 is a smartphone.
  • the terminal 20-1 is not limited to a smartphone.
  • the terminal 20-1 may be a mobile phone, a tablet terminal, or an imaging device.
  • the imaging device may be a digital camera or the like.
  • the terminal 20-1 can also function as an information processing apparatus.
  • the terminal 20-2 is used by a second user different from the first user.
  • the second user is a trainer who teaches golf to the first user by a lesson.
  • the second user is not limited to such an example.
  • the terminal 20-2 is a smartphone.
  • the terminal 20-2 is not limited to a smartphone.
  • the terminal 20-2 may be a mobile phone, a tablet terminal, or an imaging device.
  • the imaging device may be a digital camera or the like.
  • the terminal 20-2 can also function as an information processing apparatus.
  • golf is described as an example of sport.
  • the sport applicable to this embodiment is not limited to golf.
  • the sport may be any of baseball, tennis, table tennis, lacrosse, hockey, squash, and badminton.
  • the sensor device 30 is attached to a club used when playing golf.
  • the position where the sensor device 30 is attached is not limited to the club.
  • the sensor device 30 may be attached to a user who plays golf.
  • the sensor device 30 may be attached to various tools (for example, a racket, a bat, etc.) used by the user instead of the club.
  • a racket for example, a racket, a bat, etc.
  • an example in which the sensor device 30 is attached to a club used when a student plays golf will be mainly described.
  • the sensor device 30 is configured to be capable of wireless communication with a pairing partner.
  • the sensor device 30 can perform wireless communication with the terminal 20-1 when paired with the terminal 20-1 used by the student.
  • the sensor device 30 can perform wireless communication with the terminal 20-2 when paired with the terminal 20-2 used by the trainer.
  • FIG. 2 is a block diagram illustrating a functional configuration example of the server 10 according to the embodiment of the present disclosure.
  • the server 10 includes a control unit 110, a storage unit 130, and a communication unit 140.
  • these functional blocks included in the server 10 will be described.
  • the control unit 110 may be configured by a processing device such as one or a plurality of CPUs (Central Processing Units). When these blocks are configured by a processing device such as a CPU, the processing device may be configured by an electronic circuit.
  • the control unit 110 includes an acquisition unit 112, a calculation unit 113, and a transmission control unit 114. These blocks will be described in detail later.
  • the storage unit 130 includes a memory, and is a recording device that stores a program executed by the control unit 110 and stores data necessary for executing the program.
  • the storage unit 130 temporarily stores data for calculation by the control unit 110.
  • the storage unit 130 may be a magnetic storage unit device, a semiconductor storage device, an optical storage device, or a magneto-optical storage device.
  • the communication unit 140 includes a communication circuit and has a function of performing communication with other devices via a network.
  • the communication unit 140 is configured by a communication interface.
  • the communication unit 140 can communicate with the terminal 20-1 and with the terminal 20-2 via the network.
  • FIG. 3 is a block diagram illustrating a functional configuration example of the terminal 20 according to the embodiment of the present disclosure.
  • the terminal 20 includes a control unit 210, an operation unit 220, an imaging unit 225, a storage unit 230, a communication unit 240, and an output unit 250.
  • these functional blocks included in the terminal 20 will be described.
  • the control unit 210 may be configured by a processing device such as one or a plurality of CPUs (Central Processing Units). When these blocks are configured by a processing device such as a CPU, the processing device may be configured by an electronic circuit.
  • a processing device such as one or a plurality of CPUs (Central Processing Units).
  • CPUs Central Processing Units
  • the processing device may be configured by an electronic circuit.
  • the operation unit 220 has a function of receiving an operation input by the user.
  • the operation unit 220 is not limited to a touch panel.
  • the operation unit 220 may include a mouse, a keyboard, a switch, a lever, and the like.
  • the operation unit 220 may include a microphone that detects the user's voice.
  • the imaging unit 225 includes one or a plurality of image sensors, and captures a user playing golf to obtain a moving image.
  • the moving image captured by the imaging unit 225 is output to the control unit 210.
  • the storage unit 230 includes a memory, and is a recording device that stores a program executed by the control unit 210 and stores data necessary for executing the program.
  • the storage unit 230 temporarily stores data for calculation by the control unit 210.
  • the storage unit 230 may be a magnetic storage unit device, a semiconductor storage device, an optical storage device, or a magneto-optical storage device.
  • the communication unit 240 includes a communication circuit, and has a function of performing communication with other devices via a network.
  • the communication unit 240 is configured by a communication interface.
  • the communication unit 240 can communicate with the server 10 via a network.
  • the communication unit 240 performs wireless communication with the sensor device 30.
  • the output unit 250 outputs various types of information.
  • the output unit 250 may include a display capable of performing display visible to the user, and the display may be a liquid crystal display or an organic EL (Electro-Luminescence) display.
  • the output unit 250 may include an audio output device such as a speaker.
  • the output unit 250 may include a tactile presentation device that presents a tactile sensation to the user.
  • the acquisition unit 112 in the server 10 corresponds to the first generation information generated using the detection result of the event based on the sensor information indicating information related to the student playing golf.
  • Feedback information is obtained from the terminal 20-2 of the trainer.
  • the transmission control unit 114 also controls transmission of feedback information to the student terminal 20-1.
  • the sensor information is detected by the sensor device 30 attached to the student.
  • the sensor information may be detected by the sensor device 30 attached to the club.
  • the generation information mainly includes a case where “swing video” extracted based on the event detection result and “analysis data” obtained based on the event detection result are included.
  • the generation information may include at least one of “swing video” and “analysis data”.
  • FIG. 4 is a diagram showing a sensor list that constitutes the sensor device 30.
  • the sensor type, manufacturer, model number, full scale, and ADC (Analog to Digital Converter) resolution are determined for three types of sensors.
  • the sensor device 30 may be configured by any of these three types of sensors.
  • the sensor device 30 may be configured by a sensor other than these three types of sensors.
  • FIG. 5 is a diagram showing a list of transmission data from the sensor device 30 to the partner paired with the sensor device 30.
  • the sensor device 30 may transmit data indicated by “data type” of “axis” to the pairing partner.
  • the characteristics of the data transmitted from the sensor device 30 to the pairing partner may be as shown in “Number of Bits”, “Full Scale”, and “Sampling Rate”.
  • the data transmitted from the sensor device 30 to the pairing partner may be input to the pairing partner's golf application.
  • FIG. 6 is a diagram illustrating an example of analysis data of data received from the sensor device 30 by the pairing partner.
  • various analysis data as shown in “Overview” in FIG. 6 is obtained.
  • various types of analysis data are shown as “data types”, and a range that the analysis data can take is shown as “ranges”.
  • data analysis may be executed by the server 10 instead of the pairing partner.
  • FIG. 7 is a diagram for explaining an example of screen transition when sign-in is performed.
  • the terminal 20-2 when a golf application activation operation by the trainer is input by the operation unit 220, a sign-in screen 500 is displayed by the output unit 250 as shown in FIG.
  • an ID (sign-in ID) and a password are input from the trainer on the sign-in screen 500 and authentication based on the ID and password is successful
  • the output unit 250 displays the trainer main screen 510 in the terminal 20-2. Details of the trainer main screen 510 will be described later with reference to FIG.
  • the sign-in screen 500 is displayed by the output unit 250 as shown in FIG.
  • an ID signal-in ID
  • a password are input from the student on the sign-in screen 500 and authentication based on the ID and password is successful
  • the output unit 250 displays the student main screen 520 in the terminal 20-1. Details of the student main screen 520 will be described later with reference to FIG.
  • FIG. 8 is a diagram showing an example of a trainer main screen 510 displayed on the terminal 20-2.
  • the trainer main screen 510 includes objects (student selection objects) corresponding to each of one or more students (students 1 to 3 in the example shown in FIG. 8) that the trainer is responsible for.
  • Information regarding one or more students that the trainer is responsible for is stored by the server 10 and acquired from the server 10 by the terminal 20-2.
  • a student main screen 520 (FIG. 11) corresponding to the student selection object is displayed on the terminal 20-2.
  • the trainer main screen 510 is switched to a group-unit trainer screen.
  • FIG. 9 is a diagram showing an example of a trainer screen 511 for each group displayed on the terminal 20-2.
  • the group-unit trainer screen 511 includes student selection objects corresponding to one or more users (students and / or trainers) in group units. Information regarding users belonging to each group is stored by the server 10 and acquired from the server 10 by the terminal 20-2.
  • a student main screen 520 (FIG. 11) corresponding to the student selection object is displayed on the terminal 20-2.
  • the trainer screen 511 for each group is switched to the online lesson selection screen.
  • FIG. 10 is a diagram showing an example of the online lesson selection screen 512 displayed on the terminal 20-2.
  • the online lesson selection screen 512 includes lesson video selection objects corresponding to one or more students.
  • the lesson video is stored by the server 10 and acquired from the server 10 by the terminal 20-2.
  • an online lesson screen 522 (FIG. 13) corresponding to the lesson video selection object is displayed on the terminal 20-2.
  • FIG. 11 is a diagram showing an example of the student main screen 520.
  • the student main screen 520 displays the student corresponding to the student selection object selected by the trainer (in the example shown in FIG. 11, “Student 1”).
  • Swing video selection object swing video selection object
  • the swing video selection object includes the number of swing video shots and the type of club used.
  • the student's swing video is stored in the server 10, and information regarding the student's swing video is acquired from the server 10 by the terminal 20-2.
  • the trainer selects any of the swing video selection objects on the terminal 20-2, a swing display screen corresponding to the selected swing video selection object is displayed on the terminal 20-2. Details of the swing video and the swing display screen will be described later.
  • the swing recording start button 620 is selected by the trainer, a swing video recording screen is displayed on the terminal 20-2.
  • the student main screen 520 displays the swing video of the student who has signed in (“Student 1” in the example shown in FIG. 11).
  • a swing video selection object and a swing recording start button 620 are included.
  • Information on the student's swing video is acquired from the server 10 by the terminal 20-1.
  • a swing display screen corresponding to the selected swing video selection object is displayed on the terminal 20-1.
  • a swing video recording screen is displayed on the terminal 20-1.
  • a predetermined tab switching operation for example, left / right flick operation
  • the student main screen 520 is switched to the lesson video screen.
  • FIG. 12 is a diagram showing an example of the lesson video screen 521.
  • the lesson video screen 521 includes a lesson video 621 (lesson videos 621-1 and 621-2) of the student.
  • the lesson video 621 includes feedback information (audio data, image data, etc.) by the trainer for the swing video.
  • Each lesson video screen 521 also includes the date and time when the lesson video was captured.
  • a predetermined tab switching operation for example, left / right flick operation
  • the lesson video screen 521 is switched to the online lesson screen.
  • FIG. 13 is a diagram showing an example of the online lesson screen 522.
  • the online lesson screen 522 includes a lesson video 621-1, and feedback information (for example, text data 622-1 and 622-2) input by the trainer with respect to the swing video included in the lesson video 621-1. 622-3).
  • the online lesson screen 522 includes text data 622-4 and 622-5 input by the student with respect to feedback information (text data 622-1 and 622-2).
  • the online lesson screen 522 is switched to the profile screen.
  • a predetermined tab switching operation for example, left / right flicking operation
  • FIG. 14 is a diagram showing an example of the profile screen 523.
  • the profile screen 523 includes student profiles, lesson lists, and shot lists.
  • the student profile, lesson list, and shot list are stored by the server 10 and acquired from the server 10 by the terminal 20-1 or the terminal 20-2.
  • the shot list includes the number of shots for each shot date and time and the type of club used, and a bar graph indicating the ratio (hook, straight, slice) for each shot type. The degree of progress of the shot by the student is grasped by such a shot list.
  • FIG. 15 is a diagram for explaining the flow from the start of swing display to the start of swing recording.
  • the trainer main screen 510 displayed on the trainer's terminal 20-2 includes student selection objects corresponding to each of one or more students handled by the trainer.
  • a student main screen 520 corresponding to the student selection object is displayed on the terminal 20-2.
  • the student main screen 520 displays the swing video of the student who has signed in (“Student 1” in the example shown in FIG. 15).
  • a swing video selection object and a swing recording start button 620 are included.
  • a swing display screen 532 corresponding to the selected swing video selection object is displayed on the terminal 20-2.
  • a swing display screen 532 corresponding to the selected swing video selection object is displayed on the terminal 20-1.
  • a swing recording screen 530 is displayed on the terminal 20-2.
  • a swing recording screen 530 is displayed on the terminal 20-1.
  • FIG. 16 is a diagram illustrating an example of the swing recording screen 530.
  • a student performs voluntary golf practice.
  • a lesson hereinafter also referred to as “online lesson” in which the feedback information is confirmed by the student is performed.
  • the swing recording screen 530 is displayed on the student terminal 20-1.
  • a mark indicating a level may be displayed first on the swing recording screen 530. Then, when it is detected that the stationary state of the terminal has continued for a predetermined time, the mark indicating the level may be turned off. Then, a suitable timing for starting the swing recording can be grasped by disappearance of the mark indicating the level.
  • the swing recording screen 530 before the start of imaging, the swing recording screen 530 includes a through image.
  • the drawing start object 630, the camera switching object 631, the connection / disconnection information 632 between the currently displayed image and the sensor device 30, and the current terminal and the sensor device 30 are displayed.
  • Connection / disconnection information 633, and information 634 indicating the connection state between the terminal and the sensor device 30 at the time of image capturing that is currently displayed.
  • the swing recording screen 530 is displayed on the student terminal 20-1 and the camera switching object 631 is selected by the student.
  • the imaging unit 225 of the student terminal 20-1 starts imaging a student who is playing golf in self practice and obtains a moving image.
  • the sensor device 30 paired with the student terminal 20-1 performs sensing to obtain sensor information.
  • the sensor information is transmitted from the sensor device 30 and received by the communication unit 240 of the terminal 20-1.
  • the control unit 210 of the student terminal 20-1 detects an event based on the sensor information received by the communication unit 240.
  • the event is at least one of a swing start time, a swing top time, an impact time, a swing end time, a successful swing, a failed swing, a best swing, and a worst swing based on a predetermined time.
  • a swing start time is at least one of a swing start time, a swing top time, an impact time, a swing end time, a successful swing, a failed swing, a best swing, and a worst swing based on a predetermined time.
  • One may be included.
  • a case where an event is an impact point will be mainly described.
  • the control unit 210 of the student terminal 20-1 generates first generation information based on the event detection result.
  • the first generation information includes swing video and analysis data
  • the swing video is extracted based on an event detection result from a moving image captured by the imaging unit 225 of the terminal 20-1 by a student playing golf.
  • the sensor information received from the sensor device 30 and the moving image captured by the imaging unit 225 of the terminal 20-1 are synchronized in the control unit 210.
  • the swing video is a section of the moving image according to the detection time of the event in the sensor information (for example, when an impact time is detected as an event, a time point that goes back a predetermined number of seconds before the impact time
  • the section in the moving image corresponding to the section from the point of time until the point when a predetermined number of seconds elapses after the point of impact is extracted by the control unit 210.
  • the analysis data is obtained by analyzing the sensor information received from the sensor device 30 by the control unit 210 based on the event detection result. More specifically, the analysis data includes the club face angle at impact, the club face-ball collision angle at impact, the club head trajectory angle at impact, the head speed at impact, and the swing speed. At least one of the information indicating the batting may be included.
  • the output unit 250 When the first generation information (swing video and analysis data) is generated in the student terminal 20-1, the output unit 250 automatically switches the display from the swing recording screen 530 to the swing display screen 532. Then, the output unit 250 displays the first generation information (swing video and analysis data) on the swing display screen 532.
  • the output unit 250 may output the sound data when the sound data is detected by the microphone together with the swing video imaging. Then, by listening to the voice included in the sound data (such as cheers), the sound included in the sound data (such as the collision sound between the club and the ball), or by knowing the voice recognition result for the voice or sound, It is possible to estimate the quality of the shot with higher accuracy.
  • the control unit 210 in the student terminal 20-1 When the student is continuously swinging, the control unit 210 in the student terminal 20-1 newly generates the generation information (third generation information (swing video) while displaying the first generation information. And analysis data)) are also assumed. In such a case, the control unit 210 automatically switches from the display of the first generation information (swing video and analysis data) to the display of the third generation information (swing video and analysis data) on the swing display screen 532. It's okay.
  • the communication unit 240 of the student terminal 20-1 transmits the first generation information (swing video and analysis data) to the server 10 via the network.
  • first generation information (swing video and analysis data) is received by the communication unit 140 and stored in the storage unit 130.
  • the first generation information (swing video and analysis data) stored by the storage unit 130 is transmitted by the transmission control unit 114. Transmission to the terminal 20-2 is controlled.
  • the trainer terminal 20-2 when the first generation information (swing video and analysis data) is received by the communication unit 240, the swing display screen 532 is displayed by the output unit 250. Also in the trainer terminal 20-2, the output unit 250 may output the sound data when the microphone detects the sound data together with the swing video imaging.
  • the name of the member performing the swing, the type of club used by the member, and information related to the sensor device 30 connected to the terminal may also be transmitted from the terminal 20-1 to the server 10 and stored.
  • the name of the member performing the swing, the type of club used by the member, and information regarding the sensor device 30 connected to the terminal may be acquired from the server 10 and displayed by the trainer terminal 20-2.
  • the name of the member performing the swing, the type of club used by the member, and information on the sensor device 30 connected to the terminal are selected by the student using the terminal 20-1. May be.
  • FIG. 17 is a diagram illustrating an example of the swing recording screen 530.
  • the swing recording screen 530 includes a member selection object 611, a club type selection object 612, and a sensor selection object 613.
  • the member selection object 611 is selected by the student on the student terminal 20-1, the member selection screen may be displayed.
  • FIG. 18 is a diagram showing an example of the member selection screen 541.
  • the member selection screen 541 includes “trainer”, “student 1”, “student 2”, “student 3”, and “nonname” as member names.
  • the name of any member may be selected as the name of the member performing the swing from the names of these members by the student.
  • a club selection screen may be displayed.
  • FIG. 19 is a diagram showing an example of the club selection screen 542.
  • the club selection screen 542 includes “driver (1W)”, “third wood (3W)”,... “Sand wedge (SW)” as club types.
  • the student may select one of the club types as the club type used by the member.
  • the club type used by the member may be automatically selected. For example, when a club type frequently used by the member is associated with the member name, the club type used by the member may be selected based on the association and the member name. Or if the length, material, weight, etc. of the club which a member uses frequently are registered, the kind of club used by a member may be selected based on such information.
  • a sensor selection screen may be displayed.
  • FIG. 20 is a diagram illustrating an example of the sensor selection screen 543.
  • the sensor selection screen 543 includes “sensor C1,” “sensor C2,”... “Sensor C5” as information regarding the sensor device 30.
  • the student may select information related to any one of the sensor devices 30 as information related to the sensor device 30 connected to the terminal.
  • the information related to the sensor device 30 connected to the terminal may be automatically selected.
  • the sensor device 30 connected to the terminal based on the association and the type of club. Information regarding may be selected.
  • a sensor selection screen may be displayed.
  • FIG. 21 is a diagram illustrating an example of the swing display screen 532.
  • the first generation information (swing video and analysis data) is received from the server 10 by the communication unit 240 of the trainer terminal 20-2, the first generation information is displayed by the output unit 250.
  • a swing video is displayed on the swing display screen 532.
  • the club head trajectory angle at impact (the trajectory sign is “644” and the angle is “ ⁇ 5.1”).
  • a swing display screen 532 displayed by the trainer terminal 20-2 includes a drawing start object 630, a favorite registration object 635, a swing video comparison object 636, a display object 637 indicating a swing start point, A display object 638 indicating a swing top point, a display object 639 indicating a swing impact point, a 180-degree reversal object 640 for reversing the swing video by 180 degrees with respect to the axis, and a swing recording screen transition for transitioning to a swing recording screen An object 641, a recording start object 642, and a time axis 643 are included.
  • a display object (a display object 637 indicating a swing start point, a display object 638 indicating a swing top point, a swing object) at a position corresponding to an event along the time axis 643.
  • a display object 639) indicating the impact point is displayed by the output unit 250.
  • the output unit 250 displays the position in the first generation information (swing video and analysis data) corresponding to the designated position. This facilitates output of the first generation information (swing video and analysis data) at a desired timing.
  • the swing display screen 532 displayed by the trainer terminal 20-2 includes a drawing start object 630, a favorite registration object 635, a swing video comparison object 636, a display object 637 indicating a swing start point, and a display indicating a swing top point.
  • Object 638, display object 639 indicating the swing impact point, 180 degree inversion object 640 for inverting the swing video by 180 degrees with respect to the axis, swing recording screen transition object 641 for transitioning to the swing recording screen, recording start An object 642 and a time axis 643 are included.
  • FIG. 22 is a diagram illustrating an example of the swing trajectory screen 551.
  • the swing trajectory screen 551 includes club head trajectory information 651.
  • FIG. 23 is a diagram illustrating an example of the estimated trajectory screen 552.
  • the estimated trajectory screen 552 includes an estimated trajectory 652.
  • the estimated trajectory 652 is based on the club type, speed, distance, club face angle at impact, club face-ball collision angle at impact, and club head trajectory angle at impact included in the analysis data. Can be calculated.
  • FIG. 24 is a diagram showing an example of the swing display screen 532.
  • the trainer wishes to provide feedback information to the student with respect to the first generation information (swing video and analysis data) displayed on the swing display screen 532.
  • the trainer selects the recording start object 642, inputs audio data as an example of feedback information, selects a drawing start object 630, and selects image data as an example of feedback information (in the example shown in FIG. 24).
  • the control unit 210 of the trainer terminal 20-2 controls transmission of audio data and image data as examples of feedback information to the server 10.
  • audio data and image data are assumed as examples of feedback information.
  • the feedback information is not limited to audio data and image data.
  • the feedback information may include at least one of voice data, text data, and image data input by the trainer with respect to the first generation information (swing video and analysis data).
  • audio data and image data as examples of feedback information are received by the communication unit 140 and stored in the storage unit 130.
  • FIG. 25 is a diagram for explaining 180-degree reverse display with respect to the axis of the first generation information (swing video and analysis data).
  • a swing display screen 532 is displayed on the trainer terminal 20-2.
  • the control unit 210 of the trainer terminal 20-2 detects the first generation information (swing video and analysis data). ) May be highlighted 180 degrees with respect to the axis.
  • Angle trajectory code “671”
  • impact angle between the club face and the ball at impact club face code “672”
  • impact angle between the club face and the ball at impact club face code “673”.
  • FIG. 26 is a diagram for explaining selection of a comparison partner's swing.
  • a swing display screen 532 is displayed on the trainer terminal 20-2.
  • the control unit 210 of the trainer terminal 20-2 detects a predetermined comparison operation (for example, selection of the swing video comparison object 636), and the comparison partner's swing is selected on the comparison swing selection screen 582.
  • the comparison video screen 583 may be displayed.
  • FIG. 27 is a diagram showing an example of the comparison swing selection screen 584.
  • the comparison swing selection screen 584 shown in FIG. 27 shows an example of narrowing down the comparison partner's swing video by limiting members.
  • FIG. 28 is a diagram showing an example of the comparison swing selection screen 584.
  • the comparison swing selection screen 584 shown in FIG. 28 shows an example of narrowing down the comparison partner's swing video by limiting the types of clubs.
  • FIG. 29 is a diagram illustrating an example in which two pieces of generated information are displayed side by side on the same screen.
  • the first generation information (swing video V1 and analysis data obtained by imaging a student) is different from the first generation information (swing video and analysis data) as a display target on the same screen.
  • the second generation information (swing video V2 captured by the trainer and analysis data) is selected, the swing video V1 and the swing video V2 are displayed side by side on the same screen.
  • each analysis data is displayed so as to be distinguished (for example, distinguished by different colors).
  • the comparison partner may be automatically displayed in reverse 180 degrees with respect to the axis.
  • information indicating the batting included in the first generation information (swing video V1 and analysis data obtained by imaging the student) and batting included in the second generation information (swing video V2 and analysis data obtained by imaging the trainer).
  • the control unit 210 of the trainer terminal 20-2 automatically displays the second generation information (the swing video V2 obtained by imaging the trainer and the analysis data) with respect to the axis 180. Inverted degree.
  • the comparison partner may be automatically changed by changing the club used by the student.
  • the control unit 210 of the trainer terminal 20-2 changes the display from the display of the second generation information (the swing video V2 captured by the trainer and the analysis data).
  • the display may be automatically switched to display of the third generation information corresponding to the type of the club.
  • FIG. 30 is a diagram showing an example in which two pieces of generated information are displayed on the same screen.
  • the example shown in FIG. 30 is different from the first generation information (swing video V1 and analysis data obtained by imaging a student) as a display target on the same screen as the first generation information (swing video and analysis data).
  • the second generation information swing video V2 captured by the trainer and analysis data
  • the swing video V1 and the swing video V2 are displayed on the same screen.
  • each analysis data is displayed so as to be distinguished (for example, distinguished by different colors).
  • the comparison partner automatically May be displayed in reverse 180 degrees. Also, when two pieces of generated information are displayed on the same screen, they are compared by changing the club used by the student, as in the case where the two pieces of generated information are displayed side by side on the same screen. The other party may be changed automatically.
  • the second generation information may be able to be enlarged, reduced, or moved based on a predetermined change operation. More specifically, when the trainer performs a pinch-out operation on the swing video V2, the swing video V2 may be enlarged. In addition, when the trainer performs a pinch-in operation on the swing video V2, the swing video V2 may be reduced. Further, when a drag operation is performed on the swing video V2 by the trainer, the swing video V2 may be moved.
  • FIG. 31 is a diagram showing an example of the comparison swing trajectory screen 585.
  • the comparison swing trajectory screen 585 includes club head trajectory information 651 as an example of first generation information (analysis data), and club head trajectory information as an example of second generation information (analysis data). 685 is included.
  • FIG. 32 is a diagram showing an example of the comparative estimated ballistic screen 586.
  • the comparative estimated ballistic screen 586 includes an estimated ballistic 686 in addition to the estimated ballistic 652.
  • the estimated trajectory 652 can be calculated based on the club type, speed, and distance included in the first generation information (analysis data).
  • the estimated trajectory 686 includes the club type, the speed, the distance, the club face angle at impact, the collision angle between the club face and ball at impact, and the club at impact, which are included in the second generation information (analysis data). It can be calculated based on the angle of the trajectory of the head.
  • the communication unit 140 When the communication unit 140 receives an acquisition request from the terminal 20-2 based on the operation by the trainer, the first generation information (swing video and analysis data) stored in the storage unit 130 of the server 10 is transmitted. 114 controls transmission of the student to the terminal 20-2.
  • the output unit 250 of the student terminal 20-2 outputs audio data as an example of feedback information and displays image data. The student can confirm the feedback information by the trainer based on the audio data and the image data.
  • the student can easily confirm the feedback information when the feedback information by the trainer is obtained for the self-practice play state. Since deep communication between the student and the trainer is realized, it is possible to always give the sense that the student and the trainer are connected.
  • auxiliary information for assisting play by the student before (or after) generation of the first generation information (swing video and analysis data) (for example, swing
  • first generation information for example, swing
  • auxiliary information are associated with each other and transmitted to the server 10. May be.
  • the first generation information swing video and analysis data
  • the auxiliary information may also be acquired from the server 10 and displayed.
  • FIG. 32 is a block diagram illustrating a hardware configuration example of the server 10 according to the embodiment of the present disclosure.
  • the hardware configuration of the terminal 20 can also be realized in the same manner as the example of the hardware configuration of the server 10 described here.
  • the server 10 includes a CPU (Central Processing unit) 901, a ROM (Read Only Memory) 903, and a RAM (Random Access Memory) 905.
  • the server 10 may also include a host bus 907, a bridge 909, an external bus 911, an interface 913, an input device 915, an output device 917, a storage device 919, a drive 921, a connection port 923, and a communication device 925.
  • the server 10 may include an imaging device 933 and a sensor 935 as necessary.
  • the server 10 may include a processing circuit called a DSP (Digital Signal Processor) or ASIC (Application Specific Integrated Circuit) instead of or in addition to the CPU 901.
  • DSP Digital Signal Processor
  • ASIC Application Specific Integrated Circuit
  • the CPU 901 functions as an arithmetic processing unit and a control unit, and controls all or a part of the operation in the server 10 according to various programs recorded in the ROM 903, the RAM 905, the storage device 919, or the removable recording medium 927.
  • the ROM 903 stores programs and calculation parameters used by the CPU 901.
  • the RAM 905 temporarily stores programs used in the execution of the CPU 901, parameters that change as appropriate during the execution, and the like.
  • the CPU 901, the ROM 903, and the RAM 905 are connected to each other by a host bus 907 configured by an internal bus such as a CPU bus. Further, the host bus 907 is connected to an external bus 911 such as a PCI (Peripheral Component Interconnect / Interface) bus via a bridge 909.
  • PCI Peripheral Component Interconnect / Interface
  • the input device 915 is a device operated by the user such as a button.
  • the input device 915 may include a mouse, a keyboard, a touch panel, a switch, a lever, and the like.
  • the input device 915 may include a microphone that detects a user's voice.
  • the input device 915 may be, for example, a remote control device using infrared rays or other radio waves, or may be an external connection device 929 such as a mobile phone that supports the operation of the server 10.
  • the input device 915 includes an input control circuit that generates an input signal based on information input by the user and outputs the input signal to the CPU 901. The user operates the input device 915 to input various data to the server 10 and instruct processing operations.
  • An imaging device 933 which will be described later, can also function as an input device by imaging a user's hand movement, a user's finger, and the like. At this time, the pointing position may be determined according to the movement of the hand or the direction of the finger.
  • the output device 917 is a device that can notify the user of the acquired information visually or audibly.
  • the output device 917 can be, for example, a display device such as an LCD (Liquid Crystal Display) or an organic EL (Electro-Luminescence) display, or a sound output device such as a speaker or headphones. Further, the output device 917 may include a PDP (Plasma Display Panel), a projector, a hologram, a printer device, and the like.
  • the output device 917 outputs the result obtained by the processing of the server 10 as a video such as text or an image, or as a sound such as voice or sound.
  • the output device 917 may include a light or the like to brighten the surroundings.
  • the storage device 919 is a data storage device configured as an example of a storage unit of the server 10.
  • the storage device 919 includes, for example, a magnetic storage device such as an HDD (Hard Disk Drive), a semiconductor storage device, an optical storage device, or a magneto-optical storage device.
  • the storage device 919 stores programs executed by the CPU 901, various data, various data acquired from the outside, and the like.
  • the drive 921 is a reader / writer for a removable recording medium 927 such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory, and is built in or externally attached to the server 10.
  • the drive 921 reads information recorded on the attached removable recording medium 927 and outputs the information to the RAM 905.
  • the drive 921 writes a record in the attached removable recording medium 927.
  • the connection port 923 is a port for directly connecting a device to the server 10.
  • the connection port 923 can be, for example, a USB (Universal Serial Bus) port, an IEEE 1394 port, a SCSI (Small Computer System Interface) port, or the like.
  • the connection port 923 may be an RS-232C port, an optical audio terminal, an HDMI (registered trademark) (High-Definition Multimedia Interface) port, or the like.
  • the communication device 925 is a communication interface configured with a communication device for connecting to the network 931, for example.
  • the communication device 925 can be, for example, a communication card for wired or wireless LAN (Local Area Network), Bluetooth (registered trademark), or WUSB (Wireless USB).
  • the communication device 925 may be a router for optical communication, a router for ADSL (Asymmetric Digital Subscriber Line), or a modem for various communication.
  • the communication device 925 transmits and receives signals and the like using a predetermined protocol such as TCP / IP with the Internet and other communication devices, for example.
  • the network 931 connected to the communication device 925 is a wired or wireless network, such as the Internet, a home LAN, infrared communication, radio wave communication, or satellite communication.
  • the imaging device 933 uses various members such as an imaging element such as a CCD (Charge Coupled Device) or CMOS (Complementary Metal Oxide Semiconductor), and a lens for controlling the imaging of a subject image on the imaging element. It is an apparatus that images a real space and generates a captured image.
  • the imaging device 933 may capture a still image or may capture a moving image.
  • the sensor 935 is various sensors such as a distance measuring sensor, an acceleration sensor, a gyro sensor, a geomagnetic sensor, a vibration sensor, an optical sensor, and a sound sensor.
  • the sensor 935 acquires information related to the environment of the server 10 such as information related to the state of the server 10 itself such as the attitude of the housing of the server 10 and brightness and noise around the server 10.
  • the sensor 935 may include a GPS sensor that receives a GPS (Global Positioning System) signal and measures the latitude, longitude, and altitude of the apparatus.
  • GPS Global Positioning System
  • An acquisition unit that acquires feedback information for generated information from a terminal of a second user different from the first user, a transmission control unit that controls transmission of the feedback information to the terminal of the first user, An information processing apparatus is provided. According to such a configuration, it is possible to more efficiently present feedback information from the second user with respect to the play state of the first user to the first user.
  • the generation information (swing video and analysis data) is recorded (swing recording) mainly by the student terminal 20-1.
  • the swing recording may be performed by the trainer's terminal 20-2 while the trainer teaches golf to the student (inputs feedback information).
  • the control unit 210 of the trainer terminal 20-2 generates first generation information based on the detection result of the event, and the communication unit 240 transmits the first generation information and feedback information to the server 10.
  • the acquisition unit 112 acquires the first generation information and feedback information from the trainer terminal 20-2, and the storage unit 130 stores the first generation information and feedback information.
  • the student terminal 20-1 outputs first generation information and feedback information in response to an acquisition request based on an operation by the student.
  • the student can review the past lesson in detail (Lesson Review) by confirming the first generation information and feedback information output in this way (the lesson can be re-experienced). ). Even if the contents of the lesson are forgotten, it is possible to remember past lessons by confirming the first generation information and feedback information output in this way.
  • the first generation information (swing video and analysis data) stored in the storage unit 130 of the server 10 is acquired by the communication unit 140 based on an operation by the second trainer (third user).
  • the transmission control unit 114 may control transmission of the second trainer (third user) to the terminal.
  • control unit 210 may determine the analysis data, and if the analysis data is out of a predetermined range, the output unit 250 may output that an error has occurred. For example, when the club head trajectory information as an example of the first generation information (analysis data) is out of a predetermined range (for example, the ground), the control unit 210 indicates that an error has occurred in the output unit 250. May be output.
  • a threshold value for determining the impact time point based on the sensor information may be changed.
  • the impact determination threshold value may be changed according to the type of shot, the type of club, and the attributes of the person performing the swing (for example, gender, age, and whether or not the child is a kids).
  • the distance (flying distance) is obtained based on the type and speed of the club has been mainly described.
  • other factors may be considered in estimating the distance (flying distance). For example, after the swing, the distance (flying distance), the type of club, the environment where the swing was performed (weather, wind strength, etc.), the place where the swing was performed (the length of the lawn at the position where the swing was performed, It is also possible to improve the estimation accuracy of the distance (flying distance) by inputting the information (such as the degree of inclination of the ground) and using this information for machine learning.
  • the feedback information for the first generation information generated using the detection result of the event based on the sensor information indicating the information related to the first user playing golf is different from the first user.
  • An information processing apparatus comprising: (2)
  • the first generation information includes a play image extracted based on a detection result of the event from a moving image obtained by capturing the first user playing golf.
  • the sensor information and the moving image are synchronized,
  • the play image is an image of a section in the moving image corresponding to a section corresponding to a detection time point of the event in the sensor information in the moving image.
  • the information processing apparatus according to (2).
  • the first generation information includes analysis data obtained based on a detection result of the event, The analysis data shows the club face angle at impact, the impact angle between the club face and ball at impact, the angle of the orbit of the club head at impact, the head speed at impact, and the batting at swing. Including at least one of the information, The information processing apparatus according to any one of (1) to (3).
  • the display of the second generation information is automatically performed with respect to the axis. Reversed 180 degrees, The information processing apparatus according to (6) or (7). (9) When the type of the club used by the first user is changed, the display of the second generation information is automatically switched to the display of the third generation information corresponding to the type of the club after the change. The information processing apparatus according to any one of (6) to (8). (10) The first generation information is inverted 180 degrees with respect to the axis when a predetermined 180 degree inversion operation is detected. The information processing apparatus according to any one of (1) to (9).
  • the display automatically switches from the display of the first generation information to the display of the third generation information.
  • the information processing apparatus according to any one of (1) to (10).
  • (12) When auxiliary information for assisting the play is input before or after generation of the first generation information, the first generation information and the auxiliary information are associated with each other, and the first generation information is displayed. The auxiliary information is also displayed when The information processing apparatus according to any one of (1) to (11).
  • the acquisition unit acquires the first generation information and the feedback information from the terminal of the second user.
  • the information processing apparatus according to any one of (1) to (12).
  • the transmission control unit controls transmission of the first generation information to the second user's terminal when the first generation information is acquired from the first user's terminal.
  • the information processing apparatus according to any one of (1) to (12).
  • the transmission control unit further controls transmission of the feedback information to a terminal of a third user;
  • the information processing apparatus according to any one of (1) to (12).
  • the event is at least one of a swing start time, a swing top time, an impact time, a swing end time, a successful swing, a failed swing, a best swing, and a worst swing based on a predetermined time.
  • the feedback information includes at least one of voice data, text data, and image data input by the second user with respect to the first generation information.
  • the information processing apparatus according to any one of (1) to (16).
  • the first user is a student who takes a golf lesson from the second user.
  • the information processing apparatus according to any one of (1) to (17).
  • (19) The feedback information for the first generation information generated using the detection result of the event based on the sensor information indicating the information related to the first user playing golf is different from the first user. Obtaining from the terminal of the second user; Controlling the transmission of the feedback information to the terminal of the first user by a processor; Including an information processing method.
  • (20) Computer The feedback information for the first generation information generated using the detection result of the event based on the sensor information indicating the information related to the first user playing golf is different from the first user.
  • An acquisition unit for acquiring from the terminal of the second user;
  • a transmission control unit for controlling transmission of the feedback information to the terminal of the first user;
  • a program for causing an information processing apparatus to function.

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Tourism & Hospitality (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Entrepreneurship & Innovation (AREA)
  • User Interface Of Digital Computer (AREA)
  • Computing Systems (AREA)
  • Medical Informatics (AREA)

Abstract

【課題】第１のユーザのプレーの状態に対する第２のユーザからのフィードバック情報をより効率よく第１のユーザに提示することが可能な技術が提供されることが望まれる。 【解決手段】ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得する取得部と、前記フィードバック情報の前記第１のユーザの端末への送信を制御する送信制御部と、を備える、情報処理装置が提供される。

Description

情報処理装置、情報処理方法およびプログラム
　本開示は、情報処理装置、情報処理方法およびプログラムに関する。
　近年、ユーザによるスポーツのプレーの状態を的確に把握するための技術が開示されている。例えば、ユーザの挙動を示すセンサ情報に基づいてイベントの発生を検出し、イベントに対応するイベント情報を生成し、ユーザを撮像した画像からイベント情報に基づきシーンを抽出する技術が開示されている。（例えば、特許文献１参照。）。
特開２０１７－２２７２７号公報
　しかし、第１のユーザのプレーの状態を第１のユーザとは異なる第２のユーザが把握したいという要求がある。このとき、第１のユーザのプレーの状態に対する第２のユーザからのフィードバック情報をより効率よく第１のユーザに提示することが可能な技術が提供されることが望まれる。
　本開示によれば、ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得する取得部と、前記フィードバック情報の前記第１のユーザの端末への送信を制御する送信制御部と、を備える、情報処理装置が提供される。
　本開示によれば、ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得することと、プロセッサにより、前記フィードバック情報の前記第１のユーザの端末への送信を制御することと、を含む、情報処理方法が提供される。
　本開示によれば、コンピュータを、ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得する取得部と、前記フィードバック情報の前記第１のユーザの端末への送信を制御する送信制御部と、を備える情報処理装置として機能させるためのプログラムが提供される。
　以上説明したように本開示によれば、第１のユーザのプレーの状態に対する第２のユーザからのフィードバック情報をより効率よく第１のユーザに提示することが可能な技術が提供される。なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の実施形態に係る情報処理システムの構成例を示す図である。 本開示の実施形態に係るサーバの機能構成例を示すブロック図である。 本開示の実施形態に係る端末の機能構成例を示すブロック図である。 センサ装置を構成するセンサリストを示す図である。 センサ装置からセンサ装置とペアリングされている相手への送信データのリストを示す図である。 ペアリング相手によってセンサ装置から受信されたデータの解析データの例を示す図である。 サインインがなされる場合における画面遷移の例を説明するための図である。 端末に表示されるトレーナーメイン画面の例を示した図である。 端末に表示されるグループ単位のトレーナー画面の例を示した図である。 端末に表示されるオンラインレッスン選択画面の例を示した図である。 生徒メイン画面の例を示した図である。 レッスンビデオ画面の例を示した図である。 オンラインレッスン画面の例を示した図である。 プロフィール画面の例を示した図である。 スイング表示開始とスイング記録開始までの流れについて説明するための図である。 スイング記録画面の例を示す図である。 スイング記録画面の例を示す図である。 メンバー選択画面の例を示す図である。 クラブ選択画面の例を示す図である。 センサ選択画面の例を示す図である。 スイング表示画面の例を示す図である。 スイング軌道画面の例を示す図である。 推定弾道画面の例を示す図である。 スイング表示画面の例を示す図である。 第１の生成情報（スイングビデオおよび解析データ）の軸に対する１８０度反転表示を説明するための図である。 比較相手のスイングの選択について説明するための図である。 比較スイング選択画面の例を示す図である。 比較スイング選択画面の例を示す図である。 二つの生成情報が同一の画面に並べられて表示される例を示す図である。 二つの生成情報が同一の画面に重ねられて表示される例を示す図である。 比較スイング軌道画面の例を示す図である。 比較推定弾道画面の例を示す図である。 同実施形態に係るサーバのハードウェア構成例を示すブロック図である。
　以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
　また、本明細書および図面において、実質的に同一または類似の機能構成を有する複数の構成要素を、同一の符号の後に異なる数字を付して区別する場合がある。ただし、実質的に同一または類似の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。また、異なる実施形態の類似する構成要素については、同一の符号の後に異なるアルファベットを付して区別する場合がある。ただし、類似する構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。
　なお、説明は以下の順序で行うものとする。
　０．概要
　１．本開示の実施形態
　　１．１．サーバの機能構成例
　　１．２．端末の機能構成例
　　１．３．情報処理システムの機能詳細
　　　１．３．１．各種データの例
　　　１．３．２．サインイン
　　　１．３．３．トレーナーメイン画面
　　　１．３．４．生徒メイン画面
　　　１．３．５．スイング表示開始とスイング記録開始までの流れ
　　　１．３．６．スイング記録
　　　１．３．７．スイング表示
　　１．４．ハードウェア構成例
　２．むすび
　＜０．概要＞
　図１は、本開示の実施形態に係る情報処理システムの構成例を示す図である。図１に示すように、本開示の実施形態に係る情報処理システム１は、サーバ１０、端末２０－１、端末２０－２、および、センサ装置３０を有する。サーバ１０、端末２０－１および端末２０－２は、ネットワークに接続されており、ネットワークを介して相互に通信可能に構成されている。
　サーバ１０は、コンピュータによって構成されており、ネットワークを介して端末２０－１および端末２０－２と通信可能に構成されている。また、ネットワークに他の端末が接続されている場合、サーバ４０は、ネットワークを介して当該他の端末と通信することも可能である。なお、サーバ１０は、情報処理装置として機能し得る。
　端末２０－１は、第１のユーザによって使用される。本実施形態においては、第１のユーザが第２のユーザからスポーツのレッスンを受ける生徒である例を主に説明する。しかし、第１のユーザは、かかる例に限定されない。
　なお、本実施形態においては、端末２０－１がスマートフォンである場合を主に説明する。しかし、端末２０－１はスマートフォンに限定されない。例えば、端末２０－１は、携帯電話であってもよいし、タブレット端末であってもよいし、撮像装置であってもよい。撮像装置は、デジタルカメラなどであってよい。端末２０－１も情報処理装置として機能し得る。
　端末２０－２は、第１のユーザとは異なる第２のユーザによって使用される。本実施形態においては、第２のユーザが第１のユーザにレッスンでゴルフを教えるトレーナーである例を主に説明する。しかし、第２のユーザは、かかる例に限定されない。
　なお、本実施形態においては、端末２０－２がスマートフォンである場合を主に説明する。しかし、端末２０－２はスマートフォンに限定されない。例えば、端末２０－２は、携帯電話であってもよいし、タブレット端末であってもよいし、撮像装置であってもよい。撮像装置は、デジタルカメラなどであってよい。端末２０－２も情報処理装置として機能し得る。
　また、本実施形態においては、スポーツとしてゴルフを例に挙げて説明する。しかし、本実施形態に適用可能なスポーツは、ゴルフに限定されない。例えば、スポーツは、野球、テニス、卓球、ラクロス、ホッケー、スカッシュ、および、バドミントンのいずれかであってもよい。
　センサ装置３０は、ゴルフをプレーするときに使用されるクラブに取り付けられる。しかし、センサ装置３０が取り付けられる位置は、クラブに限定されない。例えば、センサ装置３０は、ゴルフをプレーするユーザ自身に取り付けられてもよい。また、ゴルフ以外の上記スポーツがプレーされる場合、センサ装置３０は、クラブの代わりにユーザによって使用される各種の道具（例えば、ラケット、バットなど）に取り付けられてもよい。本実施形態では、生徒がゴルフをプレーするときに使用されるクラブにセンサ装置３０が取り付けられる例を主に説明する。
　センサ装置３０は、ペアリング相手との間で無線通信可能に構成されている。例えば、センサ装置３０は、生徒によって使用される端末２０－１との間でペアリングがなされている場合には、端末２０－１との間で無線通信を行うことが可能である。一方、センサ装置３０は、トレーナーによって使用される端末２０－２との間でペアリングがなされている場合には、端末２０－２との間で無線通信を行うことが可能である。
　ここで、トレーナーが生徒のプレーの状態を把握したいという要求がある。そこで、本実施形態においては、生徒のプレーの状態に対するトレーナーからのフィードバック情報をより効率よく生徒に提示することが可能な技術について主に説明する。
　以上、本開示の一実施形態の概要について説明した。
　＜１．本開示の実施形態＞
　［１．１．サーバの機能構成例］
　続いて、本開示の実施形態に係るサーバ１０の機能構成例について説明する。図２は、本開示の実施形態に係るサーバ１０の機能構成例を示すブロック図である。図２に示したように、サーバ１０は、制御部１１０、記憶部１３０および通信部１４０を備える。以下、サーバ１０が備えるこれらの機能ブロックについて説明する。
　制御部１１０は、例えば、１または複数のＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ；中央演算処理装置）などといった処理装置によって構成されてよい。これらのブロックがＣＰＵなどといった処理装置によって構成される場合、かかる処理装置は電子回路によって構成されてよい。制御部１１０は、取得部１１２、算出部１１３および送信制御部１１４を備える。これらのブロックについては、後に詳細に説明する。
　記憶部１３０は、メモリを含んで構成され、制御部１１０によって実行されるプログラムを記憶したり、プログラムの実行に必要なデータを記憶したりする記録デバイスである。また、記憶部１３０は、制御部１１０による演算のためにデータを一時的に記憶する。なお、記憶部１３０は、磁気記憶部デバイスであってもよいし、半導体記憶デバイスであってもよいし、光記憶デバイスであってもよいし、光磁気記憶デバイスであってもよい。
　通信部１４０は、通信回路を含んで構成され、ネットワークを介して他の装置との間で通信を行う機能を有する。例えば、通信部１４０は、通信インターフェースにより構成される。例えば、通信部１４０は、ネットワークを介して、端末２０－１との間、および、端末２０－２との間で通信を行うことが可能である。
　以上、本開示の実施形態に係るサーバ１０の機能構成例について説明した。
　［１．２．端末の機能構成例］
　続いて、本開示の実施形態に係る端末２０の機能構成例について説明する。図３は、本開示の実施形態に係る端末２０の機能構成例を示すブロック図である。図３に示したように、端末２０は、制御部２１０、操作部２２０、撮像部２２５、記憶部２３０、通信部２４０および出力部２５０を備える。以下、端末２０が備えるこれらの機能ブロックについて説明する。
　制御部２１０は、例えば、１または複数のＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ；中央演算処理装置）などといった処理装置によって構成されてよい。これらのブロックがＣＰＵなどといった処理装置によって構成される場合、かかる処理装置は電子回路によって構成されてよい。
　操作部２２０は、ユーザによる操作の入力を受け付ける機能を有する。本実施形態においては、操作部２２０がタッチパネルによって構成される場合を主に説明する。しかし、操作部２２０は、タッチパネルに限定されない。例えば、操作部２２０は、マウス、キーボード、スイッチおよびレバーなどを含んでもよい。また、操作部２２０は、ユーザの音声を検出するマイクロフォンを含んでもよい。
　撮像部２２５は、１または複数のイメージセンサを含んで構成され、ゴルフをプレーするユーザを撮像して動画像を得る。撮像部２２５によって撮像された動画像は、制御部２１０に出力される。
　記憶部２３０は、メモリを含んで構成され、制御部２１０によって実行されるプログラムを記憶したり、プログラムの実行に必要なデータを記憶したりする記録デバイスである。また、記憶部２３０は、制御部２１０による演算のためにデータを一時的に記憶する。なお、記憶部２３０は、磁気記憶部デバイスであってもよいし、半導体記憶デバイスであってもよいし、光記憶デバイスであってもよいし、光磁気記憶デバイスであってもよい。
　通信部２４０は、通信回路を含んで構成され、ネットワークを介して他の装置との間で通信を行う機能を有する。例えば、通信部２４０は、通信インターフェースにより構成される。例えば、通信部２４０は、ネットワークを介して、サーバ１０との間で通信を行うことが可能である。また、通信部２４０は、センサ装置３０との間で無線通信を行う。
　出力部２５０は、各種の情報を出力する。例えば、出力部２５０は、ユーザに視認可能な表示を行うことが可能なディスプレイを含んでよく、ディスプレイは、液晶ディスプレイであってもよいし、有機ＥＬ（Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイであってもよい。また、出力部２５０は、スピーカなどの音声出力装置を含んでもよい。あるいは、出力部２５０は、ユーザに触覚を提示する触覚提示装置を含んでもよい。
　以上、本開示の実施形態に係る端末２０の機能構成例について説明した。
　［１．３．情報処理システムの機能詳細］
　続いて、本開示の実施形態に係る情報処理システム１の機能詳細について説明する。本開示の実施形態において、サーバ１０における取得部１１２は、ゴルフをプレーしている生徒に関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、トレーナーの端末２０－２から取得する。また、送信制御部１１４は、フィードバック情報の生徒の端末２０－１への送信を制御する。
　かかる構成によれば、生徒のプレーの状態に対するトレーナーからのフィードバック情報をより効率よく生徒に提示することが可能となる。
　なお、本実施形態においては、センサ装置３０がクラブに取り付けられる場合を主に想定するため、センサ情報は、生徒に取り付けられたセンサ装置３０によって検出される。しかし、センサ装置３０がクラブに取り付けられている場合、センサ情報は、クラブに取り付けられたセンサ装置３０によって検出されてよい。
　また、本実施形態においては、生成情報の例として、イベントの検出結果に基づいて抽出される「スイングビデオ」、および、イベントの検出結果に基づいて得られる「解析データ」を含む場合を主に説明する。しかし、生成情報は、「スイングビデオ」および「解析データ」の少なくともいずれか一方を含んでもよい。
　　（１．３．１．各種データの例）
　まず、各種データの例について説明する。図４は、センサ装置３０を構成するセンサリストを示す図である。図４を参照すると、３種類のセンサについて、センサ種類、メーカー、型番、フルスケール、および、ＡＤＣ（Ａｎａｌｏｇ　ｔｏ　Ｄｉｇｉｔａｌ　Ｃｏｎｖｅｒｔｅｒ）分解能が定められている。一例として、センサ装置３０は、この３種類のセンサのいずれかによって構成されてよい。しかし、センサ装置３０は、この３種類のセンサ以外のセンサによって構成されてもよい。
　図５は、センサ装置３０からセンサ装置３０とペアリングされている相手への送信データのリストを示す図である。図５に示すように、センサ装置３０からは、「軸」の「データ種類」に示したデータがペアリング相手に送信されてよい。センサ装置３０からペアリング相手に送信されるデータの特徴は、「Ｂｉｔ数」「フルスケール」「サンプリングレート」に示した通りであってよい。センサ装置３０からペアリング相手に送信されたデータは、ペアリング相手のゴルフアプリケーションに入力されてよい。
　図６は、ペアリング相手によってセンサ装置３０から受信されたデータの解析データの例を示す図である。ペアリング相手によってセンサ装置３０から受信されたデータが解析されると、図６における「概要」に示すような各種の解析データが得られる。また、図６には、各種の解析データの種類が「データ種類」として示され、解析データの取り得る範囲が「範囲」として示されている。本実施形態においては、ペアリング相手によってデータ解析が実行される場合を主に説明するが、ペアリング相手の代わりにサーバ１０によってデータ解析が実行されてもよい。
　以上、各種データの例について説明した。
　　（１．３．２．サインイン）
　まず、生徒は、端末２０－１においてゴルフアプリケーションを利用しようとするとき、ゴルフアプリケーションにサインインを行う。トレーナーが端末２０－２においてゴルフアプリケーションを利用としようとするとき、ゴルフアプリケーションにサインインを行う。ここでは、トレーナーが端末２０－２においてゴルフアプリケーションにサインインする場合を説明してから、生徒が端末２０－１においてゴルフアプリケーションにサインインする場合を説明する。
　図７は、サインインがなされる場合における画面遷移の例を説明するための図である。端末２０－２において、操作部２２０によってトレーナーによるゴルフアプリケーションの起動操作が入力されると、図７に示すように、出力部２５０によってサインイン画面５００が表示される。サインイン画面５００においてトレーナーからＩＤ（サインインＩＤ）とパスワードが入力され、かかるＩＤおよびパスワードに基づく認証が成功すると、端末２０－２において、出力部２５０は、トレーナーメイン画面５１０を表示する。トレーナーメイン画面５１０の詳細については、図８を参照しながら後に説明する。
　一方、端末２０－１において、操作部２２０によって生徒によるゴルフアプリケーションの起動操作が入力されると、図７に示すように、出力部２５０によってサインイン画面５００が表示される。サインイン画面５００において生徒からＩＤ（サインインＩＤ）とパスワードが入力され、かかるＩＤおよびパスワードに基づく認証が成功すると、端末２０－１において、出力部２５０は、生徒メイン画面５２０を表示する。生徒メイン画面５２０の詳細については、図１１を参照しながら後に説明する。
　以上、サインインについて説明した。
　　（１．３．３．トレーナーメイン画面）
　続いて、トレーナーメイン画面について説明する。図８は、端末２０－２に表示されるトレーナーメイン画面５１０の例を示した図である。トレーナーメイン画面５１０には、トレーナーが受け持っている１または複数の生徒（図８に示した例では、生徒１～３）それぞれに対応するオブジェクト（生徒選択用オブジェクト）が含まれる。トレーナーが受け持っている１または複数の生徒に関する情報は、サーバ１０によって記憶されており、端末２０－２によってサーバ１０から取得される。トレーナーがいずれかの生徒選択用オブジェクトを選択すると、その生徒選択用オブジェクトに対応する生徒メイン画面５２０（図１１）が端末２０－２に表示される。
　なお、トレーナーによって所定のタブ切り替え操作（例えば、左右のフリック操作など）がなされると、トレーナーメイン画面５１０からグループ単位のトレーナー画面に切り替わる。
　図９は、端末２０－２に表示されるグループ単位のトレーナー画面５１１の例を示した図である。グループ単位のトレーナー画面５１１には、１または複数のユーザ（生徒および／またはトレーナー）それぞれに対応する生徒選択用オブジェクトがグループ単位に含まれる。各グループに属するユーザに関する情報は、サーバ１０によって記憶されており、端末２０－２によってサーバ１０から取得される。トレーナーがいずれかの生徒選択用オブジェクトを選択すると、その生徒選択用オブジェクトに対応する生徒メイン画面５２０（図１１）が端末２０－２に表示される。
　なお、トレーナーによって所定のタブ切り替え操作（例えば、左右のフリック操作など）がなされると、グループ単位のトレーナー画面５１１からオンラインレッスン選択画面に切り替わる。
　図１０は、端末２０－２に表示されるオンラインレッスン選択画面５１２の例を示した図である。オンラインレッスン選択画面５１２には、１または複数の生徒それぞれに対応するレッスンビデオ選択用オブジェクトが含まれる。レッスンビデオは、サーバ１０によって記憶されており、端末２０－２によってサーバ１０から取得される。トレーナーがいずれかのレッスンビデオ選択用オブジェクトを選択すると、そのレッスンビデオ選択用オブジェクトに対応するオンラインレッスン画面５２２（図１３）が端末２０－２に表示される。
　以上、トレーナーメイン画面について説明した。
　　（１．３．４．生徒メイン画面）
　続いて、生徒メイン画面について説明する。図１１は、生徒メイン画面５２０の例を示した図である。生徒メイン画面５２０がトレーナーの端末２０－２に表示される場合、生徒メイン画面５２０には、トレーナーによって選択された生徒選択用オブジェクトに対応する生徒（図１１に示した例では、「生徒１」）のスイングビデオを選択するためのオブジェクト（スイングビデオ選択用オブジェクト）およびスイング記録開始ボタン６２０が含まれる。スイングビデオ選択用オブジェクトには、スイングビデオのショット数と使用されたクラブの種類とが含まれている。
　生徒のスイングビデオは、サーバ１０によって記憶されており、端末２０－２によってサーバ１０から生徒のスイングビデオに関する情報が取得される。端末２０－２においてトレーナーがスイングビデオ選択用オブジェクトのいずれかを選択すると、選択されたスイングビデオ選択用オブジェクトに対応するスイング表示画面が端末２０－２において表示される。スイングビデオおよびスイング表示画面についての詳細は、後に説明する。また、トレーナーによってスイング記録開始ボタン６２０が選択されると、スイングビデオ記録画面が端末２０－２において表示される。
　一方、生徒メイン画面５２０が生徒の端末２０－１に表示される場合、生徒メイン画面５２０には、サインインを行った生徒自身（図１１に示した例では、「生徒１」）のスイングビデオを選択するためのスイングビデオ選択用オブジェクトおよびスイング記録開始ボタン６２０が含まれる。
　生徒のスイングビデオに関する情報は、端末２０－１によってサーバ１０から取得される。端末２０－１において生徒がスイングビデオ選択用オブジェクトのいずれかを選択すると、選択されたスイングビデオ選択用オブジェクトに対応するスイング表示画面が端末２０－１において表示される。また、生徒によってスイング記録開始ボタン６２０が選択されると、スイングビデオ記録画面が端末２０－１において表示される。
　なお、トレーナーまたは生徒によって所定のタブ切り替え操作（例えば、左右のフリック操作など）がなされると、生徒メイン画面５２０からレッスンビデオ画面に切り替わる。
　図１２は、レッスンビデオ画面５２１の例を示した図である。レッスンビデオ画面５２１には、その生徒のレッスンビデオ６２１（レッスンビデオ６２１－１、６２１－２）が含まれる。レッスンビデオ６２１には、スイングビデオの他、スイングビデオに対するトレーナーによるフィードバック情報（音声データ、画像データなど）が含まれる。また、各レッスンビデオ画面５２１には、レッスンビデオが撮像された日時も含まれている。なお、トレーナーまたは生徒によって所定のタブ切り替え操作（例えば、左右のフリック操作など）がなされると、レッスンビデオ画面５２１からオンラインレッスン画面に切り替わる。
　図１３は、オンラインレッスン画面５２２の例を示した図である。オンラインレッスン画面５２２には、レッスンビデオ６２１－１が含まれており、レッスンビデオ６２１－１に含まれるスイングビデオに対してトレーナーによって入力されたフィードバック情報（例えば、テキストデータ６２２－１、６２２－２、６２２－３）が含まれている。また、オンラインレッスン画面５２２には、フィードバック情報（テキストデータ６２２－１、６２２－２）に対して生徒によって入力されたテキストデータ６２２－４、６２２－５が含まれている。
　なお、トレーナーまたは生徒によって所定のタブ切り替え操作（例えば、左右のフリック操作など）がなされると、オンラインレッスン画面５２２からプロフィール画面に切り替わる。
　図１４は、プロフィール画面５２３の例を示した図である。プロフィール画面５２３には、生徒のプロフィール、レッスンリスト、ショットリストが含まれている。生徒のプロフィール、レッスンリスト、ショットリストは、サーバ１０によって記憶されており、端末２０－１または端末２０－２によってサーバ１０から取得される。ショットリストには、ショットの日時と使用されたクラブの種類ごとに、ショット数が含まれるとともに、ショットの種類ごとの割合（フック、ストレート、スライス）を示す棒グラフが含まれている。かかるショットリストによって、生徒によるショットの上達度合いが把握される。
　なお、トレーナーまたは生徒によって所定のタブ切り替え操作（例えば、左右のフリック操作など）がなされると、プロフィール画面５２３からオンラインレッスン画面５２２に切り替わる。
　以上、生徒メイン画面について説明した。
　　（１．３．５．スイング表示開始とスイング記録開始までの流れ）
　続いて、スイング表示開始とスイング記録開始までの流れについて説明する。図１５は、スイング表示開始とスイング記録開始までの流れについて説明するための図である。
　図１５に示すように、トレーナーの端末２０－２に表示されるトレーナーメイン画面５１０には、トレーナーが受け持っている１または複数の生徒それぞれに対応する生徒選択用オブジェクトが含まれる。トレーナーがいずれかの生徒選択用オブジェクトを選択すると、その生徒選択用オブジェクトに対応する生徒メイン画面５２０が端末２０－２に表示される。
　一方、生徒メイン画面５２０が生徒の端末２０－１に表示される場合、生徒メイン画面５２０には、サインインを行った生徒自身（図１５に示した例では、「生徒１」）のスイングビデオを選択するためのスイングビデオ選択用オブジェクトおよびスイング記録開始ボタン６２０が含まれる。
　端末２０－２においてトレーナーがスイングビデオ選択用オブジェクトのいずれかを選択すると、選択されたスイングビデオ選択用オブジェクトに対応するスイング表示画面５３２が端末２０－２において表示される。同様に、端末２０－１において生徒がスイングビデオ選択用オブジェクトのいずれかを選択すると、選択されたスイングビデオ選択用オブジェクトに対応するスイング表示画面５３２が端末２０－１において表示される。
　また、端末２０－２においてトレーナーがスイング記録開始ボタン６２０を選択すると、スイング記録画面５３０が端末２０－２において表示される。同様に、端末２０－１において生徒がスイング記録開始ボタン６２０を選択すると、スイング記録画面５３０が端末２０－１において表示される。
　以上、スイング表示開始とスイング記録開始までの流れについて説明した。
　　（１．３．６．スイング記録）
　続いて、スイング記録について説明する。図１６は、スイング記録画面５３０の例を示す図である。まず、生徒がゴルフの自主練習を行う場合を想定する。このとき、生徒による自主練習のプレーの状態に対するトレーナーによるフィードバック情報が得られると、そのフィードバック情報が生徒によって確認されるレッスン（以下、「オンラインレッスン」ともいう。）が行われる。オンラインレッスンにおいては、スイング記録画面５３０は、生徒の端末２０－１において表示される。
　なお、スイング記録画面５３０には、水準器を示すマークが最初に表示されてもよい。そして、端末の静止状態が所定の時間継続したことが検出された場合に、水準器を示すマークの表示が消されてもよい。そうすれば、水準器を示すマークの消失によって、スイング記録開始の好適なタイミングが把握され得る。
　図１６に示すように、撮像開始前において、スイング記録画面５３０には、スルー画像が含まれている。その他、スイング記録画面５３０には、描画開始オブジェクト６３０、カメラ切り替え用オブジェクト６３１、現在表示されている画像撮像時の端末とセンサ装置３０との接続／非接続情報６３２、現在の端末とセンサ装置３０との接続／非接続情報６３３、現在表示されている画像撮像時の端末とセンサ装置３０との接続状態を示す情報６３４が含まれている。
　このとき、生徒の端末２０－１においてスイング記録画面５３０が表示され、生徒によってカメラ切り替え用オブジェクト６３１が選択された場合を想定する。かかる場合、生徒の端末２０－１の撮像部２２５は、自主練習でゴルフをプレーしている生徒の撮像を開始し、動画像を得る。一方、生徒の端末２０－１とペアリングされているセンサ装置３０は、センシングを行ってセンサ情報を得る。センサ情報は、センサ装置３０から送信され、端末２０－１の通信部２４０によって受信される。
　生徒の端末２０－１の制御部２１０は、通信部２４０によって受信されたセンサ情報に基づいてイベントを検出する。例えば、イベントは、所定の時刻を基準としたスイング開始時点、スイングトップ時点、インパクト時点、スイング終了時点、成功したスイング、失敗したスイング、最も良いスイング、および、最も悪いスイングのうち、少なくともいずれか一つを含んでよい。ここでは、イベントがインパクト時点である場合を主に説明する。
　生徒の端末２０－１の制御部２１０は、イベントの検出結果に基づいて、第１の生成情報を生成する。上記したように、本実施形態においては、第１の生成情報がスイングビデオおよび解析データを含む場合を主に説明する。スイングビデオは、ゴルフをプレーしている生徒が、端末２０－１の撮像部２２５によって撮像された動画像からイベントの検出結果に基づいて抽出される。
　より詳細には、センサ装置３０から受信されるセンサ情報と端末２０－１の撮像部２２５によって撮像される動画像とは、制御部２１０において同期されている。そして、スイングビデオは、動画像のうち、センサ情報におけるイベントの検出時点に応じた区間（例えば、イベントとしてインパクト時点が検出される場合には、インパクト時点よりも前に所定の秒数遡った時点からインパクト時点よりも後に所定の秒数経過した時点までの区間）に対応した動画像における区間が、制御部２１０によって抽出される。
　また、解析データは、センサ装置３０から受信されたセンサ情報が、イベント検出結果に基づいて、制御部２１０によって解析されて得られる。より具体的に、解析データは、インパクト時のクラブフェースの角度、インパクト時のクラブフェースとボールとの衝突角度、インパクト時のクラブヘッドの軌道の角度、インパクト時のヘッドスピード、および、スイング時の打ち手を示す情報のうち、少なくともいずれか一つを含んでよい。
　生徒の端末２０－１において、第１の生成情報（スイングビデオおよび解析データ）が生成されると、出力部２５０は、スイング記録画面５３０からスイング表示画面５３２に表示を自動的に切り替える。そして、出力部２５０は、スイング表示画面５３２において、第１の生成情報（スイングビデオおよび解析データ）を表示する。
　なお、出力部２５０は、スイングビデオの撮像とともに、マイクロフォンによって音データが検出された場合には、その音データも出力させてよい。そうすれば、音データに含まれる声（歓声など）、音データに含まれる音（クラブとボールとの衝突音など）を聴くことによって、または、声または音に対する音声認識結果を知ることによって、ショットの良し悪しをより高精度に推定することが可能となる。
　なお、生徒が連続的にスイングを行っている場合、生徒の端末２０－１において、制御部２１０が、第１の生成情報の表示中に、新たに生成情報（第３の生成情報（スイングビデオおよび解析データ））を生成する場合も想定される。かかる場合には、制御部２１０は、スイング表示画面５３２において、第１の生成情報（スイングビデオおよび解析データ）の表示から第３の生成情報（スイングビデオおよび解析データ）の表示に自動的に切り替えてよい。
　生徒の端末２０－１の通信部２４０は、第１の生成情報（スイングビデオおよび解析データ）を、ネットワークを介してサーバ１０に送信する。サーバ１０においては、第１の生成情報（スイングビデオおよび解析データ）が、通信部１４０によって受信され、記憶部１３０によって記憶される。記憶部１３０によって記憶された第１の生成情報（スイングビデオおよび解析データ）は、トレーナーによる操作に基づく端末２０－２からの取得要求が通信部１４０によって受信されると、送信制御部１１４によって、端末２０－２への送信が制御される。
　トレーナーの端末２０－２において、通信部２４０によって第１の生成情報（スイングビデオおよび解析データ）が受信されると、出力部２５０によってスイング表示画面５３２が表示される。なお、トレーナーの端末２０－２においても、出力部２５０は、スイングビデオの撮像とともに、マイクロフォンによって音データが検出された場合には、その音データも出力してよい。
　また、第１の生成情報（スイングビデオおよび解析データ）の他に、スイングを行うメンバーの名前、メンバーによって使用されるクラブの種類、端末と接続されるセンサ装置３０に関する情報（例えば、製品名、ＭＡＣアドレスなど）も、端末２０－１からサーバ１０に送信されて記憶されてよい。このとき、トレーナーの端末２０－２によって、スイングを行うメンバーの名前、メンバーによって使用されるクラブの種類、端末と接続されるセンサ装置３０に関する情報もサーバ１０から取得されて表示されてよい。
　例えば、スイングを行うメンバーの名前、メンバーによって使用されるクラブの種類、端末と接続されるセンサ装置３０に関する情報（例えば、製品名、ＭＡＣアドレスなど）は、端末２０－１を使用する生徒によって選択されてよい。
　図１７は、スイング記録画面５３０の例を示す図である。図１７を参照すると、スイング記録画面５３０には、メンバー選択用オブジェクト６１１、クラブ種類選択用オブジェクト６１２、および、センサ選択用オブジェクト６１３が含まれている。例えば、生徒の端末２０－１において、生徒によってメンバー選択用オブジェクト６１１が選択されると、メンバー選択画面が表示されてよい。
　図１８は、メンバー選択画面５４１の例を示す図である。図１８を参照すると、メンバー選択画面５４１には、メンバーの名前として、「トレーナー」「生徒１」「生徒２」「生徒３」「ｎｏｎａｍｅ」が含まれている。メンバー選択画面５４１において、生徒によって、これらのメンバーの名前からいずれかのメンバーの名前がスイングを行うメンバーの名前として選択されてよい。
　図１７に戻って説明を続ける。例えば、生徒の端末２０－１において、生徒によってクラブ種類選択用オブジェクト６１２が選択されると、クラブ選択画面が表示されてよい。
　図１９は、クラブ選択画面５４２の例を示す図である。図１９を参照すると、クラブ選択画面５４２には、クラブの種類として、「ドライバー（１Ｗ）」「３番ウッド（３Ｗ）」・・・「サンドウェッジ（ＳＷ）」が含まれている。クラブ選択画面５４２において、生徒によって、これらのクラブの種類からいずれかのクラブの種類がメンバーによって使用されるクラブの種類として選択されてよい。
　なお、ここでは、メンバーによって使用されるクラブの種類が手動によって選択される場合を説明したが、メンバーによって使用されるクラブの種類は、自動的に選択されてもよい。例えば、メンバーの名前に対して、メンバーがよく利用するクラブの種類が関連付けられている場合、かかる関連付けとメンバーの名前とに基づいて、メンバーによって使用されるクラブの種類が選択されてもよい。あるいは、メンバーがよく利用するクラブの長さ、素材、重さなどが登録されていれば、これらの情報に基づいて、メンバーによって使用されるクラブの種類が選択されてもよい。
　図１７に戻って説明を続ける。例えば、生徒の端末２０－１において、生徒によってセンサ選択用オブジェクト６１３が選択されると、センサ選択画面が表示されてよい。
　図２０は、センサ選択画面５４３の例を示す図である。図２０を参照すると、センサ選択画面５４３には、センサ装置３０に関する情報として、「センサＣ１」「センサＣ２」・・・「センサＣ５」が含まれている。センサ選択画面５４３において、生徒によって、これらのセンサ装置３０に関する情報からいずれかのセンサ装置３０に関する情報が、端末と接続されるセンサ装置３０に関する情報として選択されてよい。
　なお、ここでは、端末と接続されるセンサ装置３０に関する情報が手動によって選択される場合を説明したが、端末と接続されるセンサ装置３０に関する情報は、自動的に選択されてもよい。例えば、クラブの種類に対して、その種類のクラブに対して取り付け可能なセンサ装置３０に関する情報が関連付けられている場合、かかる関連付けとクラブの種類とに基づいて、端末と接続されるセンサ装置３０に関する情報が選択されてもよい。
　図１７に戻って説明を続ける。例えば、生徒の端末２０－１において、生徒によってセンサ選択用オブジェクト６１３が選択されると、センサ選択画面が表示されてよい。
　以上、オンラインレッスンにおけるスイング記録について説明した。
　　（１．３．７．スイング表示）
　スイング表示について説明する。図２１は、スイング表示画面５３２の例を示す図である。オンラインレッスンにおいては、第１の生成情報（スイングビデオおよび解析データ）が、トレーナーの端末２０－２の通信部２４０によってサーバ１０から受信されると、出力部２５０によって表示される。
　図２１を参照すると、スイング表示画面５３２において、スイングビデオが表示され、解析データの例として、インパクト時のクラブヘッドの軌道の角度（軌道の符号は「６４４」、角度は「－５．１」）、インパクト時のクラブフェースとボールが衝突する角度（クラブフェースの符号は「６４５」、数値は「９．８」）、インパクト時のクラブフェースとボールが衝突する角度（クラブフェースの符号は「６４６」、数値は「８．５」）、スピード（インパクト時のヘッドスピード）、クラブの種類とスピードとに基づいて解析によって得られた距離（飛距離）が表示されている。
　図２１を参照すると、トレーナーの端末２０－２によって表示されるスイング表示画面５３２には、描画開始オブジェクト６３０、お気に入り登録用オブジェクト６３５、スイングビデオ比較用オブジェクト６３６、スイング開始地点を示す表示オブジェクト６３７、スイングトップ地点を示す表示オブジェクト６３８、スイングインパクト地点を示す表示オブジェクト６３９、スイングビデオを軸に対して１８０度反転させるための１８０度反転用オブジェクト６４０、スイング記録画面に遷移するためのスイング記録画面遷移オブジェクト６４１、録音開始用オブジェクト６４２、時間軸６４３が含まれる。
　この例に示すように、トレーナーの端末２０－２においては、時間軸６４３に沿ったイベントに対応する位置に表示オブジェクト（スイング開始地点を示す表示オブジェクト６３７、スイングトップ地点を示す表示オブジェクト６３８、スイングインパクト地点を示す表示オブジェクト６３９）が出力部２５０によって表示される。そして、トレーナーによって時間軸６４３におけるいずれかの位置が指定位置として指定された場合、その指定位置に対応する第１の生成情報（スイングビデオおよび解析データ）における位置が出力部２５０によって表示される。これによって、所望のタイミングにおける第１の生成情報（スイングビデオおよび解析データ）の出力が容易になる。
　トレーナーの端末２０－２によって表示されるスイング表示画面５３２には、描画開始オブジェクト６３０、お気に入り登録用オブジェクト６３５、スイングビデオ比較用オブジェクト６３６、スイング開始地点を示す表示オブジェクト６３７、スイングトップ地点を示す表示オブジェクト６３８、スイングインパクト地点を示す表示オブジェクト６３９、スイングビデオを軸に対して１８０度反転させるための１８０度反転用オブジェクト６４０、スイング記録画面に遷移するためのスイング記録画面遷移オブジェクト６４１、録音開始用オブジェクト６４２、時間軸６４３が含まれる。
　なお、トレーナーによって所定のタブ切り替え操作（例えば、左右のフリック操作など）がなされると、スイング表示画面５３２からスイング軌道画面に切り替わる。図２２は、スイング軌道画面５５１の例を示す図である。スイング軌道画面５５１には、クラブヘッドの軌道情報６５１が含まれる。
　なお、トレーナーによって所定のタブ切り替え操作（例えば、左右のフリック操作など）がなされると、スイング軌道画面５５１から推定弾道画面に切り替わる。図２３は、推定弾道画面５５２の例を示す図である。推定弾道画面５５２には、推定弾道６５２が含まれる。推定弾道６５２は、解析データに含まれる、クラブの種類、スピード、距離、インパクト時のクラブフェースの角度、インパクト時のクラブフェースとボールとの衝突角度およびインパクト時のクラブヘッドの軌道の角度に基づいて算出され得る。
　図２４は、スイング表示画面５３２の例を示す図である。トレーナーが、スイング表示画面５３２に表示された第１の生成情報（スイングビデオおよび解析データ）に対してフィードバック情報を生徒に提供したいと考えた場合を想定する。このとき、トレーナーが録音開始用オブジェクト６４２を選択し、フィードバック情報の例としての音声データを入力し、描画開始オブジェクト６３０を選択し、フィードバック情報の例としての画像データ（図２４に示した例では、画像データ６６１－１～６６１－３）を入力すると、トレーナーの端末２０－２の制御部２１０は、フィードバック情報の例としての音声データおよび画像データのサーバ１０への送信を制御する。
　なお、ここでは、フィードバック情報の例としての音声データおよび画像データを想定する。しかし、フィードバック情報は、音声データおよび画像データに限定されない。フィードバック情報は、第１の生成情報（スイングビデオおよび解析データ）に対してトレーナーによって入力された、音声データ、テキストデータ、および、画像データの少なくともいずれか一つを含んでよい。サーバ１０においては、フィードバック情報の例としての音声データおよび画像データが、通信部１４０によって受信され、記憶部１３０によって記憶される。
　図２５は、第１の生成情報（スイングビデオおよび解析データ）の軸に対する１８０度反転表示を説明するための図である。図２５を参照すると、トレーナーの端末２０－２において、スイング表示画面５３２が表示されている。ここで、トレーナーの端末２０－２の制御部２１０は、所定の１８０度反転操作（例えば、１８０度反転用オブジェクト６４０の選択）が検出された場合、第１の生成情報（スイングビデオおよび解析データ）を、軸に対して１８０度反転表示させてよい。なお、一つの軸（視点）で撮られた画像を１８０度反転して表示することによって、左右反転された画像が表示され得る（左右反転された結果として、スイングする者の利き手が左右反転されて表示されることになる）。
　図２５に示した例では、トレーナーの端末２０－２において、スイングビデオが軸に対して１８０度反転表示され、解析データが軸に対して１８０度反転表示された、インパクト時のクラブヘッドの軌道の角度（軌道の符号「６７１」）、インパクト時のクラブフェースとボールが衝突する角度（クラブフェースの符号「６７２」）、インパクト時のクラブフェースとボールが衝突する角度（クラブフェースの符号「６７３」）が軸に対して１８０度反転されたスイング表示画面５７１が表示されている。
　図２６は、比較相手のスイングの選択について説明するための図である。図２６を参照すると、トレーナーの端末２０－２において、スイング表示画面５３２が表示されている。ここで、トレーナーの端末２０－２の制御部２１０は、所定の比較操作（例えば、スイングビデオ比較用オブジェクト６３６の選択）が検出され、比較スイング選択画面５８２における比較相手のスイングが選択された場合、比較ビデオ画面５８３を表示させてよい。
　図２７は、比較スイング選択画面５８４の例を示す図である。図２７に示した比較スイング選択画面５８４では、メンバーを限定することによって、比較相手のスイングビデオを絞り込む例が示されている。図２８は、比較スイング選択画面５８４の例を示す図である。図２８に示した比較スイング選択画面５８４では、クラブの種類を限定することによって、比較相手のスイングビデオを絞り込む例が示されている。
　図２９は、二つの生成情報が同一の画面に並べられて表示される例を示す図である。図２９に示した例では、第１の生成情報（スイングビデオおよび解析データ）と同一の画面への表示対象として、第１の生成情報（生徒を撮像したスイングビデオＶ１および解析データ）とは異なる第２の生成情報（トレーナーを撮像したスイングビデオＶ２および解析データ）が選択された場合に、スイングビデオＶ１とスイングビデオＶ２とが、同一の画面に並べられて表示されている。また、図２９に示した例では、各々の解析データが区別されるように（一例として、異なる色によって区別されるように）表示されている。
　また、比較相手は自動的に軸に対して１８０度反転表示されてもよい。例えば、第１の生成情報（生徒を撮像したスイングビデオＶ１および解析データ）に含まれる打ち手を示す情報と第２の生成情報（トレーナーを撮像したスイングビデオＶ２および解析データ）に含まれる打ち手を示す情報とが逆である場合、トレーナーの端末２０－２の制御部２１０は、第２の生成情報（トレーナーを撮像したスイングビデオＶ２および解析データ）の表示が自動的に軸に対して１８０度反転される。
　また、生徒が使用するクラブの変更によって比較相手が自動的に変更されてもよい。例えば、生徒が使用するクラブの種類が変更された場合、トレーナーの端末２０－２の制御部２１０は、第２の生成情報（トレーナーを撮像したスイングビデオＶ２および解析データ）の表示から、変更後のクラブの種類に応じた第３の生成情報の表示に自動的に切り替えてもよい。
　図３０は、二つの生成情報が同一の画面に重ねられて表示される例を示す図である。図３０に示した例では、第１の生成情報（スイングビデオおよび解析データ）と同一の画面への表示対象として、第１の生成情報（生徒を撮像したスイングビデオＶ１および解析データ）とは異なる第２の生成情報（トレーナーを撮像したスイングビデオＶ２および解析データ）が選択された場合に、スイングビデオＶ１とスイングビデオＶ２とが、同一の画面に重ねられて表示されている。また、図３０に示した例では、各々の解析データが区別されるように（一例として、異なる色によって区別されるように）表示されている。
　なお、二つの生成情報が同一の画面に重ねられて表示される場合にも、二つの生成情報が同一の画面に並べられて表示される場合と同様に、比較相手は自動的に軸に対して１８０度反転表示されてもよい。また、二つの生成情報が同一の画面に重ねられて表示される場合にも、二つの生成情報が同一の画面に並べられて表示される場合と同様に、生徒が使用するクラブの変更によって比較相手が自動的に変更されてもよい。
　また、第２の生成情報（トレーナーを撮像したスイングビデオＶ２）は、所定の変更操作に基づいて、拡大、縮小、または、移動が可能であってよい。より詳細には、トレーナーによって、スイングビデオＶ２に対してピンチアウト操作がなされた場合、スイングビデオＶ２が拡大されてもよい。また、トレーナーによって、スイングビデオＶ２に対してピンチイン操作がなされた場合、スイングビデオＶ２が縮小されてもよい。また、トレーナーによって、スイングビデオＶ２に対してドラッグ操作がなされた場合、スイングビデオＶ２が移動されてもよい。
　なお、トレーナーによって所定のタブ切り替え操作（例えば、左右のフリック操作など）がなされると、比較ビデオ画面５８３から比較スイング軌道画面に切り替わる。図３１は、比較スイング軌道画面５８５の例を示す図である。比較スイング軌道画面５８５には、第１の生成情報（解析データ）の例としてのクラブヘッドの軌道情報６５１が含まれるとともに、第２の生成情報（解析データ）の例としてのクラブヘッドの軌道情報６８５が含まれる。
　トレーナーによって所定のタブ切り替え操作（例えば、左右のフリック操作など）がなされると、比較スイング軌道画面５８５から比較推定弾道画面に切り替わる。図３２は、比較推定弾道画面５８６の例を示す図である。比較推定弾道画面５８６には、推定弾道６５２の他に推定弾道６８６が含まれる。推定弾道６５２は、第１の生成情報（解析データ）に含まれる、クラブの種類、スピード、距離に基づいて算出され得る。推定弾道６８６は、第２の生成情報（解析データ）に含まれる、クラブの種類、スピード、距離、インパクト時のクラブフェースの角度、インパクト時のクラブフェースとボールとの衝突角度およびインパクト時のクラブヘッドの軌道の角度に基づいて算出され得る。
　サーバ１０の記憶部１３０によって記憶された第１の生成情報（スイングビデオおよび解析データ）は、トレーナーによる操作に基づく端末２０－２からの取得要求が通信部１４０によって受信されると、送信制御部１１４によって、生徒の端末２０－２への送信が制御される。生徒の端末２０－２の出力部２５０は、フィードバック情報の例としての音声データを出力するとともに、画像データを表示する。生徒は、音声データおよび画像データによって、トレーナーによるフィードバック情報を確認することができる。
　このようにして、オンラインレッスンにおいては、生徒は、自主練習のプレーの状態に対するトレーナーによるフィードバック情報が得られると、そのフィードバック情報を容易に確認することができる。生徒とトレーナーとの深いコミュニケーションが実現されるため、常に生徒とトレーナーとが繋がっている感覚を両者に与えることが可能となる。
　生徒の端末２０－１において、第１の生成情報（スイングビデオおよびおよび解析データ）の生成前に（または生成後に）、生徒によってプレーを補助するための補助情報が入力された場合（例えば、スイング記録画面５３０において描画開始オブジェクト６３０の選択後にスルー画像の上から図形データが入力された場合）、第１の生成情報（スイングビデオおよびおよび解析データ）と補助情報とが関連付けられてサーバ１０に送信されてもよい。このとき、トレーナーの端末２０－２において、サーバ１０から第１の生成情報（スイングビデオおよびおよび解析データ）が取得されて表示されるに際して、補助情報もサーバ１０から取得されて表示されてもよい。
　［１．４．ハードウェア構成例］
　次に、図３２を参照して、本開示の実施形態に係るサーバ１０のハードウェア構成について説明する。図３２は、本開示の実施形態に係るサーバ１０のハードウェア構成例を示すブロック図である。なお、ここでは、サーバ１０のハードウェア構成例について説明するが、端末２０のハードウェア構成も、ここで説明するサーバ１０のハードウェア構成例と同様にして実現され得る。
　図３２に示すように、サーバ１０は、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　ｕｎｉｔ）９０１、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）９０３、およびＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）９０５を含む。また、サーバ１０は、ホストバス９０７、ブリッジ９０９、外部バス９１１、インターフェース９１３、入力装置９１５、出力装置９１７、ストレージ装置９１９、ドライブ９２１、接続ポート９２３、通信装置９２５を含んでもよい。さらに、サーバ１０は、必要に応じて、撮像装置９３３、およびセンサ９３５を含んでもよい。サーバ１０は、ＣＰＵ９０１に代えて、またはこれとともに、ＤＳＰ（Ｄｉｇｉｔａｌ　Ｓｉｇｎａｌ　Ｐｒｏｃｅｓｓｏｒ）またはＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）と呼ばれるような処理回路を有してもよい。
　ＣＰＵ９０１は、演算処理装置および制御装置として機能し、ＲＯＭ９０３、ＲＡＭ９０５、ストレージ装置９１９、またはリムーバブル記録媒体９２７に記録された各種プログラムに従って、サーバ１０内の動作全般またはその一部を制御する。ＲＯＭ９０３は、ＣＰＵ９０１が使用するプログラムや演算パラメータなどを記憶する。ＲＡＭ９０５は、ＣＰＵ９０１の実行において使用するプログラムや、その実行において適宜変化するパラメータなどを一時的に記憶する。ＣＰＵ９０１、ＲＯＭ９０３、およびＲＡＭ９０５は、ＣＰＵバスなどの内部バスにより構成されるホストバス９０７により相互に接続されている。さらに、ホストバス９０７は、ブリッジ９０９を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ　Ｃｏｍｐｏｎｅｎｔ　Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス９１１に接続されている。
　入力装置９１５は、例えば、ボタンなど、ユーザによって操作される装置である。入力装置９１５は、マウス、キーボード、タッチパネル、スイッチおよびレバーなどを含んでもよい。また、入力装置９１５は、ユーザの音声を検出するマイクロフォンを含んでもよい。入力装置９１５は、例えば、赤外線やその他の電波を利用したリモートコントロール装置であってもよいし、サーバ１０の操作に対応した携帯電話などの外部接続機器９２９であってもよい。入力装置９１５は、ユーザが入力した情報に基づいて入力信号を生成してＣＰＵ９０１に出力する入力制御回路を含む。ユーザは、この入力装置９１５を操作することによって、サーバ１０に対して各種のデータを入力したり処理動作を指示したりする。また、後述する撮像装置９３３も、ユーザの手の動き、ユーザの指などを撮像することによって、入力装置として機能し得る。このとき、手の動きや指の向きに応じてポインティング位置が決定されてよい。
　出力装置９１７は、取得した情報をユーザに対して視覚的または聴覚的に通知することが可能な装置で構成される。出力装置９１７は、例えば、ＬＣＤ（Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｄｉｓｐｌａｙ）、有機ＥＬ（Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイなどの表示装置、スピーカおよびヘッドホンなどの音出力装置などであり得る。また、出力装置９１７は、ＰＤＰ（Ｐｌａｓｍａ　Ｄｉｓｐｌａｙ　Ｐａｎｅｌ）、プロジェクタ、ホログラム、プリンタ装置などを含んでもよい。出力装置９１７は、サーバ１０の処理により得られた結果を、テキストまたは画像などの映像として出力したり、音声または音響などの音として出力したりする。また、出力装置９１７は、周囲を明るくするためライトなどを含んでもよい。
　ストレージ装置９１９は、サーバ１０の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置９１９は、例えば、ＨＤＤ（Ｈａｒｄ　Ｄｉｓｋ　Ｄｒｉｖｅ）などの磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス、または光磁気記憶デバイスなどにより構成される。このストレージ装置９１９は、ＣＰＵ９０１が実行するプログラムや各種データ、および外部から取得した各種のデータなどを格納する。
　ドライブ９２１は、磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリなどのリムーバブル記録媒体９２７のためのリーダライタであり、サーバ１０に内蔵、あるいは外付けされる。ドライブ９２１は、装着されているリムーバブル記録媒体９２７に記録されている情報を読み出して、ＲＡＭ９０５に出力する。また、ドライブ９２１は、装着されているリムーバブル記録媒体９２７に記録を書き込む。
　接続ポート９２３は、機器をサーバ１０に直接接続するためのポートである。接続ポート９２３は、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ　Ｓｅｒｉａｌ　Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ　Ｃｏｍｐｕｔｅｒ　Ｓｙｓｔｅｍ　Ｉｎｔｅｒｆａｃｅ）ポートなどであり得る。また、接続ポート９２３は、ＲＳ－２３２Ｃポート、光オーディオ端子、ＨＤＭＩ（登録商標）（Ｈｉｇｈ－Ｄｅｆｉｎｉｔｉｏｎ　Ｍｕｌｔｉｍｅｄｉａ　Ｉｎｔｅｒｆａｃｅ）ポートなどであってもよい。接続ポート９２３に外部接続機器９２９を接続することで、サーバ１０と外部接続機器９２９との間で各種のデータが交換され得る。
　通信装置９２５は、例えば、ネットワーク９３１に接続するための通信デバイスなどで構成された通信インターフェースである。通信装置９２５は、例えば、有線または無線ＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、またはＷＵＳＢ（Ｗｉｒｅｌｅｓｓ　ＵＳＢ）用の通信カードなどであり得る。また、通信装置９２５は、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ　Ｄｉｇｉｔａｌ　Ｓｕｂｓｃｒｉｂｅｒ　Ｌｉｎｅ）用のルータ、または、各種通信用のモデムなどであってもよい。通信装置９２５は、例えば、インターネットや他の通信機器との間で、ＴＣＰ／ＩＰなどの所定のプロトコルを用いて信号などを送受信する。また、通信装置９２５に接続されるネットワーク９３１は、有線または無線によって接続されたネットワークであり、例えば、インターネット、家庭内ＬＡＮ、赤外線通信、ラジオ波通信または衛星通信などである。
　撮像装置９３３は、例えば、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）またはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などの撮像素子、および撮像素子への被写体像の結像を制御するためのレンズなどの各種の部材を用いて実空間を撮像し、撮像画像を生成する装置である。撮像装置９３３は、静止画を撮像するものであってもよいし、また動画を撮像するものであってもよい。
　センサ９３５は、例えば、測距センサ、加速度センサ、ジャイロセンサ、地磁気センサ、振動センサ、光センサ、音センサなどの各種のセンサである。センサ９３５は、例えばサーバ１０の筐体の姿勢など、サーバ１０自体の状態に関する情報や、サーバ１０の周辺の明るさや騒音など、サーバ１０の周辺環境に関する情報を取得する。また、センサ９３５は、ＧＰＳ（Ｇｌｏｂａｌ　Ｐｏｓｉｔｉｏｎｉｎｇ　Ｓｙｓｔｅｍ）信号を受信して装置の緯度、経度および高度を測定するＧＰＳセンサを含んでもよい。
　＜２．むすび＞
　以上説明したように、本開示の実施形態によれば、ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得する取得部と、前記フィードバック情報の前記第１のユーザの端末への送信を制御する送信制御部と、を備える、情報処理装置が提供される。かかる構成によれば、第１のユーザのプレーの状態に対する第２のユーザからのフィードバック情報をより効率よく第１のユーザに提示することが可能となる。
　以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
　上記では、記録された生成情報（スイングビデオおよび解析データ）の表示（スイング表示）がトレーナーの端末２０－２によってなされる場合を主に説明した。しかし、トレーナーの端末２０－２によってなされるスイング表示と同様なスイング表示が、生徒の端末２０－１によってなされてもよい。これによって、記録された生成情報（スイングビデオおよび解析データ）を生徒も確認することが可能となる。
　また、上記では、オンラインレッスンがなされる場合を想定したため、生成情報（スイングビデオおよび解析データ）の記録（スイング記録）が生徒の端末２０－１によってなされる場合を主に想定した。しかし、インドアレッスンのときに、トレーナーが生徒にゴルフを指導しながら（フィードバック情報を入力しながら）、スイング記録がトレーナーの端末２０－２によってなされてもよい。
　すなわち、トレーナーの端末２０－２の制御部２１０は、イベントの検出結果に基づいて、第１の生成情報を生成し、通信部２４０は、第１の生成情報とフィードバック情報とをサーバ１０に送信する。サーバ１０においては、取得部１１２が、第１の生成情報とフィードバック情報とをトレーナーの端末２０－２から取得し、記憶部１３０は、第１の生成情報とフィードバック情報とを記憶する。生徒の端末２０－１は、生徒による操作に基づく取得要求によって、第１の生成情報とフィードバック情報とを出力する。
　生徒は、このようにして出力された第１の生成情報とフィードバック情報とを確認することによって、過去のレッスンを詳細に振り返ること（レッスンレビュー）が可能となる（レッスンの追体験が可能となる）。また、レッスンの内容を忘れてしまった場合であっても、このようにして出力された第１の生成情報とフィードバック情報とを確認することによって、過去のレッスンを思い出すことが可能となる。
　また、上記では、１人の生徒に対して１人のトレーナーが指導する場合を主に想定したが、１人の生徒に対して複数人のトレーナーが指導してもよい。例えば、生徒に対してインドアレッスンを行うトレーナー以外に、生徒に対してラウンドでのレッスン（ラウンドレッスン）を行うトレーナーが存在してもよい。このとき、第１の生成情報（スイングビデオおよび解析データ）、フィードバック情報などは、複数人のトレーナーに共有されるのが望ましい。
　すなわち、サーバ１０の記憶部１３０によって記憶された第１の生成情報（スイングビデオおよび解析データ）は、２人目のトレーナー（第３のユーザ）による操作に基づく端末からの取得要求が通信部１４０によって受信されると、送信制御部１１４によって、２人目のトレーナー（第３のユーザ）の端末への送信が制御されてよい。
　また、端末２０において、制御部２１０は、解析データを判定し、解析データが所定の範囲から外れる場合には、出力部２５０にエラーが発生したことを出力させてもよい。例えば、制御部２１０は、第１の生成情報（解析データ）の例としてのクラブヘッドの軌道情報が所定の範囲（例えば、地上など）から外れる場合には、出力部２５０にエラーが発生したことを出力させてもよい。
　また、上記では、イベントの例としてインパクト時点が検出される場合を説明したが、センサ情報に基づいてインパクト時点を判定するための閾値（インパクト判定閾値）は、変化されてもよい。例えば、インパクト判定閾値は、ショットの種類、クラブの種類、スイングを行う者の属性（例えば、性別、年齢、キッズであるか否か）に応じた変化されてもよい。
　また、上記では、クラブの種類とスピードとに基づいて距離（飛距離）が得られる場合を主に説明したが、距離（飛距離）の推定に他の要因が考慮されてもよい。例えば、スイングが終わった後に、距離（飛距離）、クラブの種類、スイングを行った環境（天気、風の強さなど）、スイングを行った場所（スイングを行った位置の芝生の長さ、地面の傾斜度合いなど）を入力し、これらの情報を機械学習に利用して、距離（飛距離）の推定精度の向上を図ってもよい。
　また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏し得る。
　なお、以下のような構成も本開示の技術的範囲に属する。
（１）
　ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得する取得部と、
　前記フィードバック情報の前記第１のユーザの端末への送信を制御する送信制御部と、
　を備える、情報処理装置。
（２）
　前記第１の生成情報は、ゴルフをプレーしている前記第１のユーザを撮像した動画像から前記イベントの検出結果に基づいて抽出されたプレー画像を含む、
　前記（１）に記載の情報処理装置。
（３）
　前記センサ情報と前記動画像とは同期されており、
　前記プレー画像は、前記動画像のうち、前記センサ情報における前記イベントの検出時点に応じた区間に対応した前記動画像における区間の画像である、
　前記（２）に記載の情報処理装置。
（４）
　前記第１の生成情報は、前記イベントの検出結果に基づいて得られた解析データを含み、
　前記解析データは、インパクト時のクラブフェースの角度、インパクト時のクラブフェースとボールとの衝突角度、インパクト時のクラブヘッドの軌道の角度、インパクト時のヘッドスピード、および、スイング時の打ち手を示す情報のうち、少なくともいずれか一つを含む、
　前記（１）～（３）のいずれか一項に記載の情報処理装置。
（５）
　時間軸に沿った前記イベントに対応する位置に表示オブジェクトが表示され、前記時間軸におけるいずれかの位置が指定位置として指定された場合、前記指定位置に対応する前記第１の生成情報における位置が表示される、
　前記（１）～（４）のいずれか一項に記載の情報処理装置。
（６）
　前記第１の生成情報と同一の画面への表示対象として、前記第１の生成情報とは異なる第２の生成情報が選択された場合、前記第１の生成情報と前記第２の生成情報とが、同一の画面に重ねられて、または、並べられて表示される、
　前記（１）～（５）のいずれか一項に記載の情報処理装置。
（７）
　前記第２の生成情報は、所定の変更操作に基づいて、拡大、縮小、または、移動が可能である、
　前記（６）に記載の情報処理装置。
（８）
　前記第１の生成情報に含まれる打ち手を示す情報と第２の生成情報に含まれる打ち手を示す情報とが逆である場合、前記第２の生成情報の表示が自動的に軸に対して１８０度反転される、
　前記（６）または（７）に記載の情報処理装置。
（９）
　前記第１のユーザが使用するクラブの種類が変更された場合、前記第２の生成情報の表示から、変更後の前記クラブの種類に応じた第３の生成情報の表示に自動的に切り替わる、
　前記（６）～（８）のいずれか一項に記載の情報処理装置。
（１０）
　前記第１の生成情報は、所定の１８０度反転操作が検出された場合、軸に対して１８０度反転表示される、
　前記（１）～（９）のいずれか一項に記載の情報処理装置。
（１１）
　前記第１の生成情報の表示中に、第３の生成情報が新たに生成された場合、前記第１の生成情報の表示から前記第３の生成情報の表示に自動的に切り替わる、
　前記（１）～（１０）のいずれか一項に記載の情報処理装置。
（１２）
　前記第１の生成情報の生成前または生成後に前記プレーを補助するための補助情報が入力された場合、前記第１の生成情報と前記補助情報とが関連付けられ、前記第１の生成情報が表示されるに際して前記補助情報も表示される、
　前記（１）～（１１）のいずれか一項に記載の情報処理装置。
（１３）
　前記取得部は、前記第１の生成情報と前記フィードバック情報とを前記第２のユーザの端末から取得する、
　前記（１）～（１２）のいずれか一項に記載の情報処理装置。
（１４）
　前記送信制御部は、前記第１の生成情報が前記第１のユーザの端末から取得された場合、前記第１の生成情報の前記第２のユーザの端末への送信を制御する、
　前記（１）～（１２）のいずれか一項に記載の情報処理装置。
（１５）
　前記送信制御部は、前記フィードバック情報の第３のユーザの端末への送信をさらに制御する、
　前記（１）～（１２）のいずれか一項に記載の情報処理装置。
（１６）
　前記イベントは、所定の時刻を基準としたスイング開始時点、スイングトップ時点、インパクト時点、スイング終了時点、成功したスイング、失敗したスイング、最も良いスイング、および、最も悪いスイングのうち、少なくともいずれか一つを含む、
　前記（１）～（１５）のいずれか一項に記載の情報処理装置。
（１７）
　前記フィードバック情報は、前記第１の生成情報に対して前記第２のユーザによって入力された、音声データ、テキストデータ、および、画像データの少なくともいずれか一つを含む、
　前記（１）～（１６）のいずれか一項に記載の情報処理装置。
（１８）
　前記第１のユーザは、前記第２のユーザからゴルフのレッスンを受ける生徒である、
　前記（１）～（１７）のいずれか一項に記載の情報処理装置。
（１９）
　ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得することと、
　プロセッサにより、前記フィードバック情報の前記第１のユーザの端末への送信を制御することと、
　を含む、情報処理方法。
（２０）
　コンピュータを、
　ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得する取得部と、
　前記フィードバック情報の前記第１のユーザの端末への送信を制御する送信制御部と、
　を備える情報処理装置として機能させるためのプログラム。
　１　　　情報処理システム
　１０　　サーバ
　１１０　制御部
　１１２　取得部
　１１３　算出部
　１１４　送信制御部
　１３０　記憶部
　１４０　通信部
　２０　　端末
　２１０　制御部
　２２０　操作部
　２２５　撮像部
　２３０　記憶部
　２４０　通信部
　２５０　出力部
　３０　　センサ装置
　４０　　サーバ

Claims (20)

  1. 　ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得する取得部と、
    　前記フィードバック情報の前記第１のユーザの端末への送信を制御する送信制御部と、
    　を備える、情報処理装置。
  2. 　前記第１の生成情報は、ゴルフをプレーしている前記第１のユーザを撮像した動画像から前記イベントの検出結果に基づいて抽出されたプレー画像を含む、
    　請求項１に記載の情報処理装置。
  3. 　前記センサ情報と前記動画像とは同期されており、
    　前記プレー画像は、前記動画像のうち、前記センサ情報における前記イベントの検出時点に応じた区間に対応した前記動画像における区間の画像である、
    　請求項２に記載の情報処理装置。
  4. 　前記第１の生成情報は、前記イベントの検出結果に基づいて得られた解析データを含み、
    　前記解析データは、インパクト時のクラブフェースの角度、インパクト時のクラブフェースとボールとの衝突角度、インパクト時のクラブヘッドの軌道の角度、インパクト時のヘッドスピード、および、スイング時の打ち手を示す情報のうち、少なくともいずれか一つを含む、
    　請求項１に記載の情報処理装置。
  5. 　時間軸に沿った前記イベントに対応する位置に表示オブジェクトが表示され、前記時間軸におけるいずれかの位置が指定位置として指定された場合、前記指定位置に対応する前記第１の生成情報における位置が表示される、
    　請求項１に記載の情報処理装置。
  6. 　前記第１の生成情報と同一の画面への表示対象として、前記第１の生成情報とは異なる第２の生成情報が選択された場合、前記第１の生成情報と前記第２の生成情報とが、同一の画面に重ねられて、または、並べられて表示される、
    　請求項１に記載の情報処理装置。
  7. 　前記第２の生成情報は、所定の変更操作に基づいて、拡大、縮小、または、移動が可能である、
    　請求項６に記載の情報処理装置。
  8. 　前記第１の生成情報に含まれる打ち手を示す情報と第２の生成情報に含まれる打ち手を示す情報とが逆である場合、前記第２の生成情報の表示が自動的に軸に対して１８０度反転される、
    　請求項６に記載の情報処理装置。
  9. 　前記第１のユーザが使用するクラブの種類が変更された場合、前記第２の生成情報の表示から、変更後の前記クラブの種類に応じた第３の生成情報の表示に自動的に切り替わる、
    　請求項６に記載の情報処理装置。
  10. 　前記第１の生成情報は、所定の１８０度反転操作が検出された場合、軸に対して１８０度反転して表示される、
    　請求項１に記載の情報処理装置。
  11. 　前記第１の生成情報の表示中に、第３の生成情報が新たに生成された場合、前記第１の生成情報の表示から前記第３の生成情報の表示に自動的に切り替わる、
    　請求項１に記載の情報処理装置。
  12. 　前記第１の生成情報の生成前または生成後に前記プレーを補助するための補助情報が入力された場合、前記第１の生成情報と前記補助情報とが関連付けられ、前記第１の生成情報が表示されるに際して前記補助情報も表示される、
    　請求項１に記載の情報処理装置。
  13. 　前記取得部は、前記第１の生成情報と前記フィードバック情報とを前記第２のユーザの端末から取得する、
    　請求項１に記載の情報処理装置。
  14. 　前記送信制御部は、前記第１の生成情報が前記第１のユーザの端末から取得された場合、前記第１の生成情報の前記第２のユーザの端末への送信を制御する、
    　請求項１に記載の情報処理装置。
  15. 　前記送信制御部は、前記フィードバック情報の第３のユーザの端末への送信をさらに制御する、
    　請求項１に記載の情報処理装置。
  16. 　前記イベントは、所定の時刻を基準としたスイング開始時点、スイングトップ時点、インパクト時点、スイング終了時点、成功したスイング、失敗したスイング、最も良いスイング、および、最も悪いスイングのうち、少なくともいずれか一つを含む、
    　請求項１に記載の情報処理装置。
  17. 　前記フィードバック情報は、前記第１の生成情報に対して前記第２のユーザによって入力された、音声データ、テキストデータ、および、画像データの少なくともいずれか一つを含む、
    　請求項１に記載の情報処理装置。
  18. 　前記第１のユーザは、前記第２のユーザからゴルフのレッスンを受ける生徒である、
    　請求項１に記載の情報処理装置。
  19. 　ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得することと、
    　プロセッサにより、前記フィードバック情報の前記第１のユーザの端末への送信を制御することと、
    　を含む、情報処理方法。
  20. 　コンピュータを、
    　ゴルフをプレーしている第１のユーザに関連した情報を示すセンサ情報を基にしたイベントの検出結果を用いて生成された第１の生成情報に対するフィードバック情報を、前記第１のユーザとは異なる第２のユーザの端末から取得する取得部と、
    　前記フィードバック情報の前記第１のユーザの端末への送信を制御する送信制御部と、
    　を備える情報処理装置として機能させるためのプログラム。
PCT/JP2018/010434 2017-06-02 2018-03-16 情報処理装置、情報処理方法およびプログラム WO2018220948A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
US16/617,249 US20200094122A1 (en) 2017-06-02 2018-03-16 Information processor, information processing method, and program
EP18808846.2A EP3632512B1 (en) 2017-06-02 2018-03-16 Information processing device, information processing method, and program
KR1020197032982A KR20200015890A (ko) 2017-06-02 2018-03-16 정보 처리 장치, 정보 처리 방법 및 프로그램
JP2019521968A JPWO2018220948A1 (ja) 2017-06-02 2018-03-16 情報処理装置、情報処理方法およびプログラム
CA3064504A CA3064504A1 (en) 2017-06-02 2018-03-16 Information processor, information processing method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-110341 2017-06-02
JP2017110341 2017-06-02

Publications (1)

Publication Number Publication Date
WO2018220948A1 true WO2018220948A1 (ja) 2018-12-06

Family

ID=64456252

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/010434 WO2018220948A1 (ja) 2017-06-02 2018-03-16 情報処理装置、情報処理方法およびプログラム

Country Status (6)

Country Link
US (1) US20200094122A1 (ja)
EP (1) EP3632512B1 (ja)
JP (1) JPWO2018220948A1 (ja)
KR (1) KR20200015890A (ja)
CA (1) CA3064504A1 (ja)
WO (1) WO2018220948A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020144835A1 (ja) * 2019-01-11 2020-07-16 ソニー株式会社 情報処理装置および情報処理方法
JP2021049208A (ja) * 2019-09-26 2021-04-01 株式会社Ｓｐｏｒｔｉｐ 運動評価システム
JP7005737B1 (ja) 2020-12-28 2022-01-24 楽天グループ株式会社 ゴルフスイング解析システム、ゴルフスイング解析方法及びプログラム
JP7011030B1 (ja) 2020-12-28 2022-01-26 楽天グループ株式会社 ゴルフスイング解析システム、ゴルフスイング解析方法及びプログラム
WO2022158099A1 (ja) 2021-01-21 2022-07-28 ソニーグループ株式会社 情報処理方法、情報処理システム、情報端末、並びにコンピュータプログラム

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021020667A1 (ko) * 2019-07-29 2021-02-04 주식회사 네오펙트 원격 재활 훈련 제공 방법 및 프로그램
CN111111121B (zh) * 2020-01-16 2023-10-03 合肥工业大学 一种球拍及击球识别方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003088604A (ja) * 2001-09-20 2003-03-25 Sumitomo Rubber Ind Ltd ゴルフスイング記録保存システム
JP2003208479A (ja) * 2002-01-10 2003-07-25 Univ Waseda 画像閲覧システムおよび閲覧用画像提供方法、管理サーバ、並びにプログラム
WO2006098096A1 (ja) * 2005-02-23 2006-09-21 Muneomi Katayama インターネットレッスンシステム
US20070026958A1 (en) * 2005-07-26 2007-02-01 Barasch Michael A Method and system for providing web based interactive lessons
JP2009020897A (ja) * 2002-09-26 2009-01-29 Toshiba Corp 画像解析方法、画像解析装置、画像解析プログラム
JP2015502831A (ja) * 2012-12-11 2015-01-29 デュソンテクノロジー カンパニー リミテッドＤｕ−Ｓｕｎｇ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ． クラブ付着型ゴルフスイングのリアルタイム分析システムおよびその動作方法
JP2017022727A (ja) 2016-08-23 2017-01-26 ソニー株式会社 情報処理装置、情報処理システムおよびプログラム
JP2017064095A (ja) * 2015-09-30 2017-04-06 国立大学法人 筑波大学 学習システム、学習方法、プログラム、記録媒体

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004164563A (ja) * 2002-09-26 2004-06-10 Toshiba Corp 画像解析方法、画像解析装置、画像解析プログラム
JP2006130079A (ja) * 2004-11-05 2006-05-25 Nippon Telegraph & Telephone West Corp フォームチェックサービス用システム
US8613620B2 (en) * 2005-07-26 2013-12-24 Interactive Sports Direct Incorporated Method and system for providing web based interactive lessons with improved session playback
US20100201512A1 (en) * 2006-01-09 2010-08-12 Harold Dan Stirling Apparatus, systems, and methods for evaluating body movements
JP4679429B2 (ja) * 2006-04-27 2011-04-27 任天堂株式会社 音出力プログラムおよび音出力装置
US7920124B2 (en) * 2006-08-29 2011-04-05 Canon Kabushiki Kaisha Force sense presentation device, mixed reality system, information processing method, and information processing apparatus
US9283464B2 (en) * 2007-08-03 2016-03-15 Lynqs, Inc. Golf gaming systems and methods
US20090069105A1 (en) * 2007-09-10 2009-03-12 Range Revolution, Inc. System and method for improving golf skills
US9623284B2 (en) * 2008-02-20 2017-04-18 Karsten Manufacturing Corporation Systems and methods for storing and analyzing golf data, including community and individual golf data collection and storage at a central hub
US9661894B2 (en) * 2008-02-20 2017-05-30 Nike, Inc. Systems and methods for storing and analyzing golf data, including community and individual golf data collection and storage at a central hub
US8698736B2 (en) * 2009-03-24 2014-04-15 Immersion Corporation Handheld computer interface with haptic feedback
US20110250939A1 (en) * 2010-04-09 2011-10-13 Hobler Marc L Network-connected golf game improvement, entertainment and monetization system and method
EP2529808B1 (en) * 2011-06-03 2015-08-26 Sony Computer Entertainment Inc. Game device, game control program, and method for controlling golf game
JP5514774B2 (ja) * 2011-07-13 2014-06-04 株式会社ソニー・コンピュータエンタテインメント ゲーム装置、ゲーム制御方法、ゲーム制御プログラム、及び記録媒体
US10213645B1 (en) * 2011-10-03 2019-02-26 Swingbyte, Inc. Motion attributes recognition system and methods
JP5915148B2 (ja) * 2011-12-16 2016-05-11 セイコーエプソン株式会社 運動解析方法及び運動解析装置
JP6024136B2 (ja) * 2012-03-15 2016-11-09 カシオ計算機株式会社 演奏装置、演奏方法及びプログラム
JP5941752B2 (ja) * 2012-05-22 2016-06-29 ブリヂストンスポーツ株式会社 解析システムおよび解析方法
JP6123062B2 (ja) * 2012-12-26 2017-05-10 株式会社コナミデジタルエンタテインメント 端末装置、サーバ装置、端末装置の制御方法、サーバ装置の制御方法、プログラム、および機能拡張方法
US9737817B1 (en) * 2014-02-03 2017-08-22 Brett Ricky Method and apparatus for simulating a gaming event
US9636578B1 (en) * 2014-02-03 2017-05-02 Brett Ricky Golf club simulation apparatus
US9604136B1 (en) * 2014-02-03 2017-03-28 Brett Ricky Golf club simulation apparatus
AU2015223099B2 (en) * 2014-02-28 2019-09-26 Russell Brands, Llc Sporting device and wearable computer interaction
US9849361B2 (en) * 2014-05-14 2017-12-26 Adidas Ag Sports ball athletic activity monitoring methods and systems
US9478109B2 (en) * 2014-12-29 2016-10-25 Immersion Corporation Virtual sensor in a virtual environment
JP2017047057A (ja) * 2015-09-04 2017-03-09 セイコーエプソン株式会社 運動支援システム、情報機器、測定機器、運動支援方法、およびプログラム
KR102406760B1 (ko) * 2016-06-14 2022-06-08 브렛 리키 게이밍 이벤트를 시뮬레이팅하기 위한 방법 및 장치
CA3003526A1 (en) * 2017-05-02 2018-11-02 Interactive Sports Technologies Inc. Sports simulation system
JP7081921B2 (ja) * 2017-12-28 2022-06-07 株式会社バンダイナムコエンターテインメント プログラム及びゲーム装置
WO2020026301A1 (ja) * 2018-07-30 2020-02-06 株式会社ソニー・インタラクティブエンタテインメント ゲーム装置、ゴルフゲームの制御方法
US20220001236A1 (en) * 2018-10-09 2022-01-06 Brian Francis Mooney Coaching, assessing or analysing unseen processes in intermittent high-speed human motions, including golf swings
JP2022081272A (ja) * 2020-11-19 2022-05-31 株式会社ソニー・インタラクティブエンタテインメント 筐体内に移動可能な質量体を備えたデバイス
KR102573182B1 (ko) * 2021-05-06 2023-09-04 주식회사 에스지엠 단말 장치, 가상 스포츠 장치, 가상 스포츠 시스템 및 가상 스포츠 시스템의 동작방법
JP2023020965A (ja) * 2021-07-30 2023-02-09 エスジーエム・カンパニー・リミテッド 仮想ゴルフ装置及び仮想スポーツ装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003088604A (ja) * 2001-09-20 2003-03-25 Sumitomo Rubber Ind Ltd ゴルフスイング記録保存システム
JP2003208479A (ja) * 2002-01-10 2003-07-25 Univ Waseda 画像閲覧システムおよび閲覧用画像提供方法、管理サーバ、並びにプログラム
JP2009020897A (ja) * 2002-09-26 2009-01-29 Toshiba Corp 画像解析方法、画像解析装置、画像解析プログラム
WO2006098096A1 (ja) * 2005-02-23 2006-09-21 Muneomi Katayama インターネットレッスンシステム
US20070026958A1 (en) * 2005-07-26 2007-02-01 Barasch Michael A Method and system for providing web based interactive lessons
JP2015502831A (ja) * 2012-12-11 2015-01-29 デュソンテクノロジー カンパニー リミテッドＤｕ−Ｓｕｎｇ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ． クラブ付着型ゴルフスイングのリアルタイム分析システムおよびその動作方法
JP2017064095A (ja) * 2015-09-30 2017-04-06 国立大学法人 筑波大学 学習システム、学習方法、プログラム、記録媒体
JP2017022727A (ja) 2016-08-23 2017-01-26 ソニー株式会社 情報処理装置、情報処理システムおよびプログラム

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020144835A1 (ja) * 2019-01-11 2020-07-16 ソニー株式会社 情報処理装置および情報処理方法
JP2021049208A (ja) * 2019-09-26 2021-04-01 株式会社Ｓｐｏｒｔｉｐ 運動評価システム
JP7492722B2 (ja) 2019-09-26 2024-05-30 株式会社Sportip 運動評価システム
JP7005737B1 (ja) 2020-12-28 2022-01-24 楽天グループ株式会社 ゴルフスイング解析システム、ゴルフスイング解析方法及びプログラム
JP7011030B1 (ja) 2020-12-28 2022-01-26 楽天グループ株式会社 ゴルフスイング解析システム、ゴルフスイング解析方法及びプログラム
JP2022104414A (ja) * 2020-12-28 2022-07-08 楽天グループ株式会社 ゴルフスイング解析システム、ゴルフスイング解析方法及びプログラム
JP2022104413A (ja) * 2020-12-28 2022-07-08 楽天グループ株式会社 ゴルフスイング解析システム、ゴルフスイング解析方法及びプログラム
TWI775637B (zh) * 2020-12-28 2022-08-21 日商樂天集團股份有限公司 高爾夫揮桿解析系統、高爾夫揮桿解析方法及資訊記憶媒體
WO2022158099A1 (ja) 2021-01-21 2022-07-28 ソニーグループ株式会社 情報処理方法、情報処理システム、情報端末、並びにコンピュータプログラム

Also Published As

Publication number Publication date
US20200094122A1 (en) 2020-03-26
EP3632512B1 (en) 2023-03-08
CA3064504A1 (en) 2018-12-06
EP3632512A1 (en) 2020-04-08
JPWO2018220948A1 (ja) 2020-05-21
EP3632512A4 (en) 2020-04-08
KR20200015890A (ko) 2020-02-13

Similar Documents

Publication Publication Date Title
WO2018220948A1 (ja) 情報処理装置、情報処理方法およびプログラム
US11210855B2 (en) Analyzing 2D movement in comparison with 3D avatar
US11247114B2 (en) Information processing device, storage medium, and information processing method
JP6610689B2 (ja) 情報処理装置、情報処理方法及び記録媒体
US10070046B2 (en) Information processing device, recording medium, and information processing method
CN104225890A (zh) 运动分析装置
JP5892236B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP2015096105A (ja) 運動解析方法、および運動解析装置
WO2016092933A1 (ja) 情報処理装置、情報処理方法およびプログラム
WO2018179693A1 (ja) 情報処理装置および情報処理方法
JP2017064095A (ja) 学習システム、学習方法、プログラム、記録媒体
US20140118522A1 (en) Dance learning system using a computer
JP6255737B2 (ja) 運動解析装置および運動解析プログラム並びに表示方法
JP6924564B2 (ja) ゲームプログラム
US11526211B2 (en) Methods and apparatus for controlling, implementing and supporting trick play in an augmented reality device
JP2017131308A (ja) 指導アシストシステム、および指導アシストプログラム
JP2004167173A (ja) ビデオゲーム装置、記録媒体およびプログラム
JP2021069702A (ja) 評価方法、および評価装置
US20160325169A1 (en) Swing analyzing device, swing analyzing method, swing analyzing system, and storage medium
KR102619364B1 (ko) 골프 스윙 클리닉 서비스 방법 및 장치
JP2017093839A (ja) ゲームシステム、制御方法、及びプログラム
KR20240102643A (ko) 스크린 골프 운영 시스템을 이용한 클럽별 레슨 방법
TWM480407U (zh) 高爾夫球訓練系統

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18808846

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019521968

Country of ref document: JP

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 20197032982

Country of ref document: KR

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 3064504

Country of ref document: CA

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2018808846

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2018808846

Country of ref document: EP

Effective date: 20200102