WO2024096391A1 - Device and method for acquiring biosignal - Google Patents

Device and method for acquiring biosignal Download PDF

Info

Publication number
WO2024096391A1
WO2024096391A1 PCT/KR2023/016254 KR2023016254W WO2024096391A1 WO 2024096391 A1 WO2024096391 A1 WO 2024096391A1 KR 2023016254 W KR2023016254 W KR 2023016254W WO 2024096391 A1 WO2024096391 A1 WO 2024096391A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
wearable device
electronic device
reference point
instructions
Prior art date
Application number
PCT/KR2023/016254
Other languages
French (fr)
Korean (ko)
Inventor
프로고노브드미트로
포포브올렉산드르
아스트라칸체브안드리
모차니아르템
리이유리
소콜올렉산드라
실란티에브볼로디미르
로마니키릴로
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Publication of WO2024096391A1 publication Critical patent/WO2024096391A1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/0245—Detecting, measuring or recording pulse rate or heart rate by using sensing means generating electric signals, i.e. ECG signals
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/08—Detecting, measuring or recording devices for evaluating the respiratory organs

Definitions

  • the present disclosure relates to an apparatus and method for acquiring biometric signals, and more particularly, to a wearable device capable of acquiring a user's biosignals and a method of operating the same.
  • BCI can control external devices using human brain signals such as electroencephalography (EEG) and magnetoencephalography (MEG), and 5G/6G can improve the quality of life of stroke and spinal cord injury patients.
  • EEG electroencephalography
  • MEG magnetoencephalography
  • 5G/6G can improve the quality of life of stroke and spinal cord injury patients. Expands possible use cases to include:
  • earbuds and earphones include simple phone control functions and IoT device functions. This provides the option to track the user's activities such as sleep/sports or receive improvement suggestions based on BCI.
  • a method of operating a wearable device includes acquiring an electrical signal by a microphonism phenomenon from mechanical vibration of the membrane due to pulsation of the superficial temporal artery. can do.
  • a method of operating a wearable device may include obtaining a biosignal from the obtained electrical signal.
  • a method of operating a wearable device may include performing an operation corresponding to the obtained biosignal.
  • a wearable device may include a membrane, a memory storing one or more instructions, and a processor executing the one or more instructions.
  • the at least one processor may acquire an electrical signal through a microphonic phenomenon from mechanical vibration of the membrane due to pulsation of the superficial temporal artery.
  • the at least one processor may obtain a biosignal from the acquired electrical signal by executing the one or more instructions.
  • the at least one processor may perform an operation corresponding to the acquired biosignal by executing the one or more instructions.
  • FIG. 1 is a diagram showing an anatomical view of a side of a wearable device and a person's face according to an embodiment.
  • Figure 2 is a flowchart showing a method of operating a wearable device according to an embodiment.
  • Figure 3 is a block diagram showing the configuration of a wearable device according to an embodiment.
  • Figure 4 is a block diagram showing the configuration of a wearable device according to an embodiment.
  • Figure 5 is a flowchart showing a method of operating a wearable device according to an embodiment.
  • FIG. 6 is a diagram illustrating an example of using user state change information transmitted from a wearable device to a user electronic device according to an embodiment.
  • FIG. 7 is a diagram illustrating an embodiment in which a wearable device receives at least one instruction from a user electronic device and operates it, according to an embodiment.
  • FIG. 8 is a diagram illustrating an embodiment in which a wearable device receives at least one instruction from a user electronic device and operates it, according to an embodiment.
  • Figure 9 is a diagram illustrating an embodiment in which a user's electronic device recommends content to the user.
  • FIG. 10 is a diagram illustrating an embodiment that allows a user to easily obtain permission to use an electronic device by using user identity authentication of a wearable device according to an embodiment.
  • FIG. 11 is a diagram illustrating an example in which a wearable device interacts with a user electronic device according to an embodiment.
  • the term “user” refers to a person who controls a system, function, or operation.
  • the term “user electronic device” refers to a user's external electronic device connected to the wearable device 100.
  • FIG. 1 is a diagram showing an anatomical view of a side of a wearable device and a person's face according to an embodiment.
  • the wearable device 100 includes at least one of a microphone or a speaker, but is not limited thereto.
  • the wearable device 100 may include, but is not limited to, any one of, for example, a wearable device including earphones, wireless earphones, wired earphones, a head-mounted display, or smart glasses.
  • the wearable device 100 may include a membrane 110.
  • the main branch of the superficial temporal artery (STA) (120) is located adjacent to the ear.
  • the user may wear the wearable device 100 according to one embodiment on the ear adjacent to the main branch of the superficial temporal artery 120 or at a location adjacent to the ear.
  • the wearable device 100 can collect biometric information when the user simply wears the wearable device 100. Since the user wears the wearable device 100 according to his or her own needs, the user does not need to perform any separate actions to collect biometric information. Therefore, ECG (Electrocardiography)-based wearable devices require two or more separate sensors in contact with the skin and the device must be cleaned regularly, or PPG (Photoplethysmography), which is sensitive to movement or moisture and whose measurements are affected by skin coloring. Unlike wearable devices, embodiments of the present disclosure do not require cleaning from moisture before use and can collect biometric information non-invasively without requiring additional actions from the user, regardless of skin parameters. There is a possible effect.
  • the skin parameter may include, for example, any one of skin color, sebum, and level of moisture supply, but is not limited thereto.
  • a wearable device and a method of controlling the same are disclosed for acquiring biometric signals of a user using the wearable device 100 as shown in FIG. 1 .
  • the wearable device and its control method according to an embodiment of the present disclosure will be described in detail below with reference to FIGS. 2 to 11.
  • Figure 2 is a flowchart showing a method of operating a wearable device according to an embodiment.
  • the main branch of the superficial temporal artery 120 is located adjacent to the ear, and the pulsation of the superficial temporal artery 120 may induce mechanical vibration of the membrane 110 of the wearable device according to one embodiment.
  • the wearable device 100 may acquire an electrical signal by a microphonism phenomenon from the mechanical vibration of the membrane 110 according to the pulsation of the superficial temporal artery 120 (S200).
  • the wearable device 100 can acquire various bio-signals from the acquired electrical signals (S210).
  • Various biological signals may include, but are not limited to, at least one of, for example, heart rate, heart rate fluctuation, and respiratory rate.
  • the wearable device 100 may perform an operation corresponding to the acquired biosignal (S220).
  • the operation corresponding to the biological signal may include, but is not limited to, an operation of transmitting the acquired biological signal to the user's electronic device.
  • the wearable device 100 can help the user monitor signals related to the user's heart-related disease in the user's electronic device through an operation (S220) corresponding to the biosignal, and accordingly, heart-related disease can be prevented. You can quickly respond to emergency situations. However, it is not limited to this.
  • a method of operating the wearable device 100 may be recorded on a computer-readable recording medium on which one or more programs including instructions for executing the method are recorded.
  • Figure 3 is a block diagram showing the configuration of a wearable device according to an embodiment.
  • the wearable device 100 may include a membrane 110, a processor 300, and a memory 310.
  • the processor 300 controls the overall operation of the wearable device 100 and signal flow between internal components of the wearable device 100, and performs the function of processing data.
  • a program stored in memory 310 may include one or more instructions.
  • a program (one or more instructions) stored in the memory 310 may be executed by the processor 300.
  • the main branch of the superficial temporal artery 120 is located adjacent to the ear, and the pulsation of the superficial temporal artery 120 may induce mechanical vibration of the membrane 110 of the wearable device according to one embodiment.
  • the processor 300 may acquire an electrical signal through the microphonism phenomenon from the mechanical vibration of the membrane 110 induced by the pulsation of the superficial temporal artery 120.
  • the acquired electrical signal is stored in the memory 310 built into the wearable device 100.
  • the processor 300 may obtain various bio-signals from the acquired electrical signals.
  • Various biological signals may include, but are not limited to, at least one of, for example, heart rate, heart rate fluctuation, and respiratory rate.
  • the processor 300 may perform an operation corresponding to the acquired biosignal.
  • the operation corresponding to the biological signal may include, but is not limited to, an operation of transmitting the acquired biological signal to the user's electronic device.
  • the processor 300 can help monitor signals related to a user's heart-related disease in the user's electronic device from operations corresponding to bio-signals, and accordingly, the user's heart-related disease can be monitored by the user's electronic device. You can respond quickly to emergency situations. However, it is not limited to this.
  • Figure 4 is a block diagram showing the configuration of a wearable device according to an embodiment.
  • the wearable device 100 may include a membrane 110, a processor 300, and a memory 310.
  • the processor 300 controls the overall operation of the wearable device 100 and signal flow between internal components of the wearable device 100, and performs the function of processing data.
  • a program stored in memory 310 may include one or more instructions.
  • a program (one or more instructions) stored in memory 310 may be executed by a processor.
  • the processor 300 includes preprocessing modules 400 and 420, a signal conversion module 410, a fiducial point detect module 440, a time alignment module 460, and a fiducial point feature detection module 470. ), a heartbeat signal classifier 480, and a template update module 490.
  • the processor 300 may acquire an electrical signal through a microphonism phenomenon from the mechanical vibration of the membrane 110 induced by the pulsation of the superficial temporal artery 120.
  • the preprocessing module 400 may perform operations to amplify signals or remove noise.
  • the acquired electrical signal may be amplified by the amplifier 402 included in the preprocessing module 400 or passed through the filter 404 to reduce noise.
  • the filter 404 may include, but is not limited to, at least one of, for example, a band-pass filter, a moving average filter, an FIR filter, or an IIR filter. When passing through the filter 404, the bandwidth of the filter 404 is determined by the biological signal.
  • the bandwidth of the filter 404 may include, for example, any one of 0.2 Hz to 2.5 Hz or 0.3 Hz to 2.6 Hz, but is not limited thereto.
  • the signal conversion module 410 can convert the obtained electrical signal (analog signal) into a digital signal.
  • frequency conversion is performed by at least one of Fast Fourier Transform or Discrete Wavelet Transform, but is not limited thereto.
  • the preprocessing module 420 can help remove noise when a significant amount of noise exists in the digital signal converted through the signal conversion module 410 and is to be removed.
  • the preprocessing process in the preprocessing module 420 may include, but is not limited to, normalization or denoising.
  • the processor 300 may acquire a biosignal based on at least one of the signals that have passed through the signal conversion module 410 or the preprocessing module 420.
  • the biosignal may include, but is not limited to, at least one of, for example, heart rate, heart rate fluctuation, and respiratory rate.
  • the processor 300 may perform an operation corresponding to the acquired biosignal.
  • the operation corresponding to the bio-signal may include, but is not limited to, an operation of transmitting the acquired bio-signal to the user electronic device 430, for example.
  • the processor 300 can help the user electronic device 430 monitor signals related to a user's heart-related disease from operations corresponding to bio-signals, thereby preventing heart-related diseases. You can quickly respond to emergency situations. However, it is not limited to this.
  • the fiducial point detection module 440 may acquire a fiducial point based on either a signal that has passed through the signal conversion module 410 or a signal that has passed through the pre-processing module 420.
  • the reference point refers to the portion of the measured signal that preserves the parameters under the variability of the heart rate signal.
  • the parameter may include, but is not limited to, at least one of the time position within the heartbeat cycle or the shape of the heartbeat pulse.
  • the reference point is, for example, the QRS pattern of the ECG signal using the Pan-Thompkins algorithm.
  • a QRS pattern is a specific set of pulses on the electrocardiogram that occur as the heart beats. Here, the pulse can maintain its shape in various living environments.
  • the user may store the user's unique reference point in advance in the template 450 of the memory.
  • the time alignment module 460 can time align the reference point obtained through the reference point detection module 440 and the reference point previously saved by the user in the template 450.
  • the reference point feature detection module 470 may detect at least one feature among statistical, frequency, and structural features from the time-aligned reference point that has passed through the time alignment module 460.
  • Statistical characteristics refer to signal parameters that are similar to the user, but change rapidly to others other than the user. For example, it may include, but is not limited to, at least one of the average duration between reference points, the standard deviation, or the average value of the size of reference points.
  • Frequency characteristics refer to the frequency characteristics of the reference point. For example, it may include at least one of the period, frequency, or shape of a reference point pulse that is an electronic signal, but is not limited thereto.
  • Structural features refer to parameters of the shape of a reference point, such as the self-similarity of the signal itself.
  • the similarity of the signals themselves to predefined electronic device use situations such as whether a series of heartbeat signals have similar shapes of individual pulses, whether heartbeat signals maintain similar shapes while the user is sitting or walking, and It may include, but is not limited to, the similarity of the signal itself for the same electronic device use situation, or any one of the types of approximation in the form of a single pulse, such as polynomial approximation and approximation error distribution.
  • the heart rate classification module 480 performs statistical, frequency, and structural analysis of the user's reference point stored in the template 450 of the memory of the wearable device 100 according to an embodiment and the reference point obtained through the reference point feature detection module 470. Mutual similarity can be obtained based on at least one of the features.
  • the heartbeat classification module 480 may obtain similarity through correlation, but is not limited to this.
  • the obtained similarity is transmitted to the user electronic device 430, and if the similarity is greater than or equal to a threshold value defined in advance by the user, identity authentication can be performed on the user electronic device 430.
  • identity authentication can be performed on the user electronic device 430.
  • the user electronic device 430 may fail in identity authentication.
  • the template update module 490 may update the user's template through at least one of the statistical, frequency, and structural characteristics of the reference point used in the similarity acquisition process. Accordingly, there is no need to periodically register a reference point that changes depending on the user's situation, and identity authentication occurs more quickly.
  • the user's situation may include, but is not limited to, at least one of, for example, a change in usage environment, aging, or injury.
  • the cycle may include, for example, at least one of weekly, biweekly, monthly, or yearly, but is not limited thereto.
  • the processor 300 may obtain user status change information from at least one of the statistical, frequency, and structural characteristics of a previously identified reference point when user identity authentication is successful, and the obtained user status. Change information may be transmitted to the user electronic device 430. By transmitting user state change information to the user electronic device 430, the wearable device 100 and the user electronic device 430 according to one embodiment may interact.
  • interaction is, for example, the wearable device 100 according to one embodiment transmits user state change information to the user electronic device 430, causing the user electronic device 430 to Feedback based on the user's status change information when an interaction causes the user's status change information to be transmitted to the user's acquaintances or emergency phone number stored in the user's computer, or when the user runs an application such as a training mode installed on the user's electronic device 430. It may include at least one of the following processes, but is not limited to this.
  • the feedback is, for example, when the user is exercising, the user's electronic device 430 performs work according to the user's state change information according to the purpose of the exercise (e.g., diet, muscle strength improvement, muscle endurance improvement, etc.).
  • the user's state change information e.g., diet, muscle strength improvement, muscle endurance improvement, etc.
  • feedback to control the heart rate or information on changes in the user's state are stored in the user electronic device 430 to calculate the calories burned during exercise based on the user's health status. It may include at least one piece of feedback recommending an appropriate diet, but is not limited to this.
  • the processor 300 may receive at least one instruction from the user electronic device 430 that has received user state change information.
  • the at least one instruction may include, for example, at least one of volume control, power control, or power control of the user electronic device 430 according to an embodiment, but is not limited thereto.
  • Figure 5 is a block diagram showing a method for controlling the operation of a wearable device according to an embodiment.
  • the wearable device 100 may acquire an electrical signal by the microphonism phenomenon from the mechanical vibration of the membrane 110 induced by the pulsation of the superficial temporal artery 120 (S200) ).
  • the wearable device 100 may amplify the acquired electrical signal through a preprocessing process (not shown) or reduce noise mixed in the electrical signal.
  • the wearable device 100 may acquire various bio-signals from at least one of the acquired electrical signal or the signal amplified or noise removed through a pre-processing process (S210).
  • Various biological signals may include, but are not limited to, at least one of, for example, heart rate, heart rate fluctuation, and respiratory rate.
  • the wearable device 100 may perform an operation corresponding to the acquired biosignal (S220).
  • the operation corresponding to the biological signal may include, but is not limited to, an operation of transmitting the acquired biological signal to the user's electronic device.
  • the wearable device 100 can help the user monitor signals related to the user's heart-related disease in the user's electronic device through an operation (S220) corresponding to the biosignal, and accordingly, heart-related disease can be prevented. You can quickly respond to emergency situations. However, it is not limited to this.
  • the wearable device 100 may convert at least one of an acquired electrical signal or an electrical signal that has undergone a preprocessing process into a digital signal (S500).
  • the frequency conversion from an analog signal to a digital signal may be performed by at least one of fast Fourier transform or discrete wavelet transform, but is not limited thereto.
  • the wearable device 100 may remove noise through a pre-processing process (not shown) when a significant portion of noise exists in the converted digital signal.
  • the preprocessing process may include, but is not limited to, normalization or denoising.
  • the wearable device 100 may acquire various biological signals from at least one of a converted digital signal or a signal that has undergone a preprocessing process (S510).
  • Various biological signals may include, but are not limited to, at least one of, for example, heart rate, heart rate fluctuation, and respiratory rate.
  • the wearable device 100 may perform an operation corresponding to the acquired biosignal (S515).
  • the operation corresponding to the biological signal may include, but is not limited to, an operation of transmitting the acquired biological signal to the user's electronic device.
  • the wearable device 100 can help the user's electronic device monitor signals related to the user's heart-related disease through an operation (S515) corresponding to the biosignal, thereby preventing the heart-related disease. You can quickly respond to emergency situations. However, it is not limited to this.
  • the wearable device 100 may acquire a reference point based on either a signal that has undergone a signal conversion process or a signal that has undergone a preprocessing process (S520).
  • the reference point refers to the portion of the measured signal that preserves the parameters under the variability of the heart rate signal.
  • the parameter may include, but is not limited to, at least one of the time position within the heartbeat cycle or the shape of the heartbeat pulse.
  • the reference point is, for example, the QRS pattern of the ECG signal using the Pan-Thompkins algorithm.
  • a QRS pattern is a specific set of pulses on the electrocardiogram that occur as the heart beats.
  • the pulse can maintain its shape in various living environments.
  • the user may store the user's unique reference point in advance in a template of the wearable device 100 according to an embodiment.
  • the wearable device 100 can time align the obtained reference point with the reference point previously stored by the user (S525).
  • the wearable device 100 may detect at least one characteristic among statistical, frequency, and structural characteristics of the reference point from the time-aligned reference point (S530).
  • Statistical characteristics refer to signal parameters that are similar to the user, but change rapidly to others other than the user. For example, it may include, but is not limited to, at least one of the average duration between reference points, the standard deviation, or the average value of the size of reference points.
  • Frequency characteristics refer to the frequency characteristics of the reference point. For example, it may include at least one of the period, frequency, or shape of a reference point pulse that is an electronic signal, but is not limited thereto.
  • Structural features refer to parameters of the shape of a reference point, such as the self-similarity of the signal itself.
  • the similarity of the signals themselves to predefined electronic device use situations such as whether a series of heartbeat signals have similar shapes of individual pulses, whether heartbeat signals maintain similar shapes while the user is sitting or walking, and It may include, but is not limited to, the similarity of the signal itself for the same electronic device use situation, or any one of the types of approximation in the form of a single pulse, such as polynomial approximation and approximation error distribution.
  • the wearable device 100 acquires mutual similarity based on at least one characteristic among the statistical, frequency, and structural characteristics of the user's reference point stored in a template in advance and the reference point obtained from the time-aligned reference point. (S535). Similarity can be obtained through correlation, but is not limited to this.
  • the wearable device 100 may transmit the obtained similarity to the user electronic device 430.
  • the transmitted similarity is compared to a threshold predefined by the user, and if the similarity is greater than or equal to the threshold, identity authentication can be performed on the user's electronic device 430 (S540). On the other hand, if the similarity is less than the threshold value defined in advance by the user, identity authentication may fail in the user electronic device 430 (S560).
  • the wearable device 100 may update the user's template with at least one of the statistical, frequency, and structural characteristics of the reference point used in the similarity acquisition process (S550). Accordingly, there is no need to periodically register a reference point that changes depending on the user's situation, and identity authentication occurs more quickly.
  • the user's situation may include, but is not limited to, at least one of, for example, a change in usage environment, aging, or injury.
  • the cycle may include, for example, at least one of weekly, biweekly, monthly, or yearly, but is not limited thereto.
  • the wearable device 100 may obtain the user's state change information from at least one of the statistical, frequency, and structural characteristics of the previously identified reference point (S555).
  • the wearable device 100 may transmit the acquired user state change information to the user electronic device 430. Accordingly, the wearable device 100 according to one embodiment may interact with the user electronic device 430. Here, interaction is, for example, the wearable device 100 according to one embodiment transmits user state change information to the user electronic device 430, causing the user electronic device 430 to Feedback based on the user's status change information when an interaction causes the user's status change information to be transmitted to the user's acquaintances or emergency phone number stored in the user's computer, or when the user runs an application such as a training mode installed on the user's electronic device 430. It may include at least one of the following processes, but is not limited to this.
  • the feedback is, for example, when the user is exercising, the user's electronic device 430 performs work according to the user's state change information according to the purpose of the exercise (e.g., diet, muscle strength improvement, muscle endurance improvement, etc.).
  • the user's state change information e.g., diet, muscle strength improvement, muscle endurance improvement, etc.
  • feedback to control the heart rate or information on changes in the user's state are stored in the user electronic device 430 to calculate the calories burned during exercise based on the user's health status. It may include at least one piece of feedback recommending an appropriate diet, but is not limited to this.
  • the wearable device 100 may receive at least one instruction from the user electronic device 430 that has received user state change information.
  • the at least one instruction may include, for example, at least one of volume control, power control, or power control of the user electronic device 430 according to an embodiment, but is not limited thereto.
  • a method of operating the wearable device 100 may be recorded on a computer-readable recording medium on which one or more programs including instructions for executing the method are recorded.
  • FIG. 6 is an example illustrating a situation in which assistance is provided in an emergency situation based on user state change information transmitted from a wearable device to a user electronic device according to an embodiment.
  • the wearable device 100 acquires (610) the user's state change information from at least one of the statistical, frequency, and structural characteristics of the reference point based on the user's reference point after undergoing user identity authentication (600). This can be transmitted to the user electronic device 430.
  • the wearable device 100 helps to continuously monitor physiological parameters based on the user state change information 610 transmitted to the user electronic device 430, thereby detecting if the user has an underlying disease. It can help you respond quickly to emergency situations (620).
  • Physiological parameters may include, but are not limited to, for example, at least one of heart rate, blood pressure, cardiac output, or pulse wave velocity.
  • the underlying disease may include, but is not limited to, at least one of cardiovascular disease, arrhythmia, cardiomyopathy, heart failure, or hypertension.
  • Being able to quickly respond to an emergency situation means, for example, transmitting information on changes in user status to an emergency phone number, emergency contact number, or an acquaintance's phone number through at least one of the application, text function, and phone function of the user electronic device 430. This means that it can be done, but is not limited to this.
  • FIG. 7 shows, among the user state change information transmitted from the wearable device to the user electronic device according to an embodiment, when the user's heart rate decreases and it is determined that the user is in a sleeping state, at least one instruction is received from the electronic device and an execution is performed.
  • This is a diagram illustrating an embodiment of reducing the volume of a wearable device according to an example.
  • FIG. 8 shows, among the user state change information transmitted from the wearable device to the user electronic device according to an embodiment, when the user's heart rate increases and it is determined that the user is exercising, at least one instruction is received from the electronic device, according to an embodiment of the present invention.
  • This is a diagram showing an embodiment of increasing the volume of a wearable device according to .
  • the wearable device 100 may obtain the user's state change information 710 and 810 from at least one of the identified statistical, frequency, and structural characteristics.
  • the wearable device 100 may transmit the acquired user state change information 710 and 810 to the user electronic device 430.
  • the wearable device 100 may receive at least one instruction from the user electronic device 430 that has received user state change information 710 and 810.
  • the at least one instruction may include, for example, at least one of volume control of the wearable device 100, power control, or power control of the user device according to an embodiment, but is not limited thereto.
  • the volume of the wearable device 100 may be reduced (700, 720).
  • the volume of the wearable device 100 may increase (800, 820).
  • FIG. 9 is a diagram illustrating an embodiment in which a user electronic device receives user biosignals or state change information from a wearable device according to an embodiment and recommends content to the user through the received information.
  • the wearable device 100 allows the user electronic device 430 to obtain the user's emotional change 920 from the user's biological signal or user state change information 910 transmitted to the user electronic device 430. It can help recommend (930) content or applications suitable for the user among the content or applications (900) installed or stored in the user's electronic device (430).
  • the wearable device 100 allows the user electronic device 430 to identify a change in the user's emotion (920) based on the user's biological signal or state change information (910) transmitted to the user electronic device (430). can help you do that.
  • the user's emotional change 920 may include, for example, at least one of happiness, anger, fatigue, or fear, but is not limited thereto.
  • the wearable device 100 may help the user electronic device 430 recommend content appropriate to the user's current state based on the user's emotional change (920) (930).
  • the recommended content 930 may include at least one of music recommendations based on the user's music playlist or video recommendations from an OTT service, but is not limited thereto.
  • FIG. 10 is a diagram illustrating an embodiment in which a user can easily obtain permission to use an electronic device based on user authentication of a wearable device according to an embodiment.
  • the wearable device 100 may acquire similarity by time-aligning the user's previously stored reference point and the currently measured reference point in order to authenticate the user's electronic device 430.
  • the wearable device 100 may transmit at least one of the obtained similarity information or the personal authentication information to the user electronic device 430, but is not limited to this.
  • the wearable device 100 is configured such that when user identity authentication 1000 is performed in the user electronic device 430 that has received at least one of similarity information or identity authentication information, the user electronic device 430 It can help transmit user authentication information to user electronic devices (1010, 1020, 1030, and 1040) other than (430).
  • electronic devices other than the user electronic device 430 may include at least one of the user's mobile phone 1010, smart watch 1020, tablet PC 1030, laptop 1040, or TV. It is not limited.
  • the wearable device 100 provides convenience to the user in the use of electronic devices 1010, 1020, 1030, and 1040, including the user electronic device 430 that has successfully authenticated the user based on the user authentication 1000.
  • the convenience may include at least one of playing a music playlist stored in the electronic devices 1010, 1020, 1030, and 1040, including the user electronic device 430, or automatically unlocking the electronic device. It is not limited.
  • FIG. 11 is a diagram illustrating an example in which a wearable device interacts with a user electronic device based on user state change information transmitted to the user electronic device, according to an embodiment.
  • the wearable device 100 may obtain information on changes in the user's state based on at least one of the statistical, frequency, and structural characteristics of a previously identified reference point.
  • the wearable device 100 may transmit the acquired user state change information 1130 to the user electronic device 430.
  • the wearable device 100 may interact 1120 with the user electronic device 430 by transmitting user state change information to the user electronic device 430.
  • the interaction 1120 is, for example, when the wearable device 100 according to one embodiment runs the training mode application 1110 installed on the user electronic device 430, the user's state change information Feedback 1120 may be provided based on 1130, but is not limited thereto.
  • the feedback 1120 is, for example, when the user is exercising, the user electronic device according to the user state change information 1130 to suit the purpose of the exercise (e.g., diet, muscle strength improvement, muscle endurance improvement, etc.).
  • 430 notifies the wearable device 100 according to an embodiment and stores feedback or information on changes in the user's state to control the heart rate in the user electronic device 430, and responds to the user's health status based on the user's health status.
  • Feedback 1140 recommending an appropriate diet may be included, but is not limited to this.
  • a method of operating a wearable device may include acquiring an electrical signal by a microphonism phenomenon from mechanical vibration of the membrane due to the pulsation of the superficial temporal artery. You can.
  • a method of operating a wearable device may include obtaining a biosignal from the obtained electrical signal.
  • a method of operating a wearable device may include performing an operation corresponding to the obtained biosignal.
  • a method of operating a wearable device may include obtaining a fiducial point that preserves parameters under the variability of a heart rate signal based on the electrical signal.
  • a method of operating a wearable device may include time aligning the obtained reference point with a user's reference point stored in a user's template.
  • a method of operating a wearable device may include obtaining at least one characteristic among statistical, frequency, and structural characteristics of the obtained reference point from the signal that has undergone the time alignment step.
  • a method of operating a wearable device may include obtaining a similarity to a user's reference point stored in the user's template based on at least one of the obtained statistical, frequency, and structural characteristics.
  • a method of operating a wearable device may include transmitting the obtained similarity information to a user electronic device in order to authenticate the user's electronic device.
  • a method of operating a wearable device may include updating the user template with the obtained reference point at which identity authentication is successful based on the transmitted similarity information.
  • a method of operating a wearable device may include obtaining user state change information based on at least one of the obtained statistical, frequency, and structural characteristics.
  • a method of operating a wearable device may include transmitting the obtained user state change information to a user electronic device.
  • the method of operating a wearable device may be implemented in the form of program instructions that can be executed through various computer means and recorded on a computer-readable medium.
  • the computer-readable medium may include program instructions, data files, data structures, etc., singly or in combination.
  • Program instructions recorded on the medium may be specially designed and constructed for the present invention or may be known and usable by those skilled in the art of computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks.
  • optical media magnetic-optical media
  • hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, etc.
  • program instructions include machine language code, such as that produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter, etc.
  • the method of operating a wearable device according to the disclosed embodiments may be included and provided in a computer program product.
  • Computer program products are commodities and can be traded between sellers and buyers.
  • a computer program product may include a S/W program and a computer-readable storage medium in which the S/W program is stored.
  • a computer program product may include a product in the form of a S/W program (e.g., a downloadable app) distributed electronically by the manufacturer of an electronic device or through an electronic marketplace (e.g., Google Play Store, App Store). there is.
  • a storage medium may be a manufacturer's server, an electronic market server, or a relay server's storage medium that temporarily stores the SW program.
  • a computer program product in a system comprised of a server and a client device, may include a storage medium of a server or a storage medium of a client device.
  • the computer program product may include a storage medium of the third device.
  • the computer program product may include the S/W program itself, which is transmitted from a server to a client device or a third device, or from a third device to a client device.
  • one of the server, the client device, and the third device may execute the computer program product to perform the method according to the disclosed embodiments.
  • two or more of a server, a client device, and a third device may execute the computer program product and perform the methods according to the disclosed embodiments in a distributed manner.
  • a server eg, a cloud server or an artificial intelligence server, etc.
  • a server may execute a computer program product stored on the server and control a client device connected to the server to perform the method according to the disclosed embodiments.
  • a wearable device may include a membrane, a memory for storing one or more instructions, and one or more processors.
  • one or more processors may acquire an electrical signal through a microphonic phenomenon from mechanical vibration of the membrane due to pulsation of the superficial temporal artery.
  • One or more processors may acquire a biosignal from the acquired electrical signal by executing the one or more instructions.
  • One or more processors may perform an operation corresponding to the acquired biosignal by executing the one or more instructions.
  • One or more processors may obtain a reference point for preserving parameters under the variability of the heart rate signal based on the electrical signal by executing the one or more instructions.
  • One or more processors may store the obtained reference point in memory by executing the one or more instructions.
  • One or more processors may time align the obtained reference point with the user's reference point stored in the user's template by executing the one or more instructions.
  • One or more processors may acquire at least one characteristic among statistical, frequency, and structural variations of the obtained reference point from the signal that has passed the time alignment step by executing the one or more instructions.
  • One or more processors may obtain a similarity with the user's reference point stored in the user's template based on at least one of the obtained statistical, frequency, and structural characteristics by executing the one or more instructions. there is.
  • One or more processors may transmit the obtained similarity information to the user electronic device for identity authentication of the user electronic device by executing the one or more instructions.
  • One or more processors may execute the one or more instructions to update the user template with the obtained reference point that has successfully authenticated the user based on the transmitted similarity information.
  • One or more processors may acquire user state change information based on at least one of the obtained statistical, frequency, and structural characteristics by executing the one or more instructions.
  • One or more processors may transmit the obtained user state change information to the user electronic device by executing the one or more instructions.
  • One or more processors may receive at least one instruction from the user electronic device to adjust settings of the wearable device by executing the one or more instructions.
  • Setting of the wearable device may include at least one of volume control or power control of the wearable device.
  • One or more processors may execute the one or more instructions to interact with the user's electronic device based on the transmitted user's state change information.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Cardiology (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Physiology (AREA)
  • Pulmonology (AREA)
  • Signal Processing (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Otolaryngology (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)

Abstract

The present disclosure relates to a device and a method for acquiring a biosignal and, more particularly, to a wearable device capable of acquiring a biosignal of a user and a method for operating same. Specifically, disclosed is a method for operating a wearable device, comprising: acquiring an electrical signal by means of a microphonic phenomenon from mechanical vibration of a membrane due to the pulsation of a superficial temporal artery; acquiring a biosignal from the acquired electrical signal; and performing an operation corresponding to the acquired biosignal.

Description

생체 신호 획득 장치 및 방법Biological signal acquisition device and method
본 개시는 생체 신호 획득 장치 및 방법에 관한 것으로, 특히, 사용자의 생체 신호를 획득할 수 있는 웨어러블 디바이스 및 그 동작 방법에 관한 것이다.The present disclosure relates to an apparatus and method for acquiring biometric signals, and more particularly, to a wearable device capable of acquiring a user's biosignals and a method of operating the same.
BCI는 뇌파검사(EEG), 자기뇌검사(MEG) 등과 같은 사람의 뇌 신호를 사용하여 외부 장치를 제어할 수 있고, 5G/6G는 뇌졸중 및 척수 손상 환자의 삶의 질을 향상시키는 등 의료를 포함한 가능한 사용 사례를 확장한다.BCI can control external devices using human brain signals such as electroencephalography (EEG) and magnetoencephalography (MEG), and 5G/6G can improve the quality of life of stroke and spinal cord injury patients. Expands possible use cases to include:
최근 출시된 이어버드와 이어폰에는 간단한 전화 제어 기능과 IoT 기기의 기능이 포함되어 있다. 이를 통해 사용자의 수면/스포츠와 같은 활동을 추적하거나 BCI를 기반으로 개선안을 받는 옵션을 제공한다.Recently released earbuds and earphones include simple phone control functions and IoT device functions. This provides the option to track the user's activities such as sleep/sports or receive improvement suggestions based on BCI.
다만, 생체 신호의 수집을 위하여 사용자가 별도의 동작을 수행하거나, 웨어러블 디바이스의 소정의 위치에 신체의 일부를 접촉해야 하는 경우가 발생하여, 사용자 불편을 야기할 수 있다. 또한, 주변 환경 등의 요인으로 인해 정확한 생체 신호를 수집하기 어려운 문제점이 있다.However, in order to collect biosignals, the user may need to perform a separate action or touch a part of the body at a certain location on the wearable device, which may cause user inconvenience. Additionally, there is a problem in that it is difficult to collect accurate biological signals due to factors such as the surrounding environment.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은, 표재성 측두동맥(superficial temporal artery)의 박동에 따른 막(membrane)의 기계적 진동으로부터 마이크로포니즘 현상(microphonism phenomenon)에 의하여 전기신호를 획득하는 단계를 포함할 수 있다. A method of operating a wearable device according to an embodiment includes acquiring an electrical signal by a microphonism phenomenon from mechanical vibration of the membrane due to pulsation of the superficial temporal artery. can do.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은, 상기 획득된 전기신호로부터 생체 신호를 획득하는 단계를 포함할 수 있다. A method of operating a wearable device according to an embodiment may include obtaining a biosignal from the obtained electrical signal.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은, 상기 획득된 생체 신호에 대응하는 동작을 수행하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include performing an operation corresponding to the obtained biosignal.
일 실시예에 따른 웨어러블 디바이스는, 막, 하나 이상의 인스트럭션들을 저장하는 메모리, 상기 하나 이상의 인스트럭션들을 실행하는 프로세서를 포함할 수 있다. A wearable device according to an embodiment may include a membrane, a memory storing one or more instructions, and a processor executing the one or more instructions.
상기 적어도 하나의 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 표재성 측두동맥의 박동에 따른 막의 기계적 진동으로부터 마이크로포니즘 현상에 의하여 전기신호를 획득할 수 있다. By executing the one or more instructions, the at least one processor may acquire an electrical signal through a microphonic phenomenon from mechanical vibration of the membrane due to pulsation of the superficial temporal artery.
상기 적어도 하나의 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 획득된 전기신호로부터 생체 신호를 획득할 수 있다. The at least one processor may obtain a biosignal from the acquired electrical signal by executing the one or more instructions.
상기 적어도 하나의 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 획득된 생체 신호에 대응하는 동작을 수행할 수 있다.The at least one processor may perform an operation corresponding to the acquired biosignal by executing the one or more instructions.
도 1은 일 실시예에 따른 웨어러블 디바이스 및 사람의 얼굴 측면의 해부도를 나타낸 도면이다.FIG. 1 is a diagram showing an anatomical view of a side of a wearable device and a person's face according to an embodiment.
도 2는 일 실시예에 따른 웨어러블 디바이스의 동작 방법을 흐름도로 나타낸 도면이다.Figure 2 is a flowchart showing a method of operating a wearable device according to an embodiment.
도 3는 일 실시예에 따른 웨어러블 디바이스의 구성을 나타낸 블록도이다.Figure 3 is a block diagram showing the configuration of a wearable device according to an embodiment.
도 4는 일 실시예에 따른 웨어러블 디바이스의 구성을 나타낸 블록도이다.Figure 4 is a block diagram showing the configuration of a wearable device according to an embodiment.
도 5는 일 실시예에 따른 웨어러블 디바이스의 동작 방법을 흐름도로 나타낸 도면이다.Figure 5 is a flowchart showing a method of operating a wearable device according to an embodiment.
도 6은 일 실시예에 따른 웨어러블 디바이스에서 사용자 전자기기로 송신된 사용자 상태 변화 정보를 이용하는 실시예를 도시한 도면이다.FIG. 6 is a diagram illustrating an example of using user state change information transmitted from a wearable device to a user electronic device according to an embodiment.
도 7는 일 실시예에 따른 웨어러블 디바이스가 사용자 전자기기로부터 적어도 하나 이상의 인스트럭션을 수신하여 이를 동작시키는 일 실시예를 도시한 도면이다. FIG. 7 is a diagram illustrating an embodiment in which a wearable device receives at least one instruction from a user electronic device and operates it, according to an embodiment.
도 8는 일 실시예에 따른 웨어러블 디바이스가 사용자 전자기기로부터 적어도 하나 이상의 인스트럭션을 수신하여 이를 동작시키는 일 실시예를 도시한 도면이다.FIG. 8 is a diagram illustrating an embodiment in which a wearable device receives at least one instruction from a user electronic device and operates it, according to an embodiment.
도 9는 사용자의 전자기기가 사용자에게 콘텐츠를 추천하는 일 실시예를 도시한 도면이다.Figure 9 is a diagram illustrating an embodiment in which a user's electronic device recommends content to the user.
도 10은 일 실시예에 따른 웨어러블 디바이스의 사용자 본인인증을 이용하여 사용자가 전자기기의 사용 권한을 용이하게 획득할 수 있도록 하는 실시예를 설명하기 위한 도면이다.FIG. 10 is a diagram illustrating an embodiment that allows a user to easily obtain permission to use an electronic device by using user identity authentication of a wearable device according to an embodiment.
도 11는 일 실시예에 따른 웨어러블 디바이스가 사용자 전자기기와 상호작용하는 일 실시예를 도시한 도면이다.FIG. 11 is a diagram illustrating an example in which a wearable device interacts with a user electronic device according to an embodiment.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.The terms used in this specification will be briefly explained, and the present invention will be described in detail.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.The terms used in the present invention are general terms that are currently widely used as much as possible while considering the functions in the present invention, but this may vary depending on the intention or precedent of a person working in the art, the emergence of new technology, etc. In addition, in certain cases, there are terms arbitrarily selected by the applicant, and in this case, the meaning will be described in detail in the description of the relevant invention. Therefore, the terms used in the present invention should be defined based on the meaning of the term and the overall content of the present invention, rather than simply the name of the term.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.When it is said that a part "includes" a certain element throughout the specification, this means that, unless specifically stated to the contrary, it does not exclude other elements but may further include other elements. In addition, terms such as "... unit" and "module" used in the specification refer to a unit that processes at least one function or operation, which may be implemented as hardware or software, or as a combination of hardware and software. .
실시예를 설명함에 있어서, 관련된 공지 기술에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.In describing the embodiments, if it is determined that detailed descriptions of related known technologies may unnecessarily obscure the gist of the present disclosure, the detailed descriptions will be omitted.
아래에서는 첨부한 도면을 참고하여 실시예들에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Below, with reference to the attached drawings, embodiments will be described in detail so that those skilled in the art can easily implement the present invention. However, the present invention may be implemented in many different forms and is not limited to the embodiments described herein. In order to clearly explain the present invention in the drawings, parts unrelated to the description are omitted, and similar parts are given similar reference numerals throughout the specification.
본 명세서의 실시예에서 "사용자"라는 용어는 시스템, 기능 또는 동작을 제어하는 사람을 의미한다. In embodiments herein, the term “user” refers to a person who controls a system, function, or operation.
또한, 본 명세서의 실시예에서 "사용자 전자기기" 라는 용어는 웨어러블 디바이스(100)와 연결된 사용자의 외부 전자기기를 의미한다. Additionally, in the embodiments of this specification, the term “user electronic device” refers to a user's external electronic device connected to the wearable device 100.
도 1은 일 실시예에 따른 웨어러블 디바이스 및 사람의 얼굴 측면의 해부도를 나타낸 도면이다.FIG. 1 is a diagram showing an anatomical view of a side of a wearable device and a person's face according to an embodiment.
일 실시예에 따른 웨어러블 디바이스(100)는 마이크(microphone) 또는 스피커(speaker) 중 적어도 하나를 포함하나, 이에 한정되지 않는다. 웨어러블 디바이스(100)는 예를 들면, 이어폰을 포함하는 웨어러블 장치, 무선 이어폰, 유선 이어폰, 헤드 마운트 디스플레이, 또는 스마트 글래스 중 어느 하나를 포함할 수 있으나, 이에 한정되지 않는다. The wearable device 100 according to one embodiment includes at least one of a microphone or a speaker, but is not limited thereto. The wearable device 100 may include, but is not limited to, any one of, for example, a wearable device including earphones, wireless earphones, wired earphones, a head-mounted display, or smart glasses.
일 실시예에 따른 웨어러블 디바이스(100)는 막(membrane)(110)을 포함할 수 있다.The wearable device 100 according to one embodiment may include a membrane 110.
표재성 측두동맥(superficial temporal artery, STA)(120)의 주요 가지(main branch)는 귀와 인접한 위치에 있다. 사용자는, 표재성 측두동맥(120)의 주요 가지와 인접한 귀 또는 귀와 인접한 위치에 일 실시예에 따른 웨어러블 디바이스(100)를 착용할 수 있다.The main branch of the superficial temporal artery (STA) (120) is located adjacent to the ear. The user may wear the wearable device 100 according to one embodiment on the ear adjacent to the main branch of the superficial temporal artery 120 or at a location adjacent to the ear.
일 실시예에 따른 웨어러블 디바이스(100)는 사용자가 단순히 웨어러블 디바이스(100)를 착용함으로써 생체 정보를 수집할 수 있다. 사용자는 본인의 필요에 의해 웨어러블 디바이스(100)를 착용하기 때문에 사용자는 생체 정보 수집을 위해 별도의 동작을 수행할 필요가 없다. 따라서 피부와 접촉되는 두 개 이상의 분리된 센서가 필요하고, 디바이스를 정기적으로 세척하여야하는 ECG(Electrocardiography) 기반 웨어러블 디바이스 또는 움직임이나 습기에 민감하고, 피부 착색에 따라 측정에 영향을 받는 PPG(Photoplethysmography) 기반의 웨어러블 디바이스와 달리 본 개시의 실시예들은 사용 전에 습기로부터의 세척이 불필요하며, 피부 파라미터와 무관하게 비 침습적(non-invasive)으로 사용자에게 부가적인 동작을 요구하지 않으면서 생체 정보를 수집할 수 있는 효과가 있다. 여기에서, 피부 파라미터는, 예를 들어, 피부색, 피지, 수분 공급 정도 중 어느 하나를 포함할 수 있으나, 이에 한정되지 않는다.The wearable device 100 according to one embodiment can collect biometric information when the user simply wears the wearable device 100. Since the user wears the wearable device 100 according to his or her own needs, the user does not need to perform any separate actions to collect biometric information. Therefore, ECG (Electrocardiography)-based wearable devices require two or more separate sensors in contact with the skin and the device must be cleaned regularly, or PPG (Photoplethysmography), which is sensitive to movement or moisture and whose measurements are affected by skin coloring. Unlike wearable devices, embodiments of the present disclosure do not require cleaning from moisture before use and can collect biometric information non-invasively without requiring additional actions from the user, regardless of skin parameters. There is a possible effect. Here, the skin parameter may include, for example, any one of skin color, sebum, and level of moisture supply, but is not limited thereto.
본 개시의 실시예에서는, 도 1에서 도시된 바와 같이 웨어러블 디바이스(100)를 이용하는 사용자의 생체 신호를 획득하는 웨어러블 디바이스 및 그의 제어 방법을 개시한다. 본 개시의 실시예에 따른 웨어러블 디바이스 및 그의 제어 방법은 이하에서 도 2 내지 도 11을 참조하여 상세히 설명한다. In an embodiment of the present disclosure, a wearable device and a method of controlling the same are disclosed for acquiring biometric signals of a user using the wearable device 100 as shown in FIG. 1 . The wearable device and its control method according to an embodiment of the present disclosure will be described in detail below with reference to FIGS. 2 to 11.
도 2는 일 실시예에 따른 웨어러블 디바이스의 동작 방법을 흐름도로 나타낸 도면이다.Figure 2 is a flowchart showing a method of operating a wearable device according to an embodiment.
표재성 측두동맥(120)의 주요 가지는 귀에 인접한 위치에 있으며, 표재성 측두동맥(120)의 박동은 일 실시예에 따른 웨어러블 디바이스의 막(110)의 기계적 진동을 유도할 수 있다.The main branch of the superficial temporal artery 120 is located adjacent to the ear, and the pulsation of the superficial temporal artery 120 may induce mechanical vibration of the membrane 110 of the wearable device according to one embodiment.
일 실시예에 따른 웨어러블 디바이스(100)는 표재성 측두동맥(120)의 박동에 따라 막(110)의 기계적 진동으로부터 마이크로포니즘 현상(microphonism phenomenon)에 의하여 전기신호를 획득할 수 있다(S200). The wearable device 100 according to one embodiment may acquire an electrical signal by a microphonism phenomenon from the mechanical vibration of the membrane 110 according to the pulsation of the superficial temporal artery 120 (S200).
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 전기신호로부터 다양한 생체 신호를 획득할 수 있다(S210). 다양한 생체 신호는, 예를 들어, 심박수, 심장박동의 변동, 호흡수 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.The wearable device 100 according to one embodiment can acquire various bio-signals from the acquired electrical signals (S210). Various biological signals may include, but are not limited to, at least one of, for example, heart rate, heart rate fluctuation, and respiratory rate.
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 생체 신호에 대응하는 동작을 수행할 수 있다(S220). 생체 신호에 대응하는 동작은, 예를 들어, 획득된 생체 신호를 사용자 전자기기에 송신하는 동작을 포함할 수 있으나, 이에 한정되지 않는다. The wearable device 100 according to one embodiment may perform an operation corresponding to the acquired biosignal (S220). The operation corresponding to the biological signal may include, but is not limited to, an operation of transmitting the acquired biological signal to the user's electronic device.
일 실시예에 따른 웨어러블 디바이스(100)는 생체 신호에 대응하는 동작(S220)으로부터 사용자 전자기기에서 사용자의 심장 관련 질환과 관련된 신호를 모니터링할 수 있도록 도움을 줄 수 있으며 이에 따라, 심장 관련 질환을 가진 사용자의 긴급 상황에 빠르게 대처할 수 있다. 다만, 이에 한정되지 않는다.The wearable device 100 according to one embodiment can help the user monitor signals related to the user's heart-related disease in the user's electronic device through an operation (S220) corresponding to the biosignal, and accordingly, heart-related disease can be prevented. You can quickly respond to emergency situations. However, it is not limited to this.
한편, 일 실시예에 따른 웨어러블 디바이스(100)의 동작 방법은 그 방법을 실행하는 명령어들을 포함하는 하나 이상의 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체에 기록될 수 있다Meanwhile, a method of operating the wearable device 100 according to an embodiment may be recorded on a computer-readable recording medium on which one or more programs including instructions for executing the method are recorded.
도 3은 일 실시예에 따른 웨어러블 디바이스의 구성을 나타낸 블록도이다.Figure 3 is a block diagram showing the configuration of a wearable device according to an embodiment.
일 실시예에 따른 웨어러블 디바이스(100)는 막(110), 프로세서(300), 메모리(310)를 포함할 수 있다.The wearable device 100 according to one embodiment may include a membrane 110, a processor 300, and a memory 310.
일 실시예에 따른 프로세서(300)는 웨어러블 디바이스(100)의 전반적인 동작 및 웨어러블 디바이스(100)의 내부 구성 요소들 사이의 신호 흐름을 제어하고, 데이터를 처리하는 기능을 수행한다.The processor 300 according to one embodiment controls the overall operation of the wearable device 100 and signal flow between internal components of the wearable device 100, and performs the function of processing data.
메모리(310)에 저장되는 프로그램은 하나 이상의 인스트럭션들을 포함할 수 있다. 메모리(310)에 저장된 프로그램(하나 이상의 인스트럭션들)은 프로세서(300)에 의해 실행될 수 있다.A program stored in memory 310 may include one or more instructions. A program (one or more instructions) stored in the memory 310 may be executed by the processor 300.
표재성 측두동맥(120)의 주요 가지는 귀에 인접한 위치에 있으며, 표재성 측두동맥(120)의 박동은 일 실시예에 따른 웨어러블 디바이스의 막(110)의 기계적 진동을 유도할 수 있다.The main branch of the superficial temporal artery 120 is located adjacent to the ear, and the pulsation of the superficial temporal artery 120 may induce mechanical vibration of the membrane 110 of the wearable device according to one embodiment.
일 실시예에 따른 프로세서(300)는, 표재성 측두동맥(120)의 박동에 따라 유도된 막(110)의 기계적 진동으로부터 마이크로포니즘 현상에 의하여 전기신호를 획득할 수 있다. 획득된 전기신호는 웨어러블 디바이스(100)에 내장된 메모리(310)에 저장된다.The processor 300 according to one embodiment may acquire an electrical signal through the microphonism phenomenon from the mechanical vibration of the membrane 110 induced by the pulsation of the superficial temporal artery 120. The acquired electrical signal is stored in the memory 310 built into the wearable device 100.
일 실시예에 따른 프로세서(300)는, 획득된 전기신호로부터 다양한 생체 신호를 획득할 수 있다. 다양한 생체 신호는, 예를 들어, 심박수, 심장박동의 변동, 호흡수 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.The processor 300 according to one embodiment may obtain various bio-signals from the acquired electrical signals. Various biological signals may include, but are not limited to, at least one of, for example, heart rate, heart rate fluctuation, and respiratory rate.
일 실시예에 따른 프로세서(300)는, 획득된 생체 신호에 대응하는 동작을 수행할 수 있다. 생체 신호에 대응하는 동작은, 예를 들어, 획득된 생체 신호를 사용자 전자기기에 송신하는 동작을 포함할 수 있으나, 이에 한정되지 않는다.The processor 300 according to one embodiment may perform an operation corresponding to the acquired biosignal. The operation corresponding to the biological signal may include, but is not limited to, an operation of transmitting the acquired biological signal to the user's electronic device.
일 실시예에 따른 프로세서(300)는, 생체 신호에 대응하는 동작으로부터 사용자 전자기기에서 사용자의 심장 관련 질환과 관련된 신호를 모니터링할 수 있도록 도움을 줄 수 있으며 이에 따라, 심장 관련 질환을 가진 사용자의 긴급 상황에 빠르게 대처할 수 있다. 다만, 이에 한정되지 않는다.The processor 300 according to one embodiment can help monitor signals related to a user's heart-related disease in the user's electronic device from operations corresponding to bio-signals, and accordingly, the user's heart-related disease can be monitored by the user's electronic device. You can respond quickly to emergency situations. However, it is not limited to this.
도 4는 일 실시예에 따른 웨어러블 디바이스의 구성을 나타낸 블록도이다.Figure 4 is a block diagram showing the configuration of a wearable device according to an embodiment.
일 실시예에 따른 웨어러블 디바이스(100)는 막(110), 프로세서(300), 메모리(310)를 포함할 수 있다.The wearable device 100 according to one embodiment may include a membrane 110, a processor 300, and a memory 310.
일 실시예에 따른 프로세서(300)는 웨어러블 디바이스(100)의 전반적인 동작 및 웨어러블 디바이스(100)의 내부 구성 요소들 사이의 신호 흐름을 제어하고, 데이터를 처리하는 기능을 수행한다.The processor 300 according to one embodiment controls the overall operation of the wearable device 100 and signal flow between internal components of the wearable device 100, and performs the function of processing data.
메모리(310)에 저장되는 프로그램은 하나 이상의 인스트럭션들을 포함할 수 있다. 메모리(310)에 저장된 프로그램(하나 이상의 인스트럭션들)은 프로세서에 의해 실행될 수 있다.A program stored in memory 310 may include one or more instructions. A program (one or more instructions) stored in memory 310 may be executed by a processor.
일 실시예에 따른 프로세서(300)는, 전처리 모듈(400,420), 신호 변환 모듈(410), 기준점 검출 모듈(fiducial point detect module)(440), 시간 정렬 모듈(460), 기준점 특징 검출 모듈(470), 심장 박동 분류 모듈(heartbeat signal classifier)(480), 템플릿 업데이트 모듈(template update module)(490)을 포함할 수 있다.The processor 300 according to one embodiment includes preprocessing modules 400 and 420, a signal conversion module 410, a fiducial point detect module 440, a time alignment module 460, and a fiducial point feature detection module 470. ), a heartbeat signal classifier 480, and a template update module 490.
일 실시예에 따른 프로세서(300)는, 표재성 측두동맥(120)의 박동에 따라 유도된 막(110)의 기계적 진동으로부터 마이크로포니즘 현상(microphonism phenomenon)에 의하여 전기신호를 획득할 수 있다.The processor 300 according to one embodiment may acquire an electrical signal through a microphonism phenomenon from the mechanical vibration of the membrane 110 induced by the pulsation of the superficial temporal artery 120.
전처리 모듈(400)은 신호를 증폭하거나 잡음을 제거하는 동작을 수행할 수 있다. 획득된 전기신호는 전처리 모듈(400)에 포함된 증폭기(402)에 의하여 증폭되거나, 필터(404)를 통과하여 노이즈가 감소될 수 있다. 필터(404)는, 예를 들어, 대역통과필터, 이동평균필터, FIR필터 또는 IIR 필터 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. 필터(404)를 통과하는 경우, 필터(404)의 대역폭은 생체 신호에 의하여 결정된다. 필터(404)의 대역폭은, 예를 들어, 0.2Hz부터 2.5Hz 또는 0.3Hz부터 2.6Hz 중 어느 하나를 포함할 수 있으나, 이에 한정되지 않는다. The preprocessing module 400 may perform operations to amplify signals or remove noise. The acquired electrical signal may be amplified by the amplifier 402 included in the preprocessing module 400 or passed through the filter 404 to reduce noise. The filter 404 may include, but is not limited to, at least one of, for example, a band-pass filter, a moving average filter, an FIR filter, or an IIR filter. When passing through the filter 404, the bandwidth of the filter 404 is determined by the biological signal. The bandwidth of the filter 404 may include, for example, any one of 0.2 Hz to 2.5 Hz or 0.3 Hz to 2.6 Hz, but is not limited thereto.
신호 변환 모듈(410)은 획득된 전기신호(아날로그 신호)를 디지털 신호로 변환할 수 있다. 신호 변환 모듈(410)에서 고속 푸리에 변환(Fast Fourier Transform) 또는 이산 웨이블릿 변환(Discrete Wavelet Transform) 중 적어도 하나에 의하여 주파수 변환이 이루어지지만, 이에 한정되지 않는다.The signal conversion module 410 can convert the obtained electrical signal (analog signal) into a digital signal. In the signal conversion module 410, frequency conversion is performed by at least one of Fast Fourier Transform or Discrete Wavelet Transform, but is not limited thereto.
전처리 모듈(420)은 신호 변환 모듈(410)을 통하여 변환된 디지털 신호에 잡음이 상당 부분 존재하여 이를 제거하고자 하는 경우 잡음을 제거하는 데 도움을 줄 수 있다. 전처리 모듈(420)에서의 전처리 과정은 표준화(normalization) 또는 잡음 제거(denoising) 과정을 포함할 수 있으나, 이에 한정되지 않는다.The preprocessing module 420 can help remove noise when a significant amount of noise exists in the digital signal converted through the signal conversion module 410 and is to be removed. The preprocessing process in the preprocessing module 420 may include, but is not limited to, normalization or denoising.
일 실시예에 따른 프로세서(300)는, 신호 변환 모듈(410) 또는 전처리모듈(420)을 거친 신호 중 적어도 하나의 신호에 기초하여 생체 신호를 획득할 수 있다. 여기에서, 생체 신호는, 예를 들어, 심박수, 심장박동의 변동, 호흡수 중 적어도 하나를 포함할 수 있으나 이에 한정되지 않는다.The processor 300 according to one embodiment may acquire a biosignal based on at least one of the signals that have passed through the signal conversion module 410 or the preprocessing module 420. Here, the biosignal may include, but is not limited to, at least one of, for example, heart rate, heart rate fluctuation, and respiratory rate.
일 실시예에 따른 프로세서(300)는, 획득된 생체 신호에 대응하는 동작을 수행할 수 있다. 생체 신호에 대응하는 동작은, 예를 들어, 획득된 생체 신호를 사용자 전자기기(430)에 송신하는 동작을 포함할 수 있으나, 이에 한정되지 않는다.The processor 300 according to one embodiment may perform an operation corresponding to the acquired biosignal. The operation corresponding to the bio-signal may include, but is not limited to, an operation of transmitting the acquired bio-signal to the user electronic device 430, for example.
일 실시예에 따른 프로세서(300)는, 생체 신호에 대응하는 동작으로부터 사용자 전자기기(430)에서 사용자의 심장 관련 질환과 관련된 신호를 모니터링할 수 있게 도움을 줄 수 있으며 이에 따라, 심장 관련 질환을 가진 사용자의 긴급 상황에 빠르게 대처할 수 있다. 다만, 이에 한정되지 않는다.The processor 300 according to one embodiment can help the user electronic device 430 monitor signals related to a user's heart-related disease from operations corresponding to bio-signals, thereby preventing heart-related diseases. You can quickly respond to emergency situations. However, it is not limited to this.
기준점 검출 모듈(440)은 신호 변환 모듈(410)을 거친 신호 또는 전처리 모듈(420)을 거친 신호 중 어느 하나에 기초하여 기준점(fiducial point)을 획득할 수 있다. 기준점은 심장 박동 신호의 가변성 하에서 매개변수를 보존하는 측정된 신호의 부분을 의미한다. 매개변수는 심장 박동 주기 내 시간 위치 또는 심장 박동 펄스의 모양 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. 기준점은, 예를 들어, Pan-Thompkins 알고리즘을 이용한 ECG신호의 QRS패턴이 있다. QRS패턴은 심장 박동에 의하여 발생하는 심전도의 특정 펄스 집합이다. 여기에서, 펄스는 다양한 생활 환경에서 펄스의 모양을 유지할 수 있다. The fiducial point detection module 440 may acquire a fiducial point based on either a signal that has passed through the signal conversion module 410 or a signal that has passed through the pre-processing module 420. The reference point refers to the portion of the measured signal that preserves the parameters under the variability of the heart rate signal. The parameter may include, but is not limited to, at least one of the time position within the heartbeat cycle or the shape of the heartbeat pulse. The reference point is, for example, the QRS pattern of the ECG signal using the Pan-Thompkins algorithm. A QRS pattern is a specific set of pulses on the electrocardiogram that occur as the heart beats. Here, the pulse can maintain its shape in various living environments.
사용자는 사전에 사용자 고유의 기준점을 메모리의 템플릿(450)에 저장할 수 있다. The user may store the user's unique reference point in advance in the template 450 of the memory.
시간 정렬 모듈(460)은 기준점 검출 모듈(440)을 통하여 획득된 기준점과 사용자가 미리 템플릿(450)에 저장한 기준점에 대하여 시간 정렬을 할 수 있다.The time alignment module 460 can time align the reference point obtained through the reference point detection module 440 and the reference point previously saved by the user in the template 450.
기준점 특징 검출 모듈(470)은 시간 정렬 모듈(460)을 거친 시간 정렬된 기준점으로부터 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징을 검출할 수 있다.The reference point feature detection module 470 may detect at least one feature among statistical, frequency, and structural features from the time-aligned reference point that has passed through the time alignment module 460.
통계적 특징은 사용자에게 유사하지만, 사용자 이외의 타인에게는 급격하게 변화하는 신호의 매개변수를 의미한다. 예를 들어, 기준점 사이의 지속 시간의 평균, 표준편차 또는 기준점 크기의 평균값 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. Statistical characteristics refer to signal parameters that are similar to the user, but change rapidly to others other than the user. For example, it may include, but is not limited to, at least one of the average duration between reference points, the standard deviation, or the average value of the size of reference points.
주파수적 특성은 기준점의 주파수 특성을 의미한다. 예를 들어, 전자 신호인 기준점 펄스의 주기, 진동수 또는 모양 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. Frequency characteristics refer to the frequency characteristics of the reference point. For example, it may include at least one of the period, frequency, or shape of a reference point pulse that is an electronic signal, but is not limited thereto.
구조적 특징은 신호 자체의 유사성(self-similarity)과 같은 기준점 모양의 매개변수를 의미한다. 예를 들어, 일련의 심장박동 신호가 개별 펄스의 유사한 모양을 지니는 것과 같은 사전에 정의된 전자기기 사용 상황에 대한 신호 자체의 유사성, 사용자가 앉거나 걷는 동안 심장 박동 신호가 유사한 모양을 유지하는 것과 같은 전자기기 사용 상황에 대한 신호 자체의 유사성, 또는 다항식 근사 및 근사 오차 분포와 같은 단일 펄스 형태의 근사 유형 중 어느 하나를 포함할 수 있으나, 이에 한정되지 않는다. Structural features refer to parameters of the shape of a reference point, such as the self-similarity of the signal itself. For example, the similarity of the signals themselves to predefined electronic device use situations, such as whether a series of heartbeat signals have similar shapes of individual pulses, whether heartbeat signals maintain similar shapes while the user is sitting or walking, and It may include, but is not limited to, the similarity of the signal itself for the same electronic device use situation, or any one of the types of approximation in the form of a single pulse, such as polynomial approximation and approximation error distribution.
심장박동 분류 모듈(480)은 일 실시예에 따른 웨어러블 디바이스(100)의 메모리의 템플릿(450)에 저장된 사용자의 기준점과 기준점 특징 검출 모듈(470)을 통해 획득된 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징에 기초하여 상호 간 유사도를 획득할 수 있다. 심장박동 분류 모듈(480)은 상관분석(correlation)을 통하여 유사도를 획득할 수 있으나, 이에 한정되지 않는다. 획득된 유사도는 사용자 전자기기(430)로 송신되며, 사용자가 사전에 정의한 임계값과 비교하여 해당 임계값 이상의 유사도를 갖는 경우 사용자 전자기기(430)에서 본인인증이 이루어질 수 있다. 이와 달리, 사용자 전자기기(430)로 송신된 획득된 유사도가 사용자가 사전에 정의한 임계값과 비교하여 해당 임계값 미만의 유사도를 갖는 경우 사용자 전자기기(430)에서 본인인증에 실패할 수 있다.The heart rate classification module 480 performs statistical, frequency, and structural analysis of the user's reference point stored in the template 450 of the memory of the wearable device 100 according to an embodiment and the reference point obtained through the reference point feature detection module 470. Mutual similarity can be obtained based on at least one of the features. The heartbeat classification module 480 may obtain similarity through correlation, but is not limited to this. The obtained similarity is transmitted to the user electronic device 430, and if the similarity is greater than or equal to a threshold value defined in advance by the user, identity authentication can be performed on the user electronic device 430. In contrast, if the obtained similarity transmitted to the user electronic device 430 is compared to a threshold predefined by the user and has a similarity less than the threshold, the user electronic device 430 may fail in identity authentication.
템플릿 업데이트 모듈(490)은 본인인증이 이루어진 경우, 유사도 획득 과정에서 사용된 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나를 통하여 사용자의 템플릿을 업데이트할 수 있다. 이에 따라, 사용자의 상황에 따라 변화하는 기준점을 주기적으로 등록할 필요가 없으며, 본인인증이 보다 더 빠르게 이루어진다. 여기에서, 사용자의 상황은, 예를 들어, 사용 환경의 변화, 노화 또는 부상 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. 여기에서, 주기는, 예를 들어, 주간, 격주간, 월간 또는 년간 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.When identity verification is achieved, the template update module 490 may update the user's template through at least one of the statistical, frequency, and structural characteristics of the reference point used in the similarity acquisition process. Accordingly, there is no need to periodically register a reference point that changes depending on the user's situation, and identity authentication occurs more quickly. Here, the user's situation may include, but is not limited to, at least one of, for example, a change in usage environment, aging, or injury. Here, the cycle may include, for example, at least one of weekly, biweekly, monthly, or yearly, but is not limited thereto.
일 실시예에 따른 프로세서(300)는, 사용자 본인인증에 성공한 경우 기존에 파악된 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나로부터 사용자의 상태 변화 정보를 획득할 수 있으며, 획득된 사용자의 상태 변화 정보는 사용자 전자기기(430)에 송신될 수 있다. 사용자 상태 변화 정보를 사용자 전자기기(430)에 송신함으로써, 일 실시예에 따른 웨어러블 디바이스(100)과 사용자 전자기기(430)가 상호작용(interaction) 할 수 있다. The processor 300 according to one embodiment may obtain user status change information from at least one of the statistical, frequency, and structural characteristics of a previously identified reference point when user identity authentication is successful, and the obtained user status. Change information may be transmitted to the user electronic device 430. By transmitting user state change information to the user electronic device 430, the wearable device 100 and the user electronic device 430 according to one embodiment may interact.
여기에서, 상호작용은, 예를 들어, 일 실시예에 따른 웨어러블 디바이스(100)가 사용자 전자기기(430)로 사용자 상태 변화 정보를 송신하여 사용자 전자기기(430)로 하여금 사용자 전자기기(430)에 저장된 사용자의 지인 또는 긴급 전화번호로 사용자의 상태 변화 정보를 송신하게 하는 상호작용 또는 사용자가 사용자 전자기기(430)에 설치된 트레이닝 모드와 같은 어플리케이션을 실행하는 경우 사용자의 상태 변화 정보에 기초하여 피드백하는 과정 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. Here, interaction is, for example, the wearable device 100 according to one embodiment transmits user state change information to the user electronic device 430, causing the user electronic device 430 to Feedback based on the user's status change information when an interaction causes the user's status change information to be transmitted to the user's acquaintances or emergency phone number stored in the user's computer, or when the user runs an application such as a training mode installed on the user's electronic device 430. It may include at least one of the following processes, but is not limited to this.
여기에서, 피드백은, 예를 들어, 사용자가 운동을 하고 있는 경우 운동의 목적(예컨대, 다이어트, 근력 향상, 근 지구력 향상 등)에 맞게 사용자 상태 변화 정보에 따라 사용자 전자기기(430)가 일 실시예에 따른 웨어러블 디바이스(100)로 알림을 주어 심장 박동을 조절하게 하는 피드백 또는 사용자의 상태 변화 정보를 사용자 전자기기(430)에 저장하여 사용자의 건강 상태에 기초하여 운동 중 소모한 칼로리를 계산하고 이에 맞는 식단을 추천하는 피드백 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.Here, the feedback is, for example, when the user is exercising, the user's electronic device 430 performs work according to the user's state change information according to the purpose of the exercise (e.g., diet, muscle strength improvement, muscle endurance improvement, etc.). By providing a notification to the wearable device 100 according to the example, feedback to control the heart rate or information on changes in the user's state are stored in the user electronic device 430 to calculate the calories burned during exercise based on the user's health status. It may include at least one piece of feedback recommending an appropriate diet, but is not limited to this.
일 실시예에 따른 프로세서(300)는, 사용자 상태 변화 정보를 수신한 사용자 전자기기(430)로부터 적어도 하나의 인스트럭션을 수신할 수 있다. 적어도 하나의 인스트럭션은, 예를 들어, 일 실시예에 따른 웨어러블 디바이스(100)의 볼륨 조절, 전원 제어 또는 사용자 전자기기(430)의 전원 제어 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.The processor 300 according to one embodiment may receive at least one instruction from the user electronic device 430 that has received user state change information. The at least one instruction may include, for example, at least one of volume control, power control, or power control of the user electronic device 430 according to an embodiment, but is not limited thereto.
도 5는 일 실시예에 따른 웨어러블 디바이스의 동작 제어 방법을 블록도로 나타낸 도면이다.Figure 5 is a block diagram showing a method for controlling the operation of a wearable device according to an embodiment.
일 실시예에 따른 웨어러블 디바이스(100)는 표재성 측두동맥(120)의 박동에 따라 유도된 막(110)의 기계적 진동으로부터 마이크로포니즘 현상(microphonism phenomenon)에 의하여 전기신호를 획득할 수 있다(S200).The wearable device 100 according to one embodiment may acquire an electrical signal by the microphonism phenomenon from the mechanical vibration of the membrane 110 induced by the pulsation of the superficial temporal artery 120 (S200) ).
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 전기 신호를 전처리 과정(미도시)을 통하여 증폭하거나, 전기 신호에 섞여있는 노이즈를 줄일 수 있다.The wearable device 100 according to one embodiment may amplify the acquired electrical signal through a preprocessing process (not shown) or reduce noise mixed in the electrical signal.
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 전기신호 또는 전처리 과정을 통하여 증폭되거나 노이즈가 제거된 신호 중 적어도 하나로부터 다양한 생체 신호를 획득할 수 있다(S210). 다양한 생체 신호는, 예를 들어, 심박수, 심장박동의 변동, 호흡수 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.The wearable device 100 according to one embodiment may acquire various bio-signals from at least one of the acquired electrical signal or the signal amplified or noise removed through a pre-processing process (S210). Various biological signals may include, but are not limited to, at least one of, for example, heart rate, heart rate fluctuation, and respiratory rate.
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 생체 신호에 대응하는 동작을 수행할 수 있다(S220). 생체 신호에 대응하는 동작은, 예를 들어, 획득된 생체 신호를 사용자 전자기기에 송신하는 동작을 포함할 수 있으나, 이에 한정되지 않는다. The wearable device 100 according to one embodiment may perform an operation corresponding to the acquired biosignal (S220). The operation corresponding to the biological signal may include, but is not limited to, an operation of transmitting the acquired biological signal to the user's electronic device.
일 실시예에 따른 웨어러블 디바이스(100)는 생체 신호에 대응하는 동작(S220)으로부터 사용자 전자기기에서 사용자의 심장 관련 질환과 관련된 신호를 모니터링할 수 있도록 도움을 줄 수 있으며 이에 따라, 심장 관련 질환을 가진 사용자의 긴급 상황에 빠르게 대처할 수 있다. 다만, 이에 한정되지 않는다.The wearable device 100 according to one embodiment can help the user monitor signals related to the user's heart-related disease in the user's electronic device through an operation (S220) corresponding to the biosignal, and accordingly, heart-related disease can be prevented. You can quickly respond to emergency situations. However, it is not limited to this.
일 실시예에 따른 웨어러블 디바이스(100)는, 획득된 전기 신호 또는 전처리과정을 거친 전기 신호 중 적어도 하나를 디지털 신호로 변환할 수 있다(S500). 이 경우, 아날로그 신호로부터 디지털 신호로의 변환은 고속 푸리에 변환 또는 이산 웨이블릿 변환 중 적어도 하나에 의하여 주파수 변환이 이루어질 수 있으나, 이에 한정되지 않는다.The wearable device 100 according to one embodiment may convert at least one of an acquired electrical signal or an electrical signal that has undergone a preprocessing process into a digital signal (S500). In this case, the frequency conversion from an analog signal to a digital signal may be performed by at least one of fast Fourier transform or discrete wavelet transform, but is not limited thereto.
일 실시예에 따른 웨어러블 디바이스(100)는, 변환된 디지털 신호에 대하여 잡음이 상당 부분 존재하여 이를 제거하는 경우, 전처리 과정(미도시)을 통하여 잡음을 제거할 수 있다. 여기에서, 전처리 과정은 표준화(normalization) 또는 잡음 제거(denoising) 과정을 포함할 수 있으나, 이에 한정되지 않는다.The wearable device 100 according to one embodiment may remove noise through a pre-processing process (not shown) when a significant portion of noise exists in the converted digital signal. Here, the preprocessing process may include, but is not limited to, normalization or denoising.
일 실시예에 따른 웨어러블 디바이스(100)는 변환된 디지털 신호 또는 전처리 과정을 거친 신호 중 적어도 하나로부터 다양한 생체 신호를 획득할 수 있다(S510). 다양한 생체 신호는, 예를 들어, 심박수, 심장박동의 변동, 호흡수 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.The wearable device 100 according to one embodiment may acquire various biological signals from at least one of a converted digital signal or a signal that has undergone a preprocessing process (S510). Various biological signals may include, but are not limited to, at least one of, for example, heart rate, heart rate fluctuation, and respiratory rate.
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 생체 신호에 대응하는 동작을 수행할 수 있다(S515). 생체 신호에 대응하는 동작은, 예를 들어, 획득된 생체 신호를 사용자 전자기기에 송신하는 동작을 포함할 수 있으나, 이에 한정되지 않는다. The wearable device 100 according to one embodiment may perform an operation corresponding to the acquired biosignal (S515). The operation corresponding to the biological signal may include, but is not limited to, an operation of transmitting the acquired biological signal to the user's electronic device.
일 실시예에 따른 웨어러블 디바이스(100)는 생체 신호에 대응하는 동작(S515)으로부터 사용자 전자기기에서 사용자의 심장 관련 질환과 관련된 신호를 모니터링할 수 있도록 도움을 줄 수 있으며 이에 따라, 심장 관련 질환을 가진 사용자의 긴급 상황에 빠르게 대처할 수 있다. 다만, 이에 한정되지 않는다.The wearable device 100 according to one embodiment can help the user's electronic device monitor signals related to the user's heart-related disease through an operation (S515) corresponding to the biosignal, thereby preventing the heart-related disease. You can quickly respond to emergency situations. However, it is not limited to this.
일 실시예에 따른 웨어러블 디바이스(100)는, 신호 변환 과정을 거친 신호 또는 전처리 과정을 거친 신호 중 어느 하나에 기초하여 기준점을 획득할 수 있다(S520). 여기에서, 기준점은 심장 박동 신호의 가변성 하에서 매개변수를 보존하는 측정된 신호의 부분을 의미한다. 매개변수는 심장 박동 주기 내 시간 위치 또는 심장 박동 펄스의 모양 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. 기준점은, 예를 들어, Pan-Thompkins 알고리즘을 이용한 ECG신호의 QRS패턴이 있다. QRS패턴은 심장 박동에 의하여 발생하는 심전도의 특정 펄스 집합이다. 여기에서, 펄스는 다양한 생활 환경에서 펄스의 모양을 유지할 수 있다. The wearable device 100 according to one embodiment may acquire a reference point based on either a signal that has undergone a signal conversion process or a signal that has undergone a preprocessing process (S520). Here, the reference point refers to the portion of the measured signal that preserves the parameters under the variability of the heart rate signal. The parameter may include, but is not limited to, at least one of the time position within the heartbeat cycle or the shape of the heartbeat pulse. The reference point is, for example, the QRS pattern of the ECG signal using the Pan-Thompkins algorithm. A QRS pattern is a specific set of pulses on the electrocardiogram that occur as the heart beats. Here, the pulse can maintain its shape in various living environments.
사용자는 사전에 사용자 고유의 기준점을 일 실시예에 따른 웨어러블 디바이스(100)의 템플릿에 저장할 수 있다.The user may store the user's unique reference point in advance in a template of the wearable device 100 according to an embodiment.
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 기준점과 사용자가 미리 저장한 기준점에 대하여 시간 정렬을 할 수 있다(S525).The wearable device 100 according to one embodiment can time align the obtained reference point with the reference point previously stored by the user (S525).
일 실시예에 따른 웨어러블 디바이스(100)는 시간 정렬된 기준점으로부터 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징을 검출할 수 있다(S530).The wearable device 100 according to one embodiment may detect at least one characteristic among statistical, frequency, and structural characteristics of the reference point from the time-aligned reference point (S530).
통계적 특징은 사용자에게 유사하지만, 사용자 이외의 타인에게는 급격하게 변화하는 신호의 매개변수를 의미한다. 예를 들어, 기준점 사이의 지속 시간의 평균, 표준편차 또는 기준점 크기의 평균값 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. Statistical characteristics refer to signal parameters that are similar to the user, but change rapidly to others other than the user. For example, it may include, but is not limited to, at least one of the average duration between reference points, the standard deviation, or the average value of the size of reference points.
주파수적 특성은 기준점의 주파수 특성을 의미한다. 예를 들어, 전자신호인 기준점 펄스의 주기, 진동수 또는 모양 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. Frequency characteristics refer to the frequency characteristics of the reference point. For example, it may include at least one of the period, frequency, or shape of a reference point pulse that is an electronic signal, but is not limited thereto.
구조적 특징은 신호 자체의 유사성(self-similarity)과 같은 기준점 모양의 매개변수를 의미한다. 예를 들어, 일련의 심장박동 신호가 개별 펄스의 유사한 모양을 지니는 것과 같은 사전에 정의된 전자기기 사용 상황에 대한 신호 자체의 유사성, 사용자가 앉거나 걷는 동안 심장 박동 신호가 유사한 모양을 유지하는 것과 같은 전자기기 사용 상황에 대한 신호 자체의 유사성, 또는 다항식 근사 및 근사 오차 분포와 같은 단일 펄스 형태의 근사 유형 중 어느 하나를 포함할 수 있으나, 이에 한정되지 않는다. Structural features refer to parameters of the shape of a reference point, such as the self-similarity of the signal itself. For example, the similarity of the signals themselves to predefined electronic device use situations, such as whether a series of heartbeat signals have similar shapes of individual pulses, whether heartbeat signals maintain similar shapes while the user is sitting or walking, and It may include, but is not limited to, the similarity of the signal itself for the same electronic device use situation, or any one of the types of approximation in the form of a single pulse, such as polynomial approximation and approximation error distribution.
일 실시예에 따른 웨어러블 디바이스(100)는 사전에 템플릿에 저장된 사용자의 기준점과 시간 정렬된 기준점에서 획득된 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징에 기초하여 상호 간 유사도를 획득할 수 있다(S535). 유사도는 상관분석(correlation)을 통하여 획득할 수 있으나, 이에 한정되지 않는다. The wearable device 100 according to an embodiment acquires mutual similarity based on at least one characteristic among the statistical, frequency, and structural characteristics of the user's reference point stored in a template in advance and the reference point obtained from the time-aligned reference point. (S535). Similarity can be obtained through correlation, but is not limited to this.
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 유사도를 사용자 전자기기(430)로 송신할 수 있다. 송신된 유사도는 사용자가 사전에 정의한 임계값과 비교하여 해당 임계값 이상의 유사도를 갖는 경우 사용자 전자기기(430)에서 본인인증이 이루어질 수 있다(S540). 이와 달리, 사용자가 사전에 정의한 임계값과 비교하여 해당 임계값 미만의 유사도를 갖는 경우 사용자 전자기기(430)에서 본인인증에 실패할 수 있다(S560).The wearable device 100 according to one embodiment may transmit the obtained similarity to the user electronic device 430. The transmitted similarity is compared to a threshold predefined by the user, and if the similarity is greater than or equal to the threshold, identity authentication can be performed on the user's electronic device 430 (S540). On the other hand, if the similarity is less than the threshold value defined in advance by the user, identity authentication may fail in the user electronic device 430 (S560).
일 실시예에 따른 웨어러블 디바이스(100)는 본인인증이 이루어진 경우, 유사도 획득 과정에서 사용된 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나를 사용자의 템플릿에 업데이트 할 수 있다(S550). 이에 따라, 사용자의 상황에 따라 변화하는 기준점을 주기적으로 등록할 필요가 없으며, 본인인증이 보다 더 빠르게 이루어진다. 여기에서, 사용자의 상황은, 예를 들어, 사용 환경의 변화, 노화 또는 부상 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. 여기에서, 주기는, 예를 들어, 주간, 격주간, 월간 또는 년간 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.When identity verification is performed, the wearable device 100 according to one embodiment may update the user's template with at least one of the statistical, frequency, and structural characteristics of the reference point used in the similarity acquisition process (S550). Accordingly, there is no need to periodically register a reference point that changes depending on the user's situation, and identity authentication occurs more quickly. Here, the user's situation may include, but is not limited to, at least one of, for example, a change in usage environment, aging, or injury. Here, the cycle may include, for example, at least one of weekly, biweekly, monthly, or yearly, but is not limited thereto.
일 실시예에 따른 웨어러블 디바이스(100)는 사용자 본인인증에 성공한 경우 기존에 파악된 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나로부터 사용자의 상태 변화 정보를 획득할 수 있다(S555).If the wearable device 100 according to one embodiment succeeds in authenticating the user's identity, the wearable device 100 may obtain the user's state change information from at least one of the statistical, frequency, and structural characteristics of the previously identified reference point (S555).
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 사용자의 상태 변화 정보를 사용자 전자기기(430)로 송신할 수 있다. 이에 따라, 일 실시예에 따른 웨어러블 디바이스(100)는 사용자 전자기기(430)가 상호작용(interaction) 할 수 있다. 여기에서, 상호작용은, 예를 들어, 일 실시예에 따른 웨어러블 디바이스(100)가 사용자 전자기기(430)로 사용자 상태 변화 정보를 송신하여 사용자 전자기기(430)로 하여금 사용자 전자기기(430)에 저장된 사용자의 지인 또는 긴급 전화번호로 사용자의 상태 변화 정보를 송신하게 하는 상호작용 또는 사용자가 사용자 전자기기(430)에 설치된 트레이닝 모드와 같은 어플리케이션을 실행하는 경우 사용자의 상태 변화 정보에 기초하여 피드백하는 과정 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. The wearable device 100 according to one embodiment may transmit the acquired user state change information to the user electronic device 430. Accordingly, the wearable device 100 according to one embodiment may interact with the user electronic device 430. Here, interaction is, for example, the wearable device 100 according to one embodiment transmits user state change information to the user electronic device 430, causing the user electronic device 430 to Feedback based on the user's status change information when an interaction causes the user's status change information to be transmitted to the user's acquaintances or emergency phone number stored in the user's computer, or when the user runs an application such as a training mode installed on the user's electronic device 430. It may include at least one of the following processes, but is not limited to this.
여기에서, 피드백은, 예를 들어, 사용자가 운동을 하고 있는 경우 운동의 목적(예컨대, 다이어트, 근력 향상, 근 지구력 향상 등)에 맞게 사용자 상태 변화 정보에 따라 사용자 전자기기(430)가 일 실시예에 따른 웨어러블 디바이스(100)로 알림을 주어 심장 박동을 조절하게 하는 피드백 또는 사용자의 상태 변화 정보를 사용자 전자기기(430)에 저장하여 사용자의 건강 상태에 기초하여 운동 중 소모한 칼로리를 계산하고 이에 맞는 식단을 추천하는 피드백 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.Here, the feedback is, for example, when the user is exercising, the user's electronic device 430 performs work according to the user's state change information according to the purpose of the exercise (e.g., diet, muscle strength improvement, muscle endurance improvement, etc.). By providing a notification to the wearable device 100 according to the example, feedback to control the heart rate or information on changes in the user's state are stored in the user electronic device 430 to calculate the calories burned during exercise based on the user's health status. It may include at least one piece of feedback recommending an appropriate diet, but is not limited to this.
일 실시예에 따른 웨어러블 디바이스(100)는 사용자 상태 변화 정보를 수신한 사용자 전자기기(430)로부터 적어도 하나의 인스트럭션을 수신할 수 있다. 적어도 하나의 인스트럭션은, 예를 들어, 일 실시예에 따른 웨어러블 디바이스(100)의 볼륨 조절, 전원 제어 또는 사용자 전자기기(430)의 전원 제어 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.The wearable device 100 according to an embodiment may receive at least one instruction from the user electronic device 430 that has received user state change information. The at least one instruction may include, for example, at least one of volume control, power control, or power control of the user electronic device 430 according to an embodiment, but is not limited thereto.
한편, 일 실시예에 따른 웨어러블 디바이스(100)의 동작 방법은 그 방법을 실행하는 명령어들을 포함하는 하나 이상의 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체에 기록될 수 있다Meanwhile, a method of operating the wearable device 100 according to an embodiment may be recorded on a computer-readable recording medium on which one or more programs including instructions for executing the method are recorded.
도 6은 일 실시예에 따른 웨어러블 디바이스에서 사용자 전자기기로 송신된 사용자 상태 변화 정보에 기초하여, 긴급 상황에 도움을 주는 상황을 도시한 일 실시예이다.FIG. 6 is an example illustrating a situation in which assistance is provided in an emergency situation based on user state change information transmitted from a wearable device to a user electronic device according to an embodiment.
일 실시예에 따른 웨어러블 디바이스(100)는 사용자 본인인증(600)을 거친 후 사용자의 기준점에 기초하여 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나로부터 사용자의 상태 변화 정보를 획득(610)하여 이를 사용자 전자기기(430)에 송신할 수 있다.The wearable device 100 according to an embodiment acquires (610) the user's state change information from at least one of the statistical, frequency, and structural characteristics of the reference point based on the user's reference point after undergoing user identity authentication (600). This can be transmitted to the user electronic device 430.
일 실시예에 따른 웨어러블 디바이스(100)는 사용자 전자기기(430)로 송신된 사용자 상태 변화 정보(610)에 기초하여 생리학적 매개변수를 지속적으로 모니터링하는 데 도움을 줌으로써 사용자가 기저질환이 있는 경우 긴급 상황에 빠르게 대처할 수 있도록 도움을 줄 수 있다(620). 생리학적 매개변수는, 예를 들어, 심박수, 혈압, 심박출량(cardiac output) 또는 맥파 속도(pulse wave velocity) 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. 여기에서, 기저 질환은, 심혈관 질환, 부정맥, 심근증, 심부전증 또는 고혈압 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. 긴급 상황에 빠르게 대처할 수 있음은, 예를 들어, 긴급 전화번호, 비상 연락처 또는 지인의 전화번호로 사용자 상태 변화 정보를 사용자 전자기기(430)의 어플리케이션, 문자 기능, 전화 기능 중 적어도 하나를 통하여 송신할 수 있는 경우를 의미하나, 이에 한정되지 않는다. The wearable device 100 according to one embodiment helps to continuously monitor physiological parameters based on the user state change information 610 transmitted to the user electronic device 430, thereby detecting if the user has an underlying disease. It can help you respond quickly to emergency situations (620). Physiological parameters may include, but are not limited to, for example, at least one of heart rate, blood pressure, cardiac output, or pulse wave velocity. Here, the underlying disease may include, but is not limited to, at least one of cardiovascular disease, arrhythmia, cardiomyopathy, heart failure, or hypertension. Being able to quickly respond to an emergency situation means, for example, transmitting information on changes in user status to an emergency phone number, emergency contact number, or an acquaintance's phone number through at least one of the application, text function, and phone function of the user electronic device 430. This means that it can be done, but is not limited to this.
도 7은 일 실시예에 따른 웨어러블 디바이스에서 사용자 전자기기로 송신된 사용자 상태 변화 정보 중 사용자의 심박수가 감소하여 사용자가 수면 상태인 것으로 판단되는 경우, 전자기기로부터 적어도 하나 이상의 인스트럭션을 수신하여 일 실시예에 따른 웨어러블 디바이스의 볼륨을 감소시키는 일 실시예를 도시한 도면이다.FIG. 7 shows, among the user state change information transmitted from the wearable device to the user electronic device according to an embodiment, when the user's heart rate decreases and it is determined that the user is in a sleeping state, at least one instruction is received from the electronic device and an execution is performed. This is a diagram illustrating an embodiment of reducing the volume of a wearable device according to an example.
도 8은 일 실시예에 따른 웨어러블 디바이스에서 사용자 전자기기로 송신된 사용자 상태 변화 정보 중 사용자의 심박수가 증가하여 사용자가 운동 중인 것으로 판단되는 경우, 전자기기로부터 적어도 하나 이상의 인스트럭션을 수신하여 일 실시예에 따른 웨어러블 디바이스의 볼륨을 증가시키는 일 실시예를 도시한 도면이다.8 shows, among the user state change information transmitted from the wearable device to the user electronic device according to an embodiment, when the user's heart rate increases and it is determined that the user is exercising, at least one instruction is received from the electronic device, according to an embodiment of the present invention. This is a diagram showing an embodiment of increasing the volume of a wearable device according to .
일 실시예에 따른 웨어러블 디바이스(100)는 파악된 통계적, 주파수적, 구조적 특징 중 적어도 하나로부터 사용자의 상태 변화 정보(710,810)를 획득할 수 있다. The wearable device 100 according to an embodiment may obtain the user's state change information 710 and 810 from at least one of the identified statistical, frequency, and structural characteristics.
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 사용자의 상태 변화 정보(710,810)를 사용자 전자기기(430)에 송신할 수 있다.The wearable device 100 according to one embodiment may transmit the acquired user state change information 710 and 810 to the user electronic device 430.
일 실시예에 따른 웨어러블 디바이스(100)는 사용자 상태 변화 정보(710,810)를 수신한 사용자 전자기기(430)로부터 적어도 하나의 인스트럭션을 수신할 수 있다. 적어도 하나의 인스트럭션은, 예를 들어, 일 실시예에 따른 웨어러블 디바이스(100)의 볼륨 조절, 전원 제어 또는 사용자 기기의 전원 제어 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. 구체적으로, 사용자의 심장박동이 느려지는 것으로 감지되어 사용자가 수면 상태인 것으로 판단되는 경우, 웨어러블 디바이스(100)의 볼륨이 줄어들 수 있다(700,720). 이와 달리, 사용자의 심장박동이 빨라지는 것으로 감지되어 사용자가 운동을 하고 있는 것으로 판단되는 경우, 웨어러블 디바이스(100)의 볼륨은 커질 수 있다(800,820). The wearable device 100 according to an embodiment may receive at least one instruction from the user electronic device 430 that has received user state change information 710 and 810. The at least one instruction may include, for example, at least one of volume control of the wearable device 100, power control, or power control of the user device according to an embodiment, but is not limited thereto. Specifically, when the user's heart rate is detected to be slow and it is determined that the user is in a sleeping state, the volume of the wearable device 100 may be reduced (700, 720). In contrast, when the user's heart rate is detected to be faster and it is determined that the user is exercising, the volume of the wearable device 100 may increase (800, 820).
도 9는 사용자 전자기기가 일 실시예에 따른 웨어러블 디바이스로부터 사용자 생체 신호 또는 상태 변화 정보를 수신하고 이를 통하여 사용자에게 콘텐츠를 추천하는 일 실시예를 도시한 도면이다.FIG. 9 is a diagram illustrating an embodiment in which a user electronic device receives user biosignals or state change information from a wearable device according to an embodiment and recommends content to the user through the received information.
일 실시예에 따른 웨어러블 디바이스(100)는 사용자 전자기기(430)로 하여금 사용자 전자기기(430)로 송신된 사용자 생체 신호 또는 사용자 상태 변화 정보(910)로부터 사용자의 감정 변화(920)를 획득하여 사용자 전자기기(430)에 설치 또는 저장되어 있는 콘텐츠 또는 어플리케이션(900) 중 사용자에게 맞는 콘텐츠 또는 어플리케이션을 추천(930)하는 것에 도움을 줄 수 있다.The wearable device 100 according to one embodiment allows the user electronic device 430 to obtain the user's emotional change 920 from the user's biological signal or user state change information 910 transmitted to the user electronic device 430. It can help recommend (930) content or applications suitable for the user among the content or applications (900) installed or stored in the user's electronic device (430).
일 실시예에 따른 웨어러블 디바이스(100)는 사용자 전자기기(430)로 송신된 사용자 생체 신호 또는 상태 변화 정보(910)에 기초하여 사용자 전자기기(430)로 하여금 사용자의 감정 변화(920)를 파악하는 데 도움을 줄 수 있다. The wearable device 100 according to one embodiment allows the user electronic device 430 to identify a change in the user's emotion (920) based on the user's biological signal or state change information (910) transmitted to the user electronic device (430). can help you do that.
여기에서, 사용자의 감정 변화(920)는, 예를 들어, 행복, 화남, 피로 또는 공포 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다. Here, the user's emotional change 920 may include, for example, at least one of happiness, anger, fatigue, or fear, but is not limited thereto.
일 실시예에 따른 웨어러블 디바이스(100)는 사용자의 감정 변화(920)에 기초하여 사용자 전자기기(430)가 사용자에게 사용자의 현재 상태에 알맞은 콘텐츠를 추천하도록 도움을 줄 수 있다(930). The wearable device 100 according to one embodiment may help the user electronic device 430 recommend content appropriate to the user's current state based on the user's emotional change (920) (930).
여기에서, 추천 콘텐츠(930)는 사용자의 음악 플레이리스트에 기초한 음악 추천 또는 OTT 서비스에서의 영상 추천 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.Here, the recommended content 930 may include at least one of music recommendations based on the user's music playlist or video recommendations from an OTT service, but is not limited thereto.
도 10은 일 실시예에 따른 웨어러블 디바이스의 사용자 본인인증에 기초하여 사용자가 전자기기의 사용 권한을 용이하게 획득할 수 있도록 하는 실시예를 도시한 도면이다.FIG. 10 is a diagram illustrating an embodiment in which a user can easily obtain permission to use an electronic device based on user authentication of a wearable device according to an embodiment.
일 실시예에 따른 웨어러블 디바이스(100)는 사용자 전자기기(430)의 본인인증을 위하여 사전에 저장된 사용자의 기준점과 현재 측정된 기준점에 대하여 시간 정렬하여 유사도를 획득 할 수 있다.The wearable device 100 according to one embodiment may acquire similarity by time-aligning the user's previously stored reference point and the currently measured reference point in order to authenticate the user's electronic device 430.
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 유사도 정보 또는 본인인증 정보 중 적어도 하나를 사용자 전자기기(430)로 송신할 수 있으나, 이에 한정되지 않는다.The wearable device 100 according to one embodiment may transmit at least one of the obtained similarity information or the personal authentication information to the user electronic device 430, but is not limited to this.
일 실시예에 따른 웨어러블 디바이스(100)는 유사도 정보 또는 본인인증 정보 중 적어도 하나를 수신한 사용자 전자기기(430)에서 사용자 본인인증(1000)이 이루어진 경우, 사용자 전자기기(430)가 사용자 전자기기(430) 이외의 사용자 전자기기(1010,1020,1030,1040)에 사용자 본인인증 정보를 송신하는 데에 도움을 줄 수 있다.The wearable device 100 according to one embodiment is configured such that when user identity authentication 1000 is performed in the user electronic device 430 that has received at least one of similarity information or identity authentication information, the user electronic device 430 It can help transmit user authentication information to user electronic devices (1010, 1020, 1030, and 1040) other than (430).
여기에서, 사용자 전자기기(430) 이외의 전자기기는 사용자의 휴대폰(1010), 스마트 워치(1020), 테블릿PC(1030), 노트북(1040) 또는 TV 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.Here, electronic devices other than the user electronic device 430 may include at least one of the user's mobile phone 1010, smart watch 1020, tablet PC 1030, laptop 1040, or TV. It is not limited.
일 실시예에 따른 웨어러블 디바이스(100)는 본인인증(1000)에 기초하여 본인인증에 성공한 사용자 전자기기(430)를 포함한 전자기기(1010,1020,1030,1040)의 사용에 있어 사용자에게 편의를 제공하는 데에 도움을 줄 수 있다. 여기에서, 편의는 사용자 전자기기(430)를 포함한 전자기기(1010,1020,1030,1040)에 저장되어 있는 음악 플레이스트의 재생 또는 전자기기의 자동 잠금 해제 중 적어도 하나를 포함할 수 있으나, 이에 한정되지 않는다.The wearable device 100 according to an embodiment provides convenience to the user in the use of electronic devices 1010, 1020, 1030, and 1040, including the user electronic device 430 that has successfully authenticated the user based on the user authentication 1000. We can help you provide it. Here, the convenience may include at least one of playing a music playlist stored in the electronic devices 1010, 1020, 1030, and 1040, including the user electronic device 430, or automatically unlocking the electronic device. It is not limited.
도 11는 일 실시예에 따른 웨어러블 디바이스가 사용자 전자기기로 송신된 사용자 상태 변화 정보에 기초하여 사용자 전자기기와 상호작용하는 일 실시예를 도시한 도면이다.FIG. 11 is a diagram illustrating an example in which a wearable device interacts with a user electronic device based on user state change information transmitted to the user electronic device, according to an embodiment.
일 실시예에 따른 웨어러블 디바이스(100)는 사용자 본인인증(1100)에 성공한 경우 기존에 파악된 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나에 기초하여 사용자의 상태 변화 정보를 획득할 수 있다.When the wearable device 100 according to one embodiment succeeds in authenticating the user's identity 1100, the wearable device 100 may obtain information on changes in the user's state based on at least one of the statistical, frequency, and structural characteristics of a previously identified reference point.
일 실시예에 따른 웨어러블 디바이스(100)는 획득된 사용자의 상태 변화 정보(1130)는 사용자 전자기기(430)에 송신될 수 있다. The wearable device 100 according to one embodiment may transmit the acquired user state change information 1130 to the user electronic device 430.
일 실시예에 따른 웨어러블 디바이스(100)은 사용자 상태 변화 정보를 사용자 전자기기(430)에 송신함으로써, 사용자 전자기기(430)와 상호작용(1120)을 할 수 있다.The wearable device 100 according to one embodiment may interact 1120 with the user electronic device 430 by transmitting user state change information to the user electronic device 430.
여기에서, 상호작용(1120)은, 예를 들어, 일 실시예에 따른 웨어러블 디바이스(100)가 사용자가 사용자 전자기기(430)에 설치된 트레이닝 모드 어플리케이션(1110)을 실행하는 경우 사용자의 상태 변화 정보(1130)에 기초하여 피드백(1120) 할 수 있으나, 이에 한정되지 않는다. 여기에서, 피드백(1120)은, 예를 들어, 사용자가 운동을 하고 있는 경우 운동의 목적(예컨대, 다이어트, 근력 향상, 근 지구력 향상 등)에 맞게 사용자 상태 변화 정보(1130)에 따라 사용자 전자기기(430)가 일 실시예에 따른 웨어러블 디바이스(100)로 알림을 주어 심장 박동을 조절하게 하는 피드백 또는 사용자의 상태 변화 정보를 사용자 전자기기(430)에 저장하고, 사용자의 건강 상태에 기초하여 이에 맞는 식단을 추천하는 피드백(1140)을 포함할 수 있으나, 이에 한정되지 않는다. Here, the interaction 1120 is, for example, when the wearable device 100 according to one embodiment runs the training mode application 1110 installed on the user electronic device 430, the user's state change information Feedback 1120 may be provided based on 1130, but is not limited thereto. Here, the feedback 1120 is, for example, when the user is exercising, the user electronic device according to the user state change information 1130 to suit the purpose of the exercise (e.g., diet, muscle strength improvement, muscle endurance improvement, etc.). 430 notifies the wearable device 100 according to an embodiment and stores feedback or information on changes in the user's state to control the heart rate in the user electronic device 430, and responds to the user's health status based on the user's health status. Feedback 1140 recommending an appropriate diet may be included, but is not limited to this.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 표재성 측두동맥(superficial temporal artery)의 박동에 따른 막(membrane)의 기계적 진동으로부터 마이크로포니즘 현상(microphonism phenomenon)에 의하여 전기신호를 획득하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include acquiring an electrical signal by a microphonism phenomenon from mechanical vibration of the membrane due to the pulsation of the superficial temporal artery. You can.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 상기 획득된 전기신호로부터 생체 신호를 획득하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include obtaining a biosignal from the obtained electrical signal.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 상기 획득된 생체 신호에 대응하는 동작을 수행하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include performing an operation corresponding to the obtained biosignal.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 상기 전기신호에 기초하여 심장 박동 신호의 가변성 하에서 매개변수를 보존하는 기준점(fiducial point)을 획득하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include obtaining a fiducial point that preserves parameters under the variability of a heart rate signal based on the electrical signal.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 상기 획득된 기준점과 사용자의 템플릿(template)에 저장된 사용자의 기준점에 대하여 시간 정렬(time alignment)하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include time aligning the obtained reference point with a user's reference point stored in a user's template.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 상기 시간 정렬 단계를 거친 신호로부터 상기 획득된 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징을 획득하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include obtaining at least one characteristic among statistical, frequency, and structural characteristics of the obtained reference point from the signal that has undergone the time alignment step.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 상기 획득된 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징에 기초하여 상기 사용자의 템플릿에 저장된 사용자의 기준점과 유사도를 획득하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include obtaining a similarity to a user's reference point stored in the user's template based on at least one of the obtained statistical, frequency, and structural characteristics.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 사용자 전자기기의 본인인증을 위하여 상기 획득된 유사도 정보를 사용자 전자기기로 송신하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include transmitting the obtained similarity information to a user electronic device in order to authenticate the user's electronic device.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 상기 송신된 유사도 정보에 기초하여 본인인증을 성공한 상기 획득된 기준점을 상기 사용자 템플릿에 업데이트하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include updating the user template with the obtained reference point at which identity authentication is successful based on the transmitted similarity information.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 상기 획득된 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징에 기초하여 사용자의 상태 변화 정보를 획득하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include obtaining user state change information based on at least one of the obtained statistical, frequency, and structural characteristics.
일 실시예에 따른 웨어러블 디바이스의 동작 방법은 상기 획득한 사용자의 상태 변화 정보를 사용자 전자기기에 송신하는 단계를 포함할 수 있다.A method of operating a wearable device according to an embodiment may include transmitting the obtained user state change information to a user electronic device.
본 개시의 일 실시예에 따른 웨어러블 디바이스의 동작 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.The method of operating a wearable device according to an embodiment of the present disclosure may be implemented in the form of program instructions that can be executed through various computer means and recorded on a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, etc., singly or in combination. Program instructions recorded on the medium may be specially designed and constructed for the present invention or may be known and usable by those skilled in the art of computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks. -Includes optical media (magneto-optical media) and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, etc. Examples of program instructions include machine language code, such as that produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter, etc.
또한, 개시된 실시예들에 따른 웨어러블 디바이스의 동작 방법은, 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다.Additionally, the method of operating a wearable device according to the disclosed embodiments may be included and provided in a computer program product. Computer program products are commodities and can be traded between sellers and buyers.
컴퓨터 프로그램 제품은 S/W 프로그램, S/W 프로그램이 저장된 컴퓨터로 읽을 수 있는 저장 매체를 포함할 수 있다. 예를 들어, 컴퓨터 프로그램 제품은 전자 장치의 제조사 또는 전자 마켓(예, 구글 플레이 스토어, 앱 스토어)을 통해 전자적으로 배포되는 S/W 프로그램 형태의 상품(예, 다운로더블 앱)을 포함할 수 있다. 전자적 배포를 위하여, S/W 프로그램의 적어도 일부는 저장 매체에 저장되거나, 임시적으로 생성될 수 있다. 이 경우, 저장 매체는 제조사의 서버, 전자 마켓의 서버, 또는 SW 프로그램을 임시적으로 저장하는 중계 서버의 저장매체가 될 수 있다.A computer program product may include a S/W program and a computer-readable storage medium in which the S/W program is stored. For example, a computer program product may include a product in the form of a S/W program (e.g., a downloadable app) distributed electronically by the manufacturer of an electronic device or through an electronic marketplace (e.g., Google Play Store, App Store). there is. For electronic distribution, at least part of the S/W program may be stored in a storage medium or temporarily created. In this case, the storage medium may be a manufacturer's server, an electronic market server, or a relay server's storage medium that temporarily stores the SW program.
컴퓨터 프로그램 제품은, 서버 및 클라이언트 장치로 구성되는 시스템에서, 서버의 저장매체 또는 클라이언트 장치의 저장매체를 포함할 수 있다. 또는, 서버 또는 클라이언트 장치와 통신 연결되는 제3 장치(예, 스마트폰)가 존재하는 경우, 컴퓨터 프로그램 제품은 제3 장치의 저장매체를 포함할 수 있다. 또는, 컴퓨터 프로그램 제품은 서버로부터 클라이언트 장치 또는 제3 장치로 전송되거나, 제3 장치로부터 클라이언트 장치로 전송되는 S/W 프로그램 자체를 포함할 수 있다.A computer program product, in a system comprised of a server and a client device, may include a storage medium of a server or a storage medium of a client device. Alternatively, if there is a third device (eg, a smartphone) in communication connection with the server or client device, the computer program product may include a storage medium of the third device. Alternatively, the computer program product may include the S/W program itself, which is transmitted from a server to a client device or a third device, or from a third device to a client device.
이 경우, 서버, 클라이언트 장치 및 제3 장치 중 하나가 컴퓨터 프로그램 제품을 실행하여 개시된 실시예들에 따른 방법을 수행할 수 있다. 또는, 서버, 클라이언트 장치 및 제3 장치 중 둘 이상이 컴퓨터 프로그램 제품을 실행하여 개시된 실시예들에 따른 방법을 분산하여 실시할 수 있다.In this case, one of the server, the client device, and the third device may execute the computer program product to perform the method according to the disclosed embodiments. Alternatively, two or more of a server, a client device, and a third device may execute the computer program product and perform the methods according to the disclosed embodiments in a distributed manner.
예를 들면, 서버(예로, 클라우드 서버 또는 인공 지능 서버 등)가 서버에 저장된 컴퓨터 프로그램 제품을 실행하여, 서버와 통신 연결된 클라이언트 장치가 개시된 실시예들에 따른 방법을 수행하도록 제어할 수 있다.For example, a server (eg, a cloud server or an artificial intelligence server, etc.) may execute a computer program product stored on the server and control a client device connected to the server to perform the method according to the disclosed embodiments.
일 실시예에 따른 웨어러블 디바이스는, 막(membrane), 하나 이상의 인스트럭션들을 저장하는 메모리 및 하나 이상의 프로세서를 포함할 수 있다.A wearable device according to one embodiment may include a membrane, a memory for storing one or more instructions, and one or more processors.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 표재성 측두동맥의 박동에 따른 막의 기계적 진동으로부터 마이크로포니즘 현상에 의하여 전기신호를 획득할 수 있다.By executing the one or more instructions, one or more processors according to one embodiment may acquire an electrical signal through a microphonic phenomenon from mechanical vibration of the membrane due to pulsation of the superficial temporal artery.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 획득된 전기신호로부터 생체 신호를 획득할 수 있다.One or more processors according to an embodiment may acquire a biosignal from the acquired electrical signal by executing the one or more instructions.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 획득된 생체 신호에 대응하는 동작을 수행할 수 있다.One or more processors according to an embodiment may perform an operation corresponding to the acquired biosignal by executing the one or more instructions.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 전기신호에 기초하여 심장 박동 신호의 가변성 하에서 매개변수를 보존하는 기준점을 획득할 수 있다.One or more processors according to an embodiment may obtain a reference point for preserving parameters under the variability of the heart rate signal based on the electrical signal by executing the one or more instructions.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 획득된 기준점을 메모리에 저장할 수 있다.One or more processors according to an embodiment may store the obtained reference point in memory by executing the one or more instructions.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 획득된 기준점과 사용자의 템플릿에 저장된 사용자의 기준점에 대하여 시간 정렬할 수 있다.One or more processors according to an embodiment may time align the obtained reference point with the user's reference point stored in the user's template by executing the one or more instructions.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 시간 정렬 단계를 거친 신호로부터 상기 획득된 기준점의 통계적, 주파수적, 구조적 변동 중 적어도 하나의 특징을 획득할 수 있다.One or more processors according to an embodiment may acquire at least one characteristic among statistical, frequency, and structural variations of the obtained reference point from the signal that has passed the time alignment step by executing the one or more instructions.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 획득된 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징에 기초하여 상기 사용자의 템플릿에 저장된 사용자의 기준점과 유사도를 획득할 수 있다.One or more processors according to an embodiment may obtain a similarity with the user's reference point stored in the user's template based on at least one of the obtained statistical, frequency, and structural characteristics by executing the one or more instructions. there is.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 사용자 전자기기의 본인인증을 위하여 상기 획득된 유사도 정보를 사용자 전자기기로 송신할 수 있다.One or more processors according to an embodiment may transmit the obtained similarity information to the user electronic device for identity authentication of the user electronic device by executing the one or more instructions.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 송신된 유사도 정보에 기초하여 본인인증을 성공한 상기 획득된 기준점을 상기 사용자 템플릿에 업데이트할 수 있다.One or more processors according to an embodiment may execute the one or more instructions to update the user template with the obtained reference point that has successfully authenticated the user based on the transmitted similarity information.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 획득된 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징에 기초하여 사용자의 상태 변화 정보를 획득할 수 있다.One or more processors according to an embodiment may acquire user state change information based on at least one of the obtained statistical, frequency, and structural characteristics by executing the one or more instructions.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 획득한 사용자의 상태 변화 정보를 사용자 전자기기에 송신할 수 있다.One or more processors according to an embodiment may transmit the obtained user state change information to the user electronic device by executing the one or more instructions.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 사용자 전자기기로부터 웨어러블 디바이스의 설정을 조절하기 위하여 적어도 하나의 인스트럭션을 수신할 수 있다.One or more processors according to an embodiment may receive at least one instruction from the user electronic device to adjust settings of the wearable device by executing the one or more instructions.
일 실시예에 따른 상기 웨어러블 디바이스의 설정은 상기 웨어러블 디바이스의 볼륨 조절 또는 전원 제어 중 적어도 하나를 포함할 수 있다.Setting of the wearable device according to an embodiment may include at least one of volume control or power control of the wearable device.
일 실시예에 따른 하나 이상의 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 송신된 사용자의 상태 변화 정보에 기초하여 사용자 전자기기와 상호작용(interaction)할 수 있다.One or more processors according to one embodiment may execute the one or more instructions to interact with the user's electronic device based on the transmitted user's state change information.
이상에서 실시예들에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속한다.Although the embodiments have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements made by those skilled in the art using the basic concept of the present invention defined in the following claims are also included in the scope of the present invention. belongs to

Claims (15)

  1. 표재성 측두동맥(superficial temporal artery)의 박동에 따른 막(membrane)의 기계적 진동으로부터 마이크로포니즘 현상(microphonism phenomenon)에 의하여 전기신호를 획득하는 단계(S200);Obtaining an electrical signal by microphonism phenomenon from mechanical vibration of the membrane due to pulsation of the superficial temporal artery (S200);
    상기 획득된 전기신호로부터 생체 신호를 획득하는 단계(S210); 및Obtaining a biological signal from the obtained electrical signal (S210); and
    상기 획득된 생체 신호에 대응하는 동작을 수행하는 단계(S220)를 포함하는,웨어러블 디바이스의 동작 방법.A method of operating a wearable device, including performing an operation corresponding to the acquired biosignal (S220).
  2. 제1항에 있어서,According to paragraph 1,
    상기 동작 방법은,The operation method is,
    상기 전기신호에 기초하여 심장 박동 신호의 가변성 하에서 매개변수를 보존하는 기준점(fiducial point)을 획득하는 단계(S520)를 더 포함하는, 웨어러블 디바이스의 동작 방법.A method of operating a wearable device, further comprising obtaining a fiducial point that preserves parameters under the variability of the heart rate signal based on the electrical signal (S520).
  3. 제1항 또는 제2항에 있어서,According to claim 1 or 2,
    상기 동작 방법은,The operation method is,
    상기 획득된 기준점과 사용자의 템플릿(template)에 저장된 사용자의 기준점에 대하여 시간 정렬(time alignment)하는 단계(S525); 및Time aligning the obtained reference point with the user's reference point stored in the user's template (S525); and
    상기 시간 정렬 단계를 거친 신호로부터 상기 획득된 기준점의 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징을 획득하는 단계(S530)를 더 포함하는,웨어러블 디바이스의 동작 방법.A method of operating a wearable device, further comprising acquiring at least one characteristic among statistical, frequency, and structural characteristics of the obtained reference point from the signal that has passed the time alignment step (S530).
  4. 제1항 내지 제3항 중 어느 한 항에 있어서,According to any one of claims 1 to 3,
    상기 동작 방법은,The operation method is,
    상기 획득된 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징에 기초하여 상기 사용자의 템플릿에 저장된 사용자의 기준점과 유사도를 획득하는 단계(S535); 및Obtaining similarity with the user's reference point stored in the user's template based on at least one of the obtained statistical, frequency, and structural features (S535); and
    사용자 전자기기의 본인인증을 위하여 상기 획득된 유사도 정보를 사용자 전자기기로 송신하는 단계(S540)를 더 포함하는, 웨어러블 디바이스의 동작 방법.A method of operating a wearable device, further comprising transmitting the obtained similarity information to the user electronic device for identity authentication of the user electronic device (S540).
  5. 제1항 내지 제4항 중 어느 한 항에 있어서,According to any one of claims 1 to 4,
    상기 동작 방법은,The operation method is,
    상기 송신된 유사도 정보에 기초하여 본인인증을 성공한 상기 획득된 기준점을 상기 사용자 템플릿에 업데이트하는 단계(S550)를 더 포함하는, 웨어러블 디바이스의 동작 방법.A method of operating a wearable device, further comprising updating the user template with the obtained reference point at which identity authentication is successful based on the transmitted similarity information (S550).
  6. 제1항 내지 제5항 중 어느 한 항에 있어서,According to any one of claims 1 to 5,
    상기 동작 방법은,The operation method is,
    상기 획득된 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징에 기초하여 사용자의 상태 변화 정보를 획득하는 단계(S555); 및Obtaining user state change information based on at least one of the obtained statistical, frequency, and structural characteristics (S555); and
    상기 획득한 사용자의 상태 변화 정보를 사용자 전자기기에 송신하는 단계를 더 포함하는, 웨어러블 디바이스의 동작 방법.A method of operating a wearable device, further comprising transmitting the obtained user state change information to a user electronic device.
  7. 생체 신호를 획득하는 웨어러블 디바이스(100)에 있어서,In the wearable device 100 that acquires biological signals,
    막(membrane)(110);membrane (110);
    하나 이상의 인스트럭션들을 저장하는 메모리(310); 및a memory 310 that stores one or more instructions; and
    하나 이상의 프로세서(300)를 포함하고, 상기 하나 이상의 프로세서(300)는 상기 하나 이상의 인스트럭션을 실행함으로써,Comprising one or more processors 300, wherein the one or more processors 300 execute the one or more instructions,
    표재성 측두동맥(superficial temporal artery)의 박동에 따른 막의 기계적 진동으로부터 마이크로포니즘 현상(microphonism phenomenon)에 의하여 전기신호를 획득하고,Electrical signals are obtained through the microphonism phenomenon from the mechanical vibration of the membrane caused by the pulsation of the superficial temporal artery,
    상기 획득된 전기신호로부터 생체 신호를 획득하고,Obtaining a biological signal from the obtained electrical signal,
    상기 획득된 생체 신호에 대응하는 동작을 수행하는,Performing an operation corresponding to the acquired biosignal,
    웨어러블 디바이스.Wearable devices.
  8. 제7항에 있어서,In clause 7,
    상기 적어도 하나의 프로세서(300)는, 상기 하나 이상의 인스트럭션을 실행함으로써,The at least one processor 300 executes the one or more instructions,
    상기 전기신호에 기초하여 심장 박동 신호의 가변성 하에서 매개변수를 보존하는 기준점(fiducial point)을 획득하고,Obtaining a fiducial point that preserves parameters under the variability of the heart rate signal based on the electrical signal,
    상기 획득된 기준점을 메모리에 저장하는, 웨어러블 디바이스.A wearable device that stores the obtained reference point in memory.
  9. 제7항 또는 제8항에 있어서,According to claim 7 or 8,
    상기 적어도 하나의 프로세서(300)는, 상기 하나 이상의 인스트럭션을 실행함으로써,The at least one processor 300 executes the one or more instructions,
    상기 획득된 기준점과 사용자의 템플릿(template)에 저장된 사용자의 기준점에 대하여 시간 정렬(time alignment)하고,Time aligning the obtained reference point with the user's reference point stored in the user's template,
    상기 시간 정렬 단계를 거친 신호로부터 상기 획득된 기준점의 통계적, 주파수적, 구조적 변동 중 적어도 하나의 특징을 획득하는, 웨어러블 디바이스.A wearable device that acquires at least one characteristic among statistical, frequency, and structural variations of the obtained reference point from the signal that has undergone the time alignment step.
  10. 제7항 내지 제9항 중 어느 한 항에 있어서,According to any one of claims 7 to 9,
    상기 적어도 하나의 프로세서(300)는, 상기 하나 이상의 인스트럭션을 실행함으로써,The at least one processor 300 executes the one or more instructions,
    상기 획득된 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징에 기초하여 상기 사용자의 템플릿에 저장된 사용자의 기준점과 유사도를 획득하고,Obtaining a similarity with the user's reference point stored in the user's template based on at least one of the obtained statistical, frequency, and structural characteristics,
    사용자 전자기기(430)의 본인인증을 위하여 상기 획득된 유사도 정보를 사용자 전자기기(430)로 송신하는, 웨어러블 디바이스.A wearable device that transmits the obtained similarity information to the user electronic device 430 for identity authentication of the user electronic device 430.
  11. 제7항 내지 제10항 중 어느 한 항에 있어서,According to any one of claims 7 to 10,
    상기 적어도 하나의 프로세서(300)는, 상기 하나 이상의 인스트럭션을 실행함으로써,The at least one processor 300 executes the one or more instructions,
    상기 송신된 유사도 정보에 기초하여 본인인증을 성공한 상기 획득된 기준점을 상기 사용자 템플릿에 업데이트하는, 웨어러블 디바이스.A wearable device that updates the user template with the obtained reference point at which identity authentication is successful based on the transmitted similarity information.
  12. 제7항 내지 제11항 중 어느 한 항에 있어서,According to any one of claims 7 to 11,
    상기 적어도 하나의 프로세서(300)는, 상기 하나 이상의 인스트럭션을 실행함으로써,The at least one processor 300 executes the one or more instructions,
    상기 획득된 통계적, 주파수적, 구조적 특징 중 적어도 하나의 특징에 기초하여 사용자의 상태 변화 정보를 획득하고,Obtaining user state change information based on at least one of the obtained statistical, frequency, and structural characteristics,
    상기 획득한 사용자의 상태 변화 정보를 사용자 전자기기(430)에 송신하는, 웨어러블 디바이스.A wearable device that transmits the obtained user state change information to the user electronic device 430.
  13. 제7항 내지 제12항 중 어느 한 항에 있어서,According to any one of claims 7 to 12,
    상기 적어도 하나의 프로세서(300)는, 상기 하나 이상의 인스트럭션을 실행함으로써,The at least one processor 300 executes the one or more instructions,
    상기 사용자 전자기기(430)로부터 상기 웨어러블 디바이스의 설정을 조절하기 위하여 적어도 하나의 인스트럭션을 수신하고,Receiving at least one instruction from the user electronic device 430 to adjust settings of the wearable device,
    상기 웨어러블 디바이스의 설정은 상기 웨어러블 디바이스의 볼륨 조절 또는 전원 제어 중 적어도 하나를 포함하는, 웨어러블 디바이스.Setting of the wearable device includes at least one of volume control or power control of the wearable device.
  14. 제7항 내지 제13항 중 어느 한 항에 있어서,According to any one of claims 7 to 13,
    상기 적어도 하나의 프로세서(300)는, 상기 하나 이상의 인스트럭션을 실행함으로써,The at least one processor 300 executes the one or more instructions,
    상기 송신된 사용자의 상태 변화 정보에 기초하여 사용자 전자기기(430)와 상호작용(interaction)하는, 웨어러블 디바이스.A wearable device that interacts with a user electronic device 430 based on the transmitted user state change information.
  15. 제1항 내지 제6항 중 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.A computer-readable recording medium recording a program for executing the method of any one of claims 1 to 6 on a computer.
PCT/KR2023/016254 2022-11-01 2023-10-19 Device and method for acquiring biosignal WO2024096391A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2022-0143952 2022-11-01
KR1020220143952A KR20240062493A (en) 2022-11-01 2022-11-01 Apparatus and method for acquiring biosignals

Publications (1)

Publication Number Publication Date
WO2024096391A1 true WO2024096391A1 (en) 2024-05-10

Family

ID=90930936

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2023/016254 WO2024096391A1 (en) 2022-11-01 2023-10-19 Device and method for acquiring biosignal

Country Status (2)

Country Link
KR (1) KR20240062493A (en)
WO (1) WO2024096391A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130010207A (en) * 2011-07-18 2013-01-28 주식회사 라이프사이언스테크놀로지 System for analyze the user's health and stress
KR20160028351A (en) * 2014-09-03 2016-03-11 삼성전자주식회사 Electronic device and method for measuring vital signals
KR20200078319A (en) * 2018-12-20 2020-07-01 삼성전자주식회사 Bioresponsive virtual reality system and method of operating the same
KR20200123073A (en) * 2020-10-22 2020-10-28 박지만 Smart bio sensing system and smart bio sensing method using the wearable unit
US20200359971A1 (en) * 2013-09-09 2020-11-19 Scanadu Incorporated Data acquisition quality and data fusion for personal portable wireless vital signs scanner

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130010207A (en) * 2011-07-18 2013-01-28 주식회사 라이프사이언스테크놀로지 System for analyze the user's health and stress
US20200359971A1 (en) * 2013-09-09 2020-11-19 Scanadu Incorporated Data acquisition quality and data fusion for personal portable wireless vital signs scanner
KR20160028351A (en) * 2014-09-03 2016-03-11 삼성전자주식회사 Electronic device and method for measuring vital signals
KR20200078319A (en) * 2018-12-20 2020-07-01 삼성전자주식회사 Bioresponsive virtual reality system and method of operating the same
KR20200123073A (en) * 2020-10-22 2020-10-28 박지만 Smart bio sensing system and smart bio sensing method using the wearable unit

Also Published As

Publication number Publication date
KR20240062493A (en) 2024-05-09

Similar Documents

Publication Publication Date Title
US11504020B2 (en) Systems and methods for multivariate stroke detection
US6993378B2 (en) Identification by analysis of physiometric variation
EP2698112B1 (en) Real-time stress determination of an individual
WO2019048855A3 (en) Wearable authentication device
WO2017099426A1 (en) Electronic apparatus and control method thereof
WO2016204396A1 (en) Method for detecting arrhythmia and device for supporting same
WO2017119638A1 (en) Real-time sleep disorder monitoring apparatus
US11103184B2 (en) Wearable electroencephalography device and methods of use thereof
WO2021075693A1 (en) Method and system for monitoring cardiopulmonary function using electrical impedance tomography
WO2022231132A1 (en) Artificial intelligence smart remote control device and self-test method using same
Hinkle et al. Physiological measurement for emotion recognition in virtual reality
Roh et al. Wearable mental-health monitoring platform with independent component analysis and nonlinear chaotic analysis
WO2020080865A2 (en) Magnetic field stimulator-equipped massage device and method for preventing and treating brain disorders such as dementia or depression
Pflugradt et al. Multi-modal signal acquisition using a synchronized wireless body sensor network in geriatric patients
WO2017099340A1 (en) Electronic device, signal processing method thereof, biological signal measurement system, and non-transitory computer readable recording medium
WO2024096391A1 (en) Device and method for acquiring biosignal
WO2020231064A1 (en) Blood pressure measurement system and blood pressure measurement method using same
Gospodinov et al. Three-sensor portable information system for physiological data registration
EP3337391A1 (en) Electronic apparatus and control method thereof
WO2018093163A1 (en) Neonatal apnea measuring device, operation method thereof, and neonatal apnea measuring system
WO2022177255A2 (en) Method and system for providing remote counseling service
KR20160107885A (en) Door lock system that can open with thoughts
KR20220069479A (en) Methof of monitoring user state using bio-signal and system performing the same
Badura et al. Multimodal signal acquisition for pain assessment in physiotherapy
TW202202086A (en) Physiological monitoring systems and methods of estimating vital-sign data