WO2017135538A1 - 카메라 운용 장치의 운용 방법, 시스템 및 이를 위한 장치 - Google Patents

카메라 운용 장치의 운용 방법, 시스템 및 이를 위한 장치 Download PDF

Info

Publication number
WO2017135538A1
WO2017135538A1 PCT/KR2016/009290 KR2016009290W WO2017135538A1 WO 2017135538 A1 WO2017135538 A1 WO 2017135538A1 KR 2016009290 W KR2016009290 W KR 2016009290W WO 2017135538 A1 WO2017135538 A1 WO 2017135538A1
Authority
WO
WIPO (PCT)
Prior art keywords
camera
user
state
mode
bio
Prior art date
Application number
PCT/KR2016/009290
Other languages
English (en)
French (fr)
Inventor
이민규
정미지
차일황
이현규
Original Assignee
한화테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한화테크윈 주식회사 filed Critical 한화테크윈 주식회사
Priority to CN201680079562.7A priority Critical patent/CN108475462B/zh
Publication of WO2017135538A1 publication Critical patent/WO2017135538A1/ko
Priority to US15/945,264 priority patent/US10791269B2/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/746—Alarms related to a physiological condition, e.g. details of setting alarm thresholds or avoiding false alarms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/04—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0438—Sensor means for detecting
    • G08B21/0453—Sensor means for detecting worn on the body to detect health condition by physiological monitoring, e.g. electrocardiogram, temperature, breathing
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/08—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using communication transmission lines
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/65—Control of camera operation in relation to power supply
    • H04N23/651—Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/02—Operational features
    • A61B2560/0204—Operational features of power management
    • A61B2560/0209—Operational features of power management adapted for power saving
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022—Monitoring a patient using a global network, e.g. telephone networks, internet
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/389—Electromyography [EMG]

Definitions

  • Embodiments of the present invention relate to a method, a system, and an apparatus for operating the camera operating apparatus, and more particularly, to a camera operating apparatus for changing a driving mode of a camera based on a bio signal of a user collected through a wearable sensor. It relates to a method of operation, a system and an apparatus therefor.
  • Users who use the camera may have to change the frame rate and resolution of the camera to an appropriate operation mode according to the user's situation, and change the operation mode of the camera when an emergency situation arises. You will not be able to acquire the appropriate video for the situation.
  • Embodiments of the present invention provide a camera operating method, system and apparatus therefor based on a bio signal for automatically changing a driving mode of a camera based on a user's bio signal obtained from a wearable sensor.
  • a method of operating a camera operating apparatus includes: obtaining a bio signal of a user from a wearable sensor; Determining whether the state of the user is in a stable state based on the bio signal; Setting the camera to a low power mode when the state of the user is the stable state; Determining a type of the bio signal if the state of the user is not the stable state; And setting the camera to a mode according to the type of the bio signal.
  • the determining of the stable state may include measuring an electrocardiogram (ECG) sensor of the wearable sensor within a preset reference ECG range, and measuring a temperature value of the body temperature sensor among the wearable sensors within a preset reference temperature range.
  • ECG electrocardiogram
  • the state of the user may be determined to be the stable state.
  • the frame rate of the camera may be set below a preset reference frame rate, and the image stabilization function of the camera may be set to off.
  • the camera may be a wearable camera provided in the user's body, or the camera may be a camera provided in an external environment.
  • the method of operating a camera operating apparatus may further include establishing a communication connection with the camera.
  • the state of the user is determined.
  • the method may further include storing all the frames constituting the image received from the camera in a time range corresponding to the time when it is determined that the image is not in a stable state.
  • the mapping of all the frames and the bio-signals in a time range corresponding to the time when it is determined that the state of the user is not the stable state (Mapping) It may further comprise the step of storing.
  • the method may further include storing only some frames.
  • the method of operating the camera operating apparatus may further include transmitting a feedback signal based on an operation result of the camera to the wearable sensor.
  • the bio signal acquisition unit for obtaining a bio signal of the user from the wearable sensor;
  • a user state determination unit determining whether the state of the user is in a stable state based on the bio signal;
  • a bio signal type determination unit determining a type of the bio signal when the state of the user is not the stable state;
  • the wearable sensor may include an electroencephalography (EGE) sensor, an electromyography (EMG) sensor, an electrocardiogram (ECG) sensor, and a body temperature sensor.
  • EGE electroencephalography
  • EMG electromyography
  • ECG electrocardiogram
  • the apparatus for operating a camera operating apparatus may further include a feedback signal transmitter for transmitting a feedback signal based on a result of the operation of the camera to the wearable sensor.
  • the camera may be a wearable camera provided in the user's body, or the camera may be a camera provided in an external environment.
  • the apparatus for operating a camera operating apparatus may further include a communication connection unit for establishing a communication connection with the camera.
  • the operating system of the camera operating apparatus at least one wearable sensor for obtaining a bio signal of the user; A camera for acquiring an image; And a camera operating apparatus for acquiring the bio signal, determining a state of the user based on the bio signal, and setting a mode of the camera based on the state of the user.
  • the camera operating method, system and apparatus therefor based on the bio-signal may automatically change the driving mode of the camera based on the bio-signal of the user obtained from the wearable sensor.
  • FIG. 1 is a view showing the configuration of a camera operating system based on a bio-signal according to an embodiment of the present invention.
  • FIG. 2 is a block diagram illustrating a configuration of a camera operating apparatus based on a bio signal according to an embodiment of the present invention.
  • FIG. 3 is a flowchart illustrating a method of operating a camera based on a bio signal according to an embodiment of the present invention.
  • FIG. 4 is a diagram illustrating an example of determining a type of a bio signal illustrated in FIG. 3.
  • 5 to 6 are views for explaining an example that the camera is provided in the external environment according to an embodiment of the present invention.
  • FIGS. 7 to 9 are diagrams for explaining a user interface according to an embodiment of the present invention.
  • first and second may be used to describe various components, but the components should not be limited by the terms. The terms are only used to distinguish one component from another.
  • Embodiments of the present invention can be represented by functional block configurations and various processing steps. Such functional blocks may be implemented in various numbers of hardware or / and software configurations that perform particular functions. For example, embodiments of the invention may be implemented directly, such as memory, processing, logic, look-up table, etc., capable of executing various functions by the control of one or more microprocessors or other control devices. Circuit configurations can be employed. Similar to the components of an embodiment of the present invention may be implemented in software programming or software elements, embodiments of the present invention include various algorithms implemented in combinations of data structures, processes, routines or other programming constructs. It may be implemented in a programming or scripting language such as C, C ++, Java, assembler, or the like.
  • inventions may be implemented with an algorithm running on one or more processors.
  • embodiments of the present invention may employ the prior art for electronic configuration, signal processing, and / or data processing.
  • Terms such as mechanism, element, means, configuration can be used broadly and are not limited to mechanical and physical configurations. The term may include the meaning of a series of routines of software in conjunction with a processor or the like.
  • FIG. 1 is a view showing the configuration of a camera operating system based on a bio-signal according to an embodiment of the present invention.
  • a camera operating system based on a bio signal may include a camera operating apparatus 100, a wearable device 300, and a camera 500.
  • the camera operating apparatus 100, the wearable device 300, and the camera 500 may be separately configured to be connected by wire or wirelessly, and the camera operating apparatus 100 may include at least one of the wearable device 300 and the camera 500. It may be configured to include.
  • the wearable device 300 may be provided in clothes or accessories that the user 400 can wear, or may be in the form of an accessory that the user 400 can directly wear, such as a hair band, a wrist band, a waist belt, or the like.
  • the camera operating apparatus 100 may provide a driving signal of the camera 500 based on the bio signal of the user 400 received from the wearable device 300.
  • the camera operating apparatus 100 may include a communication unit 110, a memory 120, a program storage unit 130, a control unit 140, and a database 150.
  • the communication unit 110 provides a communication interface necessary to provide a transmission / reception signal between the camera operating apparatus 100 and another terminal (not shown) or a server (not shown) in the form of packet data in association with a communication network.
  • the communication unit 110 may transmit a driving result of the wearable device 300 to a personal terminal (not shown) of the user 400 or a designated wearable device control server (not shown).
  • the communication unit 110 may be a device including hardware and software necessary for transmitting and receiving a signal such as a control signal or a data signal through a wired or wireless connection with another network device.
  • the communication network may be a wired network such as local area networks (LANs), wide area networks (WANs), metropolitan area networks (MANs), integrated service digital networks (ISDNs), or wireless networks such as wireless LANs, CDMA, Bluetooth, and satellite communications. It may encompass, but the scope of the present invention is not limited thereto.
  • LANs local area networks
  • WANs wide area networks
  • MANs metropolitan area networks
  • ISDNs integrated service digital networks
  • wireless networks such as wireless LANs, CDMA, Bluetooth, and satellite communications. It may encompass, but the scope of the present invention is not limited thereto.
  • the memory 120 performs a function of temporarily or permanently storing data processed by the controller 140.
  • the memory 120 may include a magnetic storage media or a flash storage media, but the scope of the present invention is not limited thereto.
  • the program storage unit 130 controls to acquire a bio signal, determine a user's state, determine a bio signal type, set a camera mode, generate a feedback signal, and the like. It is equipped with software.
  • the controller 140 controls the entire process of operating the camera as a kind of central processing unit. That is, the controller 140 may drive the control software mounted in the program storage unit 130 to obtain a bio signal of the user 400 from the wearable device 300 to determine a state of the user 400. Can be provided.
  • the controller 140 may include all kinds of devices capable of processing data, such as a processor.
  • the 'processor' may refer to a data processing apparatus embedded in hardware having, for example, a circuit physically structured to perform a function represented by code or instructions included in a program.
  • a data processing device embedded in hardware, a microprocessor, a central processing unit (CPU), a processor core, a multiprocessor, and an application-specific integrated device (ASIC) It may include a processing device such as a circuit, a field programmable gate array (FPGA), etc., but the scope of the present invention is not limited thereto.
  • the database 150 includes the user's stable state determination reference information and the bio signal type determination reference information according to the user's bio signal.
  • the database 150 may store the image received from the camera 500. Images may be categorized and stored according to types of bio signals.
  • the camera operating apparatus 100 may display an image received from the camera 500 and / or an image stored in the database 150, display a bio signal, or display a setting interface of the camera operating apparatus 100. It may further include (not shown).
  • the display unit may be composed of any one of a cathode ray tube (CRT), a liquid-crystal display (LCD), a plasma display panel (PDP), and an organic light emitting diode (OLED), but Thought is not limited to this.
  • CTR cathode ray tube
  • LCD liquid-crystal display
  • PDP plasma display panel
  • OLED organic light emitting diode
  • the display unit (not shown) may further include an input unit for acquiring a user input.
  • the display unit (not shown) may further include a digitizer for reading a user's touch coordinates and converting the user's touch coordinates into an electrical signal, thereby obtaining a user's input according to a screen displayed on the display device.
  • the display unit (not shown) may be a touch screen including a touch panel.
  • the touch panel may further read the touch pressure as well as the touch coordinates of the user and convert the touch pressure into an electrical signal.
  • the input means may be provided separately from the display unit (not shown).
  • the input means may be any one of a keyboard, a mouse, a trackball, a microphone, and a button provided separately from the display unit (not shown).
  • the display unit (not shown) will be described on the premise that the touch screen is provided with an input means capable of reading the user's touch presence and touch pressure, but the present invention is not limited thereto.
  • the wearable device 300 includes a wearable sensor 310, and when the wearable sensor 310 obtains a bio signal of the user 400 and transmits the bio signal to the camera operating apparatus 100, the camera The operating device 100 determines an operation mode of the camera 500 based on the received bio signal, and the camera 500 receives and operates a driving signal according to the determined operation mode from the camera operating device 100. It is done.
  • Each of the components of the camera operating apparatus 100, the wearable device 300, and the camera 500 may be a separate device that is physically separated, or may be the same device that is conceptually separated.
  • the wearable sensor 310 may include an electroencephalography (EGE) sensor 311, an electromyography (EMG) sensor 312, a body temperature sensor 313, and an electrocardiogram (ECG) sensor.
  • EGE electroencephalography
  • EMG electromyography
  • ECG electrocardiogram
  • the electroencephalogram sensor 311 may measure an electrical signal generated when a signal is transmitted between the cranial nerves of the user 400.
  • the EMG sensor 312 may measure an electrical signal generated from the skeletal muscle of the user 400.
  • the body temperature sensor 313 may measure the body temperature of the user 400.
  • the ECG sensor 314 may measure an electrical signal detected by the skin according to the activity of the heart of the user 400.
  • the above-described wearable sensor 310 is an example, and the spirit of the present invention is not limited thereto, and the wearable sensor 310 may be used without limitation as long as it is a means for detecting the biosignal of the user 400.
  • the camera 500 includes a lens and an image sensor, and may acquire an image.
  • the camera 500 may be included in any one of the camera operating apparatus 100 and the wearable device 300, or may be separately configured. Furthermore, when the camera 500 is configured separately from the camera operating apparatus 100 and the wearable device 300, the camera 500 may be provided in the body of the user 400 or may be provided in an external environment.
  • the camera 500 may be set to operate in any one of various operation modes.
  • the camera 500 may be set to any one of operation modes such as a real time relay mode, an action cam mode, a high resolution shooting mode, and a low power mode.
  • the real time relay mode may be a mode for transmitting the acquired image to the camera operating apparatus 100 in real time.
  • the action cam mode may be a mode in which the frame rate of the camera 500 is set to a reference frame rate or more and the image shake correction function is turned on.
  • the high resolution photographing mode may be a mode in which the resolution of the camera 500 is set to a reference resolution or more.
  • the low power mode may be a mode in which the frame rate of the camera 500 is set to be less than the reference frame rate, and the image shake correction function is turned off.
  • the camera operating apparatus 100 may also operate in a mode corresponding to the operation mode of the camera 500.
  • the camera operating apparatus 100 may operate in a black box mode or a healthcare mode. Furthermore, when the camera 500 is in the low power mode, the camera operating apparatus 100 may also operate in the low power mode.
  • the black box mode of the camera operating apparatus 100 may be a mode for storing all frames constituting an image received from the camera 500 in a time range corresponding to a specific time point.
  • the time range may be t-50 seconds to t + 300 seconds, and accordingly, the camera operating apparatus 100 may display all frames constituting the image of t-50 seconds to t + 300 seconds.
  • the camera operating apparatus 100 may store all frames constituting an image in a time range of 50 seconds before the time t to 300 seconds after the time t as an image having a time range corresponding to the time t.
  • the time range corresponding to the specific time point may be set by the user.
  • the present invention can store the image before and after the occurrence of a specific event, so that the user can more easily identify the causality of the event occurrence.
  • the healthcare mode of the camera operating apparatus 100 described above stores all the frames constituting the image received from the camera 500 in a time range corresponding to a specific time point, similar to the above-described black box mode, and in addition to the wearable.
  • the bio signal received from the sensor 310 may be mapped with an image and stored. Accordingly, the present invention can easily determine the state of the user 400 at each time point of the image.
  • the low power mode of the camera operating apparatus 100 may be a mode for storing only some frames among a plurality of frames constituting an image received from the camera 500 according to a preset frame selection condition.
  • the frame selection condition may be set by the user.
  • the frame selection condition may be a condition for storing only I frames in an image composed of a plurality of I frames and a plurality of P frames.
  • this is merely exemplary and the spirit of the present invention is not limited thereto.
  • the camera 500 and the camera operating apparatus 100 may be set to operate in any one of the above various operation modes based on the bio-signal obtained by the wearable device 300.
  • FIG. 2 is a block diagram illustrating a configuration of a camera operating apparatus based on a bio signal according to an embodiment of the present invention.
  • the apparatus for operating a camera based on a bio signal may include a bio signal acquisition unit 101, a user state determination unit 102, a bio signal type determination unit 103, and a camera mode setting.
  • the unit 104 includes a feedback signal transmission unit 105 and a communication connection unit 106.
  • the bio signal acquisition unit 101, the user state determination unit 102, the bio signal type determination unit 103, the camera mode setting unit 104, the feedback signal transmission unit 105, and the communication connection unit 106 are program storage units.
  • the controller may include the bio signal acquisition unit 101, the user state determination unit 102, the bio signal type determination unit 103, the camera mode setting unit 104, and the feedback signal transmission unit 105. And the communication connection unit 106 to perform various functions such as obtaining a bio signal, determining a user's state, determining a type of the bio signal, setting a camera mode, and generating a feedback signal. Can provide.
  • the bio signal acquisition unit 101 acquires the user's bio signal from the wearable sensor.
  • the bio signal of the user may be a signal including an electroencephalogram measurement value, an electrocardiogram measurement value, a body temperature measurement value, and an electrocardiogram measurement value.
  • the bio signal acquisition unit 101 may include an electroencephalogram measurement value obtained from an electroencephalogram sensor (see 311 of FIG. 1), an electromyography measurement value obtained from an electromyography sensor (see 312 of FIG. 1), and a temperature sensor (see 313 of FIG. 1).
  • the body temperature measurement value obtained from the reference value), and the electrocardiogram measurement value obtained from the ECG sensor (see 314 of FIG. 1) may be obtained as a bio signal of the user.
  • the user state determiner 102 determines whether the user's state is stable based on the bio signal.
  • the user state determination unit 102 may determine whether the state of the user is stable by combining two or more bio signals.
  • the user state determiner 102 may determine that the user's state is stable when the measured value of the ECG sensor is within a preset reference ECG range and the measured value of the body temperature sensor is within the preset reference temperature range. .
  • the user state determiner 102 determines that the user's state is not stable when the measured value of the ECG sensor is outside the preset reference ECG range or the measured value of the body temperature sensor is outside the preset reference temperature range. can do.
  • the bio signal type determination unit 103 may determine the type of the bio signal.
  • the bio signal type determination unit 103 suddenly descends so that the measured value of the ECG sensor falls outside the preset reference ECG drop range, and when the measured value of the body temperature sensor falls outside the preset reference temperature range, It can be determined that the type corresponds to a 'heart attack' or 'cardiac arrest risk'.
  • the bio-signal type determining unit 103 increases the measured value of the ECG sensor beyond the preset reference ECG range and exceeds the preset reference time, and the measured value of the temperature sensor rises outside the preset reference temperature range. In this case, it may be determined that the type of bio signal corresponds to 'fast pace' or 'running'.
  • bio signal type determiner 103 slightly increases the measured value of the ECG sensor outside the preset reference ECG range and increases the measured value of the body temperature sensor outside the preset reference temperature range. This can be judged as 'excitement and pleasure'.
  • the bio-signal type determiner 103 corresponds to a 'comfort state' when the measured value of the ECG sensor is within the preset reference ECG range and the measured value of the body temperature sensor is within the preset reference temperature range. You can judge that.
  • bio-signal type determination unit 103 slightly lowers the measured value of the ECG sensor beyond the preset reference ECG range, and decreases the measured value of the body temperature sensor outside the preset reference temperature range. It can be determined that this corresponds to a 'depressed state'.
  • the camera mode setting unit 104 sets the camera (see 500 in FIG. 1) to a mode according to the type of the bio signal.
  • the camera mode setting unit 104 may set the camera to the real time relay mode when the bio signal type is 'heart attack' or 'cardiac arrest risk'.
  • the camera mode setting unit 104 may set the camera to the action cam mode when the bio signal type is 'fast walk' or 'running'.
  • the camera mode setting unit 104 may set the camera to a high resolution photographing mode when the type of the bio signal is 'excitement and enjoyment'.
  • the camera mode setting unit 104 may set the camera to a low power mode when the type of the bio signal is 'comfortable'.
  • the camera mode setting unit 104 may set the camera to a real time relay mode when the type of the bio signal is 'depressed'.
  • the camera operating apparatus 100 may also be set to a mode corresponding to each mode of the camera (see 500 of FIG. 1). Detailed description thereof has been described above, and thus will be omitted.
  • the feedback signal transmitter 105 transmits a feedback signal based on the operation result of the camera to the wearable sensor.
  • the communication connection unit 106 may configure a communication connection between the camera 500 and the camera operating apparatus 100.
  • the camera 500 may be provided separately from the camera operating apparatus 100 and the wearable device 300.
  • the camera 500 may be wired or connected to transmit and receive data between the camera 500 and the camera operating apparatus 100. It may be necessary to configure a wireless communication connection.
  • the communication connection unit 106 may initialize a communication channel and perform setting for data transmission and reception according to the communication method between the camera 500 and the camera operating apparatus 100.
  • Specific configuration of the communication connection unit 106 configures communication between the camera 500 and the camera operating apparatus 100 may be different according to the communication method between the two, detailed description thereof will be omitted.
  • the apparatus for operating a camera based on a bio signal performs an additional operation to perform an additional operation in addition to setting an operation mode of the camera according to the type of the bio signal. It may further include wealth.
  • the additional operation performing unit may transmit an alarm message to the user and a designated control server when the bio signal type is 'heart attack' or 'cardiac arrest risk', and may transmit a real-time image and the user's location to call a paramedic. have.
  • the first aid corresponding to the heart attack can be provided to the user as an audio signal.
  • the additional operation execution unit may execute the recording function to acquire the image and the sound together.
  • the post operation performer may transmit an alarm message, a real-time image, and a location of the user to a contact of a preset family or friend.
  • FIG. 3 is a flowchart illustrating a method of operating a camera based on a bio signal according to an embodiment of the present invention.
  • a bio signal acquisition unit 101 acquires a user's bio signal from a wearable sensor (S210).
  • the user state determination unit determines whether the user state is stable based on the bio signal (S220). .
  • the bio signal type is determined. Determine (S230).
  • the camera mode setting unit sets the camera (see 500 in FIG. 1) to a mode according to the type of the bio signal. (S240).
  • the camera operating method based on a bio-signal when the camera mode setting unit (refer to 104 of FIG. 2) is determined in step S230 that the user's state is stable,
  • the low power mode may be set (S235).
  • the feedback signal transmitter (see 105 of FIG. 2) transmits a feedback signal based on the operation result of the camera to the wearable sensor (S250).
  • FIG. 4 is a diagram illustrating an example of determining a type of a bio signal illustrated in FIG. 3.
  • the bio signal type determination unit may combine two or more bio signals to determine the type of the corresponding bio signal.
  • the biosignal type determination unit includes an EMG measurement value obtained from an EMG sensor (see 312 in FIG. 1) and a body temperature measurement value obtained from a body temperature sensor (see 313 in FIG. 1). It can be seen that the combined case is an example of determining the type of the bio-signal.
  • the bio-signal type determining unit (refer to 103 in FIG. 2) is suddenly lowered so that the measured value of the ECG sensor falls outside the preset reference ECG lowering range, and when the measured value of the body temperature sensor falls outside the preset reference temperature range.
  • the type of biosignal may be considered as a 'heart attack' or a 'cardiac arrest risk'.
  • the camera mode setting unit (refer to 104 of FIG. 2) sets the camera to the real time relay mode, and the additional operation performing unit (not shown) transmits an alarm message to the user and the designated control server, and calls an emergency personnel.
  • the first aid corresponding to the heart attack can be provided to the user as an audio signal.
  • the bio-signal type determining unit (refer to 103 of FIG. 2) may increase the measured value of the ECG sensor beyond the preset reference ECG range and exceeds the preset reference time, and the measured value of the temperature sensor may be set to the preset reference temperature. If it rises out of range, it can be determined that the type of bio signal corresponds to 'fast pace' or 'running'.
  • the camera mode setting unit (see 104 in FIG. 2) may set the camera to the action cam mode.
  • the bio-signal type determining unit (refer to 103 in FIG. 2) slightly increases the measured value of the ECG sensor outside the preset reference ECG range, and when the measured value of the body temperature sensor rises outside the preset reference temperature range, It can be determined that the type of bio signal corresponds to 'excitement and pleasure'.
  • the camera mode setting unit (refer to 104 in FIG. 2) sets the camera to the high resolution shooting mode, and the additional operation performing unit (not shown) may execute the recording function to acquire the image and the sound together.
  • the bio-signal type determining unit determines that the type of the bio-signal is 'comfortable' when the measured value of the ECG sensor is within the preset reference ECG range and the measured value of the body temperature sensor is within the preset reference temperature range. State ".
  • the camera mode setting unit may set the camera to the low power mode.
  • the bio-signal type determining unit (refer to 103 in FIG. 2) is slightly lowered out of the preset reference ECG range, and when the measured value of the body temperature sensor falls outside the preset reference temperature range, It can be determined that the type of bio signal corresponds to a 'depressed state'.
  • the camera mode setting unit (refer to 104 of FIG. 2) sets the camera to the real time relay mode, and the additional operation performing unit (not shown) is an alarm message and a real time image and a user to a contact of a preset family or friend. You can send the location of.
  • FIG 5 to 6 are diagrams for explaining an example in which the camera 500 is provided in an external environment according to an embodiment of the present invention.
  • the camera 500a may be configured separately from the camera operating apparatus 100 and the wearable device 300.
  • the camera 500a may be a dedicated camera for image capturing only according to the present invention, or may be a camera performing an independent function.
  • the camera 500a may be a black box installed in an automobile.
  • the black box installed in the vehicle may perform a function of the camera 500a according to the present invention, in addition to the black box intrinsic function.
  • the camera operating apparatus 100 may set an operation mode of the black box, that is, the camera 500a according to the bio signal of the user 400. Can be.
  • the camera operating apparatus 100 sets the operation mode of the camera 500a to the high resolution shooting mode and the operating mode of the camera operating apparatus 100 to the black box mode. Can be set. Also, when it is determined that the user 400 is not in a tense / excited state, the camera operating apparatus 100 may set an operation mode of each of the camera 500a and the camera operating apparatus 100 to a low power mode. Detailed description of each mode is the same as described above and will be omitted.
  • the present invention can change the operation mode of the camera 500a and / or the camera operating apparatus 100 according to the driver's bio signal to obtain an image suitable for each situation, as well as to use the memory more efficiently.
  • the present invention can change the operation mode of the camera 500a and / or the camera operating apparatus 100 according to the driver's bio signal to obtain an image suitable for each situation, as well as to use the memory more efficiently.
  • the present invention can change the operation mode of the camera 500a and / or the camera operating apparatus 100 according to the driver's bio signal to obtain an image suitable for each situation, as well as to use the memory more efficiently.
  • a camera already installed in the external environment it is possible to obtain images more economically and efficiently.
  • the camera operating apparatus 100 may set an operation mode of the camera 500b according to the bio signal of the user 400, and further, the camera.
  • the bio signal of the user 400 may be stored together with the image obtained by the 500b.
  • the camera operating device 100 when the user 400 determines that the user 400 is at risk of having a heart attack or cardiac arrest during sleep, the camera operating device 100 changes the operation mode of the camera 500b into a real time relay mode and changes the operation mode of the camera operating device 100. Can be set to healthcare mode.
  • the camera operating apparatus 100 may set an operation mode of each of the camera 500b and the camera operating apparatus 100 to a low power mode. . Detailed description of each mode is the same as described above and will be omitted.
  • the present invention can not only obtain an image suitable for each situation by changing the operation mode of the camera 500b and / or the camera operating apparatus 100 according to the bio signal of the user 400, but also the user at each time point of the image.
  • the state of the 400 can be easily understood.
  • FIGS. 7 to 9 are diagrams for explaining a user interface according to an embodiment of the present invention.
  • FIG. 7 illustrates an example of a screen on which a user interface for establishing a connection between the wearable device 300 and the camera 500 is displayed on a display unit (not shown) of the camera operating apparatus 100.
  • a user may set a connection target.
  • the camera operating apparatus 100, the wearable device 300, and the camera 500 may be integrated or configured, but may be physically divided.
  • the user may establish a communication connection between each configuration through the interface shown in FIG. 7.
  • the user may connect the camera operating apparatus 100 and the camera 500 by selecting 'Black Box A' in the connection target, and in this case, the communication connection unit 106 may communicate with the camera operating apparatus 100 and the Black Box A. You can configure the connection.
  • the user may select an item to share with the connection target. For example, the user can share the selected 'Black Box A' and 'Heart Rate' and 'Brain Wave' items.
  • the user may configure a communication connection between the components through the interface illustrated in FIG. 7.
  • FIG. 8 illustrates an example of a screen on which a user interface for establishing a connection with the camera operating apparatus 100 in the camera 500 is displayed on a display unit (not shown).
  • the user may set a setting regarding an access password of the camera 500, or set a data item to be shared with the camera operating apparatus 100 by the camera 500.
  • the configuration of the screen 810 is an example, and when the camera 500 includes a display means (not shown), the screen 810 may be displayed on the display means provided in the camera, and the camera ( When the 500 does not have a display means, such a screen 810 may be displayed on an external device (eg, a camera operating device) connected to the camera 500 by a network.
  • a display means not shown
  • the screen 810 may be displayed on the display means provided in the camera, and the camera ( When the 500 does not have a display means, such a screen 810 may be displayed on an external device (eg, a camera operating device) connected to the camera 500 by a network.
  • FIG 9 illustrates an example of a screen displaying a bio signal received by the camera operating apparatus 100 from the wearable device 300.
  • the camera operating apparatus 100 may display a bio signal according to various methods. For example, as illustrated in the first screen 910, the camera operating apparatus 100 may perform electrocardiogram, electromyography, electroencephalogram, temperature, and the like of the user 400 based on the bio signal of the user 400 received from the wearable device 300.
  • the standard and measured values for blood pressure can be displayed graphically.
  • the camera operating apparatus 100 may display status information of the user based on the bio signal.
  • the camera operating apparatus 100 may display images acquired through the camera 500 based on the type of the bio-signal of 'joy', 'surprise', 'anger', 'sleep', 'pain' and 'general'.
  • the categories can be classified and each category can be displayed. In this case, the user may check an image belonging to the corresponding category by selecting one category.
  • the camera operating apparatus 100 may display the summary information on the bio signal as shown in the third screen 930.
  • the camera operating apparatus 100 may display a time at which a major event occurs, and further display specific event details when the user selects a corresponding time.
  • Information, layout, etc. displayed on the screen may be determined according to the user's setting. According to the user's setting, at least one of the bio signal, the user state information, and the bio signal summary information may be displayed at the same time.
  • Embodiments according to the present invention described above may be implemented in the form of a computer program that can be executed through various components on a computer, such a computer program may be recorded on a computer readable medium.
  • the media may be magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CD-ROMs and DVDs, magneto-optical media such as floptical disks, and ROMs.
  • Hardware devices specifically configured to store and execute program instructions such as memory, RAM, flash memory, and the like.
  • the medium may include an intangible medium implemented in a form that can be transmitted on a network.
  • the medium may be a form of a software or an application that can be transmitted and distributed through a network.
  • the computer program may be specially designed and configured for the present invention, or may be known and available to those skilled in the computer software field.
  • Examples of computer programs may include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.
  • connection or connection members of the lines between the components shown in the drawings by way of example shows a functional connection and / or physical or circuit connections, in the actual device replaceable or additional various functional connections, physical It may be represented as a connection, or circuit connections.
  • such as "essential”, “important” may not be a necessary component for the application of the present invention.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • Physiology (AREA)
  • Cardiology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biomedical Technology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Gerontology & Geriatric Medicine (AREA)
  • Pulmonology (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Studio Devices (AREA)

Abstract

본 발명의 일 실시예는, 웨어러블(wearable) 센서로부터 사용자의 바이오 신호를 획득하는 단계; 상기 바이오 신호를 기초로 상기 사용자의 상태가 안정 상태인지 여부를 판단하는 단계; 상기 사용자의 상태가 상기 안정 상태인 경우, 카메라를 저전력 모드로 설정하는 단계; 상기 사용자의 상태가 상기 안정 상태가 아닌 경우, 상기 바이오 신호의 유형을 결정하는 단계; 및 상기 카메라를 상기 바이오 신호의 유형에 따른 모드로 설정하는 단계; 를 포함하는, 카메라 운용 장치의 운용 방법을 개시한다.

Description

카메라 운용 장치의 운용 방법, 시스템 및 이를 위한 장치
본 발명의 실시예들은 카메라 운용 장치의 운용 방법, 시스템 및 이를 위한 장치에 관한 것으로, 더 상세하게는 웨어러블 센서를 통해 수집된 사용자의 바이오 신호에 기초하여 카메라의 구동 모드를 변경하는 카메라 운용 장치의 운용 방법, 시스템 및 이를 위한 장치에 관한 것이다.
카메라를 사용하는 사용자는, 사용자의 상황에 맞추어 카메라의 프레임레이트 및 해상도 등을 적절한 동작 모드로 변경해야 하는 번거로움이 있으며, 사용자에게 긴급을 요하는 상황이 닥치는 경우에는 미처 카메라의 동작 모드를 변경하지 못해 해당 상황에 적절한 영상을 획득할 수 없게 된다.
본 발명의 실시예들은 웨어러블 센서로부터 획득된 사용자의 바이오 신호에 기초하여 카메라의 구동 모드를 자동으로 변경하기 위한 바이오 신호에 기초한 카메라 운용 방법, 시스템 및 이를 위한 장치를 제공한다.
본 발명의 일 실시예에 따른 카메라 운용 장치의 운용 방법은, 웨어러블(wearable) 센서로부터 사용자의 바이오 신호를 획득하는 단계; 상기 바이오 신호를 기초로 상기 사용자의 상태가 안정 상태인지 여부를 판단하는 단계; 상기 사용자의 상태가 상기 안정 상태인 경우, 카메라를 저전력 모드로 설정하는 단계; 상기 사용자의 상태가 상기 안정 상태가 아닌 경우, 상기 바이오 신호의 유형을 결정하는 단계; 및 상기 카메라를 상기 바이오 신호의 유형에 따른 모드로 설정하는 단계;를 포함할 수 있다.
상기 안정 상태인지 여부를 판단하는 단계는 상기 웨어러블 센서 중 심전도(electrocardiogram; ECG) 센서의 측정 값이 기설정된 기준 심전도 범위 내이고, 상기 웨어러블 센서 중 체온 센서의 측정 값이 기설정된 기준 체온 범위 내인 경우, 상기 사용자의 상태가 상기 안정 상태인 것으로 판단할 수 있다.
상기 저전력 모드로 설정하는 단계는 상기 카메라의 프레임레이트를 기설정된 기준 프레임레이트 미만으로 설정하고, 상기 카메라의 영상 떨림 보정 기능을 오프(off)로 설정할 수 있다.
상기 카메라는 상기 사용자의 신체에 구비되는 웨어러블 카메라(wearable camera)일 수도 있고, 상기 카메라는 외부 환경에 구비되는 카메라 일 수도 있다.
본 발명의 일 실시예에 따른 카메라 운용 장치의 운용 방법은, 상기 카메라와 통신 연결을 설정하는 단계를 더 포함할 수 있다.
본 발명의 일 실시예에 따른 카메라 운용 장치의 운용 방법은, 상기 모드 설정 단계에서 상기 카메라가 실시간 중계 모드, 액션 캠 모드 및 고해상도 촬영 모드 중 어느 하나의 모드로 설정된 경우, 상기 사용자의 상태가 상기 안정 상태가 아니라고 판단된 시점과 대응되는 시간범위에서, 상기 카메라로부터 수신한 영상을 구성하는 모든 프레임을 저장하는 단계;를 더 포함할 수 있다. 이 때 본 발명의 일 실시예에 따른 카메라 운용 장치의 운용 방법은, 상기 사용자의 상태가 상기 안정 상태가 아니라고 판단된 시점과 대응되는 시간범위에서, 상기 모든 프레임과 상기 바이오 신호를 매핑(Mapping)하여 저장하는 단계를 더 포함할 수도 있다.
본 발명의 일 실시예에 따른 카메라 운용 장치의 운용 방법은, 상기 모드 설정 단계에서 상기 카메라가 저전력 모드로 설정된 경우, 기 설정된 프레임 선별 조건에 따라 상기 카메라로부터 수신한 영상을 구성하는 복수의 프레임 중 일부 프레임만을 저장하는 단계;를 더 포함할 수 있다.
본 발명의 일 실시예에 따른 카메라 운용 장치의 운용 방법은, 상기 웨어러블 센서에 상기 카메라의 동작 결과에 기초한 피드백 신호를 전송하는 단계;를 더 포함할 수 있다.
본 발명의 일 실시예에 따른 카메라 운용 장치의 운용 장치는, 웨어러블 센서로부터 사용자의 바이오 신호를 획득하는 바이오 신호 획득부; 상기 바이오 신호를 기초로 상기 사용자의 상태가 안정 상태인지 여부를 판단하는 사용자 상태 판단부; 상기 사용자의 상태가 상기 안정 상태가 아닌 경우, 상기 바이오 신호의 유형을 결정하는 바이오 신호 유형 결정부; 및 상기 사용자의 상태가 상기 안정 상태인 경우, 카메라를 저전력 모드로 설정하고, 상기 사용자의 상태가 상기 안정 상태가 아닌 경우, 상기 카메라를 상기 바이오 신호의 유형에 따른 모드로 설정하는 카메라 모드 설정부;를 포함할 수 있다.
상기 웨어러블 센서는 뇌전도(electroencephalography; EEG) 센서, 근전도(electromyography; EMG) 센서, 심전도(electrocardiogram; ECG) 센서 및 체온 센서를 포함할 수 있다.
본 발명의 일 실시예에 따른 카메라 운용 장치의 운용 장치는, 상기 웨어러블 센서에 상기 카메라의 동작 결과에 기초한 피드백 신호를 전송하는 피드백 신호 전송부;를 더 포함할 수 있다.
상기 카메라는 상기 사용자의 신체에 구비되는 웨어러블 카메라(wearable camera)일 수도 있고, 상기 카메라는 외부 환경에 구비되는 카메라 일 수도 있다.
본 발명의 일 실시예에 따른 카메라 운용 장치의 운용 장치는, 상기 카메라와 통신 연결을 설정하는 통신 연결부;를 더 포함할 수 있다.
본 발명의 일 실시예에 따른 카메라 운용 장치의 운용 시스템은, 사용자의 바이오 신호를 획득하는 적어도 하나의 웨어러블 센서; 영상을 획득하는 카메라; 및 상기 바이오 신호를 획득하고, 상기 바이오 신호를 기초로 상기 사용자의 상태를 판단하고, 상기 사용자의 상태를 기초로 상기 카메라의 모드를 설정하는 카메라 운용 장치;를 포함할 수 있다.
전술한 것 외의 다른 측면, 특징, 이점이 이하의 도면, 특허청구범위 및 발명의 상세한 설명으로부터 명확해질 것이다.
본 발명의 실시예들에 따른 바이오 신호에 기초한 카메라 운용 방법, 시스템 및 이를 위한 장치에 의해, 웨어러블 센서로부터 획득된 사용자의 바이오 신호에 기초하여 카메라의 구동 모드를 자동으로 변경할 수 있다.
또한 본 발명의 실시예들에 따르면, 운전자의 바이오 신호에 따라 카메라의 동작 모드를 변경함으로써 각 상황에 맞는 영상을 획득할 수 있을 뿐만 아니라 메모리를 보다 효율적으로 사용할 수 있다.
본 발명의 실시예들에 따르면, 영상의 각 시점에서 사용자의 상태가 어떠한지 손쉽게 파악할 수 있도록 할 수 있다.
도 1은 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 시스템의 구성을 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 장치의 구성을 나타낸 블록도이다.
도 3은 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 방법을 나타낸 동작 흐름도이다.
도 4는 도 3에 도시된 바이오 신호의 유형을 결정하는 단계의 일 예를 나타낸 도면이다.
도 5 내지 도6은 본 발명의 일 실시예에 따라 카메라가 외부 환경에 구비되는 예시를 설명하기 위한 도면이다.
도 7내지 도 9는 본 발명의 일 실시예에 따른 유저인터페이스를 설명하기 위한 도면이다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
이하의 실시예에서, 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
이하의 실시예에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 이하의 실시예에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명의 실시예들은 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들은 특정 기능들을 실행하는 다양한 개수의 하드웨어 또는/및 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 본 발명의 실시예들은 하나 이상의 마이크로프로세서들의 제어 또는 다른 제어 장치들에 의해서 다양한 기능들을 실행할 수 있는, 메모리, 프로세싱, 로직(logic), 룩업 테이블(look-up table) 등과 같은 직접 회로 구성들을 채용할 수 있다. 본 발명의 실시예의 구성 요소들이 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 있는 것과 유사하게, 본 발명의 실시예는 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 본 발명의 실시예들은 전자적인 환경 설정, 신호 처리, 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. 매커니즘, 요소, 수단, 구성과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다. 상기 용어는 프로세서 등과 연계하여 소프트웨어의 일련의 처리들(routines)의 의미를 포함할 수 있다.
또한, 본 명세서 및 도면에 있어서, 실질적으로 동일한 구성을 갖는 구성 요소에 대해서는, 동일한 부호를 사용함으로써 중복 설명을 생략한다.
도 1은 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 시스템의 구성을 나타낸 도면이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 시스템은 카메라 운용 장치(100), 웨어러블 디바이스(300) 및 카메라(500)를 포함할 수 있다.
카메라 운용 장치(100), 웨어러블 디바이스(300) 및 카메라(500)는 각각 별도로 구성되어 유선 또는 무선으로 연결될 수 있으며, 카메라 운용 장치(100)는 웨어러블 디바이스(300) 및 카메라(500) 중 적어도 하나를 포함하여 구성될 수도 있다.
한편 웨어러블 디바이스(300)는 사용자(400)가 착용 가능한 의복이나 액세서리에 구비될 수도 있고, 헤어 밴드, 팔목 밴드, 허리 벨트 등과 같이 사용자(400)가 직접 착용 가능한 액세서리 형태일 수도 있다.
본 발명의 일 실시예에 따른 카메라 운용 장치(100)는 웨어러블 디바이스(300)로 부터 수신된 사용자(400)의 바이오 신호에 기초하여 카메라(500)의 구동 신호를 제공하는 것을 특징으로 한다.
카메라 운용 장치(100)는 통신부(110), 메모리(120), 프로그램 저장부(130), 제어부(140) 및 데이터베이스(150)를 포함할 수 있다.
상세히, 통신부(110)는 통신망과 연동하여 카메라 운용 장치(100)와 다른 단말기(미도시) 또는 서버(미도시) 간의 송수신 신호를 패킷 데이터 형태로 제공하는 데 필요한 통신 인터페이스를 제공한다. 나아가, 통신부(110)는 웨어러블 디바이스(300)의 구동 결과를 사용자(400)의 개인 단말기(미도시)나 지정된 웨어러블 디바이스 관제 서버(미도시)에 송신하는 역할을 수행할 수 있다.
여기서, 통신부(110)는 다른 네트워크 장치와 유무선 연결을 통해 제어 신호 또는 데이터 신호와 같은 신호를 송수신하기 위해 필요한 하드웨어 및 소프트웨어를 포함하는 장치일 수 있다.
통신망은 예컨대 LANs(Local Area Networks), WANs(Wide Area Networks), MANs(Metropolitan Area Networks), ISDNs(Integrated Service Digital Networks) 등의 유선 네트워크나, 무선 LANs, CDMA, 블루투스, 위성 통신 등의 무선 네트워크를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다.
메모리(120)는 제어부(140)가 처리하는 데이터를 일시적 또는 영구적으로 저장하는 기능을 수행한다. 여기서, 메모리(120)는 자기 저장 매체(magnetic storage media) 또는 플래시 저장 매체(flash storage media)를 포함할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다.
프로그램 저장부(130)는 바이오 신호를 획득하는 작업, 사용자의 상태를 판단하는 작업, 바이오 신호의 유형을 결정하는 작업, 카메라의 모드를 설정하는 작업 및 피드백 신호를 생성하는 작업 등을 수행하는 제어 소프트웨어를 탑재하고 있다.
제어부(140)는 일종의 중앙처리장치로서 카메라를 운용하는 전체 과정을 제어한다. 즉, 제어부(140)는 프로그램 저장부(130)에 탑재된 제어 소프트웨어를 구동하여 웨어러블 디바이스(300)로부터 사용자(400)의 바이오 신호를 획득하여 사용자(400)의 상태를 판단하는 등의 다양한 기능을 제공할 수 있다.
여기서, 제어부(140)는 프로세서(processor)와 같이 데이터를 처리할 수 있는 모든 종류의 장치를 포함할 수 있다. 여기서, '프로세서(processor)'는, 예를 들어 프로그램 내에 포함된 코드 또는 명령으로 표현된 기능을 수행하기 위해 물리적으로 구조화된 회로를 갖는, 하드웨어에 내장된 데이터 처리 장치를 의미할 수 있다.
이와 같이 하드웨어에 내장된 데이터 처리 장치의 일 예로써, 마이크로프로세서(microprocessor), 중앙처리장치(central processing unit: CPU), 프로세서 코어(processor core), 멀티프로세서(multiprocessor), ASIC(application-specific integrated circuit), FPGA(field programmable gate array) 등의 처리 장치를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다.
데이터베이스(150)는 사용자의 바이오 신호에 따른 사용자의 안정 상태 판단 기준 정보 및 바이오 신호의 유형 판단 기준 정보 등을 포함한다. 또한, 데이터베이스(150)에는 카메라(500)로부터 수신된 영상이 저장될 수 있다. 영상들은 바이오 신호의 유형에 따라 카테고리화 되어 저장될 수 있다.
한편 카메라 운용 장치(100)는 카메라(500)로부터 수신한 영상 및/또는 데이터베이스(150)에 저장된 영상을 표시하거나, 바이오 신호를 표시하거나, 카메라 운용 장치(100)의 설정 인터페이스를 표시하는 디스플레이부(미도시)를 더 포함할 수 있다.
예컨대, 디스플레이부(미도시)는 CRT(Cathode Ray Tube), LCD(Liqu-id Crystal Display), PDP (Plasma Display Panel) 및 OLED(Organic Light Emitting Diode) 중 어느 하나로 구성될 수 있으나, 본 발명의 사상은 이에 제한되지 않는다.
한편 디스플레이부(미도시)는 사용자의 입력을 획득할 수 있는 입력 수단을 더 구비할 수 있다. 예컨대, 디스플레이부(미도시)는 사용자의 터치(Touch) 좌표를 판독하여, 전기적 신호로 변환하는 디지타이저(Digitizer)를 더 구비하여, 표시장치에 표시되는 화면에 따른 사용자의 입력을 획득할 수 있다. 따라서 디스플레이부(미도시)는 터치 패널(Touch Pannel)을 구비한 터치 스크린(Touch Screen)일 수 있다. 이 때 터치 패널은 사용자의 터치 좌표뿐만 아니라 터치 압력을 더 판독하여 전기적 신호로 변환할 수 있다.
물론 입력 수단은 디스플레이부(미도시)와 별도로 구비될 수 있다. 예컨대, 입력 수단은 디스플레이부(미도시)와 별도로 구비되는 키보드, 마우스, 트랙볼, 마이크 및 버튼 중 어느 하나일 수 있다.
이하에서는, 디스플레이부(미도시)가 사용자의 터치 유뮤 및 터치 압력을 판독할 수 있는 입력 수단을 구비하는 터치 스크린임을 전제로 설명하지만, 본 발명이 이에 한정되는 것은 아니다.
본 발명의 일 실시예에 따른 웨어러블 디바이스(300)는 웨어러블 센서(310)를 포함하며, 웨어러블 센서(310)가 사용자(400)의 바이오 신호를 획득하여 카메라 운용 장치(100)에 전송하면, 카메라 운용 장치(100)는 수신된 바이오 신호에 기초하여 카메라(500)의 동작 모드를 결정하고, 카메라(500)는 카메라 운용 장치(100)로부터 결정된 동작 모드에 따른 구동 신호를 수신하여 동작하는 것을 특징으로 한다.
카메라 운용 장치(100), 웨어러블 디바이스(300) 및 카메라(500)의 구성 요소들 각각은 물리적으로 분리된 별도의 디바이스일 수도 있고, 개념적으로만 분리된 동일한 디바이스일 수도 있다.
웨어러블 센서(310)는 뇌전도(electroencephalography; EEG) 센서(311), 근전도(electromyography; EMG) 센서(312), 체온 센서(313) 및 심전도(electrocardiogram; ECG) 센서를 포함할 수 있다.
뇌전도 센서(311)는 사용자(400)의 뇌신경 사이에 신호가 전달될 때 발생하는 전기적 신호를 측정할 수 있다.
근전도 센서(312)는 사용자(400)의 골격근에서 발생하는 전기적 신호를 측정할 수 있다.
체온 센서(313)는 사용자(400)의 체온을 측정할 수 있다.
심전도 센서(314)는 사용자(400)의 심장의 활동에 따라 피부에서 감지되는 전기적 신호를 측정할 수 있다.
다만 전술한 웨어러블 센서(310)는 예시적인 것으로 본 발명의 사상이 이에 제한되는 것은 아니며, 사용자(400)의 생체 신호를 감지할 수 있는 수단이면 제한없이 사용될 수 있다.
본 발명의 일 실시예에 따른 카메라(500)는 렌즈 및 이미지 센서를 포함하며, 영상을 획득할 수 있다. 전술한 바와 같이 카메라(500)는 카메라 운용 장치(100) 및 웨어러블 디바이스(300)중 어느 하나에 포함될 수도 있고, 별도로 구성될 수도 있다. 나아가 카메라(500)가 카메라 운용 장치(100) 및 웨어러블 디바이스(300)와 별도로 구성되는 경우, 카메라(500)는 사용자(400)의 신체에 구비될 수도 있고, 외부 환경에 구비될 수도 있다.
카메라(500)는 다양한 동작 모드 중 어느 하나의 모드로 설정되어 동작할 수 있다. 예컨대, 카메라(500)는 실시간 중계 모드, 액션 캠 모드, 고해상도 촬영 모드 및 저전력 모드와 같은 동작 모드들 중 어느 하나의 모드로 설정될 수 있다.
실시간 중계 모드는 획득된 영상을 실시간으로 카메라 운용 장치(100)에 전송하는 모드일 수 있다.
액션 캠 모드는 카메라(500)의 프레임레이트를 기준 프레임레이트 이상으로 설정하고, 영상 떨림 보정 기능을 온(on)하여 촬영하는 모드일 수 있다.
고해상도 촬영 모드는 카메라(500)의 해상도를 기준 해상도 이상으로 설정하여 촬영하는 모드일 수 있다.
저전력 모드는 카메라(500)의 프레임레이트를 기준 프레임레이트 미만으로 설정하고, 영상 떨림 보정 기능을 오프(off)하여 촬영하는 모드일 수 있다.
한편 카메라(500)가 각 모드로 동작하는 경우, 카메라 운용 장치(100)도 카메라(500)의 동작 모드에 대응되는 모드로 동작할 수 있다.
예컨대, 카메라(500)가 실시간 중계 모드, 액션 캠 모드 및 고해상도 촬영 모드 중 어느 하나의 모드인 경우, 카메라 운용 장치(100)는 블랙박스 모드 또는 헬스케어모드로 동작할 수 있다. 나아가 카메라(500)가 저전력 모드인 경우, 카메라 운용 장치(100) 또한 저전력 모드로 동작할 수 있다.
이 때 카메라 운용 장치(100)의 블랙박스 모드는 특정 시점과 대응되는 시간 범위에서 카메라(500)로부터 수신한 영상을 구성하는 모든 프레임을 저장하는 모드일 수 있다. 예컨대, 특정 시점이 t인 경우, 시간범위는 t-50초~ t+300초 일 수 있고, 이에 따라 카메라 운용 장치(100)는 t-50초 ~ t+300초의 영상을 구성하는 모든 프레임을 저장할 수 있다. 바꾸어 말하면, 카메라 운용 장치(100)는 t 시점 이전의 50초부터 t 시점 이후의 300초의 시간범위의 영상을 구성하는 모든 프레임을 시점 t에 대응되는 시간 범위의 영상으로 저장할 수 있다. 이와 같은 특정 시점과 대응되는 시간범위는 사용자에 의해 설정될 수 있다. 이로써 본 발명은 특정 이벤트 발생 시, 이벤트 발생 전후의 영상을 저장함으로써 사용자로 하여금 이벤트 발생의 인과관계를 보다 쉽게 파악할 수 있도록 할 수 있다.
한편 전술한 카메라 운용 장치(100)의 헬스케어 모드는 전술한 블랙박스 모드와 유사하게 특정 시점과 대응되는 시간 범위에서 카메라(500)로부터 수신한 영상을 구성하는 모든 프레임을 저장하고, 이에 더하여 웨어러블 센서(310)로부터 수신한 바이오 신호를 영상과 매핑 하여 저장할 수 있다. 이에 따라, 본 발명은 영상의 각 시점에서 사용자(400)의 상태가 어떠한지 손쉽게 파악할 수 있도록 할 수 있다.
카메라 운용 장치(100)의 저전력 모드는 기 설정된 프레임 선별 조건에 따라 카메라(500)로부터 수신한 영상을 구성하는 복수의 프레임 중 일부 프레임만을 저장하는 모드일 수 있다. 이 때, 프레임 선별 조건은 사용자에 의해 설정될 수 있다. 가령 프레임 선별 조건은 복수의 I 프레임 및 복수의 P 프레임으로 구성된 영상에서, I 프레임 만을 저장하는 조건일 수 있다. 다만 이는 예시적인 것으로 본 발명의 사상이 이에 한정되는 것은 아니다.
카메라(500) 및 카메라 운용 장치(100)는 웨어러블 디바이스(300)가 획득한 바이오 신호에 기초하여 위와 같은 다양한 동작 모드 중 어느 하나의 모드로 설정되어 동작할 수 있다.
도 2는 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 장치의 구성을 나타낸 블록도이다.
도 2를 참조하면, 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 장치는 바이오 신호 획득부(101), 사용자 상태 판단부(102), 바이오 신호 유형 결정부(103), 카메라 모드 설정부(104), 피드백 신호 전송부(105) 및 통신 연결부(106)를 포함한다.
바이오 신호 획득부(101), 사용자 상태 판단부(102), 바이오 신호 유형 결정부(103), 카메라 모드 설정부(104), 피드백 신호 전송부(105) 및 통신 연결부(106)는 프로그램 저장부(도 1의 130 참조)에 저장되고 제어부(도 1의 140 참조)에 의해 실행 가능한 컴퓨터 프로그램이거나, 제어부(도 1의 140 참조)에 상응하는 프로세서 내부에 구현된 서브 프로세서이거나, 제어부(도 1의 140 참조)와 물리적으로 구분된 별도의 프로세서일 수 있다.
즉, 제어부(도 1의 140 참조)는 바이오 신호 획득부(101), 사용자 상태 판단부(102), 바이오 신호 유형 결정부(103), 카메라 모드 설정부(104), 피드백 신호 전송부(105) 및 통신 연결부(106)를 실행하거나 제어하여 바이오 신호를 획득하고, 사용자의 상태를 판단하고, 바이오 신호의 유형을 결정하고, 카메라의 모드를 설정하고, 피드백 신호를 생성하는 등의 다양한 기능을 제공할 수 있다.
상세히, 바이오 신호 획득부(101)는 웨어러블 센서로부터 사용자의 바이오 신호를 획득한다.
사용자의 바이오 신호는 뇌전도 측정 값, 근전도 측정 값, 체온 측정 값 및 심전도 측정 값을 포함하는 신호일 수 있다.
예컨대, 바이오 신호 획득부(101)는 뇌전도 센서(도 1의 311 참조)로부터 획득된 뇌전도 측정 값, 근전도 센서(도 1의 312 참조)로부터 획득된 근전도 측정 값, 체온 센서(도 1의 313 참조)로부터 획득된 체온 측정 값, 심전도 센서(도 1의 314 참조)로부터 획득된 심전도 측정 값을 사용자의 바이오 신호로서 획득할 수 있다.
사용자 상태 판단부(102)는 바이오 신호를 기초로 사용자의 상태가 안정 상태인지 여부를 판단한다.
사용자 상태 판단부(102)는 둘 이상의 바이오 신호를 결합하여 사용자의 상태가 안정 상태인지 여부를 판단할 수 있다.
예컨대, 사용자 상태 판단부(102)는 심전도 센서의 측정 값이 기설정된 기준 심전도 범위 내이고, 체온 센서의 측정 값이 기설정된 기준 체온 범위 내인 경우, 사용자의 상태가 안정 상태인 것으로 판단할 수 있다.
또한, 사용자 상태 판단부(102)는 심전도 센서의 측정 값이 기설정된 기준 심전도 범위를 벗어나거나, 체온 센서의 측정 값이 기설정된 기준 체온 범위를 벗어나는 경우, 사용자의 상태가 안정 상태가 아닌 것으로 판단할 수 있다.
바이오 신호 유형 결정부(103)는 사용자의 상태가 안정 상태가 아닌 것으로 판단된 경우, 바이오 신호의 유형을 결정할 수 있다.
예컨대, 바이오 신호 유형 결정부(103)는 심전도 센서의 측정 값이 기설정된 기준 심전도 하강 범위를 벗어나도록 급하강하고, 체온 센서의 측정 값이 기설정된 기준 체온 범위를 벗어나 저하되어 있는 경우, 바이오 신호의 유형이 '심장발작' 또는 '심정지 위험'에 해당하는 것으로 판단할 수 있다.
또한, 바이오 신호 유형 결정부(103)는 심전도 센서의 측정 값이 기설정된 기준 심전도 범위를 벗어나 증가된 상태가 기설정된 기준 시간을 초과하고, 체온 센서의 측정 값이 기설정된 기준 체온 범위를 벗어나 상승되어 있는 경우, 바이오 신호의 유형이 '빠른 걸음' 또는 '달리기'에 해당하는 것으로 판단할 수 있다.
또한, 바이오 신호 유형 결정부(103)는 심전도 센서의 측정 값이 기설정된 기준 심전도 범위를 벗어나 소폭 증가하고, 체온 센서의 측정 값이 기설정된 기준 체온 범위를 벗어나 상승되어 있는 경우, 바이오 신호의 유형이 '흥분 및 즐거움'에 해당하는 것으로 판단할 수 있다.
또한, 바이오 신호 유형 결정부(103)는 심전도 센서의 측정 값이 기설정된 기준 심전도 범위 내이고, 체온 센서의 측정 값이 기설정된 기준 체온 범위 내인 경우, 바이오 신호의 유형이 '편안한 상태'에 해당하는 것으로 판단할 수 있다.
또한, 바이오 신호 유형 결정부(103)는 심전도 센서의 측정 값이 기설정된 기준 심전도 범위를 벗어나 소폭 하강하고, 체온 센서의 측정 값이 기설정된 기준 체온 범위를 벗어나 저하되어 있는 경우, 바이오 신호의 유형이 '우울한 상태'에 해당하는 것으로 판단할 수 있다.
카메라 모드 설정부(104)는 카메라(도 1의 500 참조)를 바이오 신호의 유형에 따른 모드로 설정한다.
예컨대, 카메라 모드 설정부(104)는 바이오 신호의 유형이 '심장발작' 또는 '심정지 위험'인 경우, 카메라를 실시간 중계 모드로 설정할 수 있다.
또한, 카메라 모드 설정부(104)는 바이오 신호의 유형이 '빠른 걸음' 또는 '달리기'인 경우, 카메라를 액션 캠 모드로 설정할 수 있다.
또한, 카메라 모드 설정부(104)는 바이오 신호의 유형이 '흥분 및 즐거움'인 경우, 카메라를 고해상도 촬영 모드로 설정할 수 있다.
또한, 카메라 모드 설정부(104)는 바이오 신호의 유형이 '편안한 상태'인 경우, 카메라를 저전력 모드로 설정할 수 있다.
또한, 카메라 모드 설정부(104)는 바이오 신호의 유형이 '우울한 상태'인 경우, 카메라를 실시간 중계 모드로 설정할 수 있다.
카메라(도 1의 500 참조)가 전술한 각 모드로 설정될 경우, 카메라 운용 장치(100) 또한 카메라(도 1의 500 참조)의 각 모드와 대응되는 모드로 설정될 수 있다. 이에 대한 상세한 설명은 전술하였으므로, 생략한다.
피드백 신호 전송부(105)는 웨어러블 센서에 카메라의 동작 결과에 기초한 피드백 신호를 전송한다.
통신 연결부(106)는 카메라(500)와 카메라 운용 장치(100)의 통신 연결을 구성할 수 있다. 전술한 바와 같이 카메라(500)는 카메라 운용 장치(100) 및 웨어러블 디바이스(300)와 별도로 구비될 수 있고, 이러한 경우 카메라(500)와 카메라 운용 장치(100)간의 데이터 송신 및 수신을 위해 유선 또는 무선의 통신 연결의 구성이 필요할 수 있다.
보다 상세히, 통신 연결부(106)는 카메라(500)와 카메라 운용 장치(100)간의 통신 방식에 따라, 통신 채널을 초기화 하고 데이터 송수신을 위한 설정을 수행할 수 있다. 통신 연결부(106)가 카메라(500)와 카메라 운용 장치(100)간의 통신을 구성하는 구체적인 구성은 양자간의 통신 방식에 따라 상이할 수 있으므로, 상세한 설명은 생략한다.
한편 도 2에는 도시되지 아니하였으나, 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 장치는 바이오 신호의 유형에 따라 카메라의 동작 모드를 설정하는 것 외에, 추가 동작을 수행하기 위한 추가 동작 수행부를 더 포함할 수 있다.
예컨대, 추가 동작 수행부는 바이오 신호의 유형이 '심장발작' 또는 '심정지 위험'인 경우, 사용자 및 지정된 관제 서버에 알람 메시지를 전송하고, 구급요원을 호출하기 위해 실시간 영상 및 사용자의 위치를 전송할 수 있다. 또한, 심장발작에 대응한 응급처치요령을 청각 신호로서 사용자에게 제공할 수 있다.
또한, 추가 동작 수행부는 바이오 신호의 유형이 '흥분 및 즐거움'인 경우, 녹음 기능을 실행하여 영상 및 사운드를 함께 획득할 수 있다.
또한, 추가 동작 수행부는 바이오 신호의 유형이 '우울한 상태'인 경우, 기설정된 사용자의 가족 또는 친구의 연락처로 알람 메시지 및 실시간 영상 및 사용자의 위치를 전송할 수 있다.
도 3은 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 방법을 나타낸 동작 흐름도이다.
도 3을 참조하면, 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 방법은 바이오 신호 획득부(도 2의 101 참조)가, 웨어러블 센서로부터 사용자의 바이오 신호를 획득한다(S210).
또한, 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 방법은 사용자 상태 판단부(도 2의 102 참조)가, 바이오 신호를 기초로 사용자의 상태가 안정 상태인지 여부를 판단한다(S220).
또한, 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 방법은 바이오 신호 유형 결정부(도 2의 103 참조)가, 사용자의 상태가 안정 상태가 아닌 것으로 판단된 경우, 바이오 신호의 유형을 결정한다(S230).
또한, 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 방법은 카메라 모드 설정부(도 2의 104 참조)가, 카메라(도 1의 500 참조)를 바이오 신호의 유형에 따른 모드로 설정한다(S240).
또한, 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 방법은 카메라 모드 설정부(도 2의 104 참조)가, 단계(S230)에서 사용자의 상태가 안정 상태인 것으로 판단된 경우, 카메라를 저전력 모드로 설정할 수 있다(S235).
또한, 본 발명의 일 실시예에 따른 바이오 신호에 기초한 카메라 운용 방법은 피드백 신호 전송부(도 2의 105 참조)가, 웨어러블 센서에 카메라의 동작 결과에 기초한 피드백 신호를 전송한다(S250).
도 4는 도 3에 도시된 바이오 신호의 유형을 결정하는 단계의 일 예를 나타낸 도면이다.
도 4를 참조하면, 바이오 신호 유형 결정부(도 2의 103 참조)는 둘 이상의 바이오 신호를 결합하여 해당 바이오 신호의 유형을 결정할 수 있다.
예컨대, 도 4는 바이오 신호 유형 결정부(도 2의 103 참조)가, 근전도 센서(도 1의 312 참조)로부터 획득된 근전도 측정 값 및 체온 센서(도 1의 313 참조)로부터 획득된 체온 측정 값을 결합하여 해당 바이오 신호의 유형을 결정하는 경우의 일 예임을 알 수 있다.
상세히, 바이오 신호 유형 결정부(도 2의 103 참조)는 심전도 센서의 측정 값이 기설정된 기준 심전도 하강 범위를 벗어나도록 급하강하고, 체온 센서의 측정 값이 기설정된 기준 체온 범위를 벗어나 저하되어 있는 경우, 바이오 신호의 유형이 '심장발작' 또는 '심정지 위험'에 해당하는 것으로 판단할 수 있다. 이 경우, 카메라 모드 설정부(도 2의 104 참조)는 카메라를 실시간 중계 모드로 설정하고, 추가 동작 수행부(미도시)는 사용자 및 지정된 관제 서버에 알람 메시지를 전송하고, 구급요원을 호출하기 위해 실시간 영상 및 사용자의 위치를 전송할 수 있다. 또한, 심장발작에 대응한 응급처치요령을 청각 신호로서 사용자에게 제공할 수 있다.
또한, 바이오 신호 유형 결정부(도 2의 103 참조)는 심전도 센서의 측정 값이 기설정된 기준 심전도 범위를 벗어나 증가된 상태가 기설정된 기준 시간을 초과하고, 체온 센서의 측정 값이 기설정된 기준 체온 범위를 벗어나 상승되어 있는 경우, 바이오 신호의 유형이 '빠른 걸음' 또는 '달리기'에 해당하는 것으로 판단할 수 있다. 이 경우, 카메라 모드 설정부(도 2의 104 참조)는 카메라를 액션 캠 모드로 설정할 수 있다.
또한, 바이오 신호 유형 결정부(도 2의 103 참조)는 심전도 센서의 측정 값이 기설정된 기준 심전도 범위를 벗어나 소폭 증가하고, 체온 센서의 측정 값이 기설정된 기준 체온 범위를 벗어나 상승되어 있는 경우, 바이오 신호의 유형이 '흥분 및 즐거움'에 해당하는 것으로 판단할 수 있다. 이 경우, 카메라 모드 설정부(도 2의 104 참조)는 카메라를 고해상도 촬영 모드로 설정하고, 추가 동작 수행부(미도시)는 녹음 기능을 실행하여 영상 및 사운드를 함께 획득할 수 있다.
또한, 바이오 신호 유형 결정부(도 2의 103 참조)는 심전도 센서의 측정 값이 기설정된 기준 심전도 범위 내이고, 체온 센서의 측정 값이 기설정된 기준 체온 범위 내인 경우, 바이오 신호의 유형이 '편안한 상태'에 해당하는 것으로 판단할 수 있다. 이 경우, 카메라 모드 설정부(도 2의 104 참조)는 카메라를 저전력 모드로 설정할 수 있다.
또한, 바이오 신호 유형 결정부(도 2의 103 참조)는 심전도 센서의 측정 값이 기설정된 기준 심전도 범위를 벗어나 소폭 하강하고, 체온 센서의 측정 값이 기설정된 기준 체온 범위를 벗어나 저하되어 있는 경우, 바이오 신호의 유형이 '우울한 상태'에 해당하는 것으로 판단할 수 있다. 이 경우, 카메라 모드 설정부(도 2의 104 참조)는 카메라를 실시간 중계 모드로 설정하고, 추가 동작 수행부(미도시)는 기설정된 사용자의 가족 또는 친구의 연락처로 알람 메시지 및 실시간 영상 및 사용자의 위치를 전송할 수 있다.
도 5 내지 도 6은 본 발명의 일 실시예에 따라 카메라(500)가 외부 환경에 구비되는 예시를 설명하기 위한 도면이다.
전술한 바와 같이 카메라(500a)는 카메라 운용 장치(100) 및 웨어러블 디바이스(300)와 별도로 구성될 수 있다. 이 때 카메라(500a)는 본 발명에 따른 영상촬영만을 위한 전용 카메라일 수도 있고, 독자적인 기능을 수행하는 카메라일 수도 있다. 가령 도 5에 도시된 바와 같이, 카메라(500a)는 자동차에 설치되는 블랙박스일 수도 있다. 바꾸어 말하면, 자동차에 설치된 블랙박스는 블랙박스 본연의 기능 외에, 본 발명에 따른 카메라(500a)의 기능을 수행할 수도 있다.
도 5에 도시된 바와 같이, 자동차에 설치된 블랙박스가 카메라(500a)인 경우, 카메라 운용 장치(100)는 사용자(400)의 바이오 신호에 따라 블랙박스, 즉 카메라(500a)의 동작 모드를 설정할 수 있다.
가령, 카메라 운용 장치(100)는 사용자(400)가 긴장/흥분 상태라고 판단되는 경우, 카메라(500a)의 동작 모드를 고해상도 촬영 모드로, 카메라 운용 장치(100)의 동작 모드를 블랙박스 모드로 설정할 수 있다. 또한 카메라 운용 장치(100)는 사용자(400)가 긴장/흥분 상태가 아니라고 판단되는 경우 카메라(500a) 및 카메라 운용 장치(100) 각각의 동작 모드를 저전력 모드로 설정할 수 있다. 각 모드에 대한 상세한 설명은 전술한 바와 같으므로 생략한다.
이로써, 본 발명은 운전자의 바이오 신호에 따라 카메라(500a) 및/또는 카메라 운용 장치(100)의 동작 모드를 변경하여 각 상황에 맞는 영상을 획득할 수 있을 뿐만 아니라 메모리를 보다 효율적으로 사용할 수 있다. 또한 외부환경에 이미 설치되어 있는 카메라를 활용함으로써, 보다 경제적이고 효율적으로 영상을 획득할 수 있다.
도 6에 도시된 바와 같이, 가정 내에 설치된 CCTV가 카메라(500b)인 경우, 카메라 운용 장치(100)는 사용자(400)의 바이오 신호에 따라 카메라(500b)의 동작 모드를 설정할 수 있고, 나아가 카메라(500b)가 획득한 영상과 더불어 사용자(400)의 바이오 신호를 함께 저장할 수 있다.
가령, 카메라 운용 장치(100)는 사용자(400)가 수면 중 심장발작, 심정지 위험 상태라고 판단되는 경우, 카메라(500b)의 동작 모드를 실시간 중계 모드로, 카메라 운용 장치(100)의 동작 모드를 헬스케어모드로 설정할 수 있다. 물론 카메라 운용 장치(100)는 사용자(400)가 심장발박, 심정지 위험 상태 또는 기타 위험상태가 아니라고 판단되는 경우 카메라(500b) 및 카메라 운용 장치(100) 각각의 동작 모드를 저전력 모드로 설정할 수 있다. 각 모드에 대한 상세한 설명은 전술한 바와 같으므로 생략한다.
이로써 본 발명은 사용자(400)의 바이오 신호에 따라 카메라(500b) 및/또는 카메라 운용 장치(100)의 동작 모드를 변경함으로써 각 상황에 맞는 영상을 획득할 수 있을 뿐만 아니라 영상의 각 시점에서 사용자(400)의 상태가 어떠한지 손쉽게 파악할 수 있도록 할 수 있다.
도 7내지 도 9는 본 발명의 일 실시예에 따른 유저인터페이스를 설명하기 위한 도면이다.
도 7은 웨어러블 디바이스(300) 및 카메라(500)와의 연결을 설정하는 유저인터페이스가 카메라 운용 장치(100)의 디스플레이부(미도시)에 표시된 화면의 예시이다.
먼저 첫번째 화면(710)을 참조하면, 사용자는 연결 대상을 설정할 수 있다. 전술한 바와 같이 카메라 운용 장치(100), 웨어러블 디바이스(300) 및 카메라(500)는 통합되어 구성될 수도 있지만, 물리적으로 구분되어 구성될 수도 있다. 각 구성이 물리적으로 구분되어 있는 경우, 사용자는 도 7에 도시된 인터페이스를 통해, 각 구성간의 통신연결을 설정할 수 있다.
가령 사용자는 연결 대상에서 'Black Box A'를 선택하여 카메라 운용 장치(100)와 카메라(500)를 연결할 수 있고, 이러한 경우 통신 연결부(106)는 카메라 운용 장치(100)와 Black Box A의 통신 연결을 구성할 수 있다.
두 번째 화면(720)을 참조하면, 사용자는 연결 대상과 공유할 항목을 선택할 수 있다. 예컨대 사용자는 선택한 'Black Box A'와 'Heart Rate' 및 'Brain Wave'항목을 공유할 수 있다.
이와 같이 사용자는 도 7에 도시된 인터페이스를 통하여 각 구성 간의 통신연결을 구성할 수 있다.
도 8은 카메라(500)에서 카메라 운용 장치(100)와의 연결을 설정하는 유저인터페이스가 디스플레이부(미도시)에 표시된 화면의 예시이다.
화면(810)을 참조하면, 사용자는 카메라(500)의 접근 비밀번호에 관한 설정을 할 수도 있고, 카메라(500)가 카메라 운용 장치(100)와 공유할 데이터 항목에 관한 설정을 할 수도 있다.
다만, 이러한 화면(810)의 구성은 예시적인 것으로, 카메라(500)가 디스플레이수단(미도시)을 구비한 경우 카메라에 구비된 디스플레이 수단에 이와 같은 화면(810)이 표시될 수 있고, 카메라(500)가 디스플레이수단을 구비하지 않은 경우, 카메라(500)와 네트워크로 연결된 외부 장치(예컨대 카메라 운용 장치)에서 이와 같은 화면(810)이 표시될 수도 있다.
도 9는 카메라 운용 장치(100)가 웨어러블 디바이스(300)로부터 수신한 바이오 신호를 표시하는 화면의 예시이다.
먼저 첫번째 화면(910)을 참조하면, 카메라 운용 장치(100)는 다양한 방식에 따라 바이오 신호를 표시할 수 있다. 가령 첫번째 화면(910)에 도시된 바와 같이, 카메라 운용 장치(100)는 웨어러블 디바이스(300)로부터 수신한 사용자(400)의 바이오 신호에 기초하여 사용자(400)의 심전도, 근전도, 뇌파, 온도 및 혈압에 대한 표준치와 측정치를 도형으로 도시하여 표시할 수 있다.
두 번째 화면(920)을 참조하면, 카메라 운용 장치(100)는 바이오 신호에 기초한 사용자의 상태 정보를 표시할 수 있다. 가령 카메라 운용 장치(100)는 바이오 신호의 유형에 기초하여, 카메라(500)를 통해 획득한 영상을 '기쁨', '놀람', '분노', '수면', '아픔' 및 '일반'의 카테고리로 분류하고, 각 카테고리를 표시할 수 있다. 이 때 사용자는 어느 하나의 카테고리를 선택함으로써 해당 카테고리에 속하는 영상을 확인할 수 있다.
또한 카메라 운용 장치(100)는 세 번째 화면(930)과 같이 바이오 신호에 대한 요약정보를 표시할 수도 있다. 가령 카메라 운용 장치(100)는 주요 이벤트가 발생한 시간을 표시하고, 사용자가 해당 시간을 선택한 경우 구체적인 이벤트 내역을 더 표시할 수 있다.
다만 이와 같은 인터페이스 및 화면은 예시적인 것으로 본 발명이 사상이 이에 제한되는 것은 아니다.
화면에 표시되는 정보, 레이아웃 등은 사용자의 설정에 따라 결정될 수 있다. 사용자의 설정에 따라 바이오 신호, 사용자 상태 정보 및 바이오 신호 요약정보 중 적어도 하나를 동시에 표시할 수 있다.
이상 설명된 본 발명에 따른 실시예는 컴퓨터 상에서 다양한 구성요소를 통하여 실행될 수 있는 컴퓨터 프로그램의 형태로 구현될 수 있으며, 이와 같은 컴퓨터 프로그램은 컴퓨터로 판독 가능한 매체에 기록될 수 있다. 이때, 매체는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치를 포함할 수 있다. 나아가, 매체는 네트워크 상에서 전송 가능한 형태로 구현되는 무형의 매체를 포함할 수 있으며, 예를 들어 소프트웨어 또는 애플리케이션 형태로 구현되어 네트워크를 통해 전송 및 유통이 가능한 형태의 매체일 수도 있다.
한편, 상기 컴퓨터 프로그램은 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 프로그램의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함될 수 있다.
본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, “필수적인”, “중요하게” 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.
따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 또는 이로부터 등가적으로 변경된 모든 범위는 본 발명의 사상의 범주에 속한다고 할 것이다.

Claims (17)

  1. 웨어러블(wearable) 센서로부터 사용자의 바이오 신호를 획득하는 단계;
    상기 바이오 신호를 기초로 상기 사용자의 상태가 안정 상태인지 여부를 판단하는 단계;
    상기 사용자의 상태가 상기 안정 상태인 경우, 카메라를 저전력 모드로 설정하는 단계;
    상기 사용자의 상태가 상기 안정 상태가 아닌 경우, 상기 바이오 신호의 유형을 결정하는 단계; 및
    상기 카메라를 상기 바이오 신호의 유형에 따른 모드로 설정하는 단계;를 포함하는, 카메라 운용 장치의 운용 방법.
  2. 제1 항에 있어서,
    상기 안정 상태인지 여부를 판단하는 단계는
    상기 웨어러블 센서 중 심전도(electrocardiogram; ECG) 센서의 측정 값이 기설정된 기준 심전도 범위 내이고, 상기 웨어러블 센서 중 체온 센서의 측정 값이 기설정된 기준 체온 범위 내인 경우, 상기 사용자의 상태가 상기 안정 상태인 것으로 판단하는 것을 특징으로 하는, 카메라 운용 장치의 운용 방법.
  3. 제1 항에 있어서,
    상기 저전력 모드로 설정하는 단계는
    상기 카메라의 프레임레이트를 기설정된 기준 프레임레이트 미만으로 설정하고, 상기 카메라의 영상 떨림 보정 기능을 오프(off)로 설정하는 것을 특징으로 하는, 카메라 운용 장치의 운용 방법.
  4. 제1 항에 있어서,
    상기 카메라는 상기 사용자의 신체에 구비되는 웨어러블 카메라(wearable camera)인 것을 특징으로 하는, 카메라 운용 장치의 운용 방법.
  5. 제1 항에 있어서,
    상기 카메라는 외부 환경에 구비되는 것을 특징으로 하는, 카메라 운용 장치의 운용 방법.
  6. 제5 항에 있어서,
    상기 카메라와 통신 연결을 설정하는 단계를 더 포함하는 것을 특징으로 하는, 카메라 운용 장치의 운용 방법.
  7. 제1 항에 있어서,
    상기 모드 설정 단계에서 상기 카메라가 실시간 중계 모드, 액션 캠 모드 및 고해상도 촬영 모드 중 어느 하나의 모드로 설정된 경우,
    상기 사용자의 상태가 상기 안정 상태가 아니라고 판단된 시점과 대응되는 시간범위에서, 상기 카메라로부터 수신한 영상을 구성하는 모든 프레임을 저장하는 단계;를 더 포함하는 것을 특징으로 하는, 카메라 운용 장치의 운용 방법.
  8. 제7 항에 있어서,
    상기 사용자의 상태가 상기 안정 상태가 아니라고 판단된 시점과 대응되는 시간범위에서, 상기 모든 프레임과 상기 바이오 신호를 매핑(Mapping)하여 저장하는 단계;를 더 포함 하는 것을 특징으로 하는, 카메라 운용 장치의 운용 방법.
  9. 제1 항에 있어서,
    상기 모드 설정 단계에서 상기 카메라가 저전력 모드로 설정된 경우,
    기 설정된 프레임 선별 조건에 따라 상기 카메라로부터 수신한 영상을 구성하는 복수의 프레임 중 일부 프레임만을 저장하는 단계;를 더 포함하는 것을 특징으로 하는, 카메라 운용 장치의 운용 방법.
  10. 제1 항에 있어서,
    상기 웨어러블 센서에 상기 카메라의 동작 결과에 기초한 피드백 신호를 전송하는 단계;를 더 포함하는 것을 특징으로 하는, 카메라 운용 장치의 운용 방법.
  11. 웨어러블 센서로부터 사용자의 바이오 신호를 획득하는 바이오 신호 획득부;
    상기 바이오 신호를 기초로 상기 사용자의 상태가 안정 상태인지 여부를 판단하는 사용자 상태 판단부;
    상기 사용자의 상태가 상기 안정 상태가 아닌 경우, 상기 바이오 신호의 유형을 결정하는 바이오 신호 유형 결정부; 및
    상기 사용자의 상태가 상기 안정 상태인 경우, 카메라를 저전력 모드로 설정하고, 상기 사용자의 상태가 상기 안정 상태가 아닌 경우, 상기 카메라를 상기 바이오 신호의 유형에 따른 모드로 설정하는 카메라 모드 설정부;를 포함하는 카메라 운용 장치.
  12. 제11 항에 있어서,
    상기 웨어러블 센서는
    뇌전도(electroencephalography; EEG) 센서, 근전도(electromyography; EMG) 센서, 심전도(electrocardiogram; ECG) 센서 및 체온 센서를 포함하는 것을 특징으로 하는, 카메라 운용 장치.
  13. 제11 항에 있어서,
    상기 웨어러블 센서에 상기 카메라의 동작 결과에 기초한 피드백 신호를 전송하는 피드백 신호 전송부;를 더 포함하는 것을 특징으로 하는, 카메라 운용 장치.
  14. 제11 항에 있어서,
    상기 카메라는 상기 사용자의 신체에 구비되는 웨어러블 카메라(wearable camera)인 것을 특징으로 하는, 카메라 운용 장치.
  15. 제11 항에 있어서,
    상기 카메라는 외부 환경에 구비되는 것을 특징으로 하는, 카메라 운용 장치.
  16. 제11 항에 있어서,
    상기 카메라와 통신 연결을 설정하는 통신 연결부;를 더 포함하는 것을 특징으로 하는, 카메라 운용 장치.
  17. 사용자의 바이오 신호를 획득하는 적어도 하나의 웨어러블 센서;
    영상을 획득하는 카메라; 및
    상기 바이오 신호를 획득하고, 상기 바이오 신호를 기초로 상기 사용자의 상태를 판단하고, 상기 사용자의 상태를 기초로 상기 카메라의 모드를 설정하는 카메라 운용 장치;를 포함하는, 카메라 운용 시스템.
PCT/KR2016/009290 2016-02-05 2016-08-23 카메라 운용 장치의 운용 방법, 시스템 및 이를 위한 장치 WO2017135538A1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201680079562.7A CN108475462B (zh) 2016-02-05 2016-08-23 用于相机操作设备的操作方法和***及其设备
US15/945,264 US10791269B2 (en) 2016-02-05 2018-04-04 Operation method and system for camera operation apparatus, and apparatus therefor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0014722 2016-02-05
KR1020160014722A KR102369800B1 (ko) 2016-02-05 2016-02-05 바이오 신호에 기초한 웨어러블 카메라 운용 방법, 시스템 및 이를 위한 장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/945,264 Continuation US10791269B2 (en) 2016-02-05 2018-04-04 Operation method and system for camera operation apparatus, and apparatus therefor

Publications (1)

Publication Number Publication Date
WO2017135538A1 true WO2017135538A1 (ko) 2017-08-10

Family

ID=59501023

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/009290 WO2017135538A1 (ko) 2016-02-05 2016-08-23 카메라 운용 장치의 운용 방법, 시스템 및 이를 위한 장치

Country Status (4)

Country Link
US (1) US10791269B2 (ko)
KR (1) KR102369800B1 (ko)
CN (1) CN108475462B (ko)
WO (1) WO2017135538A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3883234B1 (en) * 2020-03-17 2022-02-02 Axis AB Wearable camera and a method for power consumption optimization in the wearable camera

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090107414A (ko) * 2008-04-08 2009-10-13 현종철 생체 신호에 기반한 사용자 응급 상황 알림 장치 및 그 시계
KR20100099881A (ko) * 2009-03-04 2010-09-15 연세대학교 산학협력단 만성질환자를 위한 재택 원격 가정 간호 서비스 시스템 및 방법
KR101489896B1 (ko) * 2014-10-17 2015-02-06 주식회사 스마트로봇 비상호출 장치 및 그 방법
KR101569880B1 (ko) * 2015-03-31 2015-11-17 넥시스 주식회사 영상 신호 생성을 위한 웨어러블 장치 및 그 제어를 위한 시스템
US20150351641A1 (en) * 2013-01-17 2015-12-10 Seung Wan Kang Bio information measurement device and bio information measurement method

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009138976A2 (en) * 2008-05-12 2009-11-19 Earlysense Ltd Monitoring, predicting and treating clinical episodes
KR101051235B1 (ko) 2009-07-13 2011-07-21 박원일 의류에 착용하는 웨어러블 휴대용 방범 ｃｃｔｖ 감시 장치
EP2698686B1 (en) 2012-07-27 2018-10-10 LG Electronics Inc. Wrist-wearable terminal and control method thereof
WO2014190234A1 (en) * 2013-05-23 2014-11-27 Iphenotype Llc Method and system for maintaining or improving wellness
KR20150109993A (ko) 2014-03-21 2015-10-02 삼성전자주식회사 사용자의 선호 감정 패턴을 결정하는 방법 및 시스템
KR101465587B1 (ko) 2014-08-07 2014-11-27 (주)와이브레인 웨어러블 장치 및 이의 제어 방법
KR20160149911A (ko) * 2015-06-19 2016-12-28 삼성전자주식회사 생체 정보 측정 방법 및 이를 수행하는 전자 장치
JP6873914B2 (ja) * 2015-07-03 2021-05-19 インテル・コーポレーション ウェアラブルデバイスにおけるデータ圧縮のための装置および方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090107414A (ko) * 2008-04-08 2009-10-13 현종철 생체 신호에 기반한 사용자 응급 상황 알림 장치 및 그 시계
KR20100099881A (ko) * 2009-03-04 2010-09-15 연세대학교 산학협력단 만성질환자를 위한 재택 원격 가정 간호 서비스 시스템 및 방법
US20150351641A1 (en) * 2013-01-17 2015-12-10 Seung Wan Kang Bio information measurement device and bio information measurement method
KR101489896B1 (ko) * 2014-10-17 2015-02-06 주식회사 스마트로봇 비상호출 장치 및 그 방법
KR101569880B1 (ko) * 2015-03-31 2015-11-17 넥시스 주식회사 영상 신호 생성을 위한 웨어러블 장치 및 그 제어를 위한 시스템

Also Published As

Publication number Publication date
US10791269B2 (en) 2020-09-29
CN108475462A (zh) 2018-08-31
KR20170093390A (ko) 2017-08-16
CN108475462B (zh) 2020-10-23
KR102369800B1 (ko) 2022-03-03
US20180227491A1 (en) 2018-08-09

Similar Documents

Publication Publication Date Title
WO2019088769A1 (ko) 개방형 api 기반 의료 정보 제공 방법 및 시스템
WO2017095145A1 (en) Method and apparatus for providing search information
WO2021221249A1 (ko) 스마트 가축 관리 시스템 및 그 방법
WO2020153765A2 (ko) 흉부조직저항 값을 이용한 만성 심부전 상태 모니터링 시스템 및 그 이용방법
WO2015137673A1 (en) Method for determining data source
WO2016006734A1 (ko) 생체정보를 인식하는 방법 및 장치
WO2017150795A1 (en) Video display apparatus and method for reducing vr sickness
WO2020133765A1 (zh) 健身管理方法、装置及计算机可读存储介质
WO2020106104A1 (en) Electronic device for providing meditation contents and operating method thereof
WO2020197153A1 (ko) 폐쇄성 수면 무호흡 위험도 선별을 위한 전자 장치 및 그것의 동작 방법
WO2021101073A1 (ko) 생체 데이터를 획득하는 장치 및 그 방법
WO2022025678A1 (en) Electronic device for evaluating sleep quality and method for operation in the electronic device
WO2018143509A1 (ko) 이동 로봇 및 그 제어방법
EP3365755A1 (en) Video display apparatus and method for reducing vr sickness
WO2013141667A1 (ko) 일상 건강 정보 제공 시스템 및 일상 건강 정보 제공 방법
WO2017135538A1 (ko) 카메라 운용 장치의 운용 방법, 시스템 및 이를 위한 장치
WO2017099340A1 (ko) 전자 장치, 그의 신호 처리 방법, 생체 신호 측정 시스템 및 비일시적 컴퓨터 판독가능 기록매체
WO2020032400A1 (ko) 사용자의 감정을 판단하기 위한 방법 및 이를 위한 장치
WO2012020861A1 (ko) 영상표시기기, 영상표시시스템 및 그 사용자 감정 상태 분석 방법
WO2024063321A1 (ko) 스마트 인솔 기반 부분 체중 부하 보행 가이드 제공 방법 및 그 시스템
WO2019164326A1 (ko) 실시간 콘텐트 데이터를 공유하는 전자 장치
WO2022177255A2 (ko) 원격 상담 서비스 제공 방법 및 시스템
WO2022030961A1 (ko) 위험 정보를 감지하는 전자 장치 및 방법
WO2021172843A1 (en) Method for transceiving information and electronic device thereof
WO2022114621A1 (ko) 부정맥 치료 장치 및 상기 부정맥 치료 장치를 이용하여 사용자의 부정맥을 치료하는 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16889516

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16889516

Country of ref document: EP

Kind code of ref document: A1