WO2022080612A1 - 휴대용 음향기기 - Google Patents
휴대용 음향기기 Download PDFInfo
- Publication number
- WO2022080612A1 WO2022080612A1 PCT/KR2021/004935 KR2021004935W WO2022080612A1 WO 2022080612 A1 WO2022080612 A1 WO 2022080612A1 KR 2021004935 W KR2021004935 W KR 2021004935W WO 2022080612 A1 WO2022080612 A1 WO 2022080612A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- earphone unit
- unit
- earphone
- microphone
- terminal
- Prior art date
Links
- 238000004891 communication Methods 0.000 claims abstract description 43
- 230000005236 sound signal Effects 0.000 claims abstract description 38
- 238000000034 method Methods 0.000 claims description 29
- 230000033001 locomotion Effects 0.000 claims description 23
- 230000001133 acceleration Effects 0.000 claims description 16
- 230000004913 activation Effects 0.000 claims description 9
- 238000010586 diagram Methods 0.000 description 19
- 230000006870 function Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000012549 training Methods 0.000 description 5
- 230000003213 activating effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000000415 inactivating effect Effects 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000011017 operating method Methods 0.000 description 1
- 229920001296 polysiloxane Polymers 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1041—Mechanical or electronic switches, or control elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1016—Earpieces of the intra-aural type
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
- H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
- H04R2201/107—Monophonic and stereophonic headphones with microphone for two-way hands free communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2420/00—Details of connection covered by H04R, not provided for in its groups
- H04R2420/07—Applications of wireless loudspeakers or wireless microphones
Definitions
- the present disclosure relates to a portable audio device that is electrically connected to a terminal and reproduces audio.
- the portable audio device refers to an audio reproduction device that receives audio data from a terminal and transmits the audio data collected through a microphone to the terminal.
- portable audio devices As for portable audio devices, research and development on portable audio devices in consideration of portability and convenience, such as a headphone type that is put on the head in a band shape, and a method that hangs or fits over the ear so that it can be carried on the user's body, is increasing.
- the portable sound device is equipped with a microphone
- the portable audio device properly received voice data of a small sound such as a whisper from the user depending on the location, performance, and surrounding environment of the microphone provided in the portable audio device.
- voice data of a small sound such as a whisper from the user depending on the location, performance, and surrounding environment of the microphone provided in the portable audio device.
- An object of the present disclosure is to detect a user's non-wearing of the first earphone by using a sensor provided in a portable audio device including the first earphone and the second earphone, and respond to the user's non-wearing of the first earphone by using the first earphone This is to adjust the negative microphone settings.
- An object of the present disclosure is to receive a microphone use request from a terminal connected to a portable sound device, detect a user not wearing the first earphone, and adjust the microphone setting of the first earphone unit.
- the portable sound device includes a first earphone unit and a second earphone unit
- the first earphone unit includes a communication unit, a sound output unit for outputting an audio signal received through the communication unit, a microphone, and a first earphone A sensor unit for detecting a wearing state of the unit and a processor for setting the first earphone unit to a microphone mode when the first earphone unit is detected as not being worn.
- the second earphone unit includes a communication unit, a sound output unit for outputting an audio signal received through the communication unit, a microphone, and a processor for setting the second earphone unit to a voice reception mode when the first earphone unit is set to a microphone mode may include
- the microphone mode may include a mode for turning on the microphone of the first earphone unit.
- the microphone mode may further include turning off the sound output unit of the first earphone unit.
- the voice reception mode may include a mode for controlling the sound output unit of the second earphone unit on.
- the sensor unit of the first earphone unit may detect the wearing state by using at least one of a proximity sensor, an acceleration sensor, a motion sensor, a gyro sensor, and a conduction sensor.
- the sensor unit of the first earphone unit includes a proximity sensor, and when the processor of the first earphone unit detects that the information obtained through the proximity sensor of the first earphone unit deviates from a preset distance, the first earphone unit It can be judged as unused.
- the sensor unit of the first earphone unit includes a motion sensor, and the processor of the first earphone unit detects a gesture corresponding to receiving a voice signal through the first earphone unit through the motion sensor of the first earphone unit. It may be determined that the first earphone unit is not worn.
- the processor of the first earphone unit may set the first earphone unit to the microphone mode when the non-wearing state of the first earphone unit is maintained for a preset time or longer.
- the processor of the first earphone unit may set the first earphone unit to a microphone mode when the first earphone unit is not worn for a preset time or longer and the first earphone unit is not in a charged state.
- the communication unit of the first earphone unit and the communication unit of the second earphone unit communicate with a terminal, and the processor of the first earphone unit may set the first earphone unit to a microphone mode when receiving a microphone use request from the terminal .
- the microphone use request requested from the terminal may include at least one of a change in an application setting of the terminal, a microphone activation request in the application, and a call origination and call reception.
- the processor of the first earphone unit transmits an audio signal input through the microphone of the first earphone unit to the terminal, and the processor of the second earphone unit uses the audio output unit of the second earphone unit to receive audio from the terminal. signal can be output.
- the sound device system may include a portable sound device and a terminal including a first earphone unit and a second earphone unit.
- the terminal communicates with the portable sound device to transmit and receive audio signals, and the portable sound device sets the first earphone unit to a microphone mode when the non-wearing state of the first earphone unit is detected, and the second earphone unit receives voice mode can be set.
- the method of operating a portable sound device includes the steps of: receiving an audio signal from a terminal by the portable sound device, detecting a non-wearing state of the first earphone unit, and setting the first earphone unit to a microphone mode and setting the second earphone unit to a voice reception mode.
- the user's non-wearing of the first earphone unit may be detected by using a sensor provided in the portable sound device.
- voice data uttered by the user in a low voice can be effectively received by adjusting the microphone setting of the first earphone unit.
- the audio data transmitted from the terminal can be completely output by setting the worn second earphone unit to the voice reception mode.
- FIG. 1 is a diagram illustrating a system of a terminal and a portable sound device according to an embodiment of the present disclosure.
- FIG. 2 is a configuration diagram illustrating a first earphone unit and a second earphone unit of a portable audio device according to an embodiment of the present disclosure.
- FIG. 3 is a diagram illustrating a configuration of a portable acoustic device according to an exemplary embodiment of the present disclosure.
- FIG. 4 is a diagram illustrating a configuration of a terminal according to an embodiment of the present disclosure.
- FIG. 5 is a diagram illustrating a flowchart according to an embodiment of the present disclosure.
- FIG. 6 is a diagram illustrating a flowchart according to an embodiment of the present disclosure.
- FIG. 7 is a view for explaining wearing and not wearing the first earphone unit according to an embodiment of the present disclosure.
- FIG. 8 is a diagram illustrating a user utterance scenario according to an embodiment of the present disclosure.
- FIGS. 9 and 10 are diagrams illustrating a microphone use request through a terminal according to an embodiment of the present disclosure.
- FIG. 1 is a diagram illustrating a system of a terminal and a portable sound device according to an embodiment of the present disclosure.
- FIG. 1 is a view showing an example of a wireless sound system 1 of an audio reproducing apparatus or portable sound device 100 connected to a terminal 200, for example, a portable sound device including a pair of earphone units 101 and 102 am.
- the portable audio device 100 may be capable of wireless communication with the terminal 200 .
- the portable sound device 100 is a sound device capable of wirelessly receiving and listening to music or radio broadcasts played on the terminal 200 while being worn on the user's ear.
- the user wears any one of the wireless earphone units 101 and 102, for example, the first earphone unit 101 or the second earphone unit 102, or the first earphone unit 101 and the second earphone unit.
- audio data may be received through one or both of the earphone units 101 and 102 , and the received audio may be played back.
- audio data may be monophonic.
- each of the first earphone unit 101 and the second earphone unit 102 may receive the same audio data.
- the audio data may be stereophonic, and each of the first earphone unit 101 and the second earphone unit 102 may receive different audio data corresponding to a left channel and a right channel. .
- each of the first earphone unit 101 and the second earphone unit 102 may reproduce data obtained by mixing stereophonic audio data and monophonic audio data.
- the pair of earphone units 101 and 102 may be simultaneously connected to the terminal 200 .
- any one of the pair of earphone units eg, the first earphone unit 101
- the rest may be a slave sound device.
- the terminal 200 may communicate with the master acoustic device to transmit/receive audio data, and the master acoustic device and the slave acoustic device may communicate with each other to transmit/receive audio data.
- the slave sound device may communicate with the terminal 200 through the master sound device. That is, the slave acoustic device and the terminal 200 are connected through the master acoustic device, and audio data can be transmitted/received to and from the slave acoustic device terminal.
- the terminal 100 when the portable sound device 100 operates as a group, the terminal 100 is connected to each earphone unit and transmits an audio signal individually to each earphone unit to output sound. .
- the terminal 200 may be a smartphone device, and for those skilled in the art, a wearable device such as a desktop, a notebook computer, a laptop, a tablet computer, a smartphone, a smart watch, a hybrid device, and glasses It will be appreciated to include devices and the like.
- the portable sound device 100 including a pair of earphones can communicate with each other through any available wireless communication protocol including wireless communication protocols and standards-based wireless communication protocols such as Bluetooth, Wi-Fi, etc. .
- FIG. 1 a pair of earphone units 101 and 102 is shown, but this is only an example, and any number of wired or wirelessly connected audio reproduction devices, including any type of wired or wireless audio headset, are possible. should be interpreted as including all of them.
- FIG. 2 is a configuration diagram illustrating a first earphone unit and a second earphone unit of a portable audio device according to an embodiment of the present disclosure
- each of the first earphone unit 101 and the second earphone unit 102 included in the portable sound device 100 is inserted into the user's ear from the head unit 10 and the head unit 10 . It may include an in-ear part 30 contacting a part of the user's body and a body part 20 connected to the head part 10 .
- the in-ear part 30 may be formed to protrude from one surface of the head part 10 , and the in-ear part 30 may be made of a cushion material such as silicone to provide a user with a comfortable fit.
- the body 20 may have a stick shape protruding from one surface of the head 10 .
- One end of the body 20 may be provided with a microphone for receiving the user and other audio signals.
- the microphone may serve to receive the user's utterance.
- a charging terminal is provided on the side of the body 20 so that the charging terminal can be in contact with the charger when charging the earphone unit.
- the head unit 10 may have a speaker hole through which the received audio data is output to the outside.
- a sensor unit including not only a microphone but also a proximity sensor and a touch pad may be provided on one surface of the head unit 10 .
- FIG. 3 is a diagram illustrating a configuration of a portable acoustic device according to an exemplary embodiment of the present disclosure.
- the portable sound device 100 includes a communication unit 110 , an input unit 120 , a charging unit 130 , a sensing unit 140 , an output unit 150 , a memory 170 and a processor 180 , etc. may include
- the communication unit 110 may also be referred to as a communication modem or a communication circuit.
- the communication unit 110 may transmit/receive data to and from external devices such as the wireless sound device 300 using wired/wireless communication technology.
- the communication unit 110 may transmit and receive sensor information, a user input, a learning model, a control signal, and the like with external devices.
- the communication technology used by the communication unit 110 includes GSM (Global System for Mobile communication), CDMA (Code Division Multi Access), LTE (Long Term Evolution), 5G, WLAN (Wireless LAN), Wi-Fi (Wireless-Fidelity), There are Bluetooth (Bluetooth), RFID (Radio Frequency Identification), Infrared Data Association (IrDA), ZigBee, NFC (Near Field Communication), and the like.
- GSM Global System for Mobile communication
- CDMA Code Division Multi Access
- LTE Long Term Evolution
- 5G Fifth Generation
- WLAN Wireless LAN
- Wi-Fi Wireless-Fidelity
- Bluetooth Bluetooth
- RFID Radio Frequency Identification
- IrDA Infrared Data Association
- ZigBee ZigBee
- NFC Near Field Communication
- the input unit 120 may be referred to as an input interface.
- the input unit 120 may acquire various types of data.
- the input unit 120 may include a microphone 122 for receiving audio data, a user input unit 123 for receiving information from a user, and the like.
- a signal obtained from the microphone 122 may be referred to as sensing data or sensor information.
- the audio data collected by the input unit 120 may be analyzed and processed as a user's control command.
- the input unit 120 may acquire raw input data, and in this case, the processor 180 may pre-process the audio data and then transmit the audio data to another terminal through the communication unit.
- the microphone 122 processes an external sound signal as electrical voice data.
- the processed voice data may be utilized in various ways according to a function (or a running application program) being performed by the terminal 100 .
- various noise removal algorithms for removing noise generated in the process of receiving an external sound signal may be applied to the microphone 122 .
- the user input unit 123 is for receiving information from a user, and when information is input through the user input unit 123 , the processor 180 may control the operation of the portable sound device 100 to correspond to the input information. there is.
- the user input unit 123 includes a mechanical input means (eg, a button positioned on the front/rear or side of the portable sound device 100, a dome switch, a jog wheel, a jog switch, etc.) and a touch input means can do.
- the touch input means consists of a virtual key, a soft key, or a visual key displayed on the touch screen through software processing, or is disposed on a part other than the touch screen. It can be made of a touch key (touch key).
- the charging unit 130 may serve to manage the power of the portable sound device 100 .
- the charging unit 130 may be provided in each of at least one earphone unit included in the portable sound device 100 to supply power to each earphone unit.
- the charging unit 130 may include a battery, and may be charged through energy supplied through a charging terminal provided at one end of the earphone unit.
- the charging terminal of the charging unit 130 may supply power to the battery by being connected to a charger to which power is supplied.
- the processor 180 may stop the operation of the input unit 120 and the output unit 150 when the charging terminal is in contact with the charger and the charging unit 130 determines that the portable sound device 100 is in a charging state.
- the sensing unit 140 may be referred to as a sensor unit or a sensor.
- the sensing unit 140 may acquire at least one of internal information of the portable acoustic device 100 , surrounding environment information of the portable acoustic device 100 , and user information by using various sensors.
- Sensors included in the sensing unit 140 include a proximity sensor, an illuminance sensor, an acceleration sensor, a magnetic sensor, a gyro sensor, an inertial sensor, an RGB sensor, an IR sensor, a fingerprint recognition sensor, an ultrasonic sensor, an optical sensor, a microphone, a lidar, and a radar. etc. may be included.
- the output unit 150 may be referred to as an output interface.
- the output unit 150 may generate an output related to sight, hearing, or touch.
- the output unit 150 may include at least one of a sound output unit 152 , a haptic module 153 , and an optical output unit 154 .
- the display unit 151 displays (outputs) information processed by the portable sound device 100 .
- the sound output unit 152 may output audio data received from the communication unit 110 or stored in the memory 170 in a call signal reception, a call mode or a recording mode, a voice recognition mode, a broadcast reception mode, and the like.
- the sound output unit 152 may include at least one of a receiver, a speaker, and a buzzer.
- the haptic module 153 generates various tactile effects that a user can feel.
- a representative example of the tactile effect generated by the haptic module 153 may be vibration.
- the light output unit 154 outputs a signal for notifying the occurrence of an event by using the light of the light source of the portable sound device 100 .
- the portable sound device 100 may receive an event generated in the terminal 200 and output an output corresponding to the event.
- Examples of the event generated in the terminal 200 may include message reception, call transmission/reception signal reception, missed call, alarm, schedule notification, email reception, information reception through an application, and other audio information reception.
- the memory 170 may store data supporting various functions of the portable sound device 100 .
- the processor 180 may control the overall operation of the portable sound device 100 .
- the audio signal processed by the processor 180 may be audio output to the audio output unit 152 . Also, the audio signal processed by the processor 180 may be input to an external output device through an external device interface unit (not shown).
- the processor 180 may control the components of the portable sound device 100 to perform a determined operation. To this end, the processor 180 may request, retrieve, receive, or utilize data of the memory 170, and perform a predicted operation or an operation determined to be desirable among the at least one executable operation. 100) can be controlled.
- the processor 180 may generate a control signal for controlling the corresponding external device and transmit the generated control signal to the corresponding external device.
- the processor 180 may obtain intention information with respect to a user input, and determine a user's requirement based on the obtained intention information.
- the processor 180 may operate by combining two or more of the components included in the portable sound device 100 in order to drive the application program.
- the portable acoustic device 100 shown in FIG. 3 is only an embodiment of the present disclosure, and some of the illustrated components are integrated, added, or may be omitted.
- each of at least one earphone unit (eg, the first earphone unit and the second earphone unit) included in the portable sound device 100 is shown in FIG.
- Each of the three configurations may be included.
- each block is for describing an embodiment of the present disclosure, and the specific operation or device does not limit the scope of the present disclosure.
- FIG. 4 is a diagram illustrating a configuration of a terminal communicating with a portable audio device according to an embodiment of the present disclosure.
- the terminal 200 includes a communication unit 210 , an input unit 220 , a learning processor 230 , a sensing unit 240 , an output unit 250 , a memory 270 and a processor 280 , and the like. may include As described above, the terminal 200 of FIG. 4 may include a configuration similar to that of the portable audio device 100 of FIG. 3 , and the redundant description will be omitted or briefly described.
- the communication unit 210 may also be referred to as a communication modem or a communication circuit.
- the communication unit 210 may transmit/receive data to and from external devices such as the portable audio device 100 using wired/wireless communication technology.
- the communication unit 210 may transmit and receive sensor information, a user input, a learning model, a control signal, and the like with external devices.
- the communication technology used by the communication unit 210 includes GSM (Global System for Mobile communication), CDMA (Code Division Multi Access), LTE (Long Term Evolution), 5G, WLAN (Wireless LAN), Wi-Fi (Wireless-Fidelity), There are Bluetooth (Bluetooth), RFID (Radio Frequency Identification), Infrared Data Association (IrDA), ZigBee, NFC (Near Field Communication), and the like.
- GSM Global System for Mobile communication
- CDMA Code Division Multi Access
- LTE Long Term Evolution
- 5G Fifth Generation
- WLAN Wireless LAN
- Wi-Fi Wireless-Fidelity
- Bluetooth Bluetooth
- RFID Radio Frequency Identification
- IrDA Infrared Data Association
- ZigBee ZigBee
- NFC Near Field Communication
- the input unit 220 may be referred to as an input interface.
- the input unit 220 may include a camera 221 for inputting an image signal, a microphone 222 for receiving an audio signal, a user input unit 223 for receiving information from a user, and the like.
- a signal obtained from the camera 221 or the microphone 222 may be referred to as sensing data or sensor information.
- the voice data or image data collected by the input unit 220 may be analyzed and processed as a user's control command.
- the input unit 220 may acquire training data for model training and input data to be used when acquiring an output by using the training model.
- the input unit 220 may acquire raw input data, and in this case, the processor 280 or the learning processor 230 may extract an input feature by preprocessing the input data.
- the camera 221 processes an image frame such as a still image or a moving image obtained by an image sensor in a video call mode or a photographing mode.
- the processed image frame may be displayed on the display unit 251 or stored in the memory 270 .
- the user input unit 223 is for receiving information from a user, and when information is input through the user input unit 223 , the processor 280 may control the operation of the terminal 200 to correspond to the input information.
- the learning processor 230 may train a model composed of an artificial neural network by using the training data.
- the learned artificial neural network may be referred to as a learning model.
- the learning model may be used to infer a result value with respect to new input data other than the training data, and the inferred value may be used as a basis for a decision to perform a certain operation.
- the learning processor 230 may perform AI processing together with a learning processor (not shown) of an artificial intelligence server (not shown).
- the learning processor 230 may include a memory integrated or implemented in the terminal 200 .
- the learning processor 230 may be implemented using the memory 270 , an external memory directly coupled to the terminal 200 , or a memory maintained in an external device.
- the sensing unit 240 may be referred to as a sensor unit or a sensor.
- the sensing unit 240 may acquire at least one of internal information of the terminal 200 , information about the surrounding environment of the terminal 200 , and user information by using various sensors.
- Sensors included in the sensing unit 240 include a proximity sensor, an illuminance sensor, an acceleration sensor, a magnetic sensor, a gyro sensor, an inertial sensor, an RGB sensor, an IR sensor, a fingerprint recognition sensor, an ultrasonic sensor, an optical sensor, a microphone, a lidar, and a radar. etc. may be included.
- the output unit 250 may be referred to as an output interface.
- the output unit 250 may generate an output related to sight, hearing, or touch.
- the output unit 250 includes at least one of a display unit (Display Unit, 251), a sound output unit (Sound Output Unit, 252), a haptic module (Haptic Module, 253), and an optical output unit (Optical Output Unit, 254). can do.
- the display unit 251 displays (outputs) information processed by the terminal 200 .
- the display unit 251 may display execution screen information of an application program driven in the terminal 200 or UI (User Interface) and GUI (Graphic User Interface) information according to the execution screen information.
- UI User Interface
- GUI Graphic User Interface
- the display unit 251 may implement a touch screen by forming a layer structure with the touch sensor or being formed integrally with the touch sensor.
- a touch screen may function as the user input unit 223 providing an input interface between the terminal 200 and the user, and may provide an output interface between the terminal 200 and the user.
- the memory 270 may store data supporting various functions of the terminal 200 .
- the memory 270 may store input data obtained from the input unit 120 , learning data, a learning model, a learning history, and the like.
- the processor 280 may control the overall operation of the terminal 200 .
- the image signal processed by the processor 280 may be input to the display unit 251 and displayed as an image corresponding to the image signal. Also, the image signal processed by the processor 280 may be input to an external output device through an external device interface unit (not shown).
- the audio signal processed by the processor 280 may be audio output to the audio output unit 252 . Also, the audio signal processed by the processor 280 may be input to an external output device through an external device interface unit (not shown) or the portable sound device 100 .
- the processor 280 may control at least some of the components of the terminal 200 to drive an application program stored in the memory 270 . Furthermore, the processor 280 may operate by combining two or more of the components included in the terminal 200 with each other in order to drive the application program.
- FIG. 5 is a diagram illustrating a flowchart according to an embodiment of the present disclosure.
- the portable audio device 100 may include the first earphone unit 101 and the second earphone unit 102 .
- each component included in the first earphone unit 101 is used by adding '_1'
- each component included in the second earphone unit 102 is used by adding '_2'.
- '_1' and '_2' are provided for convenience to describe the embodiment of the present disclosure.
- the terminal 200 and the portable sound device 100 may be electrically connected ( S510 ).
- the terminal 200 may communicate with a plurality of earphone units (eg, the first earphone unit and the second earphone unit) included in the portable sound device 100 .
- a plurality of earphone units eg, the first earphone unit and the second earphone unit
- the first earphone unit 101 among the plurality of earphone units may be set as a master sound device, and the second earphone unit 102 may be set as a slave sound device.
- the first earphone unit 101 set as the master audio device may communicate with the second earphone unit 102 and the terminal 200 using the communication unit 110_1 . Also, the first earphone unit 101 may transmit at least a portion of the audio data received from the terminal 200 to the second earphone unit 102 .
- the second earphone unit 102 may output audio data received from the first earphone unit 101 through the communication unit 110_2 through the sound output unit 152_2. Also, the first earphone unit 101 may output at least a portion of the audio data received from the terminal 200 through the sound output unit 152_1 ( S520 ).
- the sensor unit of each of the plurality of earphone units may detect the user's wearing state of the earphone unit ( S530 ). .
- the sensor unit provided in each of the plurality of earphone units may detect whether each of the earphone units is worn on the user's ear using at least one of a proximity sensor, a motion sensor, an acceleration sensor, a gyro sensor, and a conduction sensor.
- the sensor unit of the earphone unit may acquire the distance between the earphone unit and a part of the user's body by using a proximity sensor.
- the processor of the earphone unit detects that the acquired information deviates from a preset distance, the processor of the earphone unit may determine that the earphone unit is not worn.
- the sensor unit of the earphone unit may detect a specific gesture using a motion sensor.
- the specific gesture sensed through the motion sensor is a gesture corresponding to receiving a voice signal through the earphone unit
- the processor may determine that the earphone unit is not worn.
- the sensor unit of the earphone unit uses an acceleration sensor to determine that the earphone unit is not worn when the earphone unit moves in excess of a preset acceleration, and if the earphone unit is tilted more than a preset level using a gyro sensor, the earphone unit It is also possible to judge that it is not worn.
- the earphone unit is not in contact with the user's skin using the conduction sensor, it may be determined that the earphone unit is not worn.
- the earphone unit sensed in the non-wear state will be described as the first earphone unit 101
- the earphone unit in the user wearing state will be named as an example as the second earphone unit 102 .
- the processor 180_1 of the first earphone unit 101 may set the first earphone unit 101 to the microphone mode ( S540 ).
- the processor 180_2 of the second earphone unit 102 may set the second earphone unit to the voice reception mode (S550).
- the microphone mode may include a mode for controlling (activating) the microphone of the first earphone unit 101 on.
- the microphone mode may include a mode of off-controlling (inactivating) the sound output unit 152_1 of the first earphone unit.
- the voice reception mode may include a mode of off-controlling the microphone 122_2 of the second earphone unit, and may include a mode of maintaining the sound output unit 152_2 of the second earphone unit in an on-control (activated) state.
- the user of the portable audio device 100 has to speak in a small sound such as a whisper
- a small sound such as a whisper
- the user's voice signal may not be accurately received by the microphone unit of the earphone unit.
- the user ignites while holding the first earphone unit 101 among the plurality of earphone units in the hand or bringing it close to the mouth, and through the second earphone unit 102 among the plurality of earphone units, the terminal In some cases, an audio signal received from
- the first earphone unit 101 may determine the non-wearing state through the sensor unit 140_1 as in S530 .
- the processor 180_1 of the first earphone unit may set the first earphone unit to the microphone mode and activate the microphone of the first earphone unit.
- the processor 180_1 of the first earphone unit may deactivate the sound output unit 152_1 of the first earphone unit.
- the processor 180_1 of the first earphone unit may deactivate the sound output unit 152_1 of the first earphone unit.
- input of the audio signal output from the first earphone unit through the activated microphone 122_1 of the first earphone unit may be prevented.
- the processor 180_2 of the second earphone unit may set the audio reception mode of the second earphone unit and keep the sound output unit 152_2 of the second earphone unit active.
- the first earphone unit 101 set to the microphone mode may be set as the master sound device.
- the second earphone unit 102 set to the voice reception mode may be set as a slave sound device.
- the second earphone unit 102 when the first earphone unit 101 and the second earphone unit 102 output an audio signal while worn on the user's ear, the second earphone unit 102 is a master sound device.
- the first earphone unit 101 may be a slave sound device.
- the first earphone unit 101 if the first earphone unit 101 is detected as not being worn, the first earphone unit 101 may be set as a master sound device.
- the first earphone unit 101 may be set as a master sound device and the second earphone unit 102 may be set as a slave sound device.
- the terminal 200 may support the sound output unit 152_2 of the second earphone unit to output monophonic type single-channel audio data.
- the terminal 200 may support output by mixing the audio signal output from the sound output unit 152_1 of the first earphone unit and the audio signal output from the sound output unit 152_2 of the second earphone unit.
- the microphone of the first earphone unit is activated so that the audio signal can be effectively received.
- the processor 180_1 of the first earphone unit may set the first earphone unit 101 to the microphone mode when the non-wearing state of the first earphone unit is maintained for a preset time or longer.
- the non-wearing state of the first earphone unit 101 is maintained for more than a preset time and the first earphone unit 101 is not in a charging state, it is also possible to set the first earphone unit to the microphone mode.
- the user while listening to music transmitted from the terminal 200 using the portable sound device 100 , the user simply detaches or charges the first earphone unit 101 without the intention of uttering a voice. (101) may be removable.
- the microphone ( 122_1) may be controlled on.
- the first earphone unit 101 may be set to a microphone mode.
- the first earphone unit may be set to the microphone mode when the non-wearing state of the first earphone unit 101 is maintained for more than a preset time and the first earphone unit 101 is not in the charging state.
- the case where the first earphone unit 101 is not in the charging state means that the charging unit 130_1 of the first earphone unit 101 is in an inactive state, that is, the charging terminal of the first earphone unit 101 is physically or electrically It can mean a case where it is connected to and not in contact with.
- the processor 180_1 of the first earphone unit transmits an audio signal input through the microphone 122_1 of the first earphone unit to the terminal 200, and the processor 180_2 of the second earphone unit uses the sound output unit 152_2 of the second earphone unit to An audio signal received from the terminal 200 may be output (S550).
- the processor 180_2 of the second earphone unit receives monophonic audio data received from the terminal 200 through the sound output unit 152_2 or the audio signal is mixed audio data can be output.
- the user inputs a voice signal of a small sound such as a whisper to the portable sound device 100 using the first earphone unit 101 that is not worn, and transmits/receives audio data to the outside through the terminal 200 You can do it.
- a voice signal of a small sound such as a whisper
- FIG. 6 shows an embodiment when a specific event occurs in the terminal 200 and a microphone use request is received.
- FIG. 6 is a diagram illustrating a flowchart according to an embodiment of the present disclosure.
- the first earphone unit 101 and the second earphone unit 102 may output audio data received from the terminal 200 using the respective sound output units 152_1 and 152_2 ( S520).
- the terminal 200 may request a microphone use request of the portable sound device 100 .
- the portable audio device 100 may receive a microphone use request from the terminal 200 (S610), and may set the earphone unit detected as not being worn among the plurality of earphone units to the microphone mode.
- the portable sound device 100 may detect the non-wearing state of each of the plurality of earphone units according to S530 described with reference to FIG. 5 .
- the processor 180_1 of the first earphone unit may set the first earphone unit to the microphone mode (S540).
- the other earphone units different from the first earphone unit 101 may be set to a voice reception mode.
- the processor 180_1 of the first earphone unit transmits an audio signal input through the microphone 122_1 of the first earphone unit to the terminal 200, and the processor 180_2 of the second earphone unit outputs the sound of the second earphone unit.
- the audio signal received from the terminal 200 may be output using the unit 152_2 (S550 and S560).
- the microphone use request requested from the terminal 200 may include at least one of a change in application settings of the terminal 200 , a microphone activation request in the application, and a call origination and call reception.
- FIG. 7 is a view for explaining wearing and not wearing the first earphone unit according to an embodiment of the present disclosure.
- FIG. 8 is a diagram illustrating a user utterance scenario according to an embodiment of the present disclosure.
- FIGS. 7 to 8 in the portable acoustic device 100 including the first earphone unit 101 and the second earphone unit 102 , a specific example of determining the earphone part non-wearing state will be described.
- the first earphone unit 101 and the second earphone unit 102 may be worn on the user's ear.
- the sensor unit 140_1 of the first earphone unit 101 may detect a wearing state of the first earphone unit 101 .
- the first earphone unit 101 detects the sensor unit 140_1.
- a state in which the first earphone unit is not worn can be detected by using it.
- the sensor unit 140_1 of the first earphone unit may acquire a distance between the earphone unit and a part of the user's body (eg, inside the ear, 710 ) using a proximity sensor.
- the processor 180_1 of the first earphone unit may determine that the earphone unit is not worn.
- the first earphone unit may detect the state of not wearing the first earphone unit through the above method.
- the sensor unit 140_1 of the first earphone unit may detect a specific gesture using a motion sensor.
- the processor 180_1 of the first earphone unit may determine that the earphone unit is not worn when the specific gesture detected through the motion sensor is a gesture corresponding to receiving a voice signal through the earphone unit.
- the first earphone unit 101 worn on the user's body may be moved around the user's mouth by a specific gesture generated by the hand 702 . there is.
- the processor 180_1 of the first earphone unit 101 detects movement from the vicinity of the user's ear 701 to the periphery of the mouth using a motion sensor, and the corresponding gesture is used to receive a voice signal through the first earphone unit 101 . In a corresponding case, it may be determined that the first earphone unit is not worn.
- the motion sensor may recognize a user's specific gesture according to the movement of the earphone unit, and it will also be possible to detect the user's specific gesture using the gyroscope sensor and the acceleration sensor.
- the sensor unit 140_1 of the first earphone unit may determine that the earphone unit is not worn when the earphone unit moves in excess of a preset acceleration using an acceleration sensor, and a gyro sensor When the earphone unit is tilted by more than a preset degree using , it may be determined that the earphone unit is not worn.
- the acceleration sensor of the first earphone unit detects a value exceeding the preset acceleration.
- the processor 180_1 of the first earphone unit may determine that the first earphone unit is not worn.
- the user may detach the first earphone unit 101 from the body and bring it around the mouth while holding it in the hand 702 .
- the microphone 122_1 of the first earphone unit since the microphone 122_1 of the first earphone unit is located at one end of the body unit, it may be inclined for effective voice reception.
- the gyro sensor of the first earphone unit 101 may measure the angular velocity of the first earphone unit to detect the inclination of the first earphone unit 101 .
- the processor 180_1 of the first earphone unit may determine that the first earphone unit is not worn when the inclination value detected by the gyro sensor exceeds a preset value using the inclination value detected by the gyro sensor.
- the wearing state of the earphone unit is determined by combining data obtained using at least one of a proximity sensor, an acceleration sensor, a motion sensor, a gyro sensor, or a conduction sensor. It will also be possible to detect.
- the processor 180_1 of the first earphone unit may set the first earphone unit to the microphone mode when it is determined that the first earphone unit is not worn.
- the second earphone unit 102 may be set to a voice reception mode.
- FIG. 9 and 10 are diagrams for explaining an embodiment of a microphone use request through the terminal according to FIG. 6 .
- the user may transmit a microphone use request to the portable sound device through the terminal 200 .
- the microphone use request may include at least one of a change in application settings of the terminal, a microphone activation request in the application, and a call origination and call reception.
- the user may activate a microphone use request by executing a specific application and changing the setting of the application.
- the microphone use request screen 901 may be output on the display unit 251 of the terminal 200 .
- the microphone use request screen 901 may display a microphone use request activation window 902 .
- the user may transmit a microphone use request to the portable sound device 100 by activating a button of the microphone use request activation window 902 .
- the portable sound device 100 may receive a microphone use request from the terminal 200 and may set the microphone mode of the earphone unit according to the state in which the earphone unit is not worn.
- the microphone use request may be a microphone activation request in an application included in the terminal.
- the user may execute a specific application that requests permission to use the microphone.
- the terminal 200 may execute a specific application 1001 .
- the specific application 1001 may include an application that provides content in which an audio signal and a video signal are mixed, such as real-time broadcasting, video recording, animation, GIF image production, and the like.
- the terminal 200 may transmit a microphone use request to the portable acoustic device when a specific application 1001 is executed.
- the portable audio device 100 may receive a microphone activation request from the terminal 200 according to the execution of the specific application 1001 of the terminal 200 .
- Each of the plurality of earphone units included in the portable sound device may determine whether the earphone unit is worn.
- the processor 180_1 of the first earphone unit may set the first earphone unit 101 to a microphone mode.
- the first earphone unit 101 when the user holds the first earphone unit 101 in his hand, the first earphone unit 101 is not worn, and the terminal 200 is the microphone of the first earphone unit.
- An operation requested by the specific application 1001 may be performed using the audio data input from 122_1 .
- the microphone use request may be a call origination or call reception of the terminal.
- a call may be started through the terminal 200 .
- the processor 280 of the terminal may transmit a microphone use request to the portable sound device 100 .
- the microphone use request may mean activating the microphone setting function of the portable acoustic device 100 in order to transmit a voice input through the microphone of the portable acoustic device 100 to another terminal communicating with the terminal.
- the microphone use request may include a case in which a preset type of motion is detected through a sensor (acceleration sensor, gyro sensor, etc.) that determines the motion of the terminal 200 .
- a sensor acceleration sensor, gyro sensor, etc.
- portable sound in various cases such as when a specific key button is operated in the terminal 200, when a characteristic voice is recognized through the microphone 222 of the terminal, and when the user's face is recognized through the camera 221 of the terminal It may be transmitted to the device 100 .
- the portable sound device 100 may output a notification informing the user that the microphone of the first earphone unit is activated.
- the portable sound device may further include a sound system 1 including the terminal 200 and the portable sound device 100, the first earphone unit and the second earphone unit, and In a system including a terminal, the terminal communicates with a portable sound device to transmit and receive audio signals, and the portable sound device sets the first earphone unit to a microphone mode when the non-wearing state of the first earphone unit is detected, and a system for setting the second earphone unit to a voice reception mode.
- a sound system 1 including the terminal 200 and the portable sound device 100, the first earphone unit and the second earphone unit
- the terminal communicates with a portable sound device to transmit and receive audio signals
- the portable sound device sets the first earphone unit to a microphone mode when the non-wearing state of the first earphone unit is detected, and a system for setting the second earphone unit to a voice reception mode.
- the portable sound device may determine that the first earphone unit is not worn.
- the portable sound device may determine that the first earphone unit is not worn.
- the portable sound device may set the first earphone unit to a microphone mode when the non-wearing state of the first earphone unit is maintained for a preset time or longer and the first earphone unit is not in a charged state.
- the terminal requests the use of a microphone from the portable audio device
- the microphone use request requested from the terminal includes at least one of changing an application setting of the terminal, requesting to activate a microphone in the application, making a call, and receiving a call can
- a portable sound device including a first earphone unit and a second earphone unit, receiving an audio signal from a terminal, detecting a non-wearing state of the first earphone unit, and the first earphone unit in a microphone mode and setting the second earphone unit to a voice reception mode.
- the step of detecting the non-wearing state of the first earphone unit may include detecting that the information obtained through the proximity sensor of the first earphone unit deviates from a preset distance or through the motion sensor of the first earphone unit, the first earphone unit The method may include detecting a gesture corresponding to receiving a voice signal through the earphone unit.
- the step of setting the first earphone unit to a microphone mode may be possible to further include the step of setting the first earphone unit to a microphone mode.
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Telephone Function (AREA)
- Circuit For Audible Band Transducer (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
Abstract
본 개시는 제1 이어폰부 및 제2 이어폰부를 포함하는 휴대용 음향기기에 있어서, 상기 제1 이어폰부는 통신부, 상기 통신부를 통해 수신된 오디오 신호를 출력하는 음향 출력부, 마이크로폰, 제1 이어폰부의 착용 상태를 감지하는 센서부 및 상기 제1 이어폰부가 미착용 상태로 감지되면, 상기 제1 이어폰부를 마이크 모드로 설정하는 프로세서를 포함하는 휴대용 음향기기를 제공한다.
Description
본 개시는 단말기와 전기적으로 연결되어 오디오를 재생하는 휴대용 음향기기에 관한 것이다.
휴대용 음향기기는 단말기로부터 오디오 데이터를 수신하고 마이크를 통해 수집한 오디오 데이터를 단말기에 전송하는 오디오 재생 디바이스를 의미한다.
종래에는 휴대용 음향기기를 단말기의 이어잭을 단자에 꽂아 오디오 데이터를 수신하는 유선 방식을 이용하였으나, 최근에는 이동의 편의성을 고려하여 무선통신방식의 휴대용 음향기기의 수요가 폭발적으로 증가하고 있다.
휴대용 음향기기는 사용자의 몸에 휴대할 수 있도록 머리에 밴드형상으로 끼우는 헤드폰 방식, 귀에다 걸거나 끼우는 방식과 같이, 휴대성과 편의성을 고려한 휴대용 음향기기에 대한 연구 개발이 많이 증가하고 있다.
한편, 휴대용 음향기기에 마이크가 구비됨에 따라 사용자가 휴대용 음향기기를 착용한 상태로 발화가 가능해졌다. 이때, 사용자가 귓속말과 같은 작은 소리로 발화하는 경우 또한 발생하였는데, 휴대용 음향기기에 구비된 마이크의 위치, 성능 및 주변 환경에 따라 사용자의 속삭임과 같은 작은 소리의 음성 데이터를 휴대용 음향기기가 제대로 수신하지 못하는 문제가 발생하였다.
본 개시의 목적은 제1 이어폰부 및 제2 이어폰부를 포함하는 휴대용 음향기기에 구비된 센서를 이용하여 사용자의 제1 이어폰부의 미착용을 감지하고, 사용자의 제1 이어폰부 미착용에 대응하여 제1 이어폰부의 마이크 설정을 조절하기 위함이다.
본 개시의 목적은 휴대용 음향기기와 연결된 단말기로부터 마이크 사용 요청을 수신하고, 사용자의 제1 이어폰 미착용을 감지하여 제1 이어폰부의 마이크 설정을 조절하기 위함이다.
본 개시의 실시 예에 있어서 휴대용 음향기기는 제1 이어폰부 및 제2 이어폰부를 포함하고, 상기 제1 이어폰부는 통신부, 상기 통신부를 통해 수신된 오디오 신호를 출력하는 음향 출력부, 마이크로폰, 제1 이어폰부의 착용 상태를 감지하는 센서부 및 상기 제1 이어폰부가 미착용 상태로 감지되면, 상기 제1 이어폰부를 마이크 모드로 설정하는 프로세서를 포함할 수 있다.
또한, 상기 제2 이어폰부는 통신부, 상기 통신부를 통해 수신된 오디오 신호를 출력하는 음향 출력부, 마이크로폰 및 상기 제1 이어폰부가 마이크 모드로 설정되는 경우, 상기 제2 이어폰부를 음성 수신모드로 설정하는 프로세서를 포함할 수 있다.
또한, 상기 마이크 모드는, 상기 제1 이어폰부의 마이크로폰을 온 제어하는 모드를 포함할 수 있다.
또한, 상기 마이크 모드는, 상기 제1 이어폰부의 음향출력부를 오프 제어를 더 포함할 수 있다.
또한, 상기 음성 수신 모드는, 제2 이어폰부의 음향 출력부를 온 제어하는 모드를 포함할 수 있다.
또한, 상기 제1 이어폰부의 센서부는 근접 센서, 가속도 센서, 모션 센서, 자이로 센서 또는 전도 센서 중에서 적어도 하나 이상을 이용하여 상기 착용 상태를 감지할 수 있다.
또한, 상기 제1 이어폰부의 센서부는 근접 센서를 포함하고, 상기 제1 이어폰부의 프로세서는, 상기 제1 이어폰부의 근접센서를 통해 획득된 정보가 기 설정된 거리를 이탈한 것을 감지하면, 제1 이어폰부의 미착용 상태로 판단할 수 있다.
또한, 상기 제1 이어폰부의 센서부는 모션 센서를 포함하고, 상기 제1 이어폰부의 프로세서는, 상기 제 1 이어폰부의 모션 센서를 통해, 상기 제1 이어폰부를 통한 음성 신호 수신에 상응하는 제스처가 감지되면 상기 제1 이어폰부의 미착용 상태로 판단할 수 있다.
또한, 상기 제1 이어폰부의 프로세서는, 상기 제1 이어폰부의 미착용 상태가 기 설정된 시간 이상 유지되는 경우에 상기 제1 이어폰부를 상기 마이크 모드로 설정할 수 있다.
또한, 상기 제1 이어폰부의 프로세서는 상기 제1 이어폰부가 미착용 상태가 기 설정된 시간 이상 유지되고, 상기 제1 이어폰부가 충천 상태가 아닌 경우, 상기 제1 이어폰부를 마이크 모드로 설정할 수 있다.
또한, 상기 제1 이어폰부의 통신부 및 상기 제2 이어폰부의 통신부는 단말기와 통신하고, 상기 제1 이어폰부의 프로세서는, 상기 단말기로부터 마이크로폰 사용 요청을 수신하면, 상기 제1 이어폰부를 마이크 모드로 설정할 수 있다.
또한, 상기 단말기로부터 요청된 마이크로폰 사용 요청은, 상기 단말기의 어플리케이션 설정 변경, 어플리케이션에서 마이크 활성화 요청, 통화 발신 및 통화 수신 중 적어도 하나를 포함할 수 있다.
상기 제1 이어폰부의 프로세서는, 상기 제1 이어폰부의 마이크로폰을 통해 입력된 오디오 신호를 단말기로 전송하고, 상기 제2 이어폰부의 프로세서는, 상기 제2 이어폰부의 음향 출력부를 이용하여 상기 단말기로부터 수신된 오디오 신호를 출력할 수 있다.
본 개시의 실시 예에 있어서, 음향기기시스템은 제1 이어폰부 및 제2 이어폰부를 포함하는 휴대용 음향기기 및 단말기를 포함할 수 있다.
또한, 단말기는 휴대용 음향기기와 통신하여 오디오 신호를 송수신하고, 상기 휴대용 음향기기는, 상기 제1 이어폰부의 미착용 상태가 감지되면 상기 제1 이어폰부를 마이크 모드로 설정하고, 상기 제2 이어폰부를 음성 수신모드로 설정할 수 있다.
또한 본 개시의 실시 예에 있어서, 휴대용 음향기기의 동작 방법은 휴대용 음향기기가 단말기로부터 오디오 신호를 수신하는 단계, 상기 제1 이어폰부의 미착용 상태를 감지하는 단계 및 상기 제1 이어폰부를 마이크 모드로 설정하고 상기 제2 이어폰부를 음성 수신모드로 설정하는 단계를 포함할 수 있다.
본 개시는 사용자가 제1 이어폰부를 손에 쥐고 발화하는 경우와 같이, 휴대용 음향기기에 구비된 센서를 이용하여 사용자의 제1 이어폰부 미착용을 감지할 수 있다.
본 개시는 제1 이어폰부 미착용 상태가 감지되면, 제1 이어폰부의 마이크 설정을 조절하여 사용자가 작은 소리로 발화하는 음성 데이터를 효과적으로 수신할 수 있다.
본 개시는 제1 이어폰부가 마이크 모드로 설정되면, 착용상태인 제2 이어폰부를 음성 수신모드로 설정하여 단말기로부터 전송되는 오디오 데이터를 완전하게 출력할 수 있다.
도 1은 본 개시의 실시 예에 따른, 단말기와 휴대용 음향 기기의 시스템을 나타낸 도시면이다.
도 2는 본 개시의 실시 예에 따른 휴대용 음향기기의 제1 이어폰부와 제2 이어폰부를 나타낸 구성도이다.
도 3은 본 개시의 실시 예에 따른 휴대용 음향 기기의 구성도를 나타낸 도면이다.
도 4는 본 개시의 실시 예에 따른 단말기의 구성도를 나타낸 도면이다.
도 5는 본 개시의 실시 예에 따른 순서도를 나타낸 도면이다.
도 6은 본 개시의 실시 예에 따른 순서도를 나타낸 도면이다.
도 7은 본 개시의 실시 예에 따른 제1 이어폰부의 착용 및 미착용을 설명하기 위한 도면이다.
도 8은 본 개시의 실시 예에 따른 사용자 발화 시나리오를 나타낸 도면이다.
도 9 및 도 10은 본 개시의 실시 예에 따른 단말기를 통해 마이크로폰 사용 요청을 나타낸 도면이다.
이하, 본 발명의 상세에 대하여 설명한다.
이하에 설명하는 실시 예는 본 발명의 일례 일뿐이며, 본 발명은 다양한 형태로 변형될 수 있다. 따라서, 이하에 개시된 특정 구성 및 기능은 청구 범위를 제한하지 않는다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 개시의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
도 1은 본 개시의 실시 예에 따른, 단말기와 휴대용 음향 기기의 시스템을 나타낸 도시면이다.
도 1은 단말기(200)에 접속되는 오디오 재생장치 또는 휴대용 음향기기(100), 예를 들어 한 쌍의 이어폰부(101,102)를 포함하는 휴대용 음향 기기의 무선 음향 시스템(1)의 예시를 나타낸 도면이다.
휴대용 음향기기(100)는 단말기(200)와 무선 통신 가능할 수 있다.
상세히, 상기 휴대용 음향기기(100)는, 사용자의 귀에 착용된 상태에서, 상기 단말기(200)에서 재생되는 음악 또는 라디오 방송을 무선으로 수신하여 청취할 수 있는 음향 장치이다.
사용자는 무선 이어폰부(101,102)들 중 어느 하나의 단일 이어폰부, 예를 들어 제1 이어폰부(101) 또는 제2 이어폰부(102)를 착용하거나 제1 이어폰부(101) 및 제2 이어폰부(102)를 착용하여, 이어폰부(101, 102) 중 하나 또는 양쪽 모두를 통해 오디오 데이터를 수신하고, 이를 통해 수신된 오디오를 재생할 수 있다.
본 개시의 실시 예에 따르면 오디오 데이터는 모노포닉(monophonic)일 수 있으며 이러한 경우, 제1 이어폰부(101) 및 제2 이어폰부(102) 각각은 동일한 오디오 데이터를 수신할 수 있다.
다른 실시 예에서, 오디오 데이터는 스테레오포닉(stereophonic)일 수 있고, 제1 이어폰부(101) 및 제2 이어폰부(102) 각각은 좌측 채널 및 우측 채널에 대응하는 상이한 오디오 데이터를 수신할 수 있다.
또한, 제1 이어폰부(101) 및 제2 이어폰부(102) 각각은 스테레오포닉 오디오 데이터와 모노포닉 오디오 데이터를 믹싱한 데이터를 재생하는 것도 가능할 것이다.
본 개시의 실시 예에 따르면, 한 쌍의 이어폰부(101,102)는 단말기(200)에 동시에 접속될 수 있다. 또한 한 쌍의 이어폰부 중 어느 하나(예를 들어 제1 이어폰부, 101)는 마스터 음향 기기로 가능하고, 나머지는 슬레이브 음향 기기로 가능할 수 있다.
이 경우, 단말기(200)는 마스터 음향기기와 통신하여 오디오 데이터를 송수신할 수 있으며 마스터 음향기기와 슬레이브 음향기기는 서로 통신하여 오디오 데이터를 송수신할 수 있다.
슬레이브 음향기기는 마스터 음향기기를 통하여 단말기(200)와 통신할 수 있다. 즉, 마스터 음향 기기를 통하여 슬레이브 음향기기와 단말기(200)는 연결되고, 슬레이브 음향기기 단말기와 오디오 데이터를 송수신할 수 있다.
일 실시 예에서, 휴대용 음향기기(100)가 하나의 그룹으로 동작할 경우, 단말기(100)가 각각의 이어폰부와 모두 연결되고 각 이어폰부에 개별적으로 오디오 신호를 전송하여 소리를 출력할 수 있다.
한편, 상기 실시 예에서 단말기(200)는 스마트폰 디바이스 일 수 있으며, 본 기술분야의 통상의 기술자라면, 데스크톱, 노트북, 랩톱, 태블릿 컴퓨터, 스마트폰, 스마트 시계, 하이브리드 디바이스, 안경과 같은 착용형 디바이스 등을 포함하는 것을 인지할 수 있을 것이다.
또한, 한 쌍의 이어폰부를 포함하는 휴대용 음향기기(100)는 무선 통신 프로토콜들, 및 블루투스, Wi-Fi 등과 같은 표준 기반 무선 통신 프로토콜들을 포함한 임의의 이용가능한 무선 통신 프로토콜을 통해 서로 통신할 수 있다.
그리고 도 1에서는, 한 쌍의 이어폰부(101,102)가 도시되어 있지만 이는 예시에 불과하고, 임의의 타입의 유선 또는 무선 오디오 헤드셋을 포함하여, 임의의 개수의 유선 또는 무선 접속된 오디오 재생이 가능한 디바이스를 모두 포함하는 것으로 해석되어야 할 것이다.
도 2는 본 개시의 실시 예에 따른 휴대용 음향기기의 제1 이어폰부와 제2 이어폰부를 나타낸 구성도이다
도 2를 참고하여 휴대용 음향기기(100)의 외관을 개략적으로 살펴보면 아래와 같다. 도 2를 참고하면, 휴대용 음향기기(100)에 포함된 제1 이어폰부(101) 및 제2 이어폰부(102) 각각은 헤드부(10), 헤드부(10)로부터 사용자의 귀 내부로 삽입되어 사용자의 신체 일부에 접촉되는 인이어부(30) 및 헤드부(10)와 연결되는 바디부(20)를 포함할 수 있다.
상기 인이어부(30)는 헤드부(10)의 일면으로부터 돌출되어 형성될 수 있으며, 인이어부(30)의 재질은 실리콘 등과 같은 쿠션재질로 이루어져 사용자에게 편리한 착용감을 제공할 수 있다.
바디부(20)는 헤드부(10)의 일면으로부터 돌출된 스틱 형상일 수 있다.
바디부(20)의 일단에는 사용자 및 기타 오디오 신호를 수신하기 위한 마이크로폰이 구비될 수 있다. 마이크로폰은 사용자의 발화를 수신하는 역할을 수행할 수 있다.
또한 바디부(20)의 측면에는 충전단자가 구비되어 이어폰부의 충전 시 충전단자가 충전기에 접촉될 수 있다.
헤드부(10)는 수신한 오디오 데이터가 외부로 출력되도록 하는 스피커 홀이 형성될 수 있다. 헤드부(10)의 일면에는 마이크로폰 뿐만 아니라 근접 센서, 터치 패드 등을 포함하는 센서부가 구비될 수 있다.
이하에서는 상기와 같은 외관 구성을 이루는 휴대용 음향기기(100)의 제어 구성에 대하여 블록도를 이용하여 상세히 설명하도록 한다. 이하에서 제시되는 블럭도에 개시되는 구성 요소들 중 일부는 도 2에 개시되는 휴대용 음향 장치의 분해도에 명확하게 도시되지 않을 수 있다.
그러나, 블럭도에만 개시되는 모든 구성 요소들은, 본 발명의 실시예에 따른 휴대용 음향 장치들의 헤드부 또는 바디부에 설치되는 회로기판에 모듈 형태 또는 전기 소자 형태로 구비되거나, 별도의 부품 또는 소자 형태로 상기 회로 기판에 전기적으로 연결될 수 있는 구성 요소임을 밝혀 둔다.
도 3은 본 개시의 실시 예에 따른 휴대용 음향 기기의 구성도를 나타낸 도면이다.
도 3를 참조하면, 휴대용 음향기기(100)는 통신부(110), 입력부(120), 충전부(130), 센싱부(140), 출력부(150), 메모리(170) 및 프로세서(180) 등을 포함할 수 있다.
통신부(110)는 통신 모뎀(communication modem) 또는 통신 회로(communication circuit)라고도 칭할 수 있다.
통신부(110)는 유무선 통신 기술을 이용하여 무선 음향 기기(300) 등의 외부 장치들과 데이터를 송수신할 수 있다. 예컨대, 통신부(110)는 외부 장치들과 센서 정보, 사용자 입력, 학습 모델, 제어 신호 등을 송수신할 수 있다.
통신부(110)가 이용하는 통신 기술에는 GSM(Global System for Mobile communication), CDMA(Code Division Multi Access), LTE(Long Term Evolution), 5G, WLAN(Wireless LAN), Wi-Fi(Wireless-Fidelity), 블루투스(Bluetooth쪠), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), ZigBee, NFC(Near Field Communication) 등이 있다.
입력부(120)는 입력 인터페이스(input interface)라고 칭할 수 있다.
입력부(120)는 다양한 종류의 데이터를 획득할 수 있다.
입력부(120)는 오디오 데이터를 수신하기 위한 마이크로폰(122), 사용자로부터 정보를 입력 받기 위한 사용자 입력부(123) 등을 포함할 수 있다. 여기서, 마이크로폰(122)을 센서로 취급하여, 마이크로폰(122)으로부터 획득한 신호를 센싱 데이터 또는 센서 정보라고 할 수도 있다.
입력부(120)에서 수집한 오디오 데이터는 분석되어 사용자의 제어 명령으로 처리될 수 있다.
입력부(120)는 가공되지 않은 입력 데이터를 획득할 수도 있으며, 이 경우 프로세서(180)는 오디오 데이터에 대하여 전처리를 수행한 뒤 통신부를 통하여 다른 단말기로 오디오 데이터를 송신할 수 있다.
마이크로폰(122)은 외부의 음향 신호를 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 단말기(100)에서 수행 중인 기능(또는 실행 중인 응용 프로그램)에 따라 다양하게 활용될 수 있다.
한편, 마이크로폰(122)에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 적용될 수 있다.
사용자 입력부(123)는 사용자로부터 정보를 입력 받기 위한 것으로서, 사용자 입력부(123)를 통해 정보가 입력되면, 프로세서(180)는 입력된 정보에 대응되도록 휴대용 음향기기(100)의 동작을 제어할 수 있다.
사용자 입력부(123)는 기계식 입력 수단 (예컨대, 휴대용 음향기기(100)의 전/후면 또는 측면에 위치하는 버튼, 돔 스위치 (dome switch), 조그 휠, 조그 스위치 등) 및 터치식 입력 수단을 포함할 수 있다. 예컨대, 터치식 입력 수단은, 소프트웨어적인 처리를 통해 터치 스크린에 표시되는 가상 키(virtual key), 소프트 키(soft key) 또는 비주얼 키(visual key)로 이루어지거나, 상기 터치 스크린 이외의 부분에 배치되는 터치 키(touch key)로 이루어질 수 있다.
충전부(130)는 휴대용 음향기기(100)의 전원을 관리하는 역할을 수행할 수 있다.
구체적으로 충전부(130)는 휴대용 음향기기(100)에 포함된 적어도 하나 이상의 이어폰부 각각에 구비되어, 이어폰부 각각에 전원을 공급할 수 있다. 충전부(130)는 배터리를 포함할 수 있고, 이어폰부의 일단에 구비되는 충전단자를 통하여 공급된 에너지를 통해 충전될 수 있다.
충전부(130)의 충전단자는 전원이 공급되는 충전기에 연결됨으로서 배터리에 전원을 공급할 수 있다.
한편, 프로세서(180)는 충전 단자가 충전기와 접촉하여 충전부(130)가 휴대용 음향기기(100)의 충전 상태로 판단하면 입력부(120)와 출력부(150)의 동작을 중지시킬 수 있다.
센싱부(140)는 센서부 또는 센서라고 칭할 수 있다.
센싱부(140)는 다양한 센서들을 이용하여 휴대용 음향기기(100)의 내부 정보, 휴대용 음향기기(100)의 주변 환경 정보 및 사용자 정보 중 적어도 하나를 획득할 수 있다.
센싱부(140)에 포함되는 센서에는 근접 센서, 조도 센서, 가속도 센서, 자기 센서, 자이로 센서, 관성 센서, RGB 센서, IR 센서, 지문 인식 센서, 초음파 센서, 광 센서, 마이크로폰, 라이다, 레이더 등이 포함될 수 있다.
출력부(150)는 출력 인터페이스(output interface)라고 칭할 수 있다.
출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시킬 수 있다. 출력부(150)는 음향 출력부(Sound Output Unit, 152), 햅틱 모듈(Haptic Module, 153), 광 출력부(Optical Output Unit, 154) 중 적어도 하나를 포함할 수 있다.
디스플레이부(151)는 휴대용 음향기기(100)에서 처리되는 정보를 표시(출력)한다. 예컨대, 음향 출력부(152)는 호신호 수신, 통화 모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 통신부(110)로부터 수신되거나 메모리(170)에 저장된 오디오 데이터를 출력할 수 있다.
음향 출력부(152)는 리시버(receiver), 스피커(speaker), 버저(buzzer) 중 적어도 하나 이상을 포함할 수 있다.
햅틱 모듈(haptic module, 153)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(153)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 될 수 있다.
광출력부(154)는 휴대용 음향기기 (100)의 광원의 빛을 이용하여 이벤트 발생을 알리기 위한 신호를 출력한다.
한편, 휴대용 음향기기(100)는 단말기(200)에서 발생되는 이벤트를 수신하고, 해당 이벤트에 대응하는 출력을 출력할 수 있다.
단말기(200)에서 발생되는 이벤트의 예로는 메시지 수신, 통화 송수신 신호 수신, 부재중 전화, 알람, 일정 알림, 이메일 수신, 애플리케이션을 통한 정보 수신, 기타 오디오 정보 수신 등이 될 수 있다.
메모리(170)는 휴대용 음향기기(100)의 다양한 기능을 지원하는 데이터를 저장할 수 있다.
프로세서(180)는 휴대용 음향기기(100)의 전반적인 동작을 제어할 수 있다.
프로세서(180)에서 처리된 음성 신호는 음향 출력부(152)로 오디오 출력될 수 있다. 또한, 프로세서(180)에서 처리된 음성 신호는 외부 장치 인터페이스부(미도시)를 통하여 외부 출력 장치로 입력될 수 있다.
프로세서(180)는 휴대용 음향기기(100)의 구성 요소들을 제어하여 결정된 동작을 수행할 수 있다. 이를 위해, 프로세서(180)는 메모리(170)의 데이터를 요청, 검색, 수신 또는 활용할 수 있고, 상기 적어도 하나의 실행 가능한 동작 중 예측되는 동작이나, 바람직한 것으로 판단되는 동작을 실행하도록 휴대용 음향기기(100)의 구성 요소들을 제어할 수 있다.
프로세서(180)는 결정된 동작을 수행하기 위하여 외부 장치의 연계가 필요한 경우, 해당 외부 장치를 제어하기 위한 제어 신호를 생성하고, 생성한 제어 신호를 해당 외부 장치에 전송할 수 있다.
프로세서(180)는 사용자 입력에 대하여 의도 정보를 획득하고, 획득한 의도 정보에 기초하여 사용자의 요구 사항을 결정할 수 있다.
나아가, 프로세서(180)는 상기 응용 프로그램의 구동을 위하여, 휴대용 음향기기(100)에 포함된 구성 요소들 중 둘 이상을 서로 조합하여 동작시킬 수 있다.
한편, 도 3에 도시된 휴대용 음향기기(100)는 본 개시의 일 실시 예에 불과하며, 도시된 구성요소들 중 일부는 실제 구현되는 휴대용 음향기기(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.
일 실시 예에서, 휴대용 음향기기(100)를 하나의 구성으로 설명하였으나, 휴대용 음향기기(100)에 포함된 적어도 하나의 이어폰부(예를들어 제1 이어폰부 및 제2 이어폰부) 각각은 도 3의 구성을 각각 포함할 수 있을 것이다.
또한, 각 블록에서 수행하는 기능은 본 개시의 실시 예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 개시의 권리 범위를 제한하지 아니한다.
도 4는 본 개시의 실시 예에 따른 휴대용 음향기기와 통신하는 단말기의 구성도를 나타낸 도면이다.
도 4를 참조하면, 단말기(200)는 통신부(210), 입력부(220), 러닝 프로세서(230), 센싱부(240), 출력부(250), 메모리(270) 및 프로세서(280) 등을 포함할 수 있다. 이와 같이 도 4의 단말기(200)는 도 3의 휴대용 음향기기(100)와 유사한 구성을 포함할 수 있으며, 중복된 설명은 생략하거나 간략하게 설명하도록 한다.
통신부(210)는 통신 모뎀(communication modem) 또는 통신 회로(communication circuit)라고도 칭할 수 있다.
통신부(210)는 유무선 통신 기술을 이용하여 휴대용 음향기기(100) 등의 외부 장치들과 데이터를 송수신할 수 있다. 예컨대, 통신부(210)는 외부 장치들과 센서 정보, 사용자 입력, 학습 모델, 제어 신호 등을 송수신할 수 있다.
통신부(210)가 이용하는 통신 기술에는 GSM(Global System for Mobile communication), CDMA(Code Division Multi Access), LTE(Long Term Evolution), 5G, WLAN(Wireless LAN), Wi-Fi(Wireless-Fidelity), 블루투스(Bluetooth쪠), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), ZigBee, NFC(Near Field Communication) 등이 있다.
입력부(220)는 입력 인터페이스(input interface)라고 칭할 수 있다.
입력부(220)는 영상 신호 입력을 위한 카메라(221), 오디오 신호를 수신하기 위한 마이크로폰(222), 사용자로부터 정보를 입력 받기 위한 사용자 입력부(223) 등을 포함할 수 있다. 여기서, 카메라(221)나 마이크로폰(222)을 센서로 취급하여, 카메라(221)나 마이크로폰(222)으로부터 획득한 신호를 센싱 데이터 또는 센서 정보라고 할 수도 있다.
입력부(220)에서 수집한 음성 데이터나 이미지 데이터는 분석되어 사용자의 제어 명령으로 처리될 수 있다.
입력부(220)는 모델 학습을 위한 학습 데이터 및 학습 모델을 이용하여 출력을 획득할 때 사용될 입력 데이터 등을 획득할 수 있다. 입력부(220)는 가공되지 않은 입력 데이터를 획득할 수도 있으며, 이 경우 프로세서(280) 또는 러닝 프로세서(230)는 입력 데이터에 대하여 전처리로써 입력 특징점(input feature)을 추출할 수 있다.
카메라(221)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(251)에 표시되거나 메모리(270)에 저장될 수 있다.
사용자 입력부(223)는 사용자로부터 정보를 입력 받기 위한 것으로서, 사용자 입력부(223)를 통해 정보가 입력되면, 프로세서(280)는 입력된 정보에 대응되도록 단말기(200)의 동작을 제어할 수 있다.
러닝 프로세서(230)는 학습 데이터를 이용하여 인공 신경망으로 구성된 모델을 학습시킬 수 있다. 여기서, 학습된 인공 신경망을 학습 모델이라 칭할 수 있다. 학습 모델은 학습 데이터가 아닌 새로운 입력 데이터에 대하여 결과 값을 추론해 내는데 사용될 수 있고, 추론된 값은 어떠한 동작을 수행하기 위한 판단의 기초로 이용될 수 있다.
러닝 프로세서(230)는 인공 지능 서버(미도시)의 러닝 프로세서(미도시)와 함께 AI 프로세싱을 수행할 수 있다.
러닝 프로세서(230)는 단말기(200)에 통합되거나 구현된 메모리를 포함할 수 있다. 또는, 러닝 프로세서(230)는 메모리(270), 단말기(200)에 직접 결합된 외부 메모리 또는 외부 장치에서 유지되는 메모리를 사용하여 구현될 수도 있다.
센싱부(240)는 센서부 또는 센서라고 칭할 수 있다.
센싱부(240)는 다양한 센서들을 이용하여 단말기(200) 내부 정보, 단말기(200)의 주변 환경 정보 및 사용자 정보 중 적어도 하나를 획득할 수 있다.
센싱부(240)에 포함되는 센서에는 근접 센서, 조도 센서, 가속도 센서, 자기 센서, 자이로 센서, 관성 센서, RGB 센서, IR 센서, 지문 인식 센서, 초음파 센서, 광 센서, 마이크로폰, 라이다, 레이더 등이 포함될 수 있다.
출력부(250)는 출력 인터페이스(output interface)라고 칭할 수 있다.
출력부(250)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시킬 수 있다. 출력부(250)는 디스플레이부(Display Unit, 251), 음향 출력부(Sound Output Unit, 252), 햅틱 모듈(Haptic Module, 253), 광 출력부(Optical Output Unit, 254) 중 적어도 하나를 포함할 수 있다.
디스플레이부(251)는 단말기(200)에서 처리되는 정보를 표시(출력)한다. 예컨대, 디스플레이부(251)는 단말기(200)에서 구동되는 응용 프로그램의 실행화면 정보, 또는 이러한 실행화면 정보에 따른 UI(User Interface), GUI(Graphic User Interface) 정보를 표시할 수 있다.
디스플레이부(251)는 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치 스크린을 구현할 수 있다. 이러한 터치 스크린은, 단말기(200)와 사용자 사이의 입력 인터페이스를 제공하는 사용자 입력부(223)로써 기능함과 동시에, 단말기(200)와 사용자 사이의 출력 인터페이스를 제공할 수 있다.
메모리(270)는 단말기(200)의 다양한 기능을 지원하는 데이터를 저장할 수 있다. 예컨대, 메모리(270)는 입력부(120)에서 획득한 입력 데이터, 학습 데이터, 학습 모델, 학습 히스토리 등을 저장할 수 있다.
프로세서(280)는 단말기(200)의 전반적인 동작을 제어할 수 있다.
프로세서(280)에서 영상 처리된 영상 신호는 디스플레이부(251)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 프로세서(280)에서 영상 처리된 영상 신호는 외부 장치 인터페이스부(미도시)를 통하여 외부 출력 장치로 입력될 수 있다.
프로세서(280)에서 처리된 음성 신호는 음향 출력부(252)로 오디오 출력될 수 있다. 또한, 프로세서(280)에서 처리된 음성 신호는 외부 장치 인터페이스부(미도시) 또는 휴대용 음향기기(100)를 통하여 외부 출력 장치로 입력될 수 있다.
프로세서(280)는 메모리(270)에 저장된 응용 프로그램을 구동하기 위하여, 단말기(200)의 구성 요소들 중 적어도 일부를 제어할 수 있다. 나아가, 프로세서(280)는 상기 응용 프로그램의 구동을 위하여, 단말기(200)에 포함된 구성 요소들 중 둘 이상을 서로 조합하여 동작시킬 수 있다.
이하 본 개시의 휴대용 음향기기(100)의 동작을 설명한다.
도 5는 본 개시의 실시 예에 따른 순서도를 나타낸 도면이다.
앞서 설명한 바와 같이 본 개시의 실시 예에 따른 휴대용 음향기기(100)는 제1 이어폰부(101)와 제2 이어폰부(102)를 포함할 수 있다.
이때, 제1 이어폰부(101)에 포함된 각각의 구성은 '_1'을 덧붙여 사용하고, 제2 이어폰부(102)에 포함된 각각의 구성은 '_2'를 덧붙여 사용하도록 한다. 상기 '_1' 및 '_2'는 본 개시의 실시예를 설명하기 위하여 편의상 부여된 것을 알려둔다.
도 5를 참고하면, 단말기(200)와 휴대용 음향장치(100)는 전기적으로 연결될 수 있다(S510).
구체적으로 단말기(200)는 휴대용 음향장치(100)에 포함된 복수개의 이어폰부(예를 들어, 제1 이어폰부 및 제2 이어폰부)와 통신할 수 있다.
이때, 복수개의 이어폰부 중 제1 이어폰부(101)는 마스터 음향기기로 설정되고, 제2 이어폰부(102)는 슬레이브 음향기기로 설정될 수 있다.
마스터 음향기기로 설정된 제1 이어폰부(101)는 통신부(110_1)를 이용하여 제2 이어폰부(102) 및 단말기(200)와 통신할 수 있다. 또한 제1 이어폰부(101)는 단말기(200)로부터 수신되는 오디오 데이터 중 적어도 일부를 제2 이어폰부(102)로 전송할 수 있다.
제 2 이어폰부(102)는 통신부(110_2)를 통해 제1 이어폰부(101)로부터 수신된 오디오 데이터를 음향출력부(152_2)를 통해 출력할 수 있다. 또한, 제1 이어폰부(101)는 단말기(200)로부터 수신된 오디오 데이터 중 적어도 일부를 음향 출력부(152_1)를 통해 출력할 수 있다(S520).
본 개시의 실시 예에 따르면, 휴대용 음향기기에 포함된 복수개의 이어폰부(예를들어 제1 이어폰부, 제2 이어폰부) 각각의 센서부는 사용자의 이어폰부 착용 상태를 감지할 수 있다(S530).
구체적으로 복수개의 이어폰부에 각각에 구비된 센서부는 근접센서, 모션센서, 가속도 센서, 자이로 센서 또는 전도 센서 중에서 적어도 하나를 이용하여 해당 이어폰부 각각이 사용자의 귀에 착용되어 있는지 감지할 수 있다.
더욱 구체적으로 이어폰부의 센서부는 근접센서를 이용하여 이어폰부와 사용자 신체 일부까지의 거리를 획득할 수 있다. 이어폰부의 프로세서는 획득된 정보가 기 설정된 거리를 이탈한 것을 감지하면, 해당 이어폰부를 미착용 상태로 판단할 수 있다.
또한, 이어폰부의 센서부는 모션센서를 이용하여 특정 제스처를 감지할 수 있다. 프로세서는 상기 모션센서를 통해 감지된 특정 제스처가 이어폰부를 통한 음성 신호 수신에 상응하는 제스처인 경우, 해당 이어폰부를 미착용 상태로 판단할 수 있다.
또한 이어폰부의 센서부는 가속도 센서를 이용하여 이어폰부가 기 설정된 가속도를 초과하여 움직이는 경우, 해당 이어폰부를 미착용 상태로 판단할 수 있으며, 또한 자이로 센서를 이용하여 이어폰부가 기 설정된 정도 이상 기울어지는 경우 해당 이어폰부를 미착용 상태로 판단하는 것도 가능하다.
또한 전도 센서를 이용하여 이어폰부가 사용자의 피부에 접촉하지 않은 것으로 판단하면 해당 이어폰부를 미착용 상태로 판단할수도 있을 것이다.
이하 미착용 상태로 감지된 이어폰부를 제1 이어폰부(101)로 설명하고, 사용자 착용 상태의 이어폰부는 제2 이어폰부(102)로 예시로 명명하여 설명하도록 한다.
제1 이어폰부(101)의 프로세서(180_1)는 제1 이어폰부가 미착용 상태로 감지되면 제1 이어폰부(101)를 마이크 모드로 설정할 수 있다(S540).
그리고 제 1 이어폰부(101)가 마이크 모드로 설정되는 경우, 제2 이어폰부(102)의 프로세서(180_2)는 제2 이어폰부를 음성수신 모드로 설정할 수 있다(S550).
구체적으로 마이크 모드는 제1 이어폰부(101)의 마이크로폰을 온 제어(활성화)하는 모드를 포함할 수 있다. 또한 마이크 모드는 제1 이어폰부의 음향출력부(152_1)를 오프제어(비활성화)하는 모드를 포함할 수 있다.
음성 수신모드는 제2 이어폰부의 마이크로폰(122_2)을 오프제어하는 모드를 포함하고, 제2 이어폰부의 음향 출력부(152_2)를 온제어(활성화) 상태로 유지하는 모드를 포함할 수 있다.
예를 들어, 휴대용 음향기기(100)의 사용자가 속삭임과 같이 작은 소리로 말해야 하는 경우, 이어폰부를 귀에 착용한 채로 발화하면, 사용자의 음성 신호가 이어폰부의 마이크에 정확하게 수신되지 않을 수 있다.
위와 같은 문제를 해결하기 위하여 사용자는 복수개의 이어폰부 중 제1 이어폰부(101)를 손에 쥐거나 입에 가까이 가져간 상태에서 발화하고, 복수개의 이어폰부 중 제2 이어폰부(102)를 통하여 단말기로부터 수신되는 오디오 신호를 청취하는 경우가 있다.
제1 이어폰부(101)는 S530와 같이 센서부(140_1)를 통하여 미착용 상태를 판단할 수 있다.
제1 이어폰부의 프로세서(180_1)는 사용자의 제1 이어폰부 미착용 상태가 감지되면, 제1 이어폰부를 마이크 모드로 설정하고 제1 이어폰부의 마이크로폰을 활성화 시킬 수 있다.
이때, 제1 이어폰부의 프로세서(180_1)는 제1 이어폰부의 음향출력부(152_1)를 비활성화시킬 수 있다. 제1 이어폰부의 음향출력부(152_1)가 비활성화됨으로써, 활성화된 제1 이어폰부의 마이크로폰(122_1)을 통하여 제1 이어폰부에서 출력되었던 오디오 신호의 입력을 방지할 수 있다.
제2 이어폰부의 프로세서(180_2)는 제2 이어폰부의 음성 수신 모드로 설정하고, 제2 이어폰부의 음향 출력부(152_2)를 활성화 유지할 수 있다.
이때 마이크 모드로 설정된 제1 이어폰부(101)는 마스터 음향기기로 설정될 수 있다. 그리고 음성 수신모드로 설정된 제2 이어폰부(102)는 슬레이브 음향기기로 설정될 수 있다.
본 개시의 실시 예에 따르면, 제1 이어폰부(101)와 제2 이어폰부(102)가 사용자의 귀에 착용된 상태에서 오디오 신호를 출력하는 경우, 제2 이어폰부(102)가 마스터 음향기기이고, 제1 이어폰부(101)는 슬레이브 음향기기일 수 있다. 이때, 제1 이어폰부(101)가 미착용 상태로 감지되면, 제1 이어폰부(101)는 마스터 음향기기로 설정될 수 있다. 제1 이어폰부(101)가 마스터 음향기기로 설정되는 동시에 제2 이어폰부(102)는 슬레이브 음향기기로 설정될 수 있다.
이때, 제1 이어폰부(101)와 제2 이어폰부(102)의 음향출력부(152_1, 152_2)에서 기존에 출력되고 있던 오디오 신호가 스테레오포닉 타입으로 서로 다른 오디오 신호가 재생되고 있던 경우, 제2 이어폰부(102)가 음성 수신모드로 설정되면 단말기(200)는 제2 이어폰부의 음향출력부(152_2)가 모노포닉 타입의 단일채널 오디오 데이터를 출력하도록 지원할 수 있다.
또는 단말기(200)는 제1 이어폰부의 음향출력부(152_1)에서 출력되는 오디오 신호와 제2 이어폰부의 음향출력부(152_2)에서 출력되는 오디오 신호를 믹싱하여 출력되도록 지원하는 것도 가능하다.
사용자는 제1 이어폰부(101)를 귀에서 탈착하여, 음성신호를 발화하는 입 또는 오디오 신호가 발생하는 장치에 가까이 가져가는 경우, 제1 이어폰부의 마이크로폰이 활성화됨으로써 효과적으로 오디오 신호를 수신할 수 있다.
또한, 제1 이어폰부의 음향출력부(152_1)를 비활성화 시킴으로써 제1 이어폰부의 마이크로폰(122_1)으로 수신되는 오디오 잡음 신호가 발생하는 것을 방지할 수 있을 것이다.
한편, 본 개시의 실시 예에 따르면, 제1 이어폰부의 프로세서(180_1)는 제1 이어폰부의 미착용 상태가 기 설정된 시간 이상 유지되는 경우에 상기 제1 이어폰부(101)를 마이크 모드로 설정할 수 있다.
그리고 제1 이어폰부(101)의 미착용 상태가 기 설정된 시간 이상 유지되고, 제1 이어폰부(101)가 충전 상태가 아닌 경우 제1 이어폰부를 마이크 모드로 설정하는 것 또한 가능하다.
예를 들어, 사용자는 휴대용 음향기기(100)를 이용하여 단말기(200)에서 전송된 음악을 감상하던 도중, 음성 발화 의도 없이 단순히 제1 이어폰부(101)를 탈착하거나 충전을 위하여 제1 이어폰부(101)를 탈착할 수 있을 것이다.
이때, S530과 같이 센서부를 이용하여 획득된 데이터의 의해 제1 이어폰부(101)가 미착용 상태로 감지되고, 제1 이어폰부(101)가 마이크 모드로 설정되면 의도치 않게 제1 이어폰부의 마이크로폰(122_1)이 온 제어되는 경우가 발생할 수 있다.
이를 방지하기 위하여 제1 이어폰부(101)의 미착용 상태가 기 설정된 시간 이상 유지되는 경우, 제1 이어폰부(101)를 마이크 모드로 설정할 수 있다.
또한, 제1 이어폰부(101)의 미착용 상태가 기 설정된 시간 이상 유지되고, 제1 이어폰부(101)가 충전 상태가 아닌 경우에 제1 이어폰부를 마이크 모드로 설정할 수 있다.
구체적으로 제1 이어폰부(101)가 충전 상태가 아닌 경우라 함은, 제1 이어폰부(101)의 충전부(130_1)가 비활성화 상태, 즉 제1 이어폰부(101)의 충전 단자가 물리적 또는 전기적으로 연결, 접촉되지 않은 경우를 의미할 수 있다.
본 개시의 실시 예에 따르면, 제1 이어폰부(101)가 마이크 모드로 설정되고, 제2 이어폰부(102)가 음성 수신모드로 설정된 이후(S540, S550), 제1 이어폰부의 프로세서(180_1)는, 제1 이어폰부의 마이크로폰(122_1)을 통해 입력된 오디오 신호를 단말기(200)로 전송하고, 제2 이어폰부의 프로세서(180_2)는, 상기 제2 이어폰부의 음향 출력부(152_2)를 이용하여 상기 단말기(200)로부터 수신된 오디오 신호를 출력할 수 있다(S550).
제2 이어폰부(102)가 음성 신호 모드로 설정되면, 제2 이어폰부의 프로세서(180_2)는 음향 출력부(152_2)를 통해 단말기(200)에서 수신된 모노포닉 오디오 데이터 또는 오디오 신호가 믹싱된 오디오 데이터를 출력할 수 있다.
상기 과정을 통하여 사용자는 미착용 상태인 제1 이어폰부(101)를 이용하여 속삭임과 같이 작은 소리의 음성 신호를 휴대용 음향기기(100)에 입력하고, 단말기(200)를 통하여 외부로 오디오 데이터를 송수신할 수 있을 것이다.
한편, 단말기(200)에서 특정 이벤트가 발생하여 마이크로폰을 활성화 해야하는 경우가 존재한다. 이하 도 6의 실시예는 단말기(200)에서 특정 이벤트가 발생하여 마이크 사용 요청을 수신한 경우의 실시예를 나타낸다.
도 6은 본 개시의 실시 예에 따른 순서도를 나타낸 도면이다.
도 6을 참고하면, 제1 이어폰부(101)와 제2 이어폰부(102)는 각각의 음향 출력부(152_1, 152_2)를 이용하여 단말기(200)로부터 수신한 오디오 데이터를 출력할 수 있다(S520).
이때, 단말기(200)는 휴대용 음향기기(100)의 마이크로폰 사용 요청을 요청할 수 있다.
휴대용 음향기기(100)는 단말기(200)로부터 마이크로폰 사용 요청을 수신하고(S610), 복수개의 이어폰부 중 미착용 상태로 감지되는 이어폰부를 마이크 모드로 설정할 수 있다.
구체적으로, 휴대용 음향기기(100)는 단말기(200)로부터 마이크로폰 사용 요청을 수신하면, 도 5에서 설명한 S530에 따라 복수개의 이어폰부 각각의 미착용 상태를 감지할 수 있다.
이때, 제1 이어폰부(101)가 미착용 상태로 감지되면(S620-YES) 제1 이어폰부의 프로세서(180_1)는 제1 이어폰부를 마이크 모드로 설정할 수 있다(S540).
그리고 제1 이어폰부(101)와 상이한 나머지 이어폰부는 음성수신 모드로 설정될 수 있다. 제1 이어폰부의 프로세서(180_1)는 제1 이어폰부의 마이크로폰(122_1)을 통해 입력된 오디오 신호를 단말기(200)로 전송하고, 상기 제2 이어폰부의 프로세서(180_2)는, 상기 제2 이어폰부의 음향 출력부(152_2)를 이용하여 상기 단말기(200)로부터 수신된 오디오 신호를 출력할 수 있다(S550, S560).
구체적으로 단말기(200)로부터 요청된 마이크로폰 사용 요청은, 상기 단말기(200)의 어플리케이션 설정 변경, 어플리케이션에서 마이크 활성화 요청, 통화 발신 및 통화 수신 중 적어도 하나를 포함할 수 있다.
구체적인 예시는 도 9 내지 도 10에서 설명하도록 한다.
도 7은 본 개시의 실시 예에 따른 제1 이어폰부의 착용 및 미착용을 설명하기 위한 도면이다. 그리고 도 8은 본 개시의 실시 예에 따른 사용자 발화 시나리오를 나타낸 도면이다.
이하, 도 7 내지 도 8에서 제1 이어폰부(101)와 제2 이어폰부(102)를 포함하는 휴대용 음향장치(100)에 있어서 이어폰부의 미착용 상태를 판단하는 구체적 예시를 설명한다.
먼저 제1 이어폰부(101)와 제2 이어폰부(102)는 사용자의 귀에 착용된 상태일 수 있다. 제1 이어폰부(101)의 센서부(140_1)는 제1 이어폰부(101)의 착용 상태를 감지할 수 있다.
이때, 사용자가 제1 이어폰부(101)를 손(702)으로 쥐는 행동 등의 동작으로 인하여 제1 이어폰부(101)가 사용자의 신체에서 탈착되는 경우, 제1 이어폰부는 센서부(140_1)를 이용하여 제1 이어폰부의 미착용 상태를 감지할 수 있다.
본 개시의 실시예에 따르면, 첫째로 제1 이어폰부의 센서부(140_1)는 근접센서를 이용하여 이어폰부와 사용자 신체 일부(예를 들어 귀 내부, 710)까지의 거리를 획득할 수 있다.
제1 이어폰부의 프로세서(180_1)는 획득된 정보가 기 설정된 거리를 이탈한 것을 감지하면, 해당 이어폰부를 미착용 상태로 판단할 수 있다. 일반적으로 사용자가 제1 이어폰부를 신체에서 탈착하는 경우, 사용자의 신체와 제1 이어폰부의 거리는 멀어지는 것이 일반적이므로 제1 이어폰부는 상기 방법을 통해 제1 이어폰부 미착용 상태를 감지할 수 있을 것이다.
본 개시의 실시 예에 따르면 두번째로, 제1 이어폰부의 센서부(140_1)는 모션센서를 이용하여 특정 제스처를 감지할 수 있다.
제1 이어폰부의 프로세서(180_1)는 상기 모션센서를 통해 감지된 특정 제스처가 이어폰부를 통한 음성 신호 수신에 상응하는 제스처인 경우, 해당 이어폰부를 미착용 상태로 판단할 수 있다.
예를 들어 도 8을 참고하면, 사용자의 신체(예를 들어 귀, 701)에 착용된 제1 이어폰부(101)를 손(702)에 의해 발생한 특정 제스처에 의하여 사용자의 입 주변으로 이동될 수 있다.
제1 이어폰부(101)의 프로세서(180_1)는 모션센서를 이용하여 사용자의 귀(701) 부근에서 입 주변으로 이동을 감지하고, 해당 제스처가 제1 이어폰부(101)를 통한 음성 신호 수신에 상응하는 경우 제1 이어폰부를 미착용 상태로 판단할 수 있다.
본 개시의 실시 예에 따르면, 모션센서는 이어폰부의 이동에 따라 사용자의 특정 제스처를 인식할 수 있으며, 자이로스코프 센서와 가속도 센서를 이용하여 사용자의 특정 제스처를 감지하는 것도 가능할 것이다.
본 개시의 실시 예에 따르면 세번째로, 제1 이어폰부의 센서부(140_1)는 가속도 센서를 이용하여 이어폰부가 기 설정된 가속도를 초과하여 움직이는 경우, 해당 이어폰부를 미착용 상태로 판단할 수 있으며, 또한 자이로 센서를 이용하여 이어폰부가 기 설정된 정도 이상 기울어지는 경우 해당 이어폰부를 미착용 상태로 판단할 수 있다.
예를 들어, 도 7 또는 도 8과 같이 사용자가 신체에 접촉된 제1 이어폰부(101)를 재빠르게 신체에서 탈착시키는 경우, 제1 이어폰부의 가속도 센서는 기 설정된 가속도를 초과한 값이 감지할 수 있다.
이때, 제1 이어폰부의 프로세서(180_1)는 제1 이어폰부의 가속도 센서에서 감지된 값이 기 설정된 가속도를 초과한 경우, 제1 이어폰부 미착용 상태로 판단할 수 있다.
또 다른 예시로, 도 8과 같이 사용자는 제1 이어폰부(101)를 신체에서 탈착시켜 손(702)에 쥔 상태로 입 주변에 가져갈 수 있다. 이때, 제1 이어폰부의 마이크로폰(122_1)은 바디부의 일단에 위치하므로 효과적인 음성 수신을 위하여 기울어질 수 있다.
제1 이어폰부(101)의 자이로 센서는 제1 이어폰부의 각속도를 측정하여 제1 이어폰부(101)가 기울어진 기울기를 감지할 수 있다.
제1 이어폰부의 프로세서(180_1)는 자이로 센서에서 감지한 기울기값을 이용하여 자이로 센서가 감지한 기울기값이 기 설정된 값을 초과하는 경우 제1 이어폰부를 미착용 상태로 판단할 수 있다.
상기 실시예들은 각 센서의 종류에 따라 나누어 서술하였으나, 실시 예에 따라 근접 센서, 가속도 센서, 모션 센서, 자이로 센서 또는 전도 센서 중에서 적어도 하나 이상을 이용하여 획득된 데이터를 조합하여 이어폰부의 착용 상태를 감지하는 것 또한 가능할 것이다.
상기 실시예들을 통하여 제1 이어폰부의 프로세서(180_1)는 제1 이어폰부가 미착용 상태로 판단되면 제1 이어폰부를 마이크 모드로 설정할 수 있다.
이에 따라 제2 이어폰부(102)는 음성 수신 모드로 설정될 수 있다.
도 9 및 도 10은 도 6에 따른 단말기를 통해 마이크로폰 사용 요청의 실시예를 설명하기 위한 도면을 나타낸다.
도 9를 참고하면, 사용자는 단말기(200)를 통하여 휴대용 음향장치에 마이크로폰 사용 요청을 전송할 수 있다.
여기서 마이크로폰 사용 요청은 상기 단말기의 어플리케이션 설정 변경, 어플리케이션에서 마이크 활성화 요청, 통화 발신 및 통화 수신 중 적어도 하나를 포함할 수 있다.
구체적으로 사용자는 특정 어플리케이션을 실행하여 어플리케이션의 설정 변경을 통해 마이크로폰 사용 요청을 활성화시킬 수 있다.
예를 들어 단말기(200)의 디스플레이부(251)에는 마이크로폰 사용 요청화면(901)이 출력될 수 있다.
마이크로폰 사용 요청화면(901)은 마이크로폰 사용 요청 활성화 창(902)이 표시될 수 있다.
사용자는 마이크로폰 사용 요청 활성화 창(902)의 버튼을 활성화함으로써 마이크로폰 사용 요청을 휴대용 음향기기(100)로 전송할 수 있다.
휴대용 음향기기(100)는 단말기(200)로부터 마이크로폰 사용 요청을 수신하고, 이어폰부의 미착용 상태에 따라 해당 이어폰부의 마이크 모드를 설정할 수 있을 것이다.
본 개시의 실시 예에 따르면, 마이크로폰 사용 요청은 단말기에 포함된 어플리케이션에서의 마이크 활성화 요청일 수 있다.
구체적으로 사용자는 마이크로폰의 사용 권한을 요구하는 특정 어플리케이션을 실행할 수 있다. 예를 들어 도 10을 참고하면 단말기(200)는 특정 어플리케이션(1001)을 실행할 수 있다. 이때 특정 어플리케이션(1001)은 실시간 방송, 동영상 촬영, 움짤, GIF 이미지 제작 등과 같이 오디오 신호와 영상 신호가 혼합된 컨텐츠를 제공하는 어플리케이션을 포함할 수 있다.
단말기(200)는 휴대용 음향장치(100)와 단말기(200)가 연결된 경우, 특정 어플리케이션(1001)을 실행되면 휴대용 음향기기에 마이크로폰 사용 요청을 전송할 수 있다.
휴대용 음향기기(100)는 단말기(200)의 특정 어플리케이션(1001)의 실행에 따라 단말기(200)로부터 마이크 활성화 요청을 수신할 수 있다. 휴대용 음향기기에 포함된 복수개의 이어폰부 각각은 이어폰부의 착용 여부를 판단할 수 있다.
그 중 제1 이어폰부(101)의 미착용 상태가 감지되면, 제1 이어폰부의 프로세서(180_1)는 제1 이어폰부(101)를 마이크 모드로 설정할 수 있다.
본 개시의 실시 예에 따라 도 10을 참고하면, 사용자는 제1 이어폰부(101)를 손에 잡음으로써 제1 이어폰부(101)는 미착용 상태가 되고, 단말기(200)는 제1 이어폰부의 마이크로폰(122_1)에서 입력되는 오디오 데이터를 이용하여 특정 어플리케이션(1001)에서 요청한 동작을 수행할 수 있을 것이다.
본 개시의 실시 예에 따르면, 마이크로폰 사용 요청은 단말기의 통화 발신 또는 통화 수신일 수 있다.
구체적으로 단말기(200)를 통해 통화가 시작될 수 있다. 단말기의 프로세서(280)는 통화를 위한 발신 또는 수신음이 인식되면, 휴대용 음향기기(100)에 마이크로폰 사용 요청을 전송할 수 있다.
여기서 마이크로폰 사용 요청이란 휴대용 음향기기(100)의 마이크로폰을 통해 입력되는 음성을 단말기와 통화하는 다른 단말기에 전송하기 위하여, 휴대용 음향기기의 마이크 설정 기능을 활성화시키는 것을 의미할 수 있다.
한편 마이크로폰 사용 요청은 단말기(200)의 움직임을 판단하는 센서(가속 센서, 자이로 센서 등)를 통해 기 설정된 형태의 움직임이 감지된 경우를 포함할 수 있다.
또한 단말기(200)에서 특정 키버튼이 조작된 경우, 단말기의 마이크(222)를 통해 특성 음성이 인식된 경우 및 단말기의 카메라(221)를 통해 사용자의 얼굴이 인식된 경우 등 다양한 경우에 휴대용 음향기기(100)로 전송될 수 있을 것이다.
한편, 휴대용 음향기기(100)는 단말기(200)의 마이크로폰 사용 요청에 따라 제1 이어폰부의 마이크로폰이 활성화되면, 사용자에게 제1 이어폰부의 마이크가 활성화됨을 알려주는 알림을 출력할 수 있다.
한편, 본 개시의 실시 예에 따라서, 단말기(200)와 휴대용 음향기기(100)를 포함하는 음향시스템(1)을 더 포함할 수 있으며 제1 이어폰부 및 제2 이어폰부를 포함하는 휴대용 음향기기 및 단말기를 포함하는 시스템에 있어서, 상기 단말기는 휴대용 음향기기와 통신하여 오디오 신호를 송수신하고, 상기 휴대용 음향기기는, 상기 제1 이어폰부의 미착용 상태가 감지되면 상기 제1 이어폰부를 마이크 모드로 설정하고, 상기 제2 이어폰부를 음성 수신모드로 설정하는 시스템을 포함할 수 있다.
또한, 상기 휴대용 음향기기는, 상기 제1 이어폰부의 근접센서를 통해 획득된 정보가 기 설정된 거리를 이탈한 것을 감지하면, 제1 이어폰부의 미착용 상태로 판단할 수 있다.
또한, 상기 휴대용 음향기기는, 상기 제 1 이어폰부의 모션 센서를 통해, 상기 제1 이어폰부를 통한 음성 신호 수신에 상응하는 제스처가 감지되면 상기 제1 이어폰부의 미착용 상태로 판단할 수 있다.
또한 휴대용 음향기기는, 상기 제1 이어폰부가 미착용 상태가 기 설정된 시간 이상 유지되고, 상기 제1 이어폰부가 충천 상태가 아닌 경우, 상기 제1 이어폰부를 마이크 모드로 설정할 수 있다.
또한, 상기 단말기는 상기 휴대용 음향기기에 마이크로폰 사용을 요청하고, 상기 단말기로부터 요청된 마이크로폰 사용 요청은, 상기 단말기의 어플리케이션 설정 변경, 어플리케이션에서 마이크 활성화 요청, 통화 발신 및 통화 수신 중 적어도 하나를 포함할 수 있다.
또한, 제1 이어폰부 및 제2 이어폰부를 포함하는 휴대용 음향기기의 동작 방법에 있어서, 단말기로부터 오디오 신호를 수신하는 단계, 상기 제1 이어폰부의 미착용 상태를 감지하는 단계 및 상기 제1 이어폰부를 마이크 모드로 설정하고 상기 제2 이어폰부를 음성 수신모드로 설정하는 단계를 포함할 수 있다.
상기 제1 이어폰부의 미착용 상태를 감지하는 단계는, 상기 제1 이어폰부의 근접센서를 통해 획득된 정보가 기 설정된 거리를 이탈한 것을 감지하는 단계 또는 상기 제 1 이어폰부의 모션 센서를 통해, 상기 제1 이어폰부를 통한 음성 신호 수신에 상응하는 제스처가 감지하는 단계를 포함할 수 있다. 또한 상기 제1 이어폰부의 미착용 상태를 감지하는 단계 이후, 상기 제1 이어폰부가 충천 상태가 아닌 경우, 상기 제1 이어폰부를 마이크 모드로 설정하는 단계를 더 포함하는 것도 가능할 것이다.
또한, 이상에서 서비스 및 실시 예들을 중심으로 설명하였으나 이는 단지 예시일 뿐 본 발명을 한정하는 것이 아니며, 본 발명이 속하는 분야의 통상의 지식을 가진 자라면 본 서비스 및 실시 예의 본질적인 특성을 벗어나지 않는 범위에서 이상에 예시되지 않은 여러 가지의 변형과 응용이 가능함을 알 수 있을 것이다. 예를 들어, 실시 예들에 구체적으로 나타난 각 구성 요소는 변형하여 실시할 수 있는 것이다. 그리고 이러한 변형과 응용에 관계된 차이점들은 첨부한 청구 범위에서 규정하는 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.
Claims (20)
- 제1 이어폰부 및 제2 이어폰부를 포함하는 휴대용 음향기기에 있어서,상기 제1 이어폰부는통신부;상기 통신부를 통해 수신된 오디오 신호를 출력하는 음향 출력부;마이크로폰;제1 이어폰부의 착용 상태를 감지하는 센서부; 및상기 제1 이어폰부가 미착용 상태로 감지되면, 상기 제1 이어폰부를 마이크 모드로 설정하는 프로세서를 포함하는,휴대용 음향기기.
- 제 1항에 있어서상기 제2 이어폰부는통신부;상기 통신부를 통해 수신된 오디오 신호를 출력하는 음향 출력부;마이크로폰; 및상기 제1 이어폰부가 마이크 모드로 설정되는 경우, 상기 제2 이어폰부를 음성 수신모드로 설정하는 프로세서를 포함하는,휴대용 음향기기.
- 제 1항에 있어서,상기 마이크 모드는, 상기 제1 이어폰부의 마이크로폰을 온 제어하는 모드를 포함하는, 휴대용 음향 기기.
- 제 3항에 있어서,상기 마이크 모드는, 상기 제1 이어폰부의 음향출력부를 오프 제어를 더 포함하는 모드인, 휴대용 음향기기.
- 제 1항에 있어서,상기 제1 이어폰부의 센서부는근접 센서, 가속도 센서, 모션 센서, 자이로 센서 또는 전도 센서 중에서 적어도 하나 이상을 이용하여 상기 착용 상태를 감지하는휴대용 음향 기기.
- 제 1항에 있어서,상기 제1 이어폰부의 센서부는 근접 센서를 포함하고,상기 제1 이어폰부의 프로세서는,상기 제1 이어폰부의 근접센서를 통해 획득된 정보가 기 설정된 거리를 이탈한 것을 감지하면, 제1 이어폰부의 미착용 상태로 판단하는,휴대용 음향 기기.
- 제 1항에 있어서상기 제1 이어폰부의 센서부는 모션 센서를 포함하고,상기 제1 이어폰부의 프로세서는,상기 제 1 이어폰부의 모션 센서를 통해, 상기 제1 이어폰부를 통한 음성 신호 수신에 상응하는 제스처가 감지되면 상기 제1 이어폰부의 미착용 상태로 판단하는,휴대용 음향기기.
- 제 1항에 있어서상기 제1 이어폰부의 프로세서는,상기 제1 이어폰부의 미착용 상태가 기설정된 시간 이상 유지되는 경우에 상기 제1 이어폰부를 상기 마이크 모드로 설정하는,휴대용 음향기기.
- 제 8항에 있어서상기 제1 이어폰부의 프로세서는상기 제1 이어폰부가 미착용 상태가 기설정된 시간 이상 유지되고,상기 제1 이어폰부가 충천 상태가 아닌 경우, 상기 제1 이어폰부를 마이크 모드로 설정하는,휴대용 음향기기.
- 제 1항에 있어서,상기 제1 이어폰부의 통신부 및 상기 제2 이어폰부의 통신부는 단말기와 통신하고,상기 제1 이어폰부의 프로세서는,상기 단말기로부터 마이크로폰 사용 요청을 수신하면, 상기 제1 이어폰부를 마이크 모드로 설정하는,휴대용 음향기기.
- 제 10항에 있어서,상기 단말기로부터 요청된 마이크로폰 사용 요청은,상기 단말기의 어플리케이션 설정 변경, 어플리케이션에서 마이크 활성화 요청, 통화 발신 및 통화 수신 중 적어도 하나를 포함하는,휴대용 음향기기.
- 제 1항에 있어서상기 제1 이어폰부의 프로세서는, 상기 제1 이어폰부의 마이크로폰을 통해 입력된 오디오 신호를 단말기로 전송하고,상기 제2 이어폰부의 프로세서는, 상기 제2 이어폰부의 음향 출력부를 이용하여 상기 단말기로부터 수신된 오디오 신호를 출력하는,휴대용 음향기기.
- 제1 이어폰부 및 제2 이어폰부를 포함하는 휴대용 음향기기 및 단말기를 포함하는 시스템에 있어서,상기 단말기는 휴대용 음향기기와 통신하여 오디오 신호를 송수신하고,상기 휴대용 음향기기는,상기 제1 이어폰부의 미착용 상태가 감지되면 상기 제1 이어폰부를 마이크 모드로 설정하고,상기 제2 이어폰부를 음성 수신모드로 설정하는, 시스템.
- 제 13항에 있어서,상기 휴대용 음향기기는,상기 제1 이어폰부의 근접센서를 통해 획득된 정보가 기 설정된 거리를 이탈한 것을 감지하면, 제1 이어폰부의 미착용 상태로 판단하는,시스템.
- 제 13항에 있어서,상기 휴대용 음향기기는,상기 제 1 이어폰부의 모션 센서를 통해, 상기 제1 이어폰부를 통한 음성 신호 수신에 상응하는 제스처가 감지되면상기 제1 이어폰부의 미착용 상태로 판단하는,시스템.
- 제 13항에 있어서상기 휴대용 음향기기는,상기 제1 이어폰부가 미착용 상태가 기 설정된 시간 이상 유지되고,상기 제1 이어폰부가 충천 상태가 아닌 경우, 상기 제1 이어폰부를 마이크 모드로 설정하는,시스템.
- 제 13항에 있어서,상기 단말기는 상기 휴대용 음향기기에 마이크로폰 사용을 요청하고,상기 단말기로부터 요청된 마이크로폰 사용 요청은,상기 단말기의 어플리케이션 설정 변경, 어플리케이션에서 마이크 활성화 요청, 통화 발신 및 통화 수신 중 적어도 하나를 포함하는,시스템.
- 제1 이어폰부 및 제2 이어폰부를 포함하는 휴대용 음향기기의 동작 방법에 있어서,단말기로부터 오디오 신호를 수신하는 단계;상기 제1 이어폰부의 미착용 상태를 감지하는 단계; 및상기 제1 이어폰부를 마이크 모드로 설정하고 상기 제2 이어폰부를 음성 수신모드로 설정하는 단계를 포함하는,휴대용 음향기기의 동작 방법.
- 제 18항에 있어서,상기 제1 이어폰부의 미착용 상태를 감지하는 단계는,상기 제1 이어폰부의 근접센서를 통해 획득된 정보가 기 설정된 거리를 이탈한 것을 감지하는 단계 또는 상기 제 1 이어폰부의 모션 센서를 통해, 상기 제1 이어폰부를 통한 음성 신호 수신에 상응하는 제스처가 감지하는 단계를 포함하는,휴대용 음향기기의 동작 방법.
- 제 19항에 있어서,상기 제1 이어폰부의 미착용 상태를 감지하는 단계 이후,상기 제1 이어폰부가 충천 상태가 아닌 경우, 상기 제1 이어폰부를 마이크 모드로 설정하는 단계를 더 포함하는,휴대용 음향기기의 동작 방법.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US18/031,459 US20230379615A1 (en) | 2020-10-12 | 2021-04-20 | Portable audio device |
DE112021004151.7T DE112021004151T5 (de) | 2020-10-12 | 2021-04-20 | Tragbares Audiogerät |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2020-0130945 | 2020-10-12 | ||
KR1020200130945A KR102386110B1 (ko) | 2020-10-12 | 2020-10-12 | 휴대용 음향기기 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2022080612A1 true WO2022080612A1 (ko) | 2022-04-21 |
Family
ID=81209302
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/KR2021/004935 WO2022080612A1 (ko) | 2020-10-12 | 2021-04-20 | 휴대용 음향기기 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20230379615A1 (ko) |
KR (1) | KR102386110B1 (ko) |
DE (1) | DE112021004151T5 (ko) |
WO (1) | WO2022080612A1 (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4207796A1 (en) * | 2021-12-29 | 2023-07-05 | Harman International Industries, Incorporated | Wireless headphone system with standalone microphone functionality |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
USD1023048S1 (en) * | 2022-07-21 | 2024-04-16 | Lg Electronics Inc. | Display panel with animated graphical user interface |
WO2024053931A1 (ko) * | 2022-09-05 | 2024-03-14 | 삼성전자 주식회사 | 마이크를 전환하는 방법 및 전자 장치 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007121694A (ja) * | 2005-10-28 | 2007-05-17 | Sharp Corp | 携帯端末装置、ヘッドホン、及び携帯端末装置の再生制御方法 |
KR101330476B1 (ko) * | 2012-03-29 | 2013-11-15 | 신두식 | 귓속 삽입형 마이크를 사용하는 유무선 이어폰 장치 |
KR20170115480A (ko) * | 2016-02-03 | 2017-10-17 | 선전 구딕스 테크놀로지 컴퍼니, 리미티드 | 이어폰 작동 모드의 전환 방법 및 이어폰 |
KR101802764B1 (ko) * | 2016-07-29 | 2017-11-29 | 엘지전자 주식회사 | 휴대용 음향기기 |
KR101803306B1 (ko) * | 2016-08-11 | 2017-11-30 | 주식회사 오르페오사운드웍스 | 이어폰 착용상태 모니터링 장치 및 방법 |
-
2020
- 2020-10-12 KR KR1020200130945A patent/KR102386110B1/ko active IP Right Grant
-
2021
- 2021-04-20 US US18/031,459 patent/US20230379615A1/en active Pending
- 2021-04-20 DE DE112021004151.7T patent/DE112021004151T5/de active Pending
- 2021-04-20 WO PCT/KR2021/004935 patent/WO2022080612A1/ko active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007121694A (ja) * | 2005-10-28 | 2007-05-17 | Sharp Corp | 携帯端末装置、ヘッドホン、及び携帯端末装置の再生制御方法 |
KR101330476B1 (ko) * | 2012-03-29 | 2013-11-15 | 신두식 | 귓속 삽입형 마이크를 사용하는 유무선 이어폰 장치 |
KR20170115480A (ko) * | 2016-02-03 | 2017-10-17 | 선전 구딕스 테크놀로지 컴퍼니, 리미티드 | 이어폰 작동 모드의 전환 방법 및 이어폰 |
KR101802764B1 (ko) * | 2016-07-29 | 2017-11-29 | 엘지전자 주식회사 | 휴대용 음향기기 |
KR101803306B1 (ko) * | 2016-08-11 | 2017-11-30 | 주식회사 오르페오사운드웍스 | 이어폰 착용상태 모니터링 장치 및 방법 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4207796A1 (en) * | 2021-12-29 | 2023-07-05 | Harman International Industries, Incorporated | Wireless headphone system with standalone microphone functionality |
Also Published As
Publication number | Publication date |
---|---|
US20230379615A1 (en) | 2023-11-23 |
KR102386110B1 (ko) | 2022-04-13 |
DE112021004151T5 (de) | 2023-06-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2022080612A1 (ko) | 휴대용 음향기기 | |
WO2016208797A1 (ko) | 헤드셋 및 그 제어 방법 | |
WO2012091185A1 (en) | Display device and method of providing feedback for gestures thereof | |
WO2019088802A1 (ko) | 전자 장치 및 전자 장치 간 음성으로 기능을 실행하는 방법 | |
WO2020204611A1 (en) | Method for detecting wearing of acoustic device and acoustic device supporting the same | |
WO2016032011A1 (en) | Wireless headset and method of contrlling the same | |
WO2017142139A1 (ko) | 이동 단말기 및 이를 포함하는 이동 단말기 음향신호 처리시스템 | |
WO2015102148A1 (ko) | 넥밴드형 단말기 | |
WO2017171137A1 (ko) | 보청장치, 휴대장치 및 그 제어방법 | |
WO2015125993A1 (ko) | 이동 단말기 및 이동 단말기의 제어방법 | |
WO2015190641A1 (ko) | 무선 리시버 및 그 제어 방법 | |
WO2021085902A1 (ko) | 복수의 어플리케이션들의 오디오 데이터를 출력하는 전자 장치 및 그 동작 방법 | |
WO2014157757A1 (ko) | 이동식 입력 장치 및 그를 이용한 명령 입력 방법 | |
WO2014119835A1 (ko) | 이동 단말기, 및 그 동작방법 | |
WO2022019577A1 (ko) | 마이크를 포함하는 오디오 출력 장치 | |
WO2019103471A1 (en) | Method of providing vibration and electronic device for supporting same | |
WO2021034127A1 (en) | Electronic device including multi-channel speaker system | |
WO2022154363A1 (ko) | 오디오 데이터를 처리하기 위한 오디오 장치 및 그의 동작 방법 | |
WO2021145659A1 (en) | Audio output device and method for controlling output speed of audio data thereof | |
WO2019221562A1 (en) | Electronic device and method of controlling electronic device | |
WO2021096307A2 (en) | Electronic device for performing communication connection to external electronic device and operation method thereof | |
WO2022014734A1 (ko) | 무선 음향 기기를 제어하는 단말기 및 그 방법 | |
WO2020111606A1 (ko) | 착탈 모듈이 결합된 안경 | |
WO2021194096A1 (ko) | 하우징 디바이스 | |
WO2020145417A1 (ko) | 로봇 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 21880264 Country of ref document: EP Kind code of ref document: A1 |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 21880264 Country of ref document: EP Kind code of ref document: A1 |