KR102180955B1 - 음성 데이터 송신 및 수신 방법 - Google Patents
음성 데이터 송신 및 수신 방법 Download PDFInfo
- Publication number
- KR102180955B1 KR102180955B1 KR1020140099014A KR20140099014A KR102180955B1 KR 102180955 B1 KR102180955 B1 KR 102180955B1 KR 1020140099014 A KR1020140099014 A KR 1020140099014A KR 20140099014 A KR20140099014 A KR 20140099014A KR 102180955 B1 KR102180955 B1 KR 102180955B1
- Authority
- KR
- South Korea
- Prior art keywords
- communication
- voice
- voice data
- data file
- audio
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 64
- 238000004891 communication Methods 0.000 claims abstract description 93
- 230000005540 biological transmission Effects 0.000 claims abstract description 13
- 230000008569 process Effects 0.000 claims description 10
- 238000001514 detection method Methods 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims 2
- 230000015654 memory Effects 0.000 description 45
- 230000006870 function Effects 0.000 description 25
- 230000001413 cellular effect Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 16
- 238000007726 management method Methods 0.000 description 9
- 230000014509 gene expression Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 7
- 239000000470 constituent Substances 0.000 description 4
- 230000036541 health Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 229920001621 AMOLED Polymers 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- ZPUCINDJVBIVPJ-LJISPDSOSA-N ***e Chemical compound O([C@H]1C[C@@H]2CC[C@@H](N2C)[C@H]1C(=O)OC)C(=O)C1=CC=CC=C1 ZPUCINDJVBIVPJ-LJISPDSOSA-N 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 238000002567 electromyography Methods 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 238000013518 transcription Methods 0.000 description 2
- 230000035897 transcription Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000002583 angiography Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000001646 magnetic resonance method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
- 229910052724 xenon Inorganic materials 0.000 description 1
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/20—Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/0018—Speech coding using phonetic or linguistical decoding of the source; Reconstruction using text-to-speech synthesis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
- G10L2015/025—Phonemes, fenemes or fenones being the recognition units
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Telephone Function (AREA)
Abstract
본 발명의 다양한 실시 예는, 통신 송신 방법과 통신 수신 방법에 관한 것이다. 본 발명의 실시 예에 따른 통신 수신 방법은, 통신에서 적어도 하나의 음성 데이터 파일의 포함을 야기하거나 요구하는 음성 기능의 선택을 검출하는 과정; 및 상기 적어도 하나 이상의 음성 데이터 파일을 수신하는 과정을 포함할 수 있다. 또한, 본 발명의 다양한 실시 예는 상술한 실시 예와 다른 실시 예들도 포함한다.
Description
본 발명의 다양한 실시 예는, 음성(phonetic) 데이터를 송신 및 수신하는 방법에 관한 것이다.
이동 단말기 등과 같은 전자 장치는, 사용자 간의 무선 통신을 제공하기 위해 개발되었으며, 기술이 진보하면서, 이동 단말기는 간단한 전화 통화를 넘어 다양한 추가 기능을 제공하고 있다. 예를 들어, 이동 단말기는 경보, 단문 메시지 서비스(SMS), 멀티미디어 메시지 서비스(MMS), 이메일, 게임, 근거리 통신 원격 제어, 이미징 기능 등의 다양한 추가 기능을 제공할 수 있다.
또한, 디지털 카메라, 오디오 및 비디오 콘텐츠 예약 기능, 그리고 더 많은 것들을 제공하는 멀티미디어 기능을 사용할 수 있다. 현재에도 여러 유형의 이동 단말기들이 효과적으로 사용되고 있으며, 일상 생활의 필수 품이 되었다.
현재, 발신자의 아이덴티티(identity, 이하, ‘아이디’라고 함.) 정보를 착신자에게 제공하는 방법이 존재하며, 상기 방법은 문자 음성(text-to-speech) 변환 기능에 기반하여 발신자 아이디(caller ID)를 제공할 수 있다. 또한, 발신자가, 발신자의 아이디를 표현하는 음성 알파벳을 생성 및 편집하는 방법이 존재한다. 상기 음성 표현은, 발신자 아이디 정보로서 착신자에게 전달된다.
상기 발신자 아이디의 음성 표현은, 상기 착신자에게 표시되고, 소리로 변환되며, 상기 착신자에게 적합한 언어의 알파벳 문자로 변환되어 디스플레이될 수도 있다. 그러나, 식별자(identifier)의 음성 발음(phonetic pronunciation) 에 대한 데이터 파일을 요구, 생성, 그리고 통신할 수 있는 보다 개선된 장치 및 방법이 요구되고 있는 실정이다.
본 발명의 다양한 실시 예는, 식별자의 음성 발음에 대한 데이터 파일을 생성 및 저장하고, 상기 데이터 파일을 통신하는 음성 데이터 송신 및 수신 방법을 제공한다.
본 발명의 실시 예에 따르면, 통신 수신 방법에 있어서, 통신에서 적어도 하나의 음성 데이터 파일의 포함을 야기하거나 요구하는 음성 기능의 선택을 검출하는 과정; 및 상기 통신에서, 상기 적어도 하나 이상의 음성 데이터 파일을 수신하는 과정을 포함할 수 있다.
본 발명의 실시 예에 따르면, 통신 송신 방법에 있어서, 음성 데이터를 갖는 디바이스를 프로그래밍하는 과정; 상기 음성 데이터를 포함하는 이미지 또는 오디오 중 하나 이상을 생성하는 과정; 및 상기 통신 수신에 따라 재생 또는 디스플레이 될 오디오 또는 이미지 파일 중 하나 이상을 송신하는 과정을 포함할 수 있다.
본 발명의 다양한 실시 예에 따르면, 스마트 폰 등과 같은 다양한 유형의 전자 장치에서, 식별자의 음성 발음에 대한 데이터 파일을 생성 및 저장하고, 상기 데이터 파일을 통신함으로써, 예를 들어, 발신자의 아이디(caller id) 또는 발신자의 아이디에 관련된 식별 정보를, 착신자에 적합한 음성 발음(phonetic pronunciation) 및/또는 음성 표기(phonetic transcription) 등으로 재생하여 제공할 수 있게 된다.
도 1은 본 발명의 다양한 실시 예에 따른 전자 장치가 포함된 네트워크 환경을 예시한 도면이다.
도 2는 본 발명의 다양한 실시 예에 따른 음성 데이터 모듈의 블록 도면이다.
도 3은 본 발명의 다양한 실시 예에 따른 음성 데이터 프로그래밍 방법을 예시한 도면이다.
도 4는 본 발명의 다양한 실시 예에 따른 음성 데이터 송신 방법을 예시한 도면이다.
도 5는 본 발명의 다양한 실시 예에 따른 음성 데이터 송신 방법에 대한 다른 예시 도면이다.
도 6은 본 발명의 다양한 실시 예에 따른 음성 데이터 수신 방법을 예시한 도면이다.
도 7은 본 발명의 다양한 실시 예에 따른 음성 데이터 수신 방법에 대한 다른 예시 도면이다.
도 8은 본 발명의 다양한 실시 예에 따른 하드웨어 블록을 예시한 도면이다.
도 2는 본 발명의 다양한 실시 예에 따른 음성 데이터 모듈의 블록 도면이다.
도 3은 본 발명의 다양한 실시 예에 따른 음성 데이터 프로그래밍 방법을 예시한 도면이다.
도 4는 본 발명의 다양한 실시 예에 따른 음성 데이터 송신 방법을 예시한 도면이다.
도 5는 본 발명의 다양한 실시 예에 따른 음성 데이터 송신 방법에 대한 다른 예시 도면이다.
도 6은 본 발명의 다양한 실시 예에 따른 음성 데이터 수신 방법을 예시한 도면이다.
도 7은 본 발명의 다양한 실시 예에 따른 음성 데이터 수신 방법에 대한 다른 예시 도면이다.
도 8은 본 발명의 다양한 실시 예에 따른 하드웨어 블록을 예시한 도면이다.
이하, 첨부된 도면을 참조하여 본 발명의 다양한 실시 예를 설명한다. 본 발명의 다양한 실시 예는 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나, 이는 본 발명의 다양한 실시 예를 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 다양한 실시 예의 사상 및 기술 범위에 포함되는 모든 변경 및/또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용되었다.
본 발명의 다양한 실시 예 가운데 사용될 수 있는“포함한다” 또는 “포함할 수 있다” 등의 표현은 해당 기능, 동작 또는 구성요소 등의 존재를 가리키며, 추가적인 하나 이상의 기능, 동작 또는 구성요소 등을 제한하지 않는다. 또한, 본 발명의 다양한 실시 예에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명의 다양한 실시 예에서 “또는” 등의 표현은 함께 나열된 단어들의 어떠한, 그리고 모든 조합을 포함한다. 예를 들어, “A 또는 B”는, A를 포함할 수도, B를 포함할 수도, 또는 A 와 B 모두를 포함할 수도 있다. 본 발명의 다양한 실시 예 가운데 “제1,”“제2,”“첫째,”또는“둘째,”등의 표현들이 본 발명의 다양한 실시 예의 다양한 구성요소들을 수식할 수 있지만, 해당 구성요소들을 한정하지 않는다.
예를 들어, 상기 표현들은 해당 구성요소들의 순서 및/또는 중요도 등을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분 짓기 위해 사용될 수 있다. 예를 들어, 제1 사용자 장치와 제 2 사용자 장치는 모두 사용자 장치며, 서로 다른 사용자 장치를 나타낸다. 예를 들어, 본 발명의 다양한 실시 예의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다. 본 발명의 다양한 실시 예는 전술한 장치들에 한정되지 않음은 당업자에게 자명하다.
본 발명에 따른 전자 장치는, 통신 기능이 포함된 장치일 수 있다. 예를 들면, 스마트 폰(Smart Phone), 태블릿 PC(Tablet Personal Computer), 이동전화기(Mobile Phone), 화상전화기, 전자북 리더기(E-Book Reader), 데스크탑 PC(Desktop Personal Computer), 랩탑 PC(Laptop Personal Computer), 넷북 컴퓨터(Netbook Computer), PDA(Personal Digital Assistant), PMP(Portable Multimedia Player), MP3 플레이어, 모바일 의료기기, 전자 팔찌, 전자 목걸이, 전자 앱세서리(Appcessory), 카메라(Camera), 웨어러블 장치(Wearable Device), 전자 시계(Electronic Clock), 손목 시계(Wrist Watch), 스마트 가전(Smart White Appliance)(예: 냉장고, 에어컨, 청소기, 인공 지능 로봇, TV, DVD(Digital Video Disk) 플레이어, 오디오, 오븐, 전자레인지, 세탁기, 공기 청정기, 전자 액자 등), 각종 의료기기(예: MRA(Magnetic Resonance Angiography), MRI(Magnetic Resonance Imaging), CT(Computed Tomography), 촬영기, 초음파기 등), 네비게이션(Navigation) 장치, GPS 수신기(Global Positioning System Receiver), EDR(Event Data Recorder), FDR(Flight Data Recorder), 셋톱 박스(Set-Top Box), TV 박스(예를 들면, 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 전자 사전, 자동차 인포테인먼트(Infotainment) 장치, 선박용 전자 장비(Electronic Equipment for Ship, 예를 들면, 선박용 항법 장치, 자이로 콤파스 등), 항공 전자기기(Avionics), 보안 기기, 전자 의복, 전자 키, 캠코더(Camcorder), 게임 콘솔(Game Consoles), HMD(Head-Mounted Display), 평판표시장치(Flat Panel Display Device), 전자 앨범, 통신 기능을 포함한 가구(Furniture) 또는 건물/구조물의 일부, 전자 보드(Electronic Board), 전자 사인 입력장치(Electronic Signature Receiving Device) 또는 프로젝터(Projector) 등의 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 본 발명에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
본 발명의 다양한 실시 예는, 통신에서 전송될 음성 데이터를 갖는 프로그램 파일을 생성하는 장치 및 방법을 포함한다. 예를 들어, 하나의 전자 장치를 제어하는 엔티티(entity, 이하, ‘실체’라고 함.)는, 다른 전자 장치를 제어하는 실체와 통신하기를 원할 수 있다. 여기서, 상기 실체는 스마트 폰 등과 같은 전자 장치이거나, 상기 전자 장치를 사용하는 사용자를 포함할 수 있다.
상기 메시지를 송신하고자 하는 실체는, 데이터 파일, 또는 상기 송신 실체의 아이디 또는 상기 송신 실체의 식별자와 관련된 아이디를 적절한 발음으로 수신 실체(예: 착신자 또는 착신 단말기)에 도움을 주는 실행 파일을 송신할 것을 원할 수 있다.
상기와 같은 파일은, 예를 들어, “음성 파일(phonetic file)” 또는 “음성 데이터 파일(phonetic data file)” 등으로 지칭될 수 있다. 상기 파일은 음성 알파벳 시스템, 예를 들어, 국제 음성 협회에서 고안한 국제 음성 알파벳(IPA: International Phonetic Alphabet)이거나, 또는 구두(oral) 언어의 사운드를 표현하는 어떤 다른 음성 시스템(예: NATO 음성 알파벳) 등을 포함할 수 있고, 더 확장된 다양한 음성 알파벳 시스템을 포함할 수도 있다.
또한, 상기 파일은, 어떤 다른 표준을 포함하거나, “A”를 “alpha”라고 하기 보다는 “Africa”로 지정한 사용자 시스템과 같은 맞춤형 음성 시스템 또는 데이터를 포함할 수 있다. 상기 파일은, 송신 실체의 아이디 또는 송신 실체의 식별자와 관련된 아이디에 해당하는 소리를 심볼 세트로 표준화하는 것을 이용하는 음성 표기(phonetic transcription)(예: 소리를 문자화하는 것) 시스템의 구성요소를 포함할 수 있다.
상기 음성 파일은, 장치 메모리에 저장되거나, 통신 네트워크를 통해 접속할 수 있으며, 미리 녹음된 오디오 또는 이미지 파일을 포함할 수 있다. 본 발명의 실시 예에서, 상기 아이디, 상기 디바이스, 또는 발신자 또는 수신자에 관련된 식별자의 아이디는, 제한되지 않는다. 예를 들어, 상기 아이디는, 제1 및/또는 마지막 이름, 이메일 주소, 집 주소, 폰 번호, 디바이스 모델 번호 등을 포함할 수 있다.
일 실시 예에서, 상기 송신되는 파일은, 다양한 파일 형태로서, 이동 오디오 파일 또는 비디오 파일 등을 포함할 수 있고, 하나 이상의 실행 파일을 포함할 수도 있다. 예를 들어, 상기 파일은, 하나 이상의 음성 알파벳(예: IPA 및/또는 NATO 음성 알파벳)에 따라, 원하는 실체의 아이디의 발음으로 프로그램된 오디오 파일을 포함할 수 있다.
예를 들어, “Bryce Nyle”이라는 이름을 가진 발신자가 전화를 하면, 상기 송신되는 파일은, 재생할 때, “Bravo의 B”, “Romeo의 R”, “Yankee의 Y”, “Charlie의 C”, “Echo의 E”, “ November의 N”, “Yankee의 Y”, “Lima의 L”, “Echo의 E”로 발음되는 오디오 파일을 포함할 수 있다.
또한, 특정 문자에 대한 하나 이상의 잠재적 사운드를 구별하는 시스템이 사용될 수도 있다. 예를 들어, 상기 시스템은, 문자 “Y” 의 사운드가 단어 “India”에서 문자 “I”와 같고, 문자 “C” 의 사운드가 단어 “Sierra”에서 문자 “S”와 같다는 것을, 재생할 때 나타낼 수도 있다.
상기 송신 파일은, 제한되지 않으며, 다양한 방법으로 대체될 수 있다. 예를 들어, 프로그램된 파일은, 디바이스를 제조하는 과정에서 미리 로딩되거나, 디바이스를 설정(setup)하는 시점에 프로그래밍(programming)될 수 있으며, 전자 통신 또는 음성 통신을 수행하기 이전, 도중, 이후의 다양한 사용자 환경에 의해 프로그래밍이 발생할 수도 있다.
상기 프로그래밍은, 디바이스가 프로그래밍 모드에 진입하거나, 사용자가 음성 데이터에 대한 식별자를 지정할 때 발생할 수 있다. 예를 들어, “Bryce Nyle”라는 이름의 디바이스 사용자가, 그의 이름을 식별자로 지정하는 경우, 상기 디바이스는, 그의 이름에 따른 음성 철자(spelling)를 나타내는 음성 데이터 파일을 저장 및 송신하도록 프로그램을 수행할 것이다. (예: “Bravo의 B”, “Romeo의 R”, “Yankee의 Y”, “Charlie의 C”, “Echo의 E”, “November의 N”, “Yankee의 Y”, “Lima의 L”, “Echo의 E”)
또한, 상기 디바이스는, 특정 문자에 대한 하나 이상의 잠재적 사운드를 구별하는 시스템을 포함하도록 프로그래밍될 수도 있다. 예를 들어, 상기 시스템은, 문자 “Y”의 사운드가 단어 “India”에서 문자 “I”와 같고, 문자 “C”의 사운드가 단어 “Sierra”에서 문자 “S”와 같다는 것을 재생할 때 나타낼 수 있다.
본 발명의 실시 예에서, 상기 파일을 생성, 저장 및 통신에 첨부하는 방법은 제한되지 않는다, 예를 들어, 음성 데이터는, 외부 또는 PC, 노트북 컴퓨터, 휴대용 컴퓨터, 다양한 휴대용 컴퓨터 단말기(예: 스마트 폰 등) 상의 다른 소프트웨어에 의해 생성될 수 있다.
예를 들어, 파일 생성 및 저장은, 디바이스 설정(setup) 과정의 시점에 발생할 수 있다. 또한, 원하는 데이터 파일은, 디바이스 또는 사용자 설정에 기반하여 통신 이전에 추가되거나, 실시간 사용자 명령(예: 음성 통신 개시 시점 또는 음성 통신 중간 시점)에 기반하여 통신 시점에 추가될 수도 있다.
본 발명의 실시 예에서, 상기 통신의 종류는 제한되지 않으며, 예를 들어, 음성 통신, 영상 통신, 영상 전화 통신, 이메일 통신 중 어느 하나를 포함할 수 있다. 수신자 또는 수신 디바이스는 송신자로부터 음성 데이터를 요구할 수 있다. 예를 들어, 통상의 설정에서는, 송신 실체들의 일부 또는 모두와의 접속에서 음성 데이터가 포함되도록, 수신 디바이스가 자동으로 요구하는 것이 적용될 수 있다.
또한, 수신자는 통신 응답 초기, 통신 도중, 또는 통신 이후에, 송신측으로부터 음성 데이터를 요구할 수 있다. 예를 들어, 콜 센터의 고객 서비스 담당자는 전화 통화 도중에 발신자의 이름의 철자를 요청할 수 있다. 상기 수신 실체는, 수신 디바이스에 대한 음성 데이터를 포함하는 통신을 수신하면, 음성 파일을 저장할 수 있으며, 분석 및 재생하거나 디스플레이할 수 있다.
예를 들어, 상기 음성 파일이 오디오 파일인 경우, 음성 데이터는 소형 mp3 파일일 수 있으며, 상기 mp3 파일은 널리 알려진 어플리케이션 중 하나를 이용하여, 수신 디바이스에서 재생될 수 있다. 또한, 상기 음성 파일이 음성 표기인 경우, 음성 데이터는 소형 이미지 파일(예: GIF 또는 PNG 파일)일 수 있으며, 상기 이미지 파일은, 널리 알려진 어플리케이션 중 하나를 이용하여, 수신 디바이스에서 재생 및 표시될 수 있다.
상기 음성 파일은, 통신 이전, 통신 도중, 또는 통신 이후에 분석 및 재생 또는 디스플레이될 수 있다. 또한, 상기 음성 파일은, 장치 또는 다른 메모리에 저장될 수 있으며, 예를 들어, 연락처 리스트 정보 또는 송신 실체와 관련된 다른 정보에 포함될 수 있으며, 나중에 재생 또는 디스플레이 될 수 있다.
도 1은, 본 발명의 다양한 실시 예에 따른 전자 장치를 포함하는 네트워크 환경을 예시한 도면이다. 도 1을 참조하면, 상기 네트워크 환경 100은, 전자 장치 101를 포함하고, 상기 전자 장치 101은, 버스 110, 프로세서 120, 메모리 130, 입/출력 인터페이스140, 디스플레이 150, 통신 모듈 160, 그리고 음성 데이터 모듈 170 등을 포함할 수 있다.
상기 버스 110은 전술한 구성요소들을 서로 연결하고, 전술한 구성요소들 간의 통신 예를 들면, 제어 메시지를 전달하는 회로일 수 있다. 상기 프로세서 120은, 예를 들면, 상기 버스 110를 통해 전술한 다른 구성요소들(예: 메모리 130, 입/출력 인터페이스 140, 디스플레이 150, 통신 모듈 160 등)로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독된 명령에 따른 연산이나 데이터 처리를 실행할 수 있다.
상기 메모리 130은, 상기 프로세서 120 또는 다른 구성요소들(예: 메모리 130, 입/출력 인터페이스 140, 디스플레이 150, 통신 모듈160, 음성 데이터 모듈 170등)로부터 수신되거나 상기 프로세서 120 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다.
상기 메모리 130은, 예를 들면, 커널 131, 미들웨어 132, 어플리케이션 프로그래밍 인터페이스(API: Application Programming Interface) 133 또는 애플리케이션 134 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.
상기 커널 131은 나머지 다른 프로그래밍 모듈들, 예를 들면, 미들웨어 132, API 133 또는 애플리케이션 134에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 버스 110, 프로세서120 또는 메모리 130 등)을 제어 또는 관리할 수 있다. 상기 커널 131은 상기 미들웨어 132, API 133 또는 애플리케이션 134에서 전자 장치 101의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
상기 미들웨어 132는 상기 API 133 또는 애플리케이션 134이 커널 131과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 상기 미들웨어 132는 하나 이상의 애플리케이션들 134로부터 수신된 작업 요청들과 관련하여, 예를 들면, 하나 이상의 애플리케이션들 134 들 중 적어도 하나의 애플리케이션에 전자 장치 101의 시스템 리소스(예: 버스 110, 프로세서 120 또는 메모리 130 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 로드 밸런싱을 수행할 수 있다.
상기 API 133는 애플리케이션 134이 커널 131 또는 미들웨어 132에서 제공하는 기능을 제어할 수 있는 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수를 포함할 수 있다.
본 발명의 다양한 실시 예에 따르면, 상기 어플리케이션 134는 SMS 어플리케이션, /MMS 어플리케이션, 이메일 어플리케이션, 달력 어플리케이션, 알람 어플리케이션, 건강 관리(health care) 어플리케이션(예: 운동량 또는 혈당 등을 측정하는 어플리케이션) 또는 환경 정보 어플리케이션(예: 기압, 습도 또는 온도 정보 등을 제공하는 어플리케이션) 등을 포함할 수 있다.
추가적으로 또는 대체적으로, 상기 어플리케이션 134은 상기 전자 장치 101와 외부 전자 장치(예: 전자 장치 104) 사이의 정보 교환과 관련된 어플리케이션일 수 있다. 상기 정보 교환과 관련된 어플리케이션은, 예를 들어, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 상기 알림 전달 어플리케이션은 상기 전자 장치 101의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션 또는 환경 정보 어플리케이션 등)에서 발생한 알림 정보를 외부 전자 장치(예: 전자 장치 104)로 전달하는 기능을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치 104)로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다.
상기 장치 관리 어플리케이션은, 예를 들면, 상기 전자 장치 101와 통신하는 외부 전자 장치(예: 전자 장치 104)의 적어도 일부에 대한 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴온/턴오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 상기 외부 전자 장치에서 동작하는 어플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)를 관리(예: 설치, 삭제 또는 업데이트)할 수 있다.
본 발명의 다양한 실시 예에 따르면, 상기 어플리케이션 134은 상기 외부 전자 장치(예: 전자 장치 104)의 속성(예: 전자 장치의 종류)에 따라 지정된 어플리케이션을 포함할 수 있다.
예를 들어, 외부 전자 장치가 MP3 플레이어인 경우, 상기 어플리케이션 134은 음악 재생과 관련된 어플리케이션을 포함할 수 있다. 유사하게, 외부 전자 장치가 모바일 의료기기인 경우, 상기 어플리케이션 134은 건강 관리와 관련된 어플리케이션을 포함할 수 있다. 한 실시 예에 따르면, 상기 어플리케이션 134은 전자 장치 101에 지정된 어플리케이션 또는 외부 전자 장치(예: 서버 106 또는 전자 장치 104)로부터 수신된 어플리케이션 중 적어도 하나를 포함할 수 있다.
상기 입출력 인터페이스 140은, 입출력 장치를 통하여 사용자로부터 입력된 명령 또는 데이터를, 예를 들면, 상기 버스 110를 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160에 전달할 수 있다.
예를 들면, 상기 입출력 인터페이스 140은 터치 스크린을 통하여 입력된 사용자의 터치에 대한 데이터를 상기 프로세서 120로 제공할 수 있다. 또한, 상기 입출력 인터페이스 140은, 예를 들면, 상기 버스 110을 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160로부터 수신된 명령 또는 데이터를 상기 입출력 장치(예: 스피커 또는 디스플레이)를 통하여 출력할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 상기 프로세서 120를 통하여 처리된 음성 데이터를 스피커를 통하여 사용자에게 출력할 수 있다.
상기 디스플레이 150은 사용자에게 각종 정보(예: 멀티미디어 데이터 또는 텍스트 데이터 등)을 표시할 수 있다. 예를 들어, 상기 디스플레이 150은 GUI(Graphical User Interface)를 디스플레이하여, 사용자가 전자 장치 101과 상호 작용할 수 있도록 한다.
상기 통신 인터페이스 160은 상기 전자장치 101와 외부 장치(예: 전자 장치 104 또는 서버 106) 간의 통신을 연결할 수 있다.
예를 들면, 상기 통신 인터페이스 160은 무선 통신 또는 유선 통신을 통해서 네트워크 162에 연결되어 상기 외부 장치와 통신할 수 있다. 상기 무선 통신은, 예를 들어, WiFi(wireless fidelity), BT(Bluetooth), NFC(near field communication), GPS(global positioning system) 또는 cellular 통신(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등) 중 적어도 하나를 포함할 수 있다. 상기 유선통신은, 예를 들어, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232), POTS(plain old telephone service) 중 적어도 하나를 포함할 수 있다.
본 발명의 한 실시 예에 따르면, 상기 네트워크 162는 통신 네트워크(telecommunications network)일 수 있다. 상기 통신 네트워크 는 컴퓨터 네트워크(computer network), 인터넷(internet), 사물 인터넷(internet of things) 또는 전화망(telephone network) 중 적어도 하나를 포함할 수 있다. 한 실시 예에 따르면, 상기 전자 장치 101와 외부 장치 간의 통신을 위한 프로토콜(예: transport layer protocol, data link layer protocol 또는 physical layer protocol))은 어플리케이션 134, 어플리케이션 프로그래밍 인터페이스 133, 상기 미들웨어 132, 커널 131 또는 통신 인터페이스 160 중 적어도 하나에서 지원될 수 있다.
상기 음성 데이터 모듈 170은, 예를 들어, 다른 구성 요소(예: 프로세서 120, 메모리 130, 입/출력 인터페이스 140, 통신 인터페이스 160 등)로부터 수신되는 정보의 적어도 일부를 처리하고, 사용자가 원하는 여러 방식 등으로 다양한 정보 또는 서비스 등을 제공할 수 있다. 예를 들어, 상기 음성 데이터 모듈 170은, 상기 프로세서 120를 통해 제어하거나, 또는 독립적으로 전자 장치 101의 기능 중 적어도 일부를 제어하거나, 또는 다른 전자 장치(예: 전자 장치 104, 서버 106 등)에 접속할 수 있다.
도 2는, 본 발명의 다양한 실시 예에 따른 음성 데이터 모듈에 대한 블록을 예시한 도면이다. 도 2를 참조하면, 상기 음성 데이터 모듈 170은, 음성 알파벳 모듈 210과, 음성 표기 모듈 220 등을 포함할 수 있다.
상기 음성 알파벳 모듈 210은, 예를 들어, 지정된 식별자의 문자와 함께, 음성 문자, 심볼, 또는 번호 등을 저장할 수 있다. 예를 들어, 알파벳 데이터의 프로그래밍 도중, 사용자는 식별자(예: 사용자 아이디, 폰 번호 등)의 지정을 원할 수 있다. 상기 아이디의 문자는, 음성 데이터베이스(예: 모든 관련 음성 시스템)에 저장된 정보에 일치하는 문자, 심볼, 번호 등과 연관될 수 있다.
상기 식별자의 문자에 일치하는 음성 문자의 발음이 포함된 오디오 파일은, 메모리에 저장될 수 있으며, 통신을 통해 송신될 수 있다. 음성 표기 모듈 220은, 예를 들어, 식별자의 지정된 문자와 함께, 또는 상기 음성 알파벳 모듈 210에 의해 생성된 오디오 파일의 사운드와 함께, 저장된 음성 문자가 연관되도록 구성될 수 있다.
예를 들어, 음성 데이터의 프로그래밍 도중, 사용자는 식별자(예: 사용자의 아이디, 폰 번호 등)의 지정을 원할 수 있다. 상기 식별자의 문자는, 음성 데이터베이스(예: 모든 관련된 음성 시스템)에 저장된 정보에 일치하는 문자, 심볼, 번호 등에 연관될 수 있다.
상기 식별자의 문자에 일치하는 음성 데이터가 포함된 이미지 파일은, 상기 음성 표기 모듈 220에 의해 생성될 수 있으며, 통신을 통해 송신될 수 있다. 상기 음성 알파벳 모듈 210과 음성 표기 모듈 220에 의해 생성된 파일은, 제한되지 않으며, 예를 들어, 싱글(single) 오디오 또는 식별자에 일치하는 시리즈의 음성 심볼이 포함된 이미지 파일을 포함할 수 있다.
또한, 상기 파일은 멀티 오디오 또는 이미지 파일, 또는 상기 식별자의 각 문자 하나를 포함할 수도 있다.
도 3은, 본 발명의 다양한 실시 예에 따른 음성 데이터 프로그래밍 방법을 예시한 도면이다. 도 3을 참조하면, 동작 301에서, 전자 장치는 음성 프로그래밍 모드로 진입한다.
상기 음성 프로그래밍 모드는, 디바이스 설정 시점에 진입하거나, 이후 시점, 예를 들어, 통신 이전 또는 이후 시점에 발생할 수도 있다. 동작 303에서, 상기 전자 장치는 지정된 식별자를 수신한다. 예를 들어, 상기 전자 장치의 사용자는 사용자의 이름, 이메일 주소, 폰 번호 등을 식별자로 지정할 수 있다.
동작 305에서, 저장된 음성 알파벳은, 상기 지정된 식별자에 기반하여 검색된다. 동작 307에서, 음성 알파벳 문자는, 상기 식별자의 문자와 연관된다. 동작 309에서, 오디오 및/또는 이미지 파일은 생성되고, 상기 장치의 메모리에 저장되며, 상기 식별자의 연관된 음성 문자를 포함한다.
다른 예로서, 몇 개의 개별적인 음성 파일(예: 개별 문자에 대한 오디오 또는 이미지 파일)은, 대신 또는 초기에 생성되어 상기 장치 내의 메모리에 저장될 수 있다. 상기 개별적인 파일들은 개별 형태로 생성 및 저장되거나, 하나의 큰 파일로 결합될 수도 있다. 동작 311에서, 상기 식별자와 연관된 음성 문자는 연락처 리스트 정보에 포함된다.
도 4는, 본 발명의 다양한 실시 예에 따른 음성 데이터 송신 방법을 예시한 도면이다. 도 4를 참조하면, 동작 401에서, 사용자는 음성 데이터를 갖는 디바이스를 프로그램 한다.
동작 403에서, 오디오 및/도는 이미지 파일은, 장치 내의 메모리에 생성 및 저장되고, 상기 프로그램된 음성 데이터를 포함한다. 다른 예로서, 몇 개의 개별적인 음성 파일(예: 개별적 문자에 대한 오디오 및 이미지 파일)은, 대신 또는 초기에 생성되어 상기 장치 내의 메모리에 저장될 수 있다.
상기 개별적인 파일들은 개별 형태로 생성 및 저장되거나, 하나의 큰 파일로 결합될 수도 있다. 동작 405에서, 음성 기능의 선택이 검출될 수 있다. 상기 음성 기능은, 예를 들어, 이동 단말기에서 키 또는 기능을 선택하는 것일 수 있으며, 송신 실체 또는 수신 실체에 의해 발생할 수 있다.
동작 407에서, 상기 생성 및 저장된 오디오 및/또는 이미지 파일은 송신된다. 다른 예로서, 몇 개의 개별적 음성 파일은 송신될 수 있다.
도 5는, 본 발명의 다양한 실시 예에 따른 음성 데이터 송신 방법의 다른 예를 예시 도면이다. 도 5를 참조하면, 동작 501에서, 음성 기능의 선택이 검출될 수 있다. 상기 음성 기능은, 예를 들어, 이동 단말기에서 키 또는 기능을 선택하는 것일 수 있다.
동작 503에서, 사용자는 상기 음성 데이터를 갖는 디바이스를 프로그램 한다. 동작 505에서, 오디오 및/또는 이미지 파일은, 장치 내의 메모리에 생성 및 저장되고, 상기 프로그램된 음성 데이터를 포함한다.
다른 예로서, 몇 개의 개별적인 음성 파일(예: 개별적 문자에 대한 오디오 및 이미지 파일)은, 대신 또는 초기에 생성되어 상기 장치 내의 메모리에 저장될 수 있다.
상기 개별적인 파일들은 개별 형태로 생성 및 저장되거나, 하나의 큰 파일로 결합될 수도 있다. 동작 507에서, 상기 생성 및 저장된 오디오 및/또는 이미지 파일은 송신된다. 다른 예로서, 몇 개의 개별적 음성 파일은 송신될 수 있다.
도 6은, 본 발명의 다양한 실시 예에 따른 음성 데이터 수신 방법을 예시한 도면이다. 도 6을 참조하면, 동작 601에서, 전자 통신이 수신된다.
동작 603에서, 음성 기능의 선택이 검출된다. 상기 음성 기능은 예를 들어, 이동 단말기에서 키 또는 기능을 선택하는 것일 수 있다. 동작 601에서, 음성 데이터의 송신을 위한 요구는 전자 통신의 송신 실체로 전송된다. 동작 607에서, 상기 음성 데이터를 포함하는 오디오 및/또는 이미지 파일은 수신되어, 상기 수신 장치에 저장된다.
도 7은, 본 발명의 다양한 실시 예에 따른 음성 데이터 수신 방법의 다른 실시 예를 예시한 도면이다. 도 7을 참조하면, 동작 701에서, 수신 통신의 일부 또는 모두에 음성 데이터의 송신을 요구하도록 디바이스를 프로그램한다.
동작 703에서 전자 통신은 수신된다. 동작 705에서, 상기 수신 디바이스는, 동작 701의 프로그래밍에 기반하여, 송신 실체로부터 음성 데이터의 송신을 자동으로 요구한다.
동작 707에서, 상기 음성 데이터가 포함된 하나 이상의 오디오 및/또는 이미지 파일은 수신하고, 상기 수신 디바이스에 저장한다.
도 8은, 본 발명의 다양한 실시 예들에 따른 하드웨어 블록을 예시한 도면이다. 도 8을 참조하면, 상기 전자 장치 101는 하나 이상의 어플리케이션 프로세서(AP: application processor) 810, 통신 모듈 820, SIM(subscriber identification module) 카드 824, 메모리 830, 센서 모듈 840, 입력 장치 850, 디스플레이 모듈 860, 인터페이스 870, 오디오 모듈 880, 카메라 모듈 891, 전력관리 모듈 895, 배터리 896, 인디케이터 897 및 모터 898 등을 포함할 수 있다.
상기 AP 810은 운영체제 또는 응용 프로그램을 구동하여 상기 AP 810에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 멀티미디어 데이터를 포함한 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 AP 810은, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시 예에 따르면, 상기 AP 810은 GPU(graphic processing unit, 미도시)를 더 포함할 수 있다.
상기 통신 모듈 820(예: 상기 통신 인터페이스 160)은 상기 전자 장치 101(예: 상기 전자 장치 101)와 네트워크를 통해 연결된 다른 전자 장치들(예: 전자 장치 104 또는 서버 106) 간의 통신에서 데이터 송수신을 수행할 수 있다. 한 실시 예에 따르면, 상기 통신 모듈 820은 셀룰러 모듈 821, WiFi 모듈 823, BT 모듈 825, GPS 모듈 827, NFC 모듈 828 및 RF(radio frequency) 모듈 829 등을 포함할 수 있다.
상기 셀룰러 모듈 821은 통신망(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등)을 통해서 음성 통화, 영상 통화, 문자 서비스 또는 인터넷 서비스 등을 제공할 수 있다.
또한, 상기 셀룰러 모듈 821은, 예를 들면, 가입자 식별 모듈(예: SIM 카드 824)을 이용하여 통신 네트워크 내에서 전자 장치의 구별 및 인증을 수행할 수 있다. 한 실시 예에 따르면, 상기 셀룰러 모듈 821은 상기 AP 810가 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 예를 들면, 상기 셀룰러 모듈 821은 멀티 미디어 제어 기능의 적어도 일부를 수행할 수 있다.
본 발명의 한 실시 예에 따르면, 상기 통신 모듈 820 및/또는 상기 셀룰러 모듈 821은 커뮤니케이션 프로세서(CP: communication processor)를 포함할 수 있다. 또한, 상기 셀룰러 모듈 821은, 예를 들면, SoC로 구현될 수 있다.
도 8에서는 상기 셀룰러 모듈 821(예: 커뮤니케이션 프로세서), 상기 메모리 830 또는 상기 전력관리 모듈 895 등의 구성요소들이 상기 AP 810와 별개의 구성요소로 도시되어 있으나, 한 실시 예에 따르면, 상기 AP 810가 전술한 구성요소들의 적어도 일부(예: 셀룰러 모듈 821)를 포함하도록 구현될 수 있다.
본 발명의 한 실시 예에 따르면, 상기 AP 810 또는 상기 셀룰러 모듈 821(예: 커뮤니케이션 프로세서)은 각각에 연결된 비휘발성 메모리 또는 다른 구성요소 중 적어도 하나로부터 수신한 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리할 수 있다. 또한, 상기 AP 810 또는 상기 셀룰러 모듈 821은 다른 구성요소 중 적어도 하나로부터 수신하거나 다른 구성요소 중 적어도 하나에 의해 생성된 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
상기 WiFi 모듈 823, 상기 BT 모듈 825, 상기 GPS 모듈 827 또는 상기 NFC 모듈 828 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 도 8에서는 셀룰러 모듈 821, WiFi 모듈 823, BT 모듈 825, GPS 모듈 827 또는 NFC 모듈 828이 각각 별개의 블록으로 도시되었으나, 한 실시 예에 따르면, 셀룰러 모듈 821, WiFi 모듈 823, BT 모듈 825, GPS 모듈 827 또는 NFC 모듈 828 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다. 예를 들면, 셀룰러 모듈 821, WiFi 모듈 823, BT 모듈 825, GPS 모듈 827 또는 NFC 모듈 828 각각에 대응하는 프로세서들 중 적어도 일부(예: 셀룰러 모듈 821에 대응하는 커뮤니케이션 프로세서 및 WiFi 모듈 223에 대응하는 WiFi 프로세서)는 하나의 SoC로 구현될 수 있다.
상기 RF 모듈 829는 데이터의 송수신, 예를 들면, RF 신호의 송수신을 할 수 있다. 상기 RF 모듈 829는, 도시되지는 않았으나, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter) 또는 LNA(low noise amplifier) 등을 포함할 수 있다. 또한, 상기 RF 모듈 829는 무선 통신에서 자유 공간상의 전자파를 송수신하기 위한 부품, 예를 들면, 도체 또는 도선 등을 더 포함할 수 있다. 도 8에서는 셀룰러 모듈 821, WiFi 모듈 823, BT 모듈 825, GPS 모듈 827 및 NFC 모듈 828이 하나의 RF 모듈 829을 서로 공유하는 것으로 도시되어 있으나, 한 실시 예에 따르면, 셀룰러 모듈 821, WiFi 모듈 823, BT 모듈 825, GPS 모듈 827 또는 NFC 모듈 828 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호의 송수신을 수행할 수 있다.
상기 SIM 카드 824는 가입자 식별 모듈을 포함하는 카드일 수 있으며, 전자 장치의 특정 위치에 형성된 슬롯에 삽입될 수 있다. 상기 SIM 카드 824는 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
상기 메모리 830(예: 상기 메모리 130)는 내장 메모리 832 또는 외장 메모리 834를 포함할 수 있다.
본 발명의 다양한 실시 예에 따르면, 상기 내장 메모리 832는, 예를 들면, 휘발성 메모리(예를 들면, DRAM(dynamic RAM), SRAM(static RAM), SDRAM(synchronous dynamic RAM) 등), 비휘발성 메모리(non-volatile Memory, 예를 들면, OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, NAND flash memory, NOR flash memory 등) 중 적어도 하나를 포함할 수 있다.
한 실시 예에 따르면, 상기 내장 메모리 832는 Solid State Drive (SSD)일 수 있다. 상기 외장 메모리 834는 flash drive, 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital) 또는 Memory Stick 등을 더 포함할 수 있다. 상기 외장 메모리 834는 다양한 인터페이스를 통하여 상기 하드웨어 801과 기능적으로 연결될 수 있다. 한 실시 예에 따르면, 상기 하드웨어 801는 하드 드라이브와 같은 저장 장치(또는 저장 매체)를 더 포함할 수 있다.
상기 센서 모듈 840은 물리 량을 계측하거나 하드웨어 801의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈 840은, 예를 들면, 제스처 센서 840A, 자이로 센서 840B, 기압 센서 840C, 마그네틱 센서 840D, 가속도 센서 840E, 그립 센서 840F, 근접 센서 840G, color 센서 840H(예: RGB(red, green, blue) 센서), 생체 센서 840I, 온/습도 센서 840J, 조도 센서 840K 또는 UV(ultra violet) 센서 840M 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 센서 모듈 840은, 예를 들면, 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시), IR(infra red) 센서(미도시), 홍채 센서(미도시) 또는 지문 센서(미도시) 등을 포함할 수 있다. 상기 센서 모듈 840은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 입력 장치 850은 터치 패널(touch panel) 852, (디지털) 펜 센서(pen sensor) 854, 키(key) 856 또는 초음파(ultrasonic) 입력 장치 858을 포함할 수 있다. 상기 터치 패널 852은, 예를 들면, 정전식, 감압식, 적외선 방식 또는 초음파 방식 중 적어도 하나의 방식으로 터치 입력을 검출할 수 있다. 또한, 상기 터치 패널 852은 제어 회로를 더 포함할 수도 있다. 정전식의 경우, 물리적 접촉 또는 근접 검출이 가능하다. 상기 터치 패널 852은 택타일 레이어(tactile layer)를 더 포함할 수도 있다. 이 경우, 상기 터치 패널 852은 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털) 펜 센서 854는, 예를 들면, 사용자의 터치 입력을 받는 것과 동일 또는 유사한 방법 또는 별도의 검출용 시트(sheet)를 이용하여 구현될 수 있다. 상기 키 856는, 예를 들면, 물리적인 버튼, 광학식 키 또는 키 패드를 포함할 수 있다. 상기 초음파(ultrasonic) 입력 장치 858는 초음파 신호를 발생하는 입력 도구를 통해, 하드웨어 801에서 마이크(예: 마이크 888)로 음파를 감지하여 데이터를 확인할 수 있는 장치로서, 무선 검출이 가능하다. 한 실시 예에 따르면, 상기 하드웨어 801는 상기 통신 모듈 820를 이용하여 이와 연결된 외부 장치(예: 컴퓨터 또는 서버)로부터 사용자 입력을 수신할 수도 있다.
상기 디스플레이 260(예: 상기 디스플레이 150)은 패널 262, 홀로그램 장치 264 또는 프로젝터 266을 포함할 수 있다. 상기 패널 262은, 예를 들면, LCD(liquid-crystal display), AM-OLED(active-matrix organic light-emitting diode) 등일 수 있다. 상기 패널 262은, 예를 들면, 유연하게(flexible), 투명하게(transparent) 또는 착용할 수 있게(wearable) 구현될 수 있다. 상기 패널 262은 상기 터치 패널 252과 하나의 모듈로 구성될 수도 있다. 상기 홀로그램 장치 264은 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 상기 프로젝터 266는 스크린에 빛을 투사하여 영상을 표시할 수 있다. 상기 스크린은, 예를 들면, 상기 전자 장치 201의 내부 또는 외부에 위치할 수 있다. 한 실시 예에 따르면, 상기 디스플레이 260은 상기 패널 262, 상기 홀로그램 장치 264, 또는 프로젝터 266를 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 인터페이스 270은, 예를 들면, HDMI(high-definition multimedia interface) 372, USB(universal serial bus) 274, 광 인터페이스(optical interface) 276, 또는 D-sub(D-subminiature) 278을 포함할 수 있다. 상기 인터페이스 270은, 예를 들면, 도 1에 도시된 통신 인터페이스 160에 포함될 수 있다. 추가적으로 또는 대체적으로, 상기 인터페이스 270은, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD(secure Digital) 카드/MMC(multi-media card) 인터페이스 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
상기 오디오 모듈 280은 소리(sound)와 전기신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 모듈 280의 적어도 일부 구성요소는, 예를 들면, 도 1에 도시된 입출력 인터페이스 140에 포함될 수 있다. 상기 오디오 모듈 280은, 예를 들면, 스피커 282, 리시버 284, 이어폰 286 또는 마이크 288 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
상기 카메라 모듈 291은, 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시 예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈(미도시), ISP(image signal processor, 미도시) 또는 플래시(flash, 미도시)(예: LED 또는 xenon lamp)를 포함할 수 있다. 상기 전력 관리 모듈 295은 상기 전자 장치 201의 전력을 관리할 수 있다. 도시하지 않았으나, 상기 전력 관리 모듈 295은, 예를 들면, PMIC(power management integrated circuit), 충전 IC(charger integrated circuit) 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다.
상기 PMIC는, 예를 들면, 집적회로 또는 SoC 반도체 내에 탑재될 수 있다. 충전 방식은 유선과 무선으로 구분될 수 있다. 상기 충전 IC 는 배터리를 충전시킬 수 있으며, 충전기로부터의 과전압 또는 과전류 유입을 방지할 수 있다. 한 실시 예에 따르면, 상기 충전 IC는 유선 충전 방식 또는 무선 충전 방식 중 적어도 하나를 위한 충전 IC를 포함할 수 있다. 무선 충전 방식으로는, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등이 있으며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로 또는 정류기 등의 회로가 추가될 수 있다.
상기 배터리 게이지는, 예를 들면, 상기 배터리 296의 잔량, 충전 중 전압, 전류 또는 온도를 측정할 수 있다. 상기 배터리 296는 전기를 저장 또는 생성할 수 있고, 그 저장 또는 생성된 전기를 이용하여 상기 전자 장치 201에 전원을 공급할 수 있다. 상기 배터리 296는, 예를 들면, 충전식 전지(rechargeable battery) 또는 태양 전지(solar battery)를 포함할 수 있다.
상기 인디케이터 297는 상기 전자 장치 201 혹은 그 일부(예: 상기 AP 310)의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 상기 모터 298는 전기적 신호를 기계적 진동으로 변환할 수 있다. 도시되지는 않았으나, 상기 전자 장치 201는 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV 지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting) 또는 미디어 플로우(media flow) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 발명의 청구항 또는 명세서에 기재된 실시 예들에 따른 방법들은 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합의 형태로 구현될(Implemented) 수 있다. 소프트웨어로 구현하는 경우, 하나 이상의 프로그램(소프트웨어 모듈)을 저장하는 컴퓨터 판독 가능 저장 매체가 제공될 수 있다. 컴퓨터 판독 가능 저장 매체에 저장되는 하나 이상의 프로그램은, 전자 장치(Device) 내의 하나 이상의 프로세서에 의해 실행 가능하도록 구성된다(Configured for execution).
하나 이상의 프로그램은, 전자 장치로 하여금 본 발명의 청구항 또는 명세서에 기재된 실시 예들에 따른 방법들을 실행하게 하는 명령어(Instructions)를 포함한다.
이러한 프로그램(소프트웨어 모듈, 소프트웨어)은 랜덤 액세스 메모리 (Random Access Memory), 플래시(Flash) 메모리를 포함하는 비휘발성(Non-Volatile) 메모리, 롬(ROM: Read Only Memory), 전기적 삭제가능 프로그램가능 롬(EEPROM: Electrically Erasable Programmable Read Only Memory), 자기 디스크 저장 장치(Magnetic Disc Storage Device), 컴팩트 디스크 롬(CD-ROM: Compact Disc-ROM), DVD(Digital Video Disk) 또는 다른 형태의 광학 저장 장치, 마그네틱 카세트(Magnetic Cassette)에 저장될 수 있다.
또는, 이들의 일부 또는 전부의 조합으로 구성된 메모리에 저장될 수 있다. 또한, 각각의 구성 메모리는 다수 개 포함될 수도 있다.
또한, 상기 프로그램은 인터넷(Internet), 인트라넷(Intranet), LAN(Local Area Network), WLAN(Wide LAN), 또는 SAN(Storage Area Network)과 같은 통신 네트워크, 또는 이들의 조합으로 구성된 통신 네트워크를 통하여 접근(Access)할 수 있는 부착 가능한(Attachable) 저장 장치(Storage Device)에 저장될 수 있다. 이러한 저장 장치는 외부 포트를 통하여 본 발명의 실시 예를 수행하는 장치에 접속할 수 있다. 또한, 통신 네트워크상의 별도의 저장장치가 본 발명의 실시 예를 수행하는 장치에 접속할 수도 있다.
상술한 본 발명의 구체적인 실시 예들에서, 발명에 포함되는 구성 요소는 제시된 구체적인 실시 예에 따라 단수 또는 복수로 표현되었다. 그러나, 단수 또는 복수의 표현은 설명의 편의를 위해 제시한 상황에 적합하게 선택된 것으로서, 본 발명이 단수 또는 복수의 구성 요소에 제한되는 것은 아니며, 복수로 표현된 구성요소라고 하더라도 단수로 구성되거나, 단수로 표현된 구성 요소라 하더라도 복수로 구성될 수 있다.
한편, 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
800: 전자 장치 810: 어플리케이션 프로세서
820: 통신 모듈 830: 메모리
840: 센서 모듈 850: 입력 장치
860: 디스플레이 모듈 870: 인터페이스
820: 통신 모듈 830: 메모리
840: 센서 모듈 850: 입력 장치
860: 디스플레이 모듈 870: 인터페이스
Claims (20)
- 통신 수신 방법에 있어서,
통신에서 적어도 하나의 음성 데이터 파일의 포함을 야기하거나 요구하는 음성 기능의 선택을 검출하는 과정;
상기 음성 기능의 선택에 응답하여, 상기 통신의 제1 디바이스에 의해 상기 적어도 하나의 음성 데이터 파일에 대한 요청을 상기 통신의 제2 디바이스에 전송하는 과정; 및
상기 적어도 하나의 음성 데이터 파일을 수신하는 과정을 포함하고,
상기 음성 데이터 파일은, 음성 알파벳 시스템 및 상기 음성 알파벳 시스템에 따라 송신 실체에 의해 지정된 식별자의 적어도 한 문자의 음성 발음에 기반한 오디오를 포함하되, 상기 식별자는, 상기 송신 실체의 사용자에 의해 지정되는, 방법.
- 제1항에 있어서,
상기 음성 기능의 선택을 검출하는 과정은, 통신 도중 또는 통신 이후 디바이스 설정에서 발생하는 방법.
- 제1항에 있어서,
상기 적어도 하나의 음성 데이터 파일은, 상기 송신 실체에 의해 지정된 식별자의 적어도 한 문자의 음성 표기를 포함하는 방법.
- 제1항에 있어서,
상기 적어도 한 문자는, 알파벳 문자, 숫자 문자, 그리고 특수 문자 중 적어도 하나를 포함하는 방법.
- 제1항에 있어서,
상기 적어도 하나의 음성 데이터 파일은, 분석할 때, 오디오 스트림으로 재생되는 결합된 오디오 파일을 포함하는 방법.
- 제1항에 있어서,
상기 적어도 하나의 음성 데이터 파일은, 디바이스 설정, 송신 이전, 송신 도중, 송신 이후 중 어느 하나의 시점에서, 사용자에 의해 프로그램된 음성 데이터를 포함하는 방법.
- 삭제
- 제1항에 있어서,
상기 통신은, 음성 통신, 영상 통신, 영상 전화 통신, 이메일 통신 중 적어도 어느 하나인 방법.
- 제1항에 있어서,
상기 송신 실체에 의해 지정된 식별자는, 아이디, 홈 주소, 이메일 주소, 폰 번호 중 적어도 어느 하나인 방법.
- 제 1 항에 기재된 방법을 수행하기 위한 컴퓨터 프로세스를 실행하는 적어도 하나의 프로세서를 지시하기 위해, 상기 적어도 하나의 프로세서에 의해 판독 가능하도록 구성된 명령들의 컴퓨터 프로그램을 저장하는 적어도 하나의 비휘발성 프로세서 판독 가능 매체.
- 통신 송신 방법에 있어서,
음성 데이터 파일을 갖는 제1 디바이스를 프로그래밍하는 과정;
상기 음성 데이터 파일을 포함하는 이미지 또는 오디오 중 하나 이상을 생성하는 과정;
상기 통신의 상기 제1 디바이스에 의해, 상기 통신의 제2 디바이스로부터 상기 음성 데이터 파일을 포함하는 하나 이상의 오디오 또는 이미지 파일에 대한 요청을 수신하는 과정; 및
상기 수신된 요청에 응답하여, 상기 통신의 수신 시에 재생 또는 디스플레이 될 오디오 또는 이미지 파일 중 하나 이상을 송신하는 과정을 포함하고,
상기 음성 데이터 파일은, 음성 알파벳 시스템 및 상기 음성 알파벳 시스템에 따라 송신 실체에 의해 지정된 식별자의 적어도 한 문자의 음성 발음에 기반한 오디오를 포함하되, 상기 식별자는, 상기 송신 실체의 사용자에 의해 지정되는, 방법.
- 제11항에 있어서,
상기 음성 데이터 파일의 포함을 요구하는 음성 기능의 선택을 검출하는 과정을 더 포함하되,
상기 검출 과정은, 디바이스 설정, 통신 도중, 통신 이후 중 어느 하나의 시점에서 발생하는 방법.
- 제11항에 있어서,
상기 음성 데이터 파일은, 상기 송신 실체에 의해 지정된 식별자의 적어도 한 문자의 음성 표기를 포함하는 방법.
- 제11항에 있어서,
상기 적어도 한 문자는, 알파벳 문자, 숫자 문자, 그리고 특수 문자 중 적어도 하나를 포함하는 방법.
- 제11항에 있어서,
상기 음성 데이터 파일은, 분석할 때, 오디오 스트림으로 재생되는 결합된 오디오 파일을 포함하는 방법.
- 제11항에 있어서,
상기 음성 데이터 파일은, 디바이스 설정, 송신 이전, 송신 도중, 송신 이후 중 어느 하나의 시점에서, 사용자에 의해 프로그램된 음성 데이터를 포함하는 방법.
- 제11항에 있어서,
상기 음성 데이터 파일은, NATO 음성 알파벳 또는 국제 음성 알파벳에 대응되는 데이터를 포함하고, 상기 NATO 음성 알파벳 또는 국제 음성 알파벳에 따른 확장 및 결합을 포함하는 방법.
- 제11항에 있어서,
상기 송신 실체에 의해 지정된 식별자는, 아이디, 홈 주소, 이메일 주소, 폰 번호 중 적어도 어느 하나인 방법.
- 삭제
- 제11항에 기재된 방법을 수행하기 위한 컴퓨터 프로세스를 실행하는 적어도 하나의 프로세서를 지시하기 위해, 상기 적어도 하나의 프로세서에 의해 판독 가능하도록 구성된 명령들의 컴퓨터 프로그램을 저장하는 적어도 하나의 비휘발성 프로세서 판독 가능 매체.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/185,198 US9978375B2 (en) | 2014-02-20 | 2014-02-20 | Method for transmitting phonetic data |
US14/185,198 | 2014-02-20 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20150098546A KR20150098546A (ko) | 2015-08-28 |
KR102180955B1 true KR102180955B1 (ko) | 2020-11-20 |
Family
ID=53798632
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140099014A KR102180955B1 (ko) | 2014-02-20 | 2014-08-01 | 음성 데이터 송신 및 수신 방법 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9978375B2 (ko) |
KR (1) | KR102180955B1 (ko) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9997155B2 (en) * | 2015-09-09 | 2018-06-12 | GM Global Technology Operations LLC | Adapting a speech system to user pronunciation |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050197837A1 (en) * | 2004-03-08 | 2005-09-08 | Janne Suontausta | Enhanced multilingual speech recognition system |
US20060149457A1 (en) * | 2004-12-16 | 2006-07-06 | Ross Steven J | Method and system for phonebook transfer |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7693719B2 (en) * | 2004-10-29 | 2010-04-06 | Microsoft Corporation | Providing personalized voice font for text-to-speech applications |
US7640160B2 (en) * | 2005-08-05 | 2009-12-29 | Voicebox Technologies, Inc. | Systems and methods for responding to natural language speech utterance |
US7555534B2 (en) * | 2006-02-15 | 2009-06-30 | Microsoft Corporation | Phonetic name support in an electronic directory |
US20110066437A1 (en) * | 2009-01-26 | 2011-03-17 | Robert Luff | Methods and apparatus to monitor media exposure using content-aware watermarks |
US20130210343A1 (en) * | 2012-02-14 | 2013-08-15 | Kun-Da Wu | Method of transmitting data between mobile devices |
US8768704B1 (en) * | 2013-09-30 | 2014-07-01 | Google Inc. | Methods and systems for automated generation of nativized multi-lingual lexicons |
-
2014
- 2014-02-20 US US14/185,198 patent/US9978375B2/en active Active
- 2014-08-01 KR KR1020140099014A patent/KR102180955B1/ko active IP Right Grant
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050197837A1 (en) * | 2004-03-08 | 2005-09-08 | Janne Suontausta | Enhanced multilingual speech recognition system |
US20060149457A1 (en) * | 2004-12-16 | 2006-07-06 | Ross Steven J | Method and system for phonebook transfer |
Also Published As
Publication number | Publication date |
---|---|
US20150235638A1 (en) | 2015-08-20 |
US9978375B2 (en) | 2018-05-22 |
KR20150098546A (ko) | 2015-08-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11508383B2 (en) | Method for operating content and electronic device for implementing same | |
US10257416B2 (en) | Apparatus and method for setting camera | |
US9983767B2 (en) | Apparatus and method for providing user interface based on hand-held position of the apparatus | |
US9967744B2 (en) | Method for providing personal assistant service and electronic device thereof | |
US10691402B2 (en) | Multimedia data processing method of electronic device and electronic device thereof | |
US9843667B2 (en) | Electronic device and call service providing method thereof | |
US10573317B2 (en) | Speech recognition method and device | |
US9998924B2 (en) | Electronic device and method for acquiring biometric information thereof | |
KR102193704B1 (ko) | 전자 장치의 락 스크린 디스플레이 방법 및 그 전자 장치 | |
KR102519902B1 (ko) | 오디오 데이터를 처리하는 방법 및 이를 제공하는 전자 장치 | |
KR102216881B1 (ko) | 전자장치에서 마이크의 감도에 따른 자동 이득 조절 방법 및 장치 | |
US11170764B2 (en) | Electronic device for processing user utterance | |
KR102157858B1 (ko) | 전력 소모를 줄일 수 있는 전자 장치 및 방법 | |
KR20150075140A (ko) | 전자 장치의 메시지 제어 방법 및 그 전자 장치 | |
KR20160094183A (ko) | 전자 장치의 이어잭을 이용한 전자 장치와 외부 장치와의 인터페이스 장치 및 방법 | |
US20160086138A1 (en) | Method and apparatus for providing function by using schedule information in electronic device | |
KR102240526B1 (ko) | 전자 장치의 컨텐츠 다운로드 방법 및 그 전자 장치 | |
US10552113B2 (en) | Electronic device and method for controlling operation thereof | |
US10114542B2 (en) | Method for controlling function and electronic device thereof | |
US11322158B2 (en) | Electronic device and communication connection method using voice thereof | |
KR102213429B1 (ko) | 사운드 제공 방법 및 이를 구현하는 전자 장치 | |
US20180157377A1 (en) | Electronic device and method for providing graphic user interface therefor | |
KR102180955B1 (ko) | 음성 데이터 송신 및 수신 방법 | |
KR20160026535A (ko) | 통화 품질 향상을 위한 오디오 처리 방법 및 장치 | |
KR20160021644A (ko) | 대체 서비스 제공 방법 및 그 전자 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right |