KR20150020319A - 콘텐츠 전달 및 관리를 위한 시스템 및 방법 - Google Patents

콘텐츠 전달 및 관리를 위한 시스템 및 방법 Download PDF

Info

Publication number
KR20150020319A
KR20150020319A KR20147033702A KR20147033702A KR20150020319A KR 20150020319 A KR20150020319 A KR 20150020319A KR 20147033702 A KR20147033702 A KR 20147033702A KR 20147033702 A KR20147033702 A KR 20147033702A KR 20150020319 A KR20150020319 A KR 20150020319A
Authority
KR
South Korea
Prior art keywords
content
content delivery
human
signal
delivery device
Prior art date
Application number
KR20147033702A
Other languages
English (en)
Inventor
로드니 비. 윌리암스
크리스토퍼 엠. 오스토이크
크리스토퍼 디. 리데노우어
Original Assignee
엘아이에스엔알, 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘아이에스엔알, 인크. filed Critical 엘아이에스엔알, 인크.
Priority to KR1020207017988A priority Critical patent/KR102317364B1/ko
Publication of KR20150020319A publication Critical patent/KR20150020319A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/26Devices for calling a subscriber
    • H04M1/30Devices which can set up and transmit only one digit at a time
    • H04M1/50Devices which can set up and transmit only one digit at a time by generating or selecting currents of predetermined frequencies or combinations of frequencies
    • H04M1/505Devices which can set up and transmit only one digit at a time by generating or selecting currents of predetermined frequencies or combinations of frequencies signals generated in digital form
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B11/00Transmission systems employing sonic, ultrasonic or infrasonic waves
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/14Session management
    • H04L67/141Setup of application sessions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/52Network services specially adapted for the location of the user terminal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/535Tracking the activity of the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/21Combinations with auxiliary equipment, e.g. with clocks or memoranda pads
    • H04M1/215Combinations with auxiliary equipment, e.g. with clocks or memoranda pads by non-intrusive coupling means, e.g. acoustic couplers
    • H04M1/2155Acoustic coupling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6581Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8106Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Acoustics & Sound (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Environmental & Geological Engineering (AREA)
  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Lock And Its Accessories (AREA)

Abstract

장치 마이크로폰(113)에 의해 주변환경으로부터 신호를 듣거나 또는 장치의 오디오회로(100)로부터 신호가 출력되면, 콘텐츠 관리시스템은 인간-불가청 음향신호들(210)을 검출하기 위하여 휴대용 다기능 장치(202)를 사용한다. 장치(202)는 불가청 신호로부터 코드를 추출하고 그리고 장치 및/또는 장치의 사용자에 관한 부수적인 선택적 데이터와 함께, 유선 또는 무선통신(232)을 통해 코드를 콘텐츠 관리시스템(200)으로 공급한다. 휴대용 다기능 장치(202)로부터 수신된 불가청 신호(210)를 나타내는 코드를 수신하면, 콘텐츠 관리시스템(200)은 특정 콘텐츠 또는 이 콘텐츠에 대한 포인터를 휴대용 다기능 장치(202)로 제공할 수 있고, 콘텐츠는 수신한 특정 불가청 신호를 기반으로 선택된다. 부수적인 임계 트리거(502)들이 필요한 부수적 동작들에 제공되어 콘텐츠를 언락할 수 있다.

Description

콘텐츠 전달 및 관리를 위한 시스템 및 방법{SYSTEMS AND METHODS FOR CONTENT DELIVERY AND MANAGEMENT}
본 출원은 수신시가 수신한 하나 이상의 불가청 신호를 기반으로 원격 콘텐츠 공급자에서 이동장치로 콘텐츠를 전달하기 위한 시스템들과 방법들에 관한 것이다.
본 발명의 다양한 비-제한적 실시예들이, 여기에서 기술된 콘텐츠 전달 및 관리시스템들과 프로세스들의 구조와, 기능과 사용의 원리들의 전반적인 이해를 위해 제공되게 된다. 이들 비-제한적인 실시예들 중 하나 이상의 예들이 첨부도면들에서 도시된다. 본 기술분야의 당업자라면, 여기에서 기술되고 또한 첨부도면들에 도시된 시스템들과 방법들은 비-제한적인 실시예들이라는 것을 이해하게 될 것이다. 하나의 비-제한적인 실시예와 관련해 도시되거나 기술되는 특징들은 다른 비-제한적인 실시예들의 특징들과 결합될 수 있다. 이러한 수정안들과 변형안들은 본 발명의 범위 내에 포함되는 것으로 이해되게 된다.
명세서를 통해 참조용어 "다양한 실시예들", "몇몇 실시예들", "한 실시예", "몇몇 예시적 실시예들", "한 예시적 실시예", 또는 "소정의 한 실시예"들은, 실시예들과 관련해 기술한 특정 특징, 구조 또는 특성들이 적어도 하나의 실시예에 포함된다는 것을 의미한다. 따라서, 명세서를 통해 문장 "다양한 실시예들에서", "몇몇 실시예들에서", "한 실시예에서", "몇몇 예시적 실시예들에서", "한 예시적 실시예에서" 또는 "소정의 한 실시예에서"의 출현은 반드시 동일 실시예들을 모두 참조할 필요가 없다. 게다가, 특정 특징, 구조 또는 특성들은 하나 이상의 실시예들에서 소정의 적합한 방식으로 결합될 수 있다.
기술된 주 실시예들은 일반적으로 불가청 신호들을 검출하도록 구성된 휴대용 다기능 장치들에 관한 것이다. 휴대용 다기능 장치(portable multifunction device)는, 콘텐츠 관리시스템으로 수신되었던 불가청 신호의 표시를 무선으로 공급하도록 구성될 수 있다. 휴대용 다기능 장치로부터 수신한 불가청 신호의 표시를 수신하면, 콘텐츠 관리시스템은 수신한 특정 불가청 신호를 기반으로 휴대용 다기능 장치로 특정 콘텐츠를 제공할 수 있다.
다양한 실시예들에서, 휴대용 다기능 장치는 수동 검출프로세스를 통해 불가청 신호를 검출할 수 잇다. 달리 말하면, 휴대용 다기능 장치의 사용자는 관례대로 검출프로세스를 개시 또는 활성시킬 필요가 없다. 대신에, 검출프로세스는, 예컨대 휴대용 다기능 장치의 랜덤 액세스 메모리(RAM)에서 동작하는 백그라운드 루틴일 수 있다. 백그라운드 루틴은 불가청 신호가 존재하는지를 검출하기 위하여 주기적으로, 또는 적어도 일상적으로, 휴대용 다기능 장치의 다양한 온-보드 부품들에 의해 수신되거나 또는 생성되는 질의(query)신호들일 수 있다. 이들 질의는 사용자로부터의 추가적인 입력이 없이 수행될 수 있다. 검출프로세스에 의해 질의를 받는 요소들은 제한없이, 온-보드 마이크로폰, 온-보드 스피커, 및 (헤드폰 출력 또는 선레벨 출력 등과 같은) 다른 오디로 출력포트들일 수 있다.
불가청 신호는 적절한 소오스로부터 휴대용 다기능 장치들이 수신할 수 있다. 예컨대, 불가청 신호는 휴대용 다기능 장치의 마이크로폰에 의해 수신되는 오디오 콘텐츠 내에 매립될 수 있다. 이 점에 있어서, 소오스는 휴대용 다기능 장치 근처 내에 있는 소정의 오디오 스피커일 수 있다. 오디오 콘텐츠는 또한 음악 플레이어 모듈과 같은 온-보드 오디오 생성 애플리케이션, 또는 비디오 플레이어 모듈과 같은 온-보프 비디오 플레이어 애플리케이션에 의해 제공되거나, 또는 (헤드폰 잭과 같은)라인-아웃 포트 또는 휴대용 다기능 장치의 외부 스피커에 의해 제공될 수 있다.
오디오 콘텐츠에 불가청 신호들을 매립하기 위한 예시적 시스템들과 방법들은 다음의 미국특허출원들에 의해 제공되고, 이들은 본 출원에 참조로서 통합된다: 2011년 11월 1일에 출원된 미국특허출원 제13/286,613호, "SYSTME EFFECTIVE TO MODULATE A CODE AND PROVIDE CONTENT TO A USER", 2011년 11월 1일에 출원된 미국특허출원 제13/286,670호, "SYSTME EFFECTIVE TO MODULATE A CODE AND PROVIDE CONTENT TO A USER", 및 2011년 11월 1일에 출원된 미국특허 제13/286,727, "SYSTME EFFECTIVE TO MODULATE A CODE AND PROVIDE CONTENT TO A USER".
다양한 실시예들에서, 불가청 신호들은 인간이 들을 수 있는 범위 밖으 신호들 또는 다른 신호들이거나, 그렇지 않다면 인간이 검지할 수 없는 것이다. 예컨대, 몇몇 실시예들에서, 불가청 신호들은 20,000Hz 이상 또는 20Hz 아래의 주파수에 의해 생성될 수 있다. 불가청 신호들은 상기 참조 특허출원에 기술되어 있는 바와 같이, 논리 0들과 1들의 시리즈로 된 변조된 코드(modulated code)의 형식일 수 있다. 변조된 코드는 음원(sound source)에 의해 반복적으로 또한 주기적으로 출력될 수 있다. 휴대용 다기능 장치는 불가청 신호와 관련된 0들과 1들의 논리적 시리즈를 결정하기 위해 불가청 신호 내 변조된 코드를 복조할 수 있다. 0들과 1들의 논리적 시리즈는 예컨대, 다양한 통신 프로토콜들을 통해 콘텐츠 관리시스템으로 전송될 수 있는 코드화된 식별자(coded identifier)일 수 있다. 여기에서 사용하는 바와 같이, 용어 불가청 신호는 신호, 코드파수, 파형 또는 휴대용 다기능 장치에 의해 검출되고 또한 소오스에 의해 전송될 수 있는 형태를 광범위하게 언급하는데 사용된다. 불가청 신호는 휴대용 다기능 장치 상에서 수동적으로 작동하는 루틴 또는 프로세스에 의해 휴대용 다기능 장치에 의해 처리될 수 있다. 다양한 실시예들이 변조된 코드의 형식으로 불가청 신호를 사용하지만, 이에 한정되지 않는다 것을 알아야 한다.
불가청 신호를 검출할 때, 휴대용 다기능 장치는 코드화된 식별자를 추출하기 위해 불가청 신호를 처리할 수 있다. 추출 프로세스는 휴대용 다기능 장치의 프로세서에 의해 수행될 수 있는 일반적인 수동 프로세스일 수 있다. 몇몇 실시예들에서, 코드화된 식별자는 무선통신망을 통해 콘텐츠 관리시스템에 제공될 수 있다. 코드화된 식별자와 함께, 시간/날짜 데이터, 가속도계 데이터, 지형 데이터, 인구 데이터(demographic data), 장치 데이터, 소유자 데이터와 같은 보충정보가 콘텐츠 관리시스템에 제공될 수 있다. 콘텐츠 관리시스템은 휴대용 다기능 장치로 전송하기 위한 콘텐츠를 식별하기 위해 수신 정보를 처리할 수 있다. 콘텐츠는 콘텐츠 관리시스템에 국부적으로 저장될 수 있거나 또는 콘텐츠 관리시스템으로부터 원격되어 있는 데이터 저장장치에 저장될 수 있다. 어떠한 경우라도, 콘텐츠는 소정의 적절한 파일 포맷 또는 파일유형일 수 있다. 휴대용 다기능 장치에 제공될 수 있는 예시적 콘텐츠의 비-제한적 및 비-배타적 리스트는, 비디오-기반 콘텐츠, 오디오-기반 콘텐츠, 이미지-기반 콘텐츠, 및 문자-기반 콘텐처를 포함한다. 비디오-기반 콘텐츠는 제한없이, 콘서트 장면, 뮤직비디오, 예술가 인터뷰, 영화, 광고 등을 포함할 수 있다. 오디오-기반 콘텐츠는 제한없이, 음악, 신호음 등을 포함할 수 있다. 이미지-기반 콘텐츠는 제한없이, 사진, 로고, 월페이퍼 등을 포함할 수 있다. 문자-기반 콘텐츠는 제한없이, 노랫말, 따옴표, 쿠폰, 패스워드, 패스코드, 이메일 메시지, 텍스트 메시지, 인스턴트 메시지 등을 포함할 수 있다. 몇몇 실시예들에서, 콘텐츠는 광고나 또는 교육용일 수 있다. 본 발명은, 콘텐츠 관리시스템과 관련된 휴대용 다기능 장치에 전달될 수 있는 소정의 특정 콘텐츠에 제한되지 않는다.
다양한 실시예들에서, 휴대용 다기능 장치에 전달되는 특정 콘텐츠는 코드화된 식별자 또는 하나 이상의 트리거들을 기반으로 할 수 있다. 휴대용 다기능 장치, 또는 휴대용 다기능 장치의 사용자가 다양한 임계치를 충족하면 초과시간 부가 콘텐츠를 액세스할 수 있다(언락). 예컨대, 불가청 신호가 휴대용 다기능 장치에 의해 수신되었던 횟수는, 어느 콘텐츠가 휴대용 다기능 장치로 전송되는지를 결정할 수 있다. 만일 불가청 신호가 음악에 매립되어 있다면, 불가청 신호가 수신되는 횟수는 휴대용 다기능 장치와 관련된 사용자가 음악을 청취한 횟수를 나타낼 수 있다. 사용자가 음악을 보다 많이 청취하게 되면, 부가적인 콘텐츠("언락 콘텐츠")가 사용자의 휴대용 다기능 장치로 전달될 수 있다. 알 수 있듯이, 이 부가적인 콘텐츠는 라벨로 표시될 수 있거나 또는 소정 유형 또는 그룹의 청취자들만이 이용할 수 있는 "배타적" 콘텐츠로서 간주될 수 있다. 예컨대, 불가청 신호는, 예술가가 콘서터를 진행하고 있는 동안에 음악 장소에서 방송될 수 있다. 불가청 신호들을 수동으로 검출하기 위한 휴대용 다기능 장치를 가지는 관객들은 불가청 신호를 수신하여 처리하게 된다. 휴대용 다기능 장치는 코드화된 식별자를 추출하고 그리고 무선통신망을 통해 콘텐츠 관리시스템에 정보를 제공한다. 콘텐츠 관리시스템은 코드화된 식별자를, 연주하는 예술가와 관련된 저장 콘텐츠에 연결시킬 수 있다. 그런 다음, 코드화된 식별자를 최초로 전송하는 휴대용 다기능 장치로 콘텐츠가 푸시될 수 있다. 그러면, 사용자는 그들의 휴대용 다기능 장치를 통해 콘텐츠에 액세스하게 된다. 그러므로, 설명한 실시예에서, 휴대용 다기능 장치는 소정의 입력 또는 사용자로부터 인터랙션없이, 불가청 신호를 수동적으로 검출하였고, 코드화된 식별자를 추출하였고, 코드화된 식별자를 전송하였고 그리고 연계된 콘텐츠를 수신하였다.
몇몇 실시예들에서, 휴대용 다기능 장치로 전달되는 특정 콘텐츠는, 장치가 지리적으로 위치하는 함수일 수 있다. 즉, 소정의 불가청 신호를 수동적으로 검출하는 제1도시에 있는 휴대용 다기능 장치는 콘텐츠의 제1부분을 수신할 수 있는 한편, 동일 불가청 신호를 검출하는 제2도시에 있는 휴대용 다기능 장치는 콘텐츠의 제2부분을 수신할 수 있다. 부수적으로, 휴대용 다기능 장치로 전달되는 콘텐츠는, 휴대용 다기능 장치가 (차량 안에서) 이동하는지, 날짜의 시간, 사용자 선호도와 같은 다른 트리커들에 의존할 수 있다.
휴대용 다기능 장치가 수신하는 콘텐츠는 소정의 적절한 구성으로 저장되고, 배열되고, 그리고 시청될 수 있다. 콘텐츠는 수신시에 또는 시간적으로 늦은 시점에 시청될 수 있다. 한 실시예에서, 콘텐츠는 사용자 관련된 전자 메일박스로 전달될 수 있다. 한 실시예에서, 콘텐츠는 휴대용 다기능 장치에 의해 추출될 수 있는 애플리케이션 또는 모듈에 전달된다. 사용자는 애플리케이션을 실행하여 콘텐츠에 액세스할 수 있다. 알 수 있듯이, 콘텐츠는 소정의 적절한 계층(hierarch) 또는 개요(schema)에 저장될 수 있다. 몇몇 실시예들에서, "락(locked)" 콘텐츠는 애플리케이션을 통해 사용자에게 디스플레이될 수 있다. 콘텐츠를 언락하기 위하여, 사용자는 예컨대, 소정의 변수들 또는 임계치들을 충족하여야만 한다. 임계치들은 전체 청취수, 지리적 위치 등에 관련될 수 있다. 어찌하던, 콘텐츠가 휴대용 다기능 장치에 의해 수신되면, 휴대용 다기능 장치에 의해 통지가 사용자에게 제공될 수 있다. 한 실시예에서, 통지를 수신하면, 사용자는 수신한 콘텐츠를 보기 위해 관련 애플리케이션을 탐색할 수 있다.
단지 설명의 목적을 위해, 다음의 많은 실시예들이 오디오 음악에 매설되는 불가청 신호의 문맥으로 기술된다. 설명은 이에 한정되지 않는다. 실제로, 여기에서 기술하는 시스템들과 방법들은 광범위하게 다양한 플랫폼과 구현들에 걸쳐 사용될 수 있다. 예컨대, 여기에서 기술하는 수동 검출루틴들은 텔레비젼 쇼, 상업적인 것, 영화 등과 관련된 불가청 신호를 검출하는데 사용될 수 있다. 몇몇 실시예들에서, 여기에서 기술한 수동 검출루틴들은 오디도 신호들에 매립되지 않은 독립형(stand-alone) 불가청 신호를 검출하는데 사용될 수 있다. 이와 같은 독립형 불가청 신호들은 예컨대, 상업/쇼핑 환경들, 사업 환경들, 음악 공연장, 엔터테인먼트 장소, 또는 소정의 다른 적절한 환경 또는 장소에서 전송될 수 있다. 휴대용 다기능 장치들은 또한, 그의 온-보드 스피커를 사용하여 불가청 신호를 전송하도록 구성될 수 잇다. 불가청 신호는, 송신하는 휴대용 다기능 장치에 근접해 위치하는 다른 휴대용 다기능 장치에 의해 수신되어 처리될 수 있다. 어떤 경우에도, 불가청 신호를 수동적으로 검출하고 또한 콘텐츠 관리시스템에 불가청 신호의 표시를 제공하면, 특정 콘텐츠는 여기에서 기술하는 시스템들과 방법들에 따라 휴대용 다기능 장치로 전달될 수 있다.
다른 실시예에서, 불가청 신호는 휴대용 다기능 장치들 간에 피어-투-피어(peer-to-peer) 통신에서 사용될 수 있다. 예컨대, 한 휴대용 다기능 장치가 그의 스피커를 통해 불가청 신호를 생성할 수 있고, 이는 제2휴대용 다기능 장치가 들을 수 있다. 불가청 신호에 포함되는 코드는, 전송하는 다기능 장치에 대한 IP주소와 포트번호를 포함할 수 있어, 수신 다기능 장치가 그들의 공통망 접속을 사용하여 전송장치와 피어-투-피어 네트워킹 접속을 개시하도록 한다. 만일 장치들이 공통의 로컬영역망, 예컨대 wifi망에 있다면, 피어-투-피어 네트워킹을 위해 사용되는 주소들은 LAN 내 사설 IP주소일 수 있고; 만일 다르게, 장치들이 광역망에 있다면, 예컨대 셀룰러 인터넷에 있다면, 피어-투-피어 네트워킹에 사용되는 주소들은 공용 IP주소들일 수 있다.
송신장치와 수신장치 간의 피어-투-피어 접속들은 다음을 포함한, 다수의 애플리케이션들이 이루어지게 한다:
- 비접촉인 방식으로, 도어, 예컨대 호텔방 또는 개인 거주구역에 언락 키를 다기능 장치가 제공하도록 허용하기 위해 휴대용 다기능 장치와 도어락 간에 Ad-hoc 네트워킹. 도어 또는 다기능 장치 각각은 불가청 신호의 송신기일 수 있다.
- 인터넷 또는 LAN통신을 통해 비접촉인 방식으로 지불정보 또는 쿠폰정보를 다기능 장치가 제공하도록 허용하기 위해 휴대용 다기능 장치와 판매/금전등록기 간에 Ad-hoc 네트워킹; 만일 장치가 스피커를 가지지만 마이크로폰이 없다면, 이 애플리케이션을 위해 불가청 신호의 송신기는 판매/금전등록일 수 있다.
- 차량 스피커들 또는 마이크로폰을 사용하여 불가청 신호를 송신 또는 수신하고 또한 휴대용 다기능 장치와 차량 전자장치 간에 불루투스 접속, 인터넷 접속, OBD2 접속 또는 다른 작동적 접속을 셋업하기 위해 휴대용 다기능 장치와 차량 간의 Ad-hoc 네트워킹.
- 접촉정보 교환, 데이터 전달 또는 데이터 포인터 전달, 또는 통화 또는 재화 교환을 위해 휴대용 다기능 장치들 간의 Ad-hoc 네트워킹.
- 콘서트 라이트쇼와 같은 정보의 디스플레이를 위해 장치들의 메쉬망을 형성하기 위해, 또는 각 휴대용 다기능 장치를 통해 다수의 관측점으로부터 이벤트의 오디오 또는 비디오를 수집하여 이 이벤트의 녹화 또는 방송이 가능하도록 하기 위해 주어진 장소의 서버와 다수의 휴대용 다기능 장치들 간의 Ad-hoc 네트워킹.
도 1은 하나의 비-제한적 실시예에 따른 휴대용 다기능 장치를 설명하는 블록도.
도 2 내지 4는 다양한 비-제한적 실시예들에 따라 콘텐츠 관리시스템들과 통신하는 휴대용 다기능 장치들을 보여주는 도면.
도 5는 하나의 비-제한적 실시예에 따른 콘텐츠 관리시스템에 대한 데이터 저장 및 콘텐츠 녹화의 예시적 블록도.
도 6은 하나의 비-제한적 실시예에 따른 사용자 장치에 대한 예시적 수동 검출프로세스의 흐름도.
도 7은 하나의 비-제한적 실시예에 따른 콘텐츠 관리시스템에 대한 예시적 콘텐츠 전달프로세스의 흐름도.
도 8a 내지 8d는 비-제한적 실시예에 따른 소프트웨어 애플리케이션의 예시적 사용자 흐름을 보여주는 도면.
첨부도면들과 함께 이루어진 몇몇 예시적 실시예들의 상세한 설명으로부터 본 발명을 보다 쉽게 이해하게 될 것이다.
지금부터 장치의 실시예들에 대해 설명이 이루어진다. 도 1은 여기에서 기술하는 시스템들과 방법들에 따라 불가청 신호들을 검출하고 또한 연계된 콘텐츠를 수신하는데 사용될 수 있는 휴대용 다기능 장치(100)를 보여주는 블록도이다. 몇몇 실시예들에서, 휴대용 다기능 장치(100)는 불가청 신호들을 수동적으로 검출할 수 있다. 몇몇 실시예들에서, 휴대용 다기능 장치(100)의 사용자는 검출루틴을 선택적으로 활성화시킬 수 있다.
장치(100)는 (하나 이상의 컴퓨터 판독가능 저장매체를 포함할 수 있는)메모리(102), 메모리 제어기(122), 하나 이상의 프로세싱유닛(CPU)(120), 주변 인터페이스(118), RF회로(108), 오디오회로(110), 스피커(111), 마이크로폰(113), 입력/출력(I/O) 서브시스템(106), 다른 입력 또는 제어장치들(116), 및 외부포트(124)를 포함할 수 잇다. 장치(100)는 하나 이상의 광학센서(164)를 포함할 수 있다. 이들 요소들은 하나 이상의 통신버스들 또는 신호선(103)들을 통해 통신할 수 있다.
장치(100)는 단지 휴대용 다기능 장치(100)의 한 예일 뿐이고, 또한 장치(100)는 도시된 것보다 많은 또는 적은 요소들을 가질 수 있거나, 또는 요소들의 상이한 구성 또는 배열을 가질 수 있다는 것을 알아야 한다. 도 1에 도시된 다양한 요소들은 하나 이상의 신호처리 및/또는 애플리케이션 특정 집적회로를 포함해, 하드웨어, 소프트웨어 또는 하드웨어와 소프트웨어 둘 다의 조합으로 구현될 수 있다.
메모리(102)는 고속 랜덤 액세스 메모리를 포함할 수 있고 또한 하나 이상의 자성 디스크 저장장치, 플래쉬 메모리장치, 또는 다른 비-휘발성 고체 메모리장치와 같은 비-휘발성 메모리를 포함할 수 있다. CPU(120)와 주변 인터페이스(118)와 같은, 장치(100)의 다른 요소들에 의한 메모리(102)로의 액세스는 메모리 제어기(122)에 의해 제어될 수 있다.
주변 인터페이스(118)는 장치의 입력과 출력 주변장치들을 CPU(120)와 메모리(102)에 연결시킨다. 하나 이상의 프로세서(120)들은 장치(100)에 대한 다양한 기능들을 수행하고 또한 데이터를 처리하기 위하여 메모리(102)에 저장되는 다양한 소프트웨어 프로그램들 및/또는 명령 셋트들을 실행한다.
몇몇 실시예들에서, 주변 인터페이스(118), CPU(120), 및 메모리 제어기(122)는 칩(104)와 같은 단일 칩에 구현될 수 있다. 몇몇 다른 실시예들에서, 이들은 개별적인 칩으로 구현될 수 있다.
RF(무선주파수) 회로(108)는 전자기 신호라고 부르는 RF신호들을 수신하고 또한 전송한다. RF회로(108)는 전기신호들을 전자기 신호들로/로부터 변환하고 또한 전자기 신호들을 통해 통신마아 다른 통신장치들과 통신한다. RF회로(108)는 이들 기능들을 수행하기 위해 잘 공지되었지만 제한하는 것은 아닌, 안테나 시스템, RF송수신기, 하나 이상의 증폭기, 튜너, 하나 이상의 발진기, 디지털 신호처리기, CODEC 칩셋, 가입자 식별 모듈(SIM) 카드, 메모리 등을 포함할 수 있다. RF회로(108)는 월드 와이드 웹(WWW)라고 부르는 인터넷, 인트라 넷 및/또는 셀룰러 전화망, 무선 지역망(LAN) 및/또는 도시지역망(MAN)과 같은 무선망과, 무선통신에 의한 다른 장치들과 통신할 수 있다. 무선통신은 제한하는 것은 아니지만, 이동통신용 범용 시스템(GSM), 강화된 데이터 GSM 환경(EDGE), 고속 다운링크 패킷 액세스(HSDPA), 광대역 코드분할 다중 액세스(W-CDMA), 코드분할 다중 액세스(CDMA), 롱텀 에볼루션(LTE), 시분할 다중 액세스(TDMA), 블루투스, (IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n과 같은)와이파이(Wi-Fi), 인터넷 프로토클을 통한 음성(VoIP), Wi-MAX, 이메일용 프로토콜, 인스턴트 메시징, 및/또는 단문 서비스(SMS), 또는 본출원의 출원일 현재 개발되지 않은 통신 프로토콜을 포함하는 소정의 적절한 통신 프로토콜을 포함하여, 다수의 통신표준들과, 프로토콜들과 기술들 중 소정의 것을 사용할 수 있다.
오디오회로(110)와, 스피커(111)와, 마이크로폰(113)은 사용자와 장치(100) 간에 오디오 인터페이스를 제공한다. 오디오회로(110)는 주변인터페이스(118)로부터 오디오 데이터를 수힌하고, 이 오디오 데이터를 전기신호로 변환하고, 그리고 이 전기신호를 스피커(111)로 전송한다. 스피커(111)는 전기신호를 가청 음파로 변환한다. 오디오회로(110)는 또한 마이크로폰(113)에 의해 음파로부터 변환된 전기신호를 수신한다. 오디오회로(110)는 전기신호를 오디오 데이터로 변환하고 그리고 오디오 데이터를 프로세싱을 위해 주변인터페이스(118)로 전송한다. 오디오 데이터는 주변인터페이스(118)에 의해 메모리(102) 및/또는 RF회로(108)로부터 회수되거나 또는 이들로 전송된다. 몇몇 실시예들에서, 오디오회로(110)는 또한 헤드셋 잭(미도시)를 포함한다. 헤드셋 잭은 오디오회로(110)와, 출력전용 헤드폰 또는 출력 및 입력 둘 다를 가지는 헤드셋과 같은 제거가능한 오디오 입력/출력 주변장치 간에 인터페이스를 제공한다.
I/O서브시스템(106)은 장치(100) 상의 터치스크린(112) 및 다른 입력/제어 장치(116)와 같은 입력/출력 주변장치를 주변인터페이스(118)에 연결한다. I/O서브시스템(106)은 다른 입력 또는 출력 장치들을 위한 디스플레이 제어기(156)와 하나 이상의 입력 제어기(160)를 포함할 수 있다. 하나 이상의 입력 제어기(160)는 다른 입력 또는 제어장치(116)로부터/로 전기신호들을 수신/전송한다. 다른 입력/제어장치(116)는 물리적 버튼, 다이얼, 슬라이더 스위치, 조이스틱, 클릭 휠 등을 포함할 수 있다. 몇몇 다른 실시예들에서, 입력제어기(160)는 다음의 장치들 어느 하나(또는 아무 것에도) 연결되지 않을 수 있다: 키보드, 적외선 포트, USB 포트, 및 마우스와 같은 포인터 장치. 하나 이상의 버튼(예컨대, 도 2의 208)은 스피커(111) 및/또는 마이크로폰(113)의 음량제어를 위해 업/다운 버튼을 포함할 수 있다. 터치스크린(112)은 시각적 또는 소프트 버튼들과 하나 이상의 소프트 키보드를 구현하는데 사용된다.
터치-민감 터치스크린(112)은 장치와 사용자 사이에 입력인터페이스와 출력인터페이스를 제공한다. 디스플레이 제어기(156)는 터치스크린(112)로부터/로 전기신호들을 수신 및/또는 전송한다. 터치스크린(112)은 사용자에게 시각적 출력을 디스플레이한다. 시각적 출력은 그래픽, 문자, 아이콘, 비디오 및 이들의 소정 조합(총칭하여 "그래픽"이라 함)을 포함한다. 몇몇 실시예에서, 시각적 출력들 중 몇몇 또는 모두는, 아래에서 더 상세히 설명되는 사용자-인터페이스 오브젝트에 대응한다.
터치스크린(112)은 터치-민감 표면과, 센서 또는 촉각 접촉을 기반으로 사용자로부터 입력을 받아들이는 센서들의 세트를 가진다. (메모리(102) 내 소정의 관련 모듈들 및/또는 명령들의 세트들과 함께)터치스크린(112)과 디스플레이 제어기(156)는 터치스크린(112) 상의 접촉(및 접촉의 소정 움직임 또는 브레이킹)을 검출하고 그리고 검출한 접촉을, 터치스크린 상에 디스플레이되는 사용자-인터페이스 오브젝트와 상호작용(interaction)으로 변환한다. 몇몇 실시예들에서, 터치스크린(112)과 사용자 간의 접촉의 포인트는 사용자의 손가락에 대응한다.
터치스크린(112)은, 다른 디스플레이 기술들이 다른 실시예들에서 사용될 수 있다 하더라도, LCD(액정 디스플레이) 기술, 또는 LPD(광방출 폴리머 디스플레이) 기술을 사용할 수 잇다. 터치스크린(112)과 디스플레이 제어기(156)는, 한정하는 것은 아니지만 다른 근접센서 배열들 또는 터치스크린(112)과 하나 이상의 접촉점을 결정하기 위한 다른 소자들 뿐만 아니라, 용량성(capacitive), 저항성(resistive), 적외선 및 표면 음파기술을 포함하여, 공지되거나 나중에 개발될 다수의 터치센싱 기술들 중 소정의 것을 사용하여 접촉과 접촉의 소정 이동 또는 브레이킹을 검출할 수 있다. 사용자는 스타일러스(stylus), 손가락 등과 같은 소정의 적절한 오브젝트 또는 부속물을 사용하여 터치스크린(112)과 접촉을 할 수 잇다. 몇몇 실시예들에서, 사용자 인터페이스는, 터치스크린 상에 손가락의 큰 접촉영역으로 인해 스타일러스-기반 입력보다 훨씬 더 정확할 수 있는, 손가락-기반 접촉들과 제스처로 작업하도록 디자인된다. 몇몇 실시예들에서, 장치는 열악한 손가락-기반 입력을 정확한 포인터/커스 위치 도는 사용자가 원하는 동작들을 수행하기 위한 명령들로 변환한다.
몇몇 실시예들에서, 터치스크린 이외에, 장치(100)는 특정 기능을 활성화시키거나 비활성화시키기 위해 터치패트(미도시)를 포함할 수 있다. 몇몇 실시예들에서, 터치패드는, 터치스크린과는 달리 시각적 출력을 디스플레이하지 않는 장치의 터치-민감 영역이다. 터치패드는 터치스크린(112)로부터 분리되거나 또는 터치스크린에 의해 형성된 터치-민감 표면의 확장인 터치-민감 표면이다.
몇몇 실시예에서, 장치(100)는 입력제어장치(1126)로서 클릭 휠을 포함할 수 있다. 사용자는 클릭 휠을 회전시키거나 또는 클릭 휠과 접촉점을 이동시킴으로써, 터치스크린(112)에 디스플레이되는 하나 이상의 그래픽 오브젝트(여기서 아이콘으로 부름) 간을 항해하여 상호작용할 수 있다(접촉점의 이동량은 클릭 휠의 중심에 대한 그의 각 변위에 의해 측정된다). 클릭 휠은 또한 디스플레이된 아이코들 중 하나 이상을 선택하는데 사용될 수 있다. 예컨대, 사용자는 클릭 휠의 적어도 소정 부분을 또는 관련된 물리적 버튼을 아래로 누를 수 있다. 클릭 휠을 통해 사용자에 의해 제공된 사용자 명령들과 항해 명령들은 메모리(102) 내의 모듈들 및/또는 명령 셋트들 중 하나 이상 뿐만 아니라 입력제어기(160)에 의해 처리될 수 있다.
장치(100)는 또한 다양한 요소들에 전력을 공급하기 위한 전력시스템(162)을 포함한다. 전력시스템(162)은 전력 관리시스템과, 하나 이상의 전력원과, 충전시스템과, 전원고장검출회로와, 전력 컨버터 또는 인버터, (광방출 다이오드(LED)와 같은) 전력상태 표시기와 그리고 휴대용 장치들에서 전력의 생성, 관리 및 분배와 관련된 다른 요소들을 포함할 수 잇다.
장치(100)는 또한 하나 이상의 광센서(164)를 포함할 수 있다. 도 1은 I/O서브시스템(106) 내에 광센서 제어기(158)에 결합된 광센서를 보여준다. 광센서(164)는 전하-결합 장치(CCD) 또는 상보 금속-산화물 반도체(CMOS) 광트랜지스터를 포함할 수 있다. 광센서(164)는 하나 이상의 렌즈를 통해 투사되는, 주변으로부터 광을 수신하고 그리고 광을, 이미지를 나타내는 데이터로 변환한다. 이미징모듈(144)와 함께, 광센서(164)는 정지영상 또는 비디오를 캡쳐한다. 몇몇 실시예에서, 광센서는 장치의 정면 상의 터치스크린(112)에 반대되는, 장치(100)의 후면에 위치하여, 터치스크린 디스플레이는 정지 및/또는 비디오 이미지 취득을 위한 뷰파인더로서 사용될 수 있다. 몇몇 실시예에서, 광센서는 장치의 전면에 위치하여, 사용자가 터치스크린 디스플레이 상의 다른 비디오회의 참석자를 보는 동안에 비디오회의를 위해 사용자의 이미지가 획득될 수 있게 된다. 몇몇 실시예에서, 단일 광센서(164)가 비디오회의와 정지 및/또는 비디오 영상취득 둘 다를 위해 터치스크린 디스플레이와 함께 사용될 수 있도록 광센서(164)의 위치는 사용자에 의해 변경될 수 있다(장치하우징 내 렌즈와 센서를 회전시킴으로써).
장치(100)는 또한 하나 이상의 근접센서(166)를 포함할 수 있다. 도 1은 주변인터페이스(118)에 연결된 근접센서(166)를 보여준다. 택일적으로, 근접센서(166)는 I/O서브시스템(106) 내 입력제어기(160)에 연결될 수 있다. 몇몇 실시예에서, 다기능 장치가 사용자의 귀에 가까이 위치하게 되면, 근접센서는 터치스크린(112)을 턴오프시켜 작동하지 않도록 한다. 몇몇 실시예들에서, 장치가 락 상태에 있을 때 불필요한 배터리 방출을 방지하기 위해 장치가 사용자의 주머니, 지갑, 또는 다른 어두운 지역에 있을 때 근접센서는 스크린 오프를 유지한다.
몇몇 실시예에서, 메모리(102)에 저장된 소프트웨어 요소들은 운영시스템(126)과, 통신모듈(또는 명령 세트)(128)과, 접촉/동작 모듈(또는 명령 세트)(130)와, 그래픽 모듈(또는 명령 세트)(132)와, 문자입력 모듈(또는 명령 세트)(134), 전지구 위치확인 시스템(GPS) 모듈(또는 명령 세트)(135), 및 애플리케이션(또는 명령 세트)(136)를 포함할 수 있다.
(PALM OS, MICROSOFT OS, APPLE OS, UNIX OS, LINUX OS, SYMBIAN OS, EMBEDIX OS, 무선을 위한 이진 실시간 환경(Binary Run-time Environment for Wireless:BREW) OS, 자바OS, 무선애플리케이션 프로토콜(WAP) OS 등과 같은) 운영시스템(126)은 (메모리관리, 저장장치제어, 전력관리 등과 같은) 일반적인 시스템 임무를 제어하고 또한 관리하기 위한 다양한 소프트웨어 요소들 및/또는 드라이버들을 포함하고 그리고 다양한 하드웨어와 소프트웨어 요소들 간에 통신을 용이하게 한다.
통신모듈(128)은 하나 이상의 외부포트(124)를 통해 다른 장치들과 통신을 용이하게 하고 또한 RF회로(108) 및/또는 외부포트(124)에 의해 수신되는 데이터를 처리하기 위한 다양한 소프트웨어 요소들을 포함ㅎ나다. (범용 직렬버스(USB), FIREWIRE 등과 같은) 외부포트(124)는 다른 장치들에 직접 연결되거나 또는 (인터넷, 무선 LAN 등과 같은) 망을 통해 간접적으로 연결되도록 이루어진다. 몇몇 실시예에서, 외부포트는, IPOD(애플컴퓨터사의 상표) 장치에 사용되는 30-핀 커넥터와 동일하거나, 또는 유사하거나 및/또는 호환될 수 있는 다중-핀 커넥터이다.
접촉/동작 모듈(130)은 (디스플레이 제어기(156)와 함께) 터치스크린(112)과 (더치패드 또는 클릭 휠과 같은) 다른 터치 민감 장치들과 접촉을 검출할 수 있다. 접촉/동작 모듈(130)은, 접촉이 발생했는가, 접촉의 이동이 있었고 또한 터치스크린(112)을 가로질러 이동을 트래킹했는가, 그리고 접촉이 끊어졌는가(즉, 접촉이 중단되었는가)를 결정하는 결정하는 것과 같은, 접촉의 검출과 관련된 다양한 동작들을 수행하기 위한 다양한 소프트웨어 요소들을 포함한다. 접촉점의 이동을 결정하는 것은, 접촉점의 스피드(크기), 속도(크기와 방향), 및/또는 가속(크기 및/또는 방향에서 변화)를 결정하는 것을 포함할 수 있다. 이들 동작들은 (단일 손가락 접촉과 같은)단일 접촉들에 또는 ("다중터치"/다수 손가락 접촉과 같은) 다중 동시 접촉들에 적용될 수 있다. 몇몇 실시예에서, 접촉/동작 모듈(130)과 디스플레이 제어기(156)는 또한 터치패드 상의 접촉을 검출한다. 몇몇 실시예에서, 접촉/동작 모듈(130)과 제어기(160)는 클릭 휠 상의 접촉을 검출한다.
그래픽 모듈(132)은 디스플레이되는 그래픽의 강도를 변경시키기 위한 요소들을 포함하여, 터치스크린(112) 상에 그래픽을 렌더링하고 또한 디스플레이하기 위한 다양한 공지 소프트웨어 요소들을 포함한다. 여기에서 사용하듯이, 용어 "그래픽"은 제한없이 문자, 웹페이지, (소프트 키들을 포함하는 사용자-인터페이스 오브젝트와 같은)아이콘들, 디지털 이미지들, 비디오들, 애니메이션 등을 포함하여, 사용자에게 디스플레이될 수 있는 오브젝트를 포함한다. 이 문맥에서 애니메이션은, 움직임의 모습을 제공하고, 그리고 (폴더로 이메일 메시지를 이동시키는 것과 같은) 수행된 동작을 사용자에게 통지하는 일련의 이미지들의 디스플레이다. 이 문맥에서, 장치의 사용자에 의한 동작을 확인하는 각 애니메이션은 전형적으로 선규정된, 미소한 량의 시간, 전형적으로 0.2와 1초 사이의 시간을 취하고, 그리고 일반적으로 2초 미만이다.
그래픽 모듈(132)의 요소일 수 있는, 문자입력 모듈(134)은 콘택트(137)와, 이메일(140)과, IM(141)과, 블로깅(142)와, 브라우저(147)과, 그리고 문자입력을 필요로 하는 소정의 애플리케이션과 같은, 다양한 애플리케이션에서 문자를 입력하기 위한 소프트 키보드를 제공한다.
GPS 모듈(135)은 장치의 위치를 결정하고 그리고 위치-기반 다이얼링에서 사용을 위한 전화(138)와, 사진/비디오 메타데이터와 같은 카메라(143) 및/또는 블로거(142)와, 그리고 날씨 위젯, 지역 엘로우 페이지 위젯, 및 맵/네비게이션 위젯과 같은 위치-기반 서비스들을 제공하는 애플리케이션과 같은, 다양한 애플리케이션에서 사용을 위해 이 정보를 제공한다.
애플리케이션(136)은 다음 모듈들(또는 명령 세트들), 또는 이들의 서브세트 또는 슈퍼세트(supersets를 포함할 수 있다: 컨택모듈(137)(때때로 주소록 또는 컨택 리스트라 칭함); 전화모듈(138); 비디오회의모듈(139); 이메일 클라이언트모듈(140); 인스턴트 메시징(IM)모듈(141); 블로깅모듈(142); 정지 및/또는 비디오 이미지들을 위한 카메라모듈(143); 이미지 관리모듈(144); 비디오 재생모듈(145); 음악 재생모듈(146); 브라우저모듈(147); 캘린더모듈(148); 날씨위젯(149-1)과, 주식위젯(149-2)와, 계산기위젯(149-3)과, 알람시계위젯(149-4)과, 사전위젯(149-5)과, 사용자에 의해 획득될 수 있는 다른 위젯들 뿐만 아니라 사용자-생성 위젯(149-6)과을 포함하는 위젯모듈(149)과; 사용자-생성 위젯(149-6)을 만들기 위한 위젯생성모듈(150)과; 및/또는 검색모듈(151).
메모리(102) 내에 저장될 수 있는 다른 애플리케이션(136)의 예들은 메모패드 및 다른 워드프로세싱 애플리케이션, JAVA-기동 애플리케이션, 암호화, 디지털 권리관리, 음성인식, 및 음성복제를 포함한다. 아래에서 보다 상세하게 기술되는 바와 같이, 불가청 신호들을 수동적으로 검출하기 위한 하나 이상의 애플리케이션들은 메모리(102) 내에 저장될 수 있다. 콘텐츠 관리시스템으로부터 수신한 콘텐츠에 액세싱하기 위한 애플리케이션은 또한 메모리(102) 내에 저장될 수 있다. 몇몇 실시예에서, 이 애플리케이션은 불가청 신호들을 수동적으로 검출하는 동일 애플리케이션일 수 있다.
터치스크린(112), 디스플레이 제어기(156), 컨택모듈(130), 그래픽모듈(132), 오디오회로(110), 및 스피커(111)와 함께, 비디오재생모듈(145)은 (외부포트(124)를 통해 외부에 접속된 디스플레이 도는 터치스크린 상에) 비디오들을 디스플레이하거나, 나타내거나 또는 재생하는데 사용된다. 비디오들은 여기에서 기술한 콘텐츠 관리시스템으로부터 수신된다.
터치스크린(112), 디스플레이 제어기(156), 컨택모듈(130), 그래픽모듈(132), 오디오회로(110), 스피커(111), RF회로(108), 및 브라우저모듈(147)과 함께, 음악재생모듈(146)은 사용자로 하여금, MP3 또는 AAC파일과 같은 하나 이상의 파일 포맷들로 기록된 음악과 다른 소리파일을 다운로드하여 재생할 수 있도록 한다. 몇몇 실시예에서, 장치(100)는 IPOD(애플컴퓨터사의 상표)와 같은, MP3플레이어의 기능을 포함할 수 있다. 기록된 음악과 소리파일들은 여기에서 기술한 콘텐츠 관리시스템으로부터 수신될 수 있다.
상기에서 확인한 모듈들과 애플리케이션들 각각은 상기에서 기술한 하나 이상의 기능들을 수행하기 위한 명령 세트에 대응한다. 이들 모듈들(즉, 명령 세트들)은 개별적인 소프트웨어 프로그램들, 절차들 또는 모듈들로 구현될 필요가 없어, 이들 모듈들의 다양한 서브세트들이 결합되거나 아니면 다양한 실시예에서 재-배열될 수 있다. 몇몇 실시예에서, 메모리(102)는 상기에서 확인한 모듈들과 데이터 구조들의 서브세트를 저장할 수 있다. 게다가, 메모리(102)는 상기에서 기술하지 않은 추가적인 모듈들과 데이터 구조들을 저장할 수 있다.
도 2를 참조하면, 본 발명의 한 예시적 실시예는 불가청 신호들과 연계된 정보를 수신하여 처리하는 콘텐츠 관리시스템(200)을 포함할 수 있다. 콘텐츠 관리시스템(200)은, 사용자에게 어느 콘텐츠를 제공하여야 하는지를 결정하고, 그런 다음에 사용자들과 관련된 휴대용 다기능 장치로 콘텐츠를 무선으로 제공한다. 콘텐츠 관리시스템(200)은 개인컴퓨터, 랩탑, 서버, 메인프레임, 또는 다수 컴퓨터들의 집합(예컨대, 망)과 같은, 소정의 적절한 프로세서-기반 장치 또는 시스템을 사용하여 제공될 수 있다. 콘텐츠 관리시스템(200)은 하나 이상의 프로세서(214)들과 그리고 하나 이상의 컴퓨터 메모리유닛(216)들을 포함할 수 있다. 편의를 위해, 단지 하나의 프로세서(214)와 하나의 메모리유닛(216)만이 도 2에 도시된다. 프로세서(214)는 메모리유닛(216)에 저장된 소프트웨어 명령들들을 실행할 수 있다. 프로세서(214)는 하나 또는 다수의 코어들을 가지는 집적회로(IC)로서 구현될 수 있다. 메모리유닛(216)은 휘발성 및/또는 비-휘발성 메모리유닛을 포함할 수 잇다. 휘발성 메모리유닛은 예컨대 랜덤 액세스 메모리(RAM)을 포함할 수 있다. 비-휘발성 메모리유닛은 하드디스크 드라이브, 광디스크 드라이브와 같은 기계적 비-휘발성 메모리시스템들 뿐만 아니라, 판독전용메모리(RAM)을 포함할 수 있다. RAM 및/또는 ROM 메모리유닛들은 예컨대 개별적 메모리IC로 구현될 수 있다.
메모리유닛(216)은 콘텐츠 관리엔진(218)에 대한 실행가능한 소프트웨어와 데이터를 저장할 수 있다. 콘텐츠 관리시스템(200)의 프로세서(214)가 콘텐츠 관리엔진(218)의 소프트웨어를 실행하면, 프로세서(214)는 콘텐츠 관리시스템(200)의 다양한 동작들을 수행할 수 있게 된다. 상기 동작들은, 제한없이, (휴대용 통신장치(202)로부터 (예컨대 코드화된 식별자(234)의 형식과 같은) 불가청 신호의 표시를 수신하고, 코드화된 식별자와 관련된 콘텐츠를 식별하고, 휴대용 통신장치(202)로부터 수신된 보충 정보를 수신하고 또한 분석하고, 그리고 콘텐츠(236)를 무선통신망을 통해 휴대용 통신장치(202)로 전송하는 것을 포함할 수 있다. 콘텐츠 관리엔진(218)이 사용하는 데이터는, 전자 컴퓨터 데이터베이스일 수 있는 콘텐츠 데이터베이스(220)와 같은 다양한 소오스로부터 올 수 있다. 콘텐츠 데이터베이스(220)에 저장된 데이터는 하드디스크 드라이브, 판독전용 멤보리(예컨대, ROM), 또는 다른 유형의 비-휘발성 메모리와 같은 비-휘발성 컴퓨터 메모리에 저장될 수 있다. 또한, 콘텐츠 데이터베이스(220)의 데이터는 원격 전자 컴퓨터시스템에 저장될 수 있다. 콘텐츠 데이터베이스(220) 내 데이터는 제한없이, 비디오 콘텐츠, 오디오 콘텐츠, 문자-기반 콘텐츠 등일 수 있다. 콘텐츠 데이터베이스(220) 내 콘텐츠의 조각들(pieces)은 특정 코드화된 식별자에 묶일 수 있다. 몇몇 실시예에서, 콘텐츠 제공기(230)는 콘텐츠 관리시스템(200)의 콘텐츠를 제공하고 또한 관리하기 위하여 웹 포털, 애플리케이션 프로그램 인터페이스(API), 또는 다른 형태의 인터페이스를 사용할 수 있다. 예컨대, 콘텐츠 제공기(230)는, 코드화된 식별자 "X"를 공급하는 휴대용 다기능 장치(202)로 콘텐츠 관리시스템(200)이 콘텐츠 "A", "B" 및 "C"를 전송하도록 명령을 제공할 수 있다.
전자 컴퓨터 데이터베이스일 수 있는 사용자 데이터베이스(222) 또한 콘텐츠 관리엔진(218)에 의해 사용될 수 있다. 사용자 데이터베이스(222)에 저장된 데이터는 하드디스크 드라이브, 판독전용 메모리(예컨대, ROM), 또는 다른 유형의 비-휘발성 메모리와 같은 비-휘발성 컴퓨터 메모리에 저장될 수 있다. 또한, 사용자 데이터베이스(222)의 데이터는 원격 전자 컴퓨터시스템에 저장될 수 있다. 사용자 데이터베이스(222)에 저장된 데이터는 트리커들, 사용자 선호 등과 같은, 콘텐츠 관리시스템(200)의 특정 사용자들에 관한 정보에 관련될 수 있다.
콘텐츠 관리시스템(200)은 전자 통신망(232)을 통해 휴대용 다기능 장치(202)와 통신할 수 있다. 통신망은 인터넷, LAN, WAN, GPRS망들과 같은 다수의 컴퓨터 및/또는 데이터망들을 포함할 수 있다. 콘텐츠 관리시스템(200)과 통신하는 휴대용 다기능 장치(202)는, 개인컴퓨터, 랩탑컴퓨터, 또는 노트북 컴퓨터와 같은, 망을 통한 통신에 적합한 소정 유형의 클라이언트 장치일 수 있다. 몇몇 예시적 실시예에서, 사용자는 스마트폰으로 부르는 복합 핸드헬드 컴퓨터 및 이동전화인 휴대용 다기능 장치(202)를 통해 망과 통신할 수 있다. 소정의 실시예들은 예로서 스마트폰 또는 랩탑을 통해 통신하는 사용자들을 기술하였지만, 통신은 이동전화, 개힌 디지털 보조장치(PDA), 복합 이동전화/PDA, 핸드헬드 장치, 이동유닛, 게임장치, 메시징장치, 미디어 플레이어, 또는 다른 적합한 이동통신장치들과 같은 다른 유형들의 사용자 장비(UE) 또는 무선 컴퓨팅장치를 사용하여 구현될 수 있다는 것을 알 수 있을 것이다.
몇몇 실시예에서, 휴대용 다기능 장치(202)는 휴대용 다기능 장치(100)(도 1)와 유사할 수 잇다. 설명을 위해, 도 2는 태블릿 컴퓨터(204)와, 스마트폰(206와, 랩탑(208)을 포함하는, 예시적 다기능 장치(202)들을 보여준다. 다른 유형들의 휴대용 다기능 장치들을 사용할 수 있다.
휴대용 다기능 장치(202)들 중 몇몇은 인터넷 액세싱을 포함하는 무선 광역망(WWAN) 데이터통신 서비스를 지원할 수 있다. WWAN 데이터통신 서비스들의 예는, 에볼루션-데이터 최적화 또는 에볼루션-데이터(EV-DO), 롱 텀 에볼루션(LTE), 데이터 및 음성용 에볼루션(EV-DV), CDMA/1xRTT, 일반 패킷 무선서비스 시스템을 가지는 GSM(GSM/GPRS), 글로벌 에볼루션용 인헨스드 데이터율(EDGE), 고속 다운링크 패킷 액세스(HSDPA), 고속 업링크 패킷 액세스(HSUPA), 및 다른 것들을 포함할 수 있다. 사용자장치(102)는, IEEE 802.11a/b/g/n 표준 프로토콜들 및 변형들의 시리즈(Wi-Fi), IEEE 802.16 표준 프로토콜들 및 변형들의 시리즈(WiMAX), IEEE 802.20 표준 프로토콜들 및 변형들의 시리즈와 같은, 전기전자 기술자기구(IEEE) 802.xx 프로토콜 시리즈들에 따라 무선 지역망(WLAN) 데이터통신기능을 제공할 수 있다.
몇몇 실시예에서, 휴대용 다기능 장치(202)는 또한 블루투스®, 스페셜 인터레스트 그룹(SIG) 프로토콜, 명세, 프로파일의 시리즈들에 따라 불루투스 데이터통신서비스들을 제공하는 무선 개인영역망(PAN)과 같은, 짧은 범위의 무선망들에 따라 데이터통신기능을 수행하도록 배열될 수 있다. 짧은 범위 무선망들의 다른 예들은 적외선(IR)기술들, 또는 수동 또는 능동 무선-주파수 식별(RFID) 프로토콜들과 장치들을 포함하는 전자기 유도(EMI)기술과 같은, 근거리 통신기술들과 프로토콜들을 채용할 수 있다.
도 1에 도시된 휴대용 다기능 장치(100)와 유사하게, 휴대용 다기능 장치(202)는, 콘텐츠 관리시스템(200)을 사용하여 하나 이상의 특정 임무를 사용자가 달성하도록 하기 위한 다양한 애플리케이션들을 제공할 수 있다. 휴대용 다기능 장치(202)는 기술한 실시예들에 따른 계산능력들을 제공하기 위하여 시스템 프로그램들과 애플리케이션들과 같은 다양한 소프트웨어 프로그램들을 포함할 수 있다. 싯템 프로그램들은 제한없이, 운영시스템(OS), 장치 드라이버, 프로그래밍 도구, 유틸리티 프로그램들, 소프트웨어 라이버러리, 애플리케이션 프로그래밍 인터페이스(API)를 포함할 수 있다.
일반적으로, 소프트웨어 애플리케이션은 휴대용 다기능 장치(202)를 통해 콘텐츠 관리시스템(200)과 사용자 간에 정보를 통신하기 위하여 인터페이스를 제공한다. 소프트웨어 애플리케이션은, 휴대용 다기능 장치(202)를 위한 동작들을 제공하기 위하여 프로세서에 의해 검색되고 또한 실행될 수 있는 휘발성 또는 비-휘발성 메모리와 같은 컴퓨터 판독가능 저장매체 상에 저장되는 실행가능한 컴퓨터 프로그램 명령들을 포함하거나 또는 명령들로서 구현될 수 있다. 메모리는 또한 다양한 데이터베이스 및/또는 사용자 장치(202)의 프로세서 및/또는 다른 요소들에 의해 사용을 위해 데이터를 저장하기 위한 다른 유형들의 데이터 구조들(예컨대, 배열, 파일, 테이블, 기록)을 포함할 수 있다.
도 2를 참조하면, 콘텐츠 관리시스템(200)은 여러 개의 컴퓨터 서버들을 포함할 수 있다. 예컨대, 콘텐츠 관리시스템(200)은 하나 이상의 웹서버(224)와, 애플리케이션 서버(226)와, 및 통지(notification) 서버(228)를 포함할 수 있다. 편의를 위해, 비록 이 명세서가 이에 한정되지 않는 것으로 이해를 하여야 한다고 하더라도, 도 2는 단지 하나의 웹서버(224)와, 애플리케이션 서버(226)와 그리고 하나의 통지 서버(228)가 도시되어 있다. 웹서버(224)는, (콘텐츠 소유자 또는 관리자와 같은) 시스템의 사용자들이 콘텐츠 관리시스템(200)과 상호작용할 수 있도록 하는 그래픽 웹 사용자 인터페이스를 제공할 수 있다. 웹서버(122)는, 웹페이지(예컨대, HTML 문서)와 (이미지들과 같은) 링크된 오브젝트와 같은 선택적 데이터 콘텐츠와 함께, HTTP 응답들과 같은 (웹브라우저와 같은) 클라이언트들로부터 HTTP 요청들과 같은 요청들을 받아들일 수 있다.
애플리케이션 서버(226)는 콘텐츠 관리시스템(200)과 통신하는 사용자들을 위한 사용자 인터페이스를 제공한다. 이와 같은 사용자들은, 망(232)을 통해 애플리케이션 서버(226)와 통신할 수 있도록 해주는 그들의 휴대용 다기능 장치(202)에 설치된 소프트웨어를 가질 수 있다. 이러한 소프트웨어는 예컨대, 이러한 사용하 휴대용 다기능 장치(202)에 대한 망을 통해 콘텐츠 관리시스템(200)으로부터, 또는 다른 소프트웨어 애플리케이션 제공자로부터 다운로드할 수 있다. 소프트웨어는 또한 공지의 다른 방식으로 이러한 휴대용 다기능 장치(202)에 설치될 수 있다.
통지 서버(228)는 망(232)을 통해 휴대용 다기능 장치(202)로 이메일, 문자 메시지, 스마트폰 통지, 전화호출, 또는 다른 유형들의 통신과 같은 통지들이 전송되도록 하고, 또한 통지들을 트랙/저장할 수 있다.
서버(224, 226, 228)들은 (예컨대, CPU와 같은) 프로세서들과, (예컨대, RAM, ROM과 같은) 메모리 유닛들과, (예컨대, 하드디스크 드라이브 시스템과 같은) 비-휘발성 저장시스템을 포함할 수 있다. 서버(224, 226, 228)들은 솔라리스(Solaris), 리눅스(Linux), 또는 윈도우 서버 운영시스템과 같은 운영시스템을 사용할 수 있다.
비록 도 2는 설명의 목적을 위해 제한된 수의 요소들을 도시하고 이찌만, 콘텐츠 관리시스템(200)은 기술된 실시예들에 따라 다른 유형들의 요소들 뿐만 아니라, 보다 많은 또는 보다 적은 요소들을 포함할 수 있다는 것을 알 수 있을 것이다. 콘텐츠 관리시스템(200)의 요소들은 주어진 디자인 변수들 도는 성능 제약에 따라, 하드웨어 요소들(컴퓨팅장치들, 프로세서들, 논리장치 등)과, 다양한 하드웨어 요소들에 의해 실행될 수 있는 컴퓨터 프로그램 명령들(펌웨어, 소프트웨어), 또는 이들의 조합과 같은, 구현된 정보를 통신하기 위한 물리적 또는 논리적 엔티티를 포함할 수 있다.
한 실시예에서, 휴대용 다기능 장치(202)는 소오스(212)로부터 방출되는 불가청 신호(210)를 수동적으로 검출한다. 상기에서 기술하였듯이, 불가청 신호(210)는 예컨대 오디오 콘텐츠(24) 내에 매립될 수 있다. 불가청 신호(210)는 휴대용 다기능 장치(202)에 의해 분석되어 코드화된 식별자(234)를 추출할 수 있다. 코드화된 식별자(234)는 휴대용 다기능 장치(202)에 의해 콘텐츠 관리시스템(20)으로 전송되거나, 업로드되거나 또는 제공될 수 있다. 부수적인 정보(238)가 휴대용 다기능 장치(202)에서 콘텐츠 관리시스템(200)으로 제공될 수 있다. 부수적인 정보(238)는 예컨대, 사용자정보, 위치정보, 장치정보 등을 포함할 수 있다. 기술한 실시예는 코드화된 식별자(234)로 설명하였지만, 이에 한정되지 않는다. 불가청 신호의 표시는 소정의 적절한 포맷으로 콘텐츠 관리시스템(200)으로 전송될 수 있다. 코드화된 식별자(234)를 수신하면, 콘텐츠 관리시스템(200)은 이 특정 코드화된 식별자를 특정 콘텐츠(236)에 연결시킬 수 있다. 콘텐츠 관리시스템(200)은, 소정의 임계치 및/또는 트리거들이 충족되었는지를 결정할 수 있다. 그런 다음, 콘텐츠 관리시스템(200)은 특정 콘텐츠(236)를 휴대용 다기능 장치로 전송할 수 있다.
도 3은 하나의 비-제한적 실시예에 따른 예시적 컴퓨텨-기반 콘텐츠 전달시스템을 도시한다. 제공기(provider)(300)는 불가청 신호(302)를 전송할 수 있다. 제공기(300)는 예컨대, 오디오 스피커, 비컨(beacon), (휴대용 다기능 장치(304)와 같은)휴대용 다기능 장치의 라인아웃(line-out), 또는 소정의 다른 적절한 전송장치일 수 있다. 휴대용 다기능 장치(304)에서 작동하는 애플리케이션(312)은, 마이이크로폰(310)에 의해 수신되는 신호들을 폴링(polling)함으로써, 불가청 신호들을 기계적으로 검출할 수 있다. 불가청 신호(302)를 검출하면, 애플리케이션(312)은 불가청 신호(302) 내에 포함되는 정보(예컨대, 코드화된 식별자)를 추출하기 위하여 신호를 처리할 수 있다. 코드화된 식별자는 애플리케이션 프로그램 인터페이스(API)를 통해 식별모듈(306)로 제공될 수 있다. 한 실시예에서, 이에 한정되지 않더라도, 식별모듈은 SONIC NOTIFY(www.sonicnotify.com)에 의해 운영될 수 있다. 식별모듈(306)은 코드화된 식별자를 분석하여, 오디오 콘텐츠 내 특정 코드화된 식별자(예컨대 엔티티 정보)를 엠베딩(embedding)하는 것과 관련된 엔티티를 결정한다. 식별모듈(306)은 휴대용 다기능 장치(304)로 보충정보를 리턴(retrun)할 수 있다. 식별모듈(306)로부터 보충정보를 수신하면, 애플리케이션(312)은, 콘텐츠 관리시스템(308)과 접촉하는지를 결정할 수 있거나, 또는 엔티티 정보를 기반으로 어느 콘텐츠 관리시스템과 접촉하는지를 결정할 수 있다. 어떠한 경우라도, 휴대용 다기능 장치(304)는 업로드 패킷을 콘텐츠 관리시스템(308)로 전송할 수 있다. 업로드 패킷(314)은 예컨대, 코드화된 식별자와 그리고 다양한 트리거들이 충족되었는지를 결정하는데 사용될 수 있는 다른 정보를 포함할 수 있다. 그런 다음, 콘텐츠 관리시스템(308)은 코드화된 식별자를 저장된 콘텐츠의 일부에 연결시킬 수 있다. 그런 다음, 저장된 콘텐츠는 다운로드 패킷(316)을 통해 휴대용 다기능 장치(304)로 전송될 수 있다.
도 4는 하나의 비-제한적 실시예에 따른 예시적 컴퓨터-기반 콘텐츠 전달시스템을 보여준다. 제공기(400)는 불가청 신호(402)를 전송할 수 있다. 휴대용 다기능 장치(404)에서 동작하는 애플리케이션(410)은, 라인아웃 잭(412)을 통해 수신한 신호들을 폴링함으로써, 불가청 신호들을 기계적으로 검출할 수 있다. 불가청 신호(402)를 검출하면, 애플리케이션(410)은 불가청 신호(402) 내에 포함되는 정보(예컨대, 코드화된 식별자)을 추출하기 위해 신호를 처리할 수 있다. 그런 다음, 휴대용 다기능 장치(404)은 콘텐츠 관리시스템(406)으로 업로드 패킷(414)을 전송할 수 있다. 업로드 패킷(414)은 예컨대, 코드화된 식별자와 그리고 다양한 트리거들을 충족시키는데 사용될 수 있는 다른 정보를 포함할 수 있다. 그런 다음, 콘텐츠 관리시스템(406)은 코드화된 식별자를 처리하고 그리고 코드화된 식별자와 연계되는 콘덴츠 제공기(408a - n)를 식별할 수 있다. 콘텐츠 관리시스템(406)은 요청을 콘텐츠 제공기(408)로 전송하고 그리고 콘텐츠의 일부를 수신할 수 있다. 콘텐츠는 나중에 다운로드 패킷(416)을 통해 휴대용 다기능 장치(404)로 제공될 수 있다.
도 5는 콘텐츠 관리시스템을 위한 데이터 저장기(store)(50)과 콘텐츠 기록(record)(502)의 예시적 블록도이다. 데이터 저장(500)은 콘텐츠 데이터베이스(220)(도 2)와 비슷할 수 있다. 도 5는 여기에서 기술한 콘텐츠 관리시스템들과 방법드렝 의해 사용될 수 있는 한지 하나의 가능한 콘텐츠 기록(502)을 보여준다. 기술분야에서 일반적으로 알 수 있듯이, 다른 기록들, 기록들의 유형, 및 변형들이 가능하다. 콘텐츠 기록(502)은 데이터베이스라 부르는 전자 데이터 저장기(500)에 저장될 수 있다. 각 콘텐츠 기록(502)은 ID 칼럼(column)을 포함할 수 있다. ID 칼럼은 예컨대, (00000A-0000C로 도시된) 코드화된 식별자를 저장할 수 있다. 콘텐츠 기록(502)은 또한 트리거 ID 칼럼을 가질 수 있다. 콘텐츠 기록(502)은 또한 트리거 ID 칼럼을 가질 수 있다. 트리거 ID 칼럼은 다양한 트리거들을 각 코드화된 식별자와 관련시킨다. 트리거들은 예컨대, 지리적 위치, 청취자의 전체 수 등일 수 있다. 다른 칼럼이, 각 트리거 ID와 관련되는 콘텐츠 ID를 저장할 수 있다. 콘텐츠 ID는, 특정 코드화된 식별자가 수신되고 또한 특정 트리거가 충족되면 휴대용 다기능 장치로 전송되게 되는 파일을 식별할 수 있다. 몇몇 실시예에서, 콘텐츠 소유자 또는 콘텐츠 관리자는 폼 기록(502)에 액세스할 수 있다. 도 5는 콘텐츠 기록(502)의 한 실시예를 보여주지만, 본 발명은 특정 콘텐츠 기록, 방버, 또는 저장기술에 한정되지 않는다는 것을 쉽게 이해하게 될 것이다.
도 6은 하나의 비-제한적 실시예에 따라, 휴대용 다기능 장치와 같은 사용자 장치에 대한 예시적 수동 검출프로세스의 흐름도이다. 단계(602)에서, 사용자 장치는 불가청 신호를 검출한다. 상기에서 기술하였듯이, 사용자 장치는 사용자 장치의 마이크로폰 또는 헤드폰 포트를 통해 출력되는 신호와 같은, 다양한 요소들을 수동적으로 폴(poll)할 수 있다. 만일 불가청 신호가 검출되지 않는다면, 프로세스는 단계(606)을 종료할 시간을 대기하고 그리고 프로세스를 반복한다. 만일 불가청 신호가 검출된다면, 단계(608)에서, 사용자 장치는 불가청 신호를 처리 또는 분석하여, 불가청 신호에 의해 반송되는 식별자를 결정할 수 있다. 식별자는 일련의 0들과 1들의 형식일 수 있거나 또는 다른 형태의 식별자일 수 있다. 단계(610)에서, 사용자 장치는 식별자를, 콘텐츠 관리시스템(200)(도 2)과 같은, 콘텐츠 관리시스템으로 전송할 수 있다. 단계(612)에서, 콘텐츠는 사용자 장치에 의해 최초로 수신한 불가청 신호를 기반으로 콘텐츠 관리시스템으로부터 사용자 장치가 수신할 수 있다. 그런 다음, 프로세스는 단계(602)에서 불가청 신호를 검출하는 것을 재개한다. 도 6에서 도시한 프로세스는 사용자로부터 입력없이 발생할 수 있다는 것에 주의해야 한다. 즉, 도 6에 도시된 프로세스는 사용자 장치의 "백그라운드"에서 작동하는 애플리케이션에 의해 구현되는, 상대적으로 큰 수동 프로세스일 수 있다.
도 7은 하나의 비-제한적인 실시예에 따른 콘텐츠 관리시스템에 대한 예시적 콘텐츠 전달의 흐름도이다. 단계(702)에서, 식별자는 사용자 장치로부터 수신된다. 단계(704)에서, 식별자는 콘텐츠와 연결된다. 콘텐츠는 예컨대, 비디오 콘텐츠, 오디오 콘텐츠, 또는 사용자 장치로 전송될 수 있는 소정의 다른 데이터일 수 있다. 단계(706)에서, 콘텐츠는 콘텐츠 전달시스템에 의해 사용자 장치로 전송될 수 있다. 단계(708)에서, 식별자에 관한 분석이 저장될 수 있다. 잘 알 수 있듯이, 식별자에 관한 광범위한 데이터가 저장될 수 있다. 예컨대, 지리적 데이터, 시간/날짜 데이터, 사용자장치 데이터, 및/또는 사용자 데이터가 콘텐츠 관리시스템에 의해 저장될 수 있다.
여기에서 기술하였듯이, 콘텐츠 관리시스템으로부터 수신된 콘텐츠를 사용자가 액세스하고 또한 저장할 수 있도록 하기 위해, 소프트웨어 애플리케이션이 휴대용 다기능 장치에서 실행될 수 있다. 애플리케이션은 또한, 사용자가 사용자 선호도를 콘텐츠 관리시스템에 제공할 수 있도록 한다. 잘 알 수 있듯이, 애플리케이션은 다양한 방식들로 구조화될 수 있다. 도 8a - 8d는 여기에서 설명한 시스템들과 방법들에 따른 소프트웨어 애플리케이션의 비-제한적 사용자 흐름을 보여준다.
휴대용 다기능 장치에 의해 본 발명의 사용으로부터 분석정보가 수집될 수 있다. 특히, 장치의 위치와 그리고 다른 장치들과 코로케이션(co-location)을 특정 장소들에서 그리고 두 개의 다른 장치로부터 불가청 신호들로부터 습득할 수 있다. 그러므로, 비컨 허드(beacon heard)의 보고는, 해당 콘텐츠(responsive content)의 전달없이, 휴대용 다기능 장치의 이동과 근거리 상호작용의 기록을 이끌게 된다. 이는, 영역으로 빈번한 방문자, 특정 위치에 있는 사람 또는 ad-hoc 어셈블리 등에 대해 상기에서 기술한 유형의 인센티브를 제공하는데 사용될 수 있다.
주어진 장소에서 불가청 신호들의 다수 소오스들이 있는 경우에, 불가청 신호들은 신호들 간에 충돌과 간섭을 피하기 위하여 주파주적으로 또는 시간적으로 변조될 수 있다. 게다가, 불가청 신호 송신기들은 ad-hoc 망일 수 있고 또한 충돌을 피하기 위하여 그들의 전송을 동기화시킬 수 있다. 고정된 장소들 간에 간섭을 더 제한하기 위하여 지향성 스피커들을 사용할 수 있다.
불가청 신호들은 MP3파일들에 대해 대중적으로 사용되는 프라운호퍼(Fraunhofer) 코덱에 대해 최적화되는 방식으로 코드화될 수 있다: 예컨대 불가청 신호들은 프라운호퍼 호환 디코더들에 의해 충분히 코드화되는 주파수들을 선택함으로써 주파수영역으로 효율적인 변환을 위해 인코드될 수 있다.
일반적으로, 여기에서 기술한 실시예들 중 적어도 몇몇은 많은 상이한 소프트웨어, 펌웨어, 및/또는 하드웨어의 실시예들에서 구현될 수 있다는 것을 본 기술분야의 당업자라면 잘 알게 될 것이다. 소프트웨어 및 펌푸ㅔ어 코드는 프로세서 또는 다른 유사한 소정의 컴퓨팅장치에 의해 실행될 수 있다. 소프트웨어 코드 또는 실시예들을 구현하는데 사용될 수 있는 특별한 제어 하드웨어는 제한되지 않는다. 예컨대, 여기에서 기술한 실시예들은 소정의 적절한 컴퓨터 소프트웨어 언어유형을 사용하는, 예컨대 통상적이거나 또는 개체-지향(object-oriented) 기술들을 사용하여 컴퓨터 소프트웨어에서 구현될 수 있다. 이러한 소프트웨어는 자성 또는 광저장매체와 같은, 소정 유형의 적절한 컴퓨터-판독가능 매체에 저장될 수 있다. 실시예들의 동작과 가동은, 특정 소프트웨어 코드 또는 특별화된 하드웨어 요소들에 대한 특정 참조없이 기술되었다. 이러한 특정 참조들의 부재는 실현가능한데, 본 기술분야의 기술자들은 단지 적당한 노력으로, 지나친 실험없이 본 발명의 명세서를 기반으로 실시예들을 구현하기 위한 소프트웨어와 제어 하드웨어를 디자인할 수 있기 때문이다.
게다가, 본 발명의 실시예들과 관련된 프로세스들은, 컴퓨터 또는 컴퓨터 시스템 및/또는 프로세서들과 같은, 프로그램 가능한 장비로 실행될 수 있다. 프로그램 가능한 장비가 프로세스들을 실행할 수 있도록 하는 소프트웨어는 컴퓨터시스템 (비휘라성) 메모리, 광디스크, 자성테이프, 또는 자기디스크와 같은 소정의 저장장치에 저장될 수 있다. 게다가, 컴퓨터 시스템이 제조될 때 프로세스들 중 적어도 몇몇이 프로그램될 수 있거나 또는 다양한 유형의 컴퓨터-판독가능 매체에 저장될 수 있다.
여기에서 기술한 소정의 프로세스 측면(aspects)들은, 프로세스 단계들을 수행하기 위해 컴퓨터 시스템을 지시하는, 컴퓨터-판독가능 매체에 저장된 명령들을 사용하여 수행될 수 있다는 것을 알 수 있을 것이다. 컴퓨터-판독가능 매체는 예컨대, 디스켓, 컴팩트 디스크(CD), 디지털 다용도 디스크(DVD), 광디스크 드라이브, 또는 하드디스크 드라이브와 같은 메모리장치들을 포함할 수 있다. 컴퓨터-판독가능 매체는 또한, 물리적, 가상, 영구, 일시적, 반영구저기, 및/또는 반일시적인 메모리 저장장치를 포함할 수 있다.
"컴퓨터", "컴퓨터 시스템", "호스트", "서버", 또는 "프로세서"는 예컨대 제한없이, 프로세서, 마이크로컴퓨터, 미니컴퓨터, 서버, 메인프레임, 랩탑, 개인 데이터 보조장치(PDA), 무선 이메일 장치, 셀룰러전화, 호출기, 프로세서, 팩스기, 스캐너, 또는 망을 통해 데이터를 전송하거나 및/또는 수신하도록 구성되는 소정의 다른 프로그램가능한 장치일 수 있다. 여기에서 기술한 컴퓨터 시스템들과 컴퓨터-기반 장치들은, 정보를 획득하고, 처리하고, 또한 통신하는데 사용되는 소정의 소프트웨어 모듈들을 저장하기 위한 메모리를 포함할 수 있다. 이러한 메모리는 기술한 실시예들의 동작에 관해 내부 또는 외부에 있을 수 있다. 메모리는 또한 하드디스크, 광디스크, 플로피 디스크, ROM(판독전용 메모리), RAM(랜덤 액세스 메모리), PROM(프로그램 가능한 ROM), EEPROM(전기적으로 삭제가능한 PROM) 및/또는 다른 컴퓨터-판독가능 매체를 포함하여, 소프트웨어를 저장하기 위한 소정의 수단을 포함할 수 있다.
여기에서 기술한 다양한 실시예들에서, 소정의 기능 또는 기능들을 수행하기 위하여 단일 요소는 다중 요소들로 대체될 수 있고 또한 다중 요소들은 단일 요소로 대체될 수 있다. 이와 같은 대안이 작동되지 않는 경우를 제외하고, 이러한 대안은 실시예들의 의도한 범위 내에 있다. 여기에서 기술한 소정의 서버들은 예컨대, 협동적 기능들을 위해 위치하고 또한 구성되는 "서버팜(server farm)" 또는 네트워크화된 서버들의 다른 그룹(고밀도 서버(server blades))로 대체될 수 있다. 서버팜은 작업부하를 팜의 개별적인 요소들 간에 분산시키는 역할을 할 수 있고 또한 다중 서버들의 집단 및 협동력을 이용함으로써 컴퓨팅 프로세스들을 더 신속히 처리할 수 있다. 이와 같은 서버팜은 상이한 기계들로부터 프로세싱력에 대한 트래킹요구, 망요구 기반 임무들의 우선화 및 스케줄링 및/또는 요소 실패의 경우 백업 컨틴전시(contingency) 또는 운영도의 감축을 제공하는 것과 같은, 임무들을 달성하는 부하-균형(load-balancing) 소프트웨어를 채용할 수 있다.
컴퓨터 시스템들은 하나 이상의 데이터버스들을 통해 메모리(예컨대, RAM 또는 ROM)과 통신하는 하나 이상의 프로세서들을 포함할 수 있다. 데이터버스들은 프로세스들과 메모리 간에 전기적 신호들을 반송한다. 프로세서와 메모리는 전기적 전류를 전도하는 전기적 회로들을 포함할 수 있다. 프로세서 및/또는 메모리회로의 고체 트랜지스터와 같은 다양한 회로 요소들의 충전상태는, 회로들의 동작 동안에 변경될 수 있다.
다양한 실시예들이 기술되었지만, 이들 실시예들에 대한 다양한 수정안들과, 대안들과, 변형안들은 장점들의 적어도 몇몇의 달성으로 본 기술분야의 당업자에게 이루어질 수 있다. 따라서, 기술한 실시예들은 실시예의 범위를 이탈하는 일이 없이 이러한 모든 수정안, 대안들과 변형안들을 포함하게 된다.

Claims (21)

  1. 콘텐츠 전달 및 관리방법에 있어서, 방법은:
    콘텐츠 전달장치에서 인간-불가청 음향신호를 검출하는 단계와,
    콘텐츠 전달장치에서 콘텐츠 관리시스템으로 불가청 신호의 수신의 표시를 공급하는 단계와,
    콘텐츠 전달장치의 사용자에게 제공을 위해 콘텐츠 전달장치에 콘텐츠를 제공함으로써 불가청 신호의 수신의 표시에 감응하는 단계를 포함하는 것을 특징으로 하는 방법.
  2. 제1항에 있어서, 콘텐츠 전달장치는 휴대용 다기능 장치이고, 수신의 표시는 무선으로 콘텐츠 전달시스템에 전달되는 것을 특징으로 하는 방법.
  3. 제1항에 있어서, 콘텐츠 전달장치는 인간-불가청 음향신호를 검출하기 위하여 장치에서 수신한 음향신호들을 주기적으로 질의하는 것을 특징으로 하는 방법.
  4. 제1항에 있어서, 콘텐츠 전달장치는 온-보드 마이크로폰, 온-보드 스피커, 오디오입력 및 오디오출력 중 하나 이상을 사용하여 인간-불가청 음향신호를 검출하는 것을 특징으로 하는 방법.
  5. 제1항에 있어서, 인간-불가청 음향신호는 음성, 음악 및 배경음 중 하나 이상을 포함하는 인간-가청 오디오콘텐츠에 매립되는 것을 특징으로 하는 방법.
  6. 제1항에 있어서, 인간-불가청 음향신호는 콘텐츠 전달장치에 의해 생성되는 인간-가청 오디오콘텐츠에 매립되는 것을 특징으로 하는 방법.
  7. 제1항에 있어서, 인간-불가청 음향신호는 인간이 청취하는 범위 밖의 주파수에 있는 것을 특징으로 하는 방법.
  8. 제7항에 있어서, 인간-불가청 음향신호는 20Hz 미만 및 20kHz 이상 중 하나 이상에 있는 것을 특징으로 하는 방법.
  9. 제1항에 있어서, 인간-불가청 음향신호는 일련의 논리 0과 1비트들로 이루어진 변조된 코드의 형식인 것을 특징으로 하는 방법.
  10. 제9항에 있어서, 변조된 코드는 인간-불가청 신호에 반복적으로 통합되는 것을 특징으로 하는 방법.
  11. 제1항에 있어서, 변조된 코드는 콘텐츠 관리시스템으로 전송되어 불가청 신호의 수신을 표시하는 것을 특징으로 하는 방법.
  12. 제11항에 있어서, 변조된 코드 이외에, 콘텐츠 관리시스템으로 전송된 수신의 표시는, 시간데이터, 날짜데이터, 가속도데이터, 지리데이터, 인구데이터, 콘텐츠 전달장치 데이터, 및 콘덴츠 전달장치 소유자 데이터 중 하나 이상을 포함하는 것을 특징으로 하는 방법.
  13. 제1항에 있어서, 수신 이후 선택된 시간에 콘텐츠 전달장치의 사용자에게 제공을 위해 콘텐츠 전달장치에 콘텐츠 전달시스템으로부터 전달된 콘텐츠를 저장하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  14. 제1항에 있어서, 콘텐츠 전달장치에 제공되는 콘텐츠는 비디오, 오디오, 및 문자 중 하나 이상을 포함하는 것을 특징으로 하는 방법.
  15. 제1항에 있어서, 콘텐츠 전달장치에 제공되는 콘텐츠는, 콘서트 비디오 또는 정지영상, 예술가 사진 또는 비디오, 제작된 뮤직비디오, 예술가 인터뷰, 영화, 상업적인 것 중 하나 이상을 포함하는 하거나 또는 이들의 일부들 또는 조합을 포함하는 것을 특징으로 하는 방법.
  16. 제1항에 있어서, 콘텐츠 전달장치에 제공된는 콘텐츠는, 미리 기록된 음악, 신호음, 디지털 형식의 음악작품, 정지영상, 삽화, 로고, 월페이퍼, 노랫말, 인용구문, 쿠폰, 패스워드, 패스코드, 쿠폰코드, 메시지, 이메일주소, 문자메시지 주소, 인스턴트 메시지, 광고, 교육 콘텐츠 중 하나 이상의 포함하거나, 또는 이들의 일부 또는 조합을 포함하는 것을 특징으로 하는 방법.
  17. 제1항에 있어서, 컨텐츠는 트리거 표시와 함께 콘텐츠 전달장치로 제공되고, 그리고 트리거에 주어진 임계조건을 충족할 시에 콘텐츠에 액세스를 허용하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  18. 제17항에 있어서, 임계조건은, 불가청 신호가 수신된 횟수, 음악이 공연된 횟수, 소정 장소에 참석, 및 소정 장소에서 제2인간-불가청 음향신호의 수신 중 하나 이상을 포함하는 것을 특징으로 하는 방법.
  19. 제1항에 있어서, 콘텐츠는 콘텐츠 전달장치과 관련되거나 또는 콘텐츠 전달장치의 사용자와 관련된 전자 메일함으로 전달되는 것을 특징으로 하는 방법.
  20. 제1항에 있어서, 인간-불가청 신호는 제2휴대용 다기능 장치로부터 전송되고, 음향신호는 전송장치에 대한 피어-투-피어 네트워킹 정보를 엠베딩하고, 공용 IP주소, 사설 IP주소, 포트번호, 무선망 식별, 및 지역망 식별 중 하나 이상을 포함하는 것을 특징으로 하는 방법.
  21. 제20항에 있어서, 휴대용 다기능 장치들 간에:
    도어를 개방하기 위한 인간-불가청 음향신호 내의 키;
    지불 또는 쿠폰정보;
    엔터테인먼트 콘텐츠;
    콘택정보;
    데이터;
    데이터 포인터;
    통화 또는 비용교환;
    메쉬망들에 의해 발신되어 장치들에 의해 수집되거나 또는 장치들로 전송되는 콘텐츠들 중 하나 이상을 통신하는 단계를 더 포함하는 것을 특징으로 하는 방법.
KR20147033702A 2012-05-01 2013-05-01 콘텐츠 전달 및 관리를 위한 시스템 및 방법 KR20150020319A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020207017988A KR102317364B1 (ko) 2012-05-01 2013-05-01 콘텐츠 전달 및 관리를 위한 시스템 및 방법

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261640900P 2012-05-01 2012-05-01
US61/640,900 2012-05-01
US201361781107P 2013-03-14 2013-03-14
US61/781,107 2013-03-14
PCT/US2013/039079 WO2013166158A1 (en) 2012-05-01 2013-05-01 Systems and methods for content delivery and management

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020207017988A Division KR102317364B1 (ko) 2012-05-01 2013-05-01 콘텐츠 전달 및 관리를 위한 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR20150020319A true KR20150020319A (ko) 2015-02-25

Family

ID=53785367

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020207017988A KR102317364B1 (ko) 2012-05-01 2013-05-01 콘텐츠 전달 및 관리를 위한 시스템 및 방법
KR20147033702A KR20150020319A (ko) 2012-05-01 2013-05-01 콘텐츠 전달 및 관리를 위한 시스템 및 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020207017988A KR102317364B1 (ko) 2012-05-01 2013-05-01 콘텐츠 전달 및 관리를 위한 시스템 및 방법

Country Status (9)

Country Link
US (2) US11126394B2 (ko)
EP (2) EP2847984A1 (ko)
JP (2) JP6492004B2 (ko)
KR (2) KR102317364B1 (ko)
BR (1) BR112014026611A2 (ko)
CA (1) CA2871916A1 (ko)
IL (1) IL235236B (ko)
SG (1) SG11201407075YA (ko)
WO (2) WO2013166158A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101665256B1 (ko) * 2015-06-30 2016-10-12 한양대학교 에리카산학협력단 비가청 주파수와 패턴을 이용한 출석체크 방법 및 시스템
WO2020081877A1 (en) * 2018-10-18 2020-04-23 Ha Nguyen Ultrasonic messaging in mixed reality

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11452153B2 (en) 2012-05-01 2022-09-20 Lisnr, Inc. Pairing and gateway connection using sonic tones
WO2013166158A1 (en) 2012-05-01 2013-11-07 Lisnr, Llc Systems and methods for content delivery and management
US10569171B2 (en) * 2012-07-02 2020-02-25 Disney Enterprises, Inc. TV-to-game sync
US10339936B2 (en) 2012-11-27 2019-07-02 Roland Storti Method, device and system of encoding a digital interactive response action in an analog broadcasting message
US10366419B2 (en) 2012-11-27 2019-07-30 Roland Storti Enhanced digital media platform with user control of application data thereon
US10157618B2 (en) 2013-05-02 2018-12-18 Xappmedia, Inc. Device, system, method, and computer-readable medium for providing interactive advertising
KR102060661B1 (ko) * 2013-07-19 2020-02-11 삼성전자주식회사 통신 방법 및 이를 위한 디바이스
WO2015047216A1 (en) * 2013-09-24 2015-04-02 Intel Corporation Systems and methods for wireless display discovery
CN104794127B (zh) * 2014-01-20 2018-03-13 曲立东 基于音频的数据标签发布***及方法
US10810625B1 (en) 2014-01-24 2020-10-20 Inmar Analytics, Inc. System for providing a promotion at a point-of-sale terminal based upon an audible advertisement and related methods
WO2015139026A2 (en) 2014-03-14 2015-09-17 Go Tenna Inc. System and method for digital communication between computing devices
KR101567333B1 (ko) * 2014-04-25 2015-11-10 주식회사 크레스프리 IoT 디바이스의 통신 설정을 위한 이동통신 단말기와 통신설정모듈 및 이동통신 단말기를 이용한 IoT 디바이스의 통신 설정 방법
US20160037237A1 (en) * 2014-07-29 2016-02-04 John Wilkinson System and method for encoding audio based on psychoacoustics
KR102452183B1 (ko) * 2014-10-15 2022-10-07 엘아이에스엔알, 인크. 불가청 신호음
US10194262B2 (en) 2014-11-06 2019-01-29 At&T Intellectual Property I, L.P. Proximity-based item data communication
EP3107316A1 (en) * 2015-06-15 2016-12-21 Casio Computer Co., Ltd. Broadcasting pairing signal and responding to it
US9978366B2 (en) * 2015-10-09 2018-05-22 Xappmedia, Inc. Event-based speech interactive media player
US10169985B1 (en) 2015-11-24 2019-01-01 CUE Audio, LLC Method and system for coordinated control of multiple mobile communication devices
JP2017112567A (ja) * 2015-12-18 2017-06-22 株式会社デンソー 情報提供装置および情報提供システム
CN105721698B (zh) * 2016-02-19 2019-02-05 Oppo广东移动通信有限公司 音频播放方法、装置及移动终端
US11233582B2 (en) 2016-03-25 2022-01-25 Lisnr, Inc. Local tone generation
TWI602076B (zh) * 2016-05-13 2017-10-11 矽統科技股份有限公司 音訊處理編碼鎖定方法與收音裝置
US11374658B2 (en) * 2016-10-21 2022-06-28 Northeastern University Method and apparatus for wireless communications
US10444336B2 (en) 2017-07-06 2019-10-15 Bose Corporation Determining location/orientation of an audio device
US10039074B1 (en) 2017-07-06 2018-07-31 Bose Corporation Locating connected devices
US11189295B2 (en) 2017-09-28 2021-11-30 Lisnr, Inc. High bandwidth sonic tone generation
US10826623B2 (en) 2017-12-19 2020-11-03 Lisnr, Inc. Phase shift keyed signaling tone
JP6720132B2 (ja) * 2017-12-27 2020-07-08 任天堂株式会社 情報処理システム、情報処理方法、情報処理装置、および、情報処理プログラム
JP2021510050A (ja) 2018-01-08 2021-04-08 エルアイエスエヌアール・インコーポレーテッド 音波トーンを使用したペアリングおよびゲートウェイ接続
US11444940B2 (en) * 2018-02-24 2022-09-13 Certus Technology Systems, Inc. User authentication of smart speaker system
US11074914B2 (en) 2019-03-08 2021-07-27 Rovi Guides, Inc. Automated query detection in interactive content
US11522619B2 (en) 2019-03-08 2022-12-06 Rovi Guides, Inc. Frequency pairing for device synchronization
US11011169B2 (en) 2019-03-08 2021-05-18 ROVl GUIDES, INC. Inaudible frequency transmission in interactive content
US10956123B2 (en) 2019-05-08 2021-03-23 Rovi Guides, Inc. Device and query management system
US10498721B1 (en) * 2019-06-03 2019-12-03 Capital One Services, Llc Multi-device verification via non-audible sound
DE102019209621B3 (de) 2019-07-01 2020-08-06 Sonobeacon Gmbh Audiosignal-basiertes Paketzustellsystem
US10990947B2 (en) 2019-09-16 2021-04-27 The Toronto-Dominion Bank Point-of-sale device and method for generating a discounted authorization request
US11361774B2 (en) * 2020-01-17 2022-06-14 Lisnr Multi-signal detection and combination of audio-based data transmissions
US11418876B2 (en) 2020-01-17 2022-08-16 Lisnr Directional detection and acknowledgment of audio-based data transmissions
US11605110B2 (en) * 2020-02-14 2023-03-14 Lisnr. Inc Systems and methods for enabling audio transactions in physical locations such as drive-through locations
EP4104124A4 (en) * 2020-02-14 2023-08-30 Lisnr SYSTEMS AND METHODS FOR INITIATING TRANSACTIONS DURING SCHEDULED WINDOWS BASED ON DETECTED DEVICES
US20240031359A1 (en) * 2020-02-17 2024-01-25 Stratocore S.A.S. Password-less Instrument Usage Tracking System
US11710476B2 (en) * 2020-04-27 2023-07-25 Robert Bosch Gmbh System and method for automatic testing of conversational assistance
EP4189627A1 (en) * 2020-07-30 2023-06-07 Lisnr Audio-based exit detection and payment confirmation for computing devices
US11558914B2 (en) * 2021-05-07 2023-01-17 Cisco Technology, Inc. Device pairing in hot desking environments
US11360734B1 (en) * 2021-09-24 2022-06-14 Shanghai Weiling Electronics Co., Ltd. Secure digital communication devices and secure digital communication systems using the same
US11631416B1 (en) * 2021-12-09 2023-04-18 Kyndryl, Inc. Audio content validation via embedded inaudible sound signal

Family Cites Families (136)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2607987B1 (fr) 1986-12-05 1989-02-10 Thomson Csf Procede et dispositif de modulation et de demodulation a plusieurs etats, a niveau de protection ajustable
US5159703A (en) 1989-12-28 1992-10-27 Lowery Oliver M Silent subliminal presentation system
JP3325300B2 (ja) * 1992-02-28 2002-09-17 株式会社東芝 超音波治療装置
JPH0690296A (ja) * 1992-09-08 1994-03-29 Fujitsu General Ltd 電気錠システム
US5335250A (en) 1992-10-22 1994-08-02 Ericsson Ge Mobile Communications Inc. Method and apparatus for bidirectional demodulation of digitally modulated signals
US5565921A (en) 1993-03-16 1996-10-15 Olympus Optical Co., Ltd. Motion-adaptive image signal processing system
US5450490A (en) 1994-03-31 1995-09-12 The Arbitron Company Apparatus and methods for including codes in audio signals and decoding
AUPN220795A0 (en) * 1995-04-06 1995-05-04 Marvel Corporation Pty Ltd Audio/visual marketing device
GB9509831D0 (en) 1995-05-15 1995-07-05 Gerzon Michael A Lossless coding method for waveform data
US5889870A (en) 1996-07-17 1999-03-30 American Technology Corporation Acoustic heterodyne device and method
US5995512A (en) 1997-01-17 1999-11-30 Delco Electronics Corporation High speed multimedia data network
US7385359B2 (en) 1997-08-26 2008-06-10 Philips Solid-State Lighting Solutions, Inc. Information systems
US6330672B1 (en) 1997-12-03 2001-12-11 At&T Corp. Method and apparatus for watermarking digital bitstreams
US6511426B1 (en) 1998-06-02 2003-01-28 Acuson Corporation Medical diagnostic ultrasound system and method for versatile processing
IL127569A0 (en) 1998-09-16 1999-10-28 Comsense Technologies Ltd Interactive toys
AU5997299A (en) 1998-10-02 2000-04-26 Comsense Technologies Ltd. Card for interaction with a computer
US6301368B1 (en) 1999-01-29 2001-10-09 International Business Machines Corporation System and method for data hiding in compressed fingerprint images
KR19990046546A (ko) * 1999-03-29 1999-07-05 최종욱 디지털오디오에대한디지털워터마킹방법
US8019609B2 (en) 1999-10-04 2011-09-13 Dialware Inc. Sonic/ultrasonic authentication method
JP2001320337A (ja) 2000-05-10 2001-11-16 Nippon Telegr & Teleph Corp <Ntt> 音響信号伝達方法および音響信号伝達装置および記憶媒体
US6947893B1 (en) 1999-11-19 2005-09-20 Nippon Telegraph & Telephone Corporation Acoustic signal transmission with insertion signal for machine control
US6633674B1 (en) 1999-11-24 2003-10-14 General Electric Company Picture archiving and communication system employing improved data compression
DE19957536C2 (de) 1999-11-30 2003-04-03 Siemens Ag Diebstahlschutzsystem für ein Kraftfahrzeug und Verfahren zum Betreiben eines Diebstahlschutzsystems
US6968564B1 (en) 2000-04-06 2005-11-22 Nielsen Media Research, Inc. Multi-band spectral audio encoding
DK1928109T3 (da) * 2000-11-30 2012-08-27 Intrasonics Sarl Mobiltelefon til indsamling af publikumsundersøgelsesdata
US20030065727A1 (en) * 2001-09-28 2003-04-03 Capital One Financial Corporation Systems and methods for providing secured electronic messaging
US6570500B1 (en) * 2001-11-09 2003-05-27 Nokia Corporation Infra-sound surveillance system
JP2003174404A (ja) * 2001-12-07 2003-06-20 Matsushita Electric Ind Co Ltd 携帯無線端末装置及び携帯無線システム
JP3990641B2 (ja) 2002-03-27 2007-10-17 松下電器産業株式会社 道路情報提供システム及び装置と道路情報生成方法
JP3882673B2 (ja) 2002-05-01 2007-02-21 双葉電子工業株式会社 4値fsk変調方式
US7401224B2 (en) 2002-05-15 2008-07-15 Qualcomm Incorporated System and method for managing sonic token verifiers
US7324755B2 (en) 2002-07-02 2008-01-29 Hrl Laboratories, Llc Optical code-division multiple access transmission system and method
US7443807B2 (en) * 2003-06-16 2008-10-28 Microsoft Corporation System and process for discovery of network-connected devices
US6859611B2 (en) * 2003-07-11 2005-02-22 General Instrument Corporation Computer implemented method of selectively recording and playing broadcast program content
US20040111360A1 (en) * 2003-07-14 2004-06-10 David Albanese System and method for personal and business information exchange
RU2326495C2 (ru) 2004-01-06 2008-06-10 Владимир Анатольевич Ефремов Способ передачи сообщений любой физической природы, например способ передачи звуковых сообщений, и система для его осуществления
US20090019061A1 (en) 2004-02-20 2009-01-15 Insignio Technologies, Inc. Providing information to a user
JP4963063B2 (ja) 2004-06-09 2012-06-27 インターナショナル・ビジネス・マシーンズ・コーポレーション 距離測定システム、距離測定方法、情報処理装置、及びプログラムと記録媒体
SE0401647D0 (sv) 2004-06-28 2004-06-28 Anoto Ab Coding and decoding of data
US7886345B2 (en) 2004-07-02 2011-02-08 Emc Corporation Password-protection module
US20080228498A1 (en) 2004-07-15 2008-09-18 Gasque Samuel N Enhanced coordinated signal generation apparatus
GB0421747D0 (en) 2004-09-30 2004-11-03 British Telecomm Distributed backscattering
US20060123239A1 (en) 2004-12-07 2006-06-08 Emin Martinian Biometric based user authentication with syndrome codes
US7290702B2 (en) 2004-12-28 2007-11-06 Elbex Video Ltd. Method and apparatus for recording and utilizing unknown signals of remote control devices
US8566857B2 (en) * 2005-09-20 2013-10-22 Forefront Assets Limited Liability Company Method, system and program product for broadcast advertising and other broadcast content performance verification utilizing digital artifacts
US7904946B1 (en) 2005-12-09 2011-03-08 Citicorp Development Center, Inc. Methods and systems for secure user authentication
JP2007164659A (ja) 2005-12-16 2007-06-28 Absurd Spear:Kk 音楽情報を利用した情報配信システム及び情報配信方法
US20070153091A1 (en) 2005-12-29 2007-07-05 John Watlington Methods and apparatus for providing privacy in a communication system
US8615284B2 (en) 2006-09-06 2013-12-24 Innurvation, Inc. Method for acoustic information exchange involving an ingestible low power capsule
US20080134264A1 (en) * 2006-11-30 2008-06-05 Motorola, Inc. Method and apparatus for interactivity with broadcast media
US7911326B2 (en) 2007-01-03 2011-03-22 Marvell World Trade Ltd. Time updating and load management systems
US7671756B2 (en) 2007-01-07 2010-03-02 Apple Inc. Portable electronic device with alert silencing
JP5003164B2 (ja) * 2007-01-15 2012-08-15 大日本印刷株式会社 音響信号からの情報の抽出装置
US9143337B2 (en) 2007-03-12 2015-09-22 Qualcomm Incorporated Method and system for providing enhanced broadcast advertising
JP2008293393A (ja) 2007-05-28 2008-12-04 Ul Systems Inc 一斉視聴終了コンテンツシステム、および一斉視聴開始コンテンツシステム
US20080303660A1 (en) * 2007-06-11 2008-12-11 Telasio, Llc Emergency event detection and alert system and method
US8140331B2 (en) 2007-07-06 2012-03-20 Xia Lou Feature extraction for identification and classification of audio signals
US8150372B2 (en) 2007-09-28 2012-04-03 Symbol Technologies, Inc. Method and system for distributing data within a group of mobile units
US8989779B1 (en) * 2007-10-26 2015-03-24 Cellco Partnership Venue-based device control and determination
US20090210789A1 (en) * 2008-02-14 2009-08-20 Microsoft Corporation Techniques to generate a visual composition for a multimedia conference event
US8300964B2 (en) 2008-08-07 2012-10-30 Apteryx Inc. System and method for preparing spatially related medical digital image data sets for image compression and storage prior to image reconstruction
US8385971B2 (en) 2008-08-19 2013-02-26 Digimarc Corporation Methods and systems for content processing
US8750473B2 (en) * 2008-09-03 2014-06-10 Smule, Inc. System and method for communication between mobile devices using digital/acoustic techniques
US8676904B2 (en) * 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US7843382B2 (en) 2008-12-15 2010-11-30 Adly T. Fam Mismatched filter
US8625552B2 (en) 2008-12-31 2014-01-07 Microsoft Corporation Wireless provisioning a device for a network using a soft access point
US8666528B2 (en) 2009-05-01 2014-03-04 The Nielsen Company (Us), Llc Methods, apparatus and articles of manufacture to provide secondary content in association with primary broadcast media content
US8157738B2 (en) 2009-06-02 2012-04-17 Samplify Systems, Inc. Ultrasound signal compression
US8317706B2 (en) 2009-06-29 2012-11-27 White Eagle Sonic Technologies, Inc. Post-beamforming compression in ultrasound systems
US8489112B2 (en) 2009-07-29 2013-07-16 Shopkick, Inc. Method and system for location-triggered rewards
US8301803B2 (en) 2009-10-23 2012-10-30 Samplify Systems, Inc. Block floating point compression of signal data
US9744462B2 (en) * 2009-11-20 2017-08-29 Disney Enterprises, Inc. Location based reward distribution system
KR101614552B1 (ko) 2009-12-10 2016-04-29 삼성전자주식회사 다중 라디오 인터페이스를 가진 디바이스들간 객체 전송 방법
KR101119276B1 (ko) 2010-01-05 2012-03-20 삼성전기주식회사 이벤트 신호 제어를 통한 저전력 근거리 통신 장치 및 방법
JP5508033B2 (ja) * 2010-01-08 2014-05-28 株式会社野村総合研究所 コンテンツ提供装置
NO332231B1 (no) * 2010-01-18 2012-08-06 Cisco Systems Int Sarl Metode for a parre datamaskiner og videokonferanseinnretninger
US8667280B2 (en) 2010-02-24 2014-03-04 Ca, Inc. Method and apparatus for applying a partial password in a multi-factor authentication scheme
US9026102B2 (en) * 2010-03-16 2015-05-05 Bby Solutions, Inc. Movie mode and content awarding system and method
US8355910B2 (en) * 2010-03-30 2013-01-15 The Nielsen Company (Us), Llc Methods and apparatus for audio watermarking a substantially silent media content presentation
US20110295691A1 (en) * 2010-05-27 2011-12-01 Krieter Marcus Radio receiver based greeting card system
US20110301439A1 (en) * 2010-06-08 2011-12-08 AliveUSA LLC Wireless, ultrasonic personal health monitoring system
US8514662B2 (en) * 2010-08-27 2013-08-20 Verifone Systems, Inc. Sonic receiver and method for receiving data that uses modulation frequncies that reduce the probability of conflict with ambient noise in the environment
US8711656B1 (en) 2010-08-27 2014-04-29 Verifone Systems, Inc. Sonic fast-sync system and method for bluetooth
JP5729161B2 (ja) * 2010-09-27 2015-06-03 ヤマハ株式会社 通信端末、無線機、及び無線通信システム
GB2546026B (en) 2010-10-01 2017-08-23 Asio Ltd Data communication system
US20120089461A1 (en) 2010-10-07 2012-04-12 Greenspan Aaron J Method for improved advertising on a mobile device
US8837257B2 (en) 2010-11-29 2014-09-16 Verifone Systems, Incorporated Acoustic modulation protocol
US9111326B1 (en) * 2010-12-21 2015-08-18 Rawles Llc Designation of zones of interest within an augmented reality environment
US20120179525A1 (en) 2011-01-07 2012-07-12 Naratte Inc. Electronic coupon distribution and redemption via acoustic communication
CN103329556A (zh) 2011-01-07 2013-09-25 雅马哈株式会社 信息提供***、便携终端装置、服务器以及程序
JP2012160004A (ja) 2011-01-31 2012-08-23 Sony Computer Entertainment Inc 識別子付きコンテンツの提供方法およびid管理装置
US20120209949A1 (en) * 2011-02-14 2012-08-16 Alexandros Deliyannis Methods and apparatus to monitor media content
US20120214416A1 (en) 2011-02-23 2012-08-23 Jonathan Douglas Kent Methods and apparatuses for communication between devices
US9858339B2 (en) 2011-04-05 2018-01-02 Yamaha Corporation Information providing system, identification information resolution server and mobile terminal device
WO2012145393A1 (en) * 2011-04-18 2012-10-26 Wms Gaming, Inc. Mobile device applications for casinos
WO2012148040A1 (ko) * 2011-04-28 2012-11-01 한국지질자원연구원 스피넬형 구조를 갖는 다공성 망간산화물계 리튬 흡착제 및 그 제조방법
US8661151B2 (en) * 2011-05-09 2014-02-25 Google Inc. Dynamic playlist for mobile computing device
US10044448B2 (en) * 2011-05-18 2018-08-07 Sparcq, Inc. Sonic signaling communication for user devices
US8880977B2 (en) 2011-07-22 2014-11-04 Sandisk Technologies Inc. Systems and methods of storing data
CN103828232A (zh) 2011-09-22 2014-05-28 伊尔索芙特有限公司 动态范围控制
US8401569B1 (en) * 2011-09-23 2013-03-19 Sonic Notify, Inc. System effective to demodulate a modulated code and provide content to a user
US8532644B2 (en) * 2011-09-23 2013-09-10 Alex Bell System effective to modulate a code and provide content to a user
JP2013081003A (ja) 2011-09-30 2013-05-02 Toshiba Corp データ符号化装置及び方法、並びに、データ復号装置及び方法
US9024998B2 (en) * 2011-10-27 2015-05-05 Pollycom, Inc. Pairing devices in conference using ultrasonic beacon
JP5364141B2 (ja) 2011-10-28 2013-12-11 楽天株式会社 携帯端末、店舗端末、送信方法、受信方法、決済システム、決済方法、プログラムおよびコンピュータ読み取り可能な記憶媒体
KR101136279B1 (ko) 2011-11-01 2012-04-20 주식회사 엘지유플러스 미디어 체크인 서비스 제공을 위한 시스템, 서버, 단말, 방법, 및 기록 매체
US8983089B1 (en) * 2011-11-28 2015-03-17 Rawles Llc Sound source localization using multiple microphone arrays
CN104081782A (zh) * 2012-01-06 2014-10-01 汤姆逊许可公司 用于同步第二屏幕上的内容的方法和***
US9443248B2 (en) * 2012-01-12 2016-09-13 Microsoft Technology Licensing, Llc Wireless communication-enabled promotions and commercial transactions
KR101641979B1 (ko) 2012-03-02 2016-07-22 야마하 가부시키가이샤 컨텐츠 제공 시스템, 컨텐츠 제공 방법 및 컨텐츠 편집 장치
US9104473B2 (en) 2012-03-30 2015-08-11 Altera Corporation Conversion and compression of floating-point and integer data
WO2013166158A1 (en) 2012-05-01 2013-11-07 Lisnr, Llc Systems and methods for content delivery and management
US11452153B2 (en) 2012-05-01 2022-09-20 Lisnr, Inc. Pairing and gateway connection using sonic tones
WO2014028899A1 (en) 2012-08-16 2014-02-20 Alivecor, Inc. Ultrasonic transmission of signals
JP2014112359A (ja) 2012-11-01 2014-06-19 Yamaha Corp クーポン管理システム、端末装置及びプログラム
US9191707B2 (en) 2012-11-08 2015-11-17 Bank Of America Corporation Automatic display of user-specific financial information based on audio content recognition
US8976959B2 (en) * 2012-11-21 2015-03-10 Clinkle Corporation Echo delay encoding
CN103023583B (zh) 2012-11-28 2015-04-08 厦门大学 一种水声通信中可抑制并测量多普勒的帧同步装置
US9318116B2 (en) 2012-12-14 2016-04-19 Disney Enterprises, Inc. Acoustic data transmission based on groups of audio receivers
US20150243163A1 (en) 2012-12-14 2015-08-27 Biscotti Inc. Audio Based Remote Control Functionality
US9529071B2 (en) 2012-12-28 2016-12-27 Rakuten, Inc. Ultrasonic-wave communication system
US10243675B2 (en) 2013-06-18 2019-03-26 Powervoice Co., Ltd. Mobile device and method for outputting sound wave for control of external device, and external device
WO2015047216A1 (en) 2013-09-24 2015-04-02 Intel Corporation Systems and methods for wireless display discovery
US9912415B2 (en) 2013-11-12 2018-03-06 Qualcomm Incorporated Fast service discovery and pairing using ultrasonic communication
TWI671059B (zh) 2014-04-18 2019-09-11 美商蝴蝶網路公司 超音波成像壓縮方法和設備
US9766702B2 (en) 2014-06-19 2017-09-19 Apple Inc. User detection by a computing device
KR102452183B1 (ko) 2014-10-15 2022-10-07 엘아이에스엔알, 인크. 불가청 신호음
US10396948B2 (en) 2015-01-07 2019-08-27 Northeastern University Ultrasonic multiplexing network for implantable medical devices
WO2016123047A1 (en) 2015-01-26 2016-08-04 Northeastern University Ultrasonic network for wearable devices
US9819670B2 (en) 2015-06-18 2017-11-14 Airwatch Llc Distributing security codes through a restricted communications channel
US11233582B2 (en) 2016-03-25 2022-01-25 Lisnr, Inc. Local tone generation
DE102016220883A1 (de) 2016-10-24 2018-04-26 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Optimierte Kombination aus Präambel und Datenfeldern für Sensornetzwerke mit geringem Stromverbrauch auf Basis des Telegram Splitting Verfahrens
US20180167147A1 (en) 2016-12-14 2018-06-14 Intel Corporation Device and method for ultrasonic communication
US11189295B2 (en) 2017-09-28 2021-11-30 Lisnr, Inc. High bandwidth sonic tone generation
US10826623B2 (en) 2017-12-19 2020-11-03 Lisnr, Inc. Phase shift keyed signaling tone
US11002825B2 (en) 2017-12-29 2021-05-11 Sonitor Technologies As Position determination system having a deconvolution decoder using a joint snr-time of arrival approach

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101665256B1 (ko) * 2015-06-30 2016-10-12 한양대학교 에리카산학협력단 비가청 주파수와 패턴을 이용한 출석체크 방법 및 시스템
WO2020081877A1 (en) * 2018-10-18 2020-04-23 Ha Nguyen Ultrasonic messaging in mixed reality

Also Published As

Publication number Publication date
JP2019033530A (ja) 2019-02-28
WO2013166158A1 (en) 2013-11-07
BR112014026611A2 (pt) 2018-05-15
EP3358811A1 (en) 2018-08-08
JP6492004B2 (ja) 2019-03-27
US11126394B2 (en) 2021-09-21
EP2847984A1 (en) 2015-03-18
WO2020018984A1 (en) 2020-01-23
KR102317364B1 (ko) 2021-10-25
JP2015520979A (ja) 2015-07-23
CA2871916A1 (en) 2013-11-07
IL235236B (en) 2018-08-30
JP6779956B2 (ja) 2020-11-04
US20180329676A1 (en) 2018-11-15
SG11201407075YA (en) 2014-11-27
US20150113094A1 (en) 2015-04-23
KR20200077609A (ko) 2020-06-30
US11074033B2 (en) 2021-07-27

Similar Documents

Publication Publication Date Title
JP6779956B2 (ja) コンテンツ配信および管理のためのシステムおよび方法
US11238503B2 (en) Beacon triggered processes
US10021457B2 (en) System and method for engaging a person in the presence of ambient audio
US11070676B2 (en) Embedded audio passcode in ringtone to establish secure connection for arbitrary phone relay
EP2605485B1 (en) Communication system incorporating ambient sound pattern detection and method of operation thereof
US20180137097A1 (en) Electronic device and control method therefor
US20090098857A1 (en) Securely Locating a Device
CN105307137A (zh) 短信读取方法及装置
US11705120B2 (en) Electronic device for providing graphic data based on voice and operating method thereof
US9766596B2 (en) Wake up to a cast alarm or an alarm plus content prompt
CN105260673A (zh) 短信读取方法及装置
CN104615655A (zh) 信息推荐方法和装置
CN104731868A (zh) 拦截广告的方法及装置
US20160147502A1 (en) Broadcast control and accrued history of media
CN104850849A (zh) 发送文字的方法、装置及终端
CN104468760A (zh) 提醒消息推送方法及装置
JP2019526094A (ja) 遠隔キーボードサービスの提供
CN110278273B (zh) 多媒体文件上传方法、装置、终端、服务器和存储介质
CN105303120A (zh) 短信读取方法及装置
EP2563047B1 (en) Method and apparatus for accessing location based service
US10162898B2 (en) Method and apparatus for searching
EP2876641A1 (en) Slide show-providing system and method
CN105373585A (zh) 歌曲收藏方法和装置
KR20150113655A (ko) 음향 신호 기반 정보 공유 방법 및 그 장치
CN104104728B (zh) 传输数据的方法及装置

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application
J201 Request for trial against refusal decision
A107 Divisional application of patent
J301 Trial decision

Free format text: TRIAL NUMBER: 2020101001595; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20200619

Effective date: 20210401