KR20150055262A - 모바일기기를 이용한 소리의 시각화 표시방법 - Google Patents

모바일기기를 이용한 소리의 시각화 표시방법 Download PDF

Info

Publication number
KR20150055262A
KR20150055262A KR1020130137366A KR20130137366A KR20150055262A KR 20150055262 A KR20150055262 A KR 20150055262A KR 1020130137366 A KR1020130137366 A KR 1020130137366A KR 20130137366 A KR20130137366 A KR 20130137366A KR 20150055262 A KR20150055262 A KR 20150055262A
Authority
KR
South Korea
Prior art keywords
sound
mobile device
image
smart
wearable
Prior art date
Application number
KR1020130137366A
Other languages
English (en)
Inventor
서원영
Original Assignee
서원영
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 서원영 filed Critical 서원영
Priority to KR1020130137366A priority Critical patent/KR20150055262A/ko
Publication of KR20150055262A publication Critical patent/KR20150055262A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 소리의 시각화 표시방법에 관한것으로, 구체적으로는 일상적인 소리를 모바일기기와 연계된 웨어러블 디스플레이어를 통해 시각화하여 보여 줌으로써 소리를 들을 수 없는 상황이나 소리를 구별하고 싶을 때 또는 청각장애인에게 일상적 소리를 시각적으로 표시하여 인식하도록 한 모바일 기기를 통한 소리의 시각화 표시방법에 관한 것이다.
이를 위하여 스마트OS 및 무선 전송기능을 갖는 모바일 기기와, 상기 모바일 기기와 연동되는 웨어러블 디스플레이어와, 상기 모바일기기에 설치되어 외부의 소리를 상기 웨어러블 디스플레어이로 이 소리에 상응하는 소리 이미지로 출력시키는 어플리케이션을 포함하는 것을 특징으로 한다.
상술한 구성을 갖는 본 발명은 소리를 들을 수 없는 상황에서 안전사고의 예방과 대중교통 이용시 교통정보를 제공하고, 소리를 이용한 학습에 활용은 물론 청각장애인에게는 보청기를 대처하는 효과를 기대할 수 있다.

Description

모바일기기를 이용한 소리의 시각화 표시방법{SOUND VISUALIZATION DISPLAY METHOD USING MOBILE DEVICE}
본 발명은 소리를 이미지화하는 기술에 관한 것으로, 구체적으로는 실생활에서 들리는 소리를 모바일기기와 연계된 웨어러블 디스플레이어를 통해 시각화하여 보여 좀으로써, 소리를 들을 수 없는 상황에서도 청각적 도움 없이 소리의 종류 및 크기를 동시에 보여주는 모바일기기를 이용한 소리의 시각화 표시방법에 관한 것이다.
우리는 일상생활에서 연령층을 구분하지 않고 이어폰이나 헤드폰을 착용하고 음악을 즐기는 사람들을 주위에서 흔히 볼 수 있다.
그 예로 대중교통을 이용할 때나 운동을 즐길 때나 심지어 공부할 때를 들 수 있다.
이러한 생활의 습관은 여러가지 문제점 들을 유발하게 된다.
보행 중이나 런닝 또는 자전거를 타고 운동 중에 헤드폰이나 이어폰의 사용은 외부의 소리를 차단하는 효과를 가져오게 된다.
따라서, 헤드폰이나 이어폰의 착용자는 뒤나 옆에서 갑자기 끼어드는 차량의 경적소리를 듣지 못해 종종 교통사고의 위험에 노출되어 왔다.
또한 버스나 지하철 같은 대중교통을 이용할 때는 헤드폰이나 이어폰을 착용자가 아니더라도 혼잡한 실내에서 내려야할 목적지 정류장의 안내 방송을 놓쳐 지나지는 경험은 누구나 한 번쯤은 겪어 보았을 것이다.
그리고, 이러한 일상이 계속 지속되는 사람들이 있다. 바로 청각장애인들이다.
이들은 보청기를 사용하지 않는 장애인과 보청기를 사용하여도 소리를 들을 수 없는 장애인으로 구분된다.
보청기를 사용하지 않는 이유로는 일반인이 장애인을 보는 불편한 시각과 착용의 불편함 그리고 비싼 장비 값도 한몫을 차지한다.
이들이 이로인해 일상생활에서 겪어왔던 불편들을 요약하면 다음과 같다.
첫째, 집에 방문객이 초인종을 누룰때 청각장애인은 이를 인지하지 못하고,
둘째, 아이의 울음소리를 들을 수 없어 돌보는데 애로 사항이 많이 발생하며,
셋째, 화재와 같은 위급 상황시 경보기의 소리를 듣지 못해 대피가 늦어져 안전사고의 위험에 노출되는 경우가 발생하고,
넷째, 대화가 가능해도 상대방의 입모양을 주시할 때만 인지할 수 있으며, 자막이 지원되지 않는 방송은 시청할 수 없는 실정이었다.
청각장애인들은 상술한 것 이외에도 일상에서 수 많은 불편을 감수하며 생활해 왔다.
상술한 것과 같이 본 발명은 소리를 들을 수 없는 상황의 일반인과, 청각장애인들이 외부의 소리를 인식할 수 있는 정보로 가공하여 시각화하여 보여주는 모바일기기를 이용한 소리의 시각화 표시방법을 제공하는데 목적이 있다.
또한, 본 발명은 실시간 소리의 크기도 동시에 인식될 수 있도록 한 모바일기기를 이용한 시각화 표시방법을 제공한다.
상기 목적을 달성하기 위한 모바일 기기를 이용한 소리의 시각화 표시방법은 다음과 같은 특징이 있다.
스마트OS 및 무선 전송기능을 갖는 모바일 기기와, 상기 모바일기기와 연동되는 웨어러블 디스플레이어와, 상기 모바일기기에 설치되어 외부의 소리를 상기 웨어러블 디스플레이어로 이 소리에 상응하는 이미지를 출력시키는 어플리케이션을 포함하여, 소리를 이미지로 인식할 수 있도록 한 특징이 있다.
이때, 상기 모바일기기로는 스마트폰, 태블릿PC, 스마트워치 중 어느 하나을 사용하는 것을 특징으로 한다.
또한, 상기 모바일기기로 스마트OS로 동작되는 소형PC 기반에 소리 입력장치와 배터리 및 고정장치를 추가 구성한 웨어러블 형태의 스마트기기를 사용하는 것을 특징으로 한다.
또한, 상기 웨어러블 디스플레이어로 콘텍트 디스플레이어와 안경형 디스플레이어 중 어는 하나를 사용한 것을 특징으로 한다.
또한, 안경형 디스플레이어의 몸체 일측에 진동체를 부가적으로 설치하여, 소리 이미지 출력신호에 진동이 동시에 또는 이미지만 출력되는 선택적인 제어가 되도록 하는 것을 특징으로 한다.
또한, 상기 소리 이미지 옆에 실시간 소리의 저,중,고음 높낮이를 색깔로 구분되는 적층 레벨바를 부가적으로 표시하여 소리의 크기가 시각적으로 인지되도록 한 것을 득징으로 한다.
또한 상기 이미지는 해당하는 소리를 직관적으로 확인 가능할 정도로 단순화된 도안으로 소정의 크기의 라운딩된 사각안에 형성한 것을 특징으로 한다.
또한 상기 이미지는 소리의 대상을 사진 작업하고 이를 썸네일화하여 소정의 크기로 코너가 라운딩된 사각안에 배치한 것을 특징으로 한다.
상기 썸네일 이미지 내에 부가적으로 대상물의 이름을 적어 넣은 것을 특징으로 한다.
또한, 상기 이미지는 소리의 대상이 대중교통의 정차역 안내방송일 경우 소정 크기로 라운딩된 사각 안에 대중교통을 구분하는 색체, 번호, 정차역 구분, 정차역, 환승역 및 내릴문의 위치 정보가 1컷의 도안으로 형성된 것을 특징으로 한다.
또한, 상기 소리의 대상이 2이나 3일때 디스플레이되는 각각의 이미지가 가로 또는 세로의 방향으로 정렬되도록 하는 것을 특징으로 한다.
또한, 상기 이미지는 상기 소리의 대상이 음성일 경우 사각의 테두리 안에 문자로 표기되되 문자의 양에 따라 크기가 조절되도록 하고 일측 상단에 음성이라는 표기한 것을 특징으로 한다.
다른 예로, 스마트OS를 구비하고 소리의 입력장치와 안경형 디스플레이어가 일체된 안경형 스마트기기와, 상기 안경형 스마트기기에 설치되어 외부 소리를 이 소리에 상응하는 이미지로 디스플레이 시키는 어플리케이션을 포함하여, 소리를 이미지로 인식할 수 있도록 한 것을 특징으로 한다.
본 발명이 제공하는 모바일기기를 이용한 소리의 시각화 표시방법은 다음과 같은 효과가 있다.
본 발명은 일반인에게 헤드폰이나 이어폰을 착용하고 운동할 때 안전사고를 예방해주며, 대중교통 이용시 정차역의 다양한 정보를 제공하여 하차나 환승의 불편을 덜어 주게 된다.
또한, 본 발명은 학생들의 자연학습이나 어학학습에 활용하거나, 지능이 높은 동물 소리의 번역 등 다양한 분야에 활용할 수 있는 이점이 있다.
또한, 본 발명은 청각장애인에게 세련된IT기기의 활용으로 주위 시선의 거부감을 덜어 주고 고가의 보청기를 대신하여 안전사고 예방은 물론 실생활과 사회활동에 도움을 줄 수 있을 것으로 기대된다.
또한, 본 발명은 이외에도 소리정보의 데이터베이스화로 새로운 컴퓨팅 기술로 주목 받고 있는 만물인터넷(Internet of Everything)에 활용할 수 있다.
도면 1은 본 발명의 전체적인 구성을 나타낸 개략도
도면 2a, 2b, 2c, 2d는 각각 본 발명의 실시예에 따른 웨어러블 디스플레이어
도면 3a, 3b, 3c, 3d는 각각 본 발명의 실시예에 따른 모바일 기기
도면 4는 본 발명의 실시예에 따른 모바일기기에 설치되는 어플리케이션의 구성도
도면 5는 본 발명의 실시예에 따른 데이터베이스 구조도
도면 6의 6a, 6b는 각각 본 발명의 실시예에 따른 소리 이미지
도면 7의 7a, 7b는 각각 본 발명의 실시예에 따른 레벨바 및 레벨바 위치도
도면 8a, 도8b는 각각 본 발명의 활용밥법을 나타낸 예시도
도면 9의 9a, 9b는 각각 본 발명의 실시예에 따른 대중교통에 활용한 소리 이미지
도면 10의 10a, 10b, 10c는 각각 본 발명의 실시예에 따른 학습에 활용한 소리 이미지
도면 11a, 도면 11b는 각각 본 발명의 실시예에 따른 청각장애인을 위한 소리 이미지의 다중출력과 음성인식 이미지
도면 12는 본 발명이 또 다른 실시예에 따른 진동체가 부가된 안경형 디스플레이어
이하, 첨부된 도면을 참조하여 본 발명의 기술적 구성 및 내용을 상세히 설명하면 다음과 같다.
도면 1은 본 발명의 개략적인 구성을 나타낸 것으로, 웨어러블(Wearable) 디스플레이어와, 스마트OS로 동작되는 모바일기기(200)와, 이 모바일기기에 설치되어 외부의 소리를 감지하고 웨어러블 디스플레이어로 소리에 해당하는 이미지를 무선 출력하는 어플리케이션의 구조를 갖는다.
본 발명의 웨어러블 디스플레이어로는 도 2의 1a에 나나탠 콘택트 렌즈형 디스플레이어와, 도 2의 2b, 2c, 2d 와 같은 안경형 디스플레이어가 사용된다.
전자의 콘텍트 렌즈형 디스플레이어는 안테나, 베터리, 디스플레이 및 고직접회로 등을 박막으로 구현하기 위한 기술적 과제와 의학적 안전성 문제로 아직 실용화 하기 어려운 실정이나 이 문제점만 해결된다면 본 발명에 가정 적합한 웨어러블 디스플레이어가 될 것이다.
후자의 상기 안경형 디스플레이어 중 2b는 구글에서 개발한 것으로 자체에 PC기능과 센서 및 카메라까지 가지고 있어 스스로의 제어가 가능하다.
그 외에 2c, 2d와 이와 비슷한 다른 안경형 디스플레이어는 별도의 모바일 기기와 연계되어 디스플레이어 기능으로 작동한다.
본 발명의 실시예에 따른 모바일기기로는 도 3의 3a, 3b, 3c에 나타낸 스마트폰과 태블릿PC 및 스마트워치 중 어느 것을 사용하여도 상관없다.
모바일기기의 또 다른 실시예로, 스마트OS로 동작되는 소형PC(도 3c) 기반에 어플리케이션을 설치하고 소리 입력장치와 배터리 및 고정장치를 추가로 구성하여 웨어러블 형태의 스마트기기를 제작 사용할 수 있다.
본 발명의 모바일 기기에 사용되는 운영체제인 OS로는 애플의 iOS, 구글의 안드로이드(Android)와 그 밖에 윈도우즈폰(WindowsPhone), 우분투 포 폰(Ubuntu For Phone), 타이젠(TIZEN) 등 어떤 것을 사용해도 상기 웨어러블 디스플레이어와 호환성만 갖는다면 기술적 구현에 아무런 영향을 주지 않는다.
도 4는 본 발명의 실시예에 따른 어플리케이션의 구성을 나타낸 것으로, 소리 샘플들과 이미지들로 구성된 데이터베이스(10)와, 외부로부터 입력된 소리신호를 데이터베이스에 저정된 소리샘플과 비교하여 이와 일치하는 데이터를 찾아내는 검색부(20)와, 검출된 데이터에 해당하는 이미지 정보를 웨어러블 디스플레이어로 무선 송출하는 출력부(30)로 구성된다.
상기 데이터베이스(10)는 도 4에 도시된 바와 같이 소리 샘플(11)과, 이 소리에 상응하는 소리 이미지(12)를 모아 데이터베이스(20)을 구축한다.
상기 검색부(20)의 데이터베이스의 소리샘플들과 입력된 소리의 동질성 판단기준은 소리의 높낮에 상관없이 고유 주파수 특성이나 패턴 등 여러가지 다양한 성질을 근거로 종합적 결정한다.
도 6은 본 발명의 실시예에 따른 소리 이미지를 나타낸 것으로, 5a의 이미지는 사용자가 처음 보아도 직관적으로 무엇을 의미하는지 파악할 수 있을 정도의 단순화하게 도안된 것이고, 도 5b는 소리의 대상을 직적 사진을 촬영해 썸네일(Thumbnail)화 한 것이다.
그리고, 이들 이미지는 소정의 크기로 코너가 라운딩된 사각안에 배치하여 샘플한 느낌을 갖도록 한다.
도면 6의 6a, 6b는 본 발명의 실시예에 따른 것으로, 소리의 크기를 구별할 수 있게 고, 중, 저가 색깔 또는 톤으로 구분되고 상.하로 동작되는 레벨바(12a)를 소리 이미지(12) 옆에 추가적으로 배치하여 실시간 변하는 소리의 크기를 인지할 수 있도록 하였다.
상기 데이터베이스는 웹을 통해 지속적인 업그레이드된 데이터들을 모바일기기로 직접 저장하거나, 사용자가 필요로 하는 특별한 소리와 이에 대응하는 소리이미지를 직접 추가하여 확장할 수도 있다.
다른 방법으로는 클라우드 데이터베이스 서버를 이용 수 많은 소리정보를 저장하고 이를 검색에만 활용한다면 인식할 수 있는 소리의 양을 대폭 늘릴 수 있게된다.
본 발명의 모바일기기로 안경형 디스플레이어와 PC기능이 일체화된 스마트기기(도 2b)를 사용하면 어플리케이션을 설치하는 것만으로 추가적 구성없이 바로 동작시킬 수 있어 앞서 예시한 것 중 가장 편리하게 사용할 수 있을 것이다.
만일 콘텍트 렌즈형 디스플레이어가 실용화되고 인반인이 항상 한 가지 이상의 모바일 기기를 지니고 다닌다고 가정한다면 이 구성이 본 발명의 가장 바람직한 실시예가 될 것이다.
상술한 구성을 갖는 본 발명의 활용 방법을 예시하면 다음과 같다.
도 8a, 도 8b는 헤드폰이나 이어폰의 착용자나 청각장애인이 도보, 런닝 또는 자전거를 타고 있는 상황을 예시한 것이다.
우선 스마트기기에 설치된 어플리케이션을 작동시키고 웨어러블 디스플레이어를 착용한다.
사용자가 앞서 가는 중 뒤나 옆에서 다가오는 차량이 경적소리를 내면 스마트기기에 설치된 어플리케이션은 이 소리를 검색해서 해당하는 이미지와 레벨바를 디스플레이어로 출력한다.(도 8a참조)
소리 이미지를 통해 차량의 경적소리라는 것을 인식한 사용자는 뒤나 옆을 돌아봐 상황을 확인한 후 길을 비켜서 안전을 확보할 수 있게 된다.(도 8b참조)
그리고, 외부의 소리가 소면되면 디스플레이된 이미지와 레벨바도 함께 사라진다.
본 발명은 이와 같이 소리를 직접 들을 수는 없지만 웨어러블 디스플레이어로 소리의 종류 및 크기를 실시간 보여줌으로써 주위 상황을 인직하고 곧 바로 대처할 행동을 취할 수 있도록 하였다.
도 9의 9a, 9b는 각각 본 발명에 따른 또 다른 실시예로 지하철과 버스와 같은 대중교통에 활용한 소리 이미지를 나타낸 것이다.
지하철이나 버스의 대중교통의 노선정보를 데이터베이스화 하게 되면 안내방송시 이를 인식하여 해당하는 정차역 정보를 이미지로 디스플레이시켜 줌으로써 청각장애인이나 소리를 들을 수 없는 상황에서 일반인이 이를 활용 목적지를 지나치지 않고 하차나 환승에 도움을 주게된다.
상기 이미지는 지하철의 긴 안내방송에 비해 짧은 시간에 탑승한 차량을 확인 가능한 노선번호와 색깔, 이번 도착역 이나 다음 도착역 구분, 환승가능한 노선을 비롯하여 열릴 문의 정보까지 1컷의 도안된 이미지로 많은 정보를 보여줄 수 있게 된다. (도 9a 참조)
상기 이미지는 버스의 경우 간선, 지선, 광역 등을 색깔로 구분하고 번호, 정차역 구분, 정차역 및 환승 가능한 지하철의 노선까지 확인할 수 있도록 하였다. (도 9b 참조)
도면에 예시는 없으나 이와 동일한 방법으로 기차의 노선정보도 이미지로 화용할 수 있다.
도 10의 10a, 10b, 10c는 각각 본 발명의 실시예에 따라 학습에 활용한 이미지를 나타낸 것으로, 새와 양서류 그리고 곤충 중 하나만 예시 하였다.
예시된 것과 같이 이들의 소리를 데이터베이스화 하면 그들 중 어느 소리도 식별해 내는 것은 어렵지 않을 것이다.
이때 해당하는 썸네일 이미지 내에 명칭을 표시한다면 새 중에서도 종달새, 양서류 중에서 맹꽁이, 매미 중에서 참매미를 쉽게 구분할 수 있어 학생들의 자연학습은 물론 학술적 연구에도 도움을 줄 수 있게 된다.
또한, 디스플레이된 이미지에 인터넷의 백과사전 검색을 링크한다면 사용자가 보다 상세한 정보 확인이 가능하며, 확인된 정보가 맹꽁이처럼 천연기념물로 지정된 멸종 위기종 2급이라는 사실이 인지되면 포획이나 회손과 남획을 방지할 수 있을 것이다.
그외에 본 발명은 동일한 방법으로 포유류나 풀벌레 등 다른 생물에도 적용하여 활용할 수 있다.
또한, 본 발명은 차종별 엔진소리를 데이터베이스화 한다면 차종 식별의 포렌식(Forensics) 장비로 활용할 수 있으며, 지능이 높은 개나 돌고래 소리를 분석해 사람과 의사 소통의 수단으로 활용하는 방법 등 다양한 분야에 활용할 수 있다.
도 11a, 도 11b는 본 발명의 실시예에 따른 청각장애인을 위한 이미지의 활용예를 나타낸 것이다.
도 11a는 전화벨과 초인종과 같이 두 가지 이상의 소리가 동시에 발생할 경우를 예시한 것으로, 가로 또는 세로 방향으로 이미지를 정렬해 다중 출력되도록 하여 청각장애인이 생활하면서 겪을 수 있는 불편을 덜어 줄 수 있도록 한 것이다.
도 11b는 모바일기기에 애플의 '시리'나 구글의 '나우' 같은 음성인식 프로그램을 본 발명의 어플리케이션과 연계시켜 사각의 박스 내에 인식된 음성을 문자로 표시하고 박스 일측에 음석이라는 표기하는 방식으로 이미지화 하여 오버레이 되도록 한 것이다.
그리고 사각의 박스는 문자양에 따라 크기가 자동으로 조절되도록 한다.
만일 음석인식의 속도가 빨라진다면 청작장애인이 자유로운 의사소통은 물론 자막을 제공하지 않는 텔레비젼의 시청도 가능하게 될 것이다.
또한, 이 기능은 일반인이 원어로 된 영화나 드라마의 시청시 활용하면 어학학습에 활용할 수 있으며, 나아가 본 발명의 어플리케이션을 번역프로그램과 연동시킨다면 자막이 없는 영화의 시청도 가능하게 될 것이다.
도 12는 본 발명의 실시예에 따른 부가적 활용방법을 예시한 것으로, 안경형 디스플레이어(100)에 진동체(150)을 추가 구성하여 사용자가 잠든 경우와 같이 시각적으로 인지할 수 없을 때 보조적 수단으로 진동을 이용하여 인지될 수 있도록 함으로써 활용범위를 확장할 수 있게 된다.
10: 데이터베이스
11: 소리 샘플
12: 소리 이미지
12a: 레벨바
20: 검색부
30: 출력부
100 : 안경형 디스플레이어
150: 진동체

Claims (17)

  1. 스마트OS 및 무선 전송기능을 갖는 모바일기기와,
    상기 모바일기기와 연동되는 웨어러블 디스플레이어와,
    상기 모바일기기에 설치되어 외부의 소리를 상기 웨어러블 디스플레이어로 이 소리에 상응하는 이미지로 출력시키는 어플리케이션을 포함하여,
    소리를 이미지로 인식할 수 있도록 한 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  2. 청구항 1에 있어서,
    상기 모바일기기로 스마트폰을 사용하는 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  3. 청구항 1에 있어서,
    상기 모바일기기로 테블릿PC를 사용하는 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  4. 청구항 1에 있어서,
    상기 모바일기기로 스마트워치를 사용하는 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  5. 청구항 1에 있어서,
    상기 모바일기기로 스마트OS로 동작되는 소형PC기반에 소리 입력장치와 배터리 및 고정장치를 추가 구성한 웨어러블 형태의 스마트기기를 사용하는 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  6. 청구항 1에 있어서,
    상기 웨어러블 디스플레이어로 콘텍트 렌즈형 디스플레이어를 사용하는 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  7. 청구항 1에 있어서,
    상기 웨어러블 디스플레이어로 안경형 디스플레이어를 사용하는 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  8. 청구항 7에 있어서,
    상기 안경형 디스플레이어의 몸체 일측에 진동체를 부가적으로 설치하고,
    상기 소리 이미지의 출력 신호에 진동이 동시에 또는 소리 이미지만 출력되는 선택적인 제어가 되도록 한 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  9. 청구항 1에 있어서,
    상기 소리 이미지 옆에 실시간 소리의 저, 중, 고음 높낮이를 색깔로 구분되는 적층 레벨바를 부가적으로 표시하여 소리의 크기가 실시간 인지되도록 한 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  10. 청구항 1에 있어서,
    상기 소리 이미지는 해당하는 소리를 직관적으로 확인 가능할 정도로 단순화된 도안을 소정의 크기로 코너가 라운딩된 사각의 안에 형성한 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  11. 청구항 1에 있어서,
    상기 소리 이미지는 소리의 대상을 사진 작업하고 썸네일화하여 소정 크기의 코너가 라운딩된 사각 안에 배치한 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  12. 청구항 11에 있어서,
    상기 썸네일 이미지 내에 부가적으로 소리 대상물의 이름을 적어 넣은 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  13. 청구항 1에 있어서,
    상기 소리 이미지는 소리의 대상이 대중교통의 안내방송일 경우 소정 크기의 코너가 라운딩된 사각 안에 대중교통의 종류 및 색깔, 정차역의 구분, 정차역, 환승 노선 및 내릴 문의 위치 정보가 1컷으로 도안으로 형성된 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  14. 청구항 1에 있어서,
    상기 소리의 대상이 2개 또는 3개 중 어느 하나일 때 디스플레이되는 각각의 소리 이미지가 가로 또는 세로 방향으로 정렬되도록 하는 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  15. 청구항 1에 있어서,
    상기 이미지는 소리의 대상이 음성인 경우 상기 어플리케이션을 음성인식 기반의 프로그램과 연계시켜 사각이 테두리 안에 인식된 음성이 문자로 표시되되 문자의 양에 따라 그 크가가 조절되도록 하고 일측 상단에 음성이라고 표기 되도록 하는 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  16. 스마트OS를 구비하고 소리의 입력장치와 디스플레이어를 구비한 일체로 형성된 안경형 모바일기기와,
    상기 안경형 모바일기기에 설치되어 외부의 입력된 소리를 상기 디스플레이어로 이 소리에 상응하는 이미지를 출력하는 어플리케이션을 포함하여,
    소리를 이미지로 인식할 수 있도록 한 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
  17. 청구항 16에 있어서,
    상기 안경형 모바일기기의 몸체 일측에 진동체를 부가적으로 설치하고,
    상기 소리 이미지의 출력 신호에 진동이 동시에 또는 소리 이미지만 출력되는 선택적인 제어가 되도록 한 것을 특징으로 하는 모바일기기를 이용한 소리의 시각화 표시방법.
KR1020130137366A 2013-11-13 2013-11-13 모바일기기를 이용한 소리의 시각화 표시방법 KR20150055262A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130137366A KR20150055262A (ko) 2013-11-13 2013-11-13 모바일기기를 이용한 소리의 시각화 표시방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130137366A KR20150055262A (ko) 2013-11-13 2013-11-13 모바일기기를 이용한 소리의 시각화 표시방법

Publications (1)

Publication Number Publication Date
KR20150055262A true KR20150055262A (ko) 2015-05-21

Family

ID=53390898

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130137366A KR20150055262A (ko) 2013-11-13 2013-11-13 모바일기기를 이용한 소리의 시각화 표시방법

Country Status (1)

Country Link
KR (1) KR20150055262A (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160093529A (ko) 2015-01-29 2016-08-08 유퍼스트(주) 청각 장애인을 위한 착용형 장치
US10237669B2 (en) 2015-10-07 2019-03-19 Samsung Electronics Co., Ltd. Electronic device and music visualization method thereof
KR20220121384A (ko) 2021-02-25 2022-09-01 한남대학교 산학협력단 손목 착용형 소리 시각화 및 촉각화 장치
KR20230021490A (ko) * 2021-08-05 2023-02-14 경북대학교 산학협력단 시각을 이용한 청각 보조 시스템 및 청각 보조 방법

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160093529A (ko) 2015-01-29 2016-08-08 유퍼스트(주) 청각 장애인을 위한 착용형 장치
KR20160104537A (ko) 2015-01-29 2016-09-05 유퍼스트(주) 실시간 중계 및 송출 시스템
US10237669B2 (en) 2015-10-07 2019-03-19 Samsung Electronics Co., Ltd. Electronic device and music visualization method thereof
US10645506B2 (en) 2015-10-07 2020-05-05 Samsung Electronics Co., Ltd. Electronic device and music visualization method thereof
US11128970B2 (en) 2015-10-07 2021-09-21 Samsung Electronics Co., Ltd. Electronic device and music visualization method thereof
US11812232B2 (en) 2015-10-07 2023-11-07 Samsung Electronics Co., Ltd. Electronic device and music visualization method thereof
KR20220121384A (ko) 2021-02-25 2022-09-01 한남대학교 산학협력단 손목 착용형 소리 시각화 및 촉각화 장치
KR20230021490A (ko) * 2021-08-05 2023-02-14 경북대학교 산학협력단 시각을 이용한 청각 보조 시스템 및 청각 보조 방법

Similar Documents

Publication Publication Date Title
US11825012B2 (en) Server, client terminal, control method, and storage medium
EP2981070B1 (en) Information processing device, notification state control method, and program
KR20140064246A (ko) 착용형 디스플레이 장치
JP6428268B2 (ja) 画像表示装置及び画像表示方法、並びに画像表示システム
KR101846142B1 (ko) 체험 공유 시스템
KR20150055262A (ko) 모바일기기를 이용한 소리의 시각화 표시방법
US20220116701A1 (en) Systems and methods for directing audio output of a wearable apparatus
KR101929875B1 (ko) 실시간 현장 동영상 중계를 이용한 시각장애인 안내 서비스 제공 방법
Mataró et al. An assistive mobile system supporting blind and visual impaired people when are outdoor
Salvi et al. Smart glass using IoT and machine learning technologies to aid the blind, dumb and deaf
US10943117B2 (en) Translation to braille
JP2015138534A (ja) 電子機器
WO2023150327A1 (en) Smart glass interface for impaired users or users with disabilities
KR101832327B1 (ko) 안전 지역 정보 제공 방법 및 그를 위한 장치 및 시스템
JP2023531849A (ja) オーディオ認識を行う拡張現実デバイスおよびその制御方法
CN113034822A (zh) 提示用户的方法、装置、电子设备及介质
EP3882894B1 (en) Seeing aid for a visually impaired individual
Aashritha et al. Assistive Technology for Blind and Deaf People: A Case Study
CN214415214U (zh) 一种智能盲人眼镜
CN116392127B (zh) 注意力检测方法及相关电子设备
CN211653603U (zh) 图像处理***
KR102334319B1 (ko) 증강 현실 표시 장치를 이용한 청각 정보의 시각 변환 및 전달 방법 및 장치
CN111035544A (zh) 盲人导航***
CN114008717A (zh) 盲人的定向辅助***
Divya et al. IoT based Divyang Assistant Technology: Your Hearing Support

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application