KR20150103591A - 디스플레이 장치 및 그의 동작 방법 - Google Patents

디스플레이 장치 및 그의 동작 방법 Download PDF

Info

Publication number
KR20150103591A
KR20150103591A KR1020140025198A KR20140025198A KR20150103591A KR 20150103591 A KR20150103591 A KR 20150103591A KR 1020140025198 A KR1020140025198 A KR 1020140025198A KR 20140025198 A KR20140025198 A KR 20140025198A KR 20150103591 A KR20150103591 A KR 20150103591A
Authority
KR
South Korea
Prior art keywords
text
display device
tab
selected text
speech
Prior art date
Application number
KR1020140025198A
Other languages
English (en)
Inventor
김민우
노보람
이정용
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020140025198A priority Critical patent/KR20150103591A/ko
Publication of KR20150103591A publication Critical patent/KR20150103591A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10821—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
    • G06K7/10881—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices constructional details of hand-held scanners
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Electromagnetism (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Toxicology (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은 이동 스캐너로부터 획득한 스캔 이미지를 사용자 인터페이스 화면에 표시하는 단계와 표시된 스캔 이미지에 포함된 텍스트를 인식하는 단계와 인식된 텍스트 중 일부 텍스트를 선택하는 입력을 수신하는 단계 및 선택된 텍스트를 음성으로 변환하여 출력하는 단계를 포함한다.

Description

디스플레이 장치 및 그의 동작 방법{VIDEO DISPLAY DEVICE AND OPERATING METHOD THEREOF}
본 발명은 디스플레이 장치 및 그의 동작 방법에 관한 것으로, 보다 상세하게는 하기 위한 이동 스캐너로부터 텍스트를 포함하는 스캔 이미지를 획득하여 텍스트와 관련한 정보를 제공하는 디스플레이 장치 및 그의 동작 방법에 관한 것이다.
일반적으로 마우스라 함은 컴퓨터 입력장치의 일종으로, 클릭 동작을 통한 프로그램 선택, 로딩, 동작, 멈춤 및 화면 열기/닫기 등의 기능을 수행한다. 최근에는 컨버전스 개념으로 기존의 마우스 기능 외에 스캔 기능이 복합된 융합형 마우스가 등장하였다.
스캔 기능이 구비되는 마우스는 손으로 이동시켜서 스캔 동작을 수행한다고 하여 핸드헬드 스캐너(handheld scanner)라고도 불린다.
스캔 기능이 구비되는 마우스는 디스플레이 장치와 연동하여 마우스를 통해스캔된 이미지를 활용할 수 있다. 특히, 스캔 이미지가 텍스트를 포함하는 경우, 텍스트 인식 기술을 이용하여 스캔 이미지를 활용할 수 있다.
그러나, 기존에는 텍스트 인식 기술만으로 스캔 이미지를 활용하여 다양한 수요자의 욕구를 충족시키기에는 어려움이 많았다.
본 발명은 텍스트 인식 기술 및 텍스트 음성 변환 기술을 결합하여 사용자에게 다양한 서비스를 제공할 수 있는 디스플레이 장치 및 그의 동작 방법에 관한 것이다.
본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은 이동 스캐너로부터 획득한 스캔 이미지를 사용자 인터페이스 화면에 표시하는 단계와 표시된 스캔 이미지에 포함된 텍스트를 인식하는 단계와 인식된 텍스트 중 일부 텍스트를 선택하는 입력을 수신하는 단계 및 선택된 텍스트를 음성으로 변환하여 출력하는 단계를 포함한다.
본 발명의 실시 예에 따른 디스플레이 장치는 이동 스캐너로부터 획득한 스캔 이미지를 사용자 인터페이스 화면에 표시하는 디스플레이부와 표시된 스캔 이미지에 포함된 텍스트를 인식하는 텍스트 인식부와 인식된 텍스트 중 일부 텍스트를 선택하는 입력을 수신하는 사용자 입력부 및 선택된 텍스트를 음성으로 변환하여 출력하는 텍스트 음성 변환부를 포함한다.
본 발명의 다양한 실시 예에 따르면, 사용자는 다양한 조건에 따라 인식된 텍스트를 음성으로 들을 수 있어 맞춤형 어학 서비스의 제공이 가능하다.
또한, 고대비 설정 및 변환된 음성을 음성 파일로 저장하는 기능 등을 통해 시각 장애인에 적합한 서비스를 제공할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 스캔 시스템의 구성을 블록도로 도시한 것이다.
도 2은 본 발명의 일 실시 예에 이동 스캐너의 평면도이다.
도 3은 본 발명의 일 실시 예에 따른 이동 스캐너의 저면도이다.
도 4는 본 발명의 일 실시 예에 따라 스캔 대상 객체를 스캔하는 과정을 제공하는 스캔 인터페이스 화면이다.
도 5는 본 발명의 또 다른 실시 예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도이다.
도 6은 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 흐름도이다.
도 7은 본 발명의 일 실시 예에 따른 텍스트 음성 변환을 위한 사용자 인터페이스 화면이다.
도 8 및 도 9는 본 발명의 일 실시 예에 따라 선택 텍스트에 대한 번역 결과를 제공하는 화면이다.
도 10은 본 발명의 일 실시 예에 따라 선택된 텍스트를 음성으로 변환하여 출력하는 과정을 설명하기 위한 도면이다.
도 11 내지 도 13은 본 발명의 일 실시 예에 따라 선택 텍스트에 대한 사전적 의미를 제공하는 화면이다.
도 14 및 도 15는 본 발명의 일 실시 예에 따라 고대비 설정에 의해 사용자 인터페이스 화면의 레이아웃이 변경되는 과정을 보여준다.
도 16 내지 도 17은 본 발명의 일 실시 예에 따라 상위 탭 영역 중 재생 탭이 선택된 경우, 제공되는 사용자 인터페이스 화면의 예를 보여준다.
이하, 본 발명과 관련된 실시 예에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
본 발명의 실시예에 따른 디스플레이 장치는, 예를 들어 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 디스플레이 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등 보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고, 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.
따라서, 본 발명에서 기술되는 디스플레이 장치는, 예를 들어 범용의 OS 커널 상에, 다양한 어플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 상기 디스플레이 장치는, 보다 구체적으로 예를 들면, 컴퓨터, 네트워크 TV, HBBTV, 스마트 TV, LED TV, OLED TV 등이 될 수 있으며, 경우에 따라 스마트폰에도 적용 가능하다.
도 1은 본 발명의 일 실시 예에 따른 스캔 시스템의 구성을 블록도로 도시한 것이다.
도 1을 참조하면, 본 발명의 일 실시 예에 따른 스캔 시스템(10)은 디스플레이 장치(100) 및 이동 스캐너(200)를 포함한다.
디스플레이 장치(100)는 이동 스캐너로부터 사용자 입력에 대응하는 입력 신호를 수신하여 입력 신호에 대응하는 기능을 수행한다. 디스플레이 장치(100)는 이동 스캐너(100)로부터 복수의 단위 스캔 이미지들을 수신할 수 있다. 디스플레이 장치(100)는 수신된 복수의 단위 스캔 이미지들을 병합하여 완성된 스캔 이미지를 생성할 수 있다.
디스플레이 장치(100)는 통신 인터페이스부(110), 디스플레이부(130), 저장부(150), 오디오 출력부(170), 네트워크 인터페이스부(180) 및 제어부(190)를 포함한다.
통신 인터페이스부(110)는 외부 장치와 유무선 통신을 수행할 수 있다. 통신 인터페이스부(110)는 외부 장치와 유무선 통신을 통해 입력 신호, 영상, 음성을 수신할 수 있다. 특히, 통신 인터페이스부(110)는 후술할 이동 스캐너(200)의 통신 인터페이스부(220)와 유무선 통신을 통해 정보를 송수신할 수 있다.
통신 인터페이스부(110)는 시리얼 통신 규격, PS/2 규격, 범용직렬버스(Universal Serial Bus, USB) 규격을 이용하여 이동 스캐너(200)와 유선 통신을 수행할 수 있다.
통신 인터페이스부(110)는 RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), DLNA (Digital Living Network Alliance) 규격을 이용하여 이동 스캐너(200)와 무선 통신을 수행할 수 있다.
디스플레이부(130)는 제어부(190)에서 처리된 각종 영상 신호, 데이터 신호, OSD 신호 등을 각각 R, G, B 신호로 변환하여 구동 신호를 생성할 수 있다.
디스플레이부(130)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 등을 이용할 수 있으며, 또는 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.
디스플레이부(130)는 이동 스캐너(200)로부터 수신한 스캔 이미지를 표시할 수 있다. 디스플레이부(130)는 이동 스캐너(200)가 스캔 대상 객체를 스캔하는 과정을 표시할 수 있다.
저장부(150)는 제어부(190) 내의 각 신호 처리 및 제어를 위한 프로그램을 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.
저장부(150)는 통신 인터페이스부(150) 로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다.
저장부(150)는 이동 스캐너(200)로부터 제공된 단위 스캔 이미지들을 저장할 수 있다. 저장부(150)는 복수의 단위 스캔 이미지들이 병합되어 완성된 스캔 이미지를 저장할 수 있다.
저장부(150)는 스캔 동작을 수행할 수 있도록 디스플레이 장치(100)를 제어하는 스캔 드라이버 프로그램을 저장할 수 있다.
저장부(150)는 예를 들어 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
오디오 출력부(170)는 제어부(190)에서 처리된 음성 신호를 출력한다. 오디오 출력부(170)는 음성을 출력하기 위한 스피커를 포함할 수 있다.
네트워크 인터페이스부(180)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해 웹 페이지에의 접근을 제공한다. 네트워크 인터페이스부(180)는 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다.
네트워크 인터페이스부(180)는 컨텐트 제공자 또는 네트워크 운영자가 제공하는 컨텐트 또는 데이터들을 수신할 수 있다. 네트워크 인터페이스부(180)는 네트워크를 통하여 컨텐트 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐트 및 그와 관련된 정보를 수신할 수 있다.
또한, 네트워크 인터페이스부(180)는 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있으며, 인터넷 또는 컨텐트 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.
네트워크 인터페이스부(133)는 네트워크를 통해 공중에 공개(open)된 어플리케이션들 중 원하는 어플리케이션을 선택하여 수신할 수 있다.
제어부(190)는 디스플레이 장치(100)의 동작을 전반적으로 제어할 수 있다.
특히, 제어부(190)는 이동 스캐너(200)로부터 획득한 복수의 단위 스캔 이미지들 및 복수의 단위 스캔 이미지들에 대응하는 복수의 위치들에 기초하여 복수의 단위 스캔 이미지들을 병합할 수 있다. 복수의 단위 스캔 이미지들 각각은 복수의 위치들 각각에 대응될 수 있다. 복수의 위치들 각각은 이동 스캐너(200)의 위치일 수 있다.
제어부(190)는 복수의 단위 스캔 이미지들 각각에 복수의 위치들 각각을 대응시킬 수 있고, 대응 관계에 기초하여 완성된 스캔 이미지를 획득할 수 있다.
제어부(190)는 공지된 다양한 이미지 병합 알고리즘을 이용하여 스캔 대상 객체의 스캔 이미지를 생성할 수 있다.
이동 스캐너(200)는 사용자 입력을 수신하여 수신된 사용자 입력을 디스플레이 장치(100)에 제공한다. 이동 스캐너(200)는 스캔 대상 객체로부터 스캔된 단위 스캔 이미지를 디스플레이 장치(100)에 제공한다.
이동 스캐너(200)는 스캔 대상 객체의 표면을 이동하면서 스캔 대상 객체를 스캔할 수 있다. 이동 스캐너(200)는 스캔 기능을 구비한 다양한 장치로 구현될 수 있으며, 스캔 기능이 구비된 마우스(마우스 스캐너), 리모콘, 휴대용 단말기 등 중 어느 하나일 수 있다.
스캔 대상 객체는 사용자가 이동 스캐너(200)에 입력 및 저장하고자 하는 정보가 담긴 목적물을 말하며, 일반적으로 문자, 그림 등이 표시된 문서를 지칭한다. 또한 스캔 대상 객체의 일정 영역이란 기존의 라인 스캔 영역과 달리 소정의 면적을 갖는 2차원 영역을 의미한다. 후술하겠지만, 스캔 대상 영역의 일정 영역은 스캐닝부(220)에 포함된 스캔 윈도우(scan window)에 대응하는 영역일 수 있다.
이동 스캐너(200)가 스캔 기능을 구비한 마우스인 경우, 이동 스캐너(200)의동작 모드는 스캔 모드 및 마우스 모드를 포함할 수 있다.
스캔 모드는 이동 스캐너(200)가 스캔 대상 객체의 표면을 이동하면서 스캔 대상 객체를 스캔 하는 모드일 수 있다.
마우스 모드는 이동 스캐너(200)가 디스플레이 장치(100)에 사용자 입력을 전송하여 디스플레이 장치(100)의 기능을 제어하기 위한 모드일 수 있다. 마우스 모드는 스캔 대상 객체의 스캔 이미지를 편집하기 위한 편집 모드를 포함할 수 있다.
이동 스캐너(200)는 사용자 입력부(210), 스캐닝부(220), 위치 검출부(230), 통신 인터페이스부(240), 저장부(250), 제어부(260)를 포함한다.
사용자 입력부(210)는 사용자 입력을 수신할 수 있다. 사용자 입력부(210)는 이동 스캐너(200)의 기능 또는 디스플레이 장치(100)의 기능을 수행하는 사용자 입력을 수신할 수 있다. 사용자 입력부(210)에 대한 설명을 도 2를 참조하여 설명한다.
다시 도 2를 설명한다.
도 2는 본 발명의 일 실시 예에 따른 이동 스캐너의 평면도이다.
도 2를 참조하면, 사용자 입력부(210)는 좌 버튼(211), 우 버튼(212), 휠(213), 스캔 버튼(214), 백 버튼(215)를 포함할 수 있다.
좌 버튼(211), 우 버튼(212) 및 휠(213)은 이동 스캐너(200)가 마우스 모드에서 동작하는 경우, 좌 버튼(211), 우 버튼(212) 및 휠(213) 각각에는 디스플레이 장치(100)의 동작을 제어하기 위한 기능이 할당될 수 있다. 예를 들어, 좌 버튼(211)은 디스플레이 장치(100)의 화면 중 어느 일 지점을 선택하기 위한 버튼일 수 있고, 우 버튼(212)는 디스플레이 장치(100)의 화면에 메뉴를 표시하기 위한 버튼일 수 있다. 휠 버튼(213)은 디스플레이 장치(100)의 화면 또는 디스플레이 장치(100)의 화면에 표시된 객체를 확대하거나 축소하기 위한 구성일 수 있다.
스캔 버튼(214)은 이동 스캐너(200)가 스캔 모드로 진입하기 위한 사용자 입력을 수신하는 버튼일 수 있다. 사용자 입력에 의해 스캔 버튼(214)이 눌러진 경우, 이동 스캐너(200)의 동작 모드는 마우스 모드에서 스캔 모드로 변경될 수 있다. 사용자 입력에 의해 스캔 버튼(214)이 눌러진 경우, 이동 스캐너(200)는 스캔을 시작할 수 있는 상태가 될 수 있다.
사용자 입력에 의해 스캔 버튼(214)이 눌러진 경우, 이동 스캐너(200)는 스캔 시작 요청 신호를 디스플레이 장치(100)에 전달할 수 있다. 디스플레이 장치(100)는 수신한 스캔 시작 요청 신호에 응답하여 스캔 인터페이스 화면을 표시할 수 있다. 이에 대해서는 후술한다.
이동 스캐너(200)가 스캔 모드로 동작하는 중 스캔 버튼(214)에 대한 사용자 입력이 다시 수신된 경우, 이동 스캐너(200)의 동작 모드는 스캔 모드에서 마우스 모드로 변경될 수 있다.
백 버튼(215)는 이동 스캐너(200)가 마우스 모드에서 동작하는 경우, 디스플레이 장치(100)가 웹페이지를 브라우징(browsing)하는 동안 이전 웹 페이지로 돌아가기 위한 버튼일 수 있다.
백 버튼(215)는 이동 스캐너(200)가 마우스 모드에서 동작하는 경우, 디스플레이 장치(100)가 폴더를 브라우징(browsing)하는 동안 이전 폴더로 돌아가기 위한 버튼일 수 있다.
다시 도 1을 설명한다.
스캐닝부(220)는 스캔 대상 객체의 일정 영역에 광을 조사할 수 있다. 스캐닝부(220)는 조사된 광이 스캔 대상 객체를 통해 반사된 반사광을 이용하여 스캔 대상 객체의 단위 스캔 이미지를 획득할 수 있다.
이를 위해 스캐닝부(220)는 스캔 윈도우(221), 조명부(미도시), 미러(미도시), 카메라(미도시)를 포함할 수 있다.
조명부는 스캔 대상 객체에 광을 조사할 수 있다. 미러에는 스캔 대상 객체로부터 반사된 광에 대응하는 단위 이미지가 맺힐 수 있다. 카메라는 미러에 맺힌 단위 이미지를 촬영하여 단위 스캔 이미지를 획득할 수 있다.
스캐닝부(220)는 일정한 면적을 갖는 2차원 영역을 통해 스캔 대상 객체에 광을 조사할 수 있다. 2차원 영역은 스캐닝부(220)의 스캔 윈도우(221)가 형성하는 영역일 수 있다. 스캔 윈도우(221)는 조명부가 스캔 대상 객체에 광을 조사하는 통로이며, 스캔 대상 객체로부터 반사된 광을 미러에 전달하는 통로일 수 있다.
스캐닝부(220)는 스캔 윈도우(221)를 통해 스캔 대상 객체로부터 반사된 광을 수신하여 스캔 대상 객체의 단위 스캔 이미지를 획득할 수 있다. 즉, 스캔 윈도우(221)는 스캔 대상 객체의 단위 스캔 이미지를 획득하기 위한 매개체 역할을 수행한다.
위치 검출부(230)는 이동 스캐너(200)의 위치를 검출할 수 있다. 즉, 이동 스캐너(200)가 이동함에 따라 이동 스캐너(200)의 위치가 변하므로, 위치 검출부(230)를 이동 스캐너(200)의 위치를 검출하여 검출된 이동 스캐너(200)의 위치를 디스플레이 장치(100)에 제공할 수 있다. 구체적으로, 위치 검출부(230)는 특정 지점에 대한 X, Y 좌표를 측정할 수 있고, 측정된 좌표를 기준 위치로 설정할 수 있다. 이후, 이동 스캐너(200)의 이동이 있는 경우, 새로운 지점에 대한 X, Y 좌표를 측정하고, 새롭게 측정된 이동 스캐너(200)의 위치를 기준 위치로 설정하여 이동 스캐너(200)의 위치를 반복적으로 검출할 수 있다.
일 실시 예에서 위치 검출부(230)는 하나 이상의 레이져 센서를 포함할 수 있다. 레이져 센서는 스캔 대상 객체에 레이져를 조사하고, 이로부터 반사된 레이져를 수신하여 이동 스캐너(200)의 위치를 검출할 수 있다.
또 다른 실시 예에서 위치 검출부(230)는 하나의 레이져 센서 및 하나의 자이로 센서를 포함할 수도 있다.
스캐닝부(220) 및 위치 검출부(230)의 배치에 대해서는 도 3을 참조하여 설명한다.
도 3은 본 발명의 일 실시 예에 따른 이동 스캐너의 저면도이다.
도 3을 참조하면, 이동 스캐너(200)의 저면에는 스캔 윈도우(221) 및 위치 검출부(230)가 배치될 수 있다.
스캐닝부(220)는 스캔 윈도우(221)를 통해 스캔 대상 객체로부터 단위 스캔 이미지를 획득할 수 있다. 스캔 윈도우(221)가 형성하는 영역은 실제 스캔이 되는 영역이다.
위치 검출부(230)는 스캔 윈도우(221)의 상측 및 하측 각각에 배치될 수 있다.
다시 도 1을 설명한다.
통신 인터페이스부(240)는 외부 장치와 유무선 통신을 수행할 수 있다. 통신 인터페이스부(240)는 외부 장치와 유무선 통신을 통해 입력 신호, 영상, 음성을 수신할 수 있다. 특히, 통신 인터페이스부(240)는 디스플레이 장치(100)의 통신 인터페이스부(110)와 유무선 통신을 통해 정보를 송수신할 수 있다.
통신 인터페이스부(240)는 시리얼 통신 규격, PS/2 규격, 범용직렬버스(Universal Serial Bus, USB) 규격을 이용하여 디스플레이 장치(100)와 유선 통신을 수행할 수 있다.
통신 인터페이스부(240)는 RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), DLNA (Digital Living Network Alliance) 규격을 이용하여 디스플레이 장치(100)와 무선 통신을 수행할 수 있다.
저장부(250)는 스캐닝부(220)로부터 획득한 단위 스캔 이미지들, 위치 검출부(230)로부터 검출된 이동 스캐너(200)의 위치를 저장할 수 있다.
저장부(250)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
제어부(260)는 이동 스캐너(200)의 전반적인 동작을 제어할 수 있다.
특히, 제어부(260)는 스캐닝부(220)가 획득한 복수의 단위 스캔 이미지들과 위치 검출부(230)가 검출한 복수의 위치들을 디스플레이 장치(100)에 제공할 수 있다. 복수의 단위 스캔 이미지들 각각은 복수의 위치들 각각에 대응될 수 있다.
디스플레이 장치(100)는 복수의 단위 스캔 이미지들 각각에 복수의 위치들 각각을 대응시킬 수 있고, 대응 관계에 기초하여 완성된 스캔 이미지를 획득할 수 있다.
다음으로 도 4를 참조하여, 이동 스캐너(200)를 통해 스캔 대상 객체를 스캔하는 과정을 제공하는 스캔 인터페이스 화면을 설명한다.
도 4는 본 발명의 일 실시 예에 따라 스캔 대상 객체를 스캔하는 과정을 제공하는 스캔 인터페이스 화면이다.
도 4를 참조하면, 디스플레이 장치(100)는 디스플레이부(130)를 통해 스캔 인터페이스 화면(500)을 제공할 수 있다. 일 실시 예에서 이동 스캐너(200)가 마우스 모드에서 동작하고 있고, 이동 스캐너(200)의 스캔 버튼(214)에 대한 사용자 입력을 수신하면, 이동 스캐너(200)는 스캔 버튼(214)에 대한 사용자 입력을 디스플레이 장치(100)에 전송할 수 있다. 디스플레이 장치(100)는 스캔 버튼(214)에 대한 사용자 입력을 전달받아 스캔 인터페이스 화면(500)을 제공할 수 있다.
스캔 인터페이스 화면(500)에는 이동 스캐너(200)가 스캔 대상 객체를 스캔하고 있는 과정이 제공될 수 있다.
스캔 인터페이스 화면(500)은 스캔 대상 객체의 스캔 이미지(510), 스캔 박스(520), 메모리 가이드 바(530), 기능 가이드(540)를 포함할 수 있다.
스캔 대상 객체의 스캔 이미지(510)는 이동 스캐너(200)로부터 수신한 스캔 이미지일 수 있다.
스캔 박스(520)는 스캐닝부(220)의 스캔 윈도우(221)에 대응하는 박스일 수 있다. 스캔 박스(520)는 스캔 윈도우(221)가 형성하는 영역에 대응하는 영역으로 실제 스캔이 수행되고 있는 영역일 수 있다.
스캔 박스(520)는 이동 스캐너(200)의 움직임에 대응될 수 있다. 즉, 이동 스캐너(200)의 이동방향에 따라 스캔 박스(520)도 이동될 수 있다.
메모리 가이드 바(530)는 이동 스캐너(200)의 메모리 잔량을 나타낼 수 있다. 즉, 메모리 가이드 바(530)는 이동 스캐너(200)의 저장부(250)를 구성하는 메모리의 총량 중 현재 스캔된 이미지의 용량을 제외한 나머지 용량을 실시간으로 나타낼 수 있다.
기능 가이드(540)는 이동 스캐너(200)의 기능을 가이드 한다. 구체적으로, 기능 가이드(540)는 이동 스캐너(200)의 축소 이미지, 이동 스캐너(200)의 스캔 버튼(214)의 기능, 이동 스캐너(200)의 휠(213)의 기능을 제공할 수 있다.
즉, 이동 스캐너(200)의 스캔 버튼(214)의 기능은 스캔 중지(stop scan)임을 나타낼 수 있고, 휠(213)은 스캔 이미지를 확대/축소하는 줌인/아웃(zoom-in/out)임을 나타낼 수 있다.
도 5는 본 발명의 또 다른 실시 예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도이다.
도 5를 참조하면, 본 발명의 또 다른 실시 예에 따른 디스플레이 장치(100)는 도 1에서 설명한 디스플레이 장치(100)의 구성에 텍스트 인식부(140) 및 텍스트 음성 변환부(160)를 더 포함할 수 있다.
텍스트 인식부(140)는 기 설정된 언어를 기초로 스캔 이미지에 포함된 텍스트를 인식할 수 있다. 일 실시 예에서 스캔 이미지에 포함된 텍스트를 인식하는 방법은 광학식 문자 판독(Optical Character Recognition, OCR) 방법이 사용될 수 있다.
텍스트 음성 변환부(160)는 선택된 텍스트를 음성으로 변환하여 출력할 수 있다. 일 실시 예에서 텍스트 음성 변환부(160)는 선택된 텍스트를 텍스트 음성 변환(Text To Speech, TTS)을 통해 음성으로 변환하여 출력할 수 있다.
다음으로 도 6 내지 도 17을 참조하여 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명한다.
도 6은 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 흐름도이다.
이하에서 이동 스캐너(200)는 스캔 모드 및 마우스 모드 중 마우스 모드에서 동작함을 가정하여 설명한다.
디스플레이 장치(100)의 제어부(190)는 이동 스캐너(200)로부터 스캔 이미지를 획득한다(S101). 제어부(190)는 이동 스캐너(200)로부터 제공받은 복수의 단위 스캔 이미지들 및 복수의 단위 스캔 이미지들에 대응하는 복수의 위치들에 기초하여 스캔 대상 객체의 스캔 이미지를 획득할 수 있다.
스캔 이미지는 텍스트를 포함한 전자 문서 이미지 일 수 있다.
디스플레이 장치(100)의 제어부(190)는 획득한 스캔 이미지를 디스플레이부(130)를 통해 표시한다(S103).
일 실시 예에서 디스플레이 장치(100)의 제어부(190)는 사용자 입력을 통해 텍스트 음성 변환 프로그램을 실행시키는 실행명령을 수신할 수 있다. 제어부(190)는 수신된 실행명령에 따라 텍스트 음성 변환(Text To Speech, TTS)을 위한 사용자 인터페이스 화면을 제공할 수 있다. 제어부(190)는 제공된 사용자 인터페이스 화면에 스캔 이미지를 표시할 수 있다. 텍스트 음성 변환을 위한 사용자 인터페이스 화면에 대해서는 도 7을 참조하여 설명한다.
도 7은 본 발명의 일 실시 예에 따른 텍스트 음성 변환을 위한 사용자 인터페이스 화면이다.
텍스트 음성 변환 프로그램이 실행되면, 도 7에 도시된 바와 같은 사용자 인터페이스 화면(600)을 표시할 수 있다.
사용자 인터페이스 화면(600)은 작업 영역(610), 고대비 설정 영역(620), 상위 탭 영역(630), 하위 탭 영역(640), 리스트 영역(650), 파일 재생 설정 영역(660)을 포함한다.
작업 영역(610)은 이동 스캐너(200)로부터 제공된 스캔 이미지가 표시되거나, 스캔 이미지가 텍스트로 변환된 결과를 표시하는 영역이다.
고대비 설정 영역(620)은 스캔 이미지에 포함된 텍스트를 인식한 후, 인식된 텍스트에 시인성 효과를 주기 위해 고대비를 설정하는 영역이다. 고대비 설정 영역(620)은 고대비 설정을 알려주는 고대비 탭(621) 및 수직으로 배치된 고대비 설정 바(623)를 포함할 수 있다. 사용자는 고대비 설정 바(623)를 이용하여 인식된 텍스트에 원하는 고대비를 설정할 수 있다.
상위 탭 영역(630)은 파일 탭, 재생 탭, 설정 탭을 포함한다.
파일 탭은 파일을 불러오거나 저장된 파일 목록을 보여주기 위한 탭이다.
재생 탭은 인식된 텍스트를 특정 언어의 음성으로 변환하여 출력하거나, 변환된 음성을 특정 목소리 톤으로 출력하기 위한 탭이다.
설정 탭은 텍스트 음성 변환 프로그램의 전반적인 설정을 위한 탭이다.
하위 탭 영역(640)은 상위 탭 영역(630)이 선택된 경우, 표시되는 영역이다. 하위 탭 영역(640)에는 파일 탭, 재생 탭, 설정 탭 중 선택된 탭에 대응하는 하위 탭들이 표시될 수 있다. 예를 들어, 도 7에 도시된 바와 같이, 상위 탭 영역(630)에서 파일 탭이 선택된 경우, 하위 탭 영역(640)에는 불러오기 탭 및 저장 목록 탭이 표시될 수 있다.
리스트 영역(650)은 하위 탭 영역(640)의 하위 탭에 대응하는 리스트를 표시하는 영역이다. 예를 들어, 도 7에 도시된 바와 같이, 하위 탭 영역(640)의 저장 목록 탭이 선택된 경우, 리스트 영역(650)에는 디스플레이 장치(100)에 저장된 파일 리스트를 표시할 수 있다.
파일 재생 설정 영역(660)은 인식된 텍스트를 음성으로 변환하여 출력할 시, 출력되는 음성의 속도, 음성의 음량, 음성 재생의 반복, 음성 재생의 시작, 음성의 저장 등을 설정할 수 있는 영역일 수 있다.
다시 도 6을 설명한다.
디스플레이 장치(100)의 제어부(190)는 표시된 스캔 이미지에 포함된 텍스트를 특정 언어로 인식하기 위해 제1 언어를 선택하는 입력을 수신한다(S105).
예를 들어, 스캔 이미지에 포함된 텍스트가 영어인 경우, 사용자는 제1 언어를 영어로 설정하여 스캔 이미지에 포함된 텍스트가 영어 기반으로 인식되도록 할 수 있다.
일 실시 예에서 디스플레이 장치(100)의 제어부(190)는 제1 언어 선택 입력을 이동 스캐너(200)로부터 수신할 수 있다. 구체적으로, 디스플레이 장치(100)의 제어부(190)는 이동 스캐너(200)의 좌 버튼(211) 선택 입력에 대응하는 제1 언어 선택 입력을 수신할 수 있다.
디스플레이 장치(100)의 텍스트 인식부(140)는 선택된 제1 언어를 기초로 스캔 이미지에 포함된 텍스트를 인식한다(S107). 일 실시 예에서 스캔 이미지에 포함된 텍스트를 인식하는 방법은 광학식 문자 판독(Optical Character Recognition, OCR) 방법이 사용될 수 있다. 광학식 문자 판독은 전자 문서에 새겨진 텍스트를 빛을 이용하여 판독하는 기술로, 1자를 수십 개의 모눈으로 분할하여 특정한 모눈의 흑백 또는 자획형상의 특징에 의해 텍스트를 판독하는 기술이다.
텍스트 인식부(140)는 스캔 이미지에 포함된 텍스트를 광학식 문자 판독 방법을 이용하여 인식할 수 있다. 제어부(190)는 인식된 텍스트를 저장하기 위한 사용자 입력을 통해 인식된 텍스트를 저장부(150)에 저장할 수 있다.
스캔 이미지에 포함된 텍스트가 광학식 문자 판독을 통해 인식된 경우, 인식된 텍스트는 이동 스캐너(200)에 의해 드래그가 가능한 상태로 될 수 있다.
일 실시 예에서 인식된 텍스트는 메일을 통해 사용자 본인이나 다른 사용자에게 전송될 수 있다. 구체적으로, 사용자 인터페이스 화면에는 메일 아이콘(미도시)이 더 표시될 수 있고, 메일 아이콘이 선택된 경우, 메일 창이 표시되고, 표시된 메일 창을 통해 인식된 텍스트가 전달될 수 있다.
디스플레이 장치(100)의 제어부(190)는 인식된 텍스트를 다른 언어로 번역하기 위해 제2 언어를 선택하는 입력을 수신하는지 확인한다(S109).
만약, 번역을 위한 제2 언어 선택 입력을 수신한 경우, 제어부(190)는 인식된 텍스트를 제2 언어로 번역한다(S111). 일 실시 예에서 제어부(190)는 인식된 텍스트 중 일부 텍스트를 번역할 수 있다. 구체적으로, 제어부(190)는 이동 스캐너(200)의 드래그 동작을 통해 선택된 텍스트만을 제1 언어에서 제2 언어로 번역할 수 있다. 이에 대해서는 도 8 내지 도 9를 참조하여 설명한다.
도 8 및 도 9는 본 발명의 일 실시 예에 따라 선택 텍스트에 대한 번역 결과를 제공하는 화면이다.
먼저, 도 8을 참조하면, 작업 영역(610)에는 광학식 문자 판독에 의해 스캔 이미지가 텍스트로 변환된 텍스트 문서를 표시하고 있다.
작업 영역(610)에 표시된 텍스트 중 이동 스캐너(200)의 드래그 동작에 의해<announce>라는 단어가 선택되고, 이동 스캐너(200)의 우 버튼(212)가 선택되면, 디스플레이 장치(100)는 <announce>라는 단어의 일측에 정보 탭(670)을 표시할 수 있다. 이동 스캐너(200)의 드래그 동작에 의해 <announce>라는 단어가 선택된 경우, 선택된 단어는 하이라이트 될 수 있다.
정보 탭(670)은 번역 탭(671), 영역 재생 탭(673), 영역 저장 탭(674) 및 사전 탭(675)를 포함한다.
번역 탭(671)은 선택된 텍스트를 특정 언어로 번역하여 번역된 결과를 제공하기 위한 탭 일 수 있다.
영역 재생 탭(673)은 선택된 텍스트를 음성으로 변환하여 변환된 음성을 출력하기 위한 탭 일 수 있다.
영역 저장 탭(674)은 선택된 텍스트의 변환된 음성을 음성 파일로 저장하기 위한 탭 일 수 있다.
사전 탭(675)은 선택된 텍스트의 의미나, 예문을 제공하기 위한 탭 일 수 있다.
디스플레이 장치(100)가 이동 스캐너(200)로부터 번역 탭(671)을 선택하는 선택 입력을 수신한 경우, <announce>라는 단어가 한국어로 번역된 번역 결과를 도 9에서처럼 제공할 수 있다. 즉, 디스플레이 장치(100)가 이동 스캐너(200)로부터 번역 탭(671)을 선택하는 선택 입력을 수신한 경우, <announce>에 대한 한국어 번역 결과를 제공하는 번역 창(612)이 표시될 수 있다. 여기서, 번역될 언어는 영어에 한정될 필요는 없고, 사용자의 설정에 따라 다양한 언어로 설정될 수 있다.
일 실시 예에서 디스플레이 장치(100)는 번역 결과를 웹 페이지에 대응하는 서버로부터 획득할 수 있다. 번역 탭(671)을 선택하는 선택 입력이 수신된 경우, 디스플레이 장치(100)는 웹 서버에 접속하여 해당 텍스트에 대응하는 번역 결과를 획득할 수 있다.
또 다른 실시 예에서 디스플레이 장치(100)는 번역 결과를 bak 파일 형태로 저장된 저장부를 통해 획득할 수 있다.
또한, 도 8 및 도 9의 실시 예에서는 인식된 텍스트 중 단어에 한정하여 설명하였으나, 이에 한정될 필요는 없고, 문장 또는 전체 텍스트의 번역의 경우에도 적용될 수 있다.
다시 도 6을 설명한다.
한편, 번역을 위한 제2 언어 선택 입력이 수신되지 않은 경우, 제어부(190)는 인식된 텍스트 중 일부 텍스트를 선택하는 입력을 획득한다(S113).
제어부(190)는 이동 스캐너(200)의 드래그 동작을 통해 인식된 전체 텍스트 중 일부 텍스트를 선택하는 입력을 획득할 수 있다. 즉, 도 8에 도시된 바와 같이, 작업 영역(610)에 표시된 텍스트 중 이동 스캐너(200)의 드래그 동작에 의해<announce>라는 단어가 선택될 수 있다. 이동 스캐너(200)의 드래그 동작에 의해<announce>라는 단어가 선택된 경우, 선택된 단어는 하이라이트 될 수 있다.
디스플레이 장치(100)의 텍스트 음성 변환부(160)는 선택된 텍스트를 음성으로 변환하여 출력한다(S115). 일 실시 예에서 텍스트 음성 변환부(160)는 선택된 텍스트를 텍스트 음성 변환(Text To Speech, TTS)을 통해 음성으로 변환하여 출력할 수 있다.
이에 대해서는 도 10을 참조하여 설명한다.
도 10은 본 발명의 일 실시 예에 따라 선택된 텍스트를 음성으로 변환하여 출력하는 과정을 설명하기 위한 도면이다.
도 10을 참조하면, 작업 영역(610)에는 광학식 문자 판독에 의해 스캔 이미지가 텍스트로 변환된 텍스트 문서를 표시하고 있다.
작업 영역(610)에 표시된 텍스트 중 이동 스캐너(200)의 드래그 동작에 의해<This is a new method for text selection and edit for touch UI-UW based devices>라는 문장이 선택되고, 이동 스캐너(200)의 우 버튼(212)이 선택되면, 디스플레이 장치(100)는 <This is a new method for text selection and edit for touch UI-UW based devices>라는 문장의 일측에 정보 탭(670)을 표시할 수 있다.
디스플레이 장치(100)가 이동 스캐너(200)로부터 영역 재생 탭(673)을 선택하는 선택 입력을 수신한 경우, 텍스트 음성 변환부(160)는 <This is a new method for text selection and edit for touch UI-UW based devices>라는 문장을 음성으로 변환할 수 있고, 제어부(190)는 변환된 음성을 오디오 출력부(170)를 통해 출력할 수 있다.
사용자는 파일 재생 설정 영역(660)을 통해 출력되는 음성의 속도, 음성의 음량 등을 조절할 수 있다. 또한, 파일 재생 설정 영역(660)을 통해 선택된 텍스트를 반복하여 재생할 수도 있고, 출력된 음성을 음성 파일로 저장할 수 있다.
일 실시 예에서 음성 파일은 메일을 통해 사용자 본인이나 다른 사용자에게 전송될 수 있다. 구체적으로, 사용자 인터페이스 화면에는 메일 아이콘(미도시)이 더 표시될 수 있고, 메일 아이콘이 선택된 경우, 메일 창이 표시되고, 표시된 메일 창을 통해 음성 파일이 전달될 수 있다.
다시 도 6을 설명한다.
또 다른 실시 예에서 제어부(190)는 선택된 텍스트에 대한 사전적 의미를 제공할 수 있다. 이에 대해서는 도 11 내지 도 13을 참조하여 설명한다.
도 11 내지 도 13은 본 발명의 일 실시 예에 따라 선택 텍스트에 대한 사전적 의미를 제공하는 화면이다.
도 11을 참조하면, 작업 영역(610)에는 광학식 문자 판독에 의해 스캔 이미지가 텍스트로 변환된 텍스트 문서를 표시하고 있다.
작업 영역(610)에 표시된 텍스트 중 이동 스캐너(200)의 드래그 동작에 의해<announce>라는 단어가 선택되고, 이동 스캐너(200)의 우 버튼(212)가 선택되면, 디스플레이 장치(100)는 <announce>라는 단어의 일측에 정보 탭(670)을 표시할 수 있다. 이동 스캐너(200)의 드래그 동작에 의해 <announce>라는 단어가 선택된 경우, 선택된 단어는 하이라이트 될 수 있다.
디스플레이 장치(100)가 이동 스캐너(200)로부터 사전 탭(675)을 선택하는 선택 입력을 수신한 경우, <announce>라는 단어의 사전적 의미를 도 12에서처럼 제공할 수 있다. 즉, 디스플레이 장치(100)가 이동 스캐너(200)로부터 사전 탭(675)을 선택하는 선택 입력을 수신한 경우, <announce>에 대한 사전적 의미를 제공하는 사전 창(613)이 표시될 수 있다.
도 11 및 12에서는 사용자 인터페이스 화면(600)에 선택된 단어에 대한 사전 창(613)을 제공하는 실시 예를 설명하였으나, 이에 한정될 필요는 없다.
즉, <announce>라는 단어가 선택되고, 이동 스캐너(200)로부터 사전 탭(675)을 선택하는 선택 입력이 수신된 경우, 디스플레이 장치(100)는 도 13에 도시된 바와 같이, 해당 단어에 대한 사전적 의미를 제공하는 웹 페이지에 접속하여 해당 단어에 대한 사전적 의미를 제공할 수도 있다.
다음으로 도 14 및 도 15를 설명한다.
도 14 및 도 15는 본 발명의 일 실시 예에 따라 고대비 설정에 의해 사용자 인터페이스 화면의 레이아웃이 변경되는 과정을 보여준다.
사용자는 이동 스캐너(200)를 통해 고대비 설정 바(623)의 고대비 정도를 조절하여 사용자 인터페이스 화면(600)의 레이아웃을 변경시킬 수 있다. 예를 들어, 도 14에 도시된 바와 같이, 고대비 정도를 높이는 경우, 사용자 인터페이스 화면(600)의 레이아웃은 도 15와 같이 변경될 수 있다. 즉, 고대비 정도가 조절된 경우, 디스플레이 장치(100)는 작업 영역(610)에서 인식된 텍스트만을 강조하도록 인식된 텍스트를 제외한 나머지 요소들을 어둡게 하여 시인성을 향상시킬 수 있다.
다음으로 도 16 내지 도 17을 설명한다.
도 16 내지 도 17은 본 발명의 일 실시 예에 따라 상위 탭 영역 중 재생 탭이 선택된 경우, 제공되는 사용자 인터페이스 화면의 예를 보여준다.
이동 스캐너(200)에 의해 상위 탭 영역(630)의 재생 탭이 선택된 경우, 하위 탭 영역(640)에는 언어 탭 및 목소리 톤 탭이 표시될 수 있다.
언어 탭은 인식된 텍스트를 특정 언어의 음성으로 변환하여 출력하기 위한 탭일 수 있다. 언어 탭이 선택된 경우, 도 16에 도시된 바와 같이, 리스트 영역(650)은 복수의 언어를 선택할 수 있는 화면이 제공된다. 사용자는 원하는 언어를 선택하여 선택된 언어로 음성을 들을 수 있다. 예를 들어, 인식된 텍스트의 언어가 영어이고, 리스트 영역(650)에서 선택된 언어도 영어인 경우, 디스플레이 장치(100)는 인식된 텍스트를 영어 음성으로 출력할 수 있다.
목소리 톤 탭은 인식된 텍스트를 특정 화자의 음성으로 변환하여 출력하기 위한 탭 일 수 있다. 목소리 톤 탭이 선택된 경우, 도 17에 도시된 바와 같이, 리스트 영역(650)은 복수의 화자를 선택할 수 있는 화면이 제공된다. 사용자는 원하는 화자를 선택하여 선택된 화자의 음성을 들을 수 있다.
본 발명의 다양한 실시 예에 따르면, 사용자는 다양한 조건에 따라 인식된 텍스트를 음성으로 들을 수 있어 맞춤형 어학 서비스의 제공이 가능하다.
또한, 고대비 설정 및 변환된 음성을 음성 파일로 저장하는 기능 등을 통해 시각 장애인에 적합한 서비스를 제공할 수 있다.
본 발명의 일실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
상기와 같이 설명된 디스플레이 장치는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

Claims (10)

  1. 디스플레이 장치의 동작 방법에 있어서,
    이동 스캐너로부터 획득한 스캔 이미지를 사용자 인터페이스 화면에 표시하는 단계;
    표시된 스캔 이미지에 포함된 텍스트를 인식하는 단계;
    인식된 텍스트 중 일부 텍스트를 선택하는 입력을 수신하는 단계; 및
    선택된 텍스트를 음성으로 변환하여 출력하는 단계를 포함하는
    디스플레이 장치의 동작 방법.
  2. 제1항에 있어서,
    상기 선택된 텍스트를 음성으로 변환하여 출력하는 단계는
    상기 이동 스캐너를 통해 입력된 명령에 따라 선택된 텍스트의 일 측에 영역 재생 탭을 표시하는 단계와
    상기 표시된 영역 재생 탭의 선택을 수신하는 단계와
    상기 영역 재생 탭의 선택에 따라 상기 선택된 텍스트를 음성으로 변환하여 출력하는 단계를 포함하는
    디스플레이 장치의 동작 방법.
  3. 제2항에 있어서,
    상기 사용자 인터페이스 화면은
    상기 출력되는 음성의 속도의 조절, 음성의 음량의 조절, 음성의 반복 재생의 설정을 위한 파일 재생 설정 영역을 포함하는
    디스플레이 장치의 동작 방법.
  4. 제1항에 있어서,
    상기 이동 스캐너를 통해 입력된 명령에 따라 선택된 텍스트의 일 측에 선택된 텍스트에 대한 정보를 제공하기 위한 정보 탭을 표시하는 단계를 더 포함하는
    디스플레이 장치의 동작 방법.
  5. 제4항에 있어서,
    상기 정보 탭은
    선택된 텍스트를 특정 언어로 번역하여 번역된 결과를 제공하기 위한 번역 탭, 선택된 텍스트를 음성으로 변환하여 변환된 음성을 출력하기 위한 영역 재생 탭, 선택된 텍스트의 변환된 음성을 음성 파일로 저장하기 위한 영역 저장 탭 및 선택된 텍스트의 의미나, 예문을 제공하기 위한 사전 탭을 포함하는
    디스플레이 장치의 동작 방법.
  6. 디스플레이 장치에 있어서,
    이동 스캐너로부터 획득한 스캔 이미지를 사용자 인터페이스 화면에 표시하는 디스플레이부;
    표시된 스캔 이미지에 포함된 텍스트를 인식하는 텍스트 인식부;
    인식된 텍스트 중 일부 텍스트를 선택하는 입력을 수신하는 사용자 입력부 및
    선택된 텍스트를 음성으로 변환하여 출력하는 텍스트 음성 변환부를 포함하는
    디스플레이 장치.
  7. 제6항에 있어서,
    상기 디스플레이부는
    상기 이동 스캐너를 통해 입력된 명령에 따라 선택된 텍스트의 일 측에 영역 재생 탭을 표시하고,
    상기 사용자 입력부는
    상기 표시된 영역 재생 탭의 선택을 수신하고,
    상기 텍스트 음성 변환부는
    상기 영역 재생 탭의 선택에 따라 상기 선택된 텍스트를 음성으로 변환하여 출력하는
    디스플레이 장치.
  8. 제7항에 있어서,
    상기 사용자 인터페이스 화면은
    상기 출력되는 음성의 속도의 조절, 음성의 음량의 조절, 음성의 반복 재생의 설정을 위한 파일 재생 설정 영역을 포함하는
    디스플레이 장치.
  9. 제6항에 있어서,
    상기 디스플레이부는
    상기 이동 스캐너를 통해 입력된 명령에 따라 선택된 텍스트의 일 측에 선택된 텍스트에 대한 정보를 제공하기 위한 정보 탭을 표시하는
    디스플레이 장치.
  10. 제9항에 있어서,
    상기 정보 탭은
    선택된 텍스트를 특정 언어로 번역하여 번역된 결과를 제공하기 위한 번역 탭, 선택된 텍스트를 음성으로 변환하여 변환된 음성을 출력하기 위한 영역 재생 탭, 선택된 텍스트의 변환된 음성을 음성 파일로 저장하기 위한 영역 저장 탭 및 선택된 텍스트의 의미나, 예문을 제공하기 위한 사전 탭을 포함하는
    디스플레이 장치.
KR1020140025198A 2014-03-03 2014-03-03 디스플레이 장치 및 그의 동작 방법 KR20150103591A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140025198A KR20150103591A (ko) 2014-03-03 2014-03-03 디스플레이 장치 및 그의 동작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140025198A KR20150103591A (ko) 2014-03-03 2014-03-03 디스플레이 장치 및 그의 동작 방법

Publications (1)

Publication Number Publication Date
KR20150103591A true KR20150103591A (ko) 2015-09-11

Family

ID=54243761

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140025198A KR20150103591A (ko) 2014-03-03 2014-03-03 디스플레이 장치 및 그의 동작 방법

Country Status (1)

Country Link
KR (1) KR20150103591A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190093777A (ko) * 2018-01-15 2019-08-12 주식회사 젠리코 어학학습 콘텐츠 제공장치
WO2019194566A1 (ko) * 2018-04-05 2019-10-10 양진호 이미지 내의 텍스트 음성 변환 장치 및 방법
KR20200139599A (ko) * 2019-06-04 2020-12-14 주식회사 위메프 상담 서비스 제공 방법 및 장치

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190093777A (ko) * 2018-01-15 2019-08-12 주식회사 젠리코 어학학습 콘텐츠 제공장치
WO2019194566A1 (ko) * 2018-04-05 2019-10-10 양진호 이미지 내의 텍스트 음성 변환 장치 및 방법
KR20200139599A (ko) * 2019-06-04 2020-12-14 주식회사 위메프 상담 서비스 제공 방법 및 장치

Similar Documents

Publication Publication Date Title
US11574115B2 (en) Method of processing analog data and electronic device thereof
KR102129536B1 (ko) 모바일 단말기 및 그의 제어 방법
KR101756042B1 (ko) 입력 처리 방법, 장치 및 설비
US20200341600A1 (en) Method for Page Displaying and Terminals
US20070035521A1 (en) Open virtual input and display device and method thereof
CN104157171A (zh) 一种点读***及其方法
CN108829686B (zh) 翻译信息显示方法、装置、设备及存储介质
KR20170014353A (ko) 음성 기반의 화면 내비게이션 장치 및 방법
JP2018530015A (ja) テキスト選択方法及び装置
US8880407B2 (en) Projector, projection system, and retrieved information displaying method
CN104636326A (zh) 一种文字信息的翻译方法及装置
US20120133650A1 (en) Method and apparatus for providing dictionary function in portable terminal
KR101709427B1 (ko) 정보를 선택하는 방법 및 디바이스
US9600467B2 (en) Display apparatus and character correcting method thereof
CN105635609A (zh) 显示设备和显示方法
CN106527945A (zh) 文本信息提取方法及装置
EP3751448B1 (en) Text detecting method, reading assisting device and medium
WO2019205552A1 (zh) 在线文档的评论方法和装置
JP2014049140A (ja) 使用者デバイスで入力文字を利用した知能型サービス提供方法及び装置
CN108962220A (zh) 多媒体文件播放场景下的文本显示方法及装置
CN105139848B (zh) 数据转换方法和装置
KR101395723B1 (ko) 전자칠판 시스템
CN109388810A (zh) 一种数据处理方法、装置和用于数据处理的装置
KR20150059989A (ko) 문서 인식 방법 및 장치
CN103888531A (zh) 阅读位置同步方法、阅读位置获取方法和装置

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination