CN103491445B - 图像显示装置、移动终端以及操作它们的方法 - Google Patents

Abstract

本发明提供一种图像显示装置、移动终端以及操作它们的方法。操作图像显示装置的方法包括以下步骤：进入无线音频发送模式，利用第一无线通信方法执行与移动终端的同步，从多媒体数据提取音频数据，以及利用与所述第一无线通信方法不同的第二无线通信方法来向所述移动终端发送所提取的音频数据。根据这种构造，可以改进用户便利性。

Description

图像显示装置、移动终端以及操作它们的方法

技术领域

本发明的实施方式涉及图像显示装置、移动终端以及用于操作它们的方法，并且更具体地说，涉及能够提高用户便利性的图像显示装置、移动终端以及用于操作它们的方法。

背景技术

图像显示装置用于向用户显示图像。用户可以利用图像显示装置来观看广播节目。图像显示装置可以显示用户从广播台发送的广播节目当中在显示器上选定的广播节目。广播方面的近期趋势是世界范围地从模拟广播向数字广播转变。

数字广播发送数字音频和视频信号。数字广播提供了超过模拟广播的许多优点，如抵御噪声的鲁棒性、较少的数据丢失、易纠错，以及提供清晰、高分辨率图像的能力。与模拟广播相比，数字广播还允许交互式观众（viewer）服务。

发明内容

因此，鉴于上述问题而作出了本发明，并且本发明的一目的是，提供一种能够改进用户便利性的图像显示装置、移动终端以及操作它们的方法。

本发明的另一目的是，提供这样一种图像显示装置、移动终端以及操作它们的方法，即，其能够按无线方式便利地在图像显示装置与移动终端之间发送和回放音频数据。

根据本发明的一方面，上述和其它目的可以通过提供操作图像显示装置的方法来实现，该方法包括以下步骤：进入无线音频发送模式，利用第一无线通信方法执行与移动终端的同步，从多媒体数据提取音频数据，以及利用与第一无线通信方法不同的第二无线通信方法来向移动终端发送所提取的音频数据。

根据本发明另一方面，提供了一种操作移动终端的方法，该方法包括以下步骤：向图像显示装置发送无线音频发送模式进入信号，从图像显示装置接收有关要发送的音频数据的信息，基于有关所述音频数据的信息，向图像显示装置发送指示是否能够解码要接收的音频数据的解码信息，从图像显示装置接收具有与所述解码信息相对应的编码状态的音频数据，以及回放所接收的音频数据。

根据本发明另一方面，提供了一种图像显示装置，该图像显示装置包括：显示器；网络接口，该网络接口被设置成与移动终端交换数据；以及控制器，该控制器被设置成，根据无线音频发送模式利用第一无线通信方法来执行与移动终端的同步，从多媒体数据提取音频数据，以及利用与第一无线通信方法不同的第二无线通信方法来向移动终端发送所提取的音频数据。

根据本发明另一方面，提供了一种移动终端，该移动终端包括：音频输出模块，该音频输出模块被设置成输出要回放的音频信号；无线通信单元，该无线通信单元被设置成与图像显示装置交换数据；以及控制器，该控制器被设置成：向图像显示装置发送无线音频发送模式进入信号，在从图像显示装置接收到有关音频数据的信息的情况下基于有关该音频数据的信息，向图像显示装置发送指示是否能够解码要接收的音频数据的解码信息，而在从图像显示装置接收到具有与所述解码信息相对应的编码状态的音频数据的情况下回放所接收的音频数据。

附图说明

根据下面结合附图的详细描述，将更清楚地理解本发明的上述和其它目的、特征以及其它优点，附图中：

图1是示出根据本发明一实施方式的图像显示***的构造的框图；

图2是示出用户利用图1的图像显示***收听音频信号的实例的图；

图3是示出图1的图像显示装置的内部构造的框图；

图4是示出图3的控制器的示例的框图；

图5是示出图1的无线路由器的内部构造的框图；

图6是示出图1的移动终端的内部构造的框图；

图7是例示根据本发明一实施方式的操作图像显示装置的方法的流程图；

图8是例示根据本发明一实施方式的操作移动终端的方法的流程图；

图9是例示根据本发明一实施方式的图像显示***的操作的流程图；

图10至图14是涉及用于描述图7的操作图像显示装置的方法或图8的操作移动终端的方法的各种示例的视图；

图15是例示根据本发明另一实施方式的操作图像显示装置的方法的流程图；

图16是例示根据本发明另一实施方式的操作移动终端的方法的流程图；

图17至图19是涉及用于描述图15的操作图像显示装置的方法或图16的操作移动终端的方法的各种示例的视图；

图20是例示根据本发明另一实施方式的操作图像显示装置的方法的流程图；

图21是例示根据本发明另一实施方式的操作移动终端的方法的流程图；以及

图22A至图23D是涉及用于描述图20的操作图像显示装置的方法或图21的操作移动终端的方法的各种示例的视图。

具体实施方式

参照附图，对本发明的示例性实施方式进行描述。

为描述组件的名称所附的术语“模块”和“单元”在此被用于帮助理解这些组件，由此，它们不应被视为具有特定含义或任务。因此，术语“模块”和“单元”可以互换地使用。

图1是示出根据本发明一实施方式的图像显示***的框图。

参照图1，根据本发明该实施方式的图像显示***10可以包括：图像显示装置100、移动终端600（例如，移动终端600a和600b）以及网络路由器500。

图像显示装置100可以接收内容。例如，图像显示装置可以经由天线接收广播信号，经由高清多媒体接口（HDMI）端子接收来自外部装置的外部输入信号，或者经由网络接收来自预定网络路由器500的流信号。

图像显示装置100可以处理所接收的广播信号、外部输入信号或流信号，在显示器180上显示视频以及输出音频。

在本发明该实施方式中，图像显示装置100按无线音频发送模式，向外部装置（例如，移动终端600）无线地发送音频数据。针对音频发送，图像显示装置100可以与移动终端执行直接或间接通信。

在图1中，经由网络路由器500在图像显示装置100与移动终端600之间交换数据。

图像显示装置100可以包括：TV、监视器、计算机、膝上型电脑、平板PC等，它们都能够显示广播内容。

网络路由器500提供网络，使得数据在图像显示装置100与移动终端600之间进行交换。

例如，如果网络路由器500是无线网络路由器，则可以在利用相同外部因特网协议（IP）地址的同时将多个虚拟IP地址分别内部地分配给图像显示装置100和移动终端600。无线信道可以与虚拟IP地址相对应地分配。

即，网络路由器500可以与第一虚拟IP地址相对应地向图像显示装置100分配第一无线信道，与第二虚拟IP地址相对应地向第一移动终端600a分配第二无线信道，以及与第三虚拟IP地址相对应地向第二移动终端600b分配第三无线信道。

网络路由器500经由分别分配给图像显示装置100与移动终端600a和600b的信道来控制图像显示装置100与移动终端600a和600b之间的数据交换。

如果能够执行无线数据通信的电子装置被添加至由网络路由器500提供的无线网络，则网络路由器500可以附加地向电子装置分配虚拟IP地址和无线信道，如上所述。

网络路由器500可以提供分别对应于图像显示装置100和移动终端600a与600b的无线信道的环境信息。例如，网络路由器可以提供无线信道的安全信息、信道名称信息、信号强度信息等。

由网络路由器500提供的无线网络可以是基于WiFi的无线网络。

移动终端600可以执行话音通信或数据通信，并且移动终端600的示例包括：移动电话、智能电话、膝上型电脑、平板PC等。

在本发明实施方式中，移动终端600可以按无线音频接收模式，从外部装置（例如，图像显示装置100）无线地接收音频数据。针对音频数据接收，移动终端600可以与图像显示装置100执行直接或间接通信。

在本发明实施方式中，如果执行无线音频发送/接收模式，则首先，利用第一无线通信方法同步图像显示装置100和移动终端600a与600b。即，控制数据可以从移动终端600a与600b发送至图像显示装置100，而与控制数据相对应的反馈数据可以从图像显示装置100发送至移动终端600a与600b。

控制数据可以包括以下信息中的至少一种：无线音频发送模式开始或结束信息、无线信道设置请求信息、无线信道改变请求信息、已分配无线信道信息、解码信息、无线信道环境信息或回放延迟信息（playback delay information）。反馈数据可以包括以下信息中的至少一种：有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息、回放时间点信息，或当前时间信息。

为了保证数据通信可靠性，第一无线通信方法是双向通信方法，并且可以是基于发送控制协议（TCP）的通信方法。

例如，如果无线音频接收模式开始信息作为TCP包数据经由无线路由器（或网络路由器）500从第一移动终端600a发送至图像显示装置100，则图像显示装置100可以针对无线音频发送模式，经由无线路由器500向第一移动终端600a发送有关由图像显示装置回放（或再现）的多媒体数据中的要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等。

接下来，如果完成了图像显示装置100与移动终端600a和600b之间的同步，则图像显示装置100可以利用与第一无线通信方法不同的第二无线通信方法，经由无线路由器500向移动终端600a和600b发送音频数据。

针对音频数据的低延迟流以及多用户支持，第二无线通信方法可以是单向且基于多播的通信方法，并且可以是基于实时发送协议（RTP）/数据报协议（UDP）的通信方法。

例如，如果完成了第一和第二移动终端600a和600b与图像显示装置100之间的同步，则图像显示装置100可以经由无线路由器500，向第一和第二移动终端600a和600b发送RTP/UDP包，该RTP/UDP包包括当前由图像显示装置100回放的广播图像的音频信号。

所发送的音频信号可以根据该音频信号是否可以在移动终端中解码、无线信道环境、移动终端的回放延迟而自适应地改变。例如，各种音频信号（如立体声声道的解复用音频信号、单声道的解复用音频信号、立体声声道的解码音频信号、单声道的解码音频信号、立体声声道的编码音频信号以及单声道的编码音频信号）可以从图像显示装置100发送至移动终端600a和600b。

当发送音频数据时，可以将音频数据的回放时间点信息、当前时间信息等发送至移动终端600a和600b。这时，可以将回放时间点信息和当前时间信息以RTP/UDP包的形式与音频数据一起，经由无线路由器500发送至移动终端600a和600b，或者可以经由无线路由器500发送至移动终端600a和600b，作为与音频数据分离的TCP包数据。

不同于图1，图像显示装置100与移动终端600a和600b之间的无线数据通信可以不需要网络路由器500。这时，可以在图像显示装置100与移动终端600a和600b之间执行基于WiFi Direct的数据通信。

图2是示出用户利用图1的图像显示***收听音频信号的实例的图。

参照图2，如果在根据本发明实施方式的图像显示***中启动无线音频发送/接收模式，则在图像显示装置100上显示的多媒体数据的视频数据50可以连续回放并显示，并且该多媒体数据的音频数据可以发送至移动终端600。移动终端600回放从图像显示装置100接收的音频数据。

于是，用户800可以通过移动终端600利用耳机700，便利地收听与显示在图像显示装置100上的多媒体数据的视频数据相对应的音频数据。

具体来说，在无线音频发送模式中，图像显示装置100的音频输出单元185处于静音模式，并由此不能直接输出音频信号。由此，不希望收听音频数据的其它用户可以在图像显示装置100回放多媒体数据时不收听音频信号。

在图2中，表示静音模式的对象60被显示在图像显示装置100的显示器180上。

图3是示出图1的图像显示装置的内部构造的框图。

参照图3，根据本发明实施方式的图像显示装置100包括：广播接收单元105、外部装置接口130、存储器140、用户输入接口150、传感器单元、控制器170、显示器180、音频输出单元185以及遥控器200。

广播接收单元105可以包括：调谐器单元110、解调制器120和/或网络接口135。如需要的话，广播接收单元105可以仅包括调谐器单元110和解调制器120，或者仅包括网络接口135。

调谐器单元110调谐至通过天线接收的射频（RF）广播信号当中的或者与预先存储在图像显示装置中的所有频道相对应的RF广播信号当中的、与用户选择的频道相对应的射频（RF）广播信号。所调谐的RF广播被转换成中频（IF）信号或基带音频/视频（AV）信号。

例如，如果所调谐的RF广播信号是数字广播信号，则它被转换成数字IF信号DIF，而如果所调谐的RF广播信号是模拟广播信号，则它被转换成模拟基带AV信号（复合视频消隐同步/声音中频（CVBS/SIF））。即，调谐器单元110可以处理数字广播信号或模拟广播信号。从调谐器单元110输出的模拟基带AV信号（CVBS/SIF）可以直接输入至控制器170。

调谐器单元110可以能够从先进电视***委员会（ATSC）单载波***或者从数字视频广播（DVB）多载波***接收RF广播信号。

调谐器单元110可以从通过天线接收到的多个RF信号中，顺序地选择与通过频道存储功能预先存储在图像显示装置中的所有广播频道相对应的许多RF广播信号，并且可以将所选择的RF广播信号转换成IF信号或基带A/V信号。

调谐器单元110可以包括多个调谐器，以便接收多个频道的广播信号。另选的是，调谐器单元可以包括用于同时接收多个频道的广播信号的单个调谐器。

解调制器120接收来自调谐器单元110的数字IF信号DIF，并且解调制该数字IF信号DIF。

解调制器120可以执行解调制和信道解码，由此获取流信号TS。流信号可以是复用了视频信号、音频信号和数据信号的信号。

从解调制器120输出的流信号可以输入至控制器170，并由此经受解复用和A/V信号处理。所处理的视频和音频信号被分别输出至显示器180和音频输出单元185。

外部装置接口130可以用于向所连接的外部装置发送数据或从所连接的外部装置接收数据。针对接口连接，外部装置接口130可以包括A/V输入/输出（I/O）单元和/或无线通信模块。

外部装置接口130可以无线地或者有线地连接至外部装置，如数字万用盘（DVD）播放器、Blu-ray播放器、游戏控制台、摄像机、摄录一体机，或计算机（例如，膝上型计算机），以执行有关外部装置的输入/输出操作。

A/V I/O单元外部地接收来自外部装置的视频和音频信号。无线通信单元可以与另一电子装置执行短距离无线通信。

网络接口135用作图像显示装置100与有线/无线网络（如因特网）之间的接口。网络接口135可以包括有线通信单元或无线通信单元。

例如，网络接口135可以通过网络接收由因特网或内容提供方或网络运营商提供的内容或数据。

网络接口135可以与网络路由器500执行数据通信，并且可以在网络路由器500的网络内执行数据交换。

在本发明实施方式中，在无线音频发送模式中，针对与移动终端600的同步，网络接口135可以经由网络路由器500接收来自移动终端600的TCP包格式的控制数据，并且经由网络路由器500向移动终端600发送TCP包格式的反馈数据。

在完成同步之后，网络接口135可以经由网络路由器500向移动终端600发送与由图像显示装置回放（或再现）的多媒体数据相对应的、RTP/UDP包格式的音频数据。

存储器140可以存储供控制器170处理和控制信号所需的各种程序，并且还可以存储已处理的视频、音频以及数据信号。

存储器140可以临时存储从外部装置接口130接收到的视频、音频和/或数据信号。存储器140可以通过频道映射表（channel map）的频道存储功能存储与预定广播频道有关的信息。

虽然存储器140在图3中被示出为与控制器170（本发明不限于此）分离地配置，但存储器140也可以被并入控制器170中。

用户输入接口150将用户输入的信号发送给控制器170或者将从控制器170接收的信号发送给用户。

例如，用户输入接口150可以发送/接收来自遥控器200的各种用户输入信号，如开机/关机信号、频道选择信号，以及屏幕设置信号，可以向控制器170提供从本地的键接收的用户输入信号，如开关机键、频道键以及音量键的输入，和设置值，或者可以向控制器170提供从用于感测用户姿势的传感器单元接收的用户输入信号，或者可以向传感器单元发送从控制器170接收的信号。

控制器170可以将从调谐器单元110、解调制器120或外部装置接口130接收的流信号解复用成许多信号，将解复用的信号处理成音频和视频数据，并输出该音频和视频数据。

由控制器170处理的视频信号可以在显示器180上显示为图像。由控制器170处理的视频信号还可以通过外部装置接口130发送至外部输出装置。

由控制器170处理的音频信号可以输出至音频输出单元185。而且，由控制器170处理的音频信号可以通过外部装置接口130发送至外部输出装置。

控制器170可以包括：DEMUX、视频处理器等，将参照图4对它们进行详细描述。

控制器170可以控制图像显示装置100的总体操作。例如，控制器170控制调谐器单元110，以调谐至与用户所选的频道或预存储的频道相对应的RF信号。

控制器170可以根据通过用户输入接口150输入的用户命令或内部程序来控制图像显示装置100。

控制器170可以控制显示器180显示图像。显示在显示器180上的图像可以是二维（2D）或三维（3D）静止图像或运动图像。

控制器170基于由摄像机单元拍摄的图像来识别用户的位置。例如，可以检测用户与图像显示装置100之间的距离（z轴坐标）。可以检测与用户的位置相对应的、图像显示装置100中的x轴坐标和y轴坐标。

还可以包括用于生成与频道信号或外部输入信号相对应的缩略图图像的频道浏览处理器。该频道浏览处理器可以接收从解调制器120输出的流信号TS或从外部装置接口130输出的流信号，从所接收的流信号提取图像，并生成缩略图图像。所生成的缩略图图像可以被解码成要与所解码的图像一起输入至控制器170的流形式。控制器170可以利用所输入的缩略图图像，在显示器180上显示包括多个缩略图图像的缩略图列表。

该缩略图列表可以按在显示预定图像的状态下的区域的一部分中显示缩略图列表的简要查看方法来显示，或者可以按在全部区域中显示缩略图列表的完全查看方法来显示。该缩略图列表中的缩略图图像可以顺序地更新。

显示器180转换由控制器170处理的视频信号、数据信号、OSD信号以及控制信号，或者由外部装置接口130接收的视频信号、数据信号以及控制信号，并生成驱动信号。

显示器180可以是等离子显示板（PDP）、液晶显示器（LCD）、有机发光二极管（OLED）显示器或柔性显示器。具体来说，显示器180可以是3D显示器。

为了观看3D图像，显示器180可以被分成补充显示方法和单一显示方法。

在单一显示方法中，3D图像在显示器180上实现，而不需要分离的辅助装置（例如，眼镜）。单一显示方法例如可以包括：透镜法（lenticular method），视差屏障（parallaxbarrier）等。

在补充显示方法中，3D图像利用辅助装置作为观看装置在显示器180上实现。补充显示方法包括诸如头戴式显示器（HMD）法或眼镜法等的各种方法。

眼镜法可以被分成诸如偏光眼镜法的被动方法和诸如快门眼镜法的主动方法。HMD法可以被分成被动方法和主动方法。

观看装置可以是能够使得用户观看3D图像的3D眼镜。3D眼镜可以包括被动型偏光眼镜、主动型快门眼镜或HMD型眼镜。

观看装置可以是能够使得用户观看不同图像的眼镜。例如，第一观看装置可以使得用户能够仅观看第一图像，而第二观看装置可以使得用户能够仅观看第二图像。

如果显示器180是触摸屏，则显示器180不仅可以充任输出装置而且可以充任输入装置。

音频输出单元185接收由控制器170处理的音频信号，并将所接收的音频信号输出为声音。

摄像机单元拍摄用户的图像。摄像机单元可以通过一个摄像机来实现，但本发明不限于此。即，摄像机单元可以通过多个摄像机来实现。摄像机单元可以在显示器180的上侧嵌入图像显示装置100中，或者可以分离地设置。由摄像机单元拍摄的图像信息可以输入至控制器170。

控制器170可以根据由摄像机单元所拍摄的图像、由传感器单元所感测的信号，或者所拍摄图像和所感测信号的组合来感测用户姿势。

遥控器200向用户输入接口150发送用户输入。针对发送用户输入，遥控器200可以使用各种通信技术，如IR通信、RF通信、蓝牙（bluetooth）、超宽带（UWB）以及ZigBee。另外，遥控器200可以接收来自用户输入接口150的视频信号、音频信号或数据信号，并且可视地或可听地输出所接收的信号。

上述图像显示装置100可以是能够接收数字广播的固定或移动数字广播接收器。

图3所示的图像显示装置100的框图仅仅是示例性的。根据实际实现中图像显示装置100的规范，图像显示装置100的组件可以被组合或省略或者可以添加新组件。即，若需要的话，可以将两个或更多个组件并为一个组件或者可以将一个组件设置为分离的组件。另外，每一个框的功能出于描述本发明实施方式的目的来描述，由此，具体操作或装置不应被视为对本发明的范围和精神进行限制。

不同于图3，图像显示装置100可以不包括图3中所示的调谐器单元110和解调制器120，并且可以经由网络接口135或外部装置接口130接收广播内容，并回放广播内容。

图4是示出图3所示的控制器的内部构造的框图。

参照图4，根据本发明实施方式的控制器170可以包括：DEMUX310、音频处理器315、视频处理器320、处理器330、OSD生成器340以及混合器345。控制器170还可以包括：数据处理器。

DEMUX310对输入流进行解复用。例如，DEMUX310可以将MPEG-2TS解复用成视频信号、音频信号和数据信号。输入至DEMUX310的流信号可以从调谐器单元110、解调制器120或外部装置接口135接收。

音频处理器315可以处理解复用的音频信号。针对音频处理，音频处理器315可以包括各种解码器。针对向移动终端600有效发送音频数据，音频处理器315还可以包括编码器。

在根据本发明实施方式的图像显示装置100的无线音频发送模式中，向移动终端600发送的音频数据可以是：1）经DEMUX310解复用而未经音频处理器315解码的音频数据，2）经DEMUX310解复用、经音频处理器315解码并且被编码以发送至移动终端600的音频数据，或3）经DEMUX310解复用并且经音频处理器315解码的音频数据。

在音频数据1）的实例中，尽管获取要发送至移动终端600的音频数据的时间较短，但因为不解码该音频数据，所以如果接收该音频数据的移动终端600不包括解码器，则该移动终端不能解码该音频数据。

在音频数据2）的实例中，因为所解码的音频数据（即，未压缩的音频数据）被编码，所以可以改进向移动终端600无线地发送音频数据时的发送效率，并且可以在考虑包括在移动终端中的解码器的情况下编码该音频数据。然而，因为图像显示装置100执行解复用、解码以及编码，所以难于在图像显示装置与移动终端之间执行同步。

在音频3）的实例中，因为解复用的音频数据被解码，所以移动终端600可以接收未压缩的音频数据。因此，移动终端600可以立即回放音频数据，而无需执行另外的解码步骤。当在图像显示装置100与移动终端600之间无线发送时，要发送的无线数据的量增加，由此，针对无线信道需要宽的频率带宽。

在本发明实施方式中，音频数据1）至3）中的任一个根据无线信道环境或移动终端的回放延迟信息自适应地发送，这将参照图20及其随后的图进行描述。

音频处理器315还可以调节音频信号的低音、高音以及音量。

视频处理器320可以处理解复用的视频信号。针对视频信号处理，视频处理器320可以包括视频解码器325和缩放器（scaler）335。

视频解码器325解码解复用的视频信号，并且缩放器335对所解码的视频信号的分辨率进行缩放，使得视频信号可以显示在显示器180上。

处理器330可以控制图像显示装置100或控制器170的总体操作。例如，处理器330控制调谐器单元110，以调谐至与用户所选的频道或预存储频道相对应的RF信号。

处理器330可以根据通过用户输入接口150输入的用户命令或内部程序来控制图像显示装置100。

处理器330可以控制网络接口135或外部装置接口130的数据发送。

处理器330可以控制控制器170的DEMUX310、视频处理器320和OSD生成器340的操作。

OSD生成器340自发地或根据用户输入生成OSD信号。例如，OSD生成器340可以根据用户输入信号生成这样的信号，即根据该信号多种信息在显示器180上被显示图形或文本。OSD信号可以包括各种数据，如用户界面（UI）、多种菜单、窗口小部件、图标等。而且，OSD信号可以包括2D对象和/或3D对象。

OSD生成器340可以生成能够根据从遥控器200接收的指示装置（pointingdevice）显示在显示器上的指针。具体来说，这种指针可以由指示信号处理器生成，并且OSD生成器340可以包括这种指示信号处理器。另选的是，指示信号处理器可以与OSD生成器340分离地设置。

混合器345可以混合由视频处理器320处理的解码视频信号与由OSD生成器340生成的OSD信号。

控制器170的数据处理器可以处理解复用的数据信号。例如，如果解复用的数据信号被编码，则数据处理器可以解码该数据信号。编码的数据信号可以是电子节目指南（EPG）信息，该EPG信息包括诸如每一个频道的广播节目的开始时间和结束时间之类的广播信息。

图4所示的控制器170的框图是示例性的。框图的这些组件可以集成或省略，或者可以根据控制器170的规范而添加新组件。

图5是示出图1的无线路由器的内部构造的框图。

参照图5，网络路由器500可以包括：网络接口530、存储器540以及处理器520。

网络接口530可以与图像显示装置100或移动终端600交换数据。

更具体地说，在无线音频发送模式中，针对与移动终端600的同步，网络接口530可以接收来自移动终端600的基于TCP包的控制数据，向图像显示装置100发送基于TCP包的控制数据，接收来自图像显示装置100的基于TCP包的反馈数据，并向移动终端600发送基于TCP包的反馈数据。

接下来，如果完成了同步，则网络接口530可以接收来自图像显示装置100的基于RTP/UDP包的音频数据，并且向移动终端600发送基于RTP/UDP包的音频数据，用于向移动终端600的无线音频数据发送。

存储器540可以存储外部IP地址和内部分配的虚拟IP地址，以提供与该虚拟IP地址相对应的无线网络和无线信道名称、频率范围和安全信息。存储器540可以存储图像显示装置100的名称，和经由网络路由器500连接至网络的移动终端600的名称。

处理器520控制网络路由器500的总体操作。

如上所述，针对无线音频发送/接收模式，处理器可以控制图像显示装置100与移动终端600之间的数据交换。如果将一电子装置添加至网络，则处理器可以附加地为该电子装置分配虚拟IP地址和无线信道。处理器可以向图像显示装置100和移动终端600提供无线信道环境信息。例如，处理器可以提供无线信道的安全信息、信道名称信息、信号强度信息等。

图6是示出图1的移动终端的内部构造的框图。

参照图6，移动终端600可以包括：无线通信单元610、音频/视频（A/V）输入单元620、用户输入单元630、感测单元640、输出单元650、存储器单元660、接口单元670、控制器680以及电源690。

根据本发明实施方式的无线通信单元610可以经由无线路由器500向图像显示装置100发送基于TCP包的控制数据，并且经由无线路由器500接收来自图像显示装置100的基于TCP包的反馈数据，用于在无线音频接收模式下与图像显示装置100的同步。

如果完成同步，则针对无线音频接收模式，无线通信单元610可以经由无线路由器500接收来自图像显示装置100的基于RTP/UDP包的音频数据。

无线通信单元610可以包括：广播接收模块611、移动通信模块613、无线因特网模块615、NFC模块617，以及全球定位***（GPS）模块619。

广播接收模块611通过广播频道从外部广播管理服务器接收广播信号和广播相关信息中的至少一种。该广播频道可以包括卫星频道和陆基频道。

通过广播接收模块611接收的广播信号和/或广播相关信息可以存储在存储器660中。

移动通信模块613在移动通信网络上向或从基站、外部终端以及服务器中的至少一个发送或接收无线信号。无线信号可以包括：话音呼叫信号、视频呼叫信号或与发送和接收文本/多媒体消息相关联的各类数据。

无线因特网模块615是可以设置至移动终端600的、用于无线因特网接入的内部或外部模块。例如，无线因特网模块615可以执行基于WiFi的无线通信或基于WiFi Direct的无线通信。

NFC模块617可以执行NFC。如果电子装置接近预定距离内的移动终端600，即，如果电子装置被加标签，则NFC模块617可以从或向包括NFC标签的电子装置或其中安装有NFC模块的电子装置接收或发送数据。

作为短距离无线通信技术，蓝牙（bluetooth）、射频标识（RFID）、红外数据协会（IrDA）、超宽带（UWB）以及ZigBee都可以使用。

GPS模块619可以从多个GPS卫星接收位置信息。

A/V输入单元610接收音频信号或视频信号，并且可以包括摄像机621和麦克风623。

用户输入单元630生成使得用户能够控制终端的操作的键输入数据。用户输入单元630可以包括：键盘、圆顶开关（dome switch）、触摸板（静压力/静电）等。具体来说，如果触摸板和显示器651具有分层结构，则其可以被称作触摸屏。

感测单元640检测移动终端600的当前状态（如该移动终端600是打开还是闭合，移动终端600的位置以及其被用户接触/未接触），并且生成用于控制移动终端600的操作的感测信号。

感测单元640可以包括接近传感器641、压力传感器643以及运动传感器645。运动传感器645可以利用加速度传感器、陀螺仪传感器以及重力传感器来感测移动终端600的运动或位置。具体来说，陀螺仪传感器测量角速度并且感测移动终端相对于基准方向旋转的方向（角）。

输出单元650可以包括：显示器651、音频输出模块653，警告单元655以及触觉模块657。

显示器651显示经移动终端600处理的信息。

如上所述，如果显示器651和触摸板具有分层结构以配置触摸屏，则显示器651不仅可以被用作输出装置而且可以被用作用于经由用户触摸来输入信息的输入装置。

音频输出模块653可以输出从无线通信模块610接收的或者存储在存储器660中的音频数据。该音频输出模块653可以包括：扬声器、蜂鸣器等。

警告单元655输出通知用户在移动终端600中出现了事件的信号。

触觉模块657生成用户可以感觉到的各种触觉效果。由触觉模块657生成的触觉效果的典型例是振动。

存储器660可以存储用于控制器680的处理和控制的程序，并且可以临时存储输入或输出数据（例如，电话簿、消息、音频，静止图像以及活动图像）。

接口670用作与连接至移动终端600的所有外部装置的接口。接口670可以接收来自外部装置的数据或者接收电力，并将电力传送至移动终端600的组件，或者将移动终端600的数据发送至外部装置。

控制器680控制移动终端600的总体操作。例如，控制器680执行与话音通信、数据通信、视频通信等相关联的控制和处理。控制器680可以包括用于多媒体回放的多媒体回放模块681。多媒体回放模块681可以按硬件形式在控制器180中实现，或者可以按软件形式与控制器680分离地实现。下面，参照图11及其随后的图，对控制器680的用于多媒体回放的操作进行描述。

电源690在控制器680的控制下，接收外部电力或内部电力并且向各组件提供操作所需电力。

图6所示的移动终端600的框图仅是示例性的。根据实际实现中移动终端600的规范，移动终端600的组件可以被组合或省略或者可以添加新组件。即，若需要的话，可以将两个或更多个组件并为一个组件或者可以将一个组件设置为分离的组件。另外，每一个框的功能出于描述本发明实施方式的目的来描述，由此，具体操作或装置不应被视为对本发明的范围和精神进行限制。

图7是例示根据本发明一实施方式的操作图像显示装置的方法的流程图。

参照图7，首先，图像显示装置100在接收到来自移动终端的无线音频接收模式进入信号时进入无线音频发送模式（操作S725）。接着，利用第一无线通信方法执行与移动终端600的同步（操作S730）。

图像显示装置100的网络接口135可以经由无线路由器500接收包括无线音频发送模式开始信号的TCP包。在本发明实施方式中，为了保证数据通信可靠性，基于TCP的通信方法可以被采用为第一无线通信方法。

如果接收到TCP包中的无线音频发送模式开始信号，则图像显示装置100的控制器170可以控制进入无线音频发送模式。接着，控制器170可以控制图像显示装置以与移动终端600进行同步。

更具体地说，图像显示装置100的控制器170可以与所接收的无线音频发送模式开始信号相对应地，按TCP包的形式控制发送有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等，作为反馈数据。

有关声道数的信息指示要发送音频数据的声道是单声道、立体声声道还是5.1声道的信息。

编码状态信息可以指示要发送的音频数据是：1）经DEMUX310解复用但未经音频处理器315解码的音频数据，2）经DEMUX310解复用、经音频处理器315解码并且被编码以发送至移动终端600的音频数据，还是3）经DEMUX310解复用并且经音频处理器315解码的音频数据。

编码方案信息在编码状态信息指示编码音频数据时有效，并且可以指示编码方案是AC3编码方案还是AAC编码方案。

例如，如果图像显示装置100在回放特定频道的广播图像作为多媒体数据的状态下接收到无线音频发送模式开始信号，则图像显示装置100的控制器170在要发送的音频数据的编码方案是AAC编码方案的情况下控制发送AAC作为编码方案信息，并在声道数为2的情况下控制发送立体声声道，作为有关声道数的信息。

接下来，图像显示装置100的网络接口135可以接收包括同步完成信息的TCP包，该同步完成信息指示完成了与移动终端600的同步。于是，完成图像显示装置100与移动终端600之间的同步。即，在无线音频发送模式下完成针对音频数据发送的准备。

接下来，图像显示装置100从多媒体数据提取音频信号（操作S740）。利用第二通信方法将所提取的音频信号发送至移动终端（操作S750）。

在完成同步之后，图像显示装置100的控制器170提取要发送的音频信号。例如，如果多媒体数据是广播信号，则控制器170（更具体地，图像显示装置的DEMUX310）可以将广播流解复用成音频信号、视频信号以及数据信号。

在根据本发明实施方式的无线音频发送模式中，向移动终端600发送的音频数据可以是：1）经DEMUX310解复用而未经音频处理器315解码的音频数据，2）经DEMUX310解复用、经音频处理器315解码并且被编码以发送至移动终端600的音频数据，或3）经DEMUX310解复用并且经音频处理器315解码的音频数据。

图像显示装置100的控制器170可以控制选择音频信号1）至3）中的任一个和按单向多播RTP/UDP包的形式向移动终端600发送所选择的音频信号。

在本发明实施方式中，针对音频数据的低延迟流以及多用户支持，基于实时发送协议（RTP）/用户数据报协议（UDP）的通信方法可以被采用为第二无线通信方法。

接下来，图像显示装置100回放多媒体数据（操作S760）。具体来说，图像显示装置100的控制器170可以解码解复用的音频信号、视频信号以及数据信号当中的视频信号，并且输出要显示在显示器180上的视频信号。接着，显示器180可以显示与所接收的广播信号相对应的广播图像。这时，图像显示装置100的音频输出单元185可以不输出与所接收的广播信号相对应的广播音频信号。即，图像显示装置的音频输出单元185处于静音模式，并由此不能输出音频信号。由此，不希望收听音频数据的其它用户在图像显示装置100回放多媒体数据时不需要收听音频信号。

图8是例示根据本发明一实施方式的操作移动终端的方法的流程图。

参照图8，首先，移动终端600进入对图像显示装置的遥控模式（操作S805）并显示遥控画面（操作S810）。在显示遥控画面的状态下，确定是否接收到无线音频接收模式开始信号（操作S815），并且如果是，移动终端进入无线音频接收模式（操作S816）。接着，显示无线音频接收画面（操作S818），并且利用第一无线通信方法执行与图像显示装置的同步（操作S820）。

如果执行移动终端600的遥控菜单项或遥控应用项，则移动终端600的控制器680可以控制图像显示装置100进入遥控模式。移动终端600的控制器680可以控制在显示器651上显示图13的（a）中所示的遥控画面1310。

图13的（b）的遥控画面1310包括：静音项、频道（CH）控制项、音量（VOL）控制项、无线音频接收模式项（WiFi探测（WiFi SOUND））1315。如果用户选择无线音频接收模式项（WiFi探测）1315，则移动终端600的控制器680可以确定选择了无线音频接收模式，并且控制显示指示无线音频接收模式的无线音频接收画面。

图13的（b）示出了无线音频接收画面。指示无线音频接收模式的WiFi探测画面1330显示在显示器651上。

图13的（b）的WiFi探测画面1330包括：指示无线音频接收模式的对象（用WiFi探测指示）1332、频道控制项1334以及音量控制项1336。

如果选择遥控画面1310的无线音频接收模式项（WiFi探测）1315，则移动终端600的控制器680可以与控制显示WiFi探测画面1330分离地，控制向图像显示装置100发送包括无线音频接收模式开始信号的TCP包，如图13的（b）中所示。即，控制器680可以控制与图像显示装置100的同步。

图像显示装置100进入无线音频接收模式并且执行与移动终端的同步。即，图像显示装置100可以按TCP包的形式发送有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等，作为反馈数据。移动终端600的控制器680可以经由无线通信单元610接收有关声道数的信息、编码状态信息、编码方案信息等。

如果完成了与图像显示装置100的同步，则移动终端600的控制器680可以控制发送包括同步完成信息的TCP包，该同步完成信息指示完成了与图像显示装置100的同步。

接下来，移动终端600利用第二无线通信方法接收来自图像显示装置的音频信号（操作S850）。在完成同步之后，图像显示装置100可以发送RTP/UDP包形式的音频数据，并且移动终端600的控制器680接收该音频数据。该音频数据可以是1）未编码的音频数据，2）编码的音频数据，或3）复用且编码的音频数据。

接下来，移动终端600回放所接收的音频数据（操作S865）。具体来说，与音频数据1）至3）中的任一个相对应地，移动终端600的控制器680回放音频数据，并且经由音频输出模块653输出所播放的音频数据。

移动终端600的用户可以收听从移动终端600输出的音频信号，同时观看由图像显示装置100回放（或再现）的多媒体数据的视频。

不同于图8，即使遥控画面未显示在移动终端600上，该移动终端也可以立即进入无线音频接收模式。例如，如果操纵指示无线音频接收模式的热键或者执行无线音频接收模式应用，则移动终端可以立即进入无线音频接收模式。通过在不显示遥控画面的情况下，操纵热键或者执行应用，图13的（b）中所示的WiFi探测画面1330可以立即显示在移动终端600上。

图9是例示根据本发明一实施方式的图像显示***的操作的流程图。

图9的图像显示***的操作对应于图7和图8。

更具体地说，操作S905至S918（操作S905、S910、S915、S916以及S918）对应于图8的操作S805至S818（操作S805、S810、S815、S816以及S818），而操作S922至S928（操作S922、S924、S926以及S928）对应于图8的操作S830和图7的操作S730。

操作S940对应于图7的操作S740，而操作S942至S944（操作S942和S944）对应于图7的操作S750和图8的操作S850。

操作S960对应于图7的操作S760，而操作S965对应于图8的操作S865。

图10是涉及用于描述图像显示装置与移动终端之间的TCP包数据交换的视图。

移动终端600的控制器680可以控制经由TCP发送器1125发送控制数据。控制数据可以包括以下信息中的至少一种：无线音频接收模式开始信息或结束信息、无线信道设置请求信息、已分配无线信道信息、解码信息、无线信道环境信息或回放延迟信息。

在同步处理期间，在这种控制数据当中，无线音频接收模式开始信息、无线信道设置请求信息、已分配无线信道信息、解码信息等可以被发送至图像显示装置100。

在音频数据接收处理期间，在这种控制数据当中，无线音频接收模式结束信息、无线信道改变请求信息、无线信道环境信息、回放延迟信息等可以被发送至图像显示装置100。

图像显示装置100的控制器170可以经由TCP接收器1025接收控制数据。控制器170可以控制经由TCP发送器1020发送反馈数据。反馈数据可以包括以下信息中的至少一种：有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息、回放时间点信息，当前时间信息等。

在同步处理期间，在这种控制数据当中，有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等可以被发送至移动终端600。

在音频数据发送处理期间，在这种控制数据当中，要发送的音频数据的回放时间点信息等可以被发送至移动终端600。

在图10中，图像显示装置100的同步器1010与控制器170分离地设置，以使得当前时间信息经由TCP发送器1020与反馈数据分离地被发送至移动终端600。移动终端600的同步器1110与控制器680分离地设置，以使得当前时间信息经由TCP接收器1120与反馈数据一起被接收。

当前时间信息可以在被包括在反馈数据中的状态下发送。

图像显示装置100的TCP接收器1025和TCP发送器1020可以被包括在图3的网络接口135中。移动终端600的TCP接收器1120和TCP发送器1125可以被包括在图6的无线通信单元610中。

图11是涉及用于描述图像显示装置与移动终端之间的RTP/UDP包数据交换的视图，而图12示意性地示出了RTP/UDP包数据的结构。

图像显示装置100可以接收来自调谐器单元110、外部装置接口130或网络接口135的多媒体数据。

针对流数据的情况，DEMUX310解复用流数据，解码器1030解码音频数据，以及编码器1040编码所解码的音频数据。DEMUX310、解码器1030以及编码器1040可以被包括在控制器170中。

可向移动终端600发送的音频数据可以是：①经DEMUX310解复用而未经解码器1030解码的音频数据，②经DEMUX310解复用、经解码器1030解码并且经编码器1040编码的音频数据，或③经DEMUX310解复用并且经解码器1030解码的音频数据。

如图12所示，要发送的音频数据1210可以通过图像显示装置100的RTP发送器1045与RTP包1220接合，可以通过UDP发送器1050与UDP包1230接合，并且可以作为IP包1240发送至移动终端600。

移动终端600的UDP接收器1150分离出UDP包120，RTP接收器1145分离出RTP包1220，并且向编码器1130或音频输出模块653（更具体地说，音频回放缓冲器）提供音频数据1210。

如果由图像显示装置100发送的音频数据是音频数据①或②，则因为音频数据被编码，所以该音频数据被解码器1130解码并且被提供给音频输出模块653。

作为另一示例，如果由图像显示装置100发送的音频数据是音频数据③，则因为音频数据被解码，所以将该音频数据提供给音频输出模块653，而不需解码。

图像显示装置100的RTP发送器1045和UDP发送器1050可以被包括在图3的网络接口135中。移动终端600的UDP接收器1150和RTP接收器1145可以被包括在图6的无线通信单元610中。

图14示出了与图13类似的、用于进入无线音频接收模式的移动终端的用户接口的另一示例。

参照图14，而且不同于图13，如果选择图14的（a）的遥控画面1310的“TV共享”项1305，则如图14的（b）中所示，可以显示TV共享画面。在图14中，TV共享画面包括诸如WiFi探测项1322、第二TV项1324、云TV项1326等的遥控项。

其中，如果选择WiFi探测项1322，则移动终端600的控制器680可以控制显示WiFi探测画面1330，如图14的（c）所示，其示出了与图13的（b）类似的无线音频接收画面。另外，移动终端600的控制器680可以与WiFi探测画面1330分离地控制向图像显示装置100发送包括无线音频接收模式开始信号的TCP包。即，控制器680可以控制与图像显示装置100的同步。

图15是例示根据本发明另一实施方式的操作图像显示装置的方法的流程图。

参照图15，图像显示装置100的控制器170接收来自移动终端600的无线音频接收模式进入信号（操作S1510）。如图7的操作S710中所述，图像显示装置100可以接收包括无线音频发送模式开始信号的TCP包数据。TCP接收器1025可以分离出TCP包，并且向图像显示装置100的控制器170发送无线音频发送模式开始信号。

接下来，图像显示装置100的控制器170向移动终端600发送有关要发送的音频数据的信息（操作S1520）。例如，TCP接收器1020可以向移动终端600发送包括有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等的TCP包。

接下来，图像显示装置100的控制器170接收来自移动终端600的解码信息（操作S1530）。具有与该解码信息相对应的编码状态的音频数据被发送（操作S1540）。

移动终端600的控制器680可以生成指示是否可以利用所接收的有关音频数据的信息中的编码方案信息，来解码要由移动终端600接收的音频数据的解码信息。该解码信息是其中值“1”可以指示可以解码音频数据而值“0”可以指示不能解码音频数据的标志。

图像显示装置100的控制器170通过TCP接收器1020接收解码信息。如果可以解码音频数据，则控制器170保持要发送音的频数据的编码方案，并且向移动终端600发送该音频数据。

如果该解码信息指示不能解码音频数据，则图像显示装置100的控制器170改变要发送的音频数据的编码方法，并且向移动终端600发送该音频数据。

例如，如果要发送的音频数据的编码方案是AAC编码方案，并且移动终端600不能利用这种编码方案执行解码，则图像显示装置100接收指示不能执行解码的信息。图像显示装置100可以将要发送的音频数据的编码方案改变成AC3编码方案，并再次向移动终端600发送该音频数据。如果移动终端600可以利用AC3编码方案解码音频数据，则可以将指示可以执行解码的信息发送至图像显示装置100。由此，图像显示装置100可以控制向移动终端600发送具有AC3编码方案的音频数据。

编码方案可以通过改变要发送的音频数据的源来改变。即，编码方案可以通过将要发送的音频数据从图11的音频数据①改变成图11的音频数据③来改变。

例如，如果音频数据①的编码方案是AAC编码方案，而编码器1040的编码方案是AC3编码方案，则要发送的音频数据可以从图11的音频数据①改变成音频数据③。

接下来，图像显示装置回放多媒体数据（操作S1550）。具体来说，图像显示装置100的控制器170可以解码解复用音频信号当中的音频信号、视频信号以及数据信号，并且输出要显示在显示器180上的视频信号。由此，显示器180可以显示与所接收的广播信号相对应的广播图像。这时，图像显示装置100的音频输出单元185可以不输出与所接收的广播信号相对应的广播音频信号。

图16是例示根据本发明另一实施方式的操作移动终端的方法的流程图，而图17至图19是涉及用于描述图15的操作图像显示装置的方法或图16的操作移动终端的方法的各种示例的视图。

参照图16，移动终端600向图像显示装置100发送无线音频接收模式进入信号（操作S1610），并且接收来自图像显示装置100的有关音频数据的信息（操作S1620）。操作S1660对应于图17的操作S1710，而操作S1620对应于图17的操作S1720。

移动终端600的TCP发送器1125可以向图像显示装置100发送包括无线音频接收模式开始信号的TCP包数据。图19的（a）示出了从移动终端600向图像显示装置100发送无线音频接收模式开始信号SWi_s。

图像显示装置100的TCP接收器1025可以接收包括无线音频接收模式开始信号的TCP包数据，分离TCP包，并向回放管理器1070发送无线音频接收模式开始信号。从图像显示装置100的角度来说，图像显示装置100的回放管理器1070将无线音频接收模式开始信号视为无线音频发送模式开始信号。

图像显示装置100的回放管理器1070可以控制向移动终端600发送有关要发送的音频数据的信息。由此，图像显示装置100的TCP发送器1020可以向移动终端600发送包括有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等的TCP包。

图19的（b）示出了从图像显示装置100向移动终端600发送有关要发送的音频数据的信息Inf_aud。

移动终端600的TCP接收器1120可以接收包括有关音频数据的信息的TCP包数据，分离TCP包，并且向回放管理器1170发送有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息等。

接下来，移动终端600向图像显示装置100发送解码信息（操作S1630），并且接收来自图像显示装置100的与该解码信息相对应的音频数据（操作S1640）。回放所接收的音频数据（S1650）。操作S1630对应于图17的操作S1730，操作S1640对应于图17的操作S1740，而操作S1650对应于图17的操作S1750。

移动终端600的回放管理器1170可以基于所接收的编码方案信息等，来确定移动终端600的解码器1130是否可以解码要接收的音频数据。移动终端600的回放管理器1170可以控制通过TCP发送器1125发送指示是否可以解码音频数据的解码信息。

图19的（c）示出了从移动终端600向图像显示装置100发送解码信息Inf_able。

图像显示装置100的TCP接收器1025可以接收包括解码信息的TCP包数据，分离TCP包，并向回放管理器1070发送该解码信息。

图像显示装置100的回放管理器1070可以控制发送与所接收的解码信息相对应的音频数据。

例如，要发送音的频数据的源可以与所接收的解码信息相对应地改变。即，要发送的音频数据可以从图11的音频数据①改变成图11的音频数据③。

例如，如果移动终端600可以利用AC3编码方案执行解码，音频数据①的编码方案是AAC编码方案，而编码器1040的编码方案是AC3编码方案，则图像显示装置100的回放管理器1070可以控制转换器1085将要发送的音频数据从图11的音频数据①改变成音频数据③。

图像显示装置100的RTP发送器1045和UDP发送器1050可以分别向移动终端600发送附有RTP包的数据，和附有UDP包的数据。

图像显示装置100的回放管理器1070可以控制同步器1080，以使得向移动终端600发送要发送的音频数据的回放时间点信息和当前时间信息。回放时间点信息和当前时间信息从同步器1080输出。接着，图像显示装置100的TCP发送器1020可以向移动终端600发送包括回放时间点信息和当前时间信息的TCP包。

图19的（d）示出了从图像显示装置100向移动终端600发送音频数据Audio_1、2或3，回放时间点信息Inf-pt等。

移动终端600的UDP接收器1150和RTP接收器1145可以分别分离UDP包和RTP包，以使得将音频数据向缓冲器1190发送。

移动终端600的回放管理器1170控制所接收的音频数据的回放。

如果通过图像显示装置100发送的音频数据是音频数据①或②，则因为音频数据被编码，所以该音频数据被解码器1130解码并且被提供给音频输出模块653。

作为另一示例，如果图像显示装置100发送的音频数据是③，则因为音频数据被解码，所以立即将该音频数据提供给音频输出模块653，而不需解码。

图18的DEMUX310、解码器1030、编码器1040以及回放管理器1070可以被包括在图像显示装置100的控制器170中。其中，回放管理器1070可以对应于图4的处理器330。图18的TCP发送器1020、TCP接收器1025、UDP发送器1050以及RTP发送器1045可以被包括在图3的网络接口135中。缓冲器1090可以对应于存储器140。

图18的移动终端600的回放管理器1170可以被包括在移动终端600的控制器680中。图18的TCP发送器1125、TCP接收器1125、UDP发送器1150以及RTP发送器1145可以被包括在图3的无线通信单元610中。缓冲器1190可以对应于存储器660。

尽管由RTP接收器1145处理的音频信号在图18中被示出为经由缓冲器1190输出至解码器1130或音频输出模块653，但如果由RTP接收器1145处理的音频信号是编码的音频信号，则该音频信号可以由解码器1130解码，并且可以将所解码的音频信号存储在缓冲器1190中。即，缓冲器1190可以插在音频输出模块653与解码器1130之间。

图20是例示根据本发明另一实施方式的操作图像显示装置的方法的流程图，图21是例示根据本发明另一实施方式的操作移动终端的方法的流程图，而图22A至23D是涉及用于描述图20的操作图像显示装置的方法或图21的操作移动终端的方法的各种示例的视图。

参照图20，图像显示装置100向移动终端600发送音频数据（操作S2005）。移动终端600接收音频数据（操作S2105）。

图像显示装置100的RTP发送器1045和UDP发送器1050可以向移动终端600发送包括音频数据的RTP/UDP包。移动终端600的UDP接收器1150和RTP接收器1145可以分别分离UDP包和RTP包，以使得将音频数据向缓冲器1190发送。

图22A示出了从图像显示装置100向移动终端600发送第一音频数据Audio_a（立体声声道和编码的音频数据）。

除了要发送的音频数据以外，图像显示装置100还可以向移动终端600发送该音频数据的回放时间点信息，和当前时间信息。这种回放时间点信息和当前时间信息可以从同步器1080输出。于是，图像显示装置100的TCP发送器1020可以向移动终端600发送包括回放时间点信息、当前时间信息等的TCP包。

移动终端600的TCP接收器1120可以接收包括回放时间点信息和当前时间信息等的TCP包数据，分离TCP包，并且向回放管理器1170发送回放时间点信息和当前时间信息等。

接下来，移动终端600的回放管理器1170计算回放延迟信息（操作S2107）。移动终端600的回放管理器1170可以基于从图像显示装置接收的音频数据、回放时间点信息和当前时间以及来自同步器1180的当前时间信息，来计算音频数据的回放延迟信息。

接下来，图像显示装置100回放多媒体数据（操作S2010）。接着，移动终端600回放所接收的音频数据（操作S2110）。

图像显示装置100的回放管理器1070控制多媒体数据的回放，例如，可以控制向缓冲器1090提供由解码器1030解码的视频数据，控制缓冲器1090的缓冲，以及控制多媒体数据的视频回放定时。缓冲器1090根据设置的缓冲值向显示器180输出所接收的视频数据。在图22A中，图像显示装置100的缓冲器1090的缓冲值为2ms。

移动终端600的回放管理器1170控制音频数据的回放。在图22A，因为接收到第一音频数据Audio_a，所以回放管理器1170向解码器1130提供临时存储在缓冲器1190中的编码的音频数据，并且控制解码器1130解码该编码的音频数据。将解码的音频数据提供给音频输出模块653以进行回放。

移动终端600的回放管理器1170确定在操作S2107中计算的回放延迟信息是否等于或大于预定值（操作S2113），并且如果是这样，则控制向图像显示装置100发送回放延迟信息（操作S2120）。接着，图像显示装置100接收回放延迟信息（操作S2020）。

所计算的回放延迟信息可以经由TCP发送器1125发送至图像显示装置100。图像显示装置100的TCP接收器1025可以向回放管理器1070发送回放延迟信息。

接下来，如果从移动终端600接收到回放延迟信息，则图像显示装置100改变要发送的音频数据的声道数（操作S2025）。将改变了声道数的音频数据发送至移动终端600（操作S2030）。由此，移动终端600接收改变了声道数的音频数据。

图22B示出了在图像显示装置100从移动终端600接收到回放延迟信息Inf_d1的情况下，从图像显示装置100向移动终端600发送第二音频数据Audio_b（单声道和编码音频数据）。即，发送声道数从2改变成1的音频数据。

声道数可以通过图像显示装置100的转换器1085来改变。

移动终端600的缓冲器1190临时存储改变了声道数的音频数据。

接下来，移动终端600的回放管理器1170计算有关改变了声道数的音频数据的回放延迟信息（操作S2127）。移动终端600的回放管理器1170可以基于从图像显示装置接收的音频数据、回放时间点信息和当前时间信息以及来自同步器1180的当前时间信息，来计算音频数据的回放延迟信息。

移动终端600的回放管理器1170控制对改变了声道数的音频数据的回放。因为将声道从立体声声道改变成单声道，所以可以缩减音频回放时间。由此，音频数据可以与通过图像显示装置100回放的多媒体数据同步地回放。

移动终端600的回放管理器1170确定在操作S2127中计算的回放延迟信息是否等于或大于预定值（操作S2133），并且如果是这样，则控制向图像显示装置100发送该回放延迟信息（操作S2135）。接着，图像显示装置100接收回放延迟信息（操作S2035）。

接下来，如果图像显示装置100例如另外接收回放延迟信息，则执行操作S2030及其随后操作。

即，图像显示装置100延迟多媒体数据的回放时间（操作S2040）。确定是否另外接收到回放延迟信息（操作S2045），并且，如果另外接收到回放延迟信息，则将改变了编码状态的音频数据发送至移动终端600（操作S2050）。图像显示装置100回放多媒体数据（操作S2070）。

图22C示出了在图像显示装置100另外接收到来自移动终端600的回放延迟信息Inf_d2时，延迟图像显示装置100的回放时间。

即，在图22C中，图像显示装置100的缓冲器1090的缓冲值从2ms改变成10ms。随着缓冲值的增加，从缓冲器1090向显示器180输出的视频数据的输出时间也随之延迟，并由此，多媒体数据的回放时间被延迟。缓冲值的增加量可以根据回放延迟信息Inf_d2来确定。

因为延迟了多媒体数据的回放时间，所以可以将第二音频数据Audio_b（单声道和编码的音频数据）没有变化地从图像显示装置100连续发送至移动终端600。

图22D示出了在图像显示装置100另外接收到来自移动终端600的回放延迟信息Inf_d3的情况下，从图像显示装置100向移动终端600发送第三音频数据Audio_c（单声道和解码的音频数据）。即，将音频数据的编码状态从编码音频数据改变成解码音频数据。

编码状态可以通过图像显示装置100的转换器1085来改变。即，转换器1085可以输出由DEMUX310解复用的音频数据①或由编码器1040编码的音频数据②，并接着输出由解码器1030解码的音频数据③。

移动终端600的缓冲器1190临时存储所接收的音频数据，并且移动终端600的回放管理器1170在不使用解码1130的情况下向音频输出模块653提供音频数据，以使得可听地输出该音频数据。

接下来，如果在操作S2035中另外接收到回放延迟信息，则可以执行操作S2055及其随后操作。

即，图像显示装置100发送改变了编码状态的音频数据。接着，移动终端600接收改变了编码状态的音频数据（操作S2155）。如果另外接收到回放延迟信息（操作S2060），则图像显示装置100延迟多媒体数据的回放时间（操作S2065）。图像显示装置100回放多媒体数据（操作S2070）。接着，移动终端600接收改变了编码状态的音频数据（操作S2155）并回放音频数据（操作S2170）。

除了改变编码状态和在改变音频声道数之后延迟图像显示装置的多媒体数据的回放时间之外，操作2055至S2065（操作S2055、S2060以及S2065）对应于操作2040至S2050（操作S2040、S2045以及S2050）。

操作S2040至S2050（操作S2040、S2045以及S2050）和操作S2055至S2065（操作S2055、S2060和S2065）可以交替执行。即，如果执行操作S2040至S2050（操作S2040、S2045以及S2050），则可以不执行操作S2055至S2065（操作S2055、S2060以及S2065）。另选的是，如果执行操作S2055至S2065（操作S2055、S2060以及S2065）,则可以不执行操作S2040至S2050（操作S2040、S2045以及S2050）。

图23A示出了与图22A类似地从图像显示装置100向移动终端600发送第一音频数据Audio_1（立体声声道和编码的音频数据）。

图23B示出了在图像显示装置100从移动终端600接收到回放延迟信息Inf_d1的情况下，从图像显示装置100向移动终端600发送第二音频数据Audio_2（单声道和编码的音频数据）。即，发送声道数从2改变成1的音频数据。

图23C示出了在图像显示装置100另外接收到来自移动终端600的回放延迟信息Inf_d2的情况下，则从图像显示装置100向移动终端600发送第三音频数据Audio_3（单声道和解码的音频数据）。即，将音频数据从编码音频数据改变成解码音频数据。

图23D示出了在图像显示装置100另外接收到来自移动终端600的回放延迟信息Inf_d3时，延迟图像显示装置100的回放时间。

即，在图23D中，图像显示装置100的缓冲器1090的缓冲值从2ms改变成10ms。随着缓冲值的增加，从缓冲器1090向显示器180输出的视频数据的输出时间也随之延迟，并由此，多媒体数据的回放时间被延迟。缓冲值的增加量可以根据回放延迟信息Inf_d3来确定。

尽管数据交换在图10及其随后图中被示出为直接在图像显示装置100与移动终端600之间执行，但本发明不限于此。即，如参照图1所述，数据交换可以经由网络路由器500在图像显示装置100与移动终端600之间执行。

根据本发明一实施方式，图像显示装置根据无线音频发送模式利用第一无线通信方法来执行与移动终端的同步，而利用与第一无线通信方法不同的第二无线通信方法来向移动终端发送提取的音频数据。通过利用不同的无线通信方法来执行同步和音频数据发送，可以有效地执行无线音频数据发送。因此，可以改进用户便利性。

具体来说，如果基于发送控制协议（TCP）的通信方法被用作第一无线通信方法，则可以保证控制数据与反馈数据的数据通信可靠性。

如果基于实时发送协议（RTP）/用户数据报协议（UDP）的通信方法被用作第二无线通信方法，则可以使得能够实现音频数据的低延迟流传输和多用户支持。

根据本发明另一实施方式，图像显示装置发送具有与从移动终端接收的解码信息相对应的编码水平的音频数据。由此，与图像显示装置回放的多媒体数据相对应的音频数据可以由移动终端回放。因此，可以改进用户便利性。

如果在图像显示装置回放多媒体数据或者移动终端回放音频数据的同时，接收到无线信道环境信息或移动终端的回放延迟信息，则图像显示装置执行改变要发送的音频数据的声道数的操作、延迟多媒体数据的回放时间的操作，或基于这种信息来改变要发送的音频数据的编码状态的操作。由此，多媒体数据回放可以与移动终端的音频数据回放同步。因此，用户可以利用移动终端收听与多媒体数据同步的音频数据。

通过执行有关移动终端的无线音频发送模式，仅希望收听音频数据的用户可以收听该音频数据，而不希望收听该音频数据的用户不能收听该音频数据。因此，可以提供根据用户偏好的服务并且改进用户便利性。

根据前述实施方式的图像显示装置和用于操作图像显示装置的方法不限于本文阐述的实施方式。因此，本文阐述的示例性实施方式的变型例和组合可以落入本发明的范围内。

根据前述实施方式的操作图像显示装置的方法可以实现为代码，该代码可以被写入至计算机可读记录介质，并由此可以由处理器读取。该计算机可读记录介质可以是可以按计算机可读方式存储数据的任何类型的记录装置。该计算机可读记录介质的示例包括：ROM、RAM、CD-ROM、磁带、软盘、以及光学数据存储部。计算机可读记录介质可以通过连接至网络的多个计算机***来分布，使得按分散方式向该多个计算机***写入和从该多个计算机***执行计算机可读代码。本领域普通技术人员可以构造用于实现本文描述的实施方式所需的功能程序、代码，以及代码段。

尽管已经出于例示性目的公开了本发明的实施方式，但本领域技术人员应当清楚，在不脱离如所附权利要求书中公开的本发明的范围和精神的情况下，各种修改、添加以及替换都是可以的。

相关申请的交叉引用

本申请要求于2012年6月8日在韩国知识产权局提交的韩国专利申请No.10-2012-0061623和10-2012-0061625的优先权和权益，这些韩国专利申请公开的内容通过引用并入于此。

Claims (13)

1.一种操作由移动终端遥控的图像显示装置的方法，该方法包括以下步骤：

接收广播信号；

基于所接收的广播信号在显示器上显示广播图像并且通过音频输出单元输出音频信号；

进入无线音频发送模式；

利用第一无线通信方法执行与所述移动终端的同步；

从所接收的广播信号中提取音频数据；

利用与所述第一无线通信方法不同的第二无线通信方法来向所述移动终端发送所提取的音频数据；

在所述显示器上连续地回放并且显示所述广播图像；

进入静音模式并且不通过所述音频输出单元直接输出音频信号；

在所述显示器上回放所述广播图像并且显示所述广播图像和表示所述静音模式的对象；

在回放所述广播图像期间，利用所述第一无线通信方法来接收所述移动终端的回放延迟信息；

基于接收到的所述移动终端的回放延迟信息来增加缓冲器的缓冲值；以及

基于增加的所述缓冲值来延迟从所述缓冲器输出的视频数据的输出时间，使得所述广播图像的回放时间被延迟，

其中，所述缓冲值的增加量根据所述回放延迟信息来确定，

其中，所述第一无线通信方法包括双向通信方法，所述双向通信方法包括基于发送控制协议TCP的通信方法，并且

其中，所述第二无线通信方法包括基于单向和多播的通信方法，所述基于单向和多播的通信方法包括基于用户数据报协议UDP的通信方法。

2.根据权利要求1所述的方法，其中，执行所述同步的步骤包括以下步骤：

利用所述第一无线通信方法接收来自所述移动终端的控制数据；以及

利用所述第一无线通信方法向所述移动终端发送与所述控制数据相对应的反馈数据，

其中：

所述控制数据包括以下信息中的至少一种：无线音频发送模式开始信息或结束信息、无线信道设置请求信息、无线信道改变请求信息、已分配无线信道信息、解码信息、无线信道环境信息以及回放延迟信息，并且

所述反馈数据包括以下信息中的至少一种：有关要发送的音频数据的声道数的信息、编码状态信息、编码方案信息、回放时间点信息以及当前时间信息。

3.根据权利要求1所述的方法，所述方法还包括以下步骤：在发送所述音频数据期间，利用所述第一无线通信方法，向所述移动终端发送所述音频数据的回放时间点信息和当前时间信息中的至少一个信息。

4.根据权利要求1所述的方法，所述方法还包括以下步骤：

接收来自移动终端的无线音频发送模式进入信号；

向所述移动终端发送有关要发送的所提取的音频数据的信息；

接收来自所述移动终端的解码信息；

其中，发送有关所提取的音频数据的信息的步骤包括：发送所提取的具有与所述解码信息相对应的编码状态的音频数据。

5.根据权利要求4所述的方法，其中，有关所述音频数据的所述信息包括以下信息中的至少一种：有关声道数的信息、编码状态信息、编码方案信息、回放时间点信息以及要发送音频数据的当前时间信息。

6.根据权利要求4所述的方法，其中，发送所述音频数据的步骤包括以下步骤：

如果所述解码信息指示能够解码所述音频数据，则发送从所述广播信号解复用得到而未经解码的音频数据；而

如果所述解码信息指示不能解码所述音频数据，则发送从所述广播信号解复用得到并经解码的音频数据。

7.根据权利要求4所述的方法，所述方法还包括以下步骤：

接收所述移动终端与所述图像显示装置之间的无线信道环境信息；

基于所述无线信道环境信息：

改变所发送的音频数据的声道数；以及

改变要发送的音频数据的编码状态。

8.根据权利要求1所述的方法，所述方法还包括以下步骤：

在显示所述广播图像期间，接收所述移动终端与所述图像显示装置之间的无线信道环境信息；以及

基于所述无线信道环境信息，执行信号处理，使得显示所述广播图像与所述移动终端的音频数据回放同步。

9.根据权利要求8所述的方法，其中，执行信号处理的步骤包括以下步骤中的至少一个：

基于所述无线信道环境信息：

改变要发送的音频数据的声道数；以及

改变要发送的音频数据的编码状态。

10.根据权利要求1所述的方法，该方法还包括以下步骤：

从所述移动终端接收包括无线音频接收模式开始信号的包，其中，当从显示在所述移动终端的显示器上的遥控画面中选择无线音频接收模式项时，所述移动终端向所述图像显示装置发送包括所述无线音频接收模式开始信号的所述包，并且其中，所述遥控画面包括静音项、频道控制项、音量控制项和无线音频接收模式项，

其中，进入所述无线音频发送模式的步骤基于包括所述无线音频接收模式开始信号的所述包来执行。

11.一种由移动终端遥控的图像显示装置，该图像显示装置包括：

广播接收单元，所述广播接收单元被配置为接收广播信号；

显示器；

音频输出单元；

网络接口，该网络接口被设置成与移动终端交换数据；以及

控制器，该控制器被设置成：

基于所接收的广播信号在所述显示器上显示广播图像并且通过所述音频输出单元输出音频信号；

根据无线音频发送模式利用第一无线通信方法来执行与所述移动终端的同步；

从所述广播信号中提取音频数据；

利用与所述第一无线通信方法不同的第二无线通信方法来向所述移动终端发送所提取的音频数据；

在所述显示器上连续地回放并且显示所述广播图像，进入静音模式并且不通过所述音频输出单元直接输出音频信号；

在所述显示器上回放所述广播图像并且显示所述广播图像和表示所述静音模式的对象；

在回放所述广播图像期间，利用所述第一无线通信方法来接收所述移动终端的回放延迟信息；

基于接收到的所述移动终端的回放延迟信息来增加缓冲器的缓冲值；以及

基于增加的所述缓冲值来延迟从所述缓冲器输出的视频数据的输出时间，使得所述广播图像的回放时间被延迟，

其中，所述缓冲值的增加量根据所述回放延迟信息来确定，

其中，所述第一无线通信方法包括双向通信方法，所述双向通信方法包括基于发送控制协议TCP的通信方法，并且

其中，所述第二无线通信方法包括基于单向和多播的通信方法，所述基于单向和多播的通信方法包括基于用户数据报协议UDP的通信方法。

12.根据权利要求11所述的图像显示装置，其中，所述控制器还被配置为从所述移动终端接收包括无线音频接收模式开始信号的包；基于包括所述无线音频接收模式开始信号的所述包进入无线音频发送模式，

其中，当从显示在所述移动终端的显示器上的遥控画面中选择无线音频接收模式项时，所述移动终端向所述图像显示装置发送包括所述无线音频接收模式开始信号的所述包，并且

其中，所述遥控画面包括静音项、频道控制项、音量控制项和无线音频接收模式项。

13.根据权利要求11所述的图像显示装置，其中，所述控制器还被配置为执行如权利要求2至10中任一项所述的方法。