WO2016099141A2 - 멀티미디어 콘텐츠 제작 및 재생 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체 - Google Patents

멀티미디어 콘텐츠 제작 및 재생 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체 Download PDF

Info

Publication number
WO2016099141A2
WO2016099141A2 PCT/KR2015/013773 KR2015013773W WO2016099141A2 WO 2016099141 A2 WO2016099141 A2 WO 2016099141A2 KR 2015013773 W KR2015013773 W KR 2015013773W WO 2016099141 A2 WO2016099141 A2 WO 2016099141A2
Authority
WO
WIPO (PCT)
Prior art keywords
text
displayed
data
multimedia content
video
Prior art date
Application number
PCT/KR2015/013773
Other languages
English (en)
French (fr)
Other versions
WO2016099141A3 (ko
WO2016099141A9 (ko
Inventor
조은형
Original Assignee
조은형
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 조은형 filed Critical 조은형
Priority to US15/536,639 priority Critical patent/US10678415B2/en
Publication of WO2016099141A2 publication Critical patent/WO2016099141A2/ko
Publication of WO2016099141A3 publication Critical patent/WO2016099141A3/ko
Publication of WO2016099141A9 publication Critical patent/WO2016099141A9/ko
Priority to US16/863,941 priority patent/US11112960B2/en
Priority to US17/396,537 priority patent/US11507265B2/en
Priority to US17/958,364 priority patent/US11720243B2/en
Priority to US17/958,366 priority patent/US11733854B2/en
Priority to US18/211,074 priority patent/US20230333725A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440236—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by media transcoding, e.g. video is transformed into a slideshow of still pictures, audio is converted into text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control

Definitions

  • the present invention relates to a method for producing and playing multimedia contents, an electronic device for performing the same, and a recording medium storing a program for executing the same. More specifically, the method for producing and playing multimedia contents played by a video method or a slide show method, and performing the same An electronic device and a recording medium storing a program for executing the same.
  • the user wants to watch the multimedia content from the point of time when he or she wants to exclude the advertisement contained in the multimedia content, or the part that he / she has already watched or is not interested in.
  • an analog device such as a tape video
  • the random access to the desired location is Because it was physically impossible, the user had to check the user's personal information using fast forward and access to the desired part.
  • the Fast Forward / Fast Rewind (FF / FR) function which is used for high-speed navigation of digital content, requires a lot of user input to move to the exact position that the user wants and the user continues to know if the user has moved to the desired position exactly. Therefore, if the user wants to watch the playback of the media as well as the user to skip the main scenes of the multimedia quickly, there is a problem that the conventional search method is not suitable.
  • An object of the present invention is to provide a content reproduction method for selecting a main scene of a content reproduced as a moving image and playing the result in a slide show, and an electronic device for performing the same.
  • One object of the present invention is a multimedia content display method for providing a multimedia content that can be played according to any one of a video mode and a slide show mode in conjunction with the text, such as subtitles or articles about it, and electronics for performing the same
  • An apparatus and a recording medium storing a program for executing the same are provided.
  • Another object of the present invention is to shoot a video in real time with a camera in real time or to read the pre-stored video from the memory using it to play the video as it is, or to produce a multimedia content that can be played in the slide show method for each main scene of the video
  • a method of producing a content, an electronic device for performing the same, and a recording medium storing a program for executing the same are provided.
  • Another object of the present invention is to provide a multimedia content display method for providing a summary information of a text so that a user can easily grasp the entire contents of the above-described text and immediately see a desired text section, an electronic device for performing the same and a program for executing the same It is to provide a stored recording medium.
  • a method including acquiring content including image data; Obtaining event information regarding event points matched on a timeline of the content; Playing the content in any one of a video mode for playing the content as a video and a slide show mode for sequentially displaying a main scene of the content as a still image, wherein the main scene corresponds to the event time point Being an image; Changing the play mode to the slide show mode when a first input of a first type is received while performing the video mode, wherein the play time is entered on the timeline when the video mode enters the slide show mode; Setting a first event time point adjacent to a playback time point at the time of receiving the first input and displaying a main scene corresponding to the first event time point; And maintaining the play mode in the slide show mode and moving a play time when the second input of the first type is received while performing the slide show mode, wherein the second input is received on the timeline.
  • a playback method may be provided, which includes: moving a playback time point to a second
  • a method of producing multimedia content output in a video mode and a slide show mode comprising: obtaining video content; Playing the video content in real time; Receiving a scene selection input from a user during the playback; Generating an event time point in a playback section of the video based on the scene selection input; Acquiring a main scene from the video content based on the event time point; And producing the multimedia content by matching the main scene to the event time point of the video content.
  • an electronic device for producing multimedia content output in a video mode and a slide show mode comprising: a display for outputting an image; An input unit to receive an input from a user; And acquiring a video content, playing the video content in real time through the display, receiving a scene selection input from the user during the playback through the input unit, and an event during a playback section of the video based on the scene selection input. And a controller configured to generate a viewpoint, obtain a main scene from the video content based on the event time point, and match the main scene to the event time point of the video content to produce the multimedia content. Can be.
  • a recording medium storing a program for executing the above-described multimedia content production method may be provided.
  • the method includes: acquiring multimedia content including video data reproduced as a video and slide data including main scenes that are matched to an event point on a playback section of the video data and displayed in a slide show manner; Acquiring text data corresponding to the multimedia content; Displaying the multimedia content in a first area according to any one of a moving picture mode for reproducing the moving picture data as a moving picture and a slide show mode for displaying the main scene in a slide show manner; Displaying at least a portion of the text data in a second area; And adjusting the displayed text data according to the displayed multimedia content.
  • a display for outputting an image; And slide data including video data played as a video and slide data including main scenes that are matched to an event point on a playback section of the video data and displayed in a slide show manner, and text data corresponding to the multimedia content.
  • a controller configured to display at least a portion of the text data in a second area, and to adjust the displayed text data according to the displayed multimedia content.
  • a computer-readable recording medium having stored thereon a program for performing the above-described multimedia content display method may be provided.
  • the present invention by providing a slide show method of sequentially displaying the main scenes as a still image, in addition to the playback of the contents that can be reproduced as a moving image, the entire contents can be enjoyed around the main scene in a short time.
  • a multimedia content capable of playing the video as it is from a video taken by the camera or a video stored in the memory in real time, or a slide show of each main scene of the video.
  • FIG. 1 is a block diagram of an electronic device according to an embodiment of the present invention.
  • FIG. 2 is a schematic diagram of a data structure of multimedia content according to an embodiment of the present invention.
  • FIG. 3 is a schematic diagram of a structure of comment data according to an embodiment of the present invention.
  • FIG. 4 is a diagram of contents of comment data according to an embodiment of the present invention.
  • FIG. 5 is a diagram illustrating an example of selection of a main scene according to an embodiment of the present invention.
  • FIG. 6 is a diagram of another example of selection of a main scene according to an embodiment of the present invention.
  • FIG. 7 is a diagram for another example of selecting main scenes according to an embodiment of the present invention.
  • FIG. 8 is a view of a slide movement according to an embodiment of the present invention.
  • FIG. 9 is a diagram illustrating a bookmark movement according to an embodiment of the present invention.
  • FIG. 10 is a diagram for entering a slide mode according to an embodiment of the present invention.
  • FIG. 11 is a diagram illustrating an example of a display screen of multimedia content according to an embodiment of the present invention.
  • FIG. 12 is a diagram illustrating an entry request or a slide movement input to a slide mode according to an embodiment of the present invention.
  • FIG. 13 is a diagram illustrating a bookmark setting input according to an embodiment of the present invention.
  • FIG. 14 is a diagram illustrating a bookmark display according to an embodiment of the present invention.
  • 15 is a diagram illustrating an example of a matching relationship between moving picture data, main scenes, and comment data according to an embodiment of the present invention.
  • 16 and 17 are diagrams illustrating an example of a display screen of multimedia content provided with a comment according to an embodiment of the present invention.
  • FIGS. 18 and 19 illustrate another example of a display screen of multimedia content provided with a comment according to an exemplary embodiment of the present invention.
  • 20 and 21 are diagrams illustrating still another example of a display screen of multimedia content provided with a comment according to an embodiment of the present invention.
  • 22 and 23 are diagrams illustrating an example of a display screen of multimedia content that provides summary information with a comment according to an embodiment of the present invention.
  • FIG. 24 is a flowchart illustrating a method of displaying multimedia content according to an embodiment of the present invention.
  • 25 to 27 are diagrams illustrating another example of main scene selection according to an embodiment of the present invention.
  • 28 to 30 are diagrams illustrating an example of a comment data generation operation according to an embodiment of the present invention.
  • 31 is a diagram of a basic screen of a content reproduction method according to an embodiment of the present invention.
  • 32 is a diagram illustrating user input for mode conversion according to an embodiment of the present invention.
  • 33 is a diagram illustrating a change of a caption property in a slide show mode according to an embodiment of the present invention.
  • 34 is a diagram illustrating a visual effect of slide movement in a slide show mode according to an embodiment of the present invention.
  • 35 is a view illustrating an example of a slide moving method in a slide show mode according to an embodiment of the present invention.
  • 36 is a diagram illustrating omitting a slide icon in a slide show mode according to an embodiment of the present invention.
  • FIG. 37 is a diagram illustrating bookmark setting in a slide show mode according to an embodiment of the present invention.
  • 38 is a diagram illustrating an example of a user interface for setting a bookmark in a slide show mode according to an embodiment of the present invention.
  • 39 is a diagram illustrating a touch input for moving a bookmark according to an embodiment of the present invention.
  • 40 relates to the display of a bookmark list according to an embodiment of the present invention.
  • 41 is a view of a caption event browser according to an embodiment of the present invention.
  • the method includes: acquiring multimedia content including video data reproduced as a video and slide data including main scenes that are matched to an event point on a playback section of the video data and displayed in a slide show manner; Acquiring text data corresponding to the multimedia content; Displaying the multimedia content in a first area according to any one of a moving picture mode for reproducing the moving picture data as a moving picture and a slide show mode for displaying the main scene in a slide show manner; Displaying at least a portion of the text data in a second area; And adjusting the displayed text data according to the displayed multimedia content.
  • the adjusting may update the displayed text data.
  • an operation including at least one of scrolling, text scrolling, page up-down, and page turning may be performed on the displayed text data.
  • the text data may include a text section linked to the event time point, and in the adjusting, the text section linked to an event time point corresponding to a playback time point of the video data reproduced according to the video mode may be selected. It can be adjusted to be displayed in the second area.
  • the text section may include at least one paragraph unit.
  • the event time point corresponding to the playing time point may include at least one of an event time point identical to the playing time point or an event time point immediately before the playing time point on the play period.
  • the method may further include pausing the playback of the video data when the playback time is moved.
  • the method may further include switching to the slide show mode from the video mode and displaying a main scene matched with an event time point when the text section displayed in the second area is linked.
  • the text data may include a text section linked to the main scene, and in the adjusting, the text section linked to the main scene displayed according to the slide show mode may be adjusted to be displayed in the second region. .
  • the text section may include at least one paragraph unit.
  • the text data may include text sections linked to the event time point and summary information of the text sections.
  • the displaying of the text data may include: the text section linked to the event time point corresponding to any one of a playback time point of the video data reproduced according to the video mode and the main scene displayed according to the slide show mode. And displaying the summary information.
  • the displaying of the text data may include: the text section linked to the event time point corresponding to any one of a playback time point of the video data reproduced according to the video mode and the main scene displayed according to the slide show mode. And displaying the summary information of the remaining text sections except for the displayed text section.
  • the method may further include setting a playback time point of the video data in the video mode or determining the main scene displayed in the slide show mode based on the event time point in which the text section is linked.
  • a display for outputting an image; And slide data including video data played as a video and slide data including main scenes that are matched to an event point on a playback section of the video data and displayed in a slide show manner, and text data corresponding to the multimedia content.
  • a controller configured to display at least a portion of the text data in a second area, and to adjust the displayed text data according to the displayed multimedia content.
  • a computer-readable recording medium having stored thereon a program for performing the above-described multimedia content display method may be provided.
  • the electronic device 1000 according to the present invention may display multimedia content.
  • the multimedia content means content consisting of video data played as a video and slide data that collects main scenes of the video data. If necessary, comments in the form of subtitles or articles given in text form regarding the video data or main scenes are necessary.
  • the content may further include data.
  • the electronic device 1000 may display the above-described moving image data or slide data in a multimedia manner or a slide show manner, and may also appropriately display comment data.
  • an electronic device 1000 may include an input unit 1100, an output unit 1200, a communication unit 1300, a memory 1400, and a controller 1500. .
  • an input unit 1100 may include an input unit 1100, an output unit 1200, a communication unit 1300, a memory 1400, and a controller 1500.
  • an output unit 1200 may include an input unit 1100, an output unit 1200, a communication unit 1300, a memory 1400, and a controller 1500.
  • a controller 1500 may be described.
  • the input unit 1100 may receive a user input from a user.
  • the user input may be in various forms, including key input, touch input, and voice lunar calendar.
  • Examples of the input unit 1100 capable of receiving a user input include a conventional keypad, keyboard, and mouse, as well as a touch sensor for detecting a user's touch, a microphone for receiving a voice signal, and a gesture recognition through image recognition.
  • Proximity sensor consisting of a camera, an illuminance sensor or an infrared sensor that detects a user's approach, a motion sensor that recognizes a user's motion through an acceleration sensor, a gyro sensor, etc. It is a comprehensive concept that includes all the input means.
  • the touch sensor may be implemented as a piezoelectric or capacitive touch sensor that senses a touch through a touch panel or a touch film attached to the display panel, an optical touch sensor that senses a touch by an optical method, and the like.
  • the input unit 1100 may be implemented in the form of an input interface (USB port, PS / 2 port, etc.) for connecting an external input device that receives a user input to the electronic device 1000, instead of a device for detecting a user input itself. It may be.
  • an input interface USB port, PS / 2 port, etc.
  • the output unit 1200 may output various types of information and provide the same to the user.
  • the output unit 1200 is a comprehensive concept including a display for outputting an image, a speaker for outputting sound, a haptic device for generating vibration, and various other output means.
  • the output unit 1200 may be implemented in the form of a port type output interface connecting the above-described individual output means to the electronic device 1000.
  • the display may display text, still images, and moving images.
  • Displays include Liquid Crystal Display (LCD), Light Emitting Diode (LED) Display, Organic Light Emitting Diode (OLED) Display, Flat Panel Display (FPD), Transparent Display display, curved display, flexible display, 3D display, holographic display, projector, and other types of devices capable of performing image output functions. It is a concept that means a wide image display device that includes all of them.
  • Such a display may be in the form of a touch display integrated with a touch sensor of the input unit 1100.
  • the communication unit 1300 may communicate with an external device. Accordingly, the electronic device 1000 may transmit and receive various information with the external device.
  • communication that is, the transmission and reception of data may be made by wire or wireless.
  • the communication unit 1300 is a wired communication module for accessing the Internet through a local area network (LAN), a mobile communication module for accessing a mobile communication network through a mobile communication base station, and transmitting and receiving data, and a WLAN such as Wi-Fi.
  • GNSS Global Positioning System
  • GPSS Global Positioning System
  • WPAN Wireless Personal Area Network series
  • Zigbee Navigation satellite system Wireless Local Area Network
  • the memory 1400 may store various types of information.
  • the memory 1400 may store data temporarily or semi-permanently. Examples of the memory 1400 include a hard disk drive (HDD), a solid state drive (SSD), a flash memory (1400), a read-only memory (ROM), and a random access memory (RAM). ) And the like.
  • the memory 1400 may be provided in a form embedded in the electronic device 1000 or a form detachable from the electronic device 1000.
  • an operating program (OS) for driving the electronic device 1000 and a multimedia content may be reproduced as a video or a slide show method according to a method for displaying multimedia content according to an embodiment of the present invention.
  • Various programs related to multimedia programs such as video data, slide data, and comment data to be referred to by the programs, and various programs necessary or used to drive the electronic device 1000, such as an application program for showing, and bookmark information;
  • the meta data to be linked with the multimedia content may be stored by the application program.
  • the controller 1500 controls the overall operation of the electronic device 1000. To this end, the controller 1500 may perform calculation and processing of various types of information and control operations of components of the electronic device 1000.
  • the controller 1500 may be implemented as a computer or a similar device according to hardware software or a combination thereof.
  • the controller 1500 may be provided in the form of an electronic circuit that processes an electrical signal to perform a control function.
  • the controller 1500 may be provided in the form of a program for driving the hardware controller 1500.
  • the operation of the electronic apparatus 1000 may be interpreted to be performed by the control of the controller 1500.
  • the electronic device 1000 described above may load and play multimedia content.
  • the multimedia content is a content including video data encoded according to various MPEG or other video codecs and slide data including main scenes of the video. Can mean.
  • the electronic apparatus 1000 may play back the video according to two modes, such as a video mode for playing such multimedia content as a video and a slide show mode for showing a main scene of the video as a still image.
  • a video mode for playing such multimedia content as a video
  • a slide show mode for showing a main scene of the video as a still image.
  • the electronic apparatus 1000 may display the comment together with the image by referring to the comment data when playing the multimedia content in the video mode or the slide show mode.
  • FIG. 2 is a schematic diagram of a data structure of multimedia content according to an embodiment of the present invention.
  • the multimedia content may include video data and slide data.
  • the multimedia content may include comment data.
  • the video data, the slide data, and the comment data may generally exist in one integrated file format, but some data may exist in a separate file format as needed.
  • the video data, the slide data, and the comment data may exist as one file, or the video data and the slide data may exist as one file, but the comment data may exist as a separate file.
  • file types other than the above-described examples are also possible.
  • the video data of the multimedia content may take the form of general video data known in the art.
  • the video data may be data about a plurality of image frames encoded in order to implement a video by outputting images in chronological order according to MPEG, H.264 or various other video codecs.
  • Such video data may be reproduced as a video through the output unit 1200 in a display form as the codec is decoded in the video mode by the electronic apparatus 1000.
  • the slide data of the multimedia content may be composed of a set of main scenes corresponding to the still image of a specific point in time of the video.
  • the entire playback section of the video data includes a plurality of event sections EV-1, EV-2, EV-3, EV-4, ..., EV- (n-1), as shown in FIG. EV-n), the main scene is a still image (SC-1, SC-2, SC-3, SC-4,..., SC- (n-1), SC- representing each event section). n).
  • Such slide data may be sequentially displayed by the electronic apparatus 1000 in the slide show mode in the slide show mode.
  • the comment data of the multimedia content may mean comments corresponding to the above-described event section.
  • the comment may be provided mainly in text form.
  • the comments may correspond one-to-one to each event section, but there may be no comments for some event sections or a plurality of comments for some event sections.
  • two comments CM-2a and CM-2b correspond to the second event section EV-2, and there are no comments on the fourth event section EV-4.
  • Such comment data may be displayed in the form of subtitles in the moving picture mode or in the form of annotations of the slide in the slide show mode.
  • the comment data may be displayed in an article form in a region different from the region in which the video or slide image is displayed in the video mode or the slide show mode. When the article is displayed in the form of an article, scrolling or page turning may be automatically performed so that an appropriate comment is displayed in accordance with a moving picture or a slide show.
  • FIG. 3 is a schematic diagram of a structure of comment data according to an embodiment of the present invention
  • FIG. 4 is a diagram of contents of comment data according to an embodiment of the present invention.
  • the comment data may include a header and a body.
  • the header may include various kinds of information necessary for outputting a comment or other additional information.
  • Information necessary for outputting a comment may include a font type, a size, a style, a color, a display position, and the like of the text.
  • the additional information may include a title of a comment, information on a comment maker, and a production date. 3 and 4, it can be seen that various information and additional information necessary for outputting the above-described comment are described between "[HEADER]” and "[EVENT]".
  • the body may be composed of a start field, an event field, and an end field.
  • the start field and the end field respectively indicate the start and end of the event field
  • the event field contains information on the text to be displayed during the display of the multimedia content and the event section in which the text content should be displayed.
  • the information about the event section may be defined by the start time and the end time of the event section.
  • the event time point may be defined as a specific time point between the start time point and the end time point of the event section.
  • the event time point may be defined as a start time point of the event section or a time point after a predetermined time from the start time point.
  • the event field may include bookmark check information, event section information, and text information.
  • the text information is about the text to be displayed, and generally takes the form of a string.
  • the event section information may mean a time section in which text is displayed.
  • the event section information may include start point information of the event section and end point information of the event section as shown in FIGS. 3 and 4.
  • the text string of the comment text may be displayed from the start point to the end point.
  • the event section information may have a form including only the start time information of the comment if the time length of the event section is set at a predetermined time interval.
  • the bookmark check information is an identifier as to whether or not the corresponding event section (or event time point) is bookmarked. For example, according to the comment data of FIG. 4, the “The Seoul Metropolitan administrat (Omitted)... K-pop and fashion ”will be displayed as a comment. Also, it can be seen that “MARKED” indicating that the event section is bookmarked is described for the part of the event section corresponding to between “0: 0053.25” and “0: 01: 22.51”.
  • the text information may take the form of blanks without a string. In this case, there may be no comment in the event section.
  • the multimedia content may be obtained from the video data in consideration of the event time of the slide data.
  • the event time point can be referenced from the comment data or specified separately by the user.
  • the event time point information is information that serves as a link between video data, slide data, and comment data, and may be provided in a form included in these data or stored in a separate file.
  • the comment data will be described based on the event point information for convenience of description.
  • the moving image data may be obtained by receiving an external device or loading a pre-stored one in the memory 1400.
  • the video data may be received or streamed from an external multimedia server (not shown) or received from the camera (not shown) that captures an image in real time to the electronic device 1000.
  • the electronic apparatus 1000 may prestore video data in the memory 1400 so that the controller 1500 may load the video data from the memory 1400.
  • the electronic apparatus 1000 may load original video data.
  • the video content editing tool or the video production tool may be used to edit or produce video content to be used for producing multimedia content from original video data.
  • comment data may also be downloaded from an external device, loaded from memory 1400 or generated through a comment editing tool of the electronic device 1400.
  • FIG. 5 is a diagram illustrating an example of selection of a main scene according to an embodiment of the present invention.
  • a still image at a time corresponding to a start time of an event section (hereinafter, referred to as an “event time point”) may be selected on a playback section of video data.
  • the electronic device 1000 may read the start time information of the event section from the comment data and select a still image of the time corresponding to the event time point as the main scene on the play section when the video data is reproduced as a video.
  • the still image corresponding to the start point of the event section is selected as the main scene, but the main scene is not necessarily selected according to the start point.
  • the main scene may be selected as a main scene or a still image corresponding to a fast or late point at a predetermined time interval from the start of the event section, or the still image corresponding to the end of the event section as the main scene.
  • the start point of the event section may be set slightly earlier or later than the audio sync of the video corresponding to the caption. There may be times when pulling or slowing the point of time is effective.
  • the main scenes are selected in one-to-one correspondence with each event section.
  • the main scenes may be selected less or more than the number of event sections.
  • one main scene may be selected for a plurality of event sections.
  • event sections are located in a timed manner, that is, when a comment is displayed continuously in a short time, instead of selecting a main scene for each event section, one main scene is provided for the plurality of consecutive comments. It is possible to select.
  • the event sections may be located in a timely manner, for example, when there are a plurality of event sections within a predetermined time interval or when a start point of a previous event section and an end point of a subsequent event section are the same.
  • FIG. 6 is a diagram of another example of selection of a main scene according to an embodiment of the present invention.
  • FIG. 6 illustrates selecting one main scene for a plurality of event sections when the event sections are densely located on the timeline on the playback section. Specifically, for the event sections “# x1” and “# x2”, one main scene of “#x” is selected and four event sections “# y1”, “# y2”, “# y3” and “# y4” are selected. For, one main scene of "#y” can be selected.
  • one main scene may be selected for a plurality of event sections, and a plurality of main scenes may be selected for one event section.
  • a plurality of main scenes may be selected for one event section.
  • the main scene may be selected for each start time of the divided parts after dividing the entire length of the event section by a predetermined number.
  • the main scene may be selected for each of the time points after the start of the event section and after a predetermined time interval from the start time.
  • FIG. 7 is a diagram for another example of selecting main scenes according to an embodiment of the present invention.
  • a main scene “# z1” is selected at a start point of time by dividing it into a long event section “#z” on a timeline, and a main scene “# z2” at a time point between a start point and an end point. It is shown to select.
  • a main scene that takes into account the size of the text information of the event section. For example, if the length of the character string included in the text information of the event section is longer than a certain length, several main scenes may be selected for the corresponding event section. For example, if one main scene is selected for every 30 characters, three main scenes may be selected for an 80-character comment for an event section. On the contrary, when there are a plurality of consecutive event sections having a comment whose text length is less than or equal to a certain length, one main scene may be selected. For example, when five event sections having a four-character string are arranged consecutively on the timeline, one main scene may be selected for these five event sections.
  • the selected main scene may be extracted from the still image of the moving image data displayed at the time of the event.
  • the main scene may be the same image as the still image of the moving image data, but may be a processed still image of the moving image data.
  • the slide data may include a plurality of main scenes and event section information on which event section (or event time point) of each of the main scenes is linked to a playback section of the video data.
  • the slide data may have a dummy file structure having only event section information without actually including still images of a main scene.
  • a main image can be extracted as a still image from video data reproduced in real time using only event section information.
  • the electronic apparatus 1000 may produce multimedia content by merging or linking the video data with the slide data.
  • the video data is data encoded to be reproduced as a video
  • the slide data may include main scenes matched with an event time point (or event section), which is a specific time point in the playback section of the video.
  • the comment data may be merged or linked, and in this case, the comment data may include the comments that match the event time (or event section), which is a specific time point in the playback section of the video, like the slide data.
  • Such multimedia content can be selectively played according to the video mode or the slide show mode as will be described later.
  • the above-described display operation is described as being performed by the above-described electronic device 1000, and unless otherwise stated, the operation of the electronic device 1000 is performed by the control of the controller 1500. Can be interpreted.
  • the display operation is not limited to the above-described electronic device 1000 and may be performed using other electronic devices similar to the above-described electronic device 1000.
  • a slide show mode in which a main scene selected as described above is sequentially displayed as a still image will be described.
  • the video mode generally operates in a form similar to playing a video in a player of a multimedia content (for example, a Windows media player, etc.), a detailed description thereof will be omitted.
  • the slide show method may mean a method of outputting a specific main scene as a still image, receiving a user input in the state, or automatically outputting the next or previous main scene as a still image.
  • a slide movement function may be provided to sequentially output main scenes.
  • FIG. 8 is a view of a slide movement according to an embodiment of the present invention.
  • slide movement means changing a still image from a specific main scene to the next or previous main scene.
  • the slide show mode shows a slide movement from a specific main scene to the next or previous main scene.
  • the movement between the main scenes may be performed by referring to the comment data. Specifically, when an input relating to a slide movement occurs, the comment data is immediately before the current playback time on the timeline, based on the playback time being played back at that time on the timeline, for example, the start time of a comment corresponding to the main scene.
  • a slide movement between the main scenes can be performed by searching for a comment immediately following and outputting a main scene corresponding to the retrieved comment as a still image.
  • the comment text of the comment corresponding to the main scene can be output together.
  • the texts of the plurality of comments may be displayed together on one screen when the main scene is output as a still image.
  • the text of the comment may be divided and matched with each main scene.
  • a bookmark moving function of skipping between bookmarked scenes of the main scenes may be provided.
  • the bookmarked main scene may be a main tent selected in response to the bookmarked comment when the main scene is selected using the comment data.
  • the main scene may be set as a bookmarked main scene.
  • information indicating that the comment corresponding to the still image being output is a bookmarked comment may be recorded in the bookmark check field of the comment.
  • a bookmark at any point during playback in the video mode.
  • the video at the time of playing the bookmark may be set as the main bookmarked video.
  • a comment having the corresponding time point as a start point is generated in the comment data, and the comment is recorded to reflect that the comment is bookmarked in the bookmark check field.
  • the textual information of these comments will be treated as blanks (blank comments) or there will be no textual information.
  • bookmarking in addition to simply setting the bookmarked main scene, additional information about the bookmarked main scene may be generated.
  • the electronic apparatus 1000 may provide a text input window on the screen and receive a character string from the user.
  • the received string may be stored as text information of a comment corresponding to the main scene to be bookmarked.
  • the text input by the user may be additionally displayed in the form of a subtitle.
  • FIG. 10 is a diagram illustrating a bookmark movement according to an embodiment of the present invention.
  • a bookmark immediately preceding or immediately following the timeline from the comment data based on the current playback time that was being played back at that time on the timeline.
  • Moving to the bookmarked main scene may be performed by searching for the comment which has been read and outputting the main scene corresponding to the searched bookmarked comment as a still image.
  • the search for the bookmarked comment may be performed by examining the bookmark check field of the comment.
  • the main scene which is the most preceding scene on the timeline, is played as a still image to play the content by moving the slide.
  • the playback mode is changed to the slide show method.
  • the slide show is outputted as a still image while the main scene located immediately after or just before the playback point on the timeline with respect to the playback point that was being played in the video mode. You can enter the mode.
  • FIG. 9 is a diagram for entering a slide mode according to an embodiment of the present invention.
  • the main scene immediately after the playback point or immediately before the playback point on the timeline may be played as a still picture.
  • the basic screen may be provided through the output unit 1200 of the electronic device 1000.
  • a basic screen may include a display window, a progressive bar, a control panel, a slide icon, and a bookmark icon.
  • the main scene may be displayed as a still image on the display window.
  • a part of the display window may include a caption area displaying a comment on the still image.
  • the control panel may be arranged with icons for various user inputs (video playback, playback interruption, pause, rewind, forward, etc.) used in the video mode.
  • icons for various user inputs video playback, playback interruption, pause, rewind, forward, etc.
  • an icon corresponding to the playback time of the entire video and an icon representing the current playback time point are located on the bar.
  • the slide icon may be disposed on the left and right of the display window.
  • the slide icon relates to user input for performing slide movement in slide show mode.
  • the bookmark icon also relates to user input for setting a bookmark.
  • Various functions may be performed in the multimedia content display operation through a user input or a touch input for selecting an icon provided on the basic screen.
  • the transition from the video mode to the slide show mode may be performed as follows.
  • the electronic apparatus 1000 may change the play mode of the content from the video mode to the slide show mode.
  • the main scene immediately following the timeline is displayed as a still image, and the slide show mode is entered.
  • the user enters a slide show mode while displaying a still image of a main scene that has existed immediately before.
  • the electronic apparatus 1000 may convert the playback mode into the slide show mode.
  • 12 illustrates a user input for mode conversion according to an embodiment of the present invention.
  • the switching of the play mode may be performed when the drag touch input is made in the subtitle area.
  • the starting point of the touch input is within the caption area
  • Figure 12 also shows the slide movement by selecting the slide icon will be referred to.
  • the slide show mode may have a different comment attribute than the video mode.
  • the comment attribute may mean the size, color, font type, display position, etc. of the font of the comment.
  • the size of the text font may be increased than in the video mode.
  • the video can be played directly from the slide show playback time. It is also possible to play it. Accordingly, more natural video playback is possible.
  • the slide movement between the main scenes in the slide show mode can be made in a similar manner to the switching of the modes.
  • the slide movement may be performed by selecting the slide icon or by dragging the horizontal direction.
  • the slide movement between main scenes in the slide show may cause a visual effect that is changed to a format in which the screen slides.
  • the slide movement is performed.
  • the slide movement may not be performed.
  • the main screen may indicate that the current main scene is the last main scene.
  • the electronic apparatus 1000 may omit the slide icon for moving to the next main scene from the basic screen.
  • the slide icon for moving to the previous main scene may not be displayed while the first main scene is output.
  • FIG. 22 is a diagram illustrating bookmark setting in a slide show mode according to an embodiment of the present invention.
  • the bookmark may be set at the current playback time in the video mode or the slide show mode.
  • the scene is set as the main bookmarked scene. Referring to FIG. 22, it can be seen that a bookmark is set in a comment on a corresponding main scene.
  • a text input window for generating additional information may be provided. If a text is input from the window, the text can be displayed along with the comment. The text input as the additional information may be displayed differently from the original comment. On the other hand, if a bookmark is set at a position where there is no comment, a dummy comment is generated.
  • the bookmark movement using the bookmark set as described above may be performed as follows. 13 is a diagram illustrating a bookmark setting input according to an embodiment of the present invention.
  • the bookmark movement may be performed according to the drag touch input in the horizontal direction. Here, it may be performed when the drag touch input is made in the subtitle area. However, the drag touch input may be to move a predetermined distance or more in a horizontal direction.
  • the above-described slide movement and bookmark movement can be distinguished according to the drag distance. For example, once dragged to less than a predetermined distance, the slide movement is performed, and when the drag is continued again and dragged to the predetermined distance or more, the bookmark movement may be performed. Whether the bookmark point to be moved is a previous bookmark or a later bookmark may be set similarly to the slide movement according to the drag direction.
  • the electronic device 1000 may display a list of bookmarked main scenes.
  • 14 is a diagram illustrating a bookmark display according to an embodiment of the present invention. Referring to FIG. 14, in the slide show mode, images of a main bookmarked scene may be listed and displayed. For example, when a drag touch input in a vertical direction (for example, from top to bottom) is input, the electronic apparatus 1000 moves the display window downward according to the dragging degree and lists main images bookmarked in the remaining space in chronological order. It can be displayed up.
  • the playback point may be displayed by moving the playback time point to the still image of the bookmarked main image.
  • the list-up of the bookmark may be released.
  • the slide show mode described above may be performed using content previously stored in the memory 1400 of the electronic device 1000, in some cases, the slide show mode may be performed while receiving data about the content from an external device in a streaming manner. It may be.
  • data about content may be transmitted from an external device through the communication unit 1300 of the electronic device 1000, and the electronic device 1000 may temporarily store the data in a buffer to read the buffer and play the content.
  • the electronic apparatus 1000 may first receive a still image of a main scene to be displayed in the slide show mode.
  • a video streaming service sequentially receives video data for playing a video from a playback time point.
  • a still image of a main scene may be transmitted first. Since the still image of the main scene has a smaller capacity than the moving image, even if the transmission speed is low and it is difficult to reproduce the content as the moving image, the electronic device 1000 may play the content in the slide show mode when the main scene is first transmitted. Also, for this purpose, the electronic device 1000 may first receive comment data.
  • the still images may be received in the order adjacent to the current playback time point for a smoother slide show.
  • 15 is a diagram illustrating an example of a matching relationship between moving picture data, main scenes, and comment data according to an embodiment of the present invention.
  • the multimedia content may include video data having event sections in the playback section, slide data including main scenes, and comment data having text sections.
  • the event sections, the main scenes and the text sections may be linked or matched with each other.
  • the interlocking of the event section, the main scene, and the text section may be performed through the event time point.
  • the video mode is played with reference to the video data, and the text sections linked to the event section to which the playing time belongs are displayed, or the main scenes are displayed in a slide show mode in the slide show mode. And a text section linked with.
  • 16 and 17 are diagrams illustrating an example of a display screen of multimedia content provided with a comment according to an embodiment of the present invention.
  • the comment data can be displayed largely in the form of subtitles or articles.
  • a comment window is included in the form of a caption area in the display window so that the text may be displayed in the form of overlaying the caption on a video or a main video.
  • text data may be displayed in the form of an article.
  • a display window for displaying a video or a main scene and a comment window for displaying text sections may be separately displayed.
  • main scenes or video data are displayed in a display window, and text sections are displayed in a comment window.
  • the first main scene is displayed on the display window, and the linked first text section is displayed on the comment window.
  • the control panel for moving playback time or main scenes, starting or stopping playback, setting bookmarks, etc. in the video mode or slide show mode, and the position of the image currently displayed in the display window on the playback section Progressive bars to indicate may be displayed together.
  • the second main scene is followed by the first main scene on the display window.
  • the second text section linked to the second main scene may be displayed in the comment window.
  • the text of the comment window can be scrolled, the text can be moved up or down in units of lines, or paged. have.
  • FIGS. 18 and 19 illustrate another example of a display screen of multimedia content provided with a comment according to an exemplary embodiment of the present invention.
  • a first text section linked thereto is displayed from the top of the comment window, and then a part of the second text section is displayed next to the remaining space of the comment window. can do. If the second text section is displayed and there is additional space for displaying text in the comment window, the third and fourth text sections may be further displayed.
  • the second main scene is displayed on the display window as shown in FIG.
  • the window may display the second text section from the top and the third text section following the remaining space.
  • the text of the comment window may be scrolled, the text may be moved up or down in units of lines, or the page may be turned over. have.
  • all text sections of the comment data may be displayed in the comment window.
  • the text section corresponding to the main scene currently displayed on the display window among the entire text sections has a different display property (for example, font type, size, underlining, color, etc.) from the remaining text sections. can do.
  • 20 and 21 are diagrams illustrating still another example of a display screen of multimedia content provided with a comment according to an embodiment of the present invention.
  • text sections of all comment data are displayed together with the first main scene.
  • first text section that matches the first main scene among the text sections is displayed in a different color from the other text sections.
  • second main scene is displayed on the display window and the second text section is displayed in a different color from the remaining text sections.
  • the text section linked to the main scene on the display window is displayed with a display property different from the remaining text sections, so that the user can intuitively grasp which comment is on the image currently displayed on the display window.
  • the main scene is displayed in the display window and the text section is displayed in the comment window in the slide show mode.
  • the video is displayed by referring to the video data in the display window and the video is displayed in the comment window.
  • An appropriate text section may be displayed in the comment window according to the playback time point in the playback section of the data.
  • the comment window may display a text section linked to an event section to which a video playback time belongs.
  • the text section displayed in the comment window may be naturally scrolled, updated line by line, or page-by-page updated according to the flow of playback time.
  • the summary information may be displayed in addition to the main scene and the text section.
  • the summary information may mean text summarizing the contents of the text section.
  • the summary information may be a title or summary of each text section.
  • Such summary information may be extracted from a main sentence (eg, the first sentence or the last sentence) of the text section and generated by the electronic device 1000.
  • the summary information may be input separately by the user.
  • 22 and 23 are diagrams illustrating an example of a display screen of multimedia content that provides summary information with a comment according to an embodiment of the present invention.
  • a display window, a comment window, and a summary window may be provided on a screen.
  • summary information about the entire text section may be displayed.
  • the summary information may include a number indicating a sequence of a main scene, a text section, or an event section, an event time point (mainly a start time) of the event section, and a title of the corresponding text section.
  • a display window and a comment window may be provided on the screen.
  • the summary information may be displayed along with the text section in the comment window.
  • the text section or summary displayed in the comment window is displayed.
  • the main scene movement in the slide show mode or the playback time movement in the video mode may be performed through a user input for the information.
  • the comment window displays the previous or next text in the current text section.
  • the section may be displayed.
  • the previous or next main scene may be displayed in the slide show mode or the playback time may be moved to the previous or next event time point adjacent to the playback time in the video mode.
  • the playing time may be moved from the playing time of FIG. 16 to the next next event time.
  • the playback time point may be moved from the playback time point of FIG. 17 to the adjacent previous event time point.
  • an input for selecting a specific text section may be received, and the main scene or the playback time may be moved according to the input.
  • a text section indicated by the selected summary information may be displayed, and a main scene corresponding to the summary information may be displayed, or a playback time may be moved to an event time corresponding to the summary information.
  • the summary information corresponding to the second text section “# 2? 00:19: Tour programs ” may display the second main scene and the second text section.
  • the scrolling of the text section may be controlled through the scroll bar and the main scene or the playback time may be moved to correspond to the text section displayed by the scrolling.
  • the method may include obtaining an multimedia content (S110), displaying an image on a first area according to any one of a video mode and a slide show mode (S120) and a second. Displaying text in the area (S130) and adjusting the displayed text according to the displayed image (S140).
  • S110 an multimedia content
  • S120 displaying an image on a first area according to any one of a video mode and a slide show mode
  • S140 Displaying text in the area
  • S140 displayed image
  • the electronic device 1000 may acquire multimedia content (S110).
  • the multimedia content may include moving picture data, slide data, and comment data.
  • the electronic device 1000 may output an image to the first area by using the multimedia content (S120).
  • the image may be output according to any one of a video mode and a slide show mode.
  • the electronic apparatus 1000 may play a video by referring to the video data.
  • the slide show mode the electronic apparatus 1000 may display the main scene with reference to the slide data. In this case, switching between modes may be possible by a user input.
  • the electronic apparatus 1000 may display text in a second area different from or included in the first area (S130).
  • Text output may be performed with reference to the comment data.
  • the output text may include a text section linked to an event section corresponding to a playback time of a main scene or a video displayed among the comment data, and may further include subsequent text sections.
  • the second area may be included in a predetermined position of the first area when displaying text in the form of a caption, and may be located in a separate space from the first area when displaying text in the form of an article.
  • the text displayed in the second area may be adjusted according to the displayed image (S140).
  • a text section linked thereto displayed as the main scene is switched, or a text section linked thereto may be displayed with a display attribute different from other text sections.
  • the text section linked to the event section to which the current playback view belongs, or the linked text section is displayed with different display properties from other text sections. have.
  • the adjustment of the text display may be performed through an operation including at least one of scrolling, text scrolling, page up-down, and page turning for the displayed text.
  • the image displayed in the first area may be adjusted. That is, the video scene or the main scene corresponding to the event time point corresponding to the text section displayed in the second area may be displayed in the first area.
  • summary information of the text sections may be displayed together with the text section of the comment data.
  • 25 to 27 are diagrams illustrating another example of main scene selection according to an embodiment of the present invention.
  • the electronic device 1000 may reproduce video data in real time through the output unit 1200 in a display form.
  • the video data may be output through a display window.
  • a control panel for manipulating the playback of video data, a SC selection icon for receiving main scene selection inputs, and a progressive bar corresponding to the playback section of video data are provided.
  • a playback time indicator (PB indicator) indicating a progress time of video data playback on a progressive bar.
  • the main scene selection input may be input from the user through the input unit 1100 while the video is being played.
  • the scene selection input may be made by various methods such as clicking a predetermined button of the input unit 1100 or selecting a scene selection input icon (SC select icon) on the control panel of FIG. 25. .
  • an event time point may be determined based on the scene selection input.
  • the event time point may be a playback time point when a main scene selection input is received in a video playback period.
  • the determined event time point may be displayed as an indicator (EV indicator) indicating the event time point on the progressive bar as shown in FIG. 26.
  • EV indicator an indicator
  • an image frame (still image) of video data corresponding to the event time point may be acquired as a main scene.
  • the image frame itself may be acquired as a main scene, but if necessary, the main frame may be obtained by processing the image frame.
  • the acquired main scene may be displayed in the main scene window (SC window).
  • the main scene may be displayed in the form of a thumbnail, and the main scene window may also display the main scene number and the event time (EV time) related to the main scene.
  • EV time event time
  • real-time playback of the video data may be automatically stopped, and playback of the video data may be restarted as the user operates the play button of the control panel.
  • a plurality of event viewpoints may be selected accordingly, and a main scene may be selected for each event viewpoint.
  • FIG. 27 it can be seen that four main scenes are selected in the main scene window in the form of thumbnails.
  • an event indicator (EV indicator) indicating four event points is displayed on the progressive bar.
  • the playback time of the video data may be moved to the event time of the selected main scene.
  • the selected main scenes can be produced by synchronizing with the moving image data to generate the slide data as described above, thereby producing the multimedia content.
  • the main scene is not necessarily defined as a still image of an image frame corresponding to an event point in time, and a user may select an image frame of video data at a different point in time from the event point of view as needed. May need to be selected.
  • a main scene to be replaced may be selected. This selection can be made by the user selecting any one of the main scenes in the SC window.
  • an alternative scene for the selected main scene can be selected.
  • the selection of the replacement scene may be performed by reproducing the moving image data and performing the replacement scene selection input corresponding to the main scene selection input.
  • the selection of the alternative scene may be performed by moving the event indicator EV on the progressive bar. In this case, the main scene is changed as it is so that the scene that does not correspond to the event time is selected as the main scene.
  • the main scene corresponding to the event time point may be changed to change the slide data so that the replacement scene is changed to complete the change of the main scene.
  • the replacement time point of the replacement scene may be set only within an event point and a predetermined range.
  • 28 to 30 are diagrams illustrating an example of a comment data generation operation according to an embodiment of the present invention.
  • the electronic device 1000 displays a display output unit 1200 in addition to a display window for playing video data and a main window (SC window) for displaying a selected main scene. You can display more CM windows.
  • the comment window may include a comment indicator indicating a comment number and a comment input unit for inputting comment contents or displaying the input comment contents.
  • a corresponding CM indicator may be generated. For example, as shown in FIG. 28, when a main scene of “scene # 1” is generated for an event time of “0: 58.00”, the comment indicator of “Comment # 1” is displayed in the CM window. Can be displayed.
  • the input text may be obtained as a comment corresponding to the corresponding event time point and the main scene. Referring to FIG. 29, the user inputs the text “Hi?” In the CM input interface. Where are you going? ”Text can be obtained as a comment on“ Comment # 1 ”.
  • a main scene window may include a plurality of main scenes.
  • a plurality of comment indicators (CM indicator) may be displayed in the CM window.
  • CM indicator comment indicators
  • a comment corresponding to the comment indicator may be input since the input is selected.
  • the second comment corresponding to the second main scene “scene # 2” “Good to see you. Bye ⁇ ”can be seen.
  • the playback time of the video data may or may not be moved to the event time corresponding to the selected comment indicator.
  • the multimedia data may be produced by matching them with the event point or the main scenes corresponding to the event point to produce multimedia content.
  • the electronic device 1000 may acquire video data.
  • the controller 1500 may read previously stored video data from the memory 1400 or download or stream video data from the outside through the communication unit 1300.
  • the video data may be an image captured by the camera in real time.
  • the electronic device 1000 may play video data.
  • a main scene selection input may be obtained from a user while moving image data is being reproduced.
  • the electronic device 1000 may determine an event time point based on a main scene selection input.
  • the event time point may be a reproduction time point that is reproduced when the main scene selection input is received during the reproduction period of the video data.
  • the electronic apparatus 1000 may select a main scene based on this.
  • the main scene may be a still image corresponding to an image frame of video data corresponding to an event time point.
  • the electronic apparatus 1000 may generate slide data by matching each main scene to an event time point, and thus multimedia content may be produced.
  • the user may set a comment corresponding to the main scene.
  • the comment may be set according to the selection of a comment indicator generated according to the main scene.
  • comment data may be generated by matching the main scene to which the text is related or an event time of the main scene. This makes it possible to produce multimedia contents with comments.
  • the slide show method may mean a method of outputting a specific main scene as a still image, receiving a user input in the state, or automatically outputting the next or previous main scene as a still image.
  • a slide movement function may be provided to sequentially output main scenes.
  • 31 is a diagram of a basic screen of a content reproduction method according to an embodiment of the present invention.
  • a basic screen may include a display window, a progressive bar, a control panel, a slide icon, and a bookmark icon.
  • the main scene may be displayed as a still image on the display window.
  • a part of the display window may include a caption area displaying a comment on the still image.
  • the subtitle area exists so that the subtitles using the comment data in the video mode or the slide show mode are displayed in the subtitle area, so that the speech bubble is displayed to correspond to the speaker in the image that speaks the subtitle, and the subtitle is displayed in the speech bubble.
  • the control panel may be arranged with icons for various user inputs (video playback, playback interruption, pause, rewind, forward, etc.) used in the video mode. In the progressive bar, an icon corresponding to the playback time of the entire video and an icon representing the current playback time point are located on the bar.
  • the slide icon may be disposed on the left and right of the display window.
  • the slide icon relates to user input for performing slide movement in slide show mode.
  • the bookmark icon also relates to user input for setting a bookmark.
  • Various operations may be performed in the content reproduction method through a user input or a touch input for selecting an icon provided on the basic screen.
  • the transition from the video mode to the slide show mode may be performed as follows.
  • the electronic apparatus 1000 may change the play mode of the content from the video mode to the slide show mode.
  • the main scene immediately following the timeline is displayed as a still image, and the slide show mode is entered.
  • the user enters a slide show mode while displaying a still image of a main scene that has existed immediately before.
  • the electronic apparatus 1000 may convert the playback mode into the slide show mode.
  • 32 is a diagram illustrating user input for mode conversion according to an embodiment of the present invention.
  • the switching of the play mode may be performed when the drag touch input is made in the subtitle area.
  • the starting point of the touch input is within the caption area, it may be determined that the drag touch input is within the caption area.
  • it when entering the slide show mode according to the horizontal movement direction of the drag touch input, it may be determined whether to output the previous main scene as a still image or the next main scene as a still image from the playback time point of the video. . For example, as shown in FIG.
  • the slide show mode may have a different comment attribute than the video mode.
  • the comment attribute may mean the size, color, font type, display position, etc. of the font of the comment.
  • 33 is a view illustrating a change of a comment attribute in a slide show mode according to an embodiment of the present invention. For example, referring to FIGS. 32 and 33, it can be seen that the comment font size is increased while entering the slide show mode.
  • the video can be played directly from the slide show playback time. It is also possible to play it. Accordingly, more natural video playback is possible.
  • the slide movement between the main scenes in the slide show mode can be made in a similar manner to the switching of the modes.
  • the slide movement may be performed by selecting the slide icon or by dragging the horizontal direction.
  • the slide movement between main scenes in the slide show may cause a visual effect that is changed to a format in which the screen slides.
  • 34 is a diagram illustrating a visual effect of slide movement in a slide show mode according to an embodiment of the present invention.
  • the slide movement is performed.
  • the slide movement may not be performed.
  • slide movement between the main scenes in the slide show mode may be performed in a manner different from that described above according to the drag touch input.
  • the main scene when a drag touch input is received in the display window, the main scene may be moved.
  • the moving speed of the main scene may be determined according to the length direction of the drag touch.
  • the length of the drag touch when the length of the drag touch is less than or equal to the predetermined length, there may be no main scene movement.
  • the length of the drag touch is greater than or equal to the predetermined length, the main scene moves from the current main scene to the next main scene at predetermined time intervals according to the length.
  • the predetermined time interval may be shortened as the length of the drag touch increases.
  • the number of main scenes moving while maintaining a predetermined time interval may increase.
  • 35 is a view illustrating an example of a slide moving method in a slide show mode according to an embodiment of the present invention.
  • the main scene movement may be performed once per second, and when the drag touch is made to the second drag point, the main scene movement may be performed 10 times per second.
  • the movement of the main scene may be performed with a visual effect similar to that of turning a page of an actual paper book instead of a simple screen transition.
  • the main screen may indicate that the current main scene is the last main scene.
  • the electronic apparatus 1000 may omit the slide icon for moving to the next main scene from the basic screen.
  • 36 is a diagram illustrating omitting a slide icon in a slide show mode according to an embodiment of the present invention.
  • the slide icon for moving to the next main scene is not displayed as a result of reaching the last main scene.
  • the slide icon for moving to the previous main scene may not be displayed while the first main scene is output.
  • bookmark setting in a slide show mode is a diagram illustrating bookmark setting in a slide show mode according to an embodiment of the present invention.
  • the bookmark may be set at the current playback time in the video mode or the slide show mode.
  • the scene is set as the main bookmarked scene. Referring to FIG. 37, it can be seen that a bookmark is set in a comment on a corresponding main scene.
  • a text input window for generating additional information may be provided. If a text is input from the window, the text can be displayed along with the comment. The text input as the additional information may be displayed differently from the original comment. On the other hand, if a bookmark is set at a position where there is no comment, a dummy comment is generated.
  • bookmarking various user interfaces may be used in addition to selecting a bookmark button as shown in FIG. 37.
  • FIG. 38 is a diagram illustrating an example of a user interface for setting a bookmark in a slide show mode according to an embodiment of the present invention. Referring to FIG. 38, it may be possible to bookmark a main scene displayed on the display window when receiving a touch input from the bottom to the display window.
  • the term 'marking' was mainly used, which is generally not to be interpreted as a narrow meaning of bookmarking set for multimedia contents, and the act of storing and recording the main scene so that it can be managed separately from other main scenes. Should be understood as.
  • the bookmark movement using the bookmark set as described above may be performed as follows.
  • 39 is a diagram illustrating a touch input for moving a bookmark according to an embodiment of the present invention.
  • the bookmark movement may be performed according to the drag touch input in the horizontal direction.
  • it may be performed when the drag touch input is made in the subtitle area.
  • the drag touch input may be to move a predetermined distance or more in a horizontal direction.
  • the above-described slide movement and bookmark movement can be distinguished according to the drag distance. For example, once dragged to less than a predetermined distance, the slide movement is performed, and when the drag is continued again and dragged to the predetermined distance or more, the bookmark movement may be performed.
  • the bookmark point to be moved is a previous bookmark or a later bookmark may be set similarly to the slide movement according to the drag direction.
  • the electronic device 1000 may display a list of bookmarked main scenes. 26 relates to the display of a bookmark list according to an embodiment of the present invention. Referring to FIG. 40, in the slide show mode, images of bookmarked main scenes may be listed and displayed. For example, when a drag touch input in a vertical direction (for example, from top to bottom) is input, the electronic apparatus 1000 moves the display window downward according to the dragging degree and lists main images bookmarked in the remaining space in chronological order. It can be displayed up.
  • a drag touch input in a vertical direction for example, from top to bottom
  • the playback point may be displayed by moving the playback time point to the still image of the bookmarked main image.
  • the list-up of the bookmark may be released.
  • the electronic apparatus 1000 may provide a function of browsing an event time point with all comments.
  • 41 is a diagram of a browser at an event time point according to an embodiment of the present invention. Referring to FIG. 41, in the slide show mode, an event browser in which event points are listed according to a user input may be displayed. Double touch may be used as a user input for this purpose.
  • the event browser may include a start time, an end time, and text content for all event sections.
  • the playback time point may be moved to the viewpoint of the main image of the selected event section.
  • the slide show mode described above may be performed using content previously stored in the memory 1400 of the electronic device 1000, in some cases, the slide show mode may be performed while receiving data about the content from an external device in a streaming manner. It may be.
  • data about content may be transmitted from an external device through the communication unit 1300 of the electronic device 1000, and the electronic device 1000 may temporarily store the data in a buffer to read the buffer and play the content.
  • the electronic apparatus 1000 may first receive a still image of a main scene to be displayed in the slide show mode.
  • image data for playing a video is sequentially received from a playback time point.
  • a still image of a main scene may be transmitted first. Since the still image of the main scene has a smaller capacity than the moving image, even if the transmission speed is low and it is difficult to reproduce the content as the moving image, the electronic device 1000 may play the content in the slide show mode when the main scene is first transmitted. Also, for this purpose, the electronic device 1000 may first receive comment data.
  • the still images may be received in the order adjacent to the current playback time point for a smoother slide show.
  • the electronic device 1000 may acquire content.
  • the controller 1500 may read content stored in advance from the memory 1400 or download and load content from the outside through the communication unit 1300.
  • the content may be image data.
  • the still image data of the main scene may be downloaded before the video data.
  • the main scenes may be downloaded in order of being adjacent to the current playback time.
  • the electronic apparatus 1000 may obtain event information regarding an event time point.
  • an event is a concept including a dummy event having an empty comment as an event.
  • the event point may be the start or end point of the event section and the event information may mean comment data.
  • the controller 1500 may read comment data from an external device or read comment data previously stored in the memory 1400.
  • the electronic device 1000 may play the content in the video mode.
  • the controller 1500 can reproduce the content as a video by decoding the content with an appropriate video codec.
  • the electronic apparatus 1000 may play content in a slide show mode.
  • the electronic device 1000 may sequentially display a main scene corresponding to the event time point of the event information in a slide show manner.
  • the main scene may be displayed as a still image, and the still image may be extracted with respect to an event time point from a video of content.
  • the content may include still images of a main scene together with the video. In this case, the content may be reproduced by a slide show method by decoding the still image with a still image codec.
  • the main scene closest to the playback time in the video mode is output as a still image to enter the slide show mode.
  • playback in the video mode may be started when the main scene is moved or moved forward or backward by a predetermined time.
  • the present invention can be applied in whole or in part to a method for producing and playing multimedia content, an electronic device for performing the same, and a recording medium storing a program for executing the same.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은 멀티미디어 콘텐츠 디스플레이 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체에 관한 것으로, 본 발명의 일 양상에 따른 멀티미디어 콘텐츠 디스플레이 방법은 동영상으로 재생되는 동영상 데이터 및 상기 동영상 데이터의 재생 구간 상의 이벤트 시점에 매칭되어 슬라이드 쇼 방식으로 디스플레이되는 주요 장면을 포함하는 슬라이드 데이터를 포함하는 멀티미디어 콘텐츠를 획득하는 단계; 상기 멀티미디어 콘텐츠에 대응되는 텍스트 데이터를 획득하는 단계; 상기 동영상 데이터를 동영상으로 재생하는 동영상 모드 또는 상기 상기 주요 장면을 슬라이드 쇼 방식으로 디스플레이하는 슬라이드 쇼 모드 중 어느 하나의 모드에 따라 제1 영역에 상기 멀티미디어 콘텐츠를 디스플레이하는 단계; 제2 영역에 상기 텍스트 데이터의 적어도 일부를 디스플레이하는 단계; 및 상기 디스플레이되는 멀티미디어 콘텐츠에 따라 상기 디스플레이되는 텍스트 데이터를 조정하는 단계;를 포함할 수 있다.

Description

멀티미디어 콘텐츠 제작 및 재생 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체
본 발명은 멀티미디어 콘텐츠제작 및 재생 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체에 관한 것으로, 보다 상세하게는 동영상 방식이나 슬라이드 쇼 방식으로 재생되는 멀티미디어 콘텐츠제작 및 재생 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체에 관한 것이다.
오늘날 통신 기술과 영상 처리 기술의 발달과 함께 멀티미디어 콘텐츠의 활용이 일상화되고 있다. 이러한 추세와 함께 다양한 멀티미디어 콘텐츠의 감상자가 멀티미디어 콘텐츠의 원하는 장면을 선택하여 곧바로 볼 수 있도록 해주는 지능형 유저 인터페이스에 대한 요구 역시 빈번하게 발생하고 있다.
사용자는 멀티미디어 콘텐츠 내에 포함된 광고나 이미 관람한 부분 또는 관심없는 부분을 배제하고 시청하기를 원하는 시점으로부터 멀티미디어 콘텐츠를 감상하고 싶어하는데, 기존의 테이프 비디오 등의 아날로그 장치에서는 원하는 위치로의 랜덤 억세스가 물리적으로 불가능하여 빨리감기 등을 이용하여 사용자가 직접 확인하며 원하는 부분에 억세스하여야 했다. 최근에는 멀티미디어 콘텐츠의 디지털 기술로 인하여 높은 정확도를 가지고 원하는 재생 시점에 곧바로 접근하는 것이 가능해졌다.
그러나, 이러한 디지털 콘텐츠의 고속 탐색에 이용되는 FF/FR(Fast Forward/Fast Rewind) 기능은 사용자가 원하는 정확한 위치로 이동하기 위해서 수많은 사용자 입력이 필요하며 정확히 원하는 위치로 이동했는지를 알기 위해 사용자가 계속해서 미디어의 재생을 주시해야할 뿐 아니라 사용자가 멀티미디어의 주요 장면만을 스킵해가며 빠르게 감상하기를 원하는 경우에는 기존의 탐색 방식이 적합치 않은 문제점이 있었다.
본 발명의 일 과제는 동영상으로써 재생되는 콘텐츠에 대하여 그 주요 장면을 골라 슬라이드 쇼로 재생하는 콘텐츠 재생 방법 및 이를 수행하는 전자 기기를 제공하는 것이다.
본 발명의 일 과제는 동영상 모드 및 슬라이드 쇼 모드 중 선택적으로 어느 하나의 모드에 따라 재생이 가능한 멀티미디어 콘텐츠와 함께 그에 대한 자막이나 기사 등의 텍스트를 연동시켜 제공하는 멀티미디어 콘텐츠 디스플레이 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체를 제공하는 것이다.
본 발명의 다른 과제는 실시간으로 카메라로 동영상을 촬영하거나 메모리로부터 기 저장된 동영상을 읽어들여 이를 이용하여 동영상 그대로를 재생하거나 또는 그 동영상의 주요 장면 별 슬라이드 쇼 방식의 재생이 가능한 멀티미디어 콘텐츠를 제작하는 멀티미디어 콘텐츠 제작 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체를 제공하는 것이다.
본 발명의 다른 과제는 사용자가 상술한 텍스트의 전체 내용을 쉽게 파악하고 원하는 텍스트 구간을 바로 볼 수 있도록 텍스트의 요약 정보를 함께 제공하는 멀티미디어 콘텐츠 디스플레이 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체를 제공하는 것이다.
본 발명이 해결하고자 하는 과제가 상술한 과제로 제한되는 것은 아니며, 언급되지 아니한 과제들은 본 명세서 및 첨부된 도면으로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 양상에 따르면, 영상 데이터를 포함하는 콘텐츠를 획득하는 단계; 상기 콘텐츠의 타임 라인 상에 매칭되는 이벤트 시점들에 관한 이벤트 정보를 획득하는 단계; 상기 콘텐츠를 동영상으로 재생하는 동영상 모드 및 상기 콘텐츠의 주요 장면을 정지 영상으로 순차적으로 디스플레이하는 슬라이드 쇼 모드 중 어느 하나의 재생 모드로 상기 콘텐츠를 재생하는 단계, 여기서 상기 주요 장면은 상기 이벤트 시점에 대응되는 이미지임; 상기 동영상 모드를 수행하는 동안 제1 타입의 제1 입력을 수신한 경우 상기 재생 모드를 상기 슬라이드 쇼 모드로 변경하는 단계, 여기서 상기 동영상 모드에서 상기 슬라이드 쇼 모드로 진입 시 재생 시점을 상기 타임 라인 상에서 상기 제1 입력 수신 시의 재생 시점에 인접한 제1 이벤트 시점으로 설정하고, 상기 제1 이벤트 시점에 대응하는 주요 장면을 디스플레이함; 및 상기 슬라이드 쇼 모드를 수행하는 동안 상기 제1 타입의 제2 입력을 수신한 경우 상기 재생 모드를 상기 슬라이드 쇼 모드로 유지하고 재생 시점을 이동시키는 단계, 여기서 상기 타임 라인 상에서 상기 제2 입력 수신 시의 재생 시점에 인접한 제2 이벤트 시점으로 재생 시점을 이동시키고 상기 제2 이벤트 시점에 대응되는 주요 장면을 디스플레이함;을 포함하는 콘텐츠 재생 방법이 제공될 수 있다.
본 발명의 일 양상에 따르면, 동영상 모드 및 슬라이드 쇼 모드로 출력되는 멀티미디어 콘텐츠의 제작 방법으로서, 동영상 콘텐츠를 획득하는 단계; 상기 동영상 콘텐츠를 실시간으로 재생하는 단계; 상기 재생 중 사용자로부터 장면 선정 입력을 수신하는 단계; 상기 장면 선정 입력에 기초하여 상기 동영상의 재생 구간 중 이벤트 시점을 생성하는 단계; 상기 이벤트 시점에 기초하여 상기 동영상 콘텐츠로부터 주요 장면을 획득하는 단계; 상기 동영상 콘텐츠의 상기 이벤트 시점에 상기 주요 장면을 매칭시켜 상기 멀티미디어 콘텐츠를 제작하는 단계;를 포함하는 멀티미디어 콘텐츠 제작 방법이 제공될 수 있다.
본 발명의 다른 양상에 따르면, 동영상 모드 및 슬라이드 쇼 모드로 출력되는 멀티미디어 콘텐츠를 제작하는 전자 기기로서, 영상을 출력하는 디스플레이; 사용자로부터 입력을 받는 입력부; 및동영상 콘텐츠를 획득하고, 상기 디스플레이를 통해 상기 동영상 콘텐츠를 실시간으로 재생하고, 상기 입력부를 통해 상기 재생 중 사용자로부터 장면 선정 입력을 수신하고, 상기 장면 선정 입력에 기초하여 상기 동영상의 재생 구간 중 이벤트 시점을 생성하고, 상기 이벤트 시점에 기초하여 상기 동영상 콘텐츠로부터 주요 장면을 획득하고, 상기 동영상 콘텐츠의 상기 이벤트 시점에 상기 주요 장면을 매칭시켜 상기 멀티미디어 콘텐츠를 제작하는 제어부;를 포함하는 전자 기기가 제공될 수 있다.
본 발명의 또 다른 양상에 따르면, 상술한 멀티미디어 콘텐츠 제작 방법을 실행하는 프로그램이 저장된 기록 매체가 제공될 수 있다.
본 발명의 과제의 해결 수단이 상술한 해결 수단들로 제한되는 것은 아니며, 언급되지 아니한 해결 수단들은 본 명세서 및 첨부된 도면으로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 양상에 따르면, 동영상으로 재생되는 동영상 데이터 및 상기 동영상 데이터의 재생 구간 상의 이벤트 시점에 매칭되어 슬라이드 쇼 방식으로 디스플레이되는 주요 장면을 포함하는 슬라이드 데이터를 포함하는 멀티미디어 콘텐츠를 획득하는 단계; 상기 멀티미디어 콘텐츠에 대응되는 텍스트 데이터를 획득하는 단계; 상기 동영상 데이터를 동영상으로 재생하는 동영상 모드 또는 상기 상기 주요 장면을 슬라이드 쇼 방식으로 디스플레이하는 슬라이드 쇼 모드 중 어느 하나의 모드에 따라 제1 영역에 상기 멀티미디어 콘텐츠를 디스플레이하는 단계; 제2 영역에 상기 텍스트 데이터의 적어도 일부를 디스플레이하는 단계; 및 상기 디스플레이되는 멀티미디어 콘텐츠에 따라 상기 디스플레이되는 텍스트 데이터를 조정하는 단계;를 포함하는 멀티미디어 콘텐츠 디스플레이 방법이 제공될 수 있다.
본 발명의 다른 양상에 따르면, 영상을 출력하는 디스플레이; 및 동영상으로 재생되는 동영상 데이터 및 상기 동영상 데이터의 재생 구간 상의 이벤트 시점에 매칭되어 슬라이드 쇼 방식으로 디스플레이되는 주요 장면을 포함하는 슬라이드 데이터를 포함하는 멀티미디어 콘텐츠를 획득하고, 상기 멀티미디어 콘텐츠에 대응되는 텍스트 데이터를 획득하고, 상기 디스플레이를 통해 상기 동영상 데이터를 동영상으로 재생하는 동영상 모드 또는 상기 상기 주요 장면을 슬라이드 쇼 방식으로 디스플레이하는 슬라이드 쇼 모드 중 어느 하나의 모드에 따라 제1 영역에 상기 멀티미디어 콘텐츠를 디스플레이하고, 제2 영역에 상기 텍스트 데이터의 적어도 일부를 디스플레이하고, 상기 디스플레이되는 멀티미디어 콘텐츠에 따라 상기 디스플레이되는 텍스트 데이터를 조정하는 콘트롤러;를 포함하는 전자 기기가 제공될 수 있다.
본 발명의 또 다른 양상에 따르면, 상술한 멀티미디어 콘테츠 디스플레이 방법을 수행하는 프로그램이 저장된 컴퓨터로 판독가능한 기록 매체가 제공될 수 있다.
본 발명의 과제의 해결 수단이 상술한 해결 수단들로 제한되는 것은 아니며, 언급되지 아니한 해결 수단들은 본 명세서 및 첨부된 도면으로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명에 의하면 동영상으로 재생될 수 있는 콘텐츠에 대하여 동영상으로 재생하는 것 이외에 정지 영상으로 그 주요 장면을 순차적으로 보여주는 슬라이드 쇼 방식을 제공함으로써 해당 콘텐츠 전체를 주요 장면 위주로 빠른 시간 안에 감상할 수 있다.
본 발명에 의하면, 동영상으로부터 동영상 모드는 물론 슬라이드 쇼 모드로 재생이 가능한 멀티미디어 콘텐츠를 제작할 수 있다.
또 본 발명에 의하면, 실시간으로 카메라에서 촬영되는 동영상이나 메모리에 기 저장된 동영상으로부터 동영상 그대로를 재생하거나 또는 그 동영상의 주요 장면 별 슬라이드 쇼 방식의 재생이 가능한 멀티미디어 콘텐츠를 제작할 수 있다.
본 발명의 효과가 상술한 효과들로 제한되는 것은 아니며, 언급되지 아니한 효과들은 본 명세서 및 첨부된 도면으로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확히 이해될 수 있을 것이다.
도 1은 본 발명의 실시예에 따른 전자 기기의 블록도이다.
도 2는 본 발명의 실시예에 따른 멀티미디어 콘텐츠의 데이터 구조의 개략도이다.
도 3은 본 발명의 실시예에 따른 코멘트 데이터의 구조의 개략도이다.
도 4는 본 발명의 실시예에 따른 코멘트 데이터의 내용에 관한 도면이다.
도 5는 본 발명의 실시예에 따른 주요 장면의 선정의 일 예에 관한 도면이다.
도 6은 본 발명의 실시예에 따른 주요 장면의 선정의 다른 예에 관한 도면이다.
도 7은 본 발명의 실시예에 따른 주요 장면의 선정의 또 다른 예에 관한 도면이다.
도 8은 본 발명의 실시예에 따른 슬라이드 이동에 관한 도면이다.
도 9는 본 발명의 실시예에 따른 북마크 이동에 관한 도면이다.
도 10은 본 발명의 실시예에 따른 슬라이드 모드로의 진입에 관한 도면이다.
도 11은 본 발명의 실시예에 따른 멀티미디어 콘텐츠의 디스플레이 화면의 일 예에 관한 도면이다.
도 12는 본 발명의 실시예에 따른 슬라이드 모드로의 진입 요청 또는 슬라이드 이동 입력에 관한 도면이다.
도 13은 본 발명의 실시예에 따른 북마크 설정 입력에 관한 도면이다.
도 14는 본 발명의 실시예에 따른 북마크 표시에 관한 도면이다.
도 15는 본 발명의 실시예에 따른 동영상 데이터, 주요 장면 및 코멘트 데이터의 매칭 관계의 일 예를 도시한 도면이다.
도 16 및 도 17은 본 발명의 실시예에 따른 코멘트와 함께 제공되는 멀티미디어 콘텐츠의 디스플레이 화면의 일 예에 관한 도면이다.
도 18 및 도 19는 본 발명의 실시예에 따른 코멘트와 함께 제공되는 멀티미디어 콘텐츠의 디스플레이 화면의 다른 예에 관한 도면이다.
도 20 및 도 21은 본 발명의 실시예에 따른 코멘트와 함께 제공되는 멀티미디어 콘텐츠의 디스플레이 화면의 또 다른 예에 관한 도면이다.
도 22 및 도 23은 본 발명의 실시예에 따른 요약 정보를 코멘트와 함께 제공하는 멀티미디어 콘텐츠의 디스플레이 화면의 일 예에 관한 도면이다.
도 24는 본 발명의 실시예에 따른 멀티미디어 콘텐츠 디스플레이 방법의 순서도이다.
도 25 내지 도 27는 본 발명의 실시예에 따른 주요 장면 선정의 다시 또 다른 예에 관한 도면들이다.
도 28 내지 도 30은 본 발명의 실시예에 따른 코멘트 데이터 생성 동작의 예에 관한 도면들이다.
도 31은 본 발명의 실시예에 따른 콘텐츠 재생 방법의 기본 화면에 관한 도면이다.
도 32은 본 발명의 실시에에 따른 모드 변환을 위한 사용자 입력에 관한 도면이다.
도 33는 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 자막 속성의 변화를 도시한 도면이다.
도 34은 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 슬라이드 이동의 비쥬얼 효과에 관한 도면이다.
도 35은 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 슬라이드 이동 방식의 일 예에 관한 도면이다.
도 36는 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 슬라이드 아이콘의 생략에 관한 도면이다.
도 37은 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 북마크 설정에 관한 도면이다.
도 38는 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 북마크 설정을 위한 사용자 인터페이스의 일 예에 관한 도면이다.
도 39는 본 발명의 실시에에 따른 북마크 이동을 위한 터치 입력에 관한 도면이다.
도 40은 본 발명의 실시예에 따른 북마크 리스트의 표시에 관한 것이다.
도 41은 본 발명의 실시예에 따른 자막 이벤트 브라우저에 관한 도면이다.
본 명세서에 기재된 실시예는 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 본 발명의 사상을 명확히 설명하기 위한 것이므로, 본 발명이 본 명세서에 기재된 실시예에 의해 한정되는 것은 아니며, 본 발명의 범위는 본 발명의 사상을 벗어나지 아니하는 수정예 또는 변형예를 포함하는 것으로 해석되어야 한다.
본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하여 가능한 현재 널리 사용되고 있는 일반적인 용어를 선택하였으나 이는 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자의 의도, 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 다만, 이와 달리 특정한 용어를 임의의 의미로 정의하여 사용하는 경우에는 그 용어의 의미에 관하여 별도로 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는 단순한 용어의 명칭이 아닌 그 용어가 가진 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 한다.
본 명세서에 첨부된 도면은 본 발명을 용이하게 설명하기 위한 것으로 도면에 도시된 형상은 본 발명의 이해를 돕기 위하여 필요에 따라 과장되어 표시된 것일 수 있으므로 본 발명이 도면에 의해 한정되는 것은 아니다.
본 명세서에서 본 발명에 관련된 공지의 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에 이에 관한 자세한 설명은 필요에 따라 생략하기로 한다.
본 발명의 일 양상에 따르면, 동영상으로 재생되는 동영상 데이터 및 상기 동영상 데이터의 재생 구간 상의 이벤트 시점에 매칭되어 슬라이드 쇼 방식으로 디스플레이되는 주요 장면을 포함하는 슬라이드 데이터를 포함하는 멀티미디어 콘텐츠를 획득하는 단계; 상기 멀티미디어 콘텐츠에 대응되는 텍스트 데이터를 획득하는 단계; 상기 동영상 데이터를 동영상으로 재생하는 동영상 모드 또는 상기 상기 주요 장면을 슬라이드 쇼 방식으로 디스플레이하는 슬라이드 쇼 모드 중 어느 하나의 모드에 따라 제1 영역에 상기 멀티미디어 콘텐츠를 디스플레이하는 단계; 제2 영역에 상기 텍스트 데이터의 적어도 일부를 디스플레이하는 단계; 및 상기 디스플레이되는 멀티미디어 콘텐츠에 따라 상기 디스플레이되는 텍스트 데이터를 조정하는 단계;를 포함하는 멀티미디어 콘텐츠 디스플레이 방법이 제공될 수 있다.
또 상기 조정하는 단계는, 상기 디스플레이되는 텍스트 데이터를 갱신할 수 있다.
또 상기 조정하는 단계에서, 상기 디스플레이되는 텍스트 데이터에 대하여 스크롤링, 텍스트 상하이동, 페이지 업다운 및 페이지 넘김 중 적어도 하나를 포함하는 오퍼레이션을 수행할 수 있다.
또 상기 텍스트 데이터는, 상기 이벤트 시점에 링크되는 텍스트 구간을 포함하고, 상기 조정하는 단계에서, 상기 동영상 모드에 따라 재생되는 상기 동영상 데이터의 재생 시점에 대응되는 이벤트 시점에 링크되는 상기 텍스트 구간이 상기 제2 영역에 표시되도록 조정할 수 있다.
또 상기 텍스트 구간은, 적어도 하나의 패러그래프 단위를 포함할 수 있다.
또 상기 재생 시점에 대응되는 이벤트 시점은, 상기 재생 구간 상에서 상기 재생 시점과 동일한 이벤트 시점 또는 상기 재생 시점 바로 이전에 위치하는 이벤트 시점 중 적어도 하나를 포함할 수 있다.
또 사용자로부터 상기 디스플레이되는 텍스트 데이터에 대하여 스크롤링, 텍스트 상하이동, 페이지 업다운 및 페이지 넘김 중 적어도 하나를 지시하는 사용자 입력을 수신하는 단계; 상기 사용자 입력에 따라 상기 텍스트 데이터에 대한 오퍼레이션을 수행하는 단계; 및 상기 오퍼레이션에 따라 상기 제2 영역에 디스플레이되는 텍스트 구간이 링크되는 이벤트 시점으로 상기 동영상 데이터의 재생 시점을 이동시키는 단계;를 더 포함할 수 있다.
또 상기 재생 시점의 이동 시 상기 동영상 데이터의 재생을 일시 정지하는 단계;를 더 포함할 수 있다.
또 상기 동영상 모드에 따라 상기 멀티미디어 콘텐츠를 디스플레이하는 동안 사용자로부터 상기 텍스트 데이터에 대하여 스크롤링, 텍스트 상하이동, 페이지 업다운 및 페이지 넘김 중 적어도 하나를 지시하는 사용자 입력을 수신하는 단계; 상기 사용자 입력에 따라 상기 텍스트 데이터에 대한 오퍼레이션을 수행하는 단계; 상기 오퍼레이션에 따라 상기 제2 영역에 디스플레이되는 텍스트 구간이 링크되는 이벤트 시점으로 상기 동영상 데이터의 재생 시점을 이동시키는 단계; 상기 동영상 모드에서 상기 슬라이드 쇼 모드로 전환해 상기 제2 영역에 디스플레이되는 텍스트 구간이 링크되는 이벤트 시점에 매칭되는 주요 장면을 디스플레이하는 단계;를 더 포함할 수 있다.
또 상기 텍스트 데이터는, 상기 주요 장면에 링크되는 텍스트 구간을 포함하고, 상기 조정하는 단계에서, 상기 슬라이드 쇼 모드에 따라 디스플레이되는 주요 장면에 링크되는 텍스트 구간이 상기 제2 영역에 표시되도록 조정할 수 있다.
또 상기 텍스트 구간은, 적어도 하나의 패러그래프 단위를 포함할 수 있다.
또 사용자로부터 상기 디스플레이되는 텍스트 데이터에 대하여 스크롤링, 텍스트 상하이동, 페이지 업다운 및 페이지 넘김 중 적어도 하나를 지시하는 사용자 입력을 수신하는 단계; 상기 사용자 입력에 따라 상기 텍스트 데이터에 대한 오퍼레이션을 수행하는 단계; 및 상기 오퍼레이션에 따라 상기 제2 영역에 디스플레이되는 텍스트 구간이 링크되는 주요 장면을 디스플레이하는 단계;를 더 포함할 수 있다.
또 상기 텍스트 데이터는, 상기 이벤트 시점에 링크되는 텍스트 구간들 및 상기 텍스트 구간의 요약 정보를 포함할 수 있다.
또 상기 텍스트 데이터를 디스플레이하는 단계는, 상기 동영상 모드에 따라 재생되는 상기 동영상 데이터의 재생 시점 및 상기 슬라이드 쇼 모드에 따라 디스플레이되는 상기 주요 장면 중 어느 하나에 대응되는 상기 이벤트 시점에 링크되는 상기 텍스트 구간을 디스플레이하는 단계 및 상기 요약 정보를 디스플레이하는 단계를 포함할 수 있다.
또 상기 텍스트 데이터를 디스플레이하는 단계는, 상기 동영상 모드에 따라 재생되는 상기 동영상 데이터의 재생 시점 및 상기 슬라이드 쇼 모드에 따라 디스플레이되는 상기 주요 장면 중 어느 하나에 대응되는 상기 이벤트 시점에 링크되는 상기 텍스트 구간을 디스플레이하는 단계 및 상기 디스플레이되는 텍스트 구간을 제외한 나머지 텍스트 구간의 상기 요약 정보를 디스플레이하는 단계를 포함할 수 있다.
또 상기 요약 정보를 선택하는 사용자 입력을 수신하는 단계; 및 상기 선택된 요약 정보에 따른 상기 텍스트 구간을 디스플레이하는 단계; 상기 텍스트 구간이 링크된 상기 이벤트 시점에 기초하여, 상기 동영상 모드에서 상기 동영상 데이터의 재생 시점을 설정하거나 상기 슬라이드 쇼 모드에서 디스플레이되는 상기 주요 장면을 판단하는 단계;를 더 포함할 수 있다.
또 상기 슬라이드 쇼 모드에 따라 상기 멀티미디어 콘텐츠를 디스플레이하는 동안 사용자로부터 북마크를 지시하는 사용자 입력을 수신하는 단계; 및 상기 사용자 입력의 수신 시점에 디스플레이되는 주요 장면을 북마크하는 단계;를 더 포함할 수 있다.
본 발명의 다른 양상에 따르면, 영상을 출력하는 디스플레이; 및 동영상으로 재생되는 동영상 데이터 및 상기 동영상 데이터의 재생 구간 상의 이벤트 시점에 매칭되어 슬라이드 쇼 방식으로 디스플레이되는 주요 장면을 포함하는 슬라이드 데이터를 포함하는 멀티미디어 콘텐츠를 획득하고, 상기 멀티미디어 콘텐츠에 대응되는 텍스트 데이터를 획득하고, 상기 디스플레이를 통해 상기 동영상 데이터를 동영상으로 재생하는 동영상 모드 또는 상기 상기 주요 장면을 슬라이드 쇼 방식으로 디스플레이하는 슬라이드 쇼 모드 중 어느 하나의 모드에 따라 제1 영역에 상기 멀티미디어 콘텐츠를 디스플레이하고, 제2 영역에 상기 텍스트 데이터의 적어도 일부를 디스플레이하고, 상기 디스플레이되는 멀티미디어 콘텐츠에 따라 상기 디스플레이되는 텍스트 데이터를 조정하는 콘트롤러;를 포함하는 전자 기기가 제공될 수 있다.
본 발명의 또 다른 양상에 따르면, 상술한 멀티미디어 콘테츠 디스플레이 방법을 수행하는 프로그램이 저장된 컴퓨터로 판독가능한 기록 매체가 제공될 수 있다.
<전자 기기>
본 발명에 따른 전자 기기(1000)는 멀티미디어 콘텐츠를 디스플레이할 수 있다.
여기서, 멀티미디어 콘텐츠란 동영상으로 재생되는 동영상 데이터와 동영상 데이터의 주요 장면들을 모아놓은 슬라이드 데이터로 이루어진 콘텐츠를 의미하며, 필요에 따라서는 동영상 데이터나 주요 장면에 관하여 텍스트 형태로 주어지는 자막이나 기사 형태의 코멘트 데이터를 추가로 포함하는 콘텐츠를 의미할 수 있다.
본 발명에서 전자 기기(1000)는 이러한 멀티미디어 콘텐츠는 동영상 방식 또는 슬라이드 쇼 방식으로 상술한 동영상 데이터나 슬라이드 데이터를 디스플레이할 수 있으며, 이와 더불어서 코멘트 데이터를 적절하게 디스플레이할 수 있다.
이하에서는 본 발명의 실시예에 따른 전자 기기(1000)에 관하여 도 1을 참조하여 설명한다.
도 1은 본 발명의 실시예에 따른 전자 기기(1000)의 블록도이다. 도 1을 참조하면, 본 발명의 일 실시예에 따른 전자 기기(1000)는 입력부(1100), 출력부(1200), 통신부(1300), 메모리(1400) 및 콘트롤러(1500)를 포함할 수 있다. 이하에서는 전자 기기(1000)의 각 구성 요소에 관하여 설명한다.
입력부(1100)는 사용자로부터 사용자 입력을 수신할 수 있다. 사용자 입력은 키 입력, 터치 입력, 음성 음력을 비롯한 다양한 형태로 이루어질 수 있다. 이러한 사용자 입력을 받을 수 있는 입력부(1100)의 예로는 전통적인 형태의 키패드나 키보드, 마우스는 물론, 사용자의 터치를 감지하는 터치 센서, 음성 신호를 입력받는 마이크, 영상 인식을 통해 제스처 등을 인식하는 카메라, 사용자 접근을 감지하는 조도 센서나 적외선 센서 등으로 구성되는 근접 센서, 가속도 센서나 자이로 센서 등을 통해 사용자 동작을 인식하는 모션 센서 및 그 외의 다양한 형태의 사용자 입력을 감지하거나 입력받는 다양한 형태의 입력 수단을 모두 포함하는 포괄적인 개념이다. 여기서, 터치 센서는 디스플레이 패널에 부착되는 터치 패널이나 터치 필름을 통해 터치를 감지하는 압전식 또는 정전식 터치 센서, 광학적인 방식에 의해 터치를 감지하는 광학식 터치 센서 등으로 구현될 수 있다.
이외에도 입력부(1100)는 자체적으로 사용자 입력을 감지하는 장치 대신 전자 기기(1000)에 사용자 입력을 입력받는 외부의 입력 장치를 연결시키는 입력 인터페이스(USB 포트, PS/2 포트 등)의 형태로 구현될 수도 있다.
출력부(1200)는 각종 정보를 출력해 사용자에게 이를 제공할 수 있다. 이러한 출력부(1200)는 영상을 출력하는 디스플레이, 소리를 출력하는 스피커, 진동을 발생시키는 햅틱 장치 및 그 외의 다양한 형태의 출력 수단을 모두 포함하는 포괄적인 개념이다. 이외에도 출력부(1200)는 전자 기기(1000)에 상술한 개별 출력 수단을 연결시키는 포트 타입의 출력 인터페이스의 형태로 구현될 수도 있다.
여기서 일 예로, 디스플레이는 텍스트, 정지 영상, 동영상을 디스플레이 할 수 있다. 디스플레이는 액정 디스플레이(LCD: Liquid Crystal Display), 발광 다이오드(LED: light emitting diode) 디스플레이, 유기 발광 다이오드(OLED: Organic Light Emitting Diode) 디스플레이, 평판 디스플레이(FPD: Flat Panel Display), 투명 디스플레이(transparent display), 곡면 디스플레이(Curved Display), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 홀로그래픽 디스플레이(holographic display), 프로젝터 및 그 외의 영상 출력 기능을 수행할 수 있는 다양한 형태의 장치를 모두 포함하는 광의의 영상 표시 장치를 의미하는 개념이다. 이러한 디스플레이는 입력부(1100)의 터치 센서와 일체로 구성된 터치 디스플레이의 형태일 수도 있다.
통신부(1300)는 외부 기기와 통신을 수행할 수 있다. 이에 따라 전자 기기(1000)는 외부 기기와 각종 정보를 송수신할 수 있다. 여기서, 통신, 즉 데이터의 송수신은 유선 또는 무선으로 이루어질 수 있다. 이를 위해 통신부(1300)는 LAN(Local Area Network)를 통해 인터넷 등에 접속하는 유선 통신 모듈, 이동 통신 기지국을 거쳐 이동 통신 네트워크에 접속하여 데이터를 송수신하는 이동 통신 모듈, 와이파이(Wi-Fi) 같은 WLAN(Wireless Local Area Network) 계열의 통신 방식이나 블루투스(Bluetooth), 직비(Zigbee)와 같은 WPAN(Wireless Personal Area Network) 계열의 통신 방식을 이용하는 근거리 통신 모듈, GPS(Global Positioning System)과 같은 GNSS(Global Navigation Satellite System)을 이용하는 위성 통신 모듈 또는 이들의 조합으로 구성될 수 있다.
메모리(1400)는 각종 정보를 저장할 수 있다. 메모리(1400)는 데이터를 임시적으로 또는 반영구적으로 저장할 수 있다. 메모리(1400)의 예로는 하드 디스크(HDD: Hard Disk Drive), SSD(Solid State Drive), 플래쉬 메모리(1400, flash memory), 롬(ROM: Read-Only Memory), 램(RAM: Random Access Memory) 등이 있을 수 있다. 이러한 메모리(1400)는 전자 기기(1000)에 내장되는 형태나 전자 기기(1000)에 탈부착 가능한 형태로 제공될 수 있다.
메모리(1400)에는 전자 기기(1000)를 구동하기 위한 운용 프로그램(OS: Operating System), 후술할 본 발명의 실시예에 따른 멀티미디어 콘텐츠 디스플레이 방법에 따라 멀티미디어 콘텐츠를 동영상으로 재생하거나 또는 슬라이드 쇼 방식으로 보여주기 위한 어플리케이션 프로그램 등과 같이 전자 기기(1000)를 구동하는데 필요하거나 이용되는 각종 프로그램, 그리고 이들 프로그램에 의해 참조될 동영상 데이터, 슬라이드 데이터, 코멘트 데이터 등의 멀티미디어 콘텐츠에 관한 각종 데이터, 또 북마크 정보와 같이 어플리케이션 프로그램에 의해 멀티미디어 콘텐츠와 연동될 메타 데이터 등이 저장될 수 있다.
콘트롤러(1500)는 전자 기기(1000)의 전반적인 동작을 제어한다. 이를 위해 콘트롤러(1500)는 각종 정보의 연산 및 처리를 수행하고 전자 기기(1000)의 구성요소들의 동작을 제어할 수 있다.
콘트롤러(1500)는 하드웨어 소프트웨어 또는 이들의 조합에 따라 컴퓨터나 이와 유사한 장치로 구현될 수 있다. 하드웨어적으로 콘트롤러(1500)는 전기적인 신호를 처리하여 제어 기능을 수행하는 전자 회로 형태로 제공될 수 있으며, 소프트웨어적으로는 하드웨어적인 콘트롤러(1500)를 구동시키는 프로그램 형태로 제공될 수 있다.
한편, 이하의 설명에서 특별한 언급이 없는 경우에는 전자 기기(1000)의 동작은 콘트롤러(1500)의 제어에 의해 수행되는 것으로 해석될 수 있다.
이상에서 설명한 전자 기기(1000)는 전자 기기(1000)는 멀티미디어 콘텐츠를 불러들여 이를 재생할 수 있다.
여기서, 멀티미디어 콘텐츠는 예를 들면 각종 MPEG이나 그 외의 다양한 동영상 코덱에 따라 인코딩된 동영상 데이터와 동영상의 주요 장면들을 포함하는 슬라이드 데이터를 포함하는 콘텐츠로서 동영상 모드 또는 슬라이드 쇼 모드로 재생될 수 있는 콘텐츠를 의미할 수 있다.
전자 기기(1000)는 이러한 멀티미디어 콘텐츠를 동영상으로 재생하는 동영상 모드와 동영상의 주요 장면을 정지 영상으로써 슬라이드 쇼 방식으로 보여주는 슬라이드 쇼 모드의 두 가지 모드에 따라 재생할 수 있다.
또 전자 기기(1000)는 동영상 모드나 슬라이드 쇼 모드로 멀티미디어 콘텐츠를 재생 시 코멘트 데이터를 참조하여 영상과 함께 코멘트를 표시할 수 있다.
이러한 멀티미디어 콘텐츠의 재생 방법과 제작 방법에 관한 보다 구체적인 설명은 후술하기로 한다.
<멀티미디어 콘텐츠의 데이터 구조>
이하에서는 상술한 멀티미디어 콘텐츠의 디스플레이 방법에 관하여 설명하기에 앞서 본 발명의 실시예에 따른 멀티미디어 콘텐츠의 데이터 구조에 관하여 먼저 설명하기로 한다.
도 2는 본 발명의 실시예에 따른 멀티미디어 콘텐츠의 데이터 구조의 개략도이다.
본 발명에서 멀티미디어 콘텐츠는 동영상 데이터와 슬라이드 데이터를 포함할 수 있다. 또 멀티미디어 콘텐츠는 이에 더해 코멘트 데이터를 포함할 수 있다. 여기서 동영상 데이터, 슬라이드 데이터 및 코멘트 데이터는 통합적인 하나의 파일 형태로 존재하는 것이 일반적일 수 있지만, 필요에 따라서는 일부 데이터는 별도의 파일 형태로 존재할 수 있다. 구체적인 예를 들면, 동영상 데이터와 슬라이드 데이터 그리고 코멘트 데이터가 하나의 파일로 존재하거나 동영상 데이터와 슬라이드 데이터는 하나의 파일로 존재하되 코멘트 데이터는 별도의 파일로 존재할 수도 있다. 물론 상술한 예 이외의 파일 형태도 가능하다.
멀티미디어 콘텐츠의 동영상 데이터는 기존에 알려진 일반적인 동영상 데이터의 형태를 취할 수 있다. 예를 들어, 동영상 데이터는 MPEG, H.264나 그 외의 다양한 동영상 코덱에 따라 시간 순으로 영상 출력되어 동영상을 구현하도록 인코딩된 복수의 이미지 프레임에 관한 데이터일 수 있다. 이러한 동영상 데이터는 전자 기기(1000)에 의해 동영상 모드에서 그 코덱이 디코딩됨에 따라 디스플레이 형태의 출력부(1200)를 통해 동영상으로써 재생될 수 있다.
또 멀티미디어 콘텐츠의 슬라이드 데이터는 동영상의 특정 시점의 정지 영상에 해당하는 주요 장면들의 집합으로 구성될 수 있다. 여기서, 본 발명에서 동영상 데이터의 전체 재생 구간은 도 2에 도시된 바와 같이 복수의 이벤트 구간(EV-1, EV-2, EV-3, EV-4, … , EV-(n-1), EV-n)으로 구분될 수가 있는데, 주요 장면이란 각 이벤트 구간을 대표하는 정지 영상(SC-1, SC-2, SC-3, SC-4, … , SC-(n-1), SC-n)을 의미할 수 있다. 이러한 슬라이드 데이터는 전자 기기(1000)에 의해 슬라이드 쇼 모드에서 슬라이드 쇼 방식으로 순차적으로 디스플레이될 수 있다.
또 멀티미디어 콘텐츠의 코멘트 데이터는 상술한 이벤트 구간에 대응되는 코멘트들을 의미할 수 있다. 여기서, 코멘트는 주로 텍스트 형태로 제공될 수 있다. 코멘트들은 각 이벤트 구간에 일대일 대응되는 것도 가능하지만, 일부 이벤트 구간에 대해서는 코멘트가 없거나 또는 일부 이벤트 구간에 대해서는 복수의 코멘트들이 대응될 수도 있다. 도 2를 참조하면, 제2 이벤트 구간(EV-2)에 대해서는 두 개의 코멘트(CM-2a, CM-2b)가 대응되어 있고, 제4 이벤트 구간(EV-4)에 대해서는 코멘트가 없는 것을 볼 수 있다. 이러한 코멘트 데이터는 동영상 모드에서 자막 형태로 디스플레이되거나 슬라이드 쇼 모드에서 슬라이드의 주석 형태로 디스플레이될 수 있다. 또는 이와 달리 코멘트 데이터는 동영상 모드나 슬라이드 쇼 모드에서 동영상이나 슬라이드 영상이 디스플레이 되는 영역과 다른 영역에 기사 형태로 표시되는 것도 가능하다. 기사 형태로 표시되는 경우에는 동영상이나 슬라이드 쇼의 진행에 맞추어 적절한 코멘트가 표시되도록 자동적으로 스크롤링되거나 페이지 넘김 등이 이루어질 수도 있다.
<코멘트 데이터의 구조>
이러한 코멘트 데이터의 상세한 구조에 관해서는 도 3 및 도 4를 참조하여 설명한다.
도 3은 본 발명의 실시예에 따른 코멘트 데이터의 구조의 개략도이고, 도 4는 본 발명의 실시예에 따른 코멘트 데이터의 내용에 관한 도면이다.
코멘트 데이터는 헤더와 보디를 포함할 수 있다. 헤더에는 코멘트 출력에 필요한 각종 정보나 그 외에 부가 정보가 포함되어 있을 수 있다. 코멘트 출력에 필요한 정보로는 텍스트의 폰트 종류, 사이즈, 스타일, 색상, 표시 위치 등을 들 수 있으며, 부가 정보에는 코멘트의 제목, 코멘트 제작자 정보, 제작 일자 등이 있을 수 있다. 도 3 및 도 4에서는 “[HEADER]”로부터 “[EVENT]”의 사이에 상술한 코멘트 출력에 필요한 각종 정보와 부가 정보가 기술되어 있는 것을 볼 수 있다.
보디는 시작 필드, 이벤트 필드, 종료 필드로 구성될 수 있다. 시작 필드와 종료 필드는 각각 이벤트 필드의 시작과 종료를 지시하며, 이벤트 필드에는 멀티미디어 콘텐츠의 디스플레이 중 출력될 텍스트와 그 텍스트 내용이 표시되어야 할 이벤트 구간에 관한 정보가 담겨있다. 여기서, 이벤트 구간에 관한 정보는 이벤트 구간의 시작 시점과 종료 시점에 의해 정의될 수 있다. 또 여기서, 이벤트 시점은 이벤트 구간의 시작 시점과 종료 시점 사이의 특정 시점으로 정의될 수 있다. 일 예에 따르면 이벤트 시점은 이벤트 구간의 시작 시점 또는 그 시작 시점으로부터 미리 정해진 시간만큼 뒤의 시점으로 정의될 수 있다.
구체적으로 이벤트 필드에는 북마크 체크 정보, 이벤트 구간 정보, 텍스트 정보가 포함될 수 있다.
먼저 텍스트 정보는 표시될 텍스트에 관한 것으로, 일반적으로는 문자열 형태를 취한다. 이벤트 구간 정보는 텍스트가 표시되는 시간 구간을 의미할 수 있다. 일 예로 이벤트 구간 정보는 도 3 및 도 4에 도시된 것과 같이 이벤트 구간의 시작 시점 정보와 이벤트 구간의 종료 시점 정보를 포함할 수 있다. 이때 코멘트 텍스트의 문자열은 시작 시점부터 종료 시점까지 표시될 수 있다. 물론, 이와 달리 이벤트 구간 정보는 이벤트 구간의 시간 길이가 미리 정해진 시간 간격으로 설정해 놓은 상태라면 코멘트의 시작 시점 정보만을 포함하는 형태를 취할 수도 있다.
북마크 체크 정보는 해당 이벤트 구간(또는 이벤트 시점)가 북마크된 것인지 여부에 관한 식별자이다. 예를 들어 도 4의 코멘트 데이터에 따르면 멀티미디어 콘텐츠의 전체 재생 구간 상에서 “0:00:05.65”로부터 “0:00:12.79” 사이에는 “The Seoul Metropolitan … (중략) … K-pop and fashion”를 코멘트로 표시하게 된다. 또 “0:0053.25”로부터 “0:01:22.51” 사이에 대응하는 이벤트 구간 부분에 대해서는 이벤트 구간이 북마크된 것임을 알리는 “MARKED”가 기재되어 있음을 볼 수 있다.
한편, 경우에 따라서 이벤트 필드에서 텍스트 정보가 없거나 또는 텍스트 정보가 문자열을 담지 않고 블랭크(blank) 형태를 취할 수 있다. 이 경우에는 해당 이벤트 구간에는 코멘트가 없을 수 있다.
<동영상 데이터와 슬라이드 데이터>
이하에서 동영상 데이터와 슬라이드 데이터와의 관계에 관하여 설명한다.
일 예에 따르면, 멀티미디어 콘텐츠는 슬라이드 데이터는 이벤트 시점을 고려하여 동영상 데이터로부터 얻어질 수 있다. 이벤트 시점은 코멘트 데이터로부터 참조되거나 사용자에 의해 별도로 지정될 수 있다. 이벤트 시점 정보는 동영상 데이터, 슬라이드 데이터, 코멘트 데이터 간의 링크 역할을 하는 정보로써, 이들 데이터에 포함되는 형태로 제공되거나 별도의 파일 형태로 저장되어 있을 수 있다. 다만, 이하에서는 설명의 편의를 위하여 코멘트 데이터가 이벤트 시점 정보를 포함하고 있는 것을 기준으로 설명하기로 한다.
여기서, 동영상 데이터는 외부 기기로부터 수신되거나 또는 메모리(1400)에 기 저장된 것을 로딩하여 획득될 수 있다. 예를 들어, 동영상 데이터는 외부 멀티미디어 서버(미도시)로부터 스티리밍 또는 다운로드되거나 영상을 실시간으로 촬영하는 카메라(미도시)로부터 전자 기기(1000)로 수신될 수 있다. 또는 전자 기기(1000)는 그 메모리(1400)에 동영상 데이터를 기 저장하여 콘트롤러(1500)가 메모리(1400)로부터 동영상 데이터를 로딩할 수도 있으며, 경우에 따라서는 전자 기기(1000)가 원본 동영상 데이터를 동영상 편집 툴 또는 동영상 제작 툴을 이용하여 원본 동영상 데이터로부터 멀티미디어 콘텐츠 제작에 이용할 동영상 콘텐츠를 편집 또는 제작할 수 있다.
이와 유사하게 코멘트 데이터 역시 외부 기기로부터 다운로딩되거나 또는 메로리(1400)로부터 로딩거나 또는 전자 기기(1400)의 코멘트 편집 툴을 통해 생성될 수 있다.
도 5는 본 발명의 실시예에 따른 주요 장면의 선정의 일 예에 관한 도면이다.
일 예에 따르면, 주요 장면으로는 도 5에 도시된 것과 같이 동영상 데이터의 재생 구간 상 이벤트 구간의 시작 시점(이하 ‘이벤트 시점’이라 함)에 대응되는 시점의 정지 영상이 선정될 수 있다. 전자 기기(1000)는 코멘트 데이터로부터 이벤트 구간의 시작 시점 정보를 읽어들여 동영상 데이터가 동영상으로 재생될 때의 재생 구간 상에서 이벤트 시점에 해당하는 시점의 정지 영상을 주요 장면으로 선정할 수 있다.
한편, 이상에서는 이벤트 구간의 시작 시점에 해당하는 정지 영상을 주요 장면으로 선정하는 것으로 설명하였으나 반드시 시작 시점에 따라 주요 장면을 선정해야 하는 것은 아니다. 예를 들면, 경우에 따라서는 이벤트 구간의 시작 시점으로부터 미리 정해진 시간 간격만큼 빠른 시점이나 늦은 시점에 해당하는 정지 영상을 주요 장면으로 선정하거나 또는 이벤트 구간의 종료 시점에 해당하는 정지 영상을 주요 장면으로 선정할 수도 있다. 특히, 일반적으로 코멘트 데이터가 자막으로 활용되는 경우, 이벤트 구간의 시작 시점은 해당 자막에 대응되는 동영상의 음성 싱크보다 조금 빠르거나 늦게 설정될 수 있으므로 이벤트 구간의 시작 시점으로부터 일정 시간 간격만큼 주요 장면의 시점을 당기거나 늦추는 것이 효과적인 경우가 있을 수 있다.
한편, 이상에서는 주요 장면이 각각의 이벤트 구간에 일대일로 대응되어 선정되는 것으로 설명하였는데, 이와 달리 주요 장면이 이벤트 구간의 개수보다 적게 선정되거나 많이 선정되는 것도 가능하다.
일 예를 들면, 복수의 이벤트 구간에 대하여 하나의 주요 장면이 선정될 수 있다. 예를 들면, 이벤트 구간들이 시간적으로 밀집하여 위치하는 경우, 즉 코멘트가 짧은 시간에 연속적으로 표시되는 경우에는 각각의 이벤트 구간 별로 주요 장면을 선정하는 대신 밀집하여 연속된 코멘트들에 대하여 하나의 주요 장면을 선정하는 것이 가능하다. 여기서, 이벤트 구간이 시간적으로 밀집하여 위치하는 것은 소정의 시간 간격 내에 복수의 이벤트 구간이 있는 경우 또는 이전 이벤트 구간의 시작 시점과 이후 이벤트 구간의 종료 시점이 동일한 경우 등일 수 있다.
도 6은 본 발명의 실시예에 따른 주요 장면의 선정의 다른 예에 관한 도면이다.
도 6에는 재생 구간 상의 타임 라인 상에서 이벤트 구간들이 밀집하여 존재하는 경우 복수의 이벤트 구간에 대하여 하나의 주요 장면을 선정하는 것이 도시되어 있다. 구체적으로 이벤트 구간 “#x1”, “#x2”에 대해서는 “#x”의 하나의 주요 장면이 선정되고 “#y1”, “#y2”, “#y3”, “#y4” 네 개의 이벤트 구간에 대해서는 “#y”의 하나의 주요 장면이 선정될 수 있다.
다른 예를 들면, 이와 같이 복수의 이벤트 구간에 대하여 하나의 주요 장면이 선정되는 것과 반대로 하나의 이벤트 구간에 대하여 주요 장면이 복수 개 선정되는 것도 가능하다. 예를 들면, 이벤트 구간의 길이, 즉 이벤트 구간의 시작 시점으로부터 종료 시점까지의 길이가 소정의 시간 간격보다 긴 경우에는 해당 이벤트 구간에 대하서 주요 장면을 여러 개 선정할 수도 있다. 이때 주요 장면은 이벤트 구간의 전체 길이를 일정 개수로 분할한 뒤 각각 분할된 부분들의 시작 시점 별로 선정될 수 있다. 또는 주요 장면은 이벤트 구간의 시작 시점과 그 시작 시점으로부터 일정 시간 간격씩 후인 시점들 별로 선정될 수 있다.
도 7은 본 발명의 실시예에 따른 주요 장면의 선정의 또 다른 예에 관한 도면이다.
도 7에는 타임 라인 상에서 길이가 긴 이벤트 구간 “#z”에 대하여 이를 이분할하여 그 시작 시점에 주요 장면 “#z1”을 선정하고, 시작 시점과 종료 시점의 중간 시점에 주요 장면 “#z2”를 선정하는 것으로 보여주고 있다.
한편, 이벤트 구간의 텍스트 정보의 크기를 고려하는 주요 장면을 선정하는 것도 가능하다. 예를 들면, 이벤트 구간의 텍스트 정보에 담긴 문자열의 길이가 일정한 길이 이상이면 해당 이벤트 구간에 대해서는 주요 장면을 여러 개를 선정할 수 있다. 예를 들어, 문자 30자 당 하나의 주요 장면을 선정할 경우 이벤트 구간의 코멘트가 문자열 80자인 경우에 대해서는 세 개의 주요 장면을 선정할 수 있다. 반대로 텍스트 정보에 담긴 문자열의 길이가 일정한 길이 이하인 코멘트를 가지는 이벤트 구간이 복수 개 연속적으로 있는 경우에는 이들에 대하여 하나의 주요 장면을 선정할 수도 있다. 예를 들어, 문자열의 길이가 네 자인 이벤트 구간 다섯 개가 타임 라인 상에 연속적으로 배치된 경우에는 이들 다섯 개의 이벤트 구간에 대하여 하나의 주요 장면을 선정할 수 있다.
이처럼 선정된 주요 장면은 이벤트 시점에 표시되는 동영상 데이터의 정지 영상으로부터 추출될 수 있다. 이러한 주요 장면은 동영상 데이터의 정지 영상과 동일한 영상인 것도 가능하지만, 동영상 데이터의 정지 영상을 가공한 것일 수도 있다.
주요 장면의 획득이 완료되면 이들을 수집하여 슬라이드 데이터를 생성할 수 있다. 기본적으로 슬라이드 데이터는 복수의 주요 장면들과 이들 주요 장면 각각이 동영상 데이터의 재생 구간 중 어느 이벤트 구간(또는 이벤트 시점)에 링크되는지에 관한 이벤트 구간 정보를 포함할 수 있다.
한편, 슬라이드 데이터는 실제로 주요 장면의 정지 영상들을 포함하지 않고 이벤트 구간 정보만 가지는 더미 파일 구조를 가질 수도 있다. 이러한 슬라이드 데이터를 이용하면 단순하게 이벤트 구간 정보만을 이용하여 실시간으로 재생되는 동영상 데이터로부터 주요 영상을 정지 영상으로 추출할 수 있다.
이처럼 슬라이드 데이터가 생성되면, 전자 기기(1000)는 동영상 데이터와 슬라이드 데이터를 병합 또는 연동시켜 멀티미디어 콘텐츠가 제작될 수 있다. 구체적으로 동영상 데이터는 동영상으로 재생이 가능하도록 인코딩된 데이터이며, 슬라이드 데이터는 그러한 동영상의 재생 구간 중의 특정 시점인 이벤트 시점(또는 이벤트 구간)에 매칭된 주요 장면들을 포함할 수 있다. 여기에 추가적으로 코멘트 데이터가 병합 또는 연동될 수 있으며, 이 경우 코멘트 데이터는 슬라이드 데이터와 마찬가지로 동영상의 재생 구간 중의 특정 시점인 이벤트 시점(또는 이벤트 구간)에 매칭되는 그 코멘트들을 포함할 수 있다.
이러한 멀티미디어 콘텐츠는 후술할 바와 같이 동영상 모드나 슬라이드 쇼 모드에 따라 선택적으로 재생될 수 있게 된다.
<멀티미디어 콘텐츠 디스플레이 동작>
이하에서 본 발명의 실시예에 따른 멀티미디어 콘텐츠의 디스플레이 동작에 관하여 설명한다. 여기서는 설명의 편의를 위하여 상술한 디스플레이 동작이 상술한 전자 기기(1000)에 의해 수행되는 것으로 설명하며, 별도의 언급이 없는 경우 전자 기기(1000)의 동작은 콘트롤러(1500)의 제어에 의해 이루어지는 것으로 해석될 수 있다. 물론, 이러한 디스플레이 동작은 상술한 전자 기기(1000)에 의해 한정되는 것은 아니며 상술한 전자 기기(1000)와 유사한 다른 전자 기기를 이용하여 수행되는 것도 가능하다.
<슬라이드 쇼 모드>
이하에서는 상술한 것과 같이 선정된 주요 장면을 정지 영상으로써 순차적으로 보여주는 슬라이드 쇼 모드에 관하여 설명한다. 한편, 동영상 모드는 일반적으로 알려진 멀티미디어 콘텐츠의 플레이어(예를 들어, 윈도우 미디어 플레이어 등)에서 동영상을 재생하는 것과 유사한 형태로 동작하므로 이에 대한 구체적인 설명은 생략하기로 한다.
슬라이드 쇼 모드에서는 주요 장면이 정지 영상으로써 순차적으로 슬라이드 쇼 방식으로 표시될 수 있다. 여기서 슬라이드 쇼 방식이란 특정 주요 장면을 정지 영상으로 출력하고, 그 상태에서 사용자의 입력을 받거나 또는 자동으로 그 다음 또는 이전 주요 장면을 정지 영상으로 출력하는 방식을 의미할 수 있다.
이와 같이 슬라이드 쇼 모드에서는 주요 장면을 순차적으로 출력하기 위하여 슬라이드 이동 기능을 제공할 수 있다.
도 8은 본 발명의 실시예에 따른 슬라이드 이동에 관한 도면이다.
여기서, 슬라이드 이동은 특정 주요 장면에서 바로 그 다음 또는 그 이전 주요 장면으로 정지 영상을 변경하는 것을 의미한다. 도 8을 참조하면, 슬라이드 쇼 모드에서는 특정 주요 장면으로부터 그 다음 또는 그 전 주요 장면으로 슬라이드 이동하는 것이 도시되어 있다. 이러한 슬라이드 쇼 모드에서 주요 장면 간의 이동은 코멘트 데이터를 참조하여 수행될 수 있다. 구체적으로 슬라이드 이동에 관한 입력이 발생하면, 타임 라인 상에서 그 시점에서 재생하고 있던 재생 시점, 예를 들어 주요 장면에 대응하는 코멘트의 시작 시점을 기준으로 코멘트 데이터부터 타임 라인 상에서 현재의 재생 시점 바로 이전 또는 바로 다음에 오는 코멘트를 검색하고, 검색된 코멘트에 대응되는 주요 장면을 정지 영상으로써 출력함으로써 주요 장면 간의 슬라이드 이동을 할 수 있다.
또 슬라이드 쇼 모드에서는 이와 같이 정지 영상을 출력할 때 해당 주요 장면에 대응되는 코멘트의 코멘트 텍스트를 함께 출력할 수 있다. 만약 복수의 코멘트가 하나의 주요 장면에 대응되는 경우에는 그 주요 장면을 정지 영상으로 출력할 때 복수의 코멘트의 텍스트들을 한 화면에 함께 표시할 수 있다. 반대로 하나의 코멘트에 복수의 주요 장면이 대응되는 경우에는 코멘트의 텍스트를 분할하여 각각의 주요 장면에 매칭시킬 수 있다.
이처럼 슬라이드 쇼 모드를 이용하면 사용자가 동영상 전체를 감상하지 않고도 주요 장면들과 코멘트를 보면서 해당 콘텐츠의 내용을 단시간 안에 파악할 수 있게 된다.
한편, 슬라이드 쇼 모드에서는 주요 장면을 순차적으로 이동하는 대신 주요 장면 중 북마크된 장면 간에 건너 뛰면서 이동하는 북마크 이동 기능이 제공될 수도 있다.
여기서, 북마크된 주요 장면은 코멘트 데이터를 이용한 주요 장면의 선정 시에 북마크된 코멘트에 대응되어 선정된 주요 장막일 수 있다.
또는 슬라이드 쇼 모드에서는 주요 장면에 북마크를 설정하는 것도 가능하다. 구체적으로 슬라이드 쇼 모드로 특정 주요 장면의 정지 영상이 출력되는 중에 북마크 설정을 위한 사용자 입력이 발생하면 해당 주요 장면이 북마크된 주요 장면으로 설정될 수 있다. 이처럼 북마크 설정을 위한 사용자 입력에 발생하면 출력 중인 정지 영상에 대응되는 코멘트가 북마크된 코멘트임을 지시하는 정보를 코멘트의 북마크 체크 필드에 기록할 수도 있다.
또 동영상 모드에서 재생 중인 임의의 시점에서 북마크를 설정하는 것도 가능하다. 구체적으로 동영상으로 콘텐츠를 재생 중에 북마크 설정을 위한 사용자 입력이 발생하면 그 재생 시점의 영상을 북마크된 주요 영상으로 설정할 수 있다. 이처럼 임의의 시점에 북마크를 설정하는 경우에는 코멘트 데이터에 해당 시점을 시작 시점으로 가지는 코멘트를 생성하고, 해당 코멘트에 대하여 북마크 체크 필드에 북마크된 코멘트임을 반영하도록 기록을 하게 된다. 이러한 코멘트의 텍스트 정보는 블랭크(빈코멘트)으로 처리되거나 또는 텍스트 정보가 없게 될 것이다.
한편, 북마크 시에는 단순히 북마크된 주요 장면을 설정하는 이외에도 북마크된 주요 장면에 대한 부가 정보를 생성할 수도 있다. 예를 들면, 사용자로부터 북마크 설정을 위한 입력이 수신되면, 전자 기기(1000)는 텍스트 입력 창을 화면에 제공하고 사용자로부터 문자열을 입력받을 수 있다. 이때 입력받은 문자열은 북마크되는 주요 장면에 대응되는 코멘트의 텍스트 정보로서 저장될 수 있다. 이에 따라 이후 북마크된 주요 장면을 표시할 때에는 자막의 형태로 사용자가 입력한 문자열이 부가적으로 표시될 수 있다.
상술한 것과 같이 북마크가 설정되면 북마크 간에 이동을 할 수 있다. 도 10는 본 발명의 실시예에 따른 북마크 이동에 관한 도면이다. 도 10을 참조하면, 북마크된 주요 장면 간의 이동을 요구하는 입력이 발생하면, 타임 라인 상에서 그 시점에 재생하고 있던 현재 재생 시점을 기준으로 코멘트 데이터로부터 타임 라인 상에서 바로 이전 또는 바로 그 다음에 오는 북마크된 코멘트를 검색하고, 검색된 북마크된 코멘트에 대응되는 주요 장면을 정지 영상으로써 출력함을써 북마크된 주요 장면으로의 이동이 수행될 수 있다. 여기서, 북마크된 코멘트인지의 검색은 코멘트의 북마크 체크 필드를 검사하여 이루어질 수 있다.
<슬라이드 쇼 모드로의 진입>
이하에서는 상술한 슬라이드 쇼 모드로 진입하는 동작에 관하여 설명하기로 한다.
멀티미디어 콘텐츠를 슬라이드 쇼 모드로 재생하기 위해서는 처음부터 슬라이드 쇼 모드로 콘텐츠를 재생할 수도 있지만, 경우에 따라서는 동영상 모드로 재생 중에 슬라이드 쇼 모드로 콘텐츠의 재생 모드를 변환하는 것도 가능하다.
처음부터 슬라이드 쇼 모드로 재생하는 경우에는 여러 주요 장면들 중 타임 라인 상에 가장 앞선 주요 장면부터 정지 영상으로 재생하여 슬라이드 이동을 통해 콘텐츠를 재생하게 된다. 그런데, 동영상 모드에서 재생 중에 사용자로부터 슬라이드 쇼 모드로의 진입을 요청하는 입력이 발생한 경우에는 슬라이드 쇼 방식으로 재생 모드를 변경하게 된다.
이와 같이 동영상 모드에서 슬라이드 쇼 모드로 전환 되는 경우에는, 동영상 모드에서 재생하고 있던 재생 시점을 기준으로 타임 라인 상에서 그 재생 시점의 바로 다음 또는 바로 이전에 위치하는 주요 장면을 정지 영상으로 출력하면서 슬라이드 쇼 모드로 진입할 수 있다.
도 9는 본 발명의 실시예에 따른 슬라이드 모드로의 진입에 관한 도면이다. 도 9를 참조하면, 동영상 모드에서 슬라이드 쇼 모드로 전환 시 타임 라인 상에서 재생 시점으로부터 바로 다음 또는 바로 이전의 주요 장면을 정지 영상으로 재생하게 되는 것을 볼 수 있다.
<슬라이드 쇼 모드의 유저 인터페이스>
이하에서는 상술한 슬라이드 쇼 모드와 관련된 동작을 수행하기 위하는 각종 유저 인터페이스에 관하여 설명한다.
여기서, 유저 인터페이스에 대하여 구체적으로 살펴보기에 앞서 먼저 멀티미디어 콘텐츠 디스플레이 동작의 기본 화면에 대하여 설명하기로 한다. 기본 화면은 전자 기기(1000)의 출력부(1200)를 통해 제공될 수 있다.
도 11은 본 발명의 실시예에 따른 멀티미디어 콘텐츠의 디스플레이 화면의 일 예에 관한 도면이다. 도 11을 참조하면, 기본 화면에는 디스플레이 창, 프로그래시브바, 콘트롤 패널, 슬라이드 아이콘, 북마크 아이콘이 포함될 수 있다.
디스플레이 창에는 주요 장면이 정지 영상으로 표시될 수 있다. 또 디스플레이 창의 일부에는 정지 영상 위에 코멘트가 표시되는 자막 영역이 배치될 수 있다. 콘트롤 패널에는 동영상 모드에 이용되는 각종 사용자 입력(동영상 재생, 재생 중단, 일시 정지, 뒤로 감기, 앞으로 감기 등)을 위한 아이콘들이 배치될 수 있다. 프로그래시브바에는 전체 동영상의 재생 시간에 대응되는 바와 그 바 상에 현재 재생 시점을 나타내는 아이콘이 위치하게 된다.
슬라이드 아이콘은 디스플레이 창의 좌우에 배치될 수 있다. 슬라이드 아이콘은 슬라이드 쇼 모드에서 슬라이드 이동을 수행하기 위한 사용자 입력에 관한 것이다. 또 북마크 아이콘은 북마크를 설정하기 위한 사용자 입력에 관한 것이다.
이와 같은 기본 화면에서 제공되고 있는 아이콘을 선택하는 사용자 입력이나 터치 입력을 통해 멀티미디어콘텐츠 디스플레이 동작에서 각종 기능이 수행될 수 있다.
먼저 동영상 모드로부터 슬라이드 쇼 모드로 전환은 다음과 같이 수행될 수 있다.
동영상 모드로 콘텐츠를 재생 중에 사용자로부터 슬라이드 아이콘을 선택하는 사용자 입력이 수신되면 전자 기기(1000)는 동영상 모드로부터 슬라이드 쇼 모드로 콘텐츠의 재생 모드를 변경할 수 있다. 구체적으로 우측의 슬라이드 아이콘을 선택하는 사용자 입력이 수신되면 동영상 모드에서 재생하던 시점을 기준으로 타임 라인 상에 바로 이후에 존재하는 주요 장면을 정지 영상으로 디스플레이하면서 슬라이드 쇼 모드에 진입하게 되고, 좌측의 슬라이드 아이콘을 선택하는 사용자 입력이 수신되면 바로 이전에 존재하는 주요 장면을 정지 영상으로 디스플레이하면서 슬라이드 쇼 모드에 진입하게 된다.
또는 동영상 모드에서 수평 방향의 드래그 터치 입력이 입력되면 전자 기기(1000)는 재생 모드를 슬라이드 쇼 모드로 변환할 수 있다. 도 12은 본 발명의 실시에에 따른 모드 변환을 위한 사용자 입력에 관한 도면이다. 재생 모드의 전환은 드래그 터치 입력이 자막 영역 내에서 이루어질 때 수행될 수 있다. 구체적으로 터치 입력의 시작 지점이 자막 영역 이내인 경우 드래그 터치 입력이 자막 영역 이내인 것으로 판단할 수 있다. 여기서, 드래그 터치 입력의 수평 이동 방향에 따라 슬라이드 쇼 모드로 진입 시에 동영상의 재생 시점으로부터 타임 라인 상 이전 주요 장면을 정지 영상으로 출력할 것인지 다음 주요 장면을 정지 영상으로 출력할 것인지가 결정될 수 있다. 예를 들어, 도 12에 도시된 것과 같이 터치 입력의 방향이 우측으로 이루어지면 터치 입력 당시의 재생 시점으로부터 타임 라인 상 다음 주요 장면이 출력될 수 있다. 한편, 도 12에는 슬라이드 아이콘을 선택하여 슬라이드 이동을 하는 것도 함께 도시되어 있으므로 참조하기로 한다.
이와 같이 동영상 모드에서 슬라이드 쇼 모드로 진입하는 경우에 기본 화면에서 일부 구성이 변경될 수 있다. 일 예로, 슬라이드 쇼 모드는 동영상 모드에서와 코멘트 속성이 상이할 수 있다. 코멘트 속성이란 코멘트의 폰트의 크기, 색상, 폰트의 종류, 표시 위치 등을 의미할 수 있다. 일 예로 슬라이드 쇼 모드로 진입하면서 동영상 모드에서보다 텍스트 폰트의 크기가 증가될 수 있을 것이다.
한편, 슬라이드 쇼 모드에서 동영상 모드로 재변경하는 것도 가능한데, 이 경우에는 슬라이드 쇼의 재생 시점으로부터 바로 동영상을 재생하는 것도 가능하지만, 이와 달리 슬라이드 쇼의 재생 시점에서 미리 정해진 시간 간격만큼 빠른 시점으로부터 동영상을 재생하는 것도 가능하다. 이에 따라 보다 자연스러운 동영상 재생이 가능하다.
슬라이드 쇼 모드 내에서 주요 장면 간의 슬라이드 이동은 모드의 전환과 유사한 방식으로 이루어질 수 있다. 다시 말해 슬라이드 아이콘을 선택하거나 수평 방향의 드래그 터치를 통해 슬라이드 이동이 수행될 수 있다.
이러한 슬라이드 쇼 내에서 주요 장면 간의 슬라이드 이동에서는 화면이 슬라이드되는 형식으로 변경되는 비쥬얼 효과가 발생할 수 있다.
예를 들어, 슬라이드 쇼 모드에서 드래그 터치 입력이 수신되면 디스플레이 창 내에서 현재 주요 장면이 드래그 터치의 방향으로 이동하게 되며 남은 공간에 슬라이드 이동에 따라 표시될 주요 장면이 출력되게 된다. 이때 주요 장면의 이동 정도는 드래그의 길이에 비례하게 된다. 이 상태에서 주요 장면의 이동 거리가 미리 정해진 거리 이상이 되면, 즉 현재 주요 장면의 끝단이 미리 정해진 경계선을 넘어서게 되면 슬라이드 이동이 이루어지게 된다. 반대로 드래그 터치 입력의 거리가 슬라이드 이동이 이루어지기 전에 종료되면 슬라이드 이동이 이루어지지 않을 수 있다.
이처럼 슬라이드 이동을 반복하게 되면 결과적으로 여러 주요 장면 중 최종 주요 장면을 출력하게 될 것이다. 이 경우에는 기본 화면을 통해 현재 주요 장면이 마지막 주요 장면임을 알릴 수 있다. 예를 들어, 최종 주요 장면에 도달하면 전자 기기(1000)는 기본 화면에서 다음 주요 장면으로 이동하기 위한 슬라이드 아이콘을 생략할 수 있다. 반대로 최초의 주요 장면을 출력하는 중에는 이전 주요 장면으로 이동하도록 하는 슬라이드 아이콘이 표시되지 않을 수도 있다.
다음으로 북마크 설정에 관하여 살펴본다. 도 22는 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 북마크 설정에 관한 도면이다. 도 22에 따르면 기본 화면의 북마크 아이콘을 선택하는 사용자 입력이 발생하면 동영상 모드 또는 슬라이드 쇼 모드에서 현재 재생 시점에 북마크를 설정할 수 있다. 이처럼 북마크가 설정되면 해당 장면은 북마크된 주요 장면으로 설정되게 된다. 도 22를 살펴보면 해당 주요 장면에 대한 코멘트에 북마크 설정이 되는 것을 확인할 수 있다.
또 이처럼 북마크를 설정할 때 부가 정보가 생성하기 위한 문자열 입력 창이 제공될 수도 있다. 해당 창이 사용자로부터 문자열이 입력되면 그 텍스트가 해당 코멘트와 함께 표시될 수 있다. 부가 정보로 입력된 텍스트는 원래 코멘트와 코멘트 속성이 상이하게 표시될 수 있다. 한편, 코멘트가 없는 위치에 북마크가 설정되면 더미 코멘트가 생성되게 된다.
이와 같이 설정된 북마크를 이용한 북마크 이동은 다음과 같이 이루어질 수 있다. 도 13은 본 발명의 실시예에 따른 북마크 설정 입력에 관한 도면이다. 북마크 이동은 수평 방향의 드래그 터치 입력이 입력에 따라 이루어질 수 있다. 여기서, 드래그 터치 입력이 자막 영역 내에서 이루어질 때 수행될 수 있다. 다만, 이러한 드래그 터치 입력은 미리 정해진 거리 이상을 수평 방향으로 이동하는 것일 수 있다. 다시 말해 상술한 슬라이드 이동과 북마크 이동은 드래그 거리에 따라 구별될 수 있다. 예를 들어, 미리 정해진 거리 미만까지 드래그 되면 일단 슬라이드 이동이 이루어지고, 거기서 다시 드래그가 지속되어 미리 정해진 거리 이상까지 드래그 되면 북마크 이동이 수행될 수 있다. 이동할 북마크 지점이 이전 북마크인지 이후 북마크인지는 드래그 방향에 따라 슬라이드 이동과 유사하게 설정될 수 있다.
전자 기기(1000)는 북마크된 주요 장면의 리스트를 표시할 수도 있다. 도 14는 본 발명의 실시예에 따른 북마크 표시에 관한 도면이다. 도 14를 참조하면, 슬라이드 쇼 모드에서는 북마크된 주요 장면의 이미지들을 리스트 업하여 디스플레이 할 수 있다. 예를 들어, 수직 방향(예로 위에서 아래 방향)의 드래그 터치 입력이 입력되면 전자 기기(1000)는 디스플레이 창을 드래그 정도에 따라 하방으로 이동시키면서 위의 남는 공간에 북마크된 주요 영상들을 시간 순으로 리스트업 해서 표시할 수 있다.
이 상태에서 사용자로부터 리스트업된 이미지 중 어느 하나가 선택되면 해당 북마크된 주요 영상의 정지 영상으로 재생 시점을 이동하여 이를 표시할 수 있다.
한편, 북마크들이 표시된 상태에서 다시 수평 방향의 드래그 터치가 발생하면 북마크의 리스트업을 해제할 수 있다.
이상에서 설명한 슬라이드 쇼 모드는 전자 기기(1000)의 메모리(1400)에 기 저장되어 있는 콘텐츠를 이용하여 수행될 수도 있지만, 경우에 따라서는 외부 기기로부터 콘텐츠에 관한 데이터를 스트리밍 방식으로 전송받아가며 진행될 수도 있다. 예를 들어, 콘텐츠에 관한 데이터는 외부 기기로부터 전자 기기(1000)의 통신부(1300)를 통해 전송되고, 전자 기기(1000)는 이를 버퍼에 임시로 저장하여 버퍼를 읽어가며 콘텐츠를 재생할 수 있다.
여기서, 전자 기기(1000)는 콘텐츠를 슬라이드 쇼 모드에서 표시될 주요 장면의 정지 영상을 먼저 전송받을 수 있다. 일반적으로 동영상 스트리밍 서비스에서는 재생 시점으로부터 동영상을 플레이 하기 위한 동영상 데이터가 순차적으로 수신되는데, 본 발명에서는 그에 앞서 주요 장면의 정지 영상이 먼저 전송될 수 있다. 주요 장면의 정지 영상은 동영상에 비하여 용량이 매우 작으므로 전송 속도가 낮아 동영상으로 콘텐츠를 재생하기 어려운 경우에도 주요 장면을 먼저 전송받으면 전자 기기(1000)는 콘텐츠를 슬라이드 쇼 모드로 재생할 수 있다. 또 이를 위해 전자 기기(1000)는 코멘트 데이터를 먼저 받을 수 있다.
이와 같이 주요 장면의 정지 영상을 먼저 획득하는 경우에 있어서, 보다 원활한 슬라이드 쇼의 진행을 위해 현재 재생 시점에 인접한 순서로 정지 영상들을 수신할 수도 있을 것이다.
<코멘트 데이터 디스플레이 동작 >
이상에서는 멀티미디어 콘텐츠를 이루는 동영상 데이터와 슬라이드 데이터를 이용하는 동영상 모드 또는 슬라이드 쇼 모드에 관하여 설명하였는데, 이와 같은 동영상 모드나 슬라이드 쇼 모드에서 추가적으로 코멘트 데이터를 출력할 수 있다.
도 15는 본 발명의 실시예에 따른 동영상 데이터, 주요 장면 및 코멘트 데이터의 매칭 관계의 일 예를 도시한 도면이다.
도 15를 참조하면, 상술한 바와 같이 멀티미디어 콘텐츠는 그 재생 구간에 이벤트 구간들이 있는 동영상 데이터, 주요 장면들을 포함하는 슬라이드 데이터 및 텍스트 구간들을 가지는 코멘트 데이터를 포함하여 이루어질 수 있다. 여기서, 이벤트 구간들, 주요 장면들 및 텍스트 구간들은 서로 링크 또는 매칭되어 연동될 수 있다. 여기서, 이벤트 구간, 주요 장면, 텍스트 구간의 연동은 이벤트 시점을 통해 이루어질 수 있다.
이와 같이 링크된 정보들을 이용하여 동영상 모드에서는 동영상 데이터를 참조하여 동영상을 재생하며 재생 시점이 속하는 이벤트 구간에 링크된 텍스트 구간들을 디스플레이하거나 또는 슬라이드 쇼 모드에서는 주요 장면들을 슬라이드 쇼 방식으로 디스플레이하면서 주요 장면과 링크된 텍스트 구간을 디스플레이할 수 있다.
<코멘트 데이터의 표시>
도 16 및 도 17은 본 발명의 실시예에 따른 코멘트와 함께 제공되는 멀티미디어 콘텐츠의 디스플레이 화면의 일 예에 관한 도면이다.
코멘트 데이터는 크게 자막 형태 또는 기사 형태로 디스플레이될 수 있다. 일반적으로 자막 형태로 텍스트 데이터를 표시하는 경우에는 디스플레이 윈도우 내에 자막 영역의 형태로 코멘트 윈도우가 포함되어 동영상이나 주요 영상에 자막을 오버레이하는 형태로 텍스트가 표시될 수 있다.
이와 달리 텍스트 데이터를 기사 형태로 표시할 수도 있는데, 이 경우에는 화면 상에 동영상이나 주요 장면이 표시될 디스플레이 윈도우와 텍스트 구간들이 표시될 코멘트 윈도우를 분리하여 표시할 수 있다.
도 16을 참조하면, 디스플레이 윈도우에는 주요 장면이나 동영상 데이터가 표시되고, 코멘트 윈도우에는 텍스트 구간이 표시되는 것을 볼 수 있다. 도 16에서는 디스플레이 윈도에는 제1 주요 장면이 표시되고 그에 따라 링크된 제1 텍스트 구간이 코멘트 윈도우에 표시되고 있다. 이와 더불어 화면 상에는 동영상 모드나 슬라이드 쇼 모드에서 재생 시점이나 주요 장면 간의 이동, 재생 시작이나 재생 정지, 북마크 설정 등을 수행할 수 있는 콘트롤 패널과 재생 구간 상에 현재 디스플레이 윈도우에 표시되고 있는 영상의 위치를 지시하기 위한 프로그래시브 바가 함께 표시될 수 있다.
도 16과 같이 제1 주요 장면이 표시되고 있는 상황에서 주요 장면 이동 입력 등에 의해 제2 주요 장면을 표시하게 되면 도 17에 도시된 바와 같이 디스플레이 윈도우 상에 제1 주요 장면에 이어 제2 주요 장면이 디스플레이되게 되며 이와 함께 코멘트 윈도우에는 제2 주요 장면에 링크된 제2 텍스트 구간이 표시되게 될 수 있다. 또 도 16에서와 같이 제1 텍스트 구간을 표시하는 상태에서 도 17과 같이 제2 텍스트 구간을 표시하는 경우에는 코멘트 윈도우의 텍스트를 스크롤링하거나, 행 단위로 텍스트 상하 이동 시키거나, 페이지 단위로 넘길 수 있다.
도 16 및 도 17에서는 코멘트 윈도우에는 디스플레이되고 있는 주요 장면에 링크된 텍스트 구간만이 표시되는 것으로 도시하고 있으나 이와 달리 코멘트 윈도우에 다른 텍스트 구간이 추가적으로 표시되는 것도 가능하다. 예를 들어, 코멘트 윈도우의 상단으로부터 디스플레이 윈도우 상의 주요 장면에 대응되는 텍스트 구간을 표시하며 코멘트 윈도우에 텍스트를 표시할 공간이 남는 경우에는 뒤따르는 텍스트 구간들을 더 표시할 수 있을 것이다.
도 18 및 도 19는 본 발명의 실시예에 따른 코멘트와 함께 제공되는 멀티미디어 콘텐츠의 디스플레이 화면의 다른 예에 관한 도면이다.
도 18을 참조하면, 디스플레이 윈도우에 제1 주요 장면을 디스플레이하는 상태에서는 그에 링크된 제1 텍스트 구간을 코멘트 윈도우의 상단으로부터 표시하고, 이어서 제2 텍스트 구간의 일부를 코멘트 윈도우의 남는 공간에 이어서 표시할 수 있다. 만일 제2 텍스트 구간을 표시하고도 코멘트 윈도우에 텍스트를 표시할 공간이 추가적으로 남는 경우에는 제3, 제4 텍스트 구간 등을 더 표시할 수도 있을 것이다.
또 도 18과 같이 제1 주요 장면이 표시되고 있는 상황에서 주요 장면 이동 입력 등에 의해 제2 주요 장면을 표시하게 되면 도 19에 도시된 바와 같이 디스플레이 윈도우 상에 제2 주요 장면을 디스플레이하고 이와 함께 코멘트 윈도우에는 그 상단으로부터 제2 텍스트 구간을 표시하고 남는 공간에 이어서 제3 텍스트 구간을 표시할 수도 있을 것이다.
또 도 18에서와 같이 제1 텍스트 구간을 표시하는 상태에서 도 19와 같이 제2 텍스트 구간을 표시하는 경우에는 코멘트 윈도우의 텍스트를 스크롤링하거나, 행 단위로 텍스트 상하 이동 시키거나, 페이지 단위로 넘길 수 있다.
도 16 내지 도 19를 참조하여 설명한 것과 달리 코멘트 데이터의 전체 텍스트 구간을 모두 코멘트 윈도우에 표시하는 것도 가능하다. 또 이 경우에는 전체 텍스트 구간들 중 현재 디스플레이 윈도우 상에 디스플레이되고 있는 주요 장면에 해당하는 텍스트 구간을 나머지 텍스트 구간과 상이한 디스플레이 속성(예를 들어, 폰트 종류, 사이즈, 밑줄, 색상 등)을 가지도록 할 수 있다.
도 20 및 도 21은 본 발명의 실시예에 따른 코멘트와 함께 제공되는 멀티미디어 콘텐츠의 디스플레이 화면의 또 다른 예에 관한 도면이다.
도 20을 참조하면, 제1 주요 장면과 함께 전체 코멘트 데이터의 텍스트 구간들이 모두 표시되고 있다. 또 텍스트 구간들 중 제1 주요 장면에 매칭되는 제1 텍스트 구간은 다른 텍스트 구간들과 상이한 컬러로 표시되는 것을 볼 수 있다. 유사하게 도 21을 참조하면, 디스플레이 윈도우 상에 제2 주요 장면이 디스플레이됨과 함께 제2 텍스트 구간이 나머지 텍스트 구간들과 상이한 색상으로 표시되는 것을 볼 수 있다.
이와 같이 디스플레이 윈도우 상의 주요 장면과 링크된 텍스트 구간을 나머지 텍스트 구간과 상이한 디스플레이 속성으로 표시함에 따라 사용자는 현재 디스플레이 윈도우 상에 표시되는 영상에 관한 코멘트가 어느 것인지를 직관적으로 파악할 수 있다.
이상에서는 주로 슬라이드 쇼 모드에서 디스플레이 윈도우에는 주요 장면을 표시하고 코멘트 윈도우에는 텍스트 구간을 표시하는 것에 관하여 설명하였는데 동영상 모드에서도 유사한 방식으로 디스플레이 윈도우에는 동영상 데이터를 참조하여 동영상을 디스플레이하고 코멘트 윈도우에는 그 동영상 데이터의 재생 구간 중의 재생 시점에 따라 적절한 텍스트 구간이 코멘트 윈도우에 표시될 수 있다. 구체적으로 코멘트 윈도우에는 동영상의 재생 시점이 속하는 이벤트 구간에 링크된 텍스트 구간을 표시할 수 있다.
또 코멘트 윈도우에 표시되는 텍스트 구간은 재생 시점의 흐름에 따라 자연스럽게 스크롤링되거나 행단위로 갱신되거나 또는 페이지 단위로 넘겨져 갱신될 수 있을 것이다.
<요약 정보의 표시>
한편, 주요 장면과 텍스트 구간에 더하여 요약 정보를 표시할 수 있다. 여기서, 요약 정보란 텍스트 구간의 내용을 요약한 텍스트를 의미할 수 있다. 예를 들어, 요약 정보는 텍스트 구간 각각의 타이틀이나 요약본일 수 있다. 이러한 요약 정보는 텍스트 구간의 주요 문장(예를 들어, 첫번째 문장이나 마지막 문장 등)에서 추출되어 전자 기기(1000)에서 생성할 수 있다. 물론 이와 달리 요약 정보는 사용자에 의해 별도로 입력되는 것일 수도 있다.
도 22 및 도 23은 본 발명의 실시예에 따른 요약 정보를 코멘트와 함께 제공하는 멀티미디어 콘텐츠의 디스플레이 화면의 일 예에 관한 도면이다.
도 22를 참조하면, 화면에는 디스플레이 윈도우, 코멘트 윈도우 및 요약 윈도우가 제공될 수 있다. 요약 윈도우에는 전체 텍스트 구간에 대한 요약 정보가 표시될 수 있다. 요약 정보는 주요 장면이나 텍스트 구간 또는 이벤트 구간의 순서를 지시하는 번호, 그 이벤트 구간의 이벤트 시점(주로는 시작 시점), 그리고 해당 텍스트 구간의 타이틀이 표시될 수 있다.
또 도 23을 참조하면, 화면에는 디스플레이 윈도우와 코멘트 윈도우가 제공될 수 있다. 여기서, 코멘트 윈도우에는 텍스트 구간과 함께 요약 정보가 표시될 수 있다.
이와 같이 텍스트 구간에 더하여 요약 정보를 표시하면 전체 텍스트 구간들의 간략 개요를 용이하게 파악할 수 있다.
<텍스트 구간 또는 요약 정보를 이용한 주요 장면 이동>
이처럼 본 발명에서는 프로그래시브 바나 콘트롤 패널 또는 디스플레이 윈도우에 대한 사용자 입력을 통해 슬라이드 쇼 모드에서의 주요 장면 이동 입력이나 동영상 모드에서 재생 시점의 이동을 구현하는 것 이외에도 코멘트 윈도우에 표시되는 텍스트 구간이나 요약 정보에 대한 사용자 입력을 통하여 슬라이드 쇼 모드에서의 주요 장면 이동 또는 동영상 모드에서의 재생 시점의 이동을 수행할 수 있다.
일 예에 따라 코멘트 윈도우에 대하여 스크롤링(에를 들어 터치 입력, 마우스 휠 조작)이나 페이지 이동 입력(터치 또는 키보드 상하키, 페이지 업다운 키 등)을 수행하면, 코멘트 윈도우에서는 현재 텍스트 구간의 이전 또는 다음 텍스트 구간이 표시될 수 있으며, 이와 연동하여 슬라이드 쇼 모드에서는 이전 또는 다음 주요 장면을 표시하거나 동영상 모드에서는 재생 시점에 인접한 이전 또는 다음 이벤트 시점으로 재생 시점을 이동시킬 수 있다.
다시 도 16 및 도 17을 참조하면, 도 16과 같이 제1 주요 장면과 제1 텍스트 구간이 표시되는 상태에서 다음 텍스트 구간을 보기 위하여 사용자가 코멘트 윈도우에 대하여 스크롤링을 수행하면 도 17과 같이 같이 제2 주요 장면과 제2 텍스트 구간이 표시되는 상태로 천이될 수 될 수 있다. 동영상 모드인 경우라면 도 16의 재생 시점으로부터 인접한 다음 이벤트 시점으로 재생 시점이 이동될 수 있을 것이다.
거꾸로 도 17과 같이 제2 주요 장면과 제2 텍스트 구간이 표시되는 상태에서 이전 텍스트 구간을 보기 위하여 사용자가 코멘트 윈도우에 대하여 스크롤링을 수행하면 도 16과 같이 제1 주요 장면과 제1 텍스트 구간이 표시되는 상태로 천이될 수 있다. 역시 동영상 모드인 경우라면 도 17의 재생 시점으로부터 인접한 이전 이벤트 시점으로 재생 시점이 이동될 수 있을 것이다.
다른 예에 따라 코멘트 윈도우 상에 전체 텍스트 구간이 표시되는 경우에는 특정 텍스트 구간을 선택하는 입력을 받고, 그 입력에 따라 주요 장면이나 재생 시점을 이동시킬 수 있다.
다시 도 20 및 도 21을 참조하면, 도 20과 같이 제1 주요 장면과 전체 텍스트 구간이 표시될 때 사용자는 제2 텍스트 구간을 선택하면 도 21과 같이 제2 주요 장면이 표시될 수 있다. 또 전체 텍스트 구간 중 제2 텍스트 구간이 하일라이트 되도록 할 수도 있다.
또 다른 예로 요약 정보를 선택함으로써 선택된 요약 정보가 지시하는 텍스트 구간을 표시하고 또 해당 요약 정보에 대응되는 주요 장면이 표시되도록 하거나 또는 재생 시점을 해당 요약 정보에 대응되는 이벤트 시점으로 이동시킬 수 있다.
다시 도 22 및 도 23을 참조하면, 도 22나 도 23과 같이 제1 주요 장면과 제1 텍스트 구간이 표시되는 상태에서 제2 텍스트 구간에 대응되는 요약 정보인 “#2 ? 00:19: Tour programs”를 선택하면 제2 주요 장면과 제2 텍스트 구간이 표시될 수 있다.
한편, 도 22와 같이 스크롤 바가 있는 경우에는 해당 스크롤 바를 통해 텍스트 구간의 스크롤링을 조절하고 스크롤링에 의해 표시되는 텍스트 구간에 대응되도록 주요 장면이나 재생 시점을 이동시킬 수 있다.
<멀티미디어 콘텐츠 디스플레이 방법 >
이하에서는 본 발명의 실시예에 따른 멀티미디어 콘텐츠 디스플레이 방법에 관하여 설명하기로 한다.
도 24는 본 발명의 실시예에 따른 멀티미디어 콘텐츠 디스플레이 방법의 순서도이다. 도 24를 참조하면, 멀티미디어 콘텐츠 디스플레이 방법은, 멀티미디어 콘텐츠를 획득하는 단계(S110), 동영상 모드 또는 슬라이드 쇼 모드 중 어느 하나의 모드에 따라 제1 영역에 영상을 디스플레이하는 단계(S120), 제2 영역에 텍스트를 표시하는 단계(S130) 및 디스플레이되는 영상에 따라 디스플레이되는 텍스트를 조정하는 단계(S140)을 포함할 수 있다. 이하에서는 상술한 각 단계에 관하여 보다 구체적으로 설명하기로 한다.
먼저 전자 기기(1000)는 멀티미디어 콘텐츠를 획득할 수 있다(S110). 멀티미디어 콘텐츠는 동영상 데어터, 슬라이드 데이터 및 코멘트 데이터를 포함할 수 있다.
다음으로 전자 기기(1000)는 멀티미디어 콘텐츠를 이용하여 제1 영역에 영상을 출력할 수 있다(S120). 이때 영상은 동영상 모드 또는 슬라이드 쇼 모드 중 어느 하나의 모드에 따라 출력될 수 있다. 동영상 모드인 경우에 전자 기기(1000)는 동영상 데이터를 참조하여 동영상을 재생할 수 있다. 슬라이드 쇼 모드인 경우에 전자 기기(1000)는 슬라이드 데이터를 참조하여 주요 장면을 디스플레이할 수 있다. 이때 사용자 입력 등에 의하여 모드 간의 전환이 가능할 수 있다.
영상의 출력과 함께 전자 기기(1000)는 제1 영역과 상이하거나 또는 제1 영역에 포함되는 제2 영역에 텍스트를 표시할 수 있다(S130). 텍스트 출력은 코멘트 데이터를 참조하여 수행될 수 있다. 구체적으로 출력되는 텍스트는 코멘트 데이터 중 표시되는 주요 장면이나 동영상의 재생 시점에 대응되는 이벤트 구간에 링크된 텍스트 구간을 포함할 수 있으며, 추가적으로 그 다음 텍스트 구간들을 더 포함하는 것도 가능하다. 한편, 제2 영역은 자막 형태로 텍스트를 표시하는 경우에는 제1 영역의 일정 위치에 포함될 수 있고, 기사 형태로 텍스트를 표시하는 경우에는 제1 영역과 별도의 공간에 위치될 수 있다.
다음으로 디스플레이되는 영상에 따라 제2 영역에 표시되는 텍스트를 조정할 수 있다(S140). 예를 들어, 슬라이드 쇼 모드에서는 주요 장면이 전환됨에 따라 표시되는 그에 링크된 텍스트 구간이 표시되거나 또는 그에 링크된 텍스트 구간이 다른 텍스트 구간들과 상이한 디스플레이 속성을 갖고 표시되도록 할 수 있다. 다른 예를 들어, 동영상 모드에서는 재생 시점이 흐름에 따라 현재 재생 시점이 속하는 이벤트 구간에 링크된 텍스트 구간이 표시되거나 또는 그에 링크된 텍스트 구간이 다른 텍스트 구간들과 상이한 디스플레이 속성을 갖고 표시되도록 할 수 있다.
단계 S140에서 텍스트 표시의 조정은 디스플레이되는 텍스트에 대하여 스크롤링, 텍스트 상하이동, 페이지 업다운 및 페이지 넘김 중 적어도 하나를 포함하는 오퍼레이션을 통해 수행될 수 있다.
반대로 텍스트에 대한 스크롤링, 텍스트 상하이동, 페이지 업다운 및 페이지 넘김 등의 오퍼레이션에 관한 사용자 입력이 수신되어 표시되는 텍스트 구간이 변경되는 경우에는 제1 영역에 표시되는 영상을 조정할 수도 있다. 즉, 제2 영역에 표시되는 텍스트 구간에 대응되는 이벤트 시점에 대응되는 동영상 장면이나 주요 장면이 제1 영역에 표시되도록 할 수 있다.
한편, 제2 영역에는 코멘트 데이터의 텍스트 구간과 함께 텍스트 구간들에 대한 요약 정보가 함께 표시될 수도 있다.
도 25 내지 도 27는 본 발명의 실시예에 따른 주요 장면 선정의 다시 또 다른 예에 관한 도면들이다.
도 25을 참조하면, 전자 기기(1000)는 디스플레이 형태의 출력부(1200)를 통해 동영상 데이터를 실시간으로 재생할 수 있다. 여기서, 동영상 데이터는 출력창(display window)를 통해 출력될 수 있다. 디스플레이 창(display window)에는 이외에도 동영상 데이터의 재생을 조작하는 콘트롤 패널, 그리고 주요 장면 선정 입력을 받기 위한 주요 장면 선정 아이콘(SC selection icon), 동영상 데이터의 재생 구간에 대응되는 프로그레시브 바(progressive bar), 그리고 프로그래시브 바(progressive bar) 상에서 동영상 데이터 재생의 진행 시점을 표시하는 재생 시점 인디케이터(PB indicator)가 더 포함될 수 있다.
이처럼 동영상이 재생되는 중 입력부(1100)을 통해 사용자로부터 주요 장면 선정 입력을 입력받을 수 있다. 여기서, 장면 선정 입력은 입력부(1100)의 정해진 버튼을 클릭하거나 화면 터치 또는 도 25의 콘트롤 패널(control panel) 상의 장면 선정 입력 아이콘(SC select icon)을 선택하는 등의 다양한 방법에 의해 이루어질 수 있다.
장면 선정 입력이 입력되면 이에 기초하여 이벤트 시점을 판단할 수 있다. 예를 들어, 이벤트 시점은 동영상의 재생 구간 중 주요 장면 선정 입력이 수신된 시점에서의 재생 시점일 수 있다.
판단된 이벤트 시점은 도 26에서와 같이 프로그래시브 바(progressive bar) 상에 이벤트 시점을 표시하는 인디케이터(EV indicator)로 표시될 수 있다.
이벤트 시점이 판단되면, 그 이벤트 시점에 해당하는 동영상 데이터의 이미지 프레임(정지 영상)을 주요 장면으로 획득할 수 있다. 해당 이미지 프레임을 자체를 주요 장면으로 획득할 수 있지만, 필요에 따라서는 해당 이미지 프레임을 가공하여 주요 장면을 획득하는 것도 가능하다.
획득된 주요 장면은 주요 장면 창(SC window)에 표시될 수 있다. 이때 주요 장면은 썸네일 형태로 표시될 수 있으며, 또 주요 장면 창에는 주요 장면 번호와 주요 장면에 관한 이벤트 시점(EV time)이 함께 표시될 수 있다.
주요 장면이 선정되면 동영상 데이터의 실시간 재생이 자동으로 정지될 수 있으며, 사용자가 콘트롤 패널의 플레이 버튼 등을 조작함에 따라 동영상 데이터의 재생이 다시 시작될 수 있을 것이다.
동영상 데이터의 재생 중에 복수 회의 주요 장면 선정 입력이 발생하면, 이에 따라 다수의 이벤트 시점이 선정되고, 각각의 이벤트 시점마다 주요 장면이 선정될 수 있다. 도 27을 참조하면, 각각 4개의 주요 장면이 선정된 것이 썸 네일의 형태로 주요 장면 창(SC window)에 표시되는 것을 볼 수 있다. 마찬가지로 도 27을 참조하면, 프로그래시브 바 상에도 4개의 이벤트 시점을 지시하는 이벤트 시점 인디케이터(EV indicator)가 표시되는 것을 볼 수 있다. 여기서, 사용자가 주요 장면 창(SC window)에서 주요 장면 중 어느 하나를 선택하는 경우 동영상 데이터의 재생 시점은 선택된 주요 장면의 이벤트 시점으로 이동되는 것도 가능하다.
이처럼 선정된 주요 장면들을 상술한 바와 같이 이벤트 시점을 통해 동영상 데이터와 연동시켜 슬라이드 데이터를 생성함으로써 멀티미디어 콘텐츠가 제작될 수 있다.
한편, 이상에서는 사용자의 주요 장면 선정 입력을 통해 동영상 데이터로부터 슬라이드 데이터를 생성하여 멀티미디어 콘텐츠를 제작하는 동작에 관하여 설명하였는데, 이하에서는 사용자로부터 코멘트 입력을 통해 이벤트 시점에 매칭되는 코멘트들을 획득하여 입력받아 코멘트 데이터를 생성하는 동작에 관하여 설명한다.
또 한편, 주요 장면이 반드시 이벤트 시점에 대응되는 이미지 프레임의 정지 영상으로만 정해져야 하는 것은 아니며, 사용자는 필요에 따라 이벤트 시점에 그 이벤트 시점과 상이한 다른 시점에서의 동영상 데이터의 이미지 프레임을 주요 장면으로 선정할 필요가 있을 수 있다.
이 경우에는 다시 도 30을 참조하여, 먼저 주요 장면을 대체하고자 하는 주요 장면을 선택할 수 있다. 이러한 선택은 사용자가 주요 장면 창(SC window)에서 어느 하나의 주요 장면을 선정함으로써 이루어질 수 있다. 다음으로 선정된 주요 장면에 대한 대체 장면을 선정할 수 있다. 일 예에 따르면, 대체 장면의 선정은 다시 동영상 데이터를 재생하여 주요 장면 선정 입력에 준하는 대체 장면 선정 입력을 수행하는 방식으로 이루어질 수 있다. 또는 대체 장면의 선정은 프로그레시브 바 상의 이벤트 인디케이터(EV)를 이동시키는 방식으로 이루어질 수도 있다. 이 경우에는 주요 장면은 그대로 둔체 이벤트 시점을 변경하여 이벤트 시점에 대응되지 않는 장면을 주요 장면으로 선정되도록 하는 것이다.
대체 장면이 선정되면 이벤트 시점에 대응되는 주요 장면을 대체 장면이 변경되도록 슬라이드 데이터를 변경하여 주요 장면의 변경을 완료할 수 있다. 이때 대체 장면의 대체 시점은 이벤트 시점과 미리 정해진 범위 내에서만 설정되도록 하는 것도 가능하다.
도 28 내지 도 30은 본 발명의 실시예에 따른 코멘트 데이터 생성 동작의 예에 관한 도면들이다.
도 28을 참조하면, 전자 기기(1000)는 디스플레이 형태의 출력부(1200)는 동영상 데이터를 재생하는 출력창(display window)과 선정된 주요 장면을 표시하는 주요 장면 창(SC window)에 더해 코멘트 창(CM window)를 더 표시할 수 있다. 여기서, 코멘트 창은 코멘트 번호를 지시하는 코멘트 인디케이터(CM indicator)와 코멘트 내용을 입력하거나 입력된 코멘트 내용이 표시되는 코멘트 입력부(CM input interface)를 포함할 수 있다.
주요 장면이 선정되면 그에 대응되는 코멘트 인디케이터(CM indicator)가 생성될 수 있다. 예를 들어, 도 28에 도시된 바와 같이 “0:58.00”의 이벤트 시점에 대하여 “scene #1”의 주요 장면이 생성된 경우, “Comment #1”의 코멘트 인디케이터가 코멘트 창(CM window)에 표시될 수 있다. 여기서, 사용자로부터 코멘트 입력부(CM input interface)를 통해 텍스트를 입력받으면 입력된 텍스트가 대응되는 이벤트 시점 및 주요 장면에 대응되는 코멘트로 획득될 수 있다. 도 29를 살펴보면, 코멘트 입력부(CM input interface)에 사용자가 텍스트로 “Hi? Where are you going?”를 입력한 경우 그 텍스트가 “Comment #1”에 대한 코멘트로 획득될 수 있다.
이와 유사하게 도 30을 살펴보면, 복수의 이벤트 시점에 대하여 주요 장면들이 생성된 경우, 주요 장면 창(SC window)에는 복수의 주요 장면들이 포함될 수 있다. 마찬가지로, 코멘트 창(CM window)에는 복수의 코멘트 인디케이터(CM indicator)가 표시될 수 있다. 이러한 상태에서 사용자로부터 코멘트 인디케이터 중 어느 하나를 선택하는 입력을 받으면, 선택되니 코멘트 인디케이터에 대응되는 코멘트를 입력받을 수 있다. 도 30에서는 2번 주요 장면인 “scene #2”에 대응되는 2번 코멘트로서 “Good to see you. Bye~”가 입력되는 것을 볼 수 있다. 이 경우에 동영상 데이터의 재생 시점 역시 선택된 코멘트 인디케이터에 대응되는 이벤트 시점으로 이동하거나 하지 않을 수 있을 것이다.
이러한 절차를 거치면 각각의 이벤트 시점들에 대하여 코멘드의 입력이 가능하다. 물론, 경우에 따라서, 이벤트 시점 전부에 대해서는 코멘트가 있어야 하는 것은 아니므로, 일부 이벤트 시점에 대해서는 코멘트의 입력이 없는 것도 가능하다.
이와 같이 각각의 이벤트 시점에 대한 코멘트들이 획득되면 이들을 이벤트 시점 또는 그 이벤트 시점에 해당하는 주요 장면들과 매칭시켜 코멘트 데이터를 생성하여 멀티미디어 콘텐츠를 제작할 수 있다.
<콘텐츠 제작 방법>
이하에서는 본 발명의 실시예에 따른 멀티미디어 콘텐츠 제작 방법에 관하여 설명하기로 한다.
먼저 전자 기기(1000)는 동영상 데이터를 획득할 수 있다. 구체적으로 콘트롤러(1500)는 메모리(1400)로부터 기 저장되어 있는 동영상 데이터를 읽어오거나 통신부(1300)를 통해 외부로부터 동영상 데이터를 다운로드나 스트리밍하여 불러들일 수 있다. 여기서, 동영상 데이터는 실시간으로 카메라에 의해 촬영되고 있는 영상일 수 있다.
다음으로 전자 기기(1000)는 동영상 데이터를 재생할 수 있다. 또 동영상 데이터가 재생되는 중 사용자로부터 주요 장면 선정 입력을 획득할 수 있다.
전자 기기(1000)는 주요 장면 선정 입력에 기초하여 이벤트 시점을 판단할 수 있다. 이벤트 시점은 동영상 데이터의 재생 구간 중 주요 장면 선정 입력의 수신 시점에 재생되는 재생 시점일 수 있다.
이벤트 시점이 결정되면, 전자 기기(1000)는 이에 기초하여 주요 장면을 선정할 수 있다. 주요 장면은 이벤트 시점에 대응되는 동영상 데이터의 이미지 프레임에 대응하는 정지 영상일 수 있다.
주요 장면들이 선정되면 전자 기기(1000)는 각 주요 장면들을 이벤트 시점에 매칭시켜 슬라이드 데이터를 생성하고, 이에 따라 멀티미디어 콘텐츠가 제작될 수 있다.
한편, 이러한 과정에서 사용자는 주요 장면에 대응되는 코멘트를 설정할 수 있다. 코멘트의 설정은 주요 장면에 따라 생성된 코멘트 인디케이터의 선택 등에 따라 이루어질 수 있다. 선택된 코멘트에 대해서 텍스트를 입력하면 해당 텍스트가 관련된 주요 장면 또는 그 주요 장면의 이벤트 시점에 매칭되어 코멘트 데이터가 생성될 수 있다. 이로써 코멘트를 가지는 멀티미디어 콘텐츠의 제작이 될 수 있다.
<멀티미디어 콘텐츠 재생 동작>
이하에서는 상술한 것과 같이 선정된 주요 장면을 정지 영상으로써 순차적으로 보여주는 슬라이드 쇼 모드에 관하여 설명한다.
슬라이드 쇼 모드에서는 주요 장면이 정지 영상으로써 순차적으로 슬라이드 쇼 방식으로 표시될 수 있다. 여기서 슬라이드 쇼 방식이란 특정 주요 장면을 정지 영상으로 출력하고, 그 상태에서 사용자의 입력을 받거나 또는 자동으로 그 다음 또는 이전 주요 장면을 정지 영상으로 출력하는 방식을 의미할 수 있다.
이와 같이 슬라이드 쇼 모드에서는 주요 장면을 순차적으로 출력하기 위하여 슬라이드 이동 기능을 제공할 수 있다.
도 31은 본 발명의 실시에에 따른 콘텐츠 재생 방법의 기본 화면에 관한 도면이다.
도 31을 참조하면, 기본 화면에는 디스플레이 창, 프로그래시브바, 콘트롤 패널, 슬라이드 아이콘, 북마크 아이콘이 포함될 수 있다.
디스플레이 창에는 주요 장면이 정지 영상으로 표시될 수 있다. 또 디스플레이 창의 일부에는 정지 영상 위에 코멘트가 표시되는 자막 영역이 배치될 수 있다. 물론 여기서 자막 영역이 존재하여 동영상 모드나 슬라이드 쇼 모드에서 코멘트 데이터를 이용한 자막이 자막 영역에 표시되는 것 이외에도 말풍선이 해당 자막을 말하는 영상 내의 화자에 대응되도록 표시되고 그 말풍선 내에 자막이 표시되도록 하는 것도 가능하다. 콘트롤 패널에는 동영상 모드에 이용되는 각종 사용자 입력(동영상 재생, 재생 중단, 일시 정지, 뒤로 감기, 앞으로 감기 등)을 위한 아이콘들이 배치될 수 있다. 프로그래시브바에는 전체 동영상의 재생 시간에 대응되는 바와 그 바 상에 현재 재생 시점을 나타내는 아이콘이 위치하게 된다.
슬라이드 아이콘은 디스플레이 창의 좌우에 배치될 수 있다. 슬라이드 아이콘은 슬라이드 쇼 모드에서 슬라이드 이동을 수행하기 위한 사용자 입력에 관한 것이다. 또 북마크 아이콘은 북마크를 설정하기 위한 사용자 입력에 관한 것이다.
이와 같은 기본 화면에서 제공되고 있는 아이콘을 선택하는 사용자 입력이나 터치 입력을 통해 콘텐츠 재생 방법에서 각종 동작이 수행될 수 있다.
먼저 동영상 모드로부터 슬라이드 쇼 모드로 전환은 다음과 같이 수행될 수 있다.
동영상 모드로 콘텐츠를 재생 중에 사용자로부터 슬라이드 아이콘을 선택하는 사용자 입력이 수신되면 전자 기기(1000)는 동영상 모드로부터 슬라이드 쇼 모드로 콘텐츠의 재생 모드를 변경할 수 있다. 구체적으로 우측의 슬라이드 아이콘을 선택하는 사용자 입력이 수신되면 동영상 모드에서 재생하던 시점을 기준으로 타임 라인 상에 바로 이후에 존재하는 주요 장면을 정지 영상으로 디스플레이하면서 슬라이드 쇼 모드에 진입하게 되고, 좌측의 슬라이드 아이콘을 선택하는 사용자 입력이 수신되면 바로 이전에 존재하는 주요 장면을 정지 영상으로 디스플레이하면서 슬라이드 쇼 모드에 진입하게 된다.
또는 동영상 모드에서 수평 방향의 드래그 터치 입력이 입력되면 전자 기기(1000)는 재생 모드를 슬라이드 쇼 모드로 변환할 수 있다. 도 32은 본 발명의 실시에에 따른 모드 변환을 위한 사용자 입력에 관한 도면이다. 재생 모드의 전환은 드래그 터치 입력이 자막 영역 내에서 이루어질 때 수행될 수 있다. 구체적으로 터치 입력의 시작 지점이 자막 영역 이내인 경우 드래그 터치 입력이 자막 영역 이내인 것으로 판단할 수 있다. 여기서, 드래그 터치 입력의 수평 이동 방향에 따라 슬라이드 쇼 모드로 진입 시에 동영상의 재생 시점으로부터 타임 라인 상 이전 주요 장면을 정지 영상으로 출력할 것인지 다음 주요 장면을 정지 영상으로 출력할 것인지가 결정될 수 있다. 예를 들어, 도 32에 도시된 것과 같이 터치 입력의 방향이 우측으로 이루어지면 터치 입력 당시의 재생 시점으로부터 타임 라인 상 다음 주요 장면이 출력될 수 있다. 한편, 도 32에는 슬라이드 아이콘을 선택하여 슬라이드 이동을 하는 것도 함께 도시되어 있으므로 참조하기로 한다.
이와 같이 동영상 모드에서 슬라이드 쇼 모드로 진입하는 경우에 기본 화면에서 일부 구성이 변경될 수 있다. 일 예로, 슬라이드 쇼 모드는 동영상 모드에서와 코멘트 속성이 상이할 수 있다. 코멘트 속성이란 코멘트의 폰트의 크기, 색상, 폰트의 종류, 표시 위치 등을 의미할 수 있다. 도 33는 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 코멘트 속성의 변화를 도시한 도면이다. 일 예로 도 32과 33를 참조하면, 슬라이드 쇼 모드로 진입하면서 코멘트 폰트 크기가 증가된 것을 볼 수 있다.
한편, 슬라이드 쇼 모드에서 동영상 모드로 재변경하는 것도 가능한데, 이 경우에는 슬라이드 쇼의 재생 시점으로부터 바로 동영상을 재생하는 것도 가능하지만, 이와 달리 슬라이드 쇼의 재생 시점에서 미리 정해진 시간 간격만큼 빠른 시점으로부터 동영상을 재생하는 것도 가능하다. 이에 따라 보다 자연스러운 동영상 재생이 가능하다.
슬라이드 쇼 모드 내에서 주요 장면 간의 슬라이드 이동은 모드의 전환과 유사한 방식으로 이루어질 수 있다. 다시 말해 슬라이드 아이콘을 선택하거나 수평 방향의 드래그 터치를 통해 슬라이드 이동이 수행될 수 있다.
이러한 슬라이드 쇼 내에서 주요 장면 간의 슬라이드 이동에서는 화면이 슬라이드되는 형식으로 변경되는 비쥬얼 효과가 발생할 수 있다. 도 34은 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 슬라이드 이동의 비쥬얼 효과에 관한 도면이다. 도 34을 참조하면, 슬라이드 쇼 모드에서 드래그 터치 입력이 수신되면 디스플레이 창 내에서 현재 주요 장면이 드래그 터치의 방향으로 이동하게 되며 남은 공간에 슬라이드 이동에 따라 표시될 주요 장면이 출력되게 된다. 이때 주요 장면의 이동 정도는 드래그의 길이에 비례하게 된다. 이 상태에서 주요 장면의 이동 거리가 미리 정해진 거리 이상이 되면, 즉 현재 주요 장면의 끝단(도 34에서는 왼쪽 끝단)이 미리 정해진 경계선을 넘어서게 되면 슬라이드 이동이 이루어지게 된다. 반대로 드래그 터치 입력의 거리가 슬라이드 이동이 이루어지기 전에 종료되면 슬라이드 이동이 이루어지지 않을 수 있다.
또 슬라이드 쇼 모드 내에서 주요 장면 간의 슬라이드 이동은 드래그 터치 입력에 따라 상술한 것과 상이한 방식으로 이루어지는 것도 가능하다.
예를 들어, 디스플레이 창 내에 대하여 드래그 터치 입력이 수신되면 주요 장면이 이동될 수 있는데, 이때 주요 장면이 한장씩 이동되는 대신 드래그 터치의 길이 방향에 따라 주요 장면의 이동 속도가 정해질 수 있다. 구체적으로는 드래그 터치의 길이가 미리 정해진 길이 이하에서는 주요 장면 이동이 없을 수 있으며, 드래그 터치의 길이가 미리 정해진 길이 이상이 되면 그 길이에 따라 소정의 시간 간격마다 현재 주요 장면에서 다음 주요 장면으로 이동될 수 있으며, 드래그 터치의 길이가 증가할 수록 소정의 시간 간격이 짧아질 수 있다. 이와 유사하게 드래그 터치의 길이가 증가할수록 소정의 시간 간격은 유지한 채로 이동하는 주요 장면의 장수가 증가될 수 있다.
도 35은 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 슬라이드 이동 방식의 일 예에 관한 도면이다. 도 35을 살펴보면, 제1 드래그 포인트까지 드래그 터치가 이루어지면 초당 1회의 주요 장면 이동이 수행될 수 있으며, 제2 드래그 포인트까지 드래그 터치가 이루어지면 초당 10회의 주요 장면 이동이 수행될 수 있다. 이때 주요 장면의 이동은 단순 화면 전환 대신 실제 종이 책의 페이지가 넘어가는 것과 유사한 비쥬얼 효과를 가지며 수행될 수 있다.
이처럼 슬라이드 이동을 반복하게 되면 결과적으로 여러 주요 장면 중 최종 주요 장면을 출력하게 될 것이다. 이 경우에는 기본 화면을 통해 현재 주요 장면이 마지막 주요 장면임을 알릴 수 있다. 예를 들어, 최종 주요 장면에 도달하면 전자 기기(1000)는 기본 화면에서 다음 주요 장면으로 이동하기 위한 슬라이드 아이콘을 생략할 수 있다. 도 36는 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 슬라이드 아이콘의 생략에 관한 도면이다. 도 36에서는 마지막 주요 장면에 도달한 결과 다음 주요 장면으로 이동하도록 하는 슬라이드 아이콘은 표시되지 않고 있는 것을 볼 수 있다. 반대로 최초의 주요 장면을 출력하는 중에는 이전 주요 장면으로 이동하도록 하는 슬라이드 아이콘이 표시되지 않을 수도 있다.
다음으로 북마크 설정에 관하여 살펴본다. 도 37은 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 북마크 설정에 관한 도면이다. 도 37에 따르면 기본 화면의 북마크 아이콘을 선택하는 사용자 입력이 발생하면 동영상 모드 또는 슬라이드 쇼 모드에서 현재 재생 시점에 북마크를 설정할 수 있다. 이처럼 북마크가 설정되면 해당 장면은 북마크된 주요 장면으로 설정되게 된다. 도 37을 살펴보면 해당 주요 장면에 대한 코멘트에 북마크 설정이 되는 것을 확인할 수 있다.
또 이처럼 북마크를 설정할 때 부가 정보가 생성하기 위한 문자열 입력 창이 제공될 수도 있다. 해당 창이 사용자로부터 문자열이 입력되면 그 텍스트가 해당 코멘트와 함께 표시될 수 있다. 부가 정보로 입력된 텍스트는 원래 코멘트와 코멘트 속성이 상이하게 표시될 수 있다. 한편, 코멘트가 없는 위치에 북마크가 설정되면 더미 코멘트가 생성되게 된다.
이러한 북마킹을 위해서는 도 37에 도시된 것과 같이 북마크 버튼을 선택하는 것 이외에도 다양한 사용자 인터페이스가 이용될 수 있다.
도 38는 본 발명의 실시예에 따른 슬라이드 쇼 모드에서 북마크 설정을 위한 사용자 인터페이스의 일 예에 관한 도면이다. 도 38를 살펴보면 디스플레이 창에 대하여 아래로부터 윗방향으로 터치 입력을 수신하는 경우에 디스플레이 창에 표시되고 있는 주요 장면에 대한 북마킹이 이루어지는 것이 가능할 수 있다.
한편, 이상에서는 주로 북마킹이라는 표현을 사용하였는데 이는 일반적으로 멀티미디어 콘텐츠에 대하여 설정되는 북마킹의 협소한 의미로 해석되어서는 안되며 다른 주요 장면과 별도로 관리할 수 있도록 해당 주요 장면을 저장, 기록하는 행위로 이해되어야 할 것이다.
이와 같이 설정된 북마크를 이용한 북마크 이동은 다음과 같이 이루어질 수 있다. 도 39는 본 발명의 실시에에 따른 북마크 이동을 위한 터치 입력에 관한 도면이다. 북마크 이동은 수평 방향의 드래그 터치 입력이 입력에 따라 이루어질 수 있다. 여기서, 드래그 터치 입력이 자막 영역 내에서 이루어질 때 수행될 수 있다. 다만, 이러한 드래그 터치 입력은 미리 정해진 거리 이상을 수평 방향으로 이동하는 것일 수 있다. 다시 말해 상술한 슬라이드 이동과 북마크 이동은 드래그 거리에 따라 구별될 수 있다. 예를 들어, 미리 정해진 거리 미만까지 드래그 되면 일단 슬라이드 이동이 이루어지고, 거기서 다시 드래그가 지속되어 미리 정해진 거리 이상까지 드래그 되면 북마크 이동이 수행될 수 있다. 이동할 북마크 지점이 이전 북마크인지 이후 북마크인지는 드래그 방향에 따라 슬라이드 이동과 유사하게 설정될 수 있다.
전자 기기(1000)는 북마크된 주요 장면의 리스트를 표시할 수도 있다. 도 26은 본 발명의 실시예에 따른 북마크 리스트의 표시에 관한 것이다. 도 40을 참조하면, 슬라이드 쇼 모드에서는 북마크된 주요 장면의 이미지들을 리스트 업하여 디스플레이 할 수 있다. 예를 들어, 수직 방향(예로 위에서 아래 방향)의 드래그 터치 입력이 입력되면 전자 기기(1000)는 디스플레이 창을 드래그 정도에 따라 하방으로 이동시키면서 위의 남는 공간에 북마크된 주요 영상들을 시간 순으로 리스트업 해서 표시할 수 있다.
이 상태에서 사용자로부터 리스트업된 이미지 중 어느 하나가 선택되면 해당 북마크된 주요 영상의 정지 영상으로 재생 시점을 이동하여 이를 표시할 수 있다.
한편, 북마크들이 표시된 상태에서 다시 수평 방향의 드래그 터치가 발생하면 북마크의 리스트업을 해제할 수 있다.
또 전자 기기(1000)는 전체 코멘트가 있는 이벤트 시점을 브라우징하는 기능을 제공할 수도 있다. 도 41은 본 발명의 실시예에 따른 이벤트 시점의 브라우저에 관한 도면이다. 도 41을 살펴보면 슬라이드 쇼 모드에서는 사용자 입력에 따라 이벤트 시점들이 리스트업되어 있는 이벤트 브라우저를 표시할 수 있다. 이를 위한 사용자 입력으로는 더블 터치가 이용될 수 있다. 이벤트 브라우저는 모든 이벤트 구간에 대하여 시작 시점, 종료 시점, 텍스트 내용을 포함할 수 있다. 여기서, 리스트업된 이벤트 구간 중 어느 하나를 선택하는 사용자 입력이 발생하면 재생 시점을 선택된 이벤트 구간의 주요 영상의 시점으로 이동할 수 있다.
이상에서 설명한 슬라이드 쇼 모드는 전자 기기(1000)의 메모리(1400)에 기 저장되어 있는 콘텐츠를 이용하여 수행될 수도 있지만, 경우에 따라서는 외부 기기로부터 콘텐츠에 관한 데이터를 스트리밍 방식으로 전송받아가며 진행될 수도 있다. 예를 들어, 콘텐츠에 관한 데이터는 외부 기기로부터 전자 기기(1000)의 통신부(1300)를 통해 전송되고, 전자 기기(1000)는 이를 버퍼에 임시로 저장하여 버퍼를 읽어가며 콘텐츠를 재생할 수 있다.
여기서, 전자 기기(1000)는 콘텐츠를 슬라이드 쇼 모드에서 표시될 주요 장면의 정지 영상을 먼저 전송받을 수 있다. 일반적으로 동영상 스트리밍 서비스에서는 재생 시점으로부터 동영상을 플레이 하기 위한 영상 데이터가 순차적으로 수신되는데, 본 발명에서는 그에 앞서 주요 장면의 정지 영상이 먼저 전송될 수 있다. 주요 장면의 정지 영상은 동영상에 비하여 용량이 매우 작으므로 전송 속도가 낮아 동영상으로 콘텐츠를 재생하기 어려운 경우에도 주요 장면을 먼저 전송받으면 전자 기기(1000)는 콘텐츠를 슬라이드 쇼 모드로 재생할 수 있다. 또 이를 위해 전자 기기(1000)는 코멘트 데이터를 먼저 받을 수 있다.
이와 같이 주요 장면의 정지 영상을 먼저 획득하는 경우에 있어서, 보다 원활한 슬라이드 쇼의 진행을 위해 현재 재생 시점에 인접한 순서로 정지 영상들을 수신할 수도 있을 것이다.
<콘텐츠 재생 방법>
이하에서는 본 발명의 실시예에 따른 콘텐츠 재생 방법에 관하여 설명하기로 한다.
먼저 전자 기기(1000)는 콘텐츠를 획득할 수 있다. 구체적으로 콘트롤러(1500)는 메모리(1400)로부터 기 저장되어 있는 콘텐츠를 읽어오거나 통신부(1300)를 통해 외부로부터 콘텐츠를 다운로드하여 불러들일 수 있다. 여기서, 콘텐츠는 영상 데이터일 수 있다. 스트리밍 방식으로 콘텐츠를 불러들일 때에는 주요 장면에 대한 정지 영상 데이터를 동영상 데이터에 앞서 다운받을 수 있다. 이때 주요 장면 중 현재 재생 시점에 인접한 순으로 다운받을 수 있다.
또 전자 기기(1000)는 이벤트 시점에 관한 이벤트 정보를 획득할 수 있다. 여기서 이벤트란 이벤트로서 빈 코멘트를 가지는 더미 이벤트를 포함하는 개념이다. 또 이벤트 시점은 이벤트 구간의 시작 또는 종료 시점일 수 있으며 이벤트 정보는 코멘트 데이터를 의미할 수 있다. 콘트롤러(1500)는 외부 기기로부터 코멘트 데이터를 불러들이거나 또는 메모리(1400)에 기 저장되어 있는 코멘트 데이터를 읽어들일 수 있다.
전자 기기(1000)는 동영상 모드로 콘텐츠를 재생할 수 있다. 콘트롤러(1500)가 콘텐츠를 적적한 동영상 코덱으로 디코딩함으로써 콘텐츠를 동영상으로 재생할 수 있다.
또 전자 기기(1000)는 슬라이드 쇼 모드로 콘텐츠를 재생할 수 있다. 전자 기기(1000)는 이벤트 정보의 이벤트 시점에 해당하는 주요 장면을 순차적으로 슬라이드 쇼 방식으로 표시할 수 있다. 여기서 주요 장면은 정지 영상으로 표시될 수 있으며, 이러한 정지 영상을 콘텐츠의 동영상으로부터 이벤트 시점에 대하여 추출된 것일 수 있다. 또는 콘텐츠가 동영상과 함께 주요 장면에 대한 정지 영상들을 포함하고 있을 수도 있으며, 이때에는 해당 정지 영상을 정지 영상 코덱으로 디코딩함으로써 콘텐츠를 슬라이드 쇼 방식으로 재생할 수 있다.
동영상 모드와 슬라이드 쇼 모드 간에는 모드 전환이 가능하다. 동영상 모드에서 슬라이드 쇼 모드로 전환될 때에는 동영상 모드에서의 재생 시점에 가장 인접한 주요 장면을 정지 영상으로 출력하면서 슬라이드 쇼 모드에 진입하게 된다. 반대로 슬라이드 쇼 모드에서 동영상 모드로 진입할 시에는 주요 장면의 재생 시점 또는 그 재생 시점으로부터 미리 정해진 시간만큼 앞 또는 뒤로 이동한 시점에서 동영상 모드로의 재생을 시작할 수 있다.
한편, 슬라이드 쇼 모드에서는 주요 영상 간의 슬라이드 이동이 가능하며 이에 대해서는 자세히 상술한 바 있다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 이상에서 설명한 본 발명의 실시예들은 서로 별개로 또는 조합되어 구현되는 것도 가능하다.
따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
전술한 바와 같이, 상기 발명의 실시를 위한 최선의 형태에서 관련된 사항을 기술하였다.
전술한 바와 같이, 본 발명은 멀티미디어 콘텐츠 제작 및 재생 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체에서 전체적으로 또는 부분적으로 적용될 수 있다.

Claims (18)

  1. 동영상으로 재생되는 동영상 데이터 및 상기 동영상 데이터의 재생 구간 상의 이벤트 시점에 매칭되어 슬라이드 쇼 방식으로 디스플레이되는 주요 장면을 포함하는 슬라이드 데이터를 포함하는 멀티미디어 콘텐츠를 획득하는 단계;
    상기 멀티미디어 콘텐츠에 대응되는 텍스트 데이터를 획득하는 단계;
    상기 동영상 데이터를 동영상으로 재생하는 동영상 모드 또는 상기 상기 주요 장면을 슬라이드 쇼 방식으로 디스플레이하는 슬라이드 쇼 모드 중 어느 하나의 모드에 따라 제1 영역에 상기 멀티미디어 콘텐츠를 디스플레이하는 단계;
    제2 영역에 상기 텍스트 데이터의 적어도 일부를 디스플레이하는 단계; 및
    상기 디스플레이되는 멀티미디어 콘텐츠에 따라 상기 디스플레이되는 텍스트 데이터를 조정하는 단계;를 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  2. 제1 항에 있어서,
    상기 조정하는 단계는, 상기 디스플레이되는 텍스트 데이터를 갱신하는
    멀티미디어 콘텐츠 디스플레이 방법.
  3. 제1 항에 있어서,
    상기 조정하는 단계에서, 상기 디스플레이되는 텍스트 데이터에 대하여 스크롤링, 텍스트 상하이동, 페이지 업다운 및 페이지 넘김 중 적어도 하나를 포함하는 오퍼레이션을 수행하는
    멀티미디어 콘텐츠 디스플레이 방법.
  4. 제1 항에 있어서,
    상기 텍스트 데이터는, 상기 이벤트 시점에 링크되는 텍스트 구간을 포함하고,
    상기 조정하는 단계에서, 상기 동영상 모드에 따라 재생되는 상기 동영상 데이터의 재생 시점에 대응되는 이벤트 시점에 링크되는 상기 텍스트 구간이 상기 제2 영역에 표시되도록 조정하는
    멀티미디어 콘텐츠 디스플레이 방법.
  5. 제4 항에 있어서,
    상기 텍스트 구간은, 적어도 하나의 패러그래프 단위를 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  6. 제4 항에 있어서,
    상기 재생 시점에 대응되는 이벤트 시점은, 상기 재생 구간 상에서 상기 재생 시점과 동일한 이벤트 시점 또는 상기 재생 시점 바로 이전에 위치하는 이벤트 시점 중 적어도 하나를 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  7. 제4 항에 있어서,
    사용자로부터 상기 디스플레이되는 텍스트 데이터에 대하여 스크롤링, 텍스트 상하이동, 페이지 업다운 및 페이지 넘김 중 적어도 하나를 지시하는 사용자 입력을 수신하는 단계;
    상기 사용자 입력에 따라 상기 텍스트 데이터에 대한 오퍼레이션을 수행하는 단계; 및
    상기 오퍼레이션에 따라 상기 제2 영역에 디스플레이되는 텍스트 구간이 링크되는 이벤트 시점으로 상기 동영상 데이터의 재생 시점을 이동시키는 단계;를 더 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  8. 제7 항에 있어서,
    상기 재생 시점의 이동 시 상기 동영상 데이터의 재생을 일시 정지하는 단계;를 더 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  9. 제4 항에 있어서,
    상기 동영상 모드에 따라 상기 멀티미디어 콘텐츠를 디스플레이하는 동안 사용자로부터 상기 텍스트 데이터에 대하여 스크롤링, 텍스트 상하이동, 페이지 업다운 및 페이지 넘김 중 적어도 하나를 지시하는 사용자 입력을 수신하는 단계;
    상기 사용자 입력에 따라 상기 텍스트 데이터에 대한 오퍼레이션을 수행하는 단계;
    상기 오퍼레이션에 따라 상기 제2 영역에 디스플레이되는 텍스트 구간이 링크되는 이벤트 시점으로 상기 동영상 데이터의 재생 시점을 이동시키는 단계;
    상기 동영상 모드에서 상기 슬라이드 쇼 모드로 전환해 상기 제2 영역에 디스플레이되는 텍스트 구간이 링크되는 이벤트 시점에 매칭되는 주요 장면을 디스플레이하는 단계;를 더 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  10. 제1 항에 있어서,
    상기 텍스트 데이터는, 상기 주요 장면에 링크되는 텍스트 구간을 포함하고,
    상기 조정하는 단계에서, 상기 슬라이드 쇼 모드에 따라 디스플레이되는 주요 장면에 링크되는 텍스트 구간이 상기 제2 영역에 표시되도록 조정하는
    멀티미디어 콘텐츠 디스플레이 방법.
  11. 제10 항에 있어서,
    상기 텍스트 구간은, 적어도 하나의 패러그래프 단위를 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  12. 제11 항에 있어서,
    사용자로부터 상기 디스플레이되는 텍스트 데이터에 대하여 스크롤링, 텍스트 상하이동, 페이지 업다운 및 페이지 넘김 중 적어도 하나를 지시하는 사용자 입력을 수신하는 단계;
    상기 사용자 입력에 따라 상기 텍스트 데이터에 대한 오퍼레이션을 수행하는 단계; 및
    상기 오퍼레이션에 따라 상기 제2 영역에 디스플레이되는 텍스트 구간이 링크되는 주요 장면을 디스플레이하는 단계;를 더 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  13. 제1 항에 있어서,
    상기 텍스트 데이터는, 상기 이벤트 시점에 링크되는 텍스트 구간들 및 상기 텍스트 구간의 요약 정보를 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  14. 제13 항에 있어서,
    상기 텍스트 데이터를 디스플레이하는 단계는, 상기 동영상 모드에 따라 재생되는 상기 동영상 데이터의 재생 시점 및 상기 슬라이드 쇼 모드에 따라 디스플레이되는 상기 주요 장면 중 어느 하나에 대응되는 상기 이벤트 시점에 링크되는 상기 텍스트 구간을 디스플레이하는 단계 및 상기 요약 정보를 디스플레이하는 단계를 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  15. 제13 항에 있어서,
    상기 텍스트 데이터를 디스플레이하는 단계는, 상기 동영상 모드에 따라 재생되는 상기 동영상 데이터의 재생 시점 및 상기 슬라이드 쇼 모드에 따라 디스플레이되는 상기 주요 장면 중 어느 하나에 대응되는 상기 이벤트 시점에 링크되는 상기 텍스트 구간을 디스플레이하는 단계 및 상기 디스플레이되는 텍스트 구간을 제외한 나머지 텍스트 구간의 상기 요약 정보를 디스플레이하는 단계를 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  16. 제15 항에 있어서,
    상기 요약 정보를 선택하는 사용자 입력을 수신하는 단계; 및
    상기 선택된 요약 정보에 따른 상기 텍스트 구간을 디스플레이하는 단계;
    상기 텍스트 구간이 링크된 상기 이벤트 시점에 기초하여, 상기 동영상 모드에서 상기 동영상 데이터의 재생 시점을 설정하거나 상기 슬라이드 쇼 모드에서 디스플레이되는 상기 주요 장면을 판단하는 단계;를 더 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  17. 제1 항에 있어서,
    상기 슬라이드 쇼 모드에 따라 상기 멀티미디어 콘텐츠를 디스플레이하는 동안 사용자로부터 북마크를 지시하는 사용자 입력을 수신하는 단계; 및
    상기 사용자 입력의 수신 시점에 디스플레이되는 주요 장면을 북마크하는 단계;를 더 포함하는
    멀티미디어 콘텐츠 디스플레이 방법.
  18. 영상을 출력하는 디스플레이; 및
    동영상으로 재생되는 동영상 데이터 및 상기 동영상 데이터의 재생 구간 상의 이벤트 시점에 매칭되어 슬라이드 쇼 방식으로 디스플레이되는 주요 장면을 포함하는 슬라이드 데이터를 포함하는 멀티미디어 콘텐츠를 획득하고, 상기 멀티미디어 콘텐츠에 대응되는 텍스트 데이터를 획득하고, 상기 디스플레이를 통해 상기 동영상 데이터를 동영상으로 재생하는 동영상 모드 또는 상기 상기 주요 장면을 슬라이드 쇼 방식으로 디스플레이하는 슬라이드 쇼 모드 중 어느 하나의 모드에 따라 제1 영역에 상기 멀티미디어 콘텐츠를 디스플레이하고, 제2 영역에 상기 텍스트 데이터의 적어도 일부를 디스플레이하고, 상기 디스플레이되는 멀티미디어 콘텐츠에 따라 상기 디스플레이되는 텍스트 데이터를 조정하는 콘트롤러;를 포함하는
    전자 기기.
PCT/KR2015/013773 2014-12-15 2015-12-15 멀티미디어 콘텐츠 제작 및 재생 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체 WO2016099141A2 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
US15/536,639 US10678415B2 (en) 2014-12-15 2015-12-15 Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded
US16/863,941 US11112960B2 (en) 2014-12-15 2020-04-30 Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded
US17/396,537 US11507265B2 (en) 2014-12-15 2021-08-06 Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded
US17/958,364 US11720243B2 (en) 2014-12-15 2022-10-01 Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded
US17/958,366 US11733854B2 (en) 2014-12-15 2022-10-01 Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded
US18/211,074 US20230333725A1 (en) 2014-12-15 2023-06-16 Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140180219A KR102319456B1 (ko) 2014-12-15 2014-12-15 콘텐츠 재생 방법 및 이를 수행하는 전자 기기
KR10-2014-0180219 2014-12-15

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US15/536,639 A-371-Of-International US10678415B2 (en) 2014-12-15 2015-12-15 Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded
US16/863,941 Continuation US11112960B2 (en) 2014-12-15 2020-04-30 Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded

Publications (3)

Publication Number Publication Date
WO2016099141A2 true WO2016099141A2 (ko) 2016-06-23
WO2016099141A3 WO2016099141A3 (ko) 2016-08-11
WO2016099141A9 WO2016099141A9 (ko) 2017-11-16

Family

ID=56127797

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/013773 WO2016099141A2 (ko) 2014-12-15 2015-12-15 멀티미디어 콘텐츠 제작 및 재생 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체

Country Status (3)

Country Link
US (6) US10678415B2 (ko)
KR (4) KR102319456B1 (ko)
WO (1) WO2016099141A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110709920A (zh) * 2017-06-08 2020-01-17 佳能株式会社 图像处理设备及其控制方法

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102319456B1 (ko) * 2014-12-15 2021-10-28 조은형 콘텐츠 재생 방법 및 이를 수행하는 전자 기기
GB201516552D0 (en) * 2015-09-18 2015-11-04 Microsoft Technology Licensing Llc Keyword zoom
GB201516553D0 (en) 2015-09-18 2015-11-04 Microsoft Technology Licensing Llc Inertia audio scrolling
KR102494584B1 (ko) * 2016-08-18 2023-02-02 삼성전자주식회사 디스플레이 장치 및 그 컨텐츠 디스플레이 방법
KR101995535B1 (ko) * 2018-03-07 2019-07-02 리마 주식회사 웹툰 무단 복사 방지 방법 및 프로그램
CN108882024B (zh) * 2018-08-01 2021-08-20 北京奇艺世纪科技有限公司 一种视频播放方法、装置及电子设备
KR102502577B1 (ko) * 2018-08-30 2023-02-22 삼성전자주식회사 외부 전자 장치 내에서 멀티미디어 콘텐트를 이어서 재생하기 위한 전자 장치 및 방법
US11341184B2 (en) * 2019-02-26 2022-05-24 Spotify Ab User consumption behavior analysis and composer interface
CN112291603A (zh) * 2019-07-23 2021-01-29 北京小桨搏浪科技有限公司 视频显示方法、装置以及存储介质
US11237708B2 (en) * 2020-05-27 2022-02-01 Bank Of America Corporation Video previews for interactive videos using a markup language
US11277666B2 (en) 2020-06-10 2022-03-15 Rovi Guides, Inc. Systems and methods to improve skip forward functionality
US11184675B1 (en) 2020-06-10 2021-11-23 Rovi Guides, Inc. Systems and methods to improve skip forward functionality
US11276433B2 (en) 2020-06-10 2022-03-15 Rovi Guides, Inc. Systems and methods to improve skip forward functionality
EP4165875A1 (en) * 2020-06-10 2023-04-19 Rovi Guides, Inc. Systems and methods to improve skip forward functionality
US11662895B2 (en) * 2020-08-14 2023-05-30 Apple Inc. Audio media playback user interface
CN112261459B (zh) * 2020-10-23 2023-03-24 北京字节跳动网络技术有限公司 一种视频处理方法、装置、电子设备和存储介质
JP6913812B1 (ja) * 2020-12-16 2021-08-04 株式会社コロプラ プログラム、情報処理方法、及び情報処理装置
US11483619B1 (en) * 2021-08-31 2022-10-25 Rovi Guides, Inc. Measuring sleep state of a user using wearables and deciding on the playback option for the content consumed
CN113891113B (zh) * 2021-09-29 2024-03-12 阿里巴巴（中国）有限公司 视频剪辑合成方法及电子设备

Family Cites Families (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4829294A (en) * 1986-06-25 1989-05-09 Hitachi, Ltd. Document processing method and system using multiwindow
US5917480A (en) * 1996-06-04 1999-06-29 Microsoft Corporation Method and system for interacting with the content of a slide presentation
US6295646B1 (en) * 1998-09-30 2001-09-25 Intel Corporation Method and apparatus for displaying video data and corresponding entertainment data for multiple entertainment selection sources
US6646655B1 (en) * 1999-03-09 2003-11-11 Webex Communications, Inc. Extracting a time-sequence of slides from video
KR100608454B1 (ko) * 1999-10-19 2006-08-02 삼성전자주식회사 키프레임을 이용한 동화상 기록 및/또는 재생장치
US7047201B2 (en) * 2001-05-04 2006-05-16 Ssi Corporation Real-time control of playback rates in presentations
JP2004191620A (ja) * 2002-12-11 2004-07-08 Pentax Corp 記録媒体、再生装置、及び記録媒体の再生方法
US20060109283A1 (en) * 2003-02-04 2006-05-25 Shipman Samuel E Temporal-context-based video browsing interface for PVR-enabled television systems
US7730407B2 (en) * 2003-02-28 2010-06-01 Fuji Xerox Co., Ltd. Systems and methods for bookmarking live and recorded multimedia documents
FI20031908A0 (fi) * 2003-12-29 2003-12-29 Nokia Corp Menetelmä medialeikkeen koostamiseksi liikkuvassa päätelaitteessa, menetelmää hyödyntävä päätelaite ja ohjelmalliset välineet menetelmän toteuttamiseksi
US7421656B2 (en) * 2004-01-05 2008-09-02 Microsoft Corporation Systems and methods for interacting with a user interface of a media player
DE602005023285D1 (de) * 2004-03-26 2010-10-14 Lg Electronics Inc Speichermedium,verfahren, und gerät zum wiedergeben von untertiteldatenströmen
US7818350B2 (en) * 2005-02-28 2010-10-19 Yahoo! Inc. System and method for creating a collaborative playlist
US7856602B2 (en) * 2005-04-20 2010-12-21 Apple Inc. Updatable menu items
US7793206B2 (en) * 2005-11-02 2010-09-07 Creative Technology Ltd System for downloading digital content published in a media channel
US7735101B2 (en) * 2006-03-28 2010-06-08 Cisco Technology, Inc. System allowing users to embed comments at specific points in time into media presentation
US7788695B2 (en) * 2006-08-25 2010-08-31 At&T Intellectual Property I, L.P. System and method of distributing multimedia content
US20080062137A1 (en) * 2006-09-11 2008-03-13 Apple Computer, Inc. Touch actuation controller for multi-state media presentation
JP5172169B2 (ja) * 2007-02-16 2013-03-27 シャープ株式会社 コンテンツ表示装置、テレビジョン受像機、コンテンツ表示方法、コンテンツ表示制御プログラム、および記録媒体
US8346049B2 (en) * 2007-05-21 2013-01-01 Casio Hitachi Mobile Communications Co., Ltd. Captioned video playback apparatus and recording medium
KR101422283B1 (ko) * 2007-10-29 2014-07-22 주식회사 케이티 자막을 이용한 동영상 재생 방법 및 이를 구비한 휴대용단말기
DE102007063255A1 (de) 2007-12-31 2009-07-02 Mahle International Gmbh Lagereinrichtung
US8307395B2 (en) * 2008-04-22 2012-11-06 Porto Technology, Llc Publishing key frames of a video content item being viewed by a first user to one or more second users
US8736561B2 (en) * 2010-01-06 2014-05-27 Apple Inc. Device, method, and graphical user interface with content display modes and display rotation heuristics
US9025933B2 (en) * 2010-02-12 2015-05-05 Sony Corporation Information processing device, information processing method, playback device, playback method, program and recording medium
KR20110129087A (ko) * 2010-05-25 2011-12-01 (주)휴맥스 영상 컨텐츠를 다시 플레이하는 방법 및 장치
KR20110132066A (ko) 2010-06-01 2011-12-07 엘지전자 주식회사 영상표시기기의 영상 검색 장치 및 방법
GB2486002A (en) * 2010-11-30 2012-06-06 Youview Tv Ltd Media Content Provision
US9069452B2 (en) * 2010-12-01 2015-06-30 Apple Inc. Morphing a user-interface control object
KR101729523B1 (ko) * 2010-12-21 2017-04-24 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
KR101062929B1 (ko) * 2011-01-04 2011-09-07 (주)올라웍스 생성된 이미지에 포함된 객체에 대한 콜렉션을 지원하기 위한 방법, 단말 장치 및 컴퓨터 판독 가능한 기록 매체
US9271035B2 (en) * 2011-04-12 2016-02-23 Microsoft Technology Licensing, Llc Detecting key roles and their relationships from video
EP2525568B1 (en) * 2011-05-19 2017-11-15 EchoStar Technologies L.L.C. Automatic subtitle resizing
EP2573759A3 (en) * 2011-09-20 2013-09-25 Samsung Electronics Co., Ltd. Display apparatus and method
US8869198B2 (en) * 2011-09-28 2014-10-21 Vilynx, Inc. Producing video bits for space time video summary
KR101299778B1 (ko) * 2011-10-06 2013-08-23 주식회사 유비온 북 마킹 생성이 가능한 전자학습 단말 학습 컨텐츠 제공방법
TW201337721A (zh) * 2012-03-06 2013-09-16 Acer Inc 手持式裝置及其相關控制方法
JP5879169B2 (ja) * 2012-03-26 2016-03-08 日本放送協会 字幕同期再生装置およびそのプログラム
US20150046941A1 (en) * 2012-03-28 2015-02-12 Panasonic Corporation Video display device, video display method, and program
US9146655B2 (en) * 2012-04-06 2015-09-29 Samsung Electronics Co., Ltd. Method and device for executing object on display
US20150193386A1 (en) * 2012-05-03 2015-07-09 David Adam Wurtz System and Method of Facilitating Font Selection and Manipulation of Fonts
US9262413B2 (en) * 2012-06-06 2016-02-16 Google Inc. Mobile user interface for contextual browsing while playing digital content
KR20140021197A (ko) 2012-08-09 2014-02-20 한국전자통신연구원 콘텐츠와 데이터 동기화 장치 및 방법
KR102196671B1 (ko) * 2013-01-11 2020-12-30 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
KR102087005B1 (ko) * 2013-01-31 2020-03-11 삼성전자 주식회사 페이지 검색 방법 및 이를 지원하는 단말기
KR101267872B1 (ko) 2013-02-06 2013-05-27 (주)티비스톰 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법 및 그 장치
KR101481689B1 (ko) 2013-04-30 2015-01-12 주식회사 엠오디 숫자정보를 이용한 멀티미디어 컨텐츠 탐색방법 및 장치
KR102161230B1 (ko) 2013-05-28 2020-09-29 삼성전자주식회사 멀티미디어 콘텐츠 검색을 위한 사용자 인터페이스 방법 및 장치
KR20140141408A (ko) 2013-05-29 2014-12-10 한양대학교 산학협력단 영상 및 자막 정보를 이용한 스토리 북 제작 방법
US9641891B2 (en) * 2013-06-17 2017-05-02 Spotify Ab System and method for determining whether to use cached media
US10001904B1 (en) * 2013-06-26 2018-06-19 R3 Collaboratives, Inc. Categorized and tagged video annotation
KR102047703B1 (ko) * 2013-08-09 2019-11-22 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
KR20150025613A (ko) * 2013-08-29 2015-03-11 삼성전자주식회사 애플리케이션의 관련 정보를 표시하는 전자 장치 및 방법
US9063640B2 (en) * 2013-10-17 2015-06-23 Spotify Ab System and method for switching between media items in a plurality of sequences of media items
KR20150107382A (ko) * 2014-03-14 2015-09-23 삼성전자주식회사 전자장치 및 전자장치의 콘텐츠 표시방법
US9830061B1 (en) * 2014-04-09 2017-11-28 Google Inc. Methods, systems, and media for providing media guidance with contextual controls
KR101609184B1 (ko) * 2014-05-27 2016-04-06 네이버 주식회사 사전 기능을 제공하는 방법과 시스템, 그리고 기록 매체 및 파일 배포 시스템
EP3158426B1 (en) * 2014-06-18 2019-09-11 Google LLC Methods, systems and media for controlling playback of video using a touchscreen
KR102319456B1 (ko) * 2014-12-15 2021-10-28 조은형 콘텐츠 재생 방법 및 이를 수행하는 전자 기기
US9665170B1 (en) * 2015-06-10 2017-05-30 Visionary Vr, Inc. System and method for presenting virtual reality content to a user based on body posture
US9552520B1 (en) * 2015-07-07 2017-01-24 Disney Enterprises, Inc. Systems and methods for automatic key frame extraction and storyboard interface generation for video
EP3249651B1 (en) * 2016-05-23 2018-08-29 Axis AB Generating a summary video sequence from a source video sequence
US10853659B2 (en) * 2017-05-05 2020-12-01 Google Llc Methods, systems, and media for adaptive presentation of a video content item based on an area of interest
US11170043B2 (en) * 2019-04-08 2021-11-09 Deluxe One Llc Method for providing visualization of progress during media search

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110709920A (zh) * 2017-06-08 2020-01-17 佳能株式会社 图像处理设备及其控制方法
US11263999B2 (en) 2017-06-08 2022-03-01 Canon Kabushiki Kaisha Image processing device and control method therefor

Also Published As

Publication number Publication date
WO2016099141A3 (ko) 2016-08-11
US20230027161A1 (en) 2023-01-26
US11733854B2 (en) 2023-08-22
US11507265B2 (en) 2022-11-22
US20200257441A1 (en) 2020-08-13
KR102486401B1 (ko) 2023-01-06
KR20210130687A (ko) 2021-11-01
US20230333725A1 (en) 2023-10-19
US20210365178A1 (en) 2021-11-25
US20230024098A1 (en) 2023-01-26
US11720243B2 (en) 2023-08-08
KR20160072510A (ko) 2016-06-23
KR102319456B1 (ko) 2021-10-28
KR20230008904A (ko) 2023-01-16
KR20240046157A (ko) 2024-04-08
US20170336955A1 (en) 2017-11-23
WO2016099141A9 (ko) 2017-11-16
US10678415B2 (en) 2020-06-09
US11112960B2 (en) 2021-09-07
KR102654959B1 (ko) 2024-04-04

Similar Documents

Publication Publication Date Title
WO2016099141A2 (ko) 멀티미디어 콘텐츠 제작 및 재생 방법, 이를 수행하는 전자 기기 및 이를 실행하는 프로그램이 저장된 기록 매체
WO2013022218A2 (en) Electronic apparatus and method for providing user interface thereof
WO2013022223A2 (en) Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
WO2013022222A2 (en) Method for controlling electronic apparatus based on motion recognition, and electronic apparatus applying the same
WO2013022221A2 (en) Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
WO2017043784A1 (en) Mobile terminal and method for controlling the same
WO2015182869A1 (en) Display apparatus and method thereof
WO2013069936A1 (en) Electronic apparatus and method for controlling thereof
WO2017003007A1 (ko) 영상표시장치 및 이동 단말기
WO2019039634A1 (ko) 영상표시장치
WO2014014308A1 (en) Method and system for sharing content, device and computer-readable recording medium for performing the method
WO2014157908A1 (en) Device and method for displaying execution result of application
WO2013168970A1 (en) Method and system for operating communication service
WO2014042445A1 (en) Display apparatus and method for controlling display apparatus thereof
WO2015163555A1 (ko) 자막 삽입 시스템 및 방법
WO2021132757A1 (ko) 디스플레이 장치
WO2016126048A1 (ko) 디스플레이 장치
WO2021117953A1 (ko) 디스플레이 장치
WO2013065930A1 (en) Media apparatus, content server and method for operating the same
WO2018088667A1 (en) Display device
WO2015160039A1 (en) Method for operating image display device
WO2023163322A1 (ko) 영상표시장치, 및 서버
WO2019078542A1 (en) IMAGE DISPLAY APPARATUS
WO2021070976A1 (ko) 소스 기기 및 무선 시스템
WO2022050785A1 (ko) 디스플레이 기기 및 그의 동작 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15870308

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15870308

Country of ref document: EP

Kind code of ref document: A2