WO2020235307A1 - コンテンツ提供システム、出力装置、及び情報処理方法 - Google Patents
コンテンツ提供システム、出力装置、及び情報処理方法 Download PDFInfo
- Publication number
- WO2020235307A1 WO2020235307A1 PCT/JP2020/017885 JP2020017885W WO2020235307A1 WO 2020235307 A1 WO2020235307 A1 WO 2020235307A1 JP 2020017885 W JP2020017885 W JP 2020017885W WO 2020235307 A1 WO2020235307 A1 WO 2020235307A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- content
- output
- control unit
- providing system
- unit
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
- H04R1/025—Arrangements for fixing loudspeaker transducers, e.g. in a box, furniture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
- H04R2499/10—General applications
- H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
Definitions
- the present invention relates to a content providing system, an output device, and an information processing method.
- Patent Document 1 discloses a technique for automatically calculating a speaker placement position suitable for a user and providing the placement position information to the user.
- Patent Document 1 merely improves the entertainingness of the content by optimizing the arrangement position of the speaker. There is still room for improvement in content entertainment.
- the present invention has been made in view of the above problems, and an object of the present invention is to provide a mechanism capable of further improving the entertaining property of the content.
- a content providing system including an output unit and a control unit that controls the output unit so as to output according to the content is provided.
- the control unit may control the output unit so as to output additional information according to the content together with the content.
- the control unit may control the output by the output unit based on the information of the part of the content being output.
- the control unit may control the output unit so as to extract a characteristic sound from the voice included in the content and output a vibration corresponding to the extracted characteristic sound.
- the control unit may control the output by the output unit according to the situation in which the content is viewed.
- the control unit may control the output by the output unit based on the situation of the user who views the content.
- the user who appreciates the content may board the moving body, and the control unit may control the output by the output unit based on the information of the moving body.
- the content is information indicating an aspect of the first space
- the control unit may control a device arranged in a second space different from the first space as the output unit.
- an output device including an output unit that outputs based on control information instructing output according to the content is provided.
- an information processing method including controlling an output unit so as to output according to the content is provided.
- FIG. 1 is a block diagram showing an example of a logical configuration of the content providing system 100 according to the embodiment of the present invention.
- the content providing system 100 includes an acquisition unit 110, a control unit 120, and an output unit 130.
- the acquisition unit 110 has a function of acquiring information.
- the acquisition unit 110 acquires the content.
- the content is information including text, an image (still image / moving image), a voice, and the like.
- the content may include information perceived by other sensory organs such as tactile information in addition to or in place of these visual and auditory information.
- Specific examples of the content include movies, sports images, games, music, footsteps, read-aloud audio of books, advertisements, and the like.
- the acquisition unit 110 is configured as, for example, a wired / wireless communication interface and an external interface such as a USB (Universal Serial Bus) port, and can acquire information from the outside.
- the acquisition unit 110 may acquire information indicating the viewing status of the content.
- the information indicating the viewing status of the content includes, for example, information on the user who receives the content, information on the vehicle 10 where the content is provided, and the like.
- the acquisition unit 110 is composed of, for example, an arbitrary sensor such as a biological sensor, an inertial sensor, an image pickup device, and a microphone.
- the control unit 120 has a function of controlling the overall operation of the content providing system 100.
- the control unit 120 is composed of, for example, an electronic circuit such as a CPU (Central Processing Unit) and a microprocessor.
- the control unit 120 controls the output by the output unit 130 by generating control information instructing output according to the content and outputting the control information to the output unit 130.
- the control information includes, for example, content, which output device should be used for content output, output settings of each output device (output level and directivity settings, etc.), and information to be additionally output together with the content. Etc. are included.
- the output unit 130 has a function of outputting information to the user.
- the output unit 130 is configured as an output device that outputs a stimulus perceived by the user at least one of the visual presentation unit, the auditory presentation unit, the tactile presentation unit, the taste presentation unit, and the olfactory presentation unit, which will be described below.
- the visual presentation unit has a function of performing visual presentation (that is, outputting a stimulus perceived by sight).
- the visual presentation unit is composed of, for example, a display device capable of outputting images such as a display and a projector, a lighting device capable of emitting light such as an LED (Light Emitting Diode) light, and an ambient light control device such as a window blind.
- the auditory presentation unit has a function of performing auditory presentation (that is, outputting a stimulus perceived by auditory sense).
- the auditory presentation unit is composed of audio output devices such as speakers, earphones, and bone conduction earphones.
- the tactile presentation unit has a function of performing tactile presentation (that is, outputting a stimulus perceived by the tactile sense).
- the tactile presentation unit is composed of, for example, a vibrating device such as an eccentric motor and a voice coil, a blower that emits wind, a temperature changing device that outputs a warm / cold feeling, and a device that outputs an electrical stimulus.
- the taste presenting unit has a function of presenting a taste (that is, outputting a stimulus perceived by the taste).
- the taste presenting unit is composed of, for example, a device that releases a chemical substance and a device that outputs an electrical stimulus to the taste device.
- the olfactory presentation unit has a function of performing olfactory presentation (that is, outputting a stimulus perceived by the sense of smell).
- the olfactory stimulus unit is composed of, for example, a device that releases a fragrance.
- the output unit 130 outputs based on the control information output from the control unit 120.
- the content is information indicating the mode (sound, sight, temperature, vibration, etc.) of the first space
- the output unit 130 is a device arranged in a second space different from the first space.
- the second space may be a space physically different from the first space.
- the output unit 130 may output the content created at a remote location.
- the second space may be a space that is temporally different from the first space.
- the output unit 130 may output the contents created in the past.
- the second space may be a space that is physically and temporally different from the first space.
- the content provision system 100 can be applied to various destinations.
- the content providing system 100 is applied to a vehicle will be described.
- the user who appreciates the content is the person who gets on the vehicle.
- FIG. 2 is a diagram for explaining an application example of the content providing system 100 according to the present embodiment.
- the content providing system 100 is applied to the vehicle 10.
- a display 11 provided on the front seats, a projector (not shown) projected on a screen 12 provided on the rear seats that can be stored when not in use, and lighting 13 (13A to 13A) provided on the inner wall of the passenger compartment so as to surround all seats.
- 13E is an example of the visual presentation unit.
- the window glass 14 (14A to 14C) is provided with a mechanism for raising and lowering the blind and a control device for ambient light such as a liquid crystal film film capable of blocking light by passing a current as a visual presentation unit.
- the speakers 15 (15A to 15E) provided on the inner wall of the passenger compartment so as to surround all the seats are an example of the auditory presentation unit.
- a vibrating device and a temperature changing device may be provided as tactile presentation portions on the seat surface, the backrest portion, the armrest portion, the seat belt, the handle, and the floor surface of the seat, which can be in contact with the user.
- AC AIR CONDITIONER
- the content providing system 100 may be composed of a single device (that is, the vehicle 10), or may be composed of a plurality of devices.
- a terminal provided on the shirt a wearable device such as a smart watch, a cushion that touches the user's body, a terminal device such as a smartphone, and a device outside the vehicle such as a traffic light may function as the output unit 130.
- the acquisition unit 110 and the control unit 120 are configured as, for example, an ECU (Electronic Control Unit) (not shown).
- the content providing system 100 controls the output unit 130 so as to output according to the content.
- the output control here includes setting the output environment of the content and controlling to output additional information according to the content together with the content.
- the content providing system 100 selects an output device that outputs the content and adjusts the output level (for example, display brightness and volume) according to the content. Thereby, for example, if the content is a movie, the screen 12 is lowered and used, and an output environment suitable for the content can be constructed to improve the entertainment property of the content.
- the content providing system 100 outputs the sound corresponding to the image content together with the output of the image content, and outputs the vibration corresponding to the voice content together with the output of the voice content. That is, when the content is image content, the additional information may be audio corresponding to the image content. Further, when the content is audio content, the additional information may be vibration according to the audio content. By outputting additional information together with the content, it is possible to reinforce the viewing experience of the content and improve the entertainingness of the content such as presence and immersiveness.
- the content providing system 100 may control the output of the content based on the attribute information of the content.
- the attribute information of the content include the type of content such as a movie and music, the genre of the movie, the performers, the tempo of music, the team appearing in the sports video, and the like.
- the content providing system 100 turns on the lighting 13 with the team color of the team appearing in the sports video, or blinks the lighting 13 according to the tempo of the music. This makes it possible to improve the presence of the content.
- the attribute information of the content may be acquired in association with the content, or may be separately acquired from an external DB (Data Base) or the like.
- the content providing system 100 may control the output of the content based on the information of the part of the content being output.
- the part of the content that is being output is a part of the content that is being output, such as the sound at the playback position in the music content.
- the content providing system 100 extracts a characteristic sound from the voice included in the content, and controls to output vibration corresponding to the extracted characteristic sound together with the voice. Examples of the characteristic sound include a bass attack sound and a snare sound.
- the content providing system 100 outputs a signal in which the frequency of the extracted characteristic sound is changed to a vibrating device to vibrate according to the characteristic sound. Is output.
- the content providing system 100 may analyze the context of the content (for example, the story of a movie and the composition of music) and output according to the context. For example, the content providing system 100 outputs hot / cold air and vibration according to the scene of the movie being played, outputs vibration in the goal scene in the sports video, and is similar to lighting in the live video being played. Each of the lights 13 is turned on by the color. Further, the content providing system 100 may play music by emphasizing the voice and performance of the artist preferred by the user in the music group, based on the hobbies and tastes of the user. This makes it possible to improve the entertainingness of the content.
- the context of the content for example, the story of a movie and the composition of music
- the content providing system 100 may control the output according to the content viewing status (hereinafter, also referred to as viewing status).
- the output control here includes setting the output environment of the content according to the viewing situation.
- additional information according to the viewing situation may be output together with the content.
- the content providing system 100 may control the output based on the situation of the user who views the content.
- the content providing system 100 controls the directivity of the speaker 15 so as to suppress the sound reaching the user (the driver and the person who assists the user in the passenger seat) involved in the driving of the vehicle 10, and the display 11 displays.
- the image is displayed using the screen 12 without any problem. As a result, it is possible to improve the entertainingness of the content while not interfering with the driving of the vehicle 10.
- the content providing system 100 may control the output based on the information of the vehicle 10.
- the content providing system 100 controls output levels such as volume and vibration intensity according to guidance information by car navigation mounted on the vehicle 10 and, when the vehicle 10 is automatically driven, the level of automatic driving. You may.
- the content providing system 100 may lower a blind on the window glass 14 or adjust the display brightness of the content according to the ambient brightness. This makes it possible to improve the entertainingness of the content.
- the content providing system 100 may perform learning based on the state of viewing the content by the user. For example, the content providing system 100 accumulates content, content of content output control, and information indicating the state of viewing by the user (for example, heart rate, body temperature, acceleration of user's body movement, etc.). Then, the content providing system 100 learns and reuses the contents of the output control in which the user is excited (for example, each of the heart rate, the body temperature, and the acceleration is higher than a predetermined threshold value) based on the accumulated information. , Recommend content that users can easily get excited about. This makes it possible to further improve the quality of the user experience.
- the content providing system 100 accumulates content, content of content output control, and information indicating the state of viewing by the user (for example, heart rate, body temperature, acceleration of user's body movement, etc.). Then, the content providing system 100 learns and reuses the contents of the output control in which the user is excited (for example, each of the heart rate, the body temperature, and the acceleration is higher than
- the content providing system 100 blocks ambient light by lowering a blind on the window glass 14, causes a screen 12 to appear, projects an image by a projector, and reproduces sound by 3D sound by a speaker 15. Further, the content providing system 100 vibrates the seat according to the scene of the movie, and outputs cold / hot air and odor. This makes it possible to create an environment like a 4D movie theater in the passenger compartment.
- the content providing system 100 lights each of the lights 13 in the same color as the live venue, and reproduces the live sound source with 3D sound by the speaker 15. This makes it possible to give the user the feeling that the user is at the live venue, surrounded by the light of the chemical lights of other spectators, and can hear songs, performances, and cheers from around 360 degrees. Become. Further, the content providing system 100 can further increase the sense of presence by vibrating the seat and the elbow rest in accordance with the characteristic sounds such as the deep bass and cheers of the live sound source.
- FIG. 3 is a flowchart showing an example of the flow of the content providing process executed in the content providing system 100 according to the present embodiment.
- the acquisition unit 110 acquires the content and the information indicating the viewing status of the content (step S102).
- the control unit 120 sets the content output environment based on the content and the information indicating the viewing status of the content (step S104). For example, the control unit 120 selects a projector that projects on the screen 12 as an output device if the content is a movie, and lowers a blind on the window glass 14 if the surroundings of the vehicle 10 are bright.
- control unit 120 controls the output unit 130 so as to output additional information together with the content based on the content and the information indicating the viewing status of the content (step S106). For example, the control unit 120 outputs the sound corresponding to the image content together with the output of the image content, or outputs the vibration corresponding to the voice content together with the output of the voice content.
- the acquisition unit 110 may have an operation device that is a device for detecting an operation.
- An example of an operating device is a touch panel.
- the control unit 120 may control the output unit 130 so as to output according to the operation detected by the operation device. An example thereof will be described below.
- pinch-in or pinch-out which is an operation for enlarging or reducing the map
- the control unit 120 outputs the output unit 130 so that the tactile presentation and the auditory presentation indicating the pinch-in or pinch-out are performed. May be controlled.
- Pinch-in and pinch-out are operations that change the distance between the contact positions of the operating device and two fingers. More specifically, pinch-in is an operation of shortening the interval, and pinch-out is an operation of lengthening the interval.
- control unit 120 may control the output unit 130 so that the tactile presentation and the auditory presentation indicating the swipe are performed.
- Swipe is an operation of changing the contact position between the operating device and the finger while the operating device is in contact with one finger.
- the list scroll bar is an operation area for moving a range to be displayed in a list which is a list of a plurality of display items.
- the wrist scroll bar includes a linearly arranged body and knobs located in some areas of the body.
- the scroll operation is an operation of moving the position of the knob on the main body. By the scroll operation, the range to be displayed is moved in the list, that is, scrolling is performed.
- the catch operation is an operation of stopping the movement of the knob position on the main body.
- control unit 120 may control the output unit 130 so that the tactile presentation and the auditory presentation indicating the specific place are performed. Examples of specific locations are the sea and rivers.
- control unit 120 may control the output unit 130 so as to present the sounds and vibrations that occur when submerged in water in the sea and rivers.
- control unit 120 may control the output unit 130 so as to present sounds and vibrations that occur when writing characters with a pen. ..
- control unit 120 may control the output unit 130 so that the tactile presentation and the auditory presentation indicating the operation are performed.
- Some data corresponds to the icon display, and the icon display is a display showing the use or function of the corresponding data with a figure or a pattern.
- the control unit 120 When the operation of putting the icon display into a folder such as a data folder or a trash can folder is performed on the operation device, the control unit 120 is presented with a popping sound and vibration generated when an object is dropped into the box.
- the output unit 130 may be controlled.
- the operation of putting the icon display in the folder is, for example, drag and drop.
- Drag-and-drop is an operation to move the operation position to the desired position while keeping the icon display selected after performing the operation to select the icon display, whereby the icon display is the desired position. Move to.
- the control unit 120 may control the output unit 130 so that a tactile presentation and an auditory presentation indicating whether or not the operation on the operating device is effective are performed.
- the rotatable range in which the dial can be rotated and the operation effective range in which the operation input by rotating the dial is effective may be different.
- the control unit 120 performs tactile presentation and auditory presentation indicating that the rotating position of the dial is out of the effective operating range.
- the output unit 130 may be controlled as described above.
- control unit 120 may control the output unit 130 so that the tactile presentation and the auditory presentation indicating the start or end of the application are performed.
- the voice recognition mode is a mode in which a sound collection function that converts a voice that is air vibration into an electrical voice signal and an analysis function that recognizes the content of the voice by analyzing the voice signal are enabled.
- the control unit 120 may control the output unit 130 so that the tactile presentation and the auditory presentation indicating the pin piercing operation are performed.
- the pin stab operation is an operation of setting a pin indicating a specific point such as a favorite point on a map.
- control unit 120 may control the output unit 130 so that the tactile presentation and the auditory presentation indicating the pin selection are performed. Good.
- control unit 120 controls the output unit 130 so as to present the sound and vibration that occur when drawing a picture with a pen or a brush. You may.
- the control unit 120 controls the output unit 130 so that the tactile presentation and the auditory presentation are performed according to the object touched by the hand. May be good.
- the control unit 120 may control the output unit 130 so that the vibration accompanying the walking of the animal and the growl of the animal are presented.
- the control unit 120 controls the output unit 130 so that the tactile sensation when the insect is touched and the wing sound of the insect are presented. You may.
- control unit 120 controls the sound of the live music, the voice of the audience at the concert venue, and the vibration of the audience dancing at the concert venue.
- the output unit 130 may be controlled so as to be presented.
- the control unit 120 controls the output unit 130 so that the tactile presentation and the auditory presentation indicating the locking or unlocking are performed. May be good.
- the operation of locking or unlocking the door of the vehicle can be realized by, for example, an operation from a smartphone or a touch operation on the door handle.
- control unit 120 may control the output unit 130 so as to output the vibration and sound of the alarm at the set time.
- the operating device may be a mouse.
- the control unit 120 controls the output unit 130 so that the tactile presentation and the auditory presentation corresponding to the clicked button are performed. May be good.
- the above is an example of the output according to the operation detected by the operation device.
- the present invention is applicable to any moving body on which a user such as a ship or an airplane is boarded.
- the present invention is applicable to any object that can be used when the user views the content, such as a private room of a toilet, a hotel room, and a sofa, in addition to a moving body.
- control unit 120 may be provided in a device such as a server connected to the acquisition unit 110 and the output unit 130 via a network or the like.
- each device described in the present specification may be realized by using software, hardware, or a combination of software and hardware.
- the programs constituting the software are stored in advance in, for example, a recording medium (non-transitory media) provided inside or outside each device. Then, each program is read into RAM at the time of execution by a computer and executed by a processor such as a CPU.
- the recording medium is, for example, a magnetic disk, an optical disk, a magneto-optical disk, a flash memory, or the like.
- the above computer program may be distributed via a network, for example, without using a recording medium.
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Theoretical Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
【課題】コンテンツのエンタテイメント性をより向上させることが可能な仕組みを提供する。 【解決手段】出力部と、コンテンツに応じた出力を行うよう前記出力部を制御する制御部と、を備えるコンテンツ提供システム。
Description
本発明は、コンテンツ提供システム、出力装置、及び情報処理方法に関する。
近年では、映画、音楽、及びゲームといった多種多様なコンテンツがユーザに提供されている。そして、コンテンツが提供される際のユーザ体験の質を向上させることを目的として、コンテンツのエンタテイメント性を向上させる技術が開発されている。例えば、下記特許文献1では、ユーザにとって好適なスピーカの配置位置を自動的に計算し、その配置位置情報をユーザに提供する技術が開示されている。
しかし、上記特許文献1に開示された技術は、スピーカの配置位置を最適化することでコンテンツのエンタテイメント性を向上させるものに過ぎなかった。コンテンツのエンタテイメント性の向上の余地は未だ残されている。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、コンテンツのエンタテイメント性をより向上させることが可能な仕組みを提供することにある。
上記課題を解決するために、本発明のある観点によれば、出力部と、コンテンツに応じた出力を行うよう前記出力部を制御する制御部と、を備えるコンテンツ提供システムが提供される。
前記制御部は、前記コンテンツに応じた付加的な情報を前記コンテンツと共に出力するよう前記出力部を制御してもよい。
前記制御部は、前記コンテンツのうち出力中の部分の情報に基づいて、前記出力部による出力を制御してもよい。
前記制御部は、コンテンツに含まれる音声から特徴音を抽出し、抽出した前記特徴音に応じた振動を出力するよう前記出力部を制御してもよい。
前記制御部は、前記コンテンツが鑑賞される状況に応じて前記出力部による出力を制御してもよい。
前記制御部は、前記コンテンツを鑑賞するユーザの状況に基づいて、前記出力部による出力を制御してもよい。
前記コンテンツを鑑賞するユーザは移動体に搭乗し、前記制御部は、前記移動体の情報に基づいて、前記出力部による出力を制御してもよい。
前記コンテンツは、第1の空間の態様を示す情報であり、前記制御部は、前記第1の空間とは異なる第2の空間に配置されている機器を前記出力部として制御してもよい。
また、上記課題を解決するために、本発明の別の観点によれば、コンテンツに応じた出力を指示する制御情報に基づく出力を行う出力部、を備える出力装置が提供される。
また、上記課題を解決するために、本発明の別の観点によれば、コンテンツに応じた出力を行うよう出力部を制御すること、を含む情報処理方法が提供される。
以上説明したように本発明によれば、コンテンツのエンタテイメント性をより向上させることが可能な仕組みが提供される。
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
<<1.構成>>
図1は、本発明の一実施形態に係るコンテンツ提供システム100の論理的な構成の一例を示すブロック図である。図1に示すように、コンテンツ提供システム100は、取得部110、制御部120、及び出力部130を含む。
図1は、本発明の一実施形態に係るコンテンツ提供システム100の論理的な構成の一例を示すブロック図である。図1に示すように、コンテンツ提供システム100は、取得部110、制御部120、及び出力部130を含む。
取得部110は、情報を取得する機能を有する。一例として、取得部110は、コンテンツを取得する。コンテンツとは、テキスト、画像(静止画像/動画像)、及び音声等を含む情報である。コンテンツは、これら視覚情報及び聴覚情報の他に又は代えて、触覚情報等の他の感覚器により知覚される情報を含んでいてもよい。コンテンツの具体例としては、映画、スポーツ映像、ゲーム、音楽、足音、本の読み上げ音声、及び広告等が挙げられる。取得部110は、例えば、有線/無線の通信インタフェース、及びUSB(Universal Serial Bus)ポート等の外部インタフェースとして構成され、外部から情報を取得し得る。他の一例として、取得部110は、コンテンツの鑑賞状況を示す情報を取得してもよい。コンテンツの鑑賞状況を示す情報は、例えば、コンテンツの提供を受けるユーザの情報、及びコンテンツが提供される場である車両10の情報等を含む。取得部110は、例えば、生体センサ、慣性センサ、撮像装置及びマイク等の任意のセンサにより構成される。
制御部120は、コンテンツ提供システム100による動作全般を制御する機能を有する。制御部120は、例えばCPU(Central Processing Unit)及びマイクロプロセッサ等の電子回路によって構成される。例えば、制御部120は、コンテンツに応じた出力を指示する制御情報を生成して出力部130に出力することで、出力部130による出力を制御する。制御情報には、例えば、コンテンツ、コンテンツの出力にどの出力装置を使用すべきか、各々の出力装置の出力設定(出力レベル及び指向性の設定等)、及びコンテンツと共に付加的に出力されるべき情報等が含まれる。
出力部130は、ユーザに対して情報を出力する機能を有する。出力部130は、以下に説明する、視覚提示部、聴覚提示部、触覚提示部、味覚提示部、及び嗅覚提示部の少なくともいずれかの、ユーザに知覚される刺激を出力する出力装置として構成される。視覚提示部は、視覚提示を行う(即ち、視覚により知覚される刺激を出力する)機能を有する。視覚提示部は、例えば、ディスプレイ及びプロジェクタ等の画像出力可能な表示装置、LED(Light Emitting Diode)ライト等の発光可能な照明装置、並びに窓のブラインド等の環境光の制御装置により構成される。聴覚提示部は、聴覚提示を行う(即ち、聴覚により知覚される刺激を出力する)機能を有する。聴覚提示部は、スピーカ、イヤホン及び骨伝導イヤホン等の音声出力装置により構成される。触覚提示部は、触覚提示を行う(即ち、触覚により知覚される刺激を出力する)機能を有する。触覚提示部は、例えば、偏心モータ及びボイスコイル等の振動装置、風を発する送風装置、温感/冷感を出力する変温装置、及び電気刺激を出力する装置により構成される。味覚提示部は、味覚提示を行う(即ち、味覚により知覚される刺激を出力する)機能を有する。味覚提示部は、例えば、化学物質を放出する装置、及び味覚器に電気刺激を出力する装置により構成される。嗅覚提示部は、嗅覚提示を行う(即ち、嗅覚により知覚される刺激を出力する)機能を有する。嗅覚刺激部は、例えば香料を放出する装置により構成される。出力部130は、制御部120から出力された制御情報に基づいて出力を行う。
ここで、コンテンツは、第1の空間の態様(音、光景、温度、及び振動等)を示す情報であり、出力部130は、第1の空間とは異なる第2の空間に配置される機器である。第2の空間は、第1の空間と物理的に異なる空間であってもよい。例えば、出力部130は、遠隔地で作成されたコンテンツを出力し得る。第2の空間は、第1の空間と時間的に異なる空間であってもよい。例えば、出力部130は、過去に作成されたコンテンツを出力し得る。もちろん、第2の空間は、第1の空間と物理的に及び時間的に異なる空間であってもよい。
コンテンツ提供システム100の適用先は、多様に考えられる。以下では、一例として、コンテンツ提供システム100が車両に適用される例を説明する。この場合、コンテンツを鑑賞するユーザは、車両に搭乗する人である。
図2は、本実施形態に係るコンテンツ提供システム100の適用例を説明するための図である。図2に示した例では、コンテンツ提供システム100が車両10に適用されている。前部座席に設けられたディスプレイ11、後部座席に設けられ未使用時には収納可能なスクリーン12に投影する図示しないプロジェクタ、及び車室の内壁に全座席を囲むように設けられた照明13(13A~13E)は、視覚提示部の一例である。また、窓ガラス14(14A~14C)に、ブラインドを上げ下げする機構、及び電流を流すことで遮光可能な液晶膜フィルム等の環境光の制御装置が、視覚提示部として設けられる。車室の内壁に全座席を囲むように設けられたスピーカ15(15A~15E)は、聴覚提示部の一例である。座席の座面、背もたれ部分、及びひじ掛け部分、シートベルト、ハンドル、並びに床面等のユーザに接し得る部分に、振動装置及び変温装置が触覚提示部として設けられ得る。また、AC(AIR CONDITIONER)も温冷及び風を出力する触覚提示部の一例である。なお、コンテンツ提供システム100は、単一の装置(即ち、車両10)により構成されてもよいが、複数の装置により構成されてもよい。例えば、シャツに設けられた端末及びスマートウォッチ等のウェアラブルデバイス、ユーザの体に触れるクッション、スマートフォン等の端末装置、並びに信号機等の車外の装置が、出力部130として機能してもよい。一方、取得部110及び制御部120は、例えば図示しないECU(Electronic Control Unit)として構成される。
<<2.技術的特徴>>
(1)コンテンツに応じた出力制御
コンテンツ提供システム100は、コンテンツに応じた出力を行うよう出力部130を制御する。ここでの出力制御は、コンテンツの出力環境を設定すること、及びコンテンツに応じた付加的な情報をコンテンツと共に出力するよう制御することを含む。前者の一例として、コンテンツ提供システム100は、コンテンツに応じて、コンテンツの出力を行う出力装置を選択したり、出力レベル(例えば、表示輝度及び音量等)を調節したりする。これにより、例えばコンテンツが映画であればスクリーン12が下ろされて使用される等、コンテンツに適した出力環境を構築して、コンテンツのエンタテイメント性を向上させることができる。後者の一例として、コンテンツ提供システム100は、画像コンテンツの出力と共に画像コンテンツに応じた音声を出力したり、音声コンテンツの出力と共に音声コンテンツに応じた振動を出力したりする。即ち、付加的な情報は、コンテンツが画像コンテンツである場合、画像コンテンツに応じた音声であってもよい。また、付加的な情報は、コンテンツが音声コンテンツである場合、音声コンテンツに応じた振動であってもよい。コンテンツと共に付加的な情報の出力を行うことで、コンテンツの鑑賞体験を補強し、臨場感及び没入感といったコンテンツのエンタテイメント性を向上させることができる。
(1)コンテンツに応じた出力制御
コンテンツ提供システム100は、コンテンツに応じた出力を行うよう出力部130を制御する。ここでの出力制御は、コンテンツの出力環境を設定すること、及びコンテンツに応じた付加的な情報をコンテンツと共に出力するよう制御することを含む。前者の一例として、コンテンツ提供システム100は、コンテンツに応じて、コンテンツの出力を行う出力装置を選択したり、出力レベル(例えば、表示輝度及び音量等)を調節したりする。これにより、例えばコンテンツが映画であればスクリーン12が下ろされて使用される等、コンテンツに適した出力環境を構築して、コンテンツのエンタテイメント性を向上させることができる。後者の一例として、コンテンツ提供システム100は、画像コンテンツの出力と共に画像コンテンツに応じた音声を出力したり、音声コンテンツの出力と共に音声コンテンツに応じた振動を出力したりする。即ち、付加的な情報は、コンテンツが画像コンテンツである場合、画像コンテンツに応じた音声であってもよい。また、付加的な情報は、コンテンツが音声コンテンツである場合、音声コンテンツに応じた振動であってもよい。コンテンツと共に付加的な情報の出力を行うことで、コンテンツの鑑賞体験を補強し、臨場感及び没入感といったコンテンツのエンタテイメント性を向上させることができる。
コンテンツ提供システム100は、コンテンツの属性情報に基づいて、コンテンツの出力を制御してもよい。コンテンツの属性情報としては、例えば、映画及び音楽等のコンテンツの種類、映画のジャンル、出演者、音楽のテンポ、及びスポーツ映像に登場するチーム等が挙げられる。例えば、コンテンツ提供システム100は、スポーツ映像に登場するチームのチームカラーで照明13を点灯させたり、音楽のテンポに応じて照明13を点滅させたりする。これにより、コンテンツの臨場感を向上させることが可能となる。なお、コンテンツの属性情報は、コンテンツに付随して取得されてもよいし、別途外部DB(Data Base)等から取得されてもよい。
また、コンテンツ提供システム100は、コンテンツのうち出力中の部分の情報に基づいて、コンテンツの出力を制御してもよい。コンテンツのうち出力中の部分とは、例えば、音楽コンテンツにおける再生位置の音等の、コンテンツ全体における出力中の一部分である。一例として、コンテンツ提供システム100は、コンテンツに含まれる音声から特徴音を抽出し、抽出した特徴音に応じた振動を、音声と共に出力するよう制御する。特徴音としては、ベースのアタック音、及びスネアの音等が挙げられ、コンテンツ提供システム100は、抽出した特徴音の周波数を変更した信号を振動装置に出力することで、特徴音に応じた振動を出力させる。これにより、小さい音量で再生される場合、及び十分な音響環境がない場合であっても、臨場感を向上させ、ユーザに迫力を感じさせることが可能となる。また、聴覚障碍者であっても音楽を気軽に楽しむことが可能となる。他の一例として、コンテンツ提供システム100は、コンテンツのコンテキスト(例えば映画のストーリー及び音楽の構成等)を解析し、コンテキストに応じた出力を行ってもよい。例えば、コンテンツ提供システム100は、再生中の映画のシーンに応じた温風/冷風及び振動を出力したり、スポーツ映像におけるゴールシーンでは振動を出力したり、再生中のライブ映像における照明と同様の色で照明13の各々を点灯させたりする。また、コンテンツ提供システム100は、ユーザの趣味嗜好にさらに基づいて、音楽グループのうちユーザが好むアーティストの声及び演奏を強調して音楽を再生してもよい。これにより、コンテンツのエンタテイメント性を向上させることが可能となる。
(2)コンテンツの鑑賞状況に応じた出力制御
コンテンツ提供システム100は、コンテンツが鑑賞される状況(以下、鑑賞状況とも称する)に応じて出力を制御してもよい。ここでの出力制御は、鑑賞状況に応じてコンテンツの出力環境を設定することを含む。他に、鑑賞状況に応じた付加的な情報がコンテンツと共に出力されてもよい。鑑賞状況に応じて出力が制御されることで、コンテンツの鑑賞体験をより適切に補強することが可能となる。
コンテンツ提供システム100は、コンテンツが鑑賞される状況(以下、鑑賞状況とも称する)に応じて出力を制御してもよい。ここでの出力制御は、鑑賞状況に応じてコンテンツの出力環境を設定することを含む。他に、鑑賞状況に応じた付加的な情報がコンテンツと共に出力されてもよい。鑑賞状況に応じて出力が制御されることで、コンテンツの鑑賞体験をより適切に補強することが可能となる。
コンテンツ提供システム100は、コンテンツを鑑賞するユーザの状況に基づいて、出力を制御してもよい。一例として、コンテンツ提供システム100は、車両10の運転に関与するユーザ(ドライバー及び助手席でその補助を行う者)に到達する音声が抑制されるようスピーカ15の指向性を制御し、ディスプレイ11ではなくスクリーン12を用いて画像表示を行う。これにより、車両10の運転を邪魔しないようにしつつも、コンテンツのエンタテイメント性が向上させることが可能となる。
また、コンテンツ提供システム100は、車両10の情報に基づいて、出力を制御してもよい。一例として、コンテンツ提供システム100は、車両10に搭載されたカーナビゲーションによる案内情報、並びに車両10が自動運転される場合には自動運転のレベルに応じて、音量及び振動強度等の出力レベルを制御してもよい。これにより、車両10の安全性を担保しつつも、コンテンツのエンタテイメント性を向上させることが可能となる。他の一例として、コンテンツ提供システム100は、周囲の明るさに合わせて窓ガラス14にブラインドを下ろしたりコンテンツの表示輝度を調整したりしてもよい。これにより、コンテンツのエンタテイメント性を向上させることが可能となる。
(3)学習
コンテンツ提供システム100は、ユーザによるコンテンツの鑑賞の様子に基づいて学習を行ってもよい。例えば、コンテンツ提供システム100は、コンテンツ、コンテンツの出力制御の内容、及びユーザの鑑賞の様子を示す情報(例えば、心拍数、体温、ユーザの体の動きの加速度等)を蓄積する。そして、コンテンツ提供システム100は、蓄積した情報に基づいて、ユーザが盛り上がる(例えば、心拍数、体温、及び加速度の各々が所定の閾値よりも高い)出力制御の内容を学習して再利用したり、ユーザが盛り上がりやすいコンテンツを推薦したりする。これにより、ユーザ体験の質をさらに向上させることが可能となる。
コンテンツ提供システム100は、ユーザによるコンテンツの鑑賞の様子に基づいて学習を行ってもよい。例えば、コンテンツ提供システム100は、コンテンツ、コンテンツの出力制御の内容、及びユーザの鑑賞の様子を示す情報(例えば、心拍数、体温、ユーザの体の動きの加速度等)を蓄積する。そして、コンテンツ提供システム100は、蓄積した情報に基づいて、ユーザが盛り上がる(例えば、心拍数、体温、及び加速度の各々が所定の閾値よりも高い)出力制御の内容を学習して再利用したり、ユーザが盛り上がりやすいコンテンツを推薦したりする。これにより、ユーザ体験の質をさらに向上させることが可能となる。
(4)具体例
第1の具体例として、コンテンツが映画である場合について説明する。コンテンツ提供システム100は、窓ガラス14にブラインドを下ろすことで環境光を遮断し、スクリーン12を登場させてプロジェクタにより映像を投影し、スピーカ15により3D音響で音声を再生する。さらに、コンテンツ提供システム100は、映画のシーンに合わせて座席を振動させ、冷風/温風、及びにおいを出力する。これにより、車室内を4D映画館のような環境にすることが可能となる。
第1の具体例として、コンテンツが映画である場合について説明する。コンテンツ提供システム100は、窓ガラス14にブラインドを下ろすことで環境光を遮断し、スクリーン12を登場させてプロジェクタにより映像を投影し、スピーカ15により3D音響で音声を再生する。さらに、コンテンツ提供システム100は、映画のシーンに合わせて座席を振動させ、冷風/温風、及びにおいを出力する。これにより、車室内を4D映画館のような環境にすることが可能となる。
第2の具体例として、コンテンツがライブ音源である場合について説明する。コンテンツ提供システム100は、ライブ会場と同様の色で照明13の各々を点灯させ、スピーカ15により3D音響でライブ音源を再生する。これにより、あらかもユーザがライブ会場にいて、他の観客が持つケミカルライトの光に囲まれ、360度周囲から歌、演奏及び歓声が聞こえてくるような感覚を、ユーザに与えることが可能となる。さらに、コンテンツ提供システム100は、ライブ音源の重低音及び歓声等の特徴音に合わせて座席及び肘置きを振動させることで、より臨場感を増すことができる。
(5)処理の流れ
図3は、本実施形態に係るコンテンツ提供システム100において実行されるコンテンツ提供処理の流れの一例を示すフローチャートである。図3に示すように、まず、取得部110は、コンテンツ及びコンテンツの鑑賞状況を示す情報を取得する(ステップS102)。次いで、制御部120は、コンテンツ及びコンテンツの鑑賞状況を示す情報に基づいて、コンテンツの出力環境を設定する(ステップS104)。例えば、制御部120は、コンテンツが映画であれば出力装置としてスクリーン12に投影するプロジェクタを選択し、車両10の周囲が明るければ窓ガラス14にブラインドを下ろす。そして、制御部120は、コンテンツ及びコンテンツの鑑賞状況を示す情報に基づいて、付加的な情報をコンテンツと共に出力するよう出力部130を制御する(ステップS106)。例えば、制御部120は、画像コンテンツの出力と共に画像コンテンツに応じた音声を出力したり、音声コンテンツの出力と共に音声コンテンツに応じた振動を出力したりする。
図3は、本実施形態に係るコンテンツ提供システム100において実行されるコンテンツ提供処理の流れの一例を示すフローチャートである。図3に示すように、まず、取得部110は、コンテンツ及びコンテンツの鑑賞状況を示す情報を取得する(ステップS102)。次いで、制御部120は、コンテンツ及びコンテンツの鑑賞状況を示す情報に基づいて、コンテンツの出力環境を設定する(ステップS104)。例えば、制御部120は、コンテンツが映画であれば出力装置としてスクリーン12に投影するプロジェクタを選択し、車両10の周囲が明るければ窓ガラス14にブラインドを下ろす。そして、制御部120は、コンテンツ及びコンテンツの鑑賞状況を示す情報に基づいて、付加的な情報をコンテンツと共に出力するよう出力部130を制御する(ステップS106)。例えば、制御部120は、画像コンテンツの出力と共に画像コンテンツに応じた音声を出力したり、音声コンテンツの出力と共に音声コンテンツに応じた振動を出力したりする。
<<3.補足>>
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
例えば、取得部110は、操作を検出するデバイスである操作デバイスを有していてもよい。操作デバイスの一例は、タッチパネルである。そして、制御部120は、操作デバイスにより検出された操作に応じた出力を行うように出力部130を制御してもよい。以下、その一例を説明する。
地図を拡大又は縮小するための操作である、ピンチイン又はピンチアウトが操作デバイスに対し行われた場合、制御部120は、ピンチイン又はピンチアウトを示す触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。ピンチイン及びピンチアウトは、操作デバイスと2本の指との接触位置の間隔を変化させる操作である。より具体的には、ピンチインは上記間隔を短くさせる操作であり、ピンチアウトは上記間隔を長くさせる操作である。
スワイプが操作デバイスに対して行われた場合、制御部120は、スワイプを示す触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。スワイプは、操作デバイスに1本の指を接触させた状態で操作デバイスと当該指の接触位置を変化させる操作である。
リストスクロールバーのスクロール操作又はキャッチ操作が操作デバイスに対し行われた場合、制御部120は、スクロール操作又はキャッチ操作を示す触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。また、リストスクロールバーから指を離す操作が操作デバイスに入力された場合、制御部120は、指が離されたことに応じた聴覚提示が行われるように出力部130を制御してもよい。リストスクロールバーは、複数の表示項目の一覧であるリスト内で表示対象となる範囲を移動させるための操作領域である。リストスクロールバーは、直線状に配置された本体と、本体の一部の領域に位置するノブを含む。スクロール操作は、本体におけるノブの位置を移動させる操作である。スクロール操作により、リスト内で表示対象となる範囲の移動が行われる、すなわち、スクロールが行われる。キャッチ操作は、本体におけるノブの位置の移動を停止させる操作である。
地図上の特定の場所を選択する操作が操作デバイスに対し行われた場合、制御部120は、特定の場所を示す触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。特定の場所の一例は、海及び川である。例えば、制御部120は、海及び川で水に浸かっている時に生じるような音及び振動が提示されるように出力部130を制御してもよい。
文字を入力する操作が操作デバイスに対して行われた際、制御部120は、ペンで文字を書いている時に生じるような音及び振動が提示されるように出力部130を制御してもよい。
アイコン表示を移動する操作が操作デバイスに対して行われた際、制御部120は、当該操作を示す触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。アイコン表示には何かしらのデータが対応しており、アイコン表示は、対応しているデータの用途又は機能などを図又は絵柄で示す表示である。
アイコン表示をデータフォルダ又はゴミ箱フォルダなどのフォルダに入れる操作が操作デバイスに対して行われた際、制御部120は、物を箱に落とし入れた時に生じるポトンというような音及び振動が提示されるように出力部130を制御してもよい。なお、アイコン表示をフォルダに入れる操作は例えばドラッグアンドドロップである。ドラッグアンドドロップは、アイコン表示を選択する操作を行った後に、アイコン表示が選択されている状態を保ったまま操作位置を目的の位置まで移動させる操作であり、これにより、アイコン表示が目的の位置に移動する。
操作デバイスへの操作が行われた際に、制御部120は、当該操作デバイスへの操作が有効か否かを示す触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。例えば、ダイヤル式の操作デバイスにおいて、ダイヤルが回転可能な角度範囲である回転可能範囲と、ダイヤルの回転による操作入力が有効な角度範囲である操作有効範囲は異なることがある。回転可能範囲が操作有効範囲より広く、ダイヤルの回転位置が操作有効範囲を出た際、制御部120は、ダイヤルの回転位置が操作有効範囲を出たことを示す触覚提示および聴覚提示が行われるように出力部130を制御してもよい。
アプリケーションを起動又は終了する操作が操作デバイスに対して行われた際、制御部120は、アプリケーションの起動又は終了を示す触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。
音声認識モードを開始又は終了する操作が操作デバイスに対して行われた際、制御部120は、音声認識モードの開始又は終了を示す触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。音声認識モードは、空気振動である音声を電気的な音声信号に変換する収音機能、及び音声信号を解析することにより音声の内容を認識する解析機能が有効化されているモードである。
地図へのピン刺し操作が操作デバイスに対して行われた際、制御部120は、ピン刺し操作を示す触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。ピン刺し操作は、お気に入りポイントのように特定のポイントを示すピンを、地図上に設定する操作である。
地図上に設定されたピンを選択する操作が操作デバイスに対して行われた際、制御部120は、ピンの選択を示す触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。
絵を描画する操作が操作デバイスに対して行われた際、制御部120は、ペン又は筆で絵を描画している際に生じるような音及び振動が提示されるように出力部130を制御してもよい。
特定の物体に手で触れる操作が操作デバイスに対して行われた際、制御部120は、手で触れられた物体に応じた触覚提示及び聴覚提示が行われるように出力部130を制御してもよい。一例として、動物園の手すりが手で持たれた場合、制御部120は、動物の歩行に伴う振動、及び動物のうなり声が提示されるように出力部130を制御してもよい。他の一例として、絵本に描かれた虫の絵が手で触れられた場合、制御部120は、虫を触ったときの触覚、及び虫の羽音が提示されるように出力部130を制御してもよい。
コンサート会場で行われる音楽ライブを視聴するための操作が操作デバイスに対して行われた際、制御部120は、音楽ライブの音、コンサート会場にいる観客の声、及びコンサート会場で踊る観客の振動が提示されるように出力部130を制御してもよい。
車両のドアの鍵を施錠又は解錠する操作が操作デバイスに対して行われた際、制御部120は、施錠又は解錠を示す触覚提示及び聴覚提示が行われるよう出力部130を制御してもよい。車両のドアの鍵を施錠又は解錠する操作は、例えば、スマートフォンからの操作、またはドアハンドルへのタッチ操作などにより実現され得る。
アラームを設定する操作が操作デバイスに対して行われた場合、制御部120は、設定された時刻においてアラームの振動及び音を出力するように出力部130を制御してもよい。
操作デバイスはマウスであってもよい。マウスに設けられた複数のボタンのうちのいずれかのボタンがクリックされた際、制御部120は、クリックされたボタンに応じた触覚提示および聴覚提示が行われるように出力部130を制御してもよい。
以上、操作デバイスにより検出された操作に応じた出力の一例を説明した。
例えば、上記実施形態では、本発明が車両に適用される例を説明したが、本発明の適用先はこれに限定されない。本発明は、船舶及び飛行機等のユーザが搭乗する任意の移動体に適用可能である。さらには、本発明は、移動体以外にも、トイレの個室、ホテルの部屋及びソファ等の、ユーザがコンテンツを鑑賞する際に使用し得る任意の物体に適用可能である。
本明細書において説明した各装置は、単独の情報処理装置として実現されてもよく、一部または全部が別々の情報処理装置として実現されても良い。例えば、図1に示したコンテンツ提供システム100の機能構成例のうち、制御部120が取得部110及び出力部130とネットワーク等で接続されたサーバ等の装置に備えられていてもよい。
なお、本明細書において説明した各装置による一連の処理は、ソフトウェア、ハードウェア、及びソフトウェアとハードウェアとの組合せのいずれを用いて実現されてもよい。ソフトウェアを構成するプログラムは、例えば、各装置の内部又は外部に設けられる記録媒体(非一時的な媒体:non-transitory media)に予め格納される。そして、各プログラムは、例えば、コンピュータによる実行時にRAMに読み込まれ、CPUなどのプロセッサにより実行される。上記記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリ等である。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信されてもよい。
また、本明細書においてフローチャート及びシーケンス図を用いて説明した処理は、必ずしも図示された順序で実行されなくてもよい。いくつかの処理ステップは、並列的に実行されてもよい。また、追加的な処理ステップが採用されてもよく、一部の処理ステップが省略されてもよい。
10:車両、11:ディスプレイ、12:スクリーン、13:照明、14:窓ガラス、15:スピーカ、100:コンテンツ提供システム、110:取得部、120:制御部、130:出力部
Claims (11)
- 出力部と、
コンテンツに応じた出力を行うよう前記出力部を制御する制御部と、
を備えるコンテンツ提供システム。 - 前記制御部は、前記コンテンツに応じた付加的な情報を前記コンテンツと共に出力するよう前記出力部を制御する、請求項1に記載のコンテンツ提供システム。
- 前記制御部は、前記コンテンツのうち出力中の部分の情報に基づいて、前記出力部による出力を制御する、請求項1又は2に記載のコンテンツ提供システム。
- 前記制御部は、コンテンツに含まれる音声から特徴音を抽出し、抽出した前記特徴音に応じた振動を出力するよう前記出力部を制御する、請求項1~3のいずれか一項に記載のコンテンツ提供システム。
- 前記制御部は、前記コンテンツが鑑賞される状況に応じて前記出力部による出力を制御する、請求項1~4のいずれか一項に記載のコンテンツ提供システム。
- 前記制御部は、前記コンテンツを鑑賞するユーザの状況に基づいて、前記出力部による出力を制御する、請求項5に記載のコンテンツ提供システム。
- 前記コンテンツを鑑賞するユーザは移動体に搭乗し、
前記制御部は、前記移動体の情報に基づいて、前記出力部による出力を制御する、請求項5又は6に記載のコンテンツ提供システム。 - 前記制御部は、操作を検出するデバイスである操作デバイスにより検出された操作に応じた出力を行うように前記出力部を制御する、請求項1~7のいずれか一項に記載のコンテンツ提供システム。
- 前記コンテンツは、第1の空間の態様を示す情報であり、
前記制御部は、前記第1の空間とは異なる第2の空間に配置されている機器を前記出力部として制御する、請求項1~8のいずれか一項に記載のコンテンツ提供システム。 - コンテンツに応じた出力を指示する制御情報に基づく出力を行う出力部、
を備える出力装置。 - コンテンツに応じた出力を行うよう出力部を制御すること、
を含む情報処理方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP20810727.6A EP3940542A1 (en) | 2019-05-17 | 2020-04-27 | Content-presentation system, output device, and information processing method |
US17/607,681 US20220229629A1 (en) | 2019-05-17 | 2020-04-27 | Content providing system, output device, and information processing method |
JP2021520678A JPWO2020235307A1 (ja) | 2019-05-17 | 2020-04-27 |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019093983 | 2019-05-17 | ||
JP2019-093983 | 2019-05-17 | ||
JP2020-068559 | 2020-04-06 | ||
JP2020068559 | 2020-04-06 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2020235307A1 true WO2020235307A1 (ja) | 2020-11-26 |
Family
ID=73458408
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2020/017885 WO2020235307A1 (ja) | 2019-05-17 | 2020-04-27 | コンテンツ提供システム、出力装置、及び情報処理方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20220229629A1 (ja) |
EP (1) | EP3940542A1 (ja) |
JP (1) | JPWO2020235307A1 (ja) |
WO (1) | WO2020235307A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114852009A (zh) * | 2021-02-04 | 2022-08-05 | 本田技研工业株式会社 | 车辆用安全带装置 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020235303A1 (ja) * | 2019-05-17 | 2020-11-26 | 株式会社東海理化電機製作所 | 制御装置および提示システム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005280580A (ja) * | 2004-03-30 | 2005-10-13 | Toshiba Corp | 車載音響機器の制御装置 |
JP2007318371A (ja) * | 2006-05-25 | 2007-12-06 | Matsushita Electric Ind Co Ltd | 車載オーディオシステム |
JP2010109485A (ja) * | 2008-10-28 | 2010-05-13 | Kenwood Corp | 車載装置及びコンテンツ再生方法 |
JP2016197824A (ja) * | 2015-04-03 | 2016-11-24 | シャープ株式会社 | 機器制御装置、ウェアラブル機器、圧力体感システム、機器制御方法、および機器制御プログラム |
WO2017110882A1 (ja) | 2015-12-21 | 2017-06-29 | シャープ株式会社 | スピーカの配置位置提示装置 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8984568B2 (en) * | 2013-03-13 | 2015-03-17 | Echostar Technologies L.L.C. | Enhanced experience from standard program content |
US9652945B2 (en) * | 2013-09-06 | 2017-05-16 | Immersion Corporation | Method and system for providing haptic effects based on information complementary to multimedia content |
EP3522572A1 (en) * | 2015-05-14 | 2019-08-07 | Dolby Laboratories Licensing Corp. | Generation and playback of near-field audio content |
US10051318B2 (en) * | 2015-06-30 | 2018-08-14 | Nbcuniversal Media Llc | Systems and methods for providing immersive media content |
US11416940B1 (en) * | 2015-07-06 | 2022-08-16 | Cherith Brook, Llc | Vehicle with automated insurance payment apparatus |
US10152296B2 (en) * | 2016-12-28 | 2018-12-11 | Harman International Industries, Incorporated | Apparatus and method for providing a personalized bass tactile output associated with an audio signal |
DE102017205079A1 (de) * | 2017-03-27 | 2018-09-27 | Ford Global Technologies, Llc | Unterhaltungsvorrichtung für ein selbstfahrendes Kraftfahrzeug |
JP6805943B2 (ja) * | 2017-04-07 | 2020-12-23 | トヨタ自動車株式会社 | 車両用再生音提供装置 |
US10554435B2 (en) * | 2017-08-14 | 2020-02-04 | Arm Limited | Systems and methods for implementing digital content effects |
US11483611B2 (en) * | 2018-11-19 | 2022-10-25 | Roku, Inc. | Non-television experience triggers |
-
2020
- 2020-04-27 WO PCT/JP2020/017885 patent/WO2020235307A1/ja unknown
- 2020-04-27 JP JP2021520678A patent/JPWO2020235307A1/ja active Pending
- 2020-04-27 US US17/607,681 patent/US20220229629A1/en not_active Abandoned
- 2020-04-27 EP EP20810727.6A patent/EP3940542A1/en not_active Withdrawn
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005280580A (ja) * | 2004-03-30 | 2005-10-13 | Toshiba Corp | 車載音響機器の制御装置 |
JP2007318371A (ja) * | 2006-05-25 | 2007-12-06 | Matsushita Electric Ind Co Ltd | 車載オーディオシステム |
JP2010109485A (ja) * | 2008-10-28 | 2010-05-13 | Kenwood Corp | 車載装置及びコンテンツ再生方法 |
JP2016197824A (ja) * | 2015-04-03 | 2016-11-24 | シャープ株式会社 | 機器制御装置、ウェアラブル機器、圧力体感システム、機器制御方法、および機器制御プログラム |
WO2017110882A1 (ja) | 2015-12-21 | 2017-06-29 | シャープ株式会社 | スピーカの配置位置提示装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114852009A (zh) * | 2021-02-04 | 2022-08-05 | 本田技研工业株式会社 | 车辆用安全带装置 |
JP2022119571A (ja) * | 2021-02-04 | 2022-08-17 | 本田技研工業株式会社 | 車両用シートベルト装置 |
JP7229283B2 (ja) | 2021-02-04 | 2023-02-27 | 本田技研工業株式会社 | 車両用シートベルト装置 |
Also Published As
Publication number | Publication date |
---|---|
US20220229629A1 (en) | 2022-07-21 |
EP3940542A1 (en) | 2022-01-19 |
JPWO2020235307A1 (ja) | 2020-11-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5091857B2 (ja) | システム制御方法 | |
JP6504165B2 (ja) | 情報処理装置及び情報処理方法並びにプログラム | |
US20200035026A1 (en) | Techniques for immersive virtual reality experiences | |
WO2020235307A1 (ja) | コンテンツ提供システム、出力装置、及び情報処理方法 | |
JPWO2017098772A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP2004525735A (ja) | リアルワールド演出システムおよび言語 | |
US20100062860A1 (en) | Operation of a set of devices | |
WO2019188076A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
CN112839254A (zh) | 显示设备与内容显示方法 | |
US20220291747A1 (en) | Input system, presentation device, and control method | |
CN112287129A (zh) | 音频数据的处理方法、装置及电子设备 | |
JP6523038B2 (ja) | 感覚提示装置 | |
US20210409876A1 (en) | Method for Adjusting a Hearing Aid Device and System for Carrying Out the Method | |
CN110915231A (zh) | 信息处理装置、信息处理方法和程序 | |
US20220353457A1 (en) | Information processing apparatus, information processing method, and program | |
JP2015069043A (ja) | カラオケ装置 | |
JP6139214B2 (ja) | 情報端末、情報端末用プログラム及びカラオケ装置 | |
CN113407146A (zh) | 终端语音交互方法、***以及相应的终端设备 | |
KR20130045128A (ko) | 개인화 컨텐츠 제작 방법 및 장치 | |
JPWO2020158440A1 (ja) | 情報処理装置、情報処理方法、及びプログラムを記載した記録媒体 | |
WO2023281820A1 (ja) | 情報処理装置、情報処理方法、記憶媒体 | |
WO2023042423A1 (ja) | 情報処理装置、情報処理方法、および情報処理プログラム | |
JP2017134713A (ja) | 電子機器、電子機器の制御プログラム | |
WO2008119004A1 (en) | Systems and methods for creating displays | |
Houwen | Mapping moving media: film and video |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 20810727 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2021520678 Country of ref document: JP Kind code of ref document: A |
|
ENP | Entry into the national phase |
Ref document number: 2020810727 Country of ref document: EP Effective date: 20211014 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |