WO2016013409A1 - 制御装置、制御方法、プログラム、および制御システム - Google Patents

制御装置、制御方法、プログラム、および制御システム Download PDF

Info

Publication number
WO2016013409A1
WO2016013409A1 PCT/JP2015/069826 JP2015069826W WO2016013409A1 WO 2016013409 A1 WO2016013409 A1 WO 2016013409A1 JP 2015069826 W JP2015069826 W JP 2015069826W WO 2016013409 A1 WO2016013409 A1 WO 2016013409A1
Authority
WO
WIPO (PCT)
Prior art keywords
devices
remaining
recording
operable time
camera
Prior art date
Application number
PCT/JP2015/069826
Other languages
English (en)
French (fr)
Inventor
寛之 梅尾
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to JP2016535871A priority Critical patent/JP6610961B2/ja
Priority to US15/323,456 priority patent/US10070059B2/en
Publication of WO2016013409A1 publication Critical patent/WO2016013409A1/ja
Priority to US16/103,476 priority patent/US10362227B2/en

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/634Warning indications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/65Control of camera operation in relation to power supply
    • H04N23/651Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/7921Processing of colour television signals in connection with recording for more than one processing mode

Definitions

  • the present technology relates to a control device, a control method, a program, and a control system, and more particularly to a control device, a control method, a program, and a control system that can improve the operation of a plurality of devices.
  • the present technology has been made in view of such a situation, and makes it possible to improve the operation of a plurality of apparatuses by control according to individual situations.
  • a control device includes an acquisition unit that acquires information about remaining operable time of a plurality of devices, and a plurality of devices based on information about the remaining operable time of each of the plurality of devices. And a setting unit for setting an operation mode of at least one apparatus.
  • the device has a recording function of capturing and recording a moving image
  • the setting unit includes at least one of the plurality of devices based on information about the remaining operable time of each of the devices being recorded.
  • the recording mode of the device can be set.
  • the acquisition unit is configured to acquire a remaining battery level of the plurality of devices as information regarding the remaining operable time of the plurality of devices, and the setting unit is configured to use the remaining battery level of each of the devices being recorded. Then, the remaining operable time of each of the devices can be calculated, and the recording mode of at least one of the plurality of devices can be set based on the calculated remaining operable time of each of the devices. .
  • the setting unit calculates a difference between the remaining operable time of one of the plurality of devices as a main and the remaining operable time of another device, and according to the calculated difference, The recording mode of another device can be set.
  • the setting unit is configured to calculate a difference between the remaining operable time and the remaining recording time of the one device and the remaining operable time of the other device, and according to the calculated difference, The recording mode of the other device can be set.
  • the setting unit can set the recording mode in which the power consumption is further suppressed as the difference is larger for the other device.
  • the setting unit can cause the one device to determine the device having the largest remaining battery power among the plurality of devices.
  • the setting unit can determine the one device based on the posture or position of each device.
  • the setting unit can determine the one device based on the content of the moving image recorded by each of the devices.
  • the setting unit can dynamically determine the one device.
  • the display control unit can be controlled to further display the remaining battery level of each device on the display screen.
  • the display control unit can be controlled to display the moving image recorded by the one device different from the moving image recorded by the other device.
  • the display control unit can be controlled to display information indicating the recording mode set in the other device on a display area of a moving image recorded by the other device.
  • the display control unit can be controlled to highlight a display area of a moving image recorded by the other device whose recording mode has been changed.
  • the display control unit displays a moving image recorded by the other device in which the remaining battery level becomes 0 before the remaining operable time of the first device elapses. It can be controlled to display a warning for prompting replacement of the battery on the area.
  • the acquisition unit is configured to acquire the remaining operable time calculated using the remaining battery power in each of the plurality of devices as information regarding the remaining operable time of the plurality of devices
  • the setting unit is configured to acquire The recording mode of at least one of the plurality of devices can be set based on the remaining operable time of each of the devices.
  • the control device has a recording function of capturing and recording a moving image
  • the setting unit includes the plurality of devices and the control device based on the control device itself during recording and the remaining battery power of each of the devices.
  • the recording mode of at least one of the devices can be set.
  • the control device acquires information on the remaining operable time of the plurality of devices, and based on the information on the remaining operable time of each of the plurality of devices, Setting the operating mode of at least one of the devices.
  • a program acquires information related to the remaining operable time of a plurality of devices, and based on the information related to the remaining operable time of each of the plurality of devices, at least one of the plurality of devices
  • a computer is caused to execute a process including a step of setting an operation mode of the apparatus.
  • a control system includes a plurality of devices, an acquisition unit that acquires information regarding remaining operable time of the plurality of devices, and the plurality of devices based on the remaining battery levels of the plurality of devices. And a control unit having a setting unit that sets an operation mode of at least one of the devices.
  • information on the remaining operable time of the plurality of devices is acquired, and an operation mode of at least one of the plurality of devices is based on the information on the remaining operable time of each of the plurality of devices. Is set.
  • FIG. 1 It is a figure which shows the structural example of the multiview video recording system to which this technique is applied. It is a figure which shows the example of a display of multiview video content. It is a figure which shows the example of a display of multiview video content. It is a block diagram which shows the hardware structural example of a controller. It is a block diagram which shows the hardware structural example of a camera. It is a block diagram which shows the function structural example of a multiview video recording system. It is a flowchart explaining the recording process of a multiview video. It is a flowchart explaining the recording process of a multiview video. It is a flowchart explaining the recording process of a multiview video. It is a flowchart explaining the example of a recording mode setting process. It is a figure explaining the relationship between a battery remaining charge and remaining operation possible time.
  • FIG. 1 shows a configuration example of a multi-view video recording system to which the present technology is applied.
  • the multi-view video recording system 10 includes a controller 11 as a control device of the present technology and four cameras 12-1 to 12-4.
  • the number of cameras is not limited to four.
  • the controller 11 is configured as a wristwatch and is worn on a user's arm or the like.
  • the camera 11 performs wireless communication such as Wi-Fi (Wireless Fidelity) (registered trademark).
  • Wi-Fi Wireless Fidelity
  • the operations of 12-1 to 12-4 are controlled.
  • the cameras 12-1 to 12-4 are mounted on each part of the user's body or each part of the bicycle that the user drives by using, for example, mounting parts (not shown). Based on this control, it has a recording function for capturing and recording a moving image from each viewpoint.
  • the cameras 12-1 to 12-4 incorporate a battery and are driven using the battery as a power source.
  • a moving image simultaneously recorded by the cameras 12-1 to 12-4 is captured and edited by a predetermined editing device, personal computer, or the like, so that one multi-view video content as shown in FIG. Will be generated.
  • a predetermined editing device personal computer, or the like
  • the moving images and their metadata are transmitted from the cameras 12-1 to 12-4 to the controller 11, and the controller 11
  • the moving images are displayed on the display unit in real time as live view images. If necessary, the display unit of the controller 11 displays the metadata transmitted from the cameras 12-1 to 12-4 together with the live view image.
  • moving images of four viewpoints simultaneously recorded by the cameras 12-1 to 12-4 are displayed as one video.
  • an average speed calculated based on the speed in addition to the bicycle speed acquired as metadata by at least one of the cameras 12-1 to 12-4, an average speed calculated based on the speed, The travel distance, the elapsed time from a predetermined time, and the total time from the start of travel are displayed.
  • the cameras 12-1 to 12-4 that record the moving images that are the basis of such multi-view video contents are controlled by the controller 11 to start recording simultaneously, but their operations are independent. .
  • one of the cameras 12-1 to 12-4 may stop when the battery runs out.
  • the generated multi-view video content for example, as illustrated in FIG. 3, the moving image data of the camera stopped due to battery exhaustion is lost, and the completeness of the multi-view video content is low. It becomes a thing.
  • the cameras 12-1 to 12- 4 When the moving images recorded by the cameras 12-1 to 12-4 are displayed on the display unit of the controller 11 in real time as live view images, the cameras 12-1 to 12- 4, only the live view image of the camera used as the main camera has been requested to be confirmed as an image with high image quality and a high frame rate.
  • FIG. 4 is a block diagram illustrating a hardware configuration example of the controller 11.
  • the controller 11 includes a CPU (Central Processing Unit) 51, a memory 52, a communication unit 53, and an LCD (Liquid Crystal Display) 54.
  • a CPU Central Processing Unit
  • memory 52 a memory
  • communication unit 53 a communication unit
  • LCD Liquid Crystal Display
  • the CPU 51 controls each part of the controller 11 and generates control information for controlling each of the cameras 12-1 to 12-4.
  • cameras 12-1 to 12-4 when it is not necessary to distinguish the cameras 12-1 to 12-4, they are simply referred to as cameras 12.
  • the memory 52 temporarily stores various information supplied from the camera 12.
  • the communication unit 53 communicates with the camera 12 by wireless communication such as Wi-Fi.
  • the communication unit 53 includes, for example, a hardware circuit and an antenna.
  • the LCD 54 displays a moving image captured and recorded by each camera 12 as a live view image, and displays various information supplied from the camera 12 as necessary.
  • FIG. 5 is a block diagram illustrating a hardware configuration example of the camera 12.
  • the camera 12 includes a CPU 61, a nonvolatile memory 62, a communication unit 63, an imaging unit 64, and a recording medium slot 65.
  • CPU 61 controls each part of camera 12.
  • the nonvolatile memory 62 stores control information supplied from the controller 11.
  • the communication unit 63 communicates with the controller 11 by wireless communication such as Wi-Fi.
  • the communication unit 53 includes, for example, a hardware circuit and an antenna.
  • the imaging unit 64 captures a moving image based on the control information supplied from the controller 11.
  • the imaging unit 64 includes a solid-state imaging device such as a CMOS (Complementary Metal Oxide Semiconductor) image sensor or a CCD (Charge Coupled Device) image sensor.
  • CMOS Complementary Metal Oxide Semiconductor
  • CCD Charge Coupled Device
  • the recording medium slot 65 stores moving image data obtained by imaging by the imaging unit 64 in a recording medium (not shown) mounted in the recording medium slot 65.
  • the recording medium may be configured to be detachable from the recording medium slot 65 or may be built in the camera 12.
  • the controller 11 includes a communication control unit 71, a recording control unit 72, and a display control unit 73.
  • the communication control unit 71 controls the communication unit 53 to perform communication with the camera 12.
  • the recording control unit 72 controls recording of moving images by the camera 12 by generating a command for controlling recording of moving images by the camera 12.
  • the recording control unit 72 includes a recording mode setting unit 81 that sets the recording mode of the camera 12.
  • the display control unit 73 controls the display on the LCD 54.
  • the camera 12 includes a communication control unit 91, an imaging control unit 92, and a recording control unit 93.
  • the communication control unit 91 controls the communication unit 63 to perform communication with the controller 11.
  • the imaging control unit 92 controls the imaging of moving images by the imaging unit 64 based on commands from the controller 11.
  • the recording control unit 93 controls the storage (recording) of the moving image data obtained by the imaging by the imaging unit 64 in a recording medium (not shown) via the recording medium slot 65.
  • the communication control unit 71 of the controller 11 transmits a communication request to each of the cameras 12-1 to 12-4 by controlling the communication unit 53 in step S101.
  • the communication control unit 91 of each of the cameras 12-1 to 12-4 receives the communication request from the controller 11 by controlling the communication unit 63 in steps S111, S121, S131, and S141.
  • the communication control unit 91 of each of the cameras 12-1 to 12-4 can communicate according to the communication request from the controller 11 by controlling the communication unit 63 in steps S112, S122, S132, and S142. Send a response indicating that there is.
  • step S102 the communication control unit 71 of the controller 11 controls the communication unit 53 to receive responses from the cameras 12-1 to 12-4.
  • the recording control unit 72 of the controller 11 instructs the cameras 12-1 to 12-4 to start recording.
  • the communication control unit 71 transmits a command to start recording to each of the cameras 12-1 to 12-4 by controlling the communication unit 53 in step S103.
  • the communication control unit 91 of each of the cameras 12-1 to 12-4 receives the recording start instruction command from the controller 11 by controlling the communication unit 63 in steps S113, S123, S133, and S143.
  • the imaging control units 92 of the cameras 12-1 to 12-4 start imaging moving images by controlling the imaging unit 64, and the recording control unit 93 Then, recording of the captured moving image onto a recording medium (not shown) via the recording medium slot 65 is started. That is, the cameras 12-1 to 12-4 start recording moving images.
  • the recording control unit 72 of the controller 11 generates a command for requesting each remaining battery level as information on each remaining operable time with respect to the cameras 12-1 to 12-4.
  • the communication control unit 71 controls the communication unit 53 to transmit a battery remaining amount request command to each of the cameras 12-1 to 12-4.
  • the communication control unit 91 of each of the cameras 12-1 to 12-4 receives the battery remaining amount request command from the controller 11 by controlling the communication unit 63 in steps S114, S124, S134, and S144.
  • the communication control unit 91 of each of the cameras 12-1 to 12-4 controls the communication unit 63 in steps S115, S125, S135, and S145, so as to respond to the battery remaining amount request command from the controller 11.
  • the information indicating the remaining battery level is transmitted.
  • the recording mode setting unit 81 of the controller 11 When the communication control unit 71 of the controller 11 receives the information indicating the remaining battery level from each of the cameras 12-1 to 12-4 by controlling the communication unit 53 in step S105, the recording mode setting unit 81 In step S106, a recording mode setting process is executed. Details of the recording mode setting process will be described later.
  • step S106 When the recording modes of the cameras 12-1 to 12-4 are set in step S106, the communication control unit 71 of the controller 11 controls the communication unit 53 in step S107, so that the cameras 12-1 to 12 are set. -4 A command for setting the recording mode is transmitted to each.
  • the communication control unit 91 of each of the cameras 12-1 to 12-4 receives the recording mode setting instruction command from the controller 11 by controlling the communication unit 63 in steps S116, S126, S136, and S146.
  • the cameras 12-1 to 12-4 Based on the recording mode setting instruction command from the controller 11, the cameras 12-1 to 12-4 perform recording in the recording mode instructed to be set.
  • the controller 11 acquires information indicating the remaining battery levels of the cameras 12-1 to 12-4, and based on the acquired information indicating the remaining battery levels of the cameras 12-1 to 12-4, The recording mode of the cameras 12-1 to 12-4 is set.
  • “acquiring information” means, for example, actively transmitting a request including an information transmission command to an external device such as a camera, and acquiring information received as a response to the request, This refers to processing including acquiring information transmitted by an external device, receiving received information as data input, and the like.
  • steps S104 to S107 by the controller 11 is repeated every predetermined time, and the recording modes of the cameras 12-1 to 12-4 are set every predetermined time.
  • step S211 the recording control unit 72 acquires information indicating the remaining battery level transmitted from each of the cameras 12-1 to 12-4 as information regarding the remaining operable time.
  • step S212 the recording mode setting unit 81 calculates the remaining operable time of each of the cameras 12-1 to 12-4 using the remaining battery power of each of the cameras 12-1 to 12-4.
  • the recording mode setting unit 81 uses the remaining battery level B (t) acquired at the current time t and the remaining battery level B (t ⁇ t) acquired before the predetermined time ⁇ t, The remaining operable time of each of the cameras 12-1 to 12-4 is calculated.
  • the recording mode setting unit 81 sets one of the cameras 12-1 to 12-4 as the main main camera, the remaining operable time of the main camera, and a sub camera that is a camera other than the main camera. The difference from the remaining camera operable time is calculated.
  • the main camera is determined in advance.
  • the main camera is, for example, a camera that records a moving image most important to the user among moving images recorded by the cameras 12-1 to 12-4.
  • step S214 the recording mode setting unit 81 sets the recording mode of each sub camera based on the calculated difference.
  • the above processing is executed every predetermined time ⁇ t, and the recording mode is set every predetermined time ⁇ t.
  • the horizontal axis indicates the time
  • the vertical axis indicates the remaining battery level for each time.
  • graphs B1, B2, B3, and B4 shown in FIG. 10 represent the remaining battery levels of the cameras 12-1 to 12-4, respectively.
  • the camera 12-2 of the cameras 12-1 to 12-4 is the main camera, and in the initial state, all the cameras 12-1 to 12-4 perform the recording operation in the same recording mode. It shall be.
  • the remaining operable time of the camera 12-2 based on the remaining battery level B2 (t) at the time t and the remaining battery level B2 (t ⁇ t) at the time ⁇ t of the camera 12-2 as the main camera. Is calculated. As shown in FIG. 10, the camera 12-2 can be driven until time Tend.
  • the remaining battery levels B3 and B4 of the cameras 12-3 and 12-4 are smaller than the remaining battery level B2 of the camera 12-2 as the main camera, and therefore the remaining operable time calculated at time t. Is naturally shorter than that of the main camera.
  • the recording mode is set (changed). Specifically, a recording mode is set such that the power consumption of the sub camera is further suppressed as the difference is larger.
  • the cameras 12-3 and 12-4 can also be driven until time Tend.
  • FIG. 11 shows an example of a recording mode that is set according to the difference in the remaining operable time.
  • the recording mode is not changed, and when it is 15 to 29 minutes, the recording mode is transferred from the camera 12 to the controller 11.
  • the upper limit of the transfer rate of the live view image is changed to 45 fps (framesper second).
  • the upper limit of the transfer rate of the live view image is set to 60 fps.
  • the upper limit of the live view image transfer rate is changed to 30 fps, and if it is 45 to 59 minutes, the upper limit of the live view image transfer rate is changed to 15 fps. Is done.
  • the live view image is not transferred from the camera 12 to the controller 11. Even in this case, it is assumed that video recording is performed in the sub camera.
  • the remaining battery charge B1 of the camera 12-1 is greater than the remaining battery charge B2 of the camera 12-2 as the main camera, so the remaining operable time calculated at time t is the main camera. Longer than that. Therefore, the recording mode is not changed.
  • FIG. 12 shows a display example of the LCD 54 of the controller 11 at time t.
  • the moving images recorded by the cameras 12-1 to 12-4 are transmitted to the LCD 54 from the cameras 12-1 to 12-4 to the controller 11 to be real-time as live view images. Is displayed.
  • the live view image LV1 with the number 1 attached to the upper left is a moving image recorded by the camera 12-1
  • the live view image LV2 with the number 2 attached to the upper left is the camera 12.
  • -2 recorded video live view image LV3 with the number 3 on the upper left, moving image recorded by the camera 12-3, live view with the number 4 on the upper left
  • An image LV4 is a moving image recorded by the camera 12-4.
  • a star icon is displayed on the lower right, so that the user can recognize that the live view image LV2 is a moving image recorded by the main camera. ing.
  • the live view image corresponds to the main camera
  • in addition to displaying such an icon it may be displayed differently from the live view image corresponding to the sub camera. it can.
  • each of the live view images LV1 to LV4 the upper limit of the transfer rate of the live view image transferred from the camera 12 to the controller 11 as the recording mode set for the cameras 12-1 to 12-4.
  • a numerical value representing is displayed.
  • a numerical value of 60 fps is displayed at the upper right of the live view image LV1 as the upper limit of the transfer rate of the live view image transferred from the camera 12-1 to the controller 11, and at the upper right of the live view image LV2,
  • a numerical value of 60 fps is displayed as the upper limit of the transfer rate of the live view image transferred from the camera 12-2 to the controller 11, and the live view image transferred from the camera 12-3 to the controller 11 is displayed at the upper right of the live view image LV3.
  • a numerical value of 15 fps is displayed as the upper limit of the transfer rate, and a numerical value of 30 fps is displayed at the upper right of the live view image LV4 as the upper limit of the transfer rate of the live view image transferred from the camera 12-4 to the controller 11. .
  • the speed acquired as metadata by at least one of the cameras 12-1 to 12-4 and the remaining of each of the cameras 12-1 to 12-4 are displayed.
  • a bar graph indicating the remaining battery level acquired as information regarding the operable time is displayed.
  • the speed acquired as metadata by at least one of the cameras 12-1 to 12-4 is transmitted to the controller 11 and displayed on the LCD 54 of the controller 11.
  • the bar graph corresponding to the number 1 is the remaining battery level of the camera 12-1
  • the bar graph corresponding to the number 2 is the remaining battery level of the camera 12-2
  • the bar graph corresponding to the number 3 is the camera 12-
  • a bar graph corresponding to the remaining battery level 3 and the numeral 4 indicates the remaining battery level of the camera 12-4.
  • the remaining battery level of the camera 12-3 is the smallest.
  • the display area of the moving image recorded by the sub camera may be highlighted.
  • the display area of the live view image LV3 corresponding to the moving image recorded in the camera 12-3 is highlighted so as to be surrounded by a frame.
  • the live view image is not transferred from the camera 12 to the controller 11, so that the moving image recorded by the sub camera is not displayed. Specifically, as shown in FIG. 13, the live view image LV3 corresponding to the moving image recorded in the camera 12-3 is not displayed.
  • the recording mode of the sub camera is set so that the battery of the sub camera does not run out before the main camera, the moving image data of any camera is lost in the generated multi-view video content. Therefore, the completeness of the multi-view video content can be improved more reliably.
  • the recording mode of the sub camera is set based on the main camera, the image quality and frame rate of the live view image of the main camera are not impaired.
  • the main camera is determined in advance.
  • the camera 12 selected by a predetermined user operation may be determined as the main camera, or the camera having the largest remaining battery level. 12 may be determined as the main camera.
  • the main camera may be determined based on the posture and position of each camera 12.
  • the camera 12 that captures the traveling direction of the bicycle is determined as the main camera.
  • This is realized by mounting a GPS (Global Positioning System) transmitter and an acceleration sensor on each camera 12 and, for example, the CPU 51 of the controller 11 determines the main camera based on data obtained by these sensors.
  • GPS Global Positioning System
  • the camera 12 that is closest to the controller 11 is determined as the main camera. This is realized by using the Wi-Fi radio wave intensity used for communication between the controller 11 and the camera 12 or the GPS information of the camera 12.
  • the main camera may be determined based on the contents of moving images recorded by each of the plurality of cameras 12. Specifically, the main camera is determined based on the obtained feature amount by performing image recognition processing or the like on the moving images recorded by the respective cameras 12.
  • the posture and position of the camera 12 and the content of the moving image recorded by each camera 12 change with time, so that the main camera is determined dynamically according to the change. It is also possible to make it.
  • an icon is displayed on the live view image corresponding to the main camera, but as shown in FIG.
  • the live view image LV2 corresponding to the main camera may be displayed in the entire display area of the live view image, or the live view image corresponding to the sub camera is simply displayed in the display example shown in FIG. You may make it not display.
  • the upper limit of the transfer rate of the live view image transferred from the camera 12 to the controller 11 is changed as the recording mode according to the difference in the remaining operable time.
  • the recording mode may be set so that the function is limited.
  • FIG. 15 shows another example of the recording mode set in accordance with the difference in the remaining operable time.
  • the audio recording and the metadata recording by the camera 12 are stopped, and the image quality of the recording is lowered by one level.
  • FIG. 16 shows another display example of the LCD 54 of the controller 11.
  • each of the live view images LV1 to LV4 indicates whether GPS information is recorded as metadata as the recording mode set for the cameras 12-1 to 12-4. An icon is displayed.
  • an icon indicating that the camera 12-1 records GPS information is displayed on the upper right of the live view image LV1
  • the camera 12 is displayed on the upper right of each of the live view images LV2, LV3, and LV4.
  • -2 to 12-4 are displayed with icons indicating that GPS information is not recorded.
  • the camera 12-1 out of the cameras 12-1 to 12-4 records GPS information even though it is a sub camera.
  • the cameras 12-2 to 12-4 do not record GPS information and do not record audio.
  • the cameras 12-1 to 12-4 are attached to one user or one bicycle, the audio data and the position information recorded by the respective cameras 12 are almost the same. Therefore, as shown in the example of FIG. 16, the cameras 12-2 to 12-4 other than the camera 12-1 with the largest remaining battery level are able to suppress power consumption by stopping recording of audio data and position information. Only moving image recording can be performed.
  • the remaining battery level of the sub camera is very low, and the remaining battery level of the sub camera becomes zero before the remaining operation time of the main camera elapses regardless of the recording mode set for the sub camera.
  • a warning prompting the replacement of the battery may be displayed on the display area of the live view image corresponding to the sub camera.
  • the warning display AL including the message "Please! Is displayed.
  • the remaining battery level becomes 0 earlier than the remaining operable time of the main camera, for example, “the battery runs out 30 minutes earlier than the main camera!” You may make it display the message which alert
  • the recording mode of the sub camera is set based on the remaining operable time of the main camera, but if the recording time of the moving image that is the basis of the multi-view video content is predetermined
  • the recording mode of the sub camera may be set based on the remaining recording time.
  • steps S231, S232, and S234 in the flowchart in FIG. 18 is the same as S211, S212, and S214 in the flowchart in FIG.
  • step S233 the recording mode setting unit 81 calculates a difference between the shorter of the remaining operable time of the main camera and the remaining recording time and the remaining operable time of the sub camera that is a camera other than the main camera.
  • the remaining recording time is, for example, the time until the recording end time designated by the user.
  • FIG. 19 is a diagram for explaining the relationship between the remaining battery level and the remaining recording time.
  • FIG. 19 as in FIG. 10, the horizontal axis indicates the time, and the vertical axis indicates the remaining battery level for each time. Also, graphs B1, B2, B3, and B4 shown in FIG. 19 represent the remaining battery levels of the cameras 12-1 to 12-4, respectively.
  • the time from time t to time Tend is the remaining recording time
  • the remaining operable time and remaining recording time of the camera 12-3 at time t is the remaining operable time of the camera 12-3. Becomes shorter.
  • the recording is performed so that the remaining operable time of the sub camera is equal to or longer than the remaining recording time depending on the difference.
  • the mode is set (changed). Thereby, as shown in FIG. 19, the camera 12-3 can be driven until time Tend.
  • the recording mode described with reference to FIGS. 11 and 15 is set as the recording mode set according to the difference between the remaining recording time and the remaining operable time of the sub camera.
  • any camera in the multi-view video content to be generated is set. It is possible to increase the completeness of multi-view video content more reliably without missing moving image data.
  • the remaining battery capacity of each camera is transmitted from each camera, and the controller can perform the remaining operation of each camera using the transmitted remaining battery capacity.
  • the remaining operable time itself may be transmitted from each camera as information on the remaining operable time of each camera.
  • the communication control unit 91 of each camera 12 acquires its own battery remaining amount, calculates the remaining operable time using the remaining battery amount, and sends the calculated remaining operable time to the controller 11.
  • the recording control unit 72 acquires the remaining operable time from each camera 12, and the recording mode setting unit 81 sets the recording mode of the camera 12 based on the remaining operable time from each camera 12. Set.
  • the remaining operable time is calculated based on the remaining battery level of each camera and the recording mode of the camera is set. For example, the remaining operable time is determined based on the remaining recording medium capacity of each camera.
  • the recording mode of the camera may be set to be calculated, or the remaining operable time is calculated based on the remaining battery capacity and the remaining recording medium capacity of each camera to set the recording mode of the camera. You may make it do.
  • the multi-view video recording system is configured by the controller 11 and the plurality of cameras 12.
  • one of the plurality of cameras is configured as a control device of the present technology. Also good.
  • FIG. 20 shows a functional configuration example of a plurality of cameras constituting a multi-view video recording system to which the present technology is applied.
  • a camera 101 as a control device of the present technology is provided instead of the controller 11 having the configuration shown in FIG.
  • the camera 101 includes, in addition to the communication control unit 71, the recording control unit 72 having the recording mode setting unit 81, and the display control unit 73, which are included in the controller 11 having the configuration shown in FIG. A recording control unit 93 is provided.
  • the recording mode setting unit 81 of the camera 101 records the camera 12 and the camera 101 based on information about the remaining operable time of the camera 101 itself and the plurality of cameras 12 during the recording operation. Set the mode.
  • FIG. 21 illustrates a functional configuration example of the controller 111 and the terminal device 112 that configure a control system to which the present technology is applied.
  • the controller 111 includes a communication control unit 171, an operation control unit 172, and a display control unit 173.
  • the communication control unit 171 controls a communication unit (not shown) to perform communication with the terminal device 112.
  • the operation control unit 172 controls the operation of the terminal device 112 by generating a command for controlling the operation of the terminal device 112.
  • the operation control unit 172 includes an operation mode setting unit 181 that sets an operation mode of the terminal device 112.
  • the display control unit 173 controls display on a display unit (not shown).
  • the terminal device 112 includes a communication control unit 191, a processing unit 192, and a recording control unit 193.
  • the communication control unit 191 controls a communication unit (not shown) to perform communication with the controller 111.
  • the processing unit 192 controls the operation of a function unit (not shown) based on a command from the controller 111.
  • the recording control unit 193 controls recording of data obtained by the operation of a function unit (not shown) to a recording unit (not shown).
  • the operation mode setting unit 181 of the controller 111 determines the operation mode of the terminal device 112 based on information regarding the remaining operable time of each of the operating terminal devices 112. For example, an operation mode for suppressing power consumption for the positioning process is set.
  • the operation mode setting unit 181 of the controller 111 determines the terminal based on information on the remaining operable time of each of the operating terminal devices 112. As an operation mode of the device 112, for example, an operation mode that suppresses power consumption for light emission of the backlight is set.
  • the operation mode setting unit 181 of the controller 111 can perform the remaining operation of each of the operating terminal devices 112. Based on the information regarding time, as the operation mode of the terminal device 112, for example, an operation mode is set that suppresses power consumption required for photographing by a camera (not shown) provided on the flying object. Further, for example, the transfer rate when the live view image recorded by the camera provided on the flying object is transferred to the controller 111 is changed. Specifically, the transfer rate is set to a lower value, for example, the transfer rate that is 30 fps is changed to 15 fps at normal times.
  • the terminal devices 112 may be different types of devices.
  • the three terminal devices 112 are each configured as a camera, a portable game device, and a flying body having a camera attached to each part of the user's body or each part of the bicycle that the user drives as described above. Shall.
  • the operation mode setting unit 181 of the controller 111 sets the operation mode for suppressing the power consumption of each terminal device 112 based on the information on the remaining operable time of each terminal device 112 in operation. The operation mode described above is set.
  • each terminal device since the operation mode of the other terminal device is set so that the battery of the other terminal device does not run out before one terminal device, each terminal device can be operated in a coordinated manner. Is possible.
  • the series of processes described above can be executed by hardware or software.
  • a program constituting the software is installed in the computer.
  • the computer includes, for example, a general-purpose personal computer capable of executing various functions by installing a computer incorporated in dedicated hardware and various programs.
  • FIG. 22 is a block diagram illustrating a configuration example of hardware of a computer that executes the above-described series of processes by a program.
  • a CPU 901 In the computer, a CPU 901, a ROM (Read Only Memory) 902, and a RAM (Random Access Memory) 903 are connected to each other by a bus 904.
  • a bus 904. In the computer, a CPU 901, a ROM (Read Only Memory) 902, and a RAM (Random Access Memory) 903 are connected to each other by a bus 904.
  • An input / output interface 905 is further connected to the bus 904.
  • An input unit 906, an output unit 907, a storage unit 908, a communication unit 909, and a drive 910 are connected to the input / output interface 905.
  • the input unit 906 includes a keyboard, a mouse, a microphone, and the like.
  • the output unit 907 includes a display, a speaker, and the like.
  • the storage unit 908 includes a hard disk, a nonvolatile memory, and the like.
  • the communication unit 909 includes a network interface or the like.
  • the drive 910 drives a removable recording medium 911 such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory.
  • the CPU 901 loads the program stored in the storage unit 908 to the RAM 903 via the input / output interface 905 and the bus 904 and executes the program, for example. Is performed.
  • the program executed by the computer (CPU 901) can be provided by being recorded on a removable recording medium 911 such as a package recording medium.
  • the program can be provided via a wired or wireless transmission medium such as a local area network, the Internet, or digital satellite broadcasting.
  • the program can be installed in the storage unit 908 via the input / output interface 905 by attaching the removable recording medium 911 to the drive 910.
  • the program can be received by the communication unit 909 via a wired or wireless transmission medium and installed in the storage unit 908.
  • the program can be installed in the ROM 902 or the storage unit 908 in advance.
  • the program executed by the computer may be a program that is processed in time series in the order described in this specification, or in parallel or at a necessary timing such as when a call is made. It may be a program for processing.
  • the present technology can take a cloud computing configuration in which one function is shared by a plurality of devices via a network and is jointly processed.
  • each step described in the above flowchart can be executed by one device or can be shared by a plurality of devices.
  • the plurality of processes included in the one step can be executed by being shared by a plurality of apparatuses in addition to being executed by one apparatus.
  • this technique can take the following structures.
  • An acquisition unit that acquires information on remaining operable time of a plurality of devices;
  • a control device comprising: a setting unit configured to set an operation mode of at least one of the plurality of devices based on information on the remaining operable time of each of the plurality of devices.
  • the apparatus has a recording function for capturing and recording moving images, The control device according to (1), wherein the setting unit sets a recording mode of at least one of the plurality of devices based on information on the remaining operable time of each of the devices being recorded.
  • the acquisition unit acquires the remaining battery capacity of the plurality of devices as information on the remaining operable time of the plurality of devices,
  • the setting unit Using the remaining battery level of each of the devices being recorded, the remaining operable time of each of the devices is calculated,
  • the control device according to (2) wherein the recording mode of at least one of the plurality of devices is set based on the calculated remaining operable time of each of the devices.
  • the setting unit Calculating the difference between the remaining operable time of one of the plurality of devices and the remaining operable time of another device;
  • the setting unit Calculating the difference between the shorter of the remaining operable time and remaining recording time of the one device and the remaining operable time of the other device; The control device according to (4), wherein the recording mode of the other device is set according to the calculated difference. (6) The control unit according to (4) or (5), wherein the setting unit sets the recording mode in which power consumption is further suppressed as the difference is larger for the other device. (7) The control unit according to any one of (4) to (6), wherein the setting unit determines, as the one device, the device having the largest remaining battery amount among the plurality of devices. (8) The control unit according to any one of (4) to (6), wherein the setting unit determines the one device based on a posture or a position of each of the devices.
  • the control device determines the one device based on a content of a moving image recorded by each of the devices.
  • the said setting part determines the said 1 apparatus dynamically.
  • the control apparatus in any one of (4) thru
  • the control device in any one of (4) thru
  • the control device in any one of (4) thru
  • the control device in any one of (4) thru
  • the control device in any one of (4) thru
  • the control device in any one of (4) thru
  • the control device according to any one of (4) to (10), further including a display control unit that controls to display a moving image recorded by each of the devices in real time on one display screen.
  • the display control unit controls to further display a battery remaining amount of each of the devices on the display screen.
  • the control device (13) The control device according to (11) or (12), wherein the display control unit controls the moving image recorded by the first device to be displayed differently from the moving image recorded by the other device. .
  • the display control unit controls to display the information indicating the recording mode set in the other device on a display area of a moving image recorded by the other device. ).
  • the control device according to any one of (11) to (14), wherein the display control unit performs control to highlight a display area of a moving image recorded by the other device whose recording mode has been changed. (16) Regardless of the recording mode that is set, the display control unit displays a moving image that is recorded by the other device in which the remaining battery charge becomes zero before the remaining operable time of the first device has elapsed.
  • control device control is performed to display a warning that prompts replacement of the battery.
  • the acquisition unit acquires the remaining operable time calculated using the remaining battery capacity in each of the plurality of devices as information on the remaining operable time of the plurality of devices, The control device according to (2), wherein the setting unit sets the recording mode of at least one of the plurality of devices based on the acquired remaining operable time of each of the devices.
  • the control device has a recording function for capturing and recording moving images, The setting unit sets a recording mode of at least one of the plurality of devices and the control device based on the control device itself during recording and information on the remaining operable time of each of the devices.
  • the control device according to any one of 2) to (17).
  • the control unit Obtain information about the remaining operational time of multiple devices, A control method including a step of setting an operation mode of at least one of the plurality of devices based on information on the remaining operable time of each of the plurality of devices. (20) Get the battery level of multiple devices, A program that causes a computer to execute processing including a step of setting an operation mode of at least one of the plurality of devices based on information on the remaining operable time of each of the plurality of devices. (21) Multiple devices; An acquisition unit that acquires information on remaining operable time of a plurality of devices; A control system comprising: a control unit including: a setting unit configured to set an operation mode of at least one of the plurality of devices based on the remaining battery capacity of each of the plurality of devices.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Details Of Cameras Including Film Mechanisms (AREA)

Abstract

 本技術は、より確実に、多視点映像コンテンツの完成度を高めることができるようにする制御装置、制御方法、プログラム、および制御システムに関する。 取得部は、複数の装置の残り動作可能時間に関する情報を取得し、設定部は、複数の装置それぞれの残り動作可能時間に関する情報に基づいて、複数の装置のうちの少なくとも1つの装置の動作モードを設定する。本技術は、例えば、多視点映像コンテンツを録画する複数のカメラを制御するコントローラの他、複数のGPS端末を制御するコントローラや、通信機能を備える複数の携帯型ゲーム機器を制御するコントローラ等に適用することができる。

Description

制御装置、制御方法、プログラム、および制御システム
 本技術は、制御装置、制御方法、プログラム、および制御システムに関し、特に、複数の装置の動作を改善することができるようにする制御装置、制御方法、プログラム、および制御システムに関する。
 複数台のカメラで構成され、全方位360度の画像を同時に撮像するシステムにおいて、複数台のカメラのうちの一部を省電力駆動モードで動作させるとともに、残りのカメラを通常の駆動モードで動作させることを、複数台のカメラ同士の間で切り替えるようにしたシステムが提案されている(例えば、特許文献1参照)。
特開2010-232908号公報
 しかしながら、特許文献1に記載の技術では、システム全体の消費電力を抑制することはできるものの、個別の状況に応じた制御は考慮されていなかった。
 本技術は、このような状況に鑑みてなされたものであり、個別の状況に応じた制御により、複数の装置の動作を改善することができるようにするものである。
 本技術の一側面の制御装置は、複数の装置の残り動作可能時間に関する情報を取得する取得部と、前記複数の装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定する設定部とを備える。
 前記装置は動画像を撮像し記録する録画機能を有し、前記設定部には、録画中の前記装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の録画モードを設定させることができる。
 前記取得部には、複数の前記装置の前記残り動作可能時間に関する情報として、複数の前記装置のバッテリ残量を取得させ、前記設定部には、録画中の前記装置それぞれのバッテリ残量を用いて、前記装置それぞれの残り動作可能時間を算出させ、算出した前記装置それぞれの前記残り動作可能時間に基づいて、前記複数の装置のうちの少なくとも1つの装置の前記録画モードを設定させることができる。
 前記設定部には、複数の前記装置のうちのメインとなる1の装置の残り動作可能時間と、他の装置の残り動作可能時間との差分を算出させ、算出した前記差分に応じて、前記他の装置の前記録画モードを設定させることができる。
 前記設定部には、前記1の装置の残り動作可能時間および残り録画時間のうちの短い方と、前記他の装置の残り動作可能時間との差分を算出させ、算出した前記差分に応じて、前記他の装置の前記録画モードを設定させることができる。
 前記設定部には、前記差分が大きいほど消費電力がより抑制されるような前記録画モードを、前記他の装置に対して設定させることができる。
 前記設定部には、複数の前記装置のうち最もバッテリ残量が多い前記装置を、前記1の装置に決定させることができる。
 前記設定部には、前記装置それぞれの姿勢または位置に基づいて、前記1の装置を決定させることができる。
 前記設定部には、前記装置それぞれにより録画されている動画像の内容に基づいて、前記1の装置を決定させることができる。
 前記設定部には、前記1の装置を動的に決定させることができる。
 前記装置それぞれにより録画されている動画像を1つの表示画面にリアルタイムに表示するよう制御する表示制御部をさらに設けることができる。
 前記表示制御部には、前記装置それぞれのバッテリ残量を前記表示画面にさらに表示するよう制御させることができる。
 前記表示制御部には、前記1の装置により録画されている動画像を、前記他の装置により録画された動画像と異ならせて表示するよう制御させることができる。
 前記表示制御部には、前記他の装置に設定されている前記録画モードを表す情報を、前記他の装置により録画されている動画像の表示領域上に表示するよう制御させることができる。
 前記表示制御部には、前記録画モードが変更された前記他の装置により録画されている動画像の表示領域を強調表示するよう制御させることができる。
 前記表示制御部には、設定される前記録画モードにかかわらず、前記1の装置の前記残り動作可能時間経過前にバッテリ残量が0になる前記他の装置により録画されている動画像の表示領域上に、バッテリの交換を促す旨の警告を表示するよう制御させることができる。
 前記取得部には、複数の前記装置の前記残り動作可能時間に関する情報として、複数の前記装置それぞれにおいてバッテリ残量を用いて算出された残り動作可能時間を取得させ、前記設定部には、取得された前記装置それぞれの前記残り動作可能時間に基づいて、前記複数の装置のうちの少なくとも1つの装置の前記録画モードを設定させることができる。
 前記制御装置は動画像を撮像し記録する録画機能を有し、前記設定部には、録画中の前記制御装置自身および前記装置それぞれのバッテリ残量に基づいて、前記複数の装置および前記制御装置のうちの少なくとも1つの装置の録画モードを設定させることができる。
 本技術の一側面の制御方法は、制御装置が、複数の装置の残り動作可能時間に関する情報を取得し、前記複数の装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定するステップを含む。
 本技術の一側面のプログラムは、複数の装置の残り動作可能時間に関する情報を取得し、前記複数の装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定するステップを含む処理をコンピュータに実行させる。
 本技術の一側面の制御システムは、複数の装置と、複数の装置の残り動作可能時間に関する情報を取得する取得部と、前記複数の装置それぞれの前記バッテリ残量に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定する設定部とを有する制御装置とを備える。
 本技術の一側面においては、複数の装置の残り動作可能時間に関する情報が取得され、複数の装置それぞれの残り動作可能時間に関する情報に基づいて、複数の装置のうちの少なくとも1つの装置の動作モードが設定される。
 本技術の一側面によれば、個別の状況に応じた制御により、複数の装置の動作を改善することが可能となる。
本技術を適用した多視点映像録画システムの構成例を示す図である。 多視点映像コンテンツの表示例を示す図である。 多視点映像コンテンツの表示例を示す図である。 コントローラのハードウェア構成例を示すブロック図である。 カメラのハードウェア構成例を示すブロック図である。 多視点映像録画システムの機能構成例を示すブロック図である。 多視点映像の録画処理について説明するフローチャートである。 多視点映像の録画処理について説明するフローチャートである。 録画モード設定処理の例について説明するフローチャートである。 バッテリ残量と残り動作可能時間の関係について説明する図である。 録画モードの例について説明する図である。 コントローラのLCDの表示例を示す図である。 コントローラのLCDの表示例を示す図である。 コントローラのLCDの表示例を示す図である。 録画モードの他の例について説明する図である。 コントローラのLCDの表示例を示す図である。 コントローラのLCDの表示例を示す図である。 録画モード設定処理の他の例について説明するフローチャートである。 バッテリ残量と残り録画時間の関係について説明する図である。 多視点映像録画システムの他の機能構成例を示すブロック図である。 本技術を適用した制御システムの機能構成例を示すブロック図である。 コンピュータの機能構成例を示すブロック図である。
 以下、本技術の実施の形態について図を参照して説明する。
<多視点映像録画システムの構成例>
 図1は、本技術が適用される多視点映像録画システムの構成例を示している。
 多視点映像録画システム10は、本技術の制御装置としてのコントローラ11と、4台のカメラ12-1乃至12-4とから構成される。なお、本技術が適用される多視点映像録画システムにおいて、カメラの台数は4台に限定されない。
 コントローラ11は、腕時計型に構成されてユーザの腕等に着用されるようになされており、そのユーザに操作されることで、Wi-Fi(Wireless Fidelity)(登録商標)等の無線通信によりカメラ12-1乃至12-4の動作を制御する。
 カメラ12-1乃至12-4は、例えば、図示せぬマウント用部品を用いることで、ユーザの体の各部位やユーザが運転する自転車の各箇所に装着されるようになされており、コントローラ11の制御に基づいて、それぞれの視点で動画像を撮像し記録する録画機能を有する。カメラ12-1乃至12-4は、バッテリを内蔵し、そのバッテリを電源として駆動する。
 カメラ12-1乃至12-4により同時に録画された動画像が、所定の編集装置やパーソナルコンピュータ等に取り込まれて編集されることで、図2に示されるような、1つの多視点映像コンテンツが生成されるようになる。なお、カメラ12-1乃至12-4により動画像が録画されている間、カメラ12-1乃至12-4からは、それらの動画像とそのメタデータとがコントローラ11に送信され、コントローラ11の表示部に、それらの動画像がライブビュー画像としてリアルタイムで表示される。また、必要に応じて、コントローラ11の表示部には、ライブビュー画像とともに、カメラ12-1乃至12-4から送信されてきたメタデータが表示される。
 図2の多視点映像コンテンツにおいては、カメラ12-1乃至12-4により同時に録画された、4つの視点の動画像が1つの映像として表示されている。さらに、図2の多視点映像コンテンツの下方には、カメラ12-1乃至12-4の少なくともいずれかによりメタデータとして取得された自転車の速度の他、その速度に基づいて算出された平均速度、走行距離、所定時刻からの経過時間、および走行開始からの合計時間が表示されている。
 このような多視点映像コンテンツの基となる動画像を録画するカメラ12-1乃至12-4は、コントローラ11により、同時に録画を開始するように制御されるものの、それぞれの動作は独立している。
 そのため、カメラ12-1乃至12-4のうちの1台のカメラが、バッテリ切れで停止する可能性がある。このような場合、生成される多視点映像コンテンツにおいては、例えば、図3に示されるように、バッテリ切れで停止したカメラの動画像データが欠落してしまい、多視点映像コンテンツの完成度は低いものとなってしまう。
 また、カメラ12-1乃至12-4により録画されている動画像が、ライブビュー画像として、コントローラ11の表示部にもリアルタイムで表示されるようになされている場合、カメラ12-1乃至12-4のうち、メインカメラとして用いられるカメラのライブビュー画像だけは、高画質かつ高フレームレートの画像として確認したいという要求があった。
 そこで、以下においては、多視点映像コンテンツの完成度を高めつつ、メインカメラのライブビュー画像の画質およびフレームレートを損なわないようにする構成について説明する。
<コントローラのハードウェア構成例>
 図4は、コントローラ11のハードウェア構成例を示すブロック図である。
 図4に示されるように、コントローラ11は、CPU(Central Processing Unit)51、メモリ52、通信部53、およびLCD(Liquid Crystal Display)54を含む構成とされる。
 CPU51は、コントローラ11の各部を制御するとともに、カメラ12-1乃至12-4それぞれを制御するための制御情報を生成する。
 なお、以下において、カメラ12-1乃至12-4をそれぞれ区別する必要がない場合は、単に、カメラ12ということとする。
 メモリ52は、カメラ12から供給されてくる各種の情報を一時的に格納する。
 通信部53は、Wi-Fi等の無線通信により、カメラ12との通信を行う。通信部53は、例えばハードウェア回路およびアンテナにより構成される。
 LCD54は、カメラ12それぞれにより撮像され録画されている動画像を、ライブビュー画像として表示するとともに、カメラ12から供給されてくる各種の情報を、必要に応じて表示する。
<カメラのハードウェア構成例>
 図5は、カメラ12のハードウェア構成例を示すブロック図である。
 図5に示されるように、カメラ12は、CPU61、不揮発性メモリ62、通信部63、撮像部64、および記録媒体スロット65を含む構成とされる。
 CPU61は、カメラ12の各部を制御する。
 不揮発性メモリ62は、コントローラ11から供給されてくる制御情報を格納する。
 通信部63は、Wi-Fi等の無線通信により、コントローラ11との通信を行う。通信部53は、例えばハードウェア回路およびアンテナにより構成される。
 撮像部64は、コントローラ11から供給されてくる制御情報に基づいて、動画像の撮像を行う。撮像部64は、例えばCMOS(Complementary Metal Oxide Semiconductor)イメージセンサやCCD(Charge Coupled Device)イメージセンサ等の固体撮像素子により構成される。
 記録媒体スロット65は、記録媒体スロット65に装着される図示せぬ記録媒体に、撮像部64による撮像により得られた動画像データを格納する。なお、記録媒体は、記録媒体スロット65に着脱可能に構成されてもよいし、カメラ12に内蔵されてもよい。
<多視点映像録画システムの機能構成例>
 次に、図6を参照して、上述した多視点映像録画システム10を構成するコントローラ11およびカメラ12の機能構成例について説明する。図6に示されるコントローラ11およびカメラ12の機能ブロックは、CPU51およびCPU61により所定のプログラムが実行されることによって実現される。
 コントローラ11は、通信制御部71、録画制御部72、および表示制御部73から構成される。
 通信制御部71は、通信部53を制御し、カメラ12との通信を行わせる。
 録画制御部72は、カメラ12による動画像の録画を制御するためのコマンドを生成することで、カメラ12による動画像の録画を制御する。また、録画制御部72は、カメラ12の録画モードを設定する録画モード設定部81を備える。
 表示制御部73は、LCD54の表示を制御する。
 また、カメラ12は、通信制御部91、撮像制御部92、および記録制御部93から構成される。
 通信制御部91は、通信部63を制御し、コントローラ11との通信を行わせる。
 撮像制御部92は、コントローラ11からのコマンドに基づいて、撮像部64による動画像の撮像を制御する。
 記録制御部93は、撮像部64による撮像により得られた動画像データの、記録媒体スロット65を介した図示せぬ記録媒体への格納(記録)を制御する。
<多視点映像録画システムにおける録画処理の流れ>
 次に、図7および図8を参照して、多視点映像録画システム10における録画処理の流れについて説明する。
 まず、コントローラ11の通信制御部71は、ステップS101において、通信部53を制御することで、カメラ12-1乃至12-4それぞれに対して、通信リクエストを送信する。
 カメラ12-1乃至12-4それぞれの通信制御部91は、ステップS111,S121,S131,S141において、通信部63を制御することで、コントローラ11からの通信リクエストを受信する。
 さらに、カメラ12-1乃至12-4それぞれの通信制御部91は、ステップS112,S122,S132,S142において、通信部63を制御することで、コントローラ11からの通信リクエストに応じて、通信可能である旨を示すレスポンスを送信する。
 コントローラ11の通信制御部71は、ステップS102において、通信部53を制御することで、カメラ12-1乃至12-4それぞれからのレスポンスを受信する。
 このようにして、コントローラ11とカメラ12-1乃至12-4との通信が確立し、コントローラ11の録画制御部72が、カメラ12-1乃至12-4に対して録画開始を指示するためのコマンドを生成すると、通信制御部71は、ステップS103において、通信部53を制御することで、カメラ12-1乃至12-4それぞれに対して、録画開始指示のコマンドを送信する。
 カメラ12-1乃至12-4それぞれの通信制御部91は、ステップS113,S123,S133,S143において、通信部63を制御することで、コントローラ11からの録画開始指示のコマンドを受信する。
 コントローラ11からの録画開始指示のコマンドに応じて、カメラ12-1乃至12-4それぞれの撮像制御部92は、撮像部64を制御することで動画像の撮像を開始し、記録制御部93は、撮像された動画像の記録媒体スロット65を介した図示せぬ記録媒体への記録を開始する。すなわち、カメラ12-1乃至12-4は、動画像の録画を開始する。
 その後、所定のタイミングで、コントローラ11の録画制御部72が、カメラ12-1乃至12-4に対してそれぞれの残り動作可能時間に関する情報として、それぞれのバッテリ残量を要求するためのコマンドを生成すると、通信制御部71は、ステップS104において、通信部53を制御することで、カメラ12-1乃至12-4それぞれに対して、バッテリ残量要求のコマンドを送信する。
 カメラ12-1乃至12-4それぞれの通信制御部91は、ステップS114,S124,S134,S144において、通信部63を制御することで、コントローラ11からのバッテリ残量要求のコマンドを受信する。
 さらに、カメラ12-1乃至12-4それぞれの通信制御部91は、ステップS115,S125,S135,S145において、通信部63を制御することで、コントローラ11からのバッテリ残量要求のコマンドに応じて、バッテリ残量を示す情報を送信する。
 コントローラ11の通信制御部71は、ステップS105において、通信部53を制御することで、カメラ12-1乃至12-4それぞれからのバッテリ残量を示す情報を受信すると、録画モード設定部81は、ステップS106において、録画モード設定処理を実行する。録画モード設定処理の詳細は後述する。
 ステップS106において、カメラ12-1乃至12-4それぞれの録画モードが設定されると、コントローラ11の通信制御部71は、ステップS107において、通信部53を制御することで、カメラ12-1乃至12-4それぞれに対して、録画モード設定指示のコマンドを送信する。
 カメラ12-1乃至12-4それぞれの通信制御部91は、ステップS116,S126,S136,S146において、通信部63を制御することで、コントローラ11からの録画モード設定指示のコマンドを受信する。
 そして、コントローラ11からの録画モード設定指示のコマンドに基づいて、カメラ12-1乃至12-4は、設定指示された録画モードでの録画を行う。
 以上のように、コントローラ11は、カメラ12-1乃至12-4のバッテリ残量を示す情報を取得し、取得したカメラ12-1乃至12-4それぞれのバッテリ残量を示す情報に基づいて、カメラ12-1乃至12-4の録画モードを設定する。ここで、「情報を取得する」とは、例えば、能動的にカメラ等の外部装置に対して情報の送信命令を含む要求を送信し、その要求の応答として受信された情報を取得すること、外部装置が主体的に送信した情報を取得すること、受信された情報をデータ入力として受け取ること、等を含む処理をいう。
 なお、コントローラ11によるステップS104乃至S107の処理は、所定時間毎に繰り返され、カメラ12-1乃至12-4の録画モードが所定時間毎に設定されるようになされる。
<録画モード設定処理の詳細>
 次に、図9を参照して、上述した録画処理のステップS106において、コントローラ11により実行される録画モード設定処理の詳細について説明する。
 まず、ステップS211において、録画制御部72は、カメラ12-1乃至12-4それぞれから残り動作可能時間に関する情報として送信されてきた、バッテリ残量を示す情報を取得する。
 ステップS212において、録画モード設定部81は、カメラ12-1乃至12-4それぞれのバッテリ残量を用いて、カメラ12-1乃至12-4それぞれの残り動作可能時間を算出する。
 具体的には、録画モード設定部81は、現在時刻tにおいて取得されたバッテリ残量B(t)と、所定時間Δt前において取得されたバッテリ残量B(t-Δt)とを用いて、カメラ12-1乃至12-4それぞれの残り動作可能時間を算出する。
 ステップS213において、録画モード設定部81は、カメラ12-1乃至12-4のうちの1台をメインとなるメインカメラとして、そのメインカメラの残り動作可能時間と、メインカメラ以外のカメラであるサブカメラの残り動作可能時間との差分を算出する。なお、メインカメラは予め決められているものとする。メインカメラは、例えば、カメラ12-1乃至12-4それぞれにより録画されている動画像のうち、ユーザが最も重要視する動画像を録画しているカメラとされる。
 そして、ステップS214において、録画モード設定部81は、算出した差分に基づいて、サブカメラそれぞれの録画モードを設定する。
 本実施の形態においては、以上の処理が所定時間Δt毎に実行され、所定時間Δt毎に録画モードが設定される。
 ここで、図10を参照して、バッテリ残量と残り動作可能時間との関係について説明する。
 図10において、横軸は時刻を示し、縦軸は時刻毎のバッテリ残量を示している。また、図10に示されるグラフB1,B2,B3,B4は、それぞれカメラ12-1乃至12-4のバッテリ残量を表している。
 なお、ここでは、カメラ12-1乃至12-4のうちのカメラ12-2がメインカメラであるものとし、初期状態では、カメラ12-1乃至12-4はいずれも同じ録画モードで録画動作しているものとする。
 まず、メインカメラであるカメラ12-2の、時刻tにおけるバッテリ残量B2(t)と、時刻Δtにおけるバッテリ残量B2(t-Δt)とに基づいて、カメラ12-2の残り動作可能時間が算出される。図10に示されるように、カメラ12-2は、時刻Tendまで駆動可能とされる。
 サブカメラのうち、カメラ12-3,12-4のバッテリ残量B3,B4は、メインカメラであるカメラ12-2のバッテリ残量B2よりも少ないので、時刻tにおいて算出される残り動作可能時間は、メインカメラのそれより当然短くなる。
 そこで、サブカメラの残り動作可能時間が、メインカメラの残り動作可能時間より短い場合、その差分の大きさに応じて、サブカメラの残り動作可能時間がメインカメラの残り動作可能時間と同じになるように、録画モードが設定(変更)される。具体的には、その差分が大きいほど、サブカメラの消費電力がより抑制されるような録画モードが設定される。これにより、図10に示されるように、カメラ12-3,12-4も、時刻Tendまで駆動可能となるようになされる。
 図11は、残り動作可能時間の差分に応じて設定される録画モードの例を示している。
 図11に示されるように、残り動作可能時間の差分が、0乃至14分の場合、録画モードの変更は行われず、15乃至29分の場合、録画モードとしての、カメラ12からコントローラ11に転送されるライブビュー画像の転送レートの上限が45fps(frame per second)に変更される。なお、初期状態の録画モードとしては、ライブビュー画像の転送レートの上限が60fpsに設定されているものとする。
 また、残り動作可能時間の差分が、30乃至44分の場合、ライブビュー画像の転送レートの上限が30fpsに変更され、45乃至59分の場合、ライブビュー画像の転送レートの上限が15fpsに変更される。
 さらに、残り動作可能時間の差分が、60分以上の場合、カメラ12からコントローラ11にはライブビュー画像が転送されないようになされる。なお、この場合でも、サブカメラにおける動画像の録画は行われるものとする。
 なお、サブカメラのうち、カメラ12-1のバッテリ残量B1は、メインカメラであるカメラ12-2のバッテリ残量B2よりも多いので、時刻tにおいて算出される残り動作可能時間は、メインカメラのそれよりも長くなる。したがって、録画モードは変更されない。
 図12は、時刻tにおけるコントローラ11のLCD54の表示例を示している。
 図12に示されるように、LCD54には、カメラ12-1乃至12-4により録画されている動画像が、カメラ12-1乃至12-4からコントローラ11に送信されて、ライブビュー画像としてリアルタイムで表示される。
 図12において、左上に数字の1が付されているライブビュー画像LV1が、カメラ12-1により録画されている動画像、左上に数字の2が付されているライブビュー画像LV2が、カメラ12-2により録画されている動画像、左上に数字の3が付されているライブビュー画像LV3が、カメラ12-3により録画されている動画像、左上に数字の4が付されているライブビュー画像LV4が、カメラ12-4により録画されている動画像である。
 ライブビュー画像LV2には、その右下に星型のアイコンが表示されており、ユーザが、ライブビュー画像LV2がメインカメラにより録画されている動画像であることを認識することができるようになされている。このように、メインカメラに対応するライブビュー画像であることを示すために、このようなアイコンを表示する以外にも、サブカメラに対応するライブビュー画像と異ならせて表示させるようにすることができる。
 また、ライブビュー画像LV1乃至LV4それぞれの右上には、カメラ12-1乃至12-4に対して設定されている録画モードとして、カメラ12からコントローラ11に転送されるライブビュー画像の転送レートの上限を表す数値が表示されている。
 具体的には、ライブビュー画像LV1の右上には、カメラ12-1からコントローラ11に転送されるライブビュー画像の転送レートの上限として60fpsの数値が表示され、ライブビュー画像LV2の右上には、カメラ12-2からコントローラ11に転送されるライブビュー画像の転送レートの上限として60fpsの数値が表示され、ライブビュー画像LV3の右上には、カメラ12-3からコントローラ11に転送されるライブビュー画像の転送レートの上限として15fpsの数値が表示され、ライブビュー画像LV4の右上には、カメラ12-4からコントローラ11に転送されるライブビュー画像の転送レートの上限として30fpsの数値が表示されている。
 さらに、LCD54において、ライブビュー画像LV1乃至LV4の下側には、カメラ12-1乃至12-4の少なくともいずれかによりメタデータとして取得された速度と、カメラ12-1乃至12-4それぞれの残り動作可能時間に関する情報として取得されたバッテリ残量を示す棒グラフが表示されている。カメラ12-1乃至12-4の少なくともいずれかによりメタデータとして取得された速度は、コントローラ11に送信されて、コントローラ11のLCD54に表示される。
 具体的には、数字の1に対応する棒グラフがカメラ12-1のバッテリ残量、数字の2に対応する棒グラフがカメラ12-2のバッテリ残量、数字の3に対応する棒グラフがカメラ12-3のバッテリ残量、数字の4に対応する棒グラフがカメラ12-4のバッテリ残量を示している。ここでは、図10を参照して説明したように、カメラ12-3のバッテリ残量が最も少ないことが示されている。
 なお、カメラ12-3のように、バッテリ残量が少なく、その残り動作可能時間とメインカメラの残り動作可能時間との差分が大きく、消費電力を大幅に抑制するように録画モードが設定(変更)されている場合、そのサブカメラにより録画されている動画像の表示領域が強調表示されるようにしてもよい。図12の例では、カメラ12-3に録画されている動画像に対応するライブビュー画像LV3の表示領域が枠で囲まれるようにして強調表示されている。
 また、残り動作可能時間との差分がさらに大きい場合には、カメラ12からコントローラ11にはライブビュー画像が転送されないので、そのサブカメラにより録画されている動画像が表示されなくなる。具体的には、図13に示されるように、カメラ12-3に録画されている動画像に対応するライブビュー画像LV3が表示されなくなる。
 以上のように、メインカメラより先にサブカメラのバッテリが切れないように、サブカメラの録画モードが設定されるので、生成される多視点映像コンテンツにおいて、いずれのカメラの動画像データも欠落することなく、より確実に、多視点映像コンテンツの完成度を高めることが可能となる。
 また、メインカメラを基準として、サブカメラの録画モードが設定されるので、メインカメラのライブビュー画像の画質およびフレームレートが損なわれることはない。
<メインカメラの決定方法の例>
 以上においては、メインカメラは予め決められているものとしたが、例えば、所定のユーザ操作により選択されたカメラ12がメインカメラに決定されるようにしてもよいし、最もバッテリ残量が多いカメラ12がメインカメラに決定されるようにしてもよい。
 また、カメラ12それぞれの姿勢や位置に基づいて、メインカメラが決定されるようにしてもよい。
 例えば、複数のカメラ12が、ユーザの体の各部位やユーザが運転する自転車の各箇所に装着されている場合、自転車の進行方向を撮影するカメラ12がメインカメラに決定されるようにする。これは、それぞれのカメラ12にGPS(Global Positioning System)発信機や加速度センサを搭載し、例えばコントローラ11のCPU51がこれらセンサにより得られるデータに基づいてメインカメラを決定することで実現される。
 また、複数のユーザそれぞれがカメラ12を装着している場合、コントローラ11から最も近い位置にあるカメラ12がメインカメラに決定されるようにする。これは、コントローラ11とカメラ12との通信で用いられるWi-Fiの電波強度やカメラ12のGPS情報を用いることで実現される。
 さらに、複数のカメラ12それぞれにより録画されている動画像の内容に基づいて、メインカメラが決定されるようにしてもよい。具体的には、カメラ12それぞれにより録画されている動画像に対して画像認識処理等を行うことで、得られる特徴量によって、メインカメラが決定されるようにする。
 なお、上述したカメラ12の姿勢や位置、カメラ12それぞれにより録画されている動画像の内容は、時間によって変化するものであるので、その変化に応じて、メインカメラが動的に決定されるようにすることも可能である。
 また、以上においては、ユーザに、メインカメラにより録画されている動画像であることを認識させるために、メインカメラに対応するライブビュー画像にアイコンを表示させる等したが、図14に示されるように、メインカメラに対応するライブビュー画像LV2を、ライブビュー画像の表示領域全体に表示させるようにしてもよいし、単に、図12に示される表示例において、サブカメラに対応するライブビュー画像を表示させないようにしてもよい。
<録画モードの他の例>
 上述した例では、残り動作可能時間の差分に応じて、録画モードとして、カメラ12からコントローラ11に転送されるライブビュー画像の転送レートの上限が変更されるものとしたが、カメラ12におけるその他の機能が制限されるように、録画モードが設定されるようにしてもよい。
 図15は、残り動作可能時間の差分に応じて設定される録画モードの他の例を示している。
 図15に示されるように、残り動作可能時間の差分が、0乃至14分の場合、録画モードの変更は行われず、15乃至29分の場合、カメラ12による音声の録音が止められるようになされる。
 また、残り動作可能時間の差分が、30乃至44分の場合および45乃至59分の場合、カメラ12による音声の録音およびメタデータの記録が止められるようになされる。
 さらに、残り動作可能時間の差分が、60分以上の場合、カメラ12による音声の録音およびメタデータの記録が止められ、録画の画質が1段階下げられるようになされる。
 図16は、コントローラ11のLCD54の他の表示例を示している。
 図16の例では、ライブビュー画像LV1乃至LV4それぞれの右上に、カメラ12-1乃至12-4に対して設定されている録画モードとして、メタデータとしてGPS情報を記録しているか否かを表すアイコンが表示されている。
 具体的には、ライブビュー画像LV1の右上には、カメラ12-1がGPS情報を記録していることを表すアイコンが表示され、ライブビュー画像LV2,LV3,LV4それぞれの右上には、カメラ12-2乃至12-4がGPS情報を記録していないことを表すアイコンが表示されている。
 すなわち、この例では、カメラ12-1乃至12-4のうちのカメラ12-1のみが、サブカメラであるにもかかわらず、GPS情報を記録している。なお、カメラ12-2乃至12-4は、GPS情報を記録していない他、音声の録音も行っていない。
 カメラ12-1乃至12-4が、1人のユーザや1台の自転車に装着されている場合、それぞれのカメラ12により記録される音声データや位置情報は、いずれも略同じ内容となる。したがって、図16の例のように、最もバッテリ残量の多いカメラ12-1以外のカメラ12-2乃至12-4は、音声データや位置情報の記録を止めることで、消費電力を抑制しながら動画像の録画のみを行うことができるようになる。
 結果として、生成される多視点映像コンテンツにおいて、いずれのカメラの動画像データも欠落することなく、より確実に、多視点映像コンテンツの完成度を高めることが可能となる。
 なお、サブカメラのバッテリ残量が非常に少なく、そのサブカメラに対して設定される録画モードにかかわらず、メインカメラの残り動作可能時間経過前にそのサブカメラのバッテリ残量が0になるような場合、コントローラ11のLCD54において、そのサブカメラに対応するライブビュー画像の表示領域上に、バッテリの交換を促す警告が表示されるようにしてもよい。
 具体的には、図17に示されるように、LCD54における、バッテリ残量が非常に少ないカメラ12-3に対応するライブビュー画像LV3の表示領域上に、「最後まで録画できません!バッテリーを交換してください!」といったメッセージを含む警告表示ALが表示されるようにする。
 これにより、ユーザに対して、バッテリが切れる前に、バッテリ残量が少ないカメラのバッテリの交換を促すことができ、結果として、生成される多視点映像コンテンツにおいて、いずれのカメラの動画像データも欠落しないようにすることができる。
 なお、図17の例において、警告表示ALに代えて、例えば、「メインカメラより30分早くバッテリがなくなります!」等の、メインカメラの残り動作可能時間よりどのくらい早くバッテリ残量が0になるかを報知するメッセージが表示されるようにしてもよい。
 以上においては、メインカメラの残り動作可能時間を基準に、サブカメラの録画モードが設定されるようにしたが、多視点映像コンテンツの基となる動画像の録画時間が予め決まっている場合には、残りの録画時間を基準に、サブカメラの録画モードが設定されるようにしてもよい。
<録画モード設定処理の他の例>
 そこで、図18を参照して、残りの録画時間を基準とした録画モード設定処理について説明する。
 なお、図18のフローチャートのステップS231,S232,S234の処理は、図9のフローチャートのS211,S212,S214と同様であるので、その説明は省略する。
 すなわち、ステップS233において、録画モード設定部81は、メインカメラの残り動作可能時間と残り録画時間のうちの短い方と、メインカメラ以外のカメラであるサブカメラの残り動作可能時間との差分を算出する。残り録画時間は、例えば、ユーザにより指定された録画終了時刻までの時間とされる。
 図19は、バッテリ残量と残り録画時間との関係について説明する図である。
 図19においても、図10と同様、横軸は時刻を示し、縦軸は時刻毎のバッテリ残量を示している。また、図19に示されるグラフB1,B2,B3,B4は、それぞれカメラ12-1乃至12-4のバッテリ残量を表している。
 図19においては、時刻tから時刻Tendまでの時間が残り録画時間とされ、時刻tにおけるカメラ12-3の残り動作可能時間と残り録画時間とでは、カメラ12-3の残り動作可能時間の方が短くなる。
 そこで、サブカメラの残り動作可能時間が、残り録画時間より短い場合、その差分の大きさに応じて、サブカメラの残り動作可能時間が残り録画時間と同じかまたはそれより長くなるように、録画モードが設定(変更)される。これにより、図19に示されるように、カメラ12-3は、時刻Tendまで駆動可能となる。
 なお、残り録画時間とサブカメラの残り動作可能時間との差分に応じて設定される録画モードとしては、図11や図15を参照して説明した録画モードが設定される。
 以上のように、予定されている録画終了時刻よりも前にサブカメラのバッテリが切れないように、サブカメラの録画モードが設定されるので、生成される多視点映像コンテンツにおいて、いずれのカメラの動画像データも欠落することなく、より確実に、多視点映像コンテンツの完成度を高めることが可能となる。
 なお、以上においては、カメラそれぞれの残り動作可能時間に関する情報として、カメラそれぞれのバッテリ残量がカメラそれぞれから送信され、コントローラが、送信されてきたバッテリ残量を用いて、カメラそれぞれの残り動作可能時間を算出するものとしたが、カメラそれぞれの残り動作可能時間に関する情報として、残り動作可能時間そのものがカメラそれぞれから送信されるようにしてもよい。
 この場合、例えば、カメラ12それぞれの通信制御部91が、自身のバッテリ残量を取得し、そのバッテリ残量を用いて残り動作可能時間を算出し、算出された残り動作可能時間をコントローラ11に送信するようにする。コントローラ11においては、録画制御部72が、カメラ12それぞれからの残り動作可能時間を取得し、録画モード設定部81が、カメラ12それぞれからの残り動作可能時間に基づいて、カメラ12の録画モードを設定する。
 また、カメラそれぞれのバッテリ残量に基づいて残り動作可能時間が算出されて、カメラの録画モードが設定されるものとしたが、例えば、カメラそれぞれの残り記録媒体容量に基づいて残り動作可能時間が算出されて、カメラの録画モードが設定されるようにしてもよいし、カメラそれぞれのバッテリ残量と残り記録媒体容量とに基づいて残り動作可能時間が算出されて、カメラの録画モードが設定されるようにしてもよい。
<多視点映像録画システムの他の機能構成例>
 上述した説明において、多視点映像録画システムは、コントローラ11と複数のカメラ12とから構成されるものとしたが、複数のカメラのうちの1つが、本技術の制御装置として構成されるようにしてもよい。
 図20は、本技術を適用した多視点映像録画システムを構成する複数のカメラの機能構成例を示している。
 図20に示される構成においては、図6に示される構成のコントローラ11に代えて、本技術の制御装置としてのカメラ101が設けられている。
 カメラ101は、図6に示される構成のコントローラ11が備える通信制御部71、録画モード設定部81を有する録画制御部72、および表示制御部73に加え、カメラ12と同様、撮像制御部92および記録制御部93を備える。
 図20に示される構成においては、カメラ101の録画モード設定部81が、録画動作中のカメラ101自身および複数のカメラ12それぞれの残り動作可能時間に関する情報に基づいて、カメラ12およびカメラ101の録画モードを設定する。
 このような構成においても、録画モード設定処理によって、上述した作用および効果を奏することが可能となる。
<他のシステムへの適用例>
 以上においては、本技術を、多視点映像録画システムに対して適用した例について説明してきたが、複数の端末装置とその端末装置の動作を制御する制御システムに対して、本技術が適用されるようにしてもよい。
 図21は、本技術を適用した制御システムを構成するコントローラ111および端末装置112の機能構成例を示している。
 コントローラ111は、通信制御部171、動作制御部172、および表示制御部173から構成される。
 通信制御部171は、図示せぬ通信部を制御し、端末装置112との通信を行わせる。
 動作制御部172は、端末装置112の動作を制御するためのコマンドを生成することで、端末装置112の動作を制御する。また、動作制御部172は、端末装置112の動作モードを設定する動作モード設定部181を備える。
 表示制御部173は、図示せぬ表示部の表示を制御する。
 また、端末装置112は、通信制御部191、処理部192、および記録制御部193から構成される。
 通信制御部191は、図示せぬ通信部を制御し、コントローラ111との通信を行わせる。
 処理部192は、コントローラ111からのコマンドに基づいて、図示せぬ機能部の動作を制御する。
 記録制御部193は、図示せぬ機能部の動作により得られたデータの、図示せぬ記録部への記録を制御する。
 ここで、端末装置112が、GPS端末として構成される場合、コントローラ111の動作モード設定部181は、動作中の端末装置112それぞれの残り動作可能時間に関する情報に基づいて、端末装置112の動作モードとして、例えば、測位処理にかかる消費電力を抑える動作モードを設定する。
 また、端末装置112が、通信機能を備える携帯型ゲーム機器として構成される場合、コントローラ111の動作モード設定部181は、動作中の端末装置112それぞれの残り動作可能時間に関する情報に基づいて、端末装置112の動作モードとして、例えば、バックライトの発光にかかる消費電力を抑える動作モードを設定する。
 さらに、端末装置112が、飛行機構を備える飛行体(例えば複数のロータを有するドローンなど)として構成される場合、コントローラ111の動作モード設定部181は、動作中の端末装置112それぞれの残り動作可能時間に関する情報に基づいて、端末装置112の動作モードとして、例えば、飛行体に設けられたカメラ(図示せず)による撮影にかかる消費電力を抑える動作モードを設定する。また例えば、飛行体に設けられたカメラで録画されているライブビュー画像がコントローラ111に転送される際の転送レートを変更する。具体的には、例えば通常時には30fpsである転送レートを15fpsに変更するなど、転送レートをより低い値に設定する。
 さらにまた、端末装置112は、それぞれ異なるタイプの装置であってもよい。例えば3台の端末装置112が、それぞれ上述した、ユーザの体の各部位やユーザが運転する自転車の各箇所に装着されるカメラ、携帯型ゲーム機器、および、カメラを有する飛行体として構成されるものとする。これら3台が同時に動作する場合、コントローラ111の動作モード設定部181は、動作中の端末装置112それぞれの残り動作可能時間に関する情報に基づいて、端末装置112それぞれの消費電力を抑える動作モードとして、上述した動作モードを設定する。
 以上の構成によれば、1台の端末装置より先に他の端末装置のバッテリが切れないように、他の端末装置の動作モードが設定されるので、端末装置それぞれを協調して動作させることが可能となる。
 上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウェアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。
 図22は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。
 コンピュータにおいて、CPU901,ROM(Read Only Memory)902,RAM(Random Access Memory)903は、バス904により相互に接続されている。
 バス904には、さらに、入出力インタフェース905が接続されている。入出力インタフェース905には、入力部906、出力部907、記憶部908、通信部909、およびドライブ910が接続されている。
 入力部906は、キーボード、マウス、マイクロフォンなどよりなる。出力部907は、ディスプレイ、スピーカなどよりなる。記憶部908は、ハードディスクや不揮発性のメモリなどよりなる。通信部909は、ネットワークインタフェースなどよりなる。ドライブ910は、磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリなどのリムーバブル記録媒体911を駆動する。
 以上のように構成されるコンピュータでは、CPU901が、例えば、記憶部908に記憶されているプログラムを、入出力インタフェース905およびバス904を介して、RAM903にロードして実行することにより、上述した一連の処理が行われる。
 コンピュータ(CPU901)が実行するプログラムは、例えば、パッケージ記録媒体等としてのリムーバブル記録媒体911に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。
 コンピュータでは、プログラムは、リムーバブル記録媒体911をドライブ910に装着することにより、入出力インタフェース905を介して、記憶部908にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部909で受信し、記憶部908にインストールすることができる。その他、プログラムは、ROM902や記憶部908に、あらかじめインストールしておくことができる。
 なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
 また、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
 例えば、本技術は、1つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
 また、上述のフローチャートで説明した各ステップは、1つの装置で実行する他、複数の装置で分担して実行することができる。
 さらに、1つのステップに複数の処理が含まれる場合には、その1つのステップに含まれる複数の処理は、1つの装置で実行する他、複数の装置で分担して実行することができる。
 また、本技術は以下のような構成をとることができる。
(1)
 複数の装置の残り動作可能時間に関する情報を取得する取得部と、
 前記複数の装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定する設定部と
 を備える制御装置。
(2)
 前記装置は動画像を撮像し記録する録画機能を有し、
 前記設定部は、録画中の前記装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の録画モードを設定する
 (1)に記載の制御装置。
(3)
 前記取得部は、複数の前記装置の前記残り動作可能時間に関する情報として、複数の前記装置のバッテリ残量を取得し、
 前記設定部は、
  録画中の前記装置それぞれのバッテリ残量を用いて、前記装置それぞれの残り動作可能時間を算出し、
  算出した前記装置それぞれの前記残り動作可能時間に基づいて、前記複数の装置のうちの少なくとも1つの装置の前記録画モードを設定する
 (2)に記載の制御装置。
(4)
 前記設定部は、
  複数の前記装置のうちのメインとなる1の装置の残り動作可能時間と、他の装置の残り動作可能時間との差分を算出し、
  算出した前記差分に応じて、前記他の装置の前記録画モードを設定する
 (3)に記載の制御装置。
(5)
 前記設定部は、
  前記1の装置の残り動作可能時間および残り録画時間のうちの短い方と、前記他の装置の残り動作可能時間との差分を算出し、
  算出した前記差分に応じて、前記他の装置の前記録画モードを設定する
 (4)に記載の制御装置。
(6)
 前記設定部は、前記差分が大きいほど消費電力がより抑制されるような前記録画モードを、前記他の装置に対して設定する
 (4)または(5)に記載の制御装置。
(7)
 前記設定部は、複数の前記装置のうち最もバッテリ残量が多い前記装置を、前記1の装置に決定する
 (4)乃至(6)のいずれかに記載の制御装置。
(8)
 前記設定部は、前記装置それぞれの姿勢または位置に基づいて、前記1の装置を決定する
 (4)乃至(6)のいずれかに記載の制御装置。
(9)
 前記設定部は、前記装置それぞれにより録画されている動画像の内容に基づいて、前記1の装置を決定する
 (4)乃至(6)のいずれかに記載の制御装置。
(10)
 前記設定部は、前記1の装置を動的に決定する
 (4)乃至(9)のいずれかに記載の制御装置。
(11)
 前記装置それぞれにより録画されている動画像を1つの表示画面にリアルタイムに表示するよう制御する表示制御部をさらに備える
 (4)乃至(10)のいずれかに記載の制御装置。
(12)
 前記表示制御部は、前記装置それぞれのバッテリ残量を前記表示画面にさらに表示するよう制御する
 (11)に記載の制御装置。
(13)
 前記表示制御部は、前記1の装置により録画されている動画像を、前記他の装置により録画された動画像と異ならせて表示するよう制御する
 (11)または(12)に記載の制御装置。
(14)
 前記表示制御部は、前記他の装置に設定されている前記録画モードを表す情報を、前記他の装置により録画されている動画像の表示領域上に表示するよう制御する
 (11)乃至(13)のいずれかに記載の制御装置。
(15)
 前記表示制御部は、前記録画モードが変更された前記他の装置により録画されている動画像の表示領域を強調表示するよう制御する
 (11)乃至(14)のいずれかに記載の制御装置。
(16)
 前記表示制御部は、設定される前記録画モードにかかわらず、前記1の装置の前記残り動作可能時間経過前にバッテリ残量が0になる前記他の装置により録画されている動画像の表示領域上に、バッテリの交換を促す旨の警告を表示するよう制御する
 (11)乃至(15)のいずれかに記載の制御装置。
(17)
 前記取得部は、複数の前記装置の前記残り動作可能時間に関する情報として、複数の前記装置それぞれにおいてバッテリ残量を用いて算出された残り動作可能時間を取得し、
 前記設定部は、取得された前記装置それぞれの前記残り動作可能時間に基づいて、前記複数の装置のうちの少なくとも1つの装置の前記録画モードを設定する
 (2)に記載の制御装置。
(18)
 前記制御装置は動画像を撮像し記録する録画機能を有し、
 前記設定部は、録画中の前記制御装置自身および前記装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置および前記制御装置のうちの少なくとも1つの装置の録画モードを設定する
 (2)乃至(17)のいずれかに記載の制御装置。
(19)
 制御装置が、
 複数の装置の残り動作可能時間に関する情報を取得し、
 前記複数の装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定する
 ステップを含む制御方法。
(20)
 複数の装置のバッテリ残量を取得し、
 前記複数の装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定する
 ステップを含む処理をコンピュータに実行させるプログラム。
(21)
 複数の装置と、
  複数の装置の残り動作可能時間に関する情報を取得する取得部と、
  前記複数の装置それぞれの前記バッテリ残量に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定する設定部と
 を有する制御装置と
 を備える制御システム。
 11 コントローラ, 12-1乃至12-4,12 カメラ, 71 通信制御部, 72 録画制御部, 73 表示制御部, 81 録画モード設定部, 101 カメラ, 111 コントローラ, 112 カメラ, 172 録画制御部, 181 動作モード設定部

Claims (20)

  1.  複数の装置の残り動作可能時間に関する情報を取得する取得部と、
     前記複数の装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定する設定部と
     を備える制御装置。
  2.  前記装置は動画像を撮像し記録する録画機能を有し、
     前記設定部は、録画中の前記装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の録画モードを設定する
     請求項1に記載の制御装置。
  3.  前記取得部は、複数の前記装置の前記残り動作可能時間に関する情報として、複数の前記装置のバッテリ残量を取得し、
     前記設定部は、
      録画中の前記装置それぞれのバッテリ残量を用いて、前記装置それぞれの残り動作可能時間を算出し、
      算出した前記装置それぞれの前記残り動作可能時間に基づいて、前記複数の装置のうちの少なくとも1つの装置の前記録画モードを設定する
     請求項2に記載の制御装置。
  4.  前記設定部は、
      複数の前記装置のうちのメインとなる1の装置の残り動作可能時間と、他の装置の残り動作可能時間との差分を算出し、
      算出した前記差分に応じて、前記他の装置の前記録画モードを設定する
     請求項3に記載の制御装置。
  5.  前記設定部は、
      前記1の装置の残り動作可能時間および残り録画時間のうちの短い方と、前記他の装置の残り動作可能時間との差分を算出し、
      算出した前記差分に応じて、前記他の装置の前記録画モードを設定する
     請求項4に記載の制御装置。
  6.  前記設定部は、前記差分が大きいほど消費電力がより抑制されるような前記録画モードを、前記他の装置に対して設定する
     請求項4に記載の制御装置。
  7.  前記設定部は、複数の前記装置のうち最もバッテリ残量が多い前記装置を、前記1の装置に決定する
     請求項4に記載の制御装置。
  8.  前記設定部は、前記装置それぞれの姿勢または位置に基づいて、前記1の装置を決定する
     請求項4に記載の制御装置。
  9.  前記設定部は、前記装置それぞれにより録画されている動画像の内容に基づいて、前記1の装置を決定する
     請求項4に記載の制御装置。
  10.  前記設定部は、前記1の装置を動的に決定する
     請求項4に記載の制御装置。
  11.  前記装置それぞれにより録画されている動画像を1つの表示画面にリアルタイムに表示するよう制御する表示制御部をさらに備える
     請求項4に記載の制御装置。
  12.  前記表示制御部は、前記装置それぞれのバッテリ残量を前記表示画面にさらに表示するよう制御する
     請求項11に記載の制御装置。
  13.  前記表示制御部は、前記1の装置により録画されている動画像を、前記他の装置により録画された動画像と異ならせて表示するよう制御する
     請求項11に記載の制御装置。
  14.  前記表示制御部は、前記他の装置に設定されている前記録画モードを表す情報を、前記他の装置により録画されている動画像の表示領域上に表示するよう制御する
     請求項11に記載の制御装置。
  15.  前記表示制御部は、設定される前記録画モードにかかわらず、前記1の装置の前記残り動作可能時間経過前にバッテリ残量が0になる前記他の装置により録画されている動画像の表示領域上に、バッテリの交換を促す旨の警告を表示するよう制御する
     請求項11に記載の制御装置。
  16.  前記取得部は、複数の前記装置の前記残り動作可能時間に関する情報として、複数の前記装置それぞれにおいてバッテリ残量を用いて算出された残り動作可能時間を取得し、
     前記設定部は、取得された前記装置それぞれの前記残り動作可能時間に基づいて、前記複数の装置のうちの少なくとも1つの装置の前記録画モードを設定する
     請求項2に記載の制御装置。
  17.  前記制御装置は動画像を撮像し記録する録画機能を有し、
     前記設定部は、録画中の前記制御装置自身および前記装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置および前記制御装置のうちの少なくとも1つの装置の録画モードを設定する
     請求項2に記載の制御装置。
  18.  制御装置が、
     複数の装置の残り動作可能時間に関する情報を取得し、
     前記複数の装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定する
     ステップを含む制御方法。
  19.  複数の装置の残り動作可能時間に関する情報を取得し、
     前記複数の装置それぞれの前記残り動作可能時間に関する情報に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定する
     ステップを含む処理をコンピュータに実行させるプログラム。
  20.  複数の装置と、
      複数の装置の残り動作可能時間に関する情報を取得する取得部と、
      前記複数の装置それぞれの前記バッテリ残量に基づいて、前記複数の装置のうちの少なくとも1つの装置の動作モードを設定する設定部と
     を有する制御装置と
     を備える制御システム。
PCT/JP2015/069826 2014-07-22 2015-07-10 制御装置、制御方法、プログラム、および制御システム WO2016013409A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016535871A JP6610961B2 (ja) 2014-07-22 2015-07-10 制御装置、制御方法、プログラム、および制御システム
US15/323,456 US10070059B2 (en) 2014-07-22 2015-07-10 Control device, control method, and control system
US16/103,476 US10362227B2 (en) 2014-07-22 2018-08-14 Control device, control method, and control system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-148836 2014-07-22
JP2014148836 2014-07-22

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US15/323,456 A-371-Of-International US10070059B2 (en) 2014-07-22 2015-07-10 Control device, control method, and control system
US16/103,476 Continuation US10362227B2 (en) 2014-07-22 2018-08-14 Control device, control method, and control system

Publications (1)

Publication Number Publication Date
WO2016013409A1 true WO2016013409A1 (ja) 2016-01-28

Family

ID=55162938

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/069826 WO2016013409A1 (ja) 2014-07-22 2015-07-10 制御装置、制御方法、プログラム、および制御システム

Country Status (3)

Country Link
US (2) US10070059B2 (ja)
JP (1) JP6610961B2 (ja)
WO (1) WO2016013409A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018083942A1 (ja) * 2016-11-04 2018-05-11 ソニー株式会社 回路、基地局、方法及び記録媒体
CN108881706A (zh) * 2017-05-16 2018-11-23 北京三星通信技术研究有限公司 控制多媒体设备工作的方法及装置
WO2020026903A1 (ja) * 2018-07-31 2020-02-06 キヤノン株式会社 情報処理装置とその制御方法
JP2020025248A (ja) * 2018-07-31 2020-02-13 キヤノン株式会社 情報処理装置とその制御方法
JP2021005907A (ja) * 2020-10-15 2021-01-14 カシオ計算機株式会社 電子機器、データ通信方法、プログラム、及び撮影システム

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10070059B2 (en) * 2014-07-22 2018-09-04 Sony Corporation Control device, control method, and control system
KR102449670B1 (ko) 2018-01-16 2022-09-30 삼성전자주식회사 복수의 카메라를 이용하여 영상 데이터를 생성하는 방법 및 서버
US11123921B2 (en) 2018-11-02 2021-09-21 Fermi Research Alliance, Llc Method and system for in situ cross-linking of materials to produce three-dimensional features via electron beams from mobile accelerators
JP2020113974A (ja) * 2019-01-11 2020-07-27 株式会社リコー 撮像装置、方法およびプログラム
WO2020145212A1 (en) * 2019-01-11 2020-07-16 Ricoh Company, Ltd. Image capturing apparatus, image capturing method, and recording medium
EP3883235A1 (en) * 2020-03-17 2021-09-22 Aptiv Technologies Limited Camera control modules and methods
KR102588697B1 (ko) * 2020-11-26 2023-10-12 (주)비퍼플 Ai 기반의 얼굴 인식 장치 및 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002101166A (ja) * 2000-09-21 2002-04-05 Denso Corp 通信機器および通信システム
JP2005176135A (ja) * 2003-12-12 2005-06-30 Canon Inc 撮像装置
JP2013115670A (ja) * 2011-11-30 2013-06-10 Sony Corp 撮像装置、その制御方法およびプログラム
JP2014239318A (ja) * 2013-06-07 2014-12-18 カシオ計算機株式会社 カメラ、撮影制御プログラム及び撮影制御方法、並びにカメラシステム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6163816A (en) * 1997-08-29 2000-12-19 Flashpoint Technology, Inc. System and method for retrieving capability parameters in an electronic imaging device
JP2008187234A (ja) * 2007-01-26 2008-08-14 Canon Inc 電子撮像装置
JP2010232908A (ja) 2009-03-26 2010-10-14 Fujifilm Corp 全方位撮像装置及びその駆動制御方法
JP2011055308A (ja) * 2009-09-02 2011-03-17 Ricoh Co Ltd 撮像装置
JP2013031121A (ja) * 2011-07-29 2013-02-07 Sanyo Electric Co Ltd 電子機器
KR102104410B1 (ko) * 2014-01-20 2020-04-27 한화테크윈 주식회사 카메라 프로파일 설정 방법 및 영상 수신 장치
US10070059B2 (en) * 2014-07-22 2018-09-04 Sony Corporation Control device, control method, and control system
JP6372788B2 (ja) * 2014-08-26 2018-08-15 カシオ計算機株式会社 撮像装置、撮像システム、撮像方法及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002101166A (ja) * 2000-09-21 2002-04-05 Denso Corp 通信機器および通信システム
JP2005176135A (ja) * 2003-12-12 2005-06-30 Canon Inc 撮像装置
JP2013115670A (ja) * 2011-11-30 2013-06-10 Sony Corp 撮像装置、その制御方法およびプログラム
JP2014239318A (ja) * 2013-06-07 2014-12-18 カシオ計算機株式会社 カメラ、撮影制御プログラム及び撮影制御方法、並びにカメラシステム

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018083942A1 (ja) * 2016-11-04 2018-05-11 ソニー株式会社 回路、基地局、方法及び記録媒体
CN109891476A (zh) * 2016-11-04 2019-06-14 索尼公司 电路、基站、方法和记录介质
US11292602B2 (en) 2016-11-04 2022-04-05 Sony Corporation Circuit, base station, method, and recording medium
CN108881706A (zh) * 2017-05-16 2018-11-23 北京三星通信技术研究有限公司 控制多媒体设备工作的方法及装置
CN108881706B (zh) * 2017-05-16 2023-10-10 北京三星通信技术研究有限公司 控制多媒体设备工作的方法及装置
WO2020026903A1 (ja) * 2018-07-31 2020-02-06 キヤノン株式会社 情報処理装置とその制御方法
JP2020025248A (ja) * 2018-07-31 2020-02-13 キヤノン株式会社 情報処理装置とその制御方法
JP7366594B2 (ja) 2018-07-31 2023-10-23 キヤノン株式会社 情報処理装置とその制御方法
US11843846B2 (en) 2018-07-31 2023-12-12 Canon Kabushiki Kaisha Information processing apparatus and control method therefor
JP2021005907A (ja) * 2020-10-15 2021-01-14 カシオ計算機株式会社 電子機器、データ通信方法、プログラム、及び撮影システム

Also Published As

Publication number Publication date
US10362227B2 (en) 2019-07-23
US20170150050A1 (en) 2017-05-25
JP6610961B2 (ja) 2019-11-27
US20190007614A1 (en) 2019-01-03
JPWO2016013409A1 (ja) 2017-04-27
US10070059B2 (en) 2018-09-04

Similar Documents

Publication Publication Date Title
JP6610961B2 (ja) 制御装置、制御方法、プログラム、および制御システム
US10516824B2 (en) Apparatus and method for processing image received through a plurality of cameras
US10638046B2 (en) Wearable device, control apparatus, photographing control method and automatic imaging apparatus
US11024083B2 (en) Server, user terminal device, and control method therefor
US10958820B2 (en) Intelligent interface for interchangeable sensors
US10819912B2 (en) Apparatus and method for processing image received through a plurality of cameras
EP3522542B1 (en) Switching between multidirectional and limited viewport video content
CN110213616B (zh) 视频提供方法、获取方法、装置及设备
US9001190B2 (en) Computer vision system and method using a depth sensor
US20200267328A1 (en) Device and method for processing images received through plurality of cameras
KR102658707B1 (ko) 화상 처리 장치 및 방법, 및 화상 처리 시스템
WO2016031105A1 (ja) 情報処理装置、情報処理方法、及びプログラム
US10306211B2 (en) Remote control of pivotable stereoscopic camera
US20200275031A1 (en) Apparatus and method for processing image
US11618586B2 (en) Detection and signaling of conditions of an unmanned aerial vehicle
US20200278602A1 (en) Audio signal processing device and method based on camera operation
JP6991733B2 (ja) 制御装置、制御方法、及びプログラム
KR102512839B1 (ko) 외부 장치의 자세 조정을 통해 복수의 카메라들을 이용하여 이미지를 획득하는 전자 장치 및 방법
CN104811592A (zh) 摄像装置和摄像控制方法
US20190146883A1 (en) Information processing apparatus, information processing system, image pickup device, head mounted display, and information processing method
JP2014520409A (ja) マルチビュービデオコンテンツを符号化するための方法及びシステム
WO2019142659A1 (ja) 情報処理装置および方法、並びにプログラム
CN105210362B (zh) 图像调整设备、图像调整方法和图像捕获设备
WO2018232584A1 (zh) 无人机及其控制方法、控制终端及其控制方法
JP2014236313A (ja) 表示制御装置、表示制御システム、及び、プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15824190

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016535871

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15323456

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15824190

Country of ref document: EP

Kind code of ref document: A1