CN111670548B - 提供补充下行链路的通信***、显示控制装置及通信终端 - Google Patents

提供补充下行链路的通信***、显示控制装置及通信终端 Download PDF

Info

Publication number
CN111670548B
CN111670548B CN201880088271.3A CN201880088271A CN111670548B CN 111670548 B CN111670548 B CN 111670548B CN 201880088271 A CN201880088271 A CN 201880088271A CN 111670548 B CN111670548 B CN 111670548B
Authority
CN
China
Prior art keywords
unit
image
communication
display
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880088271.3A
Other languages
English (en)
Other versions
CN111670548A (zh
Inventor
筒井多圭志
矢吹步
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SoftBank Corp
Original Assignee
SoftBank Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SoftBank Corp filed Critical SoftBank Corp
Publication of CN111670548A publication Critical patent/CN111670548A/zh
Application granted granted Critical
Publication of CN111670548B publication Critical patent/CN111670548B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B10/00—Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/11—Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
    • H04B10/114—Indoor or close-range type systems
    • H04B10/116—Visible light communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B7/00—Radio transmission systems, i.e. using radiation field
    • H04B7/02—Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas
    • H04B7/04—Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas
    • H04B7/0413—MIMO systems
    • H04B7/0456—Selection of precoding matrices or codebooks, e.g. using matrices antenna weighting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635—HDMI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191—Testing thereof
    • H04N9/3194—Testing thereof including sensor feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W72/00—Local resource management
    • H04W72/20—Control channels or signalling for resource management
    • H04W72/23—Control channels or signalling for resource management in the downlink direction of a wireless link, i.e. towards a terminal

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Optical Communication System (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

对应于增大的通信需求，要求一种廉价且高效地提供大容量的下行通信的方法。因此，提供一种通信***，其提供补充下行链路且提供多播通信，并具备使显示部显示影像的显示控制装置、和具有直接拍摄显示部显示的影像、或者拍摄投影至墙面等上或反射的影像的摄像部的通信终端，显示控制装置具有：影像获取部，获取显示对象的影像；区域指定部，指定影像获取部获取到的影像中不发生变化的区域或者变化量比预定的阈值低的区域；影像生成部，生成将发送数据作为光通信信号编码至通过区域指定部所指定的区域而成的编码影像；以及显示控制部，使显示部显示编码影像，通信终端具有：区域识别部，识别通过摄像部拍摄到的影像中编码有发送数据的区域；解码部，从通过区域识别部识别出的区域解码发送数据；以及使用光通信以外的方式(WiFi、移动数据通信等方式)对基于上述光通信的补充下行链路的控制信号进行通信的机构。

Description

提供补充下行链路的通信***、显示控制装置及通信终端
技术领域
本发明涉及通信***、显示控制装置、通信终端以及计算机可读存储介质。
背景技术
已知有一种可见光通信技术，其将发送数据编码成由图像显示装置显示的显示图像(例如参照专利文献1)。
[现有技术文献]
[专利文献]
[专利文献1]国际公开第2014/103329号
发明内容
发明要解决的技术问题
将终端等附带的相机用作接收器，将作为设置于室内、室外的显示器装置、投影仪、或者光雕投影用的投影仪、数字标牌、或者利用了它们的照明设备等而进行了重新定义的装置(使顶棚规格的面板为将显示器装置用作照明器具的面板且是兼有本发明中使用的补充下行链路的照明面板的装置)用作发送器，实现光下行通信，实现终端等的辅助下行链路，使得能够进行高效的高速通信。
PureLiFi试图使用太难的高速激光实现超高速千兆位通信，但没必要这样做，由于通常的显示面板和通常的CCD搭载有大量像素，因此，无需开发新的设备就能实现超过千兆位的通信速度，并且其能足够高效地显示、拍摄动态视频图像。至于USB3.1的显示器、相机，容易实现10Gbps的传输速度。不使用昂贵的元件和尖端技术而直接使用上述现有设备这一点是本发明的特征。与至今在通信***中采用的空分复用(SDMA)不同，在LOS(Line ofsight：视距)彼此间交叉复用空间。自由无限地复用这一点也是本发明的特征。
一般性公开
根据本发明的第一方面，提供一种通信***，其具备：显示控制装置，使显示部显示影像；以及通信终端，具有摄像部，所述摄像部拍摄由显示部显示的影像。显示控制装置可以具有获取显示对象的影像的影像获取部。显示控制装置可以具有区域指定部，指定影像获取部获取到的影像中不发生变化的区域或者变化量比预定的阈值低的区域。显示控制装置可以具有影像生成部，生成将发送数据作为光通信信号编码至通过区域指定部所指定的区域而成的编码影像。显示控制装置可以具有使显示部显示编码影像的显示控制部。通信终端可以具有区域识别部，识别通过摄像部拍摄到的影像中编码有发送数据的区域。通信终端可以具有解码部，从通过区域识别部识别出的区域解码发送数据。
所述摄像部能够以所指定的速率记录动态视频图像。摄像(拍摄)可以不是静态图像而是60fps等的动态视频图像。也可以使摄像部的记录速率与显示部的显示速率同步。在以同步为前提的***的情况下，当同步偏离时记录以相机拍摄电视那样的条纹图案(噪声)，在解码时出现错误。另外，影像投影装置、影像获取部最好与每个其场所的交流同步，在零交叉时机获取影像。(若50Hz则100Hz，若60Hz则120Hz)。
所述区域指定部可以指定所述影像获取部获取到的所述影像中在预定期间内亮度和颜色信息不发生变化的区域或者变化量比预定的阈值低的区域。所述影像生成部可以生成将区域信息作为光通信信号编码至编码有所述发送数据的区域以外的区域而成的所述编码影像，所述区域信息指示编码有所述发送数据的区域，所述区域识别部可以识别通过所述摄像部拍摄到的影像中编码有所述区域信息的区域，从该区域解码所述区域信息，并将所述区域信息所示的区域识别为编码有所述发送数据的区域。所述影像生成部可以生成将识别所述通信终端的终端识别信息作为光通信信号编码至编码有所述发送数据的区域以外的区域而成的所述编码影像。所述影像生成部可以生成将识别所述显示装置的显示装置识别信息作为光通信信号编码至编码有所述发送数据的区域以外的区域而成的所述编码影像。
所述通信终端可以具有：测量部，测量所述摄像部拍摄的所述影像的接收亮度电平和接收SNR(Signal to Noise Ratio：信噪比)；以及测量结果发送部，将所述测量部的测量结果发送至所述显示控制装置，所述显示控制装置可以具有：测量结果接收部，接收所述测量结果；以及亮度电平调整部，基于所述测量结果调整所述显示部的显示的亮度电平。所述影像获取部可以获取所述显示部的屏幕保护影像，所述影像生成部可以生成将发送数据编码至所述屏幕保护影像的指定区域而成的编码影像，所述显示控制部可以使所述编码影像作为屏幕保护显示于所述显示部，所述测量部可以基于通过所述解码部解码出的发送数据测量所述接收亮度电平和所述接收SNR。所述测量结果发送部可以不使用光通信将所述测量结果发送至所述显示控制装置。
所述通信终端可以具有：摄像转换部，对通过所述显示控制部所显示的显示影像实施仿射变换，将显示影像转换为正四边形；以及指向性调整部，基于所述转换时的信息调整所述摄像部的摄像的指向性。所述显示控制装置可以具有信息接收部，所述信息接收部从所述通信终端接收与通过所述摄像部拍摄到的影像相关的拍摄影像信息，所述影像生成部可以基于所述拍摄影像信息生成所述编码影像。所述影像生成部可以基于所述拍摄影像信息变更分配所述发送数据的各信息的像素数。所述拍摄影像信息可以指示由所述显示部显示着的影像中无法由所述摄像部拍摄的区域，所述影像生成部可以生成将发送数据作为光通信信号编码至从通过所述区域指定部所指定的区域中排除无法由所述摄像部拍摄的区域后的区域而成的编码影像。
所述显示部可以是投影仪，所述摄像部可以拍摄通过所述投影仪投影至投影面上的光。所述影像生成部可以生成将发送数据作为光通信信号编码至内容不发生变化的区域而成的编码影像。所述通信终端可以具有通知数据发送部，在无法通过所述摄像部拍摄所述影像的情况下，所述通知数据发送部向所述显示控制装置发送通知数据，所述影像生成部可以在接收到所述通知数据的情况下，生成通过所述影像整体的亮度调制将所述发送数据作为光通信信号进行编码而成的编码影像。所述显示控制装置可以具有将通过无线基站的基带装置将所述发送数据转换为IQ矢量信号后的信号从所述基带装置发送的CPRI(Common Public Radio Interface：通用公共无线接口)接口、将影像信号传输至所述显示部的接口(HDMI(注册商标)(High-Definition Multimedia Interface：高清多媒体接口)等)、从所述CPRI接口上的IQ信号(由复数字信号的同相(In-phase)和正交(Quadrature)成分构成的基带信号)转换为RGBI信号并进行发送的电路。所述无线基站的基带装置可以具有将CPRI信号转换为HDMI(注册商标)并发送的功能，所述显示控制装置可以从HDMI(注册商标)接口发送来自所述基带装置的IQ信号。
在所述无线基站的基带装置不具有HDMI接口时，可以在所述基带装置与所述显示控制装置之间经由将CPRI信号转换为HDMI(注册商标)的装置。
根据本发明的第二方面，提供一种显示控制装置。显示控制装置可以具备获取显示对象的影像的影像获取部。显示控制装置可以具备区域指定部，指定影像获取部获取到的影像中不发生变化的区域或者变化量比预定的阈值低的区域。显示控制装置可以具备影像生成部，生成将发送数据作为光通信信号编码至通过区域指定部所指定的区域而成的编码影像。显示控制装置可以具备使显示部显示编码影像的显示控制部。
根据本发明的第三方面，提供一种用于使计算机作为上述显示控制装置发挥功能的程序。
根据本发明的第四方面，提供一种通信终端。通信终端可以具备区域信息获取部，获取区域信息，所述区域信息指示通过显示装置显示的影像中编码有作为光通信信号的发送数据的区域。通信终端可以具备区域识别部，基于区域信息在通过摄像部拍摄到的影像中识别编码有发送数据的区域。通信终端可以具备从通过区域识别部识别出的区域解码发送数据的解码部。
根据本发明的第五方面，提供一种用于使计算机作为上述通信终端发挥功能的程序。
需要指出，上述发明内容部分并未列举出本发明的全部必要特征。另外，这些特征组的变形也可以构成发明。
附图说明
图1简要地示出通信***10的一例。
图2简要地示出显示装置100及通信终端200的构成例。
图3简要地示出通信***10的另一例。
图4简要地示出显示装置100及通信终端200的构成例。
图5简要地示出STB101与BBU103的连接关系。
图6简要地示出显示装置100的功能构成的一例。
图7简要地示出通信终端200的功能构成的一例。
图8简要地示出显示装置100的显示例。
图9简要地示出显示装置100的显示例。
图10简要地示出通信终端200对拍摄影像的显示例。
图11简要地示出通信终端200对拍摄影像的显示例。
图12简要地示出显示装置100显示的同步信号410及调用信号420的一例。
图13简要地示出通信阶段中的显示装置100的显示例。
图14简要地示出通信阶段中的显示装置100的显示例。
图15简要地示出投影影像108的一例。
图16简要地示出通信开始的控制消息序列(示例)。
图17简要地示出显示装置100侧的通信开始的流程图(示例)。
图18简要地示出显示装置100侧的通信期间的流程图(示例)。
图19简要地示出通信终端200侧的通信开始的流程图(示例)。
图20简要地示出通信终端200侧的通信期间的流程图(示例)。
图21简要地示出通信期间中的重送序列(示例)。
图22简要地示出通信结束的流程图。
图23简要地示出休眠转移的流程图。
图24简要地示出切换的流程图。
图25简要地示出机顶盒(Set Top Box)内部框图(示例)。
图26简要地示出机顶盒内部动作流程图(示例)。
图27简要地示出发送分辨率确定的流程图。
图28简要地示出数据重叠位置确定的流程图。
图29简要地示出数据编码的算法。
图30简要地示出与发送光的白噪声化相关的算法。
图31示出主要的实施例1(采用用到红外线光源的DLP的例子)。
图32示出主要的实施例2(办公室的天花板照明)。
图33示出主要的实施例3(拱顶球场的顶棚)。
图34示出主要的实施例3.1(拱顶球场的顶棚)。
图35示出主要的实施例3.1(拱顶球场的顶棚)。
图36示出主要的实施例4(拱顶球场的无人机相机)。
图37示出主要的实施例5(多个相机的接收)。
图38示出主要的实施例6(电机驱动相机)。
图39示出主要的实施例7(鱼眼镜头投影仪)。
图40简要地示出作为通信终端200发挥作用的计算机900的硬件构成的一例。
具体实施方式
以下，通过发明的实施方式对本发明进行说明，但以下的实施方式并不限定权利要求书所涉及的发明。另外，实施方式中说明的特征的组合并非全部都是发明的解决方案所必须的。
图1简要地示出了通信***10的一例。通信***10具备显示装置100和通信终端200。
显示装置100和通信终端200执行所谓的光通信。例如，显示装置100生成并显示将发送数据作为光通信信号编码至显示对象的影像而成的编码影像，通信终端200拍摄由显示装置100所显示的影像，并对光通信信号进行解码而获取发送数据。作为通信***10所利用的光通信方式的一例，可以举出基于亮度调制或RGB调制的方式，但并不限于此，可以使用任意的方式。
显示装置100所显示的影像可以是任意的影像，显示装置100可以是任意的显示设备。作为显示装置100的例子，可以举出电视、PC(Personal Computer：个人计算机)等显示器、以及数字标牌等。另外，作为显示装置100的例子，还可以举出以照明为主要目的且也能够显示影像的照明装置。
显示装置100可以是显示控制装置的一例。显示装置100的整体可以是显示控制装置的一例。另外，显示装置100的一部分也可以是显示控制装置的一例。例如，显示装置100中的显示部以外的部分也可以是显示控制装置的一例。作为具体例，显示装置100中的模块和芯片等可以是显示控制装置的一例。
通信终端200只要具有摄像部和通信功能，则也可以为任意的终端。作为通信终端200的例子，可以举出智能手机、平板终端以及HMD(Head Mount Display：头戴式显示器)等。
本实施方式涉及的显示装置100例如指定显示对象的影像中亮度和颜色信息在预定的期间未发生变化的区域或者变化量比预定的阈值低的区域等，生成并显示将发送数据作为光通信信号编码至所指定的区域而成的编码影像。
这样，通过将发送数据编码至影像中在预定期间内亮度和颜色信息不发生变化的区域或者变化量比预定的阈值低的区域，从而与用到显示装置的现有的光通信相比，能够提高通信吞吐量。在现有的光通信中，由于只不过是将发送数据编码到显示影像，因此，空间分辨率低，无法得到足够的吞吐量，仅能够发送URL等数据量少的发送数据。相对于此，根据本实施方式涉及的显示装置100，由于在空间上分割使用影像中信息熵的变化量少的区域，因而能够高效地得到足够高速的吞吐量。
另外，在本实施方式涉及的通信***10中，可以通过经由网络50的通信实现显示装置100与通信终端200之间的所谓通信控制。此时，显示装置100和通信终端200可以经由网络50与管理装置300进行通信。
网络50可以是任意的网络，作为经由网络50的通信方式，例如可以举例示出3G(3rd Generation：第三代)通信方式、LTE(Long Term Evolution：长期演进)通信方式、4G(4th Generation：***)通信方式、5G(5th Generation：第五代)通信方式等移动通信方式、以及WiFi(注册商标)、ADSL、包含线缆调制解调器等的因特网通信技术、LPWA(包括LoRa、NB-IoT、eMTC)等。
在通信***10中，例如通信终端200将识别自身的终端识别信息经由管理装置300发送至显示装置100，显示装置100显示使用该识别信息与发送数据一起编码而成的编码影像。通信终端200通过使用自身持有的终端识别信息对发送数据进行解码，从而能够仅在显示装置100与特定的通信终端200之间执行光通信，能够实现以现有的光通信所无法实现的单播服务。
图2简要地示出图1所示的显示装置100和通信终端200的构成例。在图2所示的例子中，显示装置100具备STB(Set Top Box：机顶盒)101、计算机102、BBU(Base Band Unit：基带单元)103以及显示器104。另外，通信终端200具备CMOS(Complementary MOS：互补金属氧化物半导体)传感器201、CPU202、显示器203以及通信调制解调器204。
STB101从计算机102获取显示对象的影像。另外，STB101从BBU103获取发送数据。BBU103例如可以经由网络50从任意的终端等接收要从显示装置100发送至通信终端200的发送数据，并发送至STB101。
STB101指定从计算机102获取到的影像中在预定期间内亮度和颜色信息不发生变化的区域或者变化量比预定的阈值低的区域。然后，STB101生成将表示发送数据的区域的区域信息作为光通信信号编码至所指定的区域内的区域，并将从BBU103获取到的发送数据作为光通信信号编码至由上述区域信息所示的区域而成的编码影像，将其显示于显示器104。
CMOS传感器201拍摄显示器104中显示的影像。CPU202从CMOS传感器201获取该影像，分离为影像数据和通信解码用影像，并将影像数据发送至显示器203，将通信解码用影像发送至通信调制解调器204。显示器203显示影像数据。通信调制解调器204对编码而得的区域信息进行解码，并使用该区域信息对发送数据进行解码。
图3简要地示出通信***10的另一例。在此，主要针对与图1的不同点进行说明。
图3中的显示装置100投影影像。将显示装置100投影的影像表述为投影影像108。显示装置100所显示的影像可以是任意的影像或基于红外线的不可见影像，显示装置100可以是任意的显示设备。作为显示装置100的例子，可以举出投影仪、光雕投影以及数字标牌等。另外，作为显示装置100的例子，还可以举出以照明为主要目的且也能够显示影像的照明装置。
图4简要地示出图3所示的显示装置100和通信终端200的构成例。在此，主要针对与图2的不同点进行说明。
在图4所示的例子中，显示装置100具备STB101、计算机102、BBU103以及投影仪105。STB101从计算机102获取显示对象的影像。另外，STB101从BBU103获取发送数据。
STB101指定从计算机102获取到的影像中在预定期间内亮度和颜色信息不发生变化的区域或者变化量比预定的阈值低的区域。然后，STB101生成将表示所指定的区域的区域信息作为光通信信号编码至所指定的区域内的区域，并将从BBU103获取到的发送数据作为光通信信号编码至所指定的区域而成的编码影像，将其显示于投影仪105。
CMOS传感器201拍摄由投影仪105所投影的投影影像108。影像的投影对象可以是任意的场所，例如可以投影至大厦等建筑物的墙面上。CPU202从CMOS传感器201获取该影像，分离为影像数据和通信解码用影像，并将影像数据发送至显示器203，将通信解码用影像发送至通信调制解调器204。显示器203显示影像数据。通信调制解调器204对编码而得的区域信息进行解码，并使用该区域信息对发送数据进行解码。投影仪105发挥效果主要是在夜间。
图5简要地示出STB101与BBU103的连接关系。STB101与BBU103经由转换器106连接。STB101与转换器106经由HDMI进行通信。转换器106与BBU103经由CPRI进行通信。
图6简要地示出显示装置100的功能构成的一例。显示装置100具备信息接收部112、发送数据获取部114、影像获取部116、区域指定部118、影像生成部120、显示控制部122、测量结果接收部124以及亮度电平调整部126。需要指出，显示装置100并非必须具备这些所有构成。
信息接收部112接收各种信息。信息接收部112可以经由网络50接收信息。信息接收部112例如经由网络50从管理装置300接收关于通信控制的信息。信息接收部112例如从管理装置300接收识别通信对方的通信终端200的终端识别信息。另外，信息接收部112例如经由网络50接收要发送至通信终端200的发送数据。
显示装置100也可以通过光通信将终端识别信息通知给通信终端200。
发送数据获取部114获取要发送至通信终端200的发送数据。发送数据获取部114可以读出存储于显示装置100的存储器中的发送数据。另外，发送数据获取部114可以从信息接收部112获取信息接收部112接收到的发送数据。
影像获取部116获取显示对象的影像。影像获取部116可以读出存储于显示装置100的存储器中的影像。影像获取部116例如从计算机102获取影像。影像获取部116也可以获取屏幕保护影像作为显示对象的影像。
区域指定部118指定影像获取部116所获取到的影像中在预定期间内亮度和颜色信息不发生变化的区域或者变化量比预定的阈值低的区域。区域指定部118例如指定影像中不发生变化的区域。区域指定部118可以指定影像中在预定期间内亮度和颜色信息不发生变化的区域。另外，区域指定部118例如指定影像中变化量比预定的阈值低的区域。区域指定部118可以指定影像中在预定的期间内亮度和颜色信息的变化量比预定的阈值低的区域。预定的期间可以能够进行变更。另外，预定的阈值可以能够进行变更。
影像生成部120生成将各种信息编码至由影像获取部116所获取到的影像而成的编码影像。例如，影像生成部120生成将发送数据获取部114所获取到的发送数据作为光通信信号编码至区域指定部118所指定的区域而成的编码影像。影像生成部120在影像获取部116获取到屏幕保护影像的情况下，可以生成将控制信号编码至屏幕保护影像中由区域指定部118所指定的区域而成的编码影像。控制信号可以是在通信终端200中测量接收亮度电平和接收SNR(Signal to Noise Ratio：信噪比)时使用的信号。
另外，例如影像生成部120生成将指示编码有发送数据的区域的区域信息作为光通信信号进行编码而成的编码影像。影像生成部120可以生成将区域信息作为光通信信号编码至编码有发送数据的区域以外的区域而成的编码影像。
另外，例如影像生成部120生成将识别通信终端200的终端识别信息作为光通信信号进行编码而成的编码影像。影像生成部120可以生成将终端识别信息作为光通信信号编码至编码有发送数据的区域以外的区域而成的编码影像。
另外，例如影像生成部120生成将识别显示装置100的显示装置识别信息作为光通信信号进行编码而成的编码影像。显示装置识别信息可以是显示部识别信息的一例。影像生成部120可以生成将显示装置识别信息作为光通信信号编码至编码有发送数据的区域以外的区域而成的编码影像。
影像生成部120也可以生成将各种信息编码至整个影像不发生变化的无变化影像而成的编码影像。
显示控制部122使显示部显示影像生成部120所生成的编码影像。作为显示部的例子，可以举出显示器104和投影仪105。显示控制部122可以使显示器104显示编码影像。另外，显示控制部122可以使投影仪105显示编码影像。在通过影像生成部120生成了将控制信号编码至屏幕保护影像中由区域指定部118所指定的区域而成的编码影像的情况下，显示控制部122可以使该编码影像作为屏幕保护显示于显示部。
测量结果接收部124从通信终端200接收通信终端200对通过显示控制部122所显示的影像进行拍摄、测量而得到的接收亮度电平和接收SNR。
亮度电平调整部126基于测量结果接收部124接收到的测量结果调整显示控制部122控制的显示部的显示的亮度电平。
图7简要地示出通信终端200的功能构成的一例。通信终端200具备摄像部212、图像处理部214、信息通信部216、解码部218、测量部220、测量结果发送部222、位置姿势获取部224以及指向性调整部226。需要指出，通信终端200并非必须具备这些所有构成。
图像处理部214通过仿射变换等方法对摄像部212所拍摄到的图像进行图像处理。图像处理部214可以对由摄像部212拍摄到的、通过显示控制部122所显示的影像进行处理。
图像处理部214可以对作为光通信信号编码至影像的区域信息进行解码，获取区域信息。图像处理部214可以使用区域信息识别摄像部212所拍摄到的影像中编码有发送数据的区域。图像处理部214可以是区域识别部的一例。
通信终端200可以经由网络50向管理装置300发送终端识别信息，管理装置300可以经由网络50向显示装置100发送显示装置100的通信对方即通信终端200的终端识别信息。该终端识别信息也可以从显示装置100经由光通信通知给通信终端。另外，在从管理装置300新发行终端识别信息的情况下，通信终端200可以经由网络50获取上述终端识别信息。
另外，图像处理部214可以使用终端识别信息对作为光通信信号编码至影像的发送数据进行解码。由此，通信终端200仅在被编码至影像的发送数据为发往本终端的数据时才能正常地解码。
显示装置100可以具有生成作为通信对方的通信终端200各不相同的码，并经由光通信发送至通信终端200的功能。
显示装置100可以使用作为通信对方的通信终端200各不相同的码执行发送数据的加扰。
图像处理部214可以使用从显示装置发送来的每个通信终端各不相同的码，执行经显示装置100加扰的发送数据的解扰。
另外，图像处理部214可以对作为光通信信号编码至影像的显示装置识别信息进行解码，获取显示装置识别信息。由此，通信终端200能够识别由多个显示装置100发送的发送数据。
图像处理部214可以对摄像部212拍摄到的影像进行解析，将与该影像相关的拍摄影像信息发送至信息通信部216。信息通信部216可以按照图像处理部214的指示，将拍摄影像信息发送至显示装置100和管理装置300等。
拍摄影像信息例如指示通过显示控制部122显示着的影像中根据显示装置100与通信终端200之间的传输路径的状况而通信终端200无法拍摄的区域。例如，拍摄影像信息指示通过显示控制部122显示着的影像中因为显示装置100与通信终端200之间存在障碍物等而通信终端200无法拍摄的区域。在显示装置100接收到该拍摄影像信息的情况下，影像生成部120可以生成将发送数据作为光通信信号编码至从通过区域指定部118所指定的区域中排除该拍摄影像信息所示的区域后的区域而成的编码影像。
图像处理部214例如在显示装置100与通信终端200的距离远而无法识别作为光通信信号被编码至影像的发送数据等的情况下，可以使信息通信部216将表示该情况的拍摄影像信息经由网络50发送给管理装置300和显示装置100。在显示装置100接收到该拍摄影像信息的情况下，影像生成部120可以变更分配发送数据的各信息的像素数。例如，影像生成部120在先前将发送数据的各信息分配给一个像素的情况下，与该拍摄影像信息的接收相应地将发送数据的各信息分配给四个像素等更多的像素。
另外，图像处理部214例如在显示装置100与通信终端200的距离近而就光通信信号编码至影像而言，即使提高分辨率也能够识别的情况下，可以使信息通信部216将表示该情况的拍摄影像信息经由网络50发送给管理装置300和显示装置100。在显示装置100接收到该拍摄影像信息的情况下，影像生成部120可以变更分配发送数据的各信息的像素数。例如，影像生成部120在先前将发送数据的各信息分配给四个像素的情况下，与该拍摄影像信息的接收相应地将发送数据的各信息分配给一个像素等更少的像素。
图像处理部214在无法通过摄像部212拍摄通过显示控制部122正在显示的影像的情况下，可以使信息通信部216发送通知该情况的通知数据。图像处理部214可以使通知数据发送给显示装置100。信息通信部216可以是通知数据发送部的一例。在显示装置100接收到通知数据的情况下，影像生成部120可以生成通过影像整体的亮度调制将发送数据获取部114获取到的发送数据作为光通信信号进行编码而成的编码影像。由此，即使在通信终端200无法直接拍摄显示装置100显示的影像的情况下，如果能够间接地拍摄显示影像的光，便能够实现通信。
解码部218从通过图像处理部214识别出的、编码有发送数据的区域解码发送数据。解码部218解码后的发送数据可以存储在通信终端200的存储器中。
测量部220测量摄像部212拍摄的影像的接收亮度电平和接收SNR。测量部220例如可以使用解码部218解码得到的控制信号从通过显示控制部122所显示的屏幕保护影像测量接收亮度电平和接收SNR。
测量结果发送部222将测量部220的测量结果发送至显示装置100。测量结果发送部222可以不使用光通信而将测量结果发送至显示装置100。测量结果发送部222可以将测量部220的测量结果经由管理装置300发送至显示装置100。在测量结果接收部124接收到测量结果发送部222发送来的测量结果的情况下，亮度电平调整部126可以使用该测量结果将亮度电平调整为所需最低限度的亮度电平。
摄像部212也可以是针孔照相机或自动调焦照相机。另外，通信终端200的指向性调整部也可以具有变焦机构、常平架机构以及三维摇头机构。
在通过摄像部212拍摄到的影像中用于通信的区域小、且通信终端200被固定的情况下，可以使用上述三维摇头机构或常平架机构，并使用变焦机构来扩大用于通信的区域，减少分配发送数据的各信息的像素。在使用变焦机构放大显示显示装置100的情况下，显示装置100容易相对于通信终端200等的抖动脱离拍摄到的影像的范围，因此，基于搭载于通信终端200的IMU(陀螺仪装置)的信息，在通信终端200被固定且稳定的情况下，指向性调整部226可以使用三维摇头机构扩大通过摄像部212拍摄的显示装置100。
在指向性调整部226具有变焦机构而不具有三维摇头机构、常平架机构的情况下，当通信终端200产生抖动时，指向性调整部226进行拉远(zoom out)，调整为显示装置100稳定地包含在通过摄像部212拍摄的影像的范围中。此时，通过增多用于显示装置100的通信的像素，可以使从显示装置100发送的发送数据的解码稳定。
通过摄像部212拍摄到的影像信号可以转发到解码部218。解码部218的处理可以利用基带IC进行。解码部218根据通过摄像部212拍摄到的影像信号实施例如参考信号的读出、仿射变换、锚信号的鉴别和解调、数据信号位置的鉴别和解调。
解码部218的处理也可以利用DSP实施。被转发了影像信号的DSP实施例如参考信号的鉴别、仿射变换、参考信号的读出、影像亮度的均衡、锚信号的鉴别和基带化、数据信号的鉴别和基带化等。DSP可以在实施了上述解码处理之后，将接收信号数据转发至基带IC。
位置姿势获取部224获取通信终端200的朝向和位置相对于显示装置100显示的影像的相对角度。在显示装置100使显示器104显示影像的情况下，位置姿势获取部224可以获取通信终端200的朝向和位置相对于显示器104的相对角度。在显示装置100使投影仪105显示影像的情况下，位置姿势获取部224可以获取通信终端200的朝向和位置相对于投影影像108的相对角度。
指向性调整部226基于位置姿势获取部224所获取到的朝向和位置的相对角度，调整摄像部212的拍摄的指向性。指向性调整部226可以控制摄像部212的拍摄的指向性，使得显示装置100显示的影像与摄像部212的拍摄方向正对。即，指向性调整部226可以控制摄像部212的拍摄的指向性，使得显示装置100显示的影像的显示面与摄像部212的拍摄方向正交。在摄像部212具有通过三维致动器调整透镜的功能的情况下，指向性调整部226可以利用该功能变更透镜的朝向，从而使显示装置100显示的影像与摄像部212的拍摄方向正对。
通信终端200可以基于自身保持的终端识别信息，使用串行干扰消除技术消除摄像部所拍摄到的范围内存在的、作为通信对方的显示装置以外的其它显示装置的信号。
图8简要地示出显示装置100的显示例。图8示出将不同的通信终端200用的发送数据分别编码至将由区域指定部118所指定的指定区域400分割而得的分割区域402和分割区域404时的显示例。
显示装置100可以生成用于在通信终端200侧消除干扰的每个通信终端200各不相同的扩散码。
显示装置100可以将每个通信终端200各不相同的扩散码经由光通信发送至通信终端200。
显示装置100可以使用按作为通信对方的每个通信终端200生成的扩散码，使显示装置100中显示的影像的频谱扩散。
如图8所示，显示装置100将一个通信终端200用的发送数据编码至分割区域402，并将指示分割区域402的区域信息通知给一个通信终端200，将另一个通信终端200用的发送数据编码至分割区域404，并将指示分割区域404的区域信息通知给另一个通信终端200，从而实现与多个通信终端200的同时单播通信。
图9简要地示出显示装置100的显示例。通信终端200可识别的分辨率根据显示装置100与通信终端200的距离等而不同，图9简要地示出显示装置100配合通信终端200可识别的分辨率来变更分配发送数据的各信息的像素数的情况。
在图9所示的例子中，与状况810相比，状况820中显示装置100与通信终端200之间的距离长，通信终端200可识别的分辨率低，因此，状况820下的显示装置100使分配发送数据的各信息的像素数更多。通过由显示装置100执行这样的控制，能够实现适于通信终端200可识别的分辨率的光通信信号的编码。
图10简要地示出通信终端200的拍摄影像的显示例。图10示出由于显示装置100与通信终端200之间存在的障碍物600而使通信终端200无法拍摄指定区域400的一部分的状况。
图11示出由显示装置100所投影的投影影像108被局部照射外部其它的强光，使得通信终端200无法识别指定区域400的一部分信息的状况。
在图10和图11所示的状况下，信息通信部216将指示显示装置100正在显示的影像中因为障碍物600而无法拍摄的区域、或者投影影像108中因为外部的强光而无法识别的区域的拍摄影像信息发送至显示装置100。影像生成部120可以基于该拍摄影像信息生成将发送数据等编码至从通过区域指定部118所指定的指定区域400排除了无法通过通信终端200进行拍摄的区域、或者无法识别信号的区域之后的区域而成的编码影像。由此，即使显示装置100将发送数据编码至指定区域400，也能够防止发生因为障碍物600或外部强光的存在而使通信终端200无法接收到其的事态。
图12简要地示出显示装置100显示的同步信号410和调用信号420的一例。显示装置100定期显示同步信号410。显示装置100例如每隔30帧显示同步信号410。在图12中，例示出显示六个同步信号410的情况，但同步信号410的数量、位置以及大小并不限于图12所示的情况，可以任意地设定。
显示装置100可以将识别显示装置100的显示装置识别信息编码至同步信号410。另外，显示装置100可以将显示装置100的画面的画面分辨率信息编码至同步信号410。另外，显示装置100可以将帧编号信息编码至同步信号410。同步信号410的调制例如可以使用Zadff-Chu序列进行调制。
拍摄并读取到同步信号410的通信终端200经由网络50向管理装置300发送附接(Attach)完成消息，以便向管理装置300传达作为通信对方的显示装置100的同步信号正常接收完成之意。附接完成消息可以包括识别通信终端200的终端识别信息。另外，附接完成消息可以包括先前包含于同步信号410中的显示装置识别信息。另外，附接完成消息还可以包括通信终端200的接收分辨率信息。
管理装置300将从通信终端200接收到的信息经由网络50发送至显示装置100。管理装置300针对从通信终端200接收到的信息中的终端识别信息，为了保护终端单独的信息，可以生成在通信切断之前临时使用的其它新的终端识别信息。显示装置100也可以具有生成该终端识别信息的功能。接收到该信息的显示装置100在与同步信号410相同的位置显示调用信号420。显示装置100可以定期显示调用信号420。显示装置100例如每隔30帧显示调用信号420。调用信号420可以包括通信终端200的终端识别信息。调用信号420可以包括作为通信对象的通信终端200的终端识别信息和扩展信息。
通信终端200接收由显示装置100所显示的调用信号420，在调用信号420中包含的终端识别信息与自身的终端识别信息一致的情况下，经由网络50向管理装置300发送调用完成消息。管理装置300可以将接收到的调用完成消息发送至显示装置100。
锚信号430可以是将指示编码有发送数据的区域的区域信息作为光通信信号进行编码而得的区域中包含的信号。接收到调用完成消息的显示装置100经由网络50将锚信号430的位置和配置锚信号430的帧编号发送至管理装置300。锚信号430的显示大小可以基于进行开始通信的准备的方法中记载的接收分辨率信息确定。管理装置300将接收到的与锚信号430相关的信息经由网络50发送至通信终端200。响应于从管理装置300接收到与锚信号430相关的信息，通信终端200开始对编码有发送数据的区域进行解码。
图13简要地示出光通信期间中的显示装置100的显示例。在此，作为在预定的期间内亮度和颜色信息不发生变化的区域或者变化量比预定的阈值低的区域的一例，列举采用了白色区域的情况为例。
区域指定部118对影像获取部116获取到的影像进行解析，指定白色的区域。影像生成部120生成包含锚信号430，并将发送数据获取部114获取到的发送数据作为可见光通信信号编码至由区域指定部118所指定的指定区域440而成的编码影像。锚信号430包括指示指定区域440的区域信息。显示控制部122使影像生成部120生成的编码影像进行显示。
通信终端200利用摄像部212拍摄通过显示控制部122所显示的编码影像。图像处理部214使用锚信号430中包含的指示指定区域440的区域信息来识别指定区域440。解码部218从通过图像处理部214识别出的指定区域440解码发送数据。
影像生成部120可以每隔预定帧，例如每隔10帧等在指定区域440和锚信号430的位置包含训练信号，通信终端200可以使用该训练信号进行拍摄到的影像的均衡。由此，通过进行影像的亮度、颜色信息的均匀化，能够准确地对发送数据进行解码。另外，影像生成部120也可以在将发送数据编码至指定区域440时，涉及多个帧地发送同一内容。由此，发送数据冗余化，能够降低错误率。
通信终端200在接收到的发送数据发生了错误的情况下，可以经由网络50将错误信息发送至管理装置300。管理装置300可以将接收到的错误信息经由网络50发送至显示装置100。显示装置100可以基于接收到的错误信息重新发送发生了错误的发送数据。
通信终端200可以每隔一定期间将接收分辨率信息经由网络50发送给管理装置300。管理装置300可以将接收到的接收分辨率信息经由网络50发送至显示装置100。显示装置100可以基于接收到的接收分辨率信息对锚信号430的大小、分配发送数据的各信息的像素数执行调整。
在通信终端200具有光学变焦功能的情况下，通信终端200可以适当地对显示装置100显示的影像进行变焦。另外，通信终端200在具有带三维致动器的透镜的情况下，可以适当地执行对显示装置100显示的影像的变焦和指向性的调整。通信终端200可以具有相机抖动校准机构。
在显示装置100和通信终端200未正对的情况下，通信终端200可以适当地对显示装置100显示的影像进行仿射变换。
显示装置100也可以具有：CPRI(Common Public Radio Interface：通用公共无线接口)接口、HDMI(注册商标)(High-Definition Multimedia Interface：高清多媒体接口)接口、以及根据CPRI接口上的IQ信号(由复数字信号的同相(In-phase)和正交(Quadrature)成分构成的基带信号)调制光通信信号的电路。
图14示出将对于两个通信终端200的发送数据进行了编码时的显示装置100的显示例。在图12中，简要地示出锚信号432和锚信号434、以及由各个锚信号所示的编码有发送数据的分割区域442和444的一例。
图15简要地示出投影影像108的一例。图15示出配置于建筑物510内的显示装置100将投影影像108投影到相邻的建筑物520的墙面上的例子。
由此，显示装置100可以将发送数据发送至能够拍摄建筑物520的墙面的通信终端200。通信终端200既可以位于地面上，另外，也可以位于建筑物510内。
在图15中，示出了显示装置100朝向上方投影影像的例子，但并不限于此，显示装置100的朝向可以是任意的。
显示装置100在将投影影像108投影到建筑物520的情况下，可以生成将发送数据作为光通信信号编码至内容不发生变化的影像的局部或全部而成的编码影像并进行投影，当将在红外线区域具有灵敏度的通信终端200设想为通信对方的情况下，可以生成将发送数据作为光通信信号编码至红外线而成的编码影像并进行投影。显示装置100也可以生成将发送数据作为光通信信号编码至内容发生变化的影像中在预定期间内亮度和颜色信息不发生变化的区域或者变化量比预定的阈值低的区域而成的编码影像。
图16示出通信终端200、显示装置100、5G网络以及管理装置300之间的通信开始的控制消息序列(示例)。在本例中，首先，通信终端200向管理装置300发送影像显示装置检测报告(附接完成(Attach完成))。接着，管理装置300将终端附接通知(终端Attach通知)发送至影像显示装置100。接着，影像显示装置100将终端附接应答(终端Attach应答)发送至管理装置300。接着，管理装置300向5G网络发送下行链路追加通知。接着，管理装置300从5G网络接收下行链路追加应答。接着，管理装置300向通信终端200发送下行链路追加通知。接着，管理装置300向5G网络发送准备完成通知。
然后，在5G网络中，产生下行数据。然后，将产生的数据从5G网络发送至显示装置100。接收到数据的显示装置100对通信终端200执行终端调用。接着，通信终端200向管理装置300发送调用应答。管理装置300向显示装置100发送调用应答通知。接收到调用应答通知的显示装置100确定发送分辨率。然后，显示装置100向管理装置300分配锚信号。管理装置300将锚信号通知给通信终端200。然后，通过显示从显示装置100向通信终端200发送数据。
图17简要地示出显示装置100侧的通信开始的流程图(示例)。在步骤(有时会将步骤省略记载为“S”)202中，从管理装置300接收终端附接通知。在S204中，从5G网络接收下行数据。在S206中，对通信终端200执行终端调用。在S208中，判定是否接收到针对S206中的终端调用的调用应答通知。在判定为未接收到的情况下，返回S206，在判定为接收到的情况下，进入S210。在S210中，确定发送分辨率。在S212中，将锚信号分配给管理装置300。按照以上流程，开始通信。
图18简要地示出显示装置100侧的通信期间的流程图(示例)。在S222中，对通信终端200执行光通信(锚信号分配)。在S224中，将数据存储至缓冲器中。在S226中，确定数据信号的分配、调制等。在S228中，发送锚信号。在S230中，发送数据信号。在S232中，判定是否接收到ACK。在判定为未接收到ACK的情况下，返回S226，在判定为接收到ACK的情况下，进入S234。在S234中，开放数据的缓冲器。
图19简要地示出通信终端200侧的通信开始的流程图(示例)。在5G连接期间，通信终端200在步骤S304中开启补充下行链路功能。在S306中，执行相机扫描。在S308中，在检测到显示装置100的情况下，进入S310，在未检测到的情况下，返回S306。在S310中，在检测到同步信号的情况下，进入S312，在未检测到的情况下，返回S306。
在S312中，对通过相机扫描到的影像实施仿射变换。在S314中，对同步信号进行译码。在S316中，发送附接完成。在S318中，接收下行链路追加通知。在S320中，等待接收数据。在S322中，执行相机扫描。在S324中，在检测到同步信号的情况下，进入S326，在未检测到的情况下，返回S322。在S326中，在检测到调用信号的情况下，进入S328，在未检测到的情况下，返回S322。在S328中，发送调用应答。在S330中，接收锚信号通知。按照以上流程，开始通信。
图20简要地示出通信终端200侧的通信期间的流程图(示例)。在S340中，与显示装置100之间执行光通信。在S342中，执行相机扫描。在S344中，在检测到同步信号的情况下，进入S346，在未检测到的情况下，返回S342。
在S346中，对通过相机扫描到的图像执行图像处理。在S348中，执行仿射变换。在S350中，接收同步信号。在S352中，对同步信号进行译码。在S354中，执行基于同步信号的均衡。
在S356中，接收锚信号。在S358中，对锚信号进行译码。在S360中，获取数据信号的位置和调制方式等。在S362中，接收数据信号。在S364中，对数据信号进行译码。在S366中，存储至缓冲器中。在S368中，在判定为发生了错误的情况下，进入S376，在未判定为发生错误的情况下，进入S370。在S370中，经由5G发送ACK。在S372中，清除缓冲器。
在S374中，经由5G发送NACK。在S376中，接收锚信号。在S378中，对锚信号进行译码。在S380中，获取数据信号的位置和调制方式等。在S382中，接收数据信号。在S384中，存储至缓冲器中。在S386中，在判定为发生了错误的情况下，返回S374，在判定为未发生错误的情况下，进入S388。在S880中，经由5G发送ACK。在S390中，清除缓冲器。
图21简要地示出通信期间中的重送序列(示例)。在图21的序列中，首先，从5G网络向显示装置100发送数据。显示装置100将数据发送至通信终端200。通信终端200缓冲数据。接着，通信终端200将HARQ/ACK发送至管理装置300。然后，通信终端200清除接收缓冲器。
接收到HARQ/ACK的管理装置300将ACK发送至显示装置100。显示装置100清除发送缓冲器。然后，显示装置100向通信终端200发送数据。通信终端200缓冲数据。在本序列中，此处继续对发生了错误的情况进行说明。
通信终端200将HARQ/NACK发送至管理装置300。接收到HARQ/NACK的管理装置300将NACK发送至显示装置100。显示装置100向通信终端200重新发送数据。通信终端200缓冲数据。接着，通信终端200将HARQ/ACK发送至管理装置300。然后，通信终端200清除接收缓冲器。接收到HARQ/ACK的管理装置300将ACK发送至显示装置100。显示装置100清除发送缓冲器。
图22简要地示出通信结束的流程图。在此，简要地示出在通信终端200与显示装置100进行通信期间，通信终端200丢失显示装置100后的处理流程。
通信终端200根据显示装置100的丢失启动计时器。随着计时器已到期，通信终端200将断开连接(Disconnect)发送至管理装置300。管理装置300将终端断开连接发送至显示装置100。显示装置100将终端断开连接(Disconnect)应答发送至管理装置300。管理装置300将断开连接完成(Disconnect Complete)发送至通信终端200。然后，管理装置300清除终端ID。
图23简要地示出休眠转移的流程图。在图23的序列中，首先，从5G网络向显示装置100发送数据。显示装置100将数据发送至通信终端200。
在本例中，假设接收到数据的通信终端200保持无通信状态而休眠计时器已到期来继续进行说明。通信终端200向管理装置300发送休眠请求(Sleep Request)。管理装置300向显示装置100发送终端休眠请求。显示装置100将终端休眠接收(Sleep Accept)发送至管理装置300。管理装置300向通信终端200发送休眠完成(Sleep Complete)。通信终端200启动DRX计时器。然后，通信终端200变为间歇接收的状态。
图24简要地示出切换的流程图。在S402中，通信终端200与显示装置100执行光通信。在S404中，通信终端200执行相机扫描。在S406中，通信终端200判定是否检测到别的同步信号。在判定为检测到的情况下，进入S408，在判定为未检测到的情况下，返回S404。
在S408中，通信终端200对通过相机扫描到的图像执行图像处理。在S410中，通信终端200执行仿射变换。在S412中，通信终端200接收同步信号。在S414中，通信终端200对同步信号进行译码。在S416中，通信终端200执行接收电平差的判定，在判定为阈值以上的情况下，进入S418，在判定为小于阈值的情况下，返回S402。
在S418中，通信终端200启动切换计时器。在S420中，通信终端200使切换计时器期满。在S422中，通信终端200发送切换请求。在S424中，通信终端200接收切换应答。然后，通信终端200转移至与切换目的地的显示装置的光通信阶段。
图25简要地示出机顶盒(Set Top Box)内部框图(示例)。机顶盒具有发送数据获取部114、影像获取部116、区域指定部118、影像生成部120、显示控制部122、测量结果接收部124、亮度电平调整部126、NW I/F130。这些构成可以执行在图6中说明的功能。
发送数据获取部114经由CPRI与BBU103进行通信。发送数据获取部114可以将IQ数据进行通信。发送数据获取部114可以对接收到的IQ信号进行译码。发送数据获取部114将位流(Bit Stream)发送至影像生成部120。
影像获取部116经由HDMI与作为上位装置的例子的计算机102进行通信。影像获取部116可以将H.264影像数据进行通信。影像获取部116可以执行H.264译码。影像获取部116与影像生成部120交换所获取到的影像数据。另外，影像获取部116将获取到的影像数据发送至区域指定部118。区域指定部118指定影像数据中在预定期间内亮度和颜色信息不发生变化的区域或者变化量比预定的阈值低的区域。
影像生成部120生成将各种信息编码至从影像获取部116接收到的影像数据而成的编码影像。例如，影像生成部120生成将发送数据获取部114获取到的发送数据作为光通信信号编码至区域指定部118所指定的区域而成的编码影像。影像生成部120将编码影像经由HDMI作为H.264影像数据发送给显示控制部122。显示控制部122使接收到的影像数据显示于显示部。
测量结果接收部124经由网络50和NW I/F130接收通信终端200拍摄通过显示控制部122所显示的影像并进行测量而得到的接收亮度电平和接收SNR。测量结果接收部124可以执行控制消息处理。亮度电平调整部126可以基于由测量结果接收部124接收到的测量结果调整显示控制部122控制的显示部的显示的亮度电平。
图26简要地示出机顶盒内部动作流程图(示例)。STB101从BBU103接收IQ数据。然后，对接收到的IQ数据进行译码，使其位流化。另外，STB101从网络50获取控制信息。另外，STB101获取终端接收状况的信息。另外，STB101获取影像数据。然后，STB101对影像数据进行译码。STB101提取影像数据中变化少的部分。
然后，STB101确定发送区域。另外，STB101确定调制方式。关于调制方式的确定，在标牌等的影像的情况下，STB101可以使亮度调制为4个等级(MCS0～4)。颜色信息可以为最大RGB的三种。可以从接收亮度信息选择MCS。可以配合重叠数据的场所的颜色来选择RGB。在白色照明的情况下，STB101可以使亮度调制为4个等级(MCS0～4)。颜色信息可以是最大RGB的三种。可以根据能够重叠数据的区域(PRB)和缓冲的数据量来确定MCS、RGB。然后，STB101创建调制数据。STB101创建输出数据，执行H.264编码并将其输出。
图27简要地示出发送分辨率确定的流程图。发送分辨率确定可以由STB101执行。在S502中，获取显示装置100的分辨率信息。在S504中，获取通信终端200的接收分辨率信息。在S506中，获取终端接收SNR。在S508中，计算最佳分辨率。在S510中，判定是否发生了接收错误。在S512中，降低分辨率。
图28简要地示出数据重叠位置确定的流程图。数据重叠位置确定可以由STB101执行。STB101获取终端的视野信息，并获取终端的影像检测信息。另外，STB101获取影像信息，并存储影像帧的信息，与所存储的影像信息进行比较，提取变化少的部分。STB101排除连接着的通信终端200的死角。STB101考虑连接着的所有终端的死角。然后，STB101计算PF的资源量，确定分配资源。
图29简要地示出数据编码的算法。在此，作为例子示出了Turbo码，但并不限于此。
图30简要地示出与发送光的白噪声化相关的算法。发送光的白噪声化可以由STB101执行。STB101将终端识别信息应用于PN序列发生器并输出PN序列，通过其和发送数据生成被白噪声化的发送数据，进行调制(亮度调制、RGB调制)，进行影像映射。
如图31：主要的实施例1(使用红外线DLP的例子)所示，关于投影仪，采用用到红外线光源的DLP(Digital Lite Proseccing：数字光处理)投影仪，主要在夜间向大厦墙面投影编码有发送数据的影像，从而实现补充下行链路。
通信终端中使用在红外线区域具有灵敏度的半导体相机传感器，通过利用电机驱动机构调整透镜的指向性而能变更相机角度，利用光学变焦机构进行调节，使得上述半导体相机传感器能够拍摄投影到大厦等上的编码有发送数据的整个影像，通过最大限度地利用半导体相机传感器的分辨率而实现补充下行链路。作为安装的其它方式，并非使用特定的影像投影区域，而是将投影于大厦墙面的影像整体放大进行聚焦，对所投影的影像整体进行分割而实现多个通信终端同时通信的方式是高效的。
如图32：主要的实施例2(办公室的天花板照明)所示，通过将办公室中的天花板照明替换为根据本发明的照明面板(采用了液晶或有机EL的照明面板)，并经由CPRI-HDMI转换器与BBU连接，将天花板照明作为显示装置使用，从而实现补充下行链路。
如图33：主要的实施例3(拱顶球场的顶棚)所示，通过在拱顶球场设置几十台投影仪，并向拱顶顶棚投影编码有发送数据的影像，将球场的顶棚作为影像显示装置，从而实现补充下行链路。此时，作为通信终端，也可以嵌入HMD(Head Mount Display：头戴式显示器)。另外，通过进行多播通信，能够多个HMD同时接收同一数据。
在图34、图35：主要的实施例3(拱顶球场的顶棚)所示的通信***中，通过从多个投影仪分别投影同一影像，从而能够使通信终端拍摄的影像冗余化。通过这些分集效应，重送频率降低，能够实现稳定且高速的通信。
在举行奥林匹克等大规模的活动时，如图36：主要的实施例3(拱顶球场的无人机相机)所示，从在球场内飞行的无人机发送来的影像使用光通信以外的通信(4G、5G、WiFi等)存储在设置于球场内的数据服务器中，并使用图33的通信***与球场内的通信终端进行多播传递。
如图37：主要的实施例5(多个相机的接收)所示，当通信终端在前后、上下、左右六个方向上具备相机时，通过选择能够以通信速度最快的方式拍摄影像显示装置的相机，从而不管通信终端的姿势如何，均能够始终实现根据本发明的补充下行链路。
如图38：主要的实施例6(电机驱动相机)所示，在通信终端具有通过三维致动器调整透镜的机构的情况下，指向性调整部利用该机构调整透镜的朝向，从而使显示装置显示的影像与摄像部的拍摄方向正对，另外，通过拉近、拉远而提高分辨率，提高通信速度。
如图39：主要的实施例7(鱼眼镜头投影仪)所示，在投影仪具备鱼眼镜头的情况下，能够大范围投影影像。此时，通信终端接收的图像的分辨率提高，通信速度提高。
图40示出作为通信终端200发挥作用的计算机900的硬件构成中与本研发相关联的部分的一例。本实施方式涉及的计算机900具备CPU910、BBIC、DSP以及相机946。
安装在计算机900中使计算机900作为通信终端200发挥作用的程序可以在BBIC等中启动，使计算机900作为通信终端200的各部分别发挥作用。通过将这些程序中描述的信息处理读入计算机900，从而作为软件与上述各种硬件资源协作的具体单元即摄像部212、图像处理部214、信息通信部216、解码部218、测量部220、测量结果发送部222、位置姿势获取部224以及指向性调整部226发挥作用。于是，通过这些具体单元，实现与本实施方式中的计算机900的使用目的相应的信息的运算或加工，从而构建与使用目的相应的特有的通信终端200。
通过以至少超过USB3.0(10Gbps)的速度的接口与CPU910连接的CCD装置和与CPU910连接的5G支持BBIC(包括3G、4G)的双连接建立通信，并且，调制解调器侧并非主要的，而由与CPU1010连接的CCD装置提供补充下行链路的数据路径。5G调制解调器将来自CCD和CPU1010的位流与28GHz、76GHz的AD数据流同等地译码，形成补充下行链路。
安装在STB101中使显示装置100作为光通信装置发挥作用的程序中描述的信息处理使STB101作为信息接收部112、发送数据获取部114、影像获取部116、区域指定部118、影像生成部120、显示控制部122、测量结果接收部124以及亮度电平调整部126发挥作用。
以上，使用实施方式对本发明进行了说明，但本发明的技术范围并不限定于上述实施方式所记载的范围。本领域技术人员应当清楚，能够对上述实施方式施加各种变更或改良。根据权利要求书的记载明确可知，实施了上述变更或改良后的方式也包含在本发明的技术范围内。
权利要求书、说明书和附图中所示的装置、***、程序以及方法中的动作、工序、步骤和阶段等各处理的执行顺序并未特别明示为“之前”、“先”等，另外，应该注意的是，只要不是在后面的处理中使用之前处理的输出，就能够以任意的顺序实现。关于权利要求书、说明书以及附图中的动作流程，即使为了方便起见而使用了“首先”、“接着”等进行说明，但也并不意味着必须按该顺序实施。
附图标记说明
10通信***、50网络、100显示装置、101STB、102计算机、103BBU、104显示器、105投影仪、106转换器、108投影影像、112信息接收部、114发送数据获取部、116影像获取部、118区域指定部、120影像生成部、122显示控制部、124测量结果接收部、126亮度登记调整部、200通信终端、201CMOS传感器、202CPU、203显示器、204通信调制解调器、212摄像部、214图像处理部、216信息通信部、218解码部、220测量部、222测量结果发送部、224位置姿势获取部、226指向性调整部、300管理装置、400指定区域、402分割区域、404分割区域、410同步信号、420调用信号、430锚信号、432锚信号、434锚信号、440指定区域、442分割区域、510建筑物、520建筑物、600障碍物、810状况、820状况、900计算机、910CPU、946相机。

Claims (40)

1.一种通信***，利用光通信，并提供补充下行链路，所述通信***具备：
显示控制装置，使显示部显示影像；以及
通信终端，具有摄像部，所述摄像部拍摄由所述显示部显示的影像，
所述显示控制装置具有：
影像获取部，获取显示对象的影像；
区域指定部，指定所述影像获取部获取到的所述影像中不发生变化的区域或者变化量比预定的阈值低的区域；
影像生成部，生成将发送数据作为光通信信号编码至通过所述区域指定部所指定的区域而成的编码影像；以及
显示控制部，使所述显示部显示所述编码影像，
所述通信终端具有：
区域识别部，识别通过所述摄像部拍摄到的影像中编码有所述发送数据的区域；以及
解码部，从通过所述区域识别部识别出的所述区域解码所述发送数据，
所述通信***具有使用光通信以外的其它通信方式的无线通信方式交换所述光通信的通信控制信号的结构。
2.根据权利要求1所述的通信***，其中，
所述影像获取部具备光学的或数字的防相机抖动机构。
3.根据权利要求1所述的通信***，其中，
所述通信终端使用光通信以外的方式将与所述摄像部拍摄到的影像的拍摄相关的信息、解码后的发送数据的解码得当与否的信息以及与通信控制相关的信息向所述显示控制装置进行反馈。
4.根据权利要求1所述的通信***，其中，
所述通信***保持与由3GPP规定的双连接同样地以双连接利用28GHz或76GHz的宽带通信的安装方式，取代28GHz或76GHz的大规模MIMO的RRU装置，取代CPRI连接而通过HDMI连接显示器装置，将显示器装置用作RRU装置，并将终端装置的CCD装置用作大规模MIMO天线。
5.根据权利要求1所述的通信***，其中，
所述区域指定部指定所述影像获取部获取到的所述影像中在预定期间内亮度和颜色信息不发生变化的区域或者变化量比预定的阈值低的区域。
6.根据权利要求1或2所述的通信***，其中，
所述影像生成部生成将区域信息作为光通信信号编码至通过所述区域指定部所指定的区域内的编码有所述发送数据的区域以外的区域而成的所述编码影像，所述区域信息指示编码有所述发送数据的区域，
所述区域识别部识别通过所述摄像部拍摄到的影像中编码有所述区域信息的区域，从该区域解码所述区域信息，并将所述区域信息所示的区域识别为编码有所述发送数据的区域。
7.根据权利要求6所述的通信***，其中，
所述影像生成部生成将识别所述通信终端的终端识别信息作为光通信信号编码至编码有所述发送数据的区域以外的区域而成的所述编码影像。
8.根据权利要求1至5中任一项所述的通信***，其中，
所述影像生成部生成将识别所述显示部的显示部识别信息作为光通信信号编码至编码有所述发送数据的区域以外的区域而成的所述编码影像。
9.根据权利要求1至5中任一项所述的通信***，其中，
所述通信终端具有：
测量部，测量所述摄像部拍摄的所述影像的接收亮度电平和接收SNR；以及
测量结果发送部，将所述测量部的测量结果发送至所述显示控制装置，
所述显示控制装置具有：
测量结果接收部，接收所述测量结果；以及
亮度电平调整部，基于所述测量结果调整所述显示部的显示的亮度电平。
10.根据权利要求9所述的通信***，其中，
所述影像获取部获取所述显示部的屏幕保护影像，
所述影像生成部生成将发送数据编码至所述屏幕保护影像的指定区域而成的编码影像，
所述显示控制部使所述编码影像作为屏幕保护显示于所述显示部，
所述测量部基于通过所述解码部解码出的发送数据测量所述接收亮度电平和所述接收SNR。
11.根据权利要求9所述的通信***，其中，
所述影像生成部具有自己生成屏幕保护影像的功能，
所述影像生成部生成将发送数据编码至整个该屏幕保护影像而成的编码影像，
所述显示控制部使该编码影像作为屏幕保护显示于所述显示部，
所述测量部基于通过所述解码部解码出的发送数据测量所述接收亮度电平和所述接收SNR。
12.根据权利要求9所述的通信***，其中，
所述测量结果发送部不使用光通信而使用光通信以外的方式将所述测量结果发送至所述显示控制装置。
13.根据权利要求1至5中任一项所述的通信***，其中，
所述通信终端具有：
位置姿势获取部，获取所述通信终端相对于通过所述显示控制部显示的显示影像的位置和姿势；以及
指向性调整部，基于所述位置和姿势，调整所述摄像部的拍摄的指向性。
14.根据权利要求1至5中任一项所述的通信***，其中，
所述通信终端具有对通过多个摄像部拍摄到的影像进行比较并选择进行通信的摄像部的功能。
15.根据权利要求1至5中任一项所述的通信***，其中，
所述通信终端的图像处理部具有对通过所述摄像部拍摄到的显示装置的影像进行图像处理并对所述显示部的编码有所述发送数据的区域的所述发送数据进行解码的功能。
16.根据权利要求1至5中任一项所述的通信***，其中，
所述显示控制装置具有信息接收部，所述信息接收部从所述通信终端接收与通过所述摄像部拍摄到的影像相关的拍摄影像信息，
所述影像生成部基于所述拍摄影像信息生成所述编码影像。
17.根据权利要求16所述的通信***，其中，
所述影像生成部基于所述拍摄影像信息变更分配所述发送数据的各信息的像素数。
18.根据权利要求16所述的通信***，其中，
所述拍摄影像信息指示由所述显示部显示着的影像中无法由所述摄像部拍摄的区域，所述影像生成部生成将发送数据作为光通信信号编码至从通过所述区域指定部所指定的区域中排除无法由所述摄像部拍摄的区域后的区域而成的编码影像。
19.根据权利要求1至5中任一项所述的通信***，其中，
所述显示部是投影仪，
所述摄像部拍摄通过所述投影仪投影至投影面上的光。
20.根据权利要求19所述的通信***，其中，
所述通信***按照投影映射的要领，将编码有发送数据的影像投影至大厦墙面，不论室内室外都能够进行大范围的光通信。
21.根据权利要求20所述的通信***，其中，
所述通信***采用用到红外线不可见光的光源的投影仪，通信终端中也采用红外相机传感器或者对红外线也具有灵敏度的图像传感器装置，在不改变景观的情况下实现光通信。
22.根据权利要求21所述的通信***，其中，
所述通信***采用DLP投影仪作为投影仪，并将红外线灯用于光源。
23.根据权利要求22所述的通信***，其中，
在权利要求22所示的显示装置或投影仪以及通信终端的所述摄像部中，使用红外线而取代使用可见光，在所述摄像部位于大厦窗户上贴有蓝膜的玻璃的背侧的情况下，在所述显示部中采用亮度调制。
24.根据权利要求19所述的通信***，其中，
所述影像生成部生成将发送数据作为光通信信号编码至影像的内容不发生变化的区域或变化量比预定的阈值低的区域而成的编码影像。
25.根据权利要求1至5中任一项所述的通信***，其中，
所述通信终端具有通知数据发送部，在无法通过所述摄像部拍摄所述影像的情况下，所述通知数据发送部向所述显示控制装置发送通知数据，
所述影像生成部在接收到所述通知数据的情况下，生成通过所述影像整体的亮度调制将所述发送数据作为光通信信号进行编码而成的编码影像。
26.根据权利要求1至5中任一项所述的通信***，其中，
所述显示控制装置具有：
CPRI接口，从无线基站接收所述发送数据；
HDMI接口，与所述显示部通信连接；
从所述CPRI接口上的IQ矢量信号转换为RGBI信号的装置；以及
从RGBI信号转换为IQ矢量信号的装置。
27.根据权利要求1至5中任一项所述的通信***，其中，
所述通信***通过在通信期间使用显示装置和通信终端相互已知的模式的信号或者作为二维条码显示于显示装置的校准图案作为参考信号定期进行校准，来进行用于使所述摄像部拍摄到的图像接近于已知图像的映射变换。
28.根据权利要求27所述的通信***，其中，
此处使用的校准图案是相互已知的随机的校准图案、或者相互已知的广告图像、二维条码、或者被双边线包围的标识标志任一方。
29.根据权利要求27所述的通信***，其中，
在该通信***中用作参考信号的二维条码是正方形的二维条码，或者是长方形的二维条码，或者是用于指示由所述区域指定部所指定的区域的二维条码。
30.根据权利要求1至5中任一项所述的通信***，其中，
在所述通信***所采用的显示装置或投影仪中，与其地区提供的电压的频率同步，周围的照明以100至120Hz闪烁而在熄灭的瞬间，在显示装置中显示影像，另外，在投影仪中使光源点亮，在通信终端的摄像装置中，与所述电压的频率同步，在周围的照明熄灭的瞬间进行拍摄，从而显示装置、摄像装置以及通信***实现以周围照明为干扰源的SNR的改善，确保通信速度。
31.根据权利要求1至5中任一项所述的通信***，其中，所述通信***采用单一颜色的可见光下限的光源，该光源使用通过氧吸收太阳光能量的、759.370、686.719nm的夫琅和费谱线的光源。
32.根据权利要求31所述的通信***，其中，
759.370、686.719nm的窄带透射光学滤波器被安装于受光元件来减少白天的太阳光引起的干扰，通信终端的受光元件是提供补充下行链路专用的摄像元件。
33.根据权利要求1至5中任一项所述的通信***，其中，
所述通信***通过采用冗余地利用红外线激光的散射的点对多点方式的通信而提供稳定的通信。
34.根据权利要求1至5中任一项所述的通信***，其中，
所述通信***采用LED显示器作为影像显示装置。
35.一种显示控制装置，具备：
影像获取部，获取显示对象的影像；
区域指定部，指定所述影像获取部获取到的所述影像中不发生变化的区域或者变化量比预定的阈值低的区域；
影像生成部，生成将发送数据作为光通信信号编码至通过所述区域指定部所指定的区域而成的编码影像；以及
显示控制部，使显示部显示所述编码影像。
36.一种显示控制装置，具有生成每个通信终端各不相同的终端识别信息并将该终端识别信息发送至通信终端的功能。
37.根据权利要求36所述的显示控制装置，其中，
所述显示控制装置具有生成以干扰消除为目的且每个通信终端单独的扩频码的功能，并具有使用所述扩频码对显示影像进行扩频的功能。
38.一种通信终端，具有基于终端识别信号，采用串行干扰消除技术干扰消除摄入由摄像部所拍摄到的图像中的作为通信对方的显示控制装置以外的显示控制装置的信号的功能。
39.一种显示控制装置，具有：
扰码生成部，以干扰消除为目的；以及
加扰部，使用由所述扰码生成部生成的扰码实施发送数据的加扰，
所述显示控制装置具有将扰码信息作为终端识别信号发送至通信终端的功能。
40.一种通信终端，具备：
区域信息获取部，获取区域信息，所述区域信息指示通过显示装置显示的影像中编码有作为光通信信号的发送数据的区域；
区域识别部，基于所述区域信息在通过摄像部拍摄到的影像中识别编码有所述发送数据的区域；以及
解码部，从通过所述区域识别部识别出的所述区域解码所述发送数据；
所述通信终端具有使用光通信以外的其它通信方式的无线通信方式交换所述光通信的通信控制信号的结构。
CN201880088271.3A 2018-01-31 2018-01-31 提供补充下行链路的通信***、显示控制装置及通信终端 Active CN111670548B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/003220 WO2019150489A1 (ja) 2018-01-31 2018-01-31 光通信を利用した大容量のサプリメンタルダウンリンクを可能とする通信システム、表示制御装置、通信端末及びプログラム

Publications (2)

Publication Number Publication Date
CN111670548A CN111670548A (zh) 2020-09-15
CN111670548B true CN111670548B (zh) 2023-07-21

Family

ID=67479631

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880088271.3A Active CN111670548B (zh) 2018-01-31 2018-01-31 提供补充下行链路的通信***、显示控制装置及通信终端

Country Status (4)

Country Link
US (2) US11546655B2 (zh)
JP (1) JP7082994B2 (zh)
CN (1) CN111670548B (zh)
WO (1) WO2019150489A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2940896B1 (en) * 2012-12-27 2020-04-08 Panasonic Intellectual Property Corporation of America Information communication method
US11201670B2 (en) * 2019-04-05 2021-12-14 Comcast Cable Communications, Llc Visible light communication
CN111131161B (zh) * 2019-11-25 2021-03-16 美的集团股份有限公司 智能设备身份识别方法、***、电子设备及存储介质
JP7492361B2 (ja) 2020-04-03 2024-05-29 株式会社Subaru 情報伝達システム
JP7084967B2 (ja) 2020-08-24 2022-06-15 ソフトバンク株式会社 光通信によるデジタルサイネージ及びｌｅｄ照明を利用したサプリメンタルダウンリンク装置と方法

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS54143607A (en) 1978-04-29 1979-11-09 Beltek Corp Tape recorder
US6850252B1 (en) * 1999-10-05 2005-02-01 Steven M. Hoffberg Intelligent electronic appliance system and method
JP2001345958A (ja) * 2000-05-31 2001-12-14 Sony Corp 携帯端末装置
JP4535133B2 (ja) 2001-09-21 2010-09-01 カシオ計算機株式会社 情報出力装置、情報出力方法、及び、プログラム
JP2003179556A (ja) 2001-09-21 2003-06-27 Casio Comput Co Ltd 情報伝送方式、情報伝送システム、撮像装置、および、情報伝送方法
JP2004326705A (ja) 2003-04-28 2004-11-18 Sony Corp 車両用通信装置および通信方法
WO2005050963A1 (ja) * 2003-11-21 2005-06-02 Softbank Bb Corp. 通信サービス提供システム及び通信サービス提供方法
JP2007295490A (ja) 2006-04-27 2007-11-08 Kyocera Corp 可視光通信装置および可視光受信方法
JP2008103786A (ja) * 2006-10-17 2008-05-01 Sharp Corp 有料番組提供システムおよびテレビ放送受信装置
JP4525697B2 (ja) * 2007-04-09 2010-08-18 沖電気工業株式会社 伝送ヘッダ圧縮装置、動画像符号化装置及び動画像伝送システム
JP4792001B2 (ja) * 2007-04-27 2011-10-12 株式会社東芝 動画像復号装置、放送受信装置、動画像復号方法
CN101420592A (zh) * 2007-10-25 2009-04-29 株式会社Commax 具有保安功能的四画面分割对讲***
US9247286B2 (en) * 2009-12-31 2016-01-26 Broadcom Corporation Frame formatting supporting mixed two and three dimensional video data communication
US10097890B2 (en) * 2011-03-15 2018-10-09 Sony Corporation System and method for virtual input and multiple view display
EP2538584B1 (en) 2011-06-23 2018-12-05 Casio Computer Co., Ltd. Information Transmission System, and Information Transmission Method
JP5294096B2 (ja) * 2011-06-23 2013-09-18 カシオ計算機株式会社 情報伝送システム、受光装置、情報伝送方法、及び、プログラム
CN103024352A (zh) * 2012-12-07 2013-04-03 康佳集团股份有限公司 一种基于码率突变的视频监控方法和***
SG11201504985WA (en) 2012-12-27 2015-07-30 Panasonic Ip Corp America Display method
US9262954B2 (en) * 2012-12-27 2016-02-16 Panasonic Intellectual Property Corporation Of America Visible light communication signal display method and apparatus
JP6136357B2 (ja) * 2013-02-25 2017-05-31 セイコーエプソン株式会社 分光測定装置、通信システム及びカラーマネージメントシステム
JP2015158596A (ja) * 2014-02-24 2015-09-03 株式会社リコー 投影装置、投影システム及び無線接続方法
WO2016060518A1 (en) * 2014-10-17 2016-04-21 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving visible light data
JP6466684B2 (ja) 2014-10-17 2019-02-06 三星電子株式会社Ｓａｍｓｕｎｇ Ｅｌｅｃｔｒｏｎｉｃｓ Ｃｏ．，Ｌｔｄ． 可視光送信装置、可視光受信装置、可視光通信システム、可視光通信方法及びプログラム
CN105187910B (zh) * 2015-09-12 2018-11-06 暴风集团股份有限公司 一种自动检测视频自适应参数的方法及***
JP6250913B1 (ja) 2017-07-10 2017-12-20 株式会社マイクロキャビン 遊技機検査システム及び遊技機

Also Published As

Publication number Publication date
US11871074B2 (en) 2024-01-09
US11546655B2 (en) 2023-01-03
US20200359085A1 (en) 2020-11-12
JPWO2019150489A1 (ja) 2021-01-14
US20230071454A1 (en) 2023-03-09
JP7082994B2 (ja) 2022-06-09
CN111670548A (zh) 2020-09-15
WO2019150489A1 (ja) 2019-08-08

Similar Documents

Publication Publication Date Title
CN111670548B (zh) 提供补充下行链路的通信***、显示控制装置及通信终端
Le et al. A survey of design and implementation for optical camera communication
Liu et al. Some practical constraints and solutions for optical camera communication
US8879735B2 (en) Shared secret arrangements and optical data transfer
US9847976B2 (en) Shared secret arrangements and optical data transfer
CN106372556B (zh) 一种光标签的识别方法
Ghassemlooy et al. Optical camera communications
CN104954068A (zh) 用于基于光的通信中的自适应光调制的技术
US11974078B2 (en) Digital signage by optical communication and supplemental downlink device and method using LED illumination
US11863236B2 (en) Transmission method, reception method, transmission device, and reception device
US11074715B2 (en) Image processing apparatus and method
Mohsan Optical camera communications: practical constraints, applications, potential challenges, and future directions
CN111953417A (zh) 室内可见光通信自动对准***及方法
EP3678302A1 (en) Optical communication device and system, and corresponding information transmission and reception method
Tang et al. Image sensor communication and its transmitting devices
CN210297905U (zh) 一种可兼容多个用户同步操控的监控***及视频监控设备
WO2023149165A1 (ja) 通信システム及び通信方法
CN104980606B (zh) 无线传输***的装置及其方法
Kim et al. Color Barcode Detection of Complementary Color Barcode-based Optical Camera Communications with a Deep Neural Network
Shiu et al. Visible Light Communication Using Advertisement-Light-Board and Rolling-Shutter-Effect based CMOS Mobile-Phone Camera
Ashok Design, modeling, and analysis of visual mimo communication
Liu Advanced Digital Signal Processing for Visible Light-Optical Camera Communication with Enhanced Data Rate and Robustness

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant