CN113079417B - 生成弹幕的方法、装置、设备和存储介质 - Google Patents

生成弹幕的方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN113079417B
CN113079417B CN202110323018.5A CN202110323018A CN113079417B CN 113079417 B CN113079417 B CN 113079417B CN 202110323018 A CN202110323018 A CN 202110323018A CN 113079417 B CN113079417 B CN 113079417B
Authority
CN
China
Prior art keywords
information
target
determining
bullet screen
video data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110323018.5A
Other languages
English (en)
Other versions
CN113079417A (zh
Inventor
卫宗群
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN202110323018.5A priority Critical patent/CN113079417B/zh
Publication of CN113079417A publication Critical patent/CN113079417A/zh
Priority to US17/646,119 priority patent/US20220124421A1/en
Priority to JP2021214380A priority patent/JP2022043273A/ja
Priority to EP21218026.9A priority patent/EP3996373A3/en
Priority to KR1020210191423A priority patent/KR20220006491A/ko
Application granted granted Critical
Publication of CN113079417B publication Critical patent/CN113079417B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8583—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by creating hot-spots
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/7867—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/26603—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel for automatically generating descriptors from content, e.g. when it is not made available by its provider, using content analysis techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2668—Creating a channel for a dedicated end-user group, e.g. insertion of targeted commercials based on end-user profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/278—Subtitling

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开公开了一种生成弹幕的方法、装置、设备和存储介质，应用于计算机技术领域，具体应用于智能推荐领域。生成弹幕的方法的具体实现方案为：获取视频数据的内容信息和目标对象的属性信息；提取内容信息的第一关键信息，并提取属性信息的第二关键信息；确定针对目标对象的目标关键信息，包括将第一关键信息中与第二关键信息相匹配的信息确定为目标关键信息；从预定媒体库中检索与目标关键信息匹配的第一多媒体信息；以及基于第一多媒体信息，生成针对目标关键信息的第一弹幕，以在播放视频数据的同时展示第一弹幕，其中，第一弹幕包括针对目标对象的推荐信息的链接，推荐信息包括第一多媒体信息。

Description

生成弹幕的方法、装置、设备和存储介质
技术领域
本公开涉及计算机技术领域，具体涉及智能推荐领域，更具体地涉及一种生成弹幕的方法、装置、设备和存储介质。
背景技术
随着网络技术的发展，视频中用于发表评论的弹幕成为增强对象之间互动性的主要方式之一。具体地，在对象发表评论内容后，该评论内容可以在显示页面中以滑动而过的字幕形式显示。
相关领域中，弹幕能提供简单的交互行为，能满足对象的基本需求。
发明内容
提供了一种扩展弹幕功能的生成弹幕的方法、装置、设备和存储介质。
根据本公开的一个方面，提供了一种生成弹幕的方法，包括：获取视频数据的内容信息和目标对象的属性信息；提取内容信息的第一关键信息，并提取属性信息的第二关键信息；确定针对目标对象的目标关键信息，包括将第一关键信息中与第二关键信息相匹配的信息确定为目标关键信息；从预定媒体库中检索与目标关键信息匹配的第一多媒体信息；以及基于第一多媒体信息，生成针对目标关键信息的第一弹幕，以在播放视频数据的同时展示第一弹幕，其中，第一弹幕包括针对目标对象的推荐信息的链接，推荐信息包括第一多媒体信息。
根据本公开的另一个方面，提供了一种生成弹幕的装置，包括：信息获取模块，用于获取视频数据的内容信息和目标对象的属性信息；信息提取模块，用于提取内容信息的第一关键信息，并提取属性信息的第二关键信息；关键信息确定模块，用于确定针对目标对象的目标关键信息，包括将第一关键信息中与第二关键信息相匹配的信息确定为目标关键信息；第一信息检索模块，用于从预定媒体库中检索与目标关键信息匹配的第一多媒体信息；以及弹幕生成模块，用于基于第一多媒体信息，生成针对目标关键信息的第一弹幕，以在播放视频数据的同时展示第一弹幕，其中，第一弹幕包括针对目标对象的第一推荐信息的链接，第一推荐信息包括第一多媒体信息。
根据本公开的另一个方面，提供了一种电子设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行本公开提供的生成弹幕的方法。
根据本公开的另一个方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，计算机指令用于使计算机执行本公开提供的生成弹幕的方法。
根据本公开的另一个方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现本公开提供的生成弹幕的方法。
应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案，不构成对本公开的限定。其中：
图1是根据本公开实施例的生成弹幕的方法和装置的应用场景示意图；
图2是根据本公开实施例的生成弹幕的方法的流程图；
图3是根据本公开实施例的确定目标关键信息的原理示意图；
图4是根据本公开实施例的生成弹幕的方法的原理示意图；
图5是根据本公开另一实施例的生成弹幕的方法的原理示意图；
图6是根据本公开实施例的推荐信息对交互操作进行响应的示意图；
图7是根据本公开实施例的构建得到的预定知识图谱的结构示意图；
图8是根据本公开实施例的生成弹幕的装置的结构框图；以及
图9是用来实现本公开实施例的生成弹幕的方法的电子设备的框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
本公开提供了一种生成弹幕的方法，包括信息获取阶段、信息提取阶段、关键信息确定阶段、信息检索阶段和弹幕生成阶段。在信息获取阶段，获取视频数据的内容信息和目标对象的属性信息。在信息提取阶段，提取内容信息的第一关键信息，并提取属性信息的第二关键信息。在关键信息确定阶段，确定针对目标对象的目标关键信息，包括将第一关键信息中与第二关键信息相匹配的信息确定为目标关键信息。在信息检索阶段，从预定媒体库中检索与目标关键信息匹配的第一多媒体信息。在弹幕生成阶段，基于第一多媒体信息，生成针对目标关键信息的第一弹幕，以在播放视频数据的同时展示第一弹幕。其中，第一弹幕包括针对目标对象的推荐信息的链接，该推荐信息包括第一多媒体信息。
以下将结合图1对本公开提供的方法和装置的应用场景进行描述。
图1是根据本公开实施例的生成弹幕的方法和装置的应用场景示意图。
如图1所示，该应用场景100包括服务器110、数据库120和终端设备150。服务器110可以通过网络访问数据库120，终端设备150可以通过网络与服务器110通信连接，网络可以包括有线或无线通信链路。
根据本公开的实施例，数据库120中例如可以存储有多媒体信息，该数据库120可以存储有视频平台、文本平台、论坛平台等多平台的全量信息或单一平台的全量信息。服务器110例如可以从数据库120中读取多媒体信息，并将该多媒体信息作为推荐信息发送给终端设备150。
用户160例如可以使用终端设备150通过网络与服务器110交互，以接收或发送消息等。终端设备150可以为具有显示屏、能够进行视频播放的终端设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器110例如可以响应于用户160的交互，向终端设备150发送进行展示的视频数据。该服务器可以是提供各种服务的服务器，例如对用户利用终端设备150所浏览的网站或客户端应用提供支持的后台管理服务器。该服务器可以是云服务器，也可以为分布式***的服务器，或者是结合了区块链的服务器。
在一实施例中，服务器110在向终端设备150发送视频数据之前，例如可以基于视频数据的内容，从数据库120中读取与该视频数据的内容相关的多媒体信息130，作为向用户推荐的信息。将该多媒体信息以弹幕的形式添加至视频数据中。如此，服务器110向终端设备150发送的视频数据为携带弹幕的视频数据140。相应地，终端设备150在接收到携带弹幕的视频数据后，可以在播放视频数据的同时展示该弹幕，从而起到向用户推荐多媒体信息的作用。可以理解的是，服务器110例如还可以响应于终端设备150发送的弹幕获取请求，根据终端设备150待播放的视频帧来读取多媒体信息并生成弹幕，以将弹幕发送给终端设备150。其中，终端设备可以在在播放视频数据时根据待播放视频帧实时地发送弹幕获取请求。或者，服务器110可以将视频数据与弹幕进行分开存储，并以视频数据的标识作为与针对视频数据的弹幕的存储索引。
在一实施例中，该弹幕可以包括针对该多媒体信息的链接，如此，在用户160通过终端设备150观看播放的视频数据时，可以通过对弹幕的点选操作，使得终端设备150的展示画面跳转至多媒体信息130的展示画面。
需要说明的是，本公开所提供的生成弹幕的方法可以由服务器110执行。相应地，本公开所提供的生成弹幕的装置可以设置于服务器110中。本公开所提供的生成弹幕的方法也可以由不同于服务器110且能够与服务器110通信的服务器或服务器集群执行。相应地，本公开所提供的生成弹幕的装置也可以设置于不同于服务器110且能够与服务器110通信的服务器或服务器集群中。
应该理解，图1中的终端设备、服务器和数据库的数目和类型仅仅是示意性的。根据实现需要，可以具有任意数目和类型的终端设备、服务器和数据库。
图2是根据本公开实施例的生成弹幕的方法的流程图。
如图2所示，该实施例的生成弹幕的方法200可以包括操作S210～操作S290。
在操作S210，获取视频数据的内容信息和目标对象的属性信息。
根据本公开的实施例，视频数据的内容信息可以包括视频数据中各视频帧的图像信息、各视频帧中的字幕、各视频帧携带的语音信息等。
根据本公开的实施例，目标对象的属性信息例如可以包括目标对象的静态属性和动态属性等。静态属性为目标对象的基本信息，例如目标对象年龄等。动态属性为目标对象的社会行为所产生的属性，该动态属性可以反映目标对象的喜好等。
在操作S230，提取内容信息的第一关键信息，并提取属性信息的第二关键信息。
根据本公开的实施例，可以采用视频内容理解(VideoContent Understanding)方法来从内容信息中提取第一关键信息。该视频内容理解方法通过一系列的人工智能算法，可以将视频数据解析为结构化的、机器可读的意图与词槽信息。
根据本公开的实施例，可以对内容信息中的图像、字幕和语音等进行解析，从该内容信息中提取实体特征、属性特征及实体特征与属性特征之间的关系特征等。例如，内容信息除了前述的图像、字幕和语音外，还可以包括视频数据的标题、封面图像及分类信息等，以此融合更多信息进行特征提取。例如，还可以根据视频数据的上传时间等来确定视频数据的时效性。例如，还可以根据视频数据的清晰度和视频数据的完整性等来确定视频数据的内容质量。该些提取到的特征和确定的时效性、内容质量等信息可以作为第一关键信息。
示例性地，在得到提取的特征后，例如可以将实体特征与属性特征依据彼此之间的关系特征来构成键值对结构的数据，将该键值对结构的数据作为第一关键信息。示例性地，得到的第一关键信息例如可以包括“物品类别-水果”。
示例性地，在提取第一关键信息的过程中，可以采用人脸识别方法、动物识别方法、植物识别方法等任意的物体识别方法来识别得到视频数据中的实体，并将表示该实体的实体词作为第一关键信息的一部分。
根据本公开的实施例，在得到目标对象的属性信息后，可以将该属性信息整理为键值对结构的数据，以作为第二关键信息。或者，在目标对象的属性信息包括动态信息时，该实施例可以对动态信息所涉及的多媒体信息的标签进行统计，将个数较多的标签作为属性信息的第二关键信息。示例性地，得到的第二关键信息例如可以包括“偶像-张三”。
可以理解的是，上述提取第一关键信息和提取第二关键信息的方法仅作为示例以利于理解本公开，本公开可以采用相关技术中的任意特征提取方法提取第一关键信息和第二关键信息，本公开对此不做限定。
在操作S250，确定针对目标对象的目标关键信息，包括将第一关键信息中与第二关键信息相匹配的信息确定为目标关键信息。
根据本公开的实施例，可以将第一关键信息中与第二关键信息相同的信息作为目标关键信息。例如，若第一关键信息中包括“歌星-张三”，第二关键信息包括“张三”时，则可以确定第一关键信息“歌星-张三”为目标关键信息。或者将第一关键信息中属于第二关键信息指示的类别的实体词作为目标关键信息。例如，若第一关键信息中包括实体词“柯基”，第二关键信息包括“狗”时，可以确定该第一关键信息中的“柯基”为目标关键信息。
根据本公开的实施例，可以先确定各第一关键信息与第二关键信息中各关键信息之间的相似度。将与某个第二关键信息的相似度大于第一预定值的第一关键信息确定为目标关键信息。关键信息之间的相似度可以采用以下任意一种参数形式来体现：余弦相似度、皮尔逊相关系数、杰卡德相似系数等。第一预定值可以根据实际需求进行设定，例如0.7等，本公开对此不做限定。
在操作S270，从预定媒体库中检索与目标关键信息匹配的第一多媒体信息。
根据本公开的实施例，预定媒体库中可以维护有视频信息、音频信息、文本信息等多种类型的多媒体信息，该预定媒体库中的多媒体信息来源于视频平台、内容交互平台、新闻资讯和购物平台等。该预定媒体库中的多媒体信息可以为单模态的信息(例如纯文字信息、纯图片信息等)，可以为多模态的信息(例如图文结合的信息等)。
该实施例在检索第一多媒体信息时，可以将预定媒体库中以目标关键信息为标签的多媒体信息作为第一多媒体信息。或者，该实施例可以确定目标关键信息与预定媒体库中各多媒体信息的描述信息之间的相似度，将描述信息与目标关键信息的相似度大于第二预定值的多媒体信息作为第一多媒体信息。第二预定值可以与前文描述的第一预定值相等或不相等。例如，该第二预定值可以为0.5等，本公开可以根据实际需求选择第二预定值。
在操作S290，基于第一多媒体信息，生成针对目标关键信息的第一弹幕，以在播放视频数据的同时展示第一弹幕。
根据本公开的实施例，在得到第一多媒体信息后，将该第一多媒体信息作为针对目标对象的推荐信息，并将基于该推荐信息得到的弹幕作为针对目标关键信息的第一弹幕。可以将推荐信息的标题、推荐信息的摘要或从推荐信息中提取的关键词等作为第一弹幕内容，将该第一弹幕内容和推荐信息的链接(例如展示页面地址)构成第一弹幕。因此，第一弹幕包括针对目标对象的推荐信息的链接。若推荐信息仅包括第一多媒体信息，该第一弹幕可以包括第一多媒体信息的展示页面地址，若推荐信息包括多个信息时，第一弹幕包括的展示页面地址可以为多个信息排列组成的推荐页面的地址。
综上分析，本公开实施例通过基于视频数据的内容信息和目标对象的属性信息来确定针对目标对象的目标关键信息，并基于该目标关键信息检索多媒体信息，生成包括多媒体信息的链接的弹幕，可以在播放视频数据时，以弹幕形式向目标对象推荐信息。从而可以丰富推荐信息的展示形式，扩展弹幕的功能，并在一定程度上提高信息的点击率。
图3是根据本公开实施例的确定目标关键信息的原理示意图。
如图3所示，该实施例300中，在确定目标关键信息时，除了通过将第二关键信息320和第一关键信息310相比对，确定第一关键信息310中与第二关键信息相匹配的信息311外，还可以从与该相匹配的信息311所属领域关联的目标领域331中来获取与相匹配的信息311关联的词，并将该词与相匹配的信息311共同构成目标关键信息350。
示例性地，本公开可以维护有预定词库340，该预定词库340包括多个预定领域330中的词。该实施例可以先确定相匹配的信息311所属的领域，然后确定多个预定领域330中与相匹配的信息311所属的领域相关联的领域，得到目标领域331。在确定了目标领域331后，从预定词库340中挑选属于该目标领域331，且与相匹配的信息相关联的词(即属于目标领域的词341)，并确定该挑选得到的词为目标关键信息350。相匹配的信息311所属的领域可以为该相匹配的信息311包括的词所属的领域，该所属的领域为多个预定领域330中的一个。
示例性地，预定领域可以包括交通领域、能源领域、食品领域、娱乐领域等。若目标关键信息包括汽车，汽车属于交通领域，则确定的目标领域可以包括能源领域等，从预定词库中挑选的词例如可以包括锂电池等。
示例性地，在确定目标领域时，可以从相匹配的信息311中挑选出实体词，确定与实体词指示的实体相关联的领域作为目标领域。从预定词库中挑选词时，可以仅挑选实体词。
该实施例在确定目标关键信息时，还从与相匹配的信息相关联的领域中挑选目标关键信息，可以提高基于确定的目标关键信息检索到的多媒体信息的多样性，从而提高推荐有效性。
图4是根据本公开实施例的生成弹幕的方法的原理示意图。
如图4所示，该实施例400中，生成的弹幕可以包括第一弹幕460和第二弹幕490。第一弹幕460采用与上述描述的生成弹幕的流程类似的流程生成。例如，根据视频数据的内容信息410和目标对象的属性信息420确定目标关键信息430，基于该目标关键信息430从预定媒体库440中检索第一多媒体信息450，并基于该第一多媒体信息450生成第一弹幕。第二弹幕可以采用以下流程生成：从预定信息库470中检索热点信息480，基于该热点信息480，生成针对热点信息480的第二弹幕490。
示例性地，将热点信息480的标题、摘要或关键词等作为第二弹幕内容，将该第二弹幕内容和热点信息480的链接(例如展示页面地址)构成第二弹幕。该热点信息480与前述的第一多媒体信息共同构成针对目标对象的推荐信息。
示例性地，预定信息库470可以为新闻平台、微博平台等多媒体信息平台的信息库。本公开可以通过调用该多媒体信息平台提供的API接口来获取热点信息。其中，热点信息为对时效性要求较高的信息。
综上分析，本公开实施例不仅基于目标对象的属性信息和视频数据的内容信息来检索推荐信息外，还将热点信息作为推荐信息，从而可以提高推荐信息的多样性，提高推荐有效性。
根据本公开的实施例，确定的目标关键信息可以包括对视频数据中的目标实体加以指示的目标实体词，以提高基于目标关键信息检索第一多媒体信息的召回率。
根据本公开的实施例，在生成第一弹幕后，可以通过设定展示第一弹幕的时间段信息来保证第一弹幕与目标实体同时展示，从而提高第一弹幕所链接的推荐信息的推荐效果，提高该推荐信息的点击率。其中，目标实体为视频数据中匹配于第一弹幕的实体词指示的实体。该实施例在提取第一关键信息时，除了提取实体特征外，还可以将目标实体在视频数据中出现的时间段信息作为指示目标实体的实体特征的标签。如此，目标关键信息除了包括对视频数据中的目标实体加以指示的目标实体词外，还可以包括该目标实体在视频数据中出现的时间段信息。
示例性地，可以将该目标实体在视频数据中出现的时间段信息作为展示针对目标实体词的第一弹幕的时间段信息。其中，时间段信息可以包括起始时间和展示时长。
示例性地，在生成的第一弹幕中针对目标实体词的弹幕的个数较多的情况下，还可以将第一弹幕中针对目标实体词的弹幕作为备选弹幕。根据目标实体在视频数据中出现的时长来确定可展示弹幕的个数，并从该备选弹幕中挑选出可展示弹幕。例如，可以预先设定每个弹幕的展示时长，并根据该展示时长与目标实体出现的时长之间的大小关系来确定可展示弹幕的个数。例如，若目标实体出现的时长为6s，每个弹幕的展示时长为2s，可以确定可展示弹幕的个数为6/2＝3个。在从备选弹幕中挑选可展示弹幕时，例如可以选择与目标实体的匹配度较高的备选弹幕作为与目标实体同时展示的目标弹幕。如此，在确定目标弹幕的时间段信息时，可以将该目标实体在视频数据中出现的时间段信息中的起始时间作为展示目标弹幕的起始时间。将目标实体的出现时长和预定时长中较小的值作为展示目标弹幕的时长。通过设定该预定时长，可以避免用户对该目标弹幕不感兴趣的情况下，目标弹幕长时间展示而给目标对象带来的较差的体验。
可以理解的是，若目标弹幕为多个，此处的展示目标弹幕的起始时间为展示多个目标弹幕中排在首位的目标弹幕的起始时间。例如，若预定时长为前述的2s，目标实体的出现时长为6s，目标弹幕为3个，目标实体出现的起始时间为t，则展示3个目标弹幕中第一个目标弹幕的起始时间为t，时长为2s。展示3个目标弹幕中第二个目标弹幕的起始时间为t+2s，时长为2s，展示3个目标弹幕中第三个目标弹幕的起始时间为t+4s，时长为2s。
根据本公开的实施例，在生成弹幕的方法不仅生成第一弹幕，还生成前述的第二弹幕的情况下，可以根据目标对象的偏好度来确定第一弹幕和第二弹幕的展示比例，并根据该展示比例确定最终展示的目标弹幕。前述目标对象的属性信息包括该目标对象针对热点信息的偏好度。该偏好度可以由目标对象浏览的热点信息个数占浏览的所有信息个数的比例来表示。该实施例可以将该偏好度作为第二弹幕的展示个数占总目标弹幕的展示总个数的比值，从第一弹幕和第二弹幕中抽取目标弹幕。
根据本公开的实施例，在生成弹幕的方法不仅生成第一弹幕，还生成前述的第二弹幕，且需要第一弹幕与该第一弹幕所针对的目标实体词指示的实体同时展示的情况下，可以在展示针对目标实体词的第一弹幕的同时，根据前述偏好度展示一定数量的第二弹幕，以此提高弹幕链接的信息的多样性和点击率。以下将结合图5，对该情况下生成弹幕的方法进行描述。
图5是根据本公开另一实施例的生成弹幕的方法的原理示意图。
如图5所示，该实施例500的生成弹幕的方法在生成第一弹幕和第二弹幕520后，可以先从第一弹幕中挑选出针对目标实体词的备选弹幕510。在挑选得到备选弹幕510后，将该备选弹幕510和第二弹幕520共同构成挑选目标弹幕530的弹幕池。
根据本公开的实施例，在弹幕池中第二弹幕520和备选弹幕510的数量较多时，在目标实体在视频数据中出现的时间段内，该弹幕池中的弹幕无法全部展示。该实施例可以从该弹幕池中挑选出能够展示的弹幕，作为目标弹幕530。在挑选目标弹幕530时，该实施例可以先基于目标实体的时间段信息540，来确定可展示弹幕的个数550。随后根据偏好度560，来确定备选弹幕的展示个数和第二弹幕的展示个数的比值570。在确定比值570后，根据该比值570和可展示弹幕的个数550，从弹幕池中挑选目标弹幕530。挑选得到的目标弹幕530中第二弹幕的比例可以与偏好度560相等。
在得到目标弹幕530后，可以根据目标实体的时间段信息540来确定展示目标弹幕的时间段信息580。将该展示目标弹幕的时间段信息580作为目标弹幕530的标签，即可得到视频数据携带的弹幕信息590。该视频数据携带的弹幕信息590可以与视频数据压缩一并压缩得到数据包，终端设备在请求获取视频数据时，将该数据包作为反馈信息反馈给终端设备。
示例性地，在得到视频数据携带的弹幕信息590后，例如还可以将该视频数据携带的弹幕信息590存储在区块链的共享账本中，在需要向目标对象推荐信息时，从区块链的共享账本中提取该视频数据携带的弹幕信息590，并提供给终端设备，供终端设备在展示视频数据的同时展示该弹幕信息。
根据本公开的实施例，在得到目标弹幕后，可以将该目标实体在视频数据中出现的时间段信息中的起始时间作为展示目标弹幕的起始时间。将目标实体的出现时长和预定时长中较小的值作为展示目标弹幕的时长。
可以理解的是，该实施例中基于偏好度挑选弹幕和确定目标弹幕的时间段信息的方法与前文描述的方法类似，在此不再赘述。
图6是根据本公开实施例的推荐信息对交互操作进行响应的示意图。
根据本公开的实施例，在生成第一弹幕时，通过该第一弹幕除了可以向目标对象推荐第一多媒体信息外，例如还可以通过知识图谱来挖掘与目标关键信息中的目标实体词关联的多媒体信息，并向目标对象推荐该关联的多媒体信息，从而进一步向目标对象推荐更为丰富的信息。
示例性地，前述目标关键信息包括对视频数据中的多个目标实体分别加以指示的多个目标实体词，针对多个目标实体词中每个目标实体词的第一弹幕的个数为至少一个。该实施例的生成弹幕的方法还包括基于预定知识图谱，确定与每个目标实体词关联的第二多媒体信息的操作。在得到该第二多媒体信息后，可以基于该第二多媒体信息和与每个目标实体词匹配的第一多媒体信息生成推荐信息。
示例性地，可以将第二多媒体信息的标题和与每个目标实体词匹配的第一多媒体信息的标题排列形成推荐页面，将该推荐页面作为推荐信息。排列顺序可以根据多媒体信息与目标实体词的匹配程序来设置。或者，可以将与每个目标实体词匹配的第一多媒体信息排在第一位，将第二多媒体信息随机排列在第一位之后。如此，由于第一弹幕包括针对目标对象的推荐信息的链接，因此在终端设备展示第一弹幕后，即可响应于对该第一弹幕的点选操作，跳转至推荐页面。
示例性地，如图6所示的实施例600，若视频数据中出现的实体包括歌手“张三”，则终端设备在视频播放到“张三”的画面610时，即可在画面610中展示针对“张三”的弹幕611“XX年X月X日生，歌手#张三”。响应于对该弹幕611的点选操作，该终端设备的展示页面例如可以切换为页面620，该页面620中，除了与“张三”匹配的第一多媒体信息“张三”的百科信息621外，还可以包括与百科信息621关联的“张三”的作品信息622(例如可以包括照片、音乐和视频等)，及与“张三”关联的“张三的公司”的动态信息623。
根据本公开的实施例，在基于预定知识图谱确定第二多媒体信息时，例如可以先定位到预定知识图谱中指示目标实体的节点，然后以该节点为起点，根据该节点与其他节点的连接关系进行扩散，将进行n次扩散后得到的节点所指示的多媒体信息作为第二多媒体信息。该预定知识图谱中的节点包括指示实体的节点和指示多媒体信息的节点，具体地，该预定知识图谱可以采用下文描述的方法构建得到，在此不再详述。其中，n的取值可以根据实际需求进行设定，例如，n可以为大于等于2的自然数，本公开对此不做限定。
根据本公开的实施例，在生成推荐信息时，例如还可以从预定信息库随机获取目标实体的图像，并对该图像进行智能裁剪和智能取色，生成前述排列第一多媒体信息和第二多媒体信息所形成的展示页面的头图和背景色，以此提高推荐信息的美观度。
根据本公开的实施例，在通过前述方法生成第一弹幕和/或第二弹幕后，该实施例的生成弹幕的方法还可以对每个弹幕的展示方式进行设定。例如设定弹幕的展示位置和展示形式，以在展示该生成的弹幕时，将生成的弹幕与评论弹幕进行区分。例如，若评论弹幕展示于视频数据的视频帧中的顶部区域，则该生成的弹幕可以展示于视频数据的视频帧中的底部区域或侧部区域。或者，可以为该生成的弹幕设定较大的展示字体等。在一实施例中，还可以在生成弹幕时，向弹幕添加作为标识符的内容，该标识符可以为五角星、三角形、表情符号等图形信息。
图7是根据本公开实施例的构建得到的预定知识图谱的结构示意图。
该实施例生成弹幕的方法还可以包括构建预定知识图谱的操作。该构建预定知识图谱的操作可以先从预定词库中检索与每个目标实体词相关联的实体词，得到针对多个目标实体词的关联实体词。得到关联实体词后，从前文描述的预定媒体库中检索与关联实体词匹配的第三多媒体信息。在得到与目标实体词匹配的第一多媒体信息及与关联实体词匹配的第三多媒体信息后，可以构建分别指示关联实体词、多个目标实体词、第一多媒体信息和第三多媒体信息的多个节点，并基于多个目标实体词与关联实体词之间的关联关系、多个目标实体词与第一多媒体信息之间的匹配关系及关联实体词与第三多媒体信息之间的匹配关系，构建多个节点之间的连接边，得到预定知识图谱。
示例性地，如图7所示，该实施例构建得到的知识图谱700至少包括指示目标实体词A1的节点711，指示与目标实体词A1关联的实体词a1的节点712，指示与目标实体词A1匹配的第一多媒体信息的节点(包括指示信息B1的节点721和指示信息B2的节点722)，及指示与实体词a1匹配的第三多媒体信息的节点(包括指示信息b1的节点723、指示信息b2的节点724和指示信息b3的节点725)。在基于预定知识图谱，确定第二多媒体信息时，可以先定位得到节点711。然后以节点711为起点，根据连接节点711的边，向外跳动一步，得到节点721、节点722和节点712，完成第一次扩散。随后以节点721、节点722和节点712为起点，向外跳动一步，得到节点723、节点724和节点725，完成第二次扩散，依次类推，完成n次扩散。将扩散得到的所有节点指示的信息中的多媒体信息作为第二多媒体信息。在该实施例中，第二多媒体信息至少包括信息b1、信息b2和信息b3。
根据本公开的实施例，在构建该预定知识图谱时，例如可以将预定信息库中的图文、问答、视频、动态、百科、音乐、帖子、文库、直播和热榜等多种不同类型的信息，根据与前述第一多媒体信息和第三多媒体信息之间的关联性，均融合至该预定知识图谱中，从而丰富基于知识图谱得到的第二多媒体信息。
可以理解的是，图7中的知识图谱700还可以包括其他实体词，及与该其他实体词匹配的多媒体信息，及与多媒体信息相关联的其他多媒体信息等。例如，图7中的知识图谱700至少还可以包括指示实体词A2的节点713，信息b3与该实体词A2相匹配。
图8是根据本公开实施例的生成弹幕的装置的结构框图。
如图8所示，该实施例的生成弹幕的装置800可以包括信息获取模块810、信息提取模块830、关键信息确定模块850、第一信息检索模块870和弹幕生成模块890。
信息获取模块810用于获取视频数据的内容信息和目标对象的属性信息。在一实施例中，信息获取模块810用于执行前文描述的操作S210，在此不再赘述。
信息提取模块830用于提取内容信息的第一关键信息，并提取属性信息的第二关键信息。在一实施例中，信息提取模块830用于执行前文描述的操作S230，在此不再赘述。
关键信息确定模块850用于确定针对目标对象的目标关键信息，包括将第一关键信息中与第二关键信息相匹配的信息确定为目标关键信息。在一实施例中，关键信息确定模块850用于执行前文描述的操作S250，在此不再赘述。
第一信息检索模块870用于从预定媒体库中检索与目标关键信息匹配的第一多媒体信息。在一实施例中，第一信息检索模块870用于执行前文描述的操作S270，在此不再赘述。
弹幕生成模块890用于基于第一多媒体信息，生成针对目标关键信息的第一弹幕，以在播放视频数据的同时展示第一弹幕。在一实施例中，弹幕生成模块890用于执行前文描述的操作S290，在此不再赘述。
根据本公开的实施例，上述关键信息确定模块还用于先确定预定领域中与相匹配的信息相关联的领域，作为目标领域。随后将预定词库中属于目标领域且与相匹配的信息相关联的词确定为目标关键信息。
根据本公开的实施例，上述生成弹幕的装置800还包括第二信息检索模块，用于从预定信息库中检索热点信息。前述弹幕生成模块还用于生成针对热点信息的第二弹幕，以在播放视频数据的同时展示第二弹幕。其中，第二弹幕包括热点信息的链接。
根据本公开的实施例，目标关键信息包括对视频数据中的目标实体加以指示的目标实体词及目标实体在视频数据中出现的时间段信息。上述生成弹幕的装置800还包括备选弹幕确定模块、个数确定模块、目标弹幕确定模块和时间信息确定模块。备选弹幕确定模块用于确定第一弹幕中针对目标弹实体词的弹幕，作为备选弹幕。个数确定模块用于基于目标实体在视频数据中出现的时间段信息，确定可展示弹幕的个数。目标弹幕确定模块用于可展示弹幕的个数和备选弹幕，确定目标弹幕。时间信息确定模块用于基于目标实体在视频数据中出现的时间段信息，确定展示目标弹幕的时间段信息。
根据本公开的实施例，上述属性信息包括目标对象针对热点信息的偏好度。上述备选弹幕的个数为多个，第二弹幕的个数为多个。上述目标弹幕确定模块包括比值确定子模块和弹幕确定子模块。比值确定子模块用于基于偏好度，确定备选弹幕的展示个数与第二弹幕的展示个数的比值。弹幕确定子模块用于基于比值和可展示弹幕的个数，确定备选弹幕和第二弹幕中的目标弹幕。
根据本公开的实施例，上述目标实体在视频数据中出现的时间段信息包括目标实体的出现时长和目标实体出现的起始时间。上述时间信息确定模块包括起始时间确定子模块和时长确定子模块。起始时间确定子模块用于确定展示目标弹幕的起始时间为目标实体出现的起始时间。时长确定子模块用于确定展示目标弹幕的时长为目标实体的出现时长和预定时长中较小的值。
根据本公开的实施例，上述目标关键信息包括对视频数据中的多个目标实体分别加以指示的多个目标实体词，针对多个目标实体词中每个目标实体词的第一弹幕的个数为至少一个。上述生成弹幕的装置800还包括多媒体信息确定模块和推荐信息生成模块。多媒体信息确定模块用于针对每个目标实体词，基于预定知识图谱，确定与每个目标实体词关联的第二多媒体信息。推荐信息生成模块用于基于第二多媒体信息和与每个目标实体词匹配的第一多媒体信息，生成推荐信息。
根据本公开的实施例，上述生成弹幕的装置800还包括图谱构建模块，用于构建预定知识图谱。该图谱构建模块包括关联词检索子模块、信息检索子模块、节点构建子模块和边构建子模块。关联词检索子模块用于从预定词库中检索与每个目标实体词相关联的实体词，得到针对多个目标实体词的关联实体词。信息检索子模块用于从预定媒体库中检索与关联实体词匹配的第三多媒体信息。节点构建子模块用于构建分别指示关联实体词、多个目标实体词、第一多媒体信息和第三多媒体信息的多个节点。边构建子模块用于基于多个目标实体词与关联实体词之间的关联关系、多个目标实体词与第一多媒体信息之间的匹配关系及关联实体词与第三多媒体信息之间的匹配关系，构建多个节点之间的连接边，得到预定知识图谱。
需要说明的是，本公开的技术方案中，所涉及的用户个人信息的获取、存储和应用等，均符合相关法律法规的规定，且不违背公序良俗。
根据本公开的实施例，本公开还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。
图9示出了可以用来实施本公开的实施例的示例电子设备900的示意性框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图9所示，设备900包括计算单元901，其可以根据存储在只读存储器(ROM)902中的计算机程序或者从存储单元908加载到随机访问存储器(RAM)903中的计算机程序，来执行各种适当的动作和处理。在RAM 903中，还可存储设备900操作所需的各种程序和数据。计算单元901、ROM 902以及RAM 903通过总线904彼此相连。输入/输出(I/O)接口905也连接至总线904。
设备900中的多个部件连接至I/O接口905，包括：输入单元906，例如键盘、鼠标等；输出单元907，例如各种类型的显示器、扬声器等；存储单元908，例如磁盘、光盘等；以及通信单元909，例如网卡、调制解调器、无线通信收发机等。通信单元909允许设备900通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元901可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元901的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元901执行上文所描述的各个方法和处理，例如生成弹幕的方法。例如，在一些实施例中，生成弹幕的方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元908。在一些实施例中，计算机程序的部分或者全部可以经由ROM 902和/或通信单元909而被载入和/或安装到设备900上。当计算机程序加载到RAM 903并由计算单元901执行时，可以执行上文描述的生成弹幕的方法的一个或多个步骤。备选地，在其他实施例中，计算单元901可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行生成弹幕的方法。
本文中以上描述的***和技术的各种实施方式可以在数字电子电路***、集成电路***、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上***的***(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程***上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储***、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储***、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行***、装置或设备使用或与指令执行***、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体***、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互，可以在计算机上实施此处描述的***和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的***和技术实施在包括后台部件的计算***(例如，作为数据服务器)、或者包括中间件部件的计算***(例如，应用服务器)、或者包括前端部件的计算***(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的***和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算***中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将***的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)和互联网。
计算机***可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。
应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本公开公开的技术方案所期望的结果，本文在此不进行限制。
上述具体实施方式，并不构成对本公开保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等，均应包含在本公开保护范围之内。

Claims (18)

1.一种生成弹幕的方法，包括：
获取视频数据的内容信息和目标对象的属性信息；
提取所述内容信息的第一关键信息，并提取所述属性信息的第二关键信息；
确定针对所述目标对象的目标关键信息，包括将所述第一关键信息中与所述第二关键信息相匹配的信息确定为所述目标关键信息；
从预定媒体库中检索与所述目标关键信息匹配的第一多媒体信息；以及
基于所述第一多媒体信息，生成针对所述目标关键信息的第一弹幕，以在播放所述视频数据的同时展示所述第一弹幕，
其中，所述第一弹幕包括针对所述目标对象的推荐信息的链接，所述推荐信息包括所述第一多媒体信息；
其中，所述确定针对所述目标对象的目标关键信息还包括：
确定预定领域中与所述相匹配的信息所属领域相关联的领域，作为目标领域；以及
将预定词库中属于所述目标领域且与所述相匹配的信息相关联的词确定为所述目标关键信息。
2.根据权利要求1所述的方法，其中，所述目标关键信息包括对所述视频数据中的目标实体加以指示的目标实体词及所述目标实体在所述视频数据中出现的时间段信息；所述方法还包括：
确定所述第一弹幕中针对所述目标实体词的弹幕，作为备选弹幕；
基于所述目标实体在所述视频数据中出现的时间段信息，确定可展示弹幕的个数；
基于所述可展示弹幕的个数和所述备选弹幕，确定目标弹幕；以及
基于所述目标实体在所述视频数据中出现的时间段信息，确定展示所述目标弹幕的时间段信息。
3.根据权利要求1所述的方法，还包括：
从预定信息库中检索热点信息；以及
生成针对所述热点信息的第二弹幕，以在播放所述视频数据的同时展示所述第二弹幕，
其中，所述第二弹幕包括所述热点信息的链接。
4.根据权利要求3所述的方法，其中，所述目标关键信息包括对所述视频数据中的目标实体加以指示的目标实体词及所述目标实体在所述视频数据中出现的时间段信息；所述方法还包括：
确定所述第一弹幕中针对所述目标实体词的弹幕，作为备选弹幕；
基于所述目标实体在所述视频数据中出现的时间段信息，确定可展示弹幕的个数；
基于所述可展示弹幕的个数和所述备选弹幕，确定目标弹幕；以及
基于所述目标实体在所述视频数据中出现的时间段信息，确定展示所述目标弹幕的时间段信息。
5.根据权利要求4所述的方法，其中，所述属性信息包括所述目标对象针对所述热点信息的偏好度；所述备选弹幕的个数为多个，所述第二弹幕的个数为多个；确定目标弹幕包括：
基于所述偏好度，确定所述备选弹幕的展示个数和所述第二弹幕的展示个数的比值；以及
基于所述比值和所述可展示弹幕的个数，确定所述备选弹幕和所述第二弹幕备选弹幕中的目标弹幕。
6.根据权利要求2或4所述的方法，其中，所述目标实体在所述视频数据中出现的时间信息包括所述目标实体的出现时长和所述目标实体出现的起始时间；确定展示所述目标弹幕的时间段信息包括：
确定展示所述目标弹幕的起始时间为所述目标实体出现的起始时间；以及
确定展示所述目标弹幕的时长为所述目标实体的出现时长和预定时长中较小的值。
7.根据权利要求1或3所述的方法，其中，所述目标关键信息包括对所述视频数据中的多个目标实体分别加以指示的多个目标实体词，针对多个目标实体词中每个目标实体词的第一弹幕的个数为至少一个；所述方法还包括针对所述每个目标实体词：
基于预定知识图谱，确定与所述每个目标实体词关联的第二多媒体信息；以及
基于所述第二多媒体信息和与所述每个目标实体词匹配的第一多媒体信息，生成所述推荐信息。
8.根据权利要求7所述的方法，还包括构建所述预定知识图谱，包括：
从预定词库中检索与所述每个目标实体词相关联的实体词，得到针对所述多个目标实体词的关联实体词；
从所述预定媒体库中检索与所述关联实体词匹配的第三多媒体信息；
构建分别指示所述关联实体词、所述多个目标实体词、所述第一多媒体信息和所述第三多媒体信息的多个节点；以及
基于所述多个目标实体词与所述关联实体词之间的关联关系、所述多个目标实体词与所述第一多媒体信息之间的匹配关系及所述关联实体词与所述第三多媒体信息之间的匹配关系，构建所述多个节点之间的连接边，得到所述预定知识图谱。
9.一种生成弹幕的装置，包括：
信息获取模块，用于获取视频数据的内容信息和目标对象的属性信息；
信息提取模块，用于提取所述内容信息的第一关键信息，并提取所述属性信息的第二关键信息；
关键信息确定模块，用于确定针对所述目标对象的目标关键信息，包括将所述第一关键信息中与所述第二关键信息相匹配的信息确定为所述目标关键信息；
第一信息检索模块，用于从预定媒体库中检索与所述目标关键信息匹配的第一多媒体信息；以及
弹幕生成模块，用于基于所述第一多媒体信息，生成针对所述目标关键信息的第一弹幕，以在播放所述视频数据的同时展示所述第一弹幕，
其中，所述第一弹幕包括针对所述目标对象的第一推荐信息的链接，所述第一推荐信息包括所述第一多媒体信息；
其中，所述关键信息确定模块还用于：
确定预定领域中与所述相匹配的信息所属领域相关联的领域，作为目标领域；以及
将预定词库中属于所述目标领域且与所述相匹配的信息相关联的词确定为所述目标关键信息。
10.根据权利要求9所述的装置，其中，所述目标关键信息包括对所述视频数据中的目标实体加以指示的目标实体词及所述目标实体在所述视频数据中出现的时间段信息；所述装置还包括：
备选弹幕确定模块，用于确定第一弹幕中针对目标实体词的弹幕，作为备选弹幕；
个数确定模块，用于基于所述目标实体在所述视频数据中出现的时间段信息，确定可展示弹幕的个数；
目标弹幕确定模块，用于基于所述可展示弹幕的个数和备选弹幕，确定目标弹幕；以及
时间信息确定模块，用于基于所述目标实体在所述视频数据中出现的时间段信息，确定展示所述目标弹幕的时间段信息。
11.根据权利要求9所述的装置，还包括：
第二信息检索模块，用于从预定信息库中检索热点信息；
其中，所述弹幕生成模块还用于生成针对所述热点信息的第二弹幕，以在播放所述视频数据的同时展示所述第二弹幕，
其中，所述第二弹幕包括所述热点信息的链接。
12.根据权利要求11所述的装置，其中，所述目标关键信息包括对所述视频数据中的目标实体加以指示的目标实体词及所述目标实体在所述视频数据中出现的时间段信息；所述装置还包括：
备选弹幕确定模块，用于确定第一弹幕中针对目标实体词的弹幕，作为备选弹幕；
个数确定模块，用于基于所述目标实体在所述视频数据中出现的时间段信息，确定可展示弹幕的个数；
目标弹幕确定模块，用于基于所述可展示弹幕的个数和备选弹幕，确定目标弹幕；以及
时间信息确定模块，用于基于所述目标实体在所述视频数据中出现的时间段信息，确定展示所述目标弹幕的时间段信息。
13.根据权利要求12所述的装置，其中，所述属性信息包括所述目标对象针对所述热点信息的偏好度；所述备选弹幕的个数为多个，所述第二弹幕的个数为多个；所述目标弹幕确定模块包括：
比值确定子模块，用于基于所述偏好度，确定所述备选弹幕的展示个数与所述第二弹幕的展示个数的比值；以及
弹幕确定子模块，用于基于所述比值和所述可展示弹幕的个数，确定所述备选弹幕和所述第二弹幕中的目标弹幕。
14.根据权利要求10或12所述的装置，其中，所述目标实体在所述视频数据中出现的时间段信息包括所述目标实体的出现时长和所述目标实体出现的起始时间；所述时间信息确定模块包括：
起始时间确定子模块，用于确定展示所述目标弹幕的起始时间为所述目标实体出现的起始时间；以及
时长确定子模块，用于确定展示所述目标弹幕的时长为所述目标实体的出现时长和预定时长中较小的值。
15.根据权利要求9或11所述的装置，其中，所述目标关键信息包括对视频数据中的多个目标实体分别加以指示的多个目标实体词，针对多个目标实体词中每个目标实体词的第一弹幕的个数为至少一个；所述装置还包括：
多媒体信息确定模块，用于针对所述每个目标实体词，基于预定知识图谱，确定与所述每个目标实体词关联的第二多媒体信息；以及
推荐信息生成模块，用于基于所述第二多媒体信息和与所述每个目标实体词匹配的第一多媒体信息，生成所述推荐信息。
16.根据权利要求15所述的装置，还包括图谱构建模块，用于构建所述预定知识图谱；所述图谱构建模块包括：
关联词检索子模块，用于从预定词库中检索与所述每个目标实体词相关联的实体词，得到针对所述多个目标实体词的关联实体词；
信息检索子模块，用于从所述预定媒体库中检索与所述关联实体词匹配的第三多媒体信息；
节点构建子模块，用于构建分别指示所述关联实体词、所述多个目标实体词、所述第一多媒体信息和所述第三多媒体信息的多个节点；以及
边构建子模块，用于基于所述多个目标实体词与所述关联实体词之间的关联关系、所述多个目标实体词与所述第一多媒体信息之间的匹配关系及所述关联实体词与所述第三多媒体信息之间的匹配关系，构建所述多个节点之间的连接边，得到所述预定知识图谱。
17.一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1～8中任一项所述的方法。
18.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1～8中任一项所述的方法。
CN202110323018.5A 2021-03-25 2021-03-25 生成弹幕的方法、装置、设备和存储介质 Active CN113079417B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN202110323018.5A CN113079417B (zh) 2021-03-25 2021-03-25 生成弹幕的方法、装置、设备和存储介质
US17/646,119 US20220124421A1 (en) 2021-03-25 2021-12-27 Method of generating bullet comment, device, and storage medium
JP2021214380A JP2022043273A (ja) 2021-03-25 2021-12-28 弾幕を生成する方法、装置、デバイス、記憶媒体およびコンピュータプログラム製品
EP21218026.9A EP3996373A3 (en) 2021-03-25 2021-12-28 Method and apparatus of generating bullet comment, device, and storage medium
KR1020210191423A KR20220006491A (ko) 2021-03-25 2021-12-29 댓글 자막을 생성하는 방법, 장치, 전자 기기, 저장 매체 및 컴퓨터 프로그램

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110323018.5A CN113079417B (zh) 2021-03-25 2021-03-25 生成弹幕的方法、装置、设备和存储介质

Publications (2)

Publication Number Publication Date
CN113079417A CN113079417A (zh) 2021-07-06
CN113079417B true CN113079417B (zh) 2023-01-17

Family

ID=76610287

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110323018.5A Active CN113079417B (zh) 2021-03-25 2021-03-25 生成弹幕的方法、装置、设备和存储介质

Country Status (5)

Country Link
US (1) US20220124421A1 (zh)
EP (1) EP3996373A3 (zh)
JP (1) JP2022043273A (zh)
KR (1) KR20220006491A (zh)
CN (1) CN113079417B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113660467A (zh) * 2021-08-18 2021-11-16 江西省科学院应用物理研究所 一种基于区块链技术的视频监控***、方法、设备及介质
CN114629882A (zh) * 2022-03-09 2022-06-14 北京字跳网络技术有限公司 信息展示方法、装置、电子设备、存储介质和程序产品
CN114611023A (zh) * 2022-03-15 2022-06-10 腾讯科技（深圳）有限公司 搜索结果的显示方法、装置、设备、介质及程序产品
CN115243111B (zh) * 2022-07-05 2024-06-11 腾讯科技（北京）有限公司 视频弹幕生成方法、装置、存储介质及电子设备
CN115426522A (zh) * 2022-11-02 2022-12-02 北京搜狐新动力信息技术有限公司 信息推荐方法和装置
CN116306514B (zh) * 2023-05-22 2023-09-08 北京搜狐新媒体信息技术有限公司 一种文本处理方法及装置、电子设备、存储介质
CN117221669B (zh) * 2023-11-08 2024-03-08 飞狐信息技术（天津）有限公司 一种弹幕生成方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105916051A (zh) * 2016-05-12 2016-08-31 乐视控股（北京）有限公司 一种内容推荐方法及装置
CN111143610A (zh) * 2019-12-30 2020-05-12 腾讯科技（深圳）有限公司 一种内容推荐方法、装置、电子设备和存储介质
CN111444415A (zh) * 2020-03-24 2020-07-24 咪咕音乐有限公司 弹幕处理方法、服务器、客户端、电子设备及存储介质
CN111757188A (zh) * 2020-06-24 2020-10-09 浙江炬光电气有限公司 一种基于商品信息的弹幕显示方法及***
CN111753198A (zh) * 2020-06-22 2020-10-09 北京百度网讯科技有限公司 信息推荐方法和装置、以及电子设备和可读存储介质
CN111818370A (zh) * 2020-06-30 2020-10-23 腾讯科技（深圳）有限公司 信息推荐方法、装置、电子设备及计算机可读存储介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4482829B2 (ja) * 2006-11-08 2010-06-16 ソニー株式会社 嗜好抽出装置、嗜好抽出方法及び嗜好抽出プログラム
US7982615B2 (en) * 2008-12-23 2011-07-19 Dish Network L.L.C. Systems and methods for providing viewer-related information on a display based upon wireless identification of a particular viewer
US10455269B2 (en) * 2009-12-18 2019-10-22 Crossbar Media Group, Inc. Systems and methods for automated extraction of closed captions in real time or near real-time and tagging of streaming data for advertisements
US8744237B2 (en) * 2011-06-20 2014-06-03 Microsoft Corporation Providing video presentation commentary
US9952742B2 (en) * 2013-03-14 2018-04-24 Google Llc Providing trending information to users
US9294712B2 (en) * 2013-03-20 2016-03-22 Google Inc. Interpolated video tagging
JP6030695B2 (ja) * 2015-04-17 2016-11-24 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および情報処理方法
CN105578222B (zh) * 2016-02-01 2019-04-12 百度在线网络技术（北京）有限公司 一种信息推送方法和装置
WO2018232622A1 (en) * 2017-06-21 2018-12-27 Microsoft Technology Licensing, Llc RECOMMENDATION OF MULTIMEDIA CONTENT THROUGH CONVERSATIONAL ROBOTS
CN107948761B (zh) * 2017-12-12 2021-01-01 上海哔哩哔哩科技有限公司 弹幕播放控制方法、服务器及弹幕播放控制***
CN109379636B (zh) * 2018-09-20 2022-06-17 京东方科技集团股份有限公司 弹幕处理方法、装置及***
US11363315B2 (en) * 2019-06-25 2022-06-14 At&T Intellectual Property I, L.P. Video object tagging based on machine learning
CN111753135B (zh) * 2020-05-21 2024-02-06 北京达佳互联信息技术有限公司 视频展示方法、装置、终端、服务器、***及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105916051A (zh) * 2016-05-12 2016-08-31 乐视控股（北京）有限公司 一种内容推荐方法及装置
CN111143610A (zh) * 2019-12-30 2020-05-12 腾讯科技（深圳）有限公司 一种内容推荐方法、装置、电子设备和存储介质
CN111444415A (zh) * 2020-03-24 2020-07-24 咪咕音乐有限公司 弹幕处理方法、服务器、客户端、电子设备及存储介质
CN111753198A (zh) * 2020-06-22 2020-10-09 北京百度网讯科技有限公司 信息推荐方法和装置、以及电子设备和可读存储介质
CN111757188A (zh) * 2020-06-24 2020-10-09 浙江炬光电气有限公司 一种基于商品信息的弹幕显示方法及***
CN111818370A (zh) * 2020-06-30 2020-10-23 腾讯科技（深圳）有限公司 信息推荐方法、装置、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
CN113079417A (zh) 2021-07-06
EP3996373A2 (en) 2022-05-11
EP3996373A3 (en) 2022-06-22
JP2022043273A (ja) 2022-03-15
US20220124421A1 (en) 2022-04-21
KR20220006491A (ko) 2022-01-17

Similar Documents

Publication Publication Date Title
CN113079417B (zh) 生成弹幕的方法、装置、设备和存储介质
CN109819284B (zh) 一种短视频推荐方法、装置、计算机设备及存储介质
CN111143610B (zh) 一种内容推荐方法、装置、电子设备和存储介质
US20240045898A1 (en) Search result display method, apparatus and device, and medium
WO2018149115A1 (zh) 用于提供搜索结果的方法和装置
US10592565B2 (en) Method and apparatus for providing recommended information
US20240054165A1 (en) Method, apparatus and device for implementing search
JP2021192241A (ja) 検索／作成されたデジタルメディアファイルに基づく潜在的関連のあるトピックの予測
WO2017080173A1 (zh) 基于自然信息识别的推送***和方法及一种客户端
US20180268053A1 (en) Electronic document generation using data from disparate sources
US11423096B2 (en) Method and apparatus for outputting information
US20180210961A1 (en) Information search method and apparatus
CN113779381B (zh) 资源推荐方法、装置、电子设备和存储介质
CN112287168A (zh) 用于生成视频的方法和装置
CN114154013A (zh) 视频推荐方法、装置、设备及存储介质
CN111309200A (zh) 一种扩展阅读内容的确定方法、装置、设备及存储介质
JP2023549903A (ja) マルチメディアのインタラクション方法、情報インタラクション方法、装置、機器及び媒体
CN115203539A (zh) 一种媒体内容推荐方法、装置、设备及存储介质
CN109116718B (zh) 设置闹钟的方法及设备
US10341272B2 (en) Personality reply for digital content
CN113365138B (zh) 内容展示方法、装置、电子设备、存储介质
CN115098729A (zh) 视频处理方法、样本生成方法、模型训练方法及装置
CN112818190A (zh) 内容分享方法、装置、电子设备和存储介质
CN113535940A (zh) 事件摘要生成方法、装置及电子设备
CN110659419A (zh) 确定目标用户的方法及相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant