JP7065545B1 - ライブ配信システム、ライブ配信方法、及びライブ配信プログラム - Google Patents
ライブ配信システム、ライブ配信方法、及びライブ配信プログラム Download PDFInfo
- Publication number
- JP7065545B1 JP7065545B1 JP2021185206A JP2021185206A JP7065545B1 JP 7065545 B1 JP7065545 B1 JP 7065545B1 JP 2021185206 A JP2021185206 A JP 2021185206A JP 2021185206 A JP2021185206 A JP 2021185206A JP 7065545 B1 JP7065545 B1 JP 7065545B1
- Authority
- JP
- Japan
- Prior art keywords
- image
- data
- face
- video
- live
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 20
- 238000003672 processing method Methods 0.000 claims abstract description 36
- 238000013500 data storage Methods 0.000 claims abstract description 13
- 238000006243 chemical reaction Methods 0.000 claims abstract description 12
- 238000007726 management method Methods 0.000 claims abstract description 12
- 230000001815 facial effect Effects 0.000 claims abstract description 8
- 230000006870 function Effects 0.000 claims description 28
- 239000003550 marker Substances 0.000 claims description 9
- 238000000605 extraction Methods 0.000 claims description 7
- 239000000284 extract Substances 0.000 claims description 5
- 238000005315 distribution function Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 abstract description 5
- 238000010801 machine learning Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
本発明の第1の実施形態に係るライブ配信システムを以下に説明する。図1に、本実施形態に係るライブ配信システム10の構成の一例を示す。図1に示すライブ配信システム10は、第1カメラ101a、第2カメラ101b、第3カメラ101c、第1マイクロフォン102a、第2マイクロフォン102b、第3マイクロフォン102c、映像調整装置103、映像変換装置104、配信サーバ105、ネットワーク106、視聴者端末107a、107b、107cから構成される。
101a 第1カメラ
101b 第2カメラ
101c 第3カメラ
102a 第1マイクロフォン
102b 第2マイクロフォン
102c 第3マイクロフォン
103 映像調整装置
104 映像変換装置
105 配信サーバ
106 ネットワーク
107a、107b、107c 視聴者端末
201a 第1映像データ変換器
201b 第2映像データ変換器
201c 第3映像データ変換器
202a 第1音声データ変換器
202b 第2音声データ変換器
202c 第3音声データ変換器
203a 第1合成器
203b 第2合成器
203c 第3合成器
204 スイッチャー
205 エンコーダー
206 ストリーミングサーバ
301 映像編集部
302 入出力部
303 視聴者情報管理部
304 視聴者情報記憶部
401 顔画像判定部
402 画像データ記憶部
403 画像処理部
404 画像表示部
Claims (14)
- ライブを撮影して1又は複数の映像データを生成するための1又は複数のカメラと、
前記ライブの音声を録音して1又は複数の音声データを生成するための1又は複数のマイクロフォンと、
前記1又は複数の映像データ及び前記1又は複数の音声データから動画データを生成する映像調整装置と、
前記動画データを編集する映像変換装置と、
編集された前記動画データを視聴者端末へ送信する配信サーバと
を備えるライブ動画を配信するライブ配信システムであって、前記映像変換装置は、
映像編集部と、
前記視聴者端末と、前記ライブ動画に対するコメントを前記ライブ動画において表現するための情報を含むコメントデータと、顔の画像に対する画像処理の方法をリクエストする情報を含むリクエストデータの送受信をする入出力部と、
1又は複数の視聴者の登録と認証を行う視聴者情報管理部と、
前記1又は複数の視聴者の視聴者情報、視聴者ID及びパスワードを記憶する視聴者情報記憶部と
を備え、前記映像編集部は、
予め撮影された画像データ内の、1又は複数の特定の人物に関するタグを付与された、1又は複数の特定の人物の顔画像データを用いて構築された学習モデルを記憶する画像データ記憶部と、
画像認識により、前記動画データの画像に映っている1又は複数の人物の顔の画像を抽出し、抽出された前記1又は複数の顔の画像の中に、前記学習モデルの、前記1又は複数の特定の人物の顔の画像と一致する画像があるかどうかを判定する顔画像判定部と、
前記顔画像判定部によって判定された前記1又は複数の顔の画像のうち、前記1又は複数の特定の人物の顔の画像と一致しない画像に対して顔の個人を特定することが困難となるように画像処理を行ったのち、前記視聴者端末から送信された前記リクエストデータに基づき画像処理を行う画像処理部と、
前記視聴者端末から送信された前記コメントデータに基づき前記コメントを前記ライブ動画に表示する画像処理を行う画像表示部と
を備えることを特徴とするライブ配信システム。 - 前記画像処理は顔の画像に対するモザイク処理であり、前記画像処理部は、抽出された前記1又は複数の顔の画像のうち、前記1又は複数の特定の人物の顔の画像と一致しない画像にのみモザイク処理を行うことを特徴とする請求項1に記載のライブ配信システム。
- 前記画像処理部は、抽出された前記1又は複数の顔の画像のうち、前記1又は複数の特定の人物の顔の画像と一致する画像と、一致しない画像とは、互いに異なる画像処理を行うことを特徴とする請求項1に記載のライブ配信システム。
- 前記画像処理は顔の画像に対するモザイク処理であり、前記画像処理部は、前記リクエストデータに基づき、抽出された前記1又は複数の顔の画像に対して行うモザイク処理のモザイクの粗さを決定することを特徴とする請求項1に記載のライブ配信システム。
- 前記画像処理は顔の画像に対するモザイク処理であり、前記画像処理部は、前記リクエストデータに基づき、抽出された前記1又は複数の顔の画像に対して行うモザイク処理のモザイクの範囲を決定することを特徴とする請求項1に記載のライブ配信システム。
- 前記画像処理部は、前記リクエストデータに基づき、抽出された前記1又は複数の顔の画像のうち、画像処理を行う画像を決定することを特徴とする請求項1に記載のライブ配信システム。
- 前記画像処理部による、前記リクエストデータに基づく画像処理の方法は、課金によって視聴者が決定可能となることを特徴とする請求項1に記載のライブ配信システム。
- 前記画像処理部による、前記リクエストデータに基づく画像処理の方法は、前記視聴者による多数決によって決定されることを特徴とする請求項1に記載のライブ配信システム。
- 前記視聴者による多数決によって決定される前記画像処理の方法の選択肢の内容は、前記画像表示部によって前記ライブ動画に表示された前記コメントにおいて提案され、前記1又は複数の特定の人物が前記コメントにおいて提案された前記選択肢の内容を了承することにより、前記ライブ動画に提案された前記選択肢が表示されることを特徴とする請求項8に記載のライブ配信システム。
- 前記画像処理部は、前記リクエストデータに基づき、抽出された前記1又は複数の顔の画像のうち、どの顔画像に対して画像処理を行うかを決定することを特徴とする請求項1に記載のライブ配信システム。
- 前記画像データ記憶部は、予め撮影されたマーカーの画像データを用いて構築されたマーカー学習モデルを更に記憶し、
前記画像処理部は、前記リクエストデータに基づき、マーカーを装着した人物の顔の画像に対して画像処理を行うことを特徴とする請求項1に記載のライブ配信システム。 - 前記画像処理部による、前記リクエストデータに基づく画像処理の方法の決定は、前記視聴者が所定の条件を満たすことによって可能となることを特徴とする請求項1に記載のライブ配信システム。
- 視聴者端末にライブ動画を配信するライブ配信方法であって、
ライブを撮影して1又は複数の映像データを生成する映像データ生成ステップと、
前記ライブの音声を録音して1又は複数の音声データを生成する音声データ生成ステップと、
前記1又は複数の映像データ及び前記1又は複数の音声データから動画データを生成する動画データ生成ステップと、
前記動画データを編集する映像編集ステップと、
編集された前記動画データを前記視聴者端末へ送信する配信ステップと、
1又は複数の視聴者の視聴者情報、視聴者ID及びパスワードを記憶する視聴者情報記憶ステップと、
前記1又は複数の視聴者の登録と認証を行う視聴者情報管理ステップと、
前記視聴者端末と、前記ライブ動画に対するコメントを前記ライブ動画において表現するための情報を含むコメントデータと、顔の画像に対する画像処理の方法をリクエストする情報を含むリクエストデータの送受信をする入出力ステップと、
を備え、前記映像編集ステップは、
画像認識により、前記動画データの画像に映っている1又は複数の人物の顔の画像を抽出する抽出ステップと、
抽出された前記1又は複数の顔の画像の中に、予め撮影された画像データ内の、1又は複数の特定の人物に関するタグを付与された、前記1又は複数の特定の人物の顔画像データを用いて構築された学習モデルの、前記1又は複数の特定の人物の顔の画像と一致する画像があるかどうかを判定する顔画像判定ステップと、
前記顔画像判定ステップにおいて判定された前記1又は複数の顔の画像のうち、前記1又は複数の特定の人物の顔の画像と一致しない画像に対して顔の個人を特定することが困難となるように画像処理を行ったのち、前記視聴者端末から送信された前記リクエストデータに基づき画像処理を行う画像処理ステップと、
前記視聴者端末から送信された前記コメントデータに基づき前記コメントを前記ライブ動画に表示する画像処理を行う画像表示ステップと
を備えることを特徴とするライブ配信方法。 - コンピュータに、
ライブを撮影して1又は複数の映像データを生成する映像データ生成機能と、
前記ライブの音声を録音して1又は複数の音声データを生成する音声データ生成機能と、
前記1又は複数の映像データ及び前記1又は複数の音声データから動画データを生成する動画データ生成機能と、
前記動画データを編集する映像編集機能と、
編集された前記動画データを視聴者端末へ送信する配信機能と、
1又は複数の視聴者の視聴者情報、視聴者ID及びパスワードを記憶する視聴者情報記憶機能と、
前記1又は複数の視聴者の登録と認証を行う視聴者情報管理機能と、
前記視聴者端末と、ライブ動画に対するコメントを前記ライブ動画において表現するための情報を含むコメントデータと、顔の画像に対する画像処理の方法をリクエストする情報を含むリクエストデータの送受信をする入出力機能と、
を備え、前記映像編集機能は、
画像認識により、前記動画データの画像に映っている1又は複数の人物の顔の画像を抽出する抽出機能と、
抽出された前記1又は複数の顔の画像の中に、予め撮影された画像データ内の、1又は複数の特定の人物に関するタグを付与された、前記1又は複数の特定の人物の顔画像データを用いて構築された学習モデルの、前記1又は複数の特定の人物の顔の画像と一致する画像があるかどうかを判定する顔画像判定機能と、
前記顔画像判定機能によって判定された前記1又は複数の顔の画像のうち、前記1又は複数の特定の人物の顔の画像と一致しない画像に対して顔の個人を特定することが困難となるように画像処理を行ったのち、前記視聴者端末から送信された前記リクエストデータに基づき画像処理を行う画像処理機能と、
前記視聴者端末から送信された前記コメントデータに基づき前記コメントを前記ライブ動画に表示する画像処理を行う画像表示機能と
を備えることを実現させるためのライブ配信プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021185206A JP7065545B1 (ja) | 2021-11-12 | 2021-11-12 | ライブ配信システム、ライブ配信方法、及びライブ配信プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021185206A JP7065545B1 (ja) | 2021-11-12 | 2021-11-12 | ライブ配信システム、ライブ配信方法、及びライブ配信プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP7065545B1 true JP7065545B1 (ja) | 2022-05-12 |
JP2023072567A JP2023072567A (ja) | 2023-05-24 |
Family
ID=81584945
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021185206A Active JP7065545B1 (ja) | 2021-11-12 | 2021-11-12 | ライブ配信システム、ライブ配信方法、及びライブ配信プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7065545B1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7375241B1 (ja) | 2023-03-17 | 2023-11-07 | 株式会社ドワンゴ | コンテンツ管理システム、コンテンツ管理方法、コンテンツ管理プログラム、およびユーザ端末 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019160287A (ja) * | 2018-03-08 | 2019-09-19 | 株式会社リコー | サーバ装置、クライアント端末、情報処理方法およびプログラム |
JP2021016121A (ja) * | 2019-07-16 | 2021-02-12 | キヤノンマーケティングジャパン株式会社 | 画像提供システム |
-
2021
- 2021-11-12 JP JP2021185206A patent/JP7065545B1/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019160287A (ja) * | 2018-03-08 | 2019-09-19 | 株式会社リコー | サーバ装置、クライアント端末、情報処理方法およびプログラム |
JP2021016121A (ja) * | 2019-07-16 | 2021-02-12 | キヤノンマーケティングジャパン株式会社 | 画像提供システム |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7375241B1 (ja) | 2023-03-17 | 2023-11-07 | 株式会社ドワンゴ | コンテンツ管理システム、コンテンツ管理方法、コンテンツ管理プログラム、およびユーザ端末 |
Also Published As
Publication number | Publication date |
---|---|
JP2023072567A (ja) | 2023-05-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7508535B2 (en) | Stand alone multimedia printer with user interface for allocating processing | |
US7528976B2 (en) | Stand alone printer with hardware/software interfaces for sharing multimedia processing | |
US8363056B2 (en) | Content generation system, content generation device, and content generation program | |
US20210321061A1 (en) | Content distribution server, content distribution system, content distribution method, and program | |
CN113542624A (zh) | 生成商品对象讲解视频的方法及装置 | |
JP7065545B1 (ja) | ライブ配信システム、ライブ配信方法、及びライブ配信プログラム | |
KR20090044105A (ko) | 삼차원 가상 공간 콘텐츠를 이용한 영상제공시스템 | |
JP2023153790A (ja) | プログラム | |
KR102630555B1 (ko) | 오디션 서비스 제공 시스템 | |
KR100981043B1 (ko) | 크로마키 기법을 이용한 원격강의 시스템 및 그 방법 | |
JP6597317B2 (ja) | 印画物作製装置、サーバ装置、及び動画データ配信システム | |
CN116962744A (zh) | 网络直播的连麦互动方法、装置及直播*** | |
JP2019135609A (ja) | 文字入力支援システム、文字入力支援制御装置、文字入力支援プログラム | |
JP7167629B2 (ja) | ガイドシステム | |
KR100826134B1 (ko) | 댄스 동영상 제공방법 및 시스템과 이를 위한 프로그램기록매체 | |
KR101093492B1 (ko) | 사용자 제작 컨텐츠 편집 및 서비스 방법 | |
JP7072911B2 (ja) | コンテンツ配信システム、コンテンツ配信方法及びコンテンツ配信プログラム | |
KR100711856B1 (ko) | 동영상 인사말 전송 방법 및 그 시스템 | |
CN115699723B (zh) | 影像编辑装置、影像编辑方法以及记录介质 | |
JP6849851B2 (ja) | 撮影システム、撮影装置及びユーザ撮影方法 | |
JP6520262B2 (ja) | 動画データ再生方法 | |
KR20200005966A (ko) | 중계 서버, 컨텐츠 생성 장치 및 이들을 포함하는 컨텐츠 생성 시스템 | |
KR102258495B1 (ko) | 스타 공유화상 데이터 제공시스템 및 그 방법 | |
KR102255635B1 (ko) | 개인화된 멀티플 스트림 전송 방법 및 이를 지원하는 장치 | |
US20230262200A1 (en) | Display system, display method, and non-transitory recording medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211117 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20211117 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220111 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220322 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220419 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7065545 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |