JP5468047B2 - デジタル顔モデルのアニメーション化のためのシステム及び方法 - Google Patents
デジタル顔モデルのアニメーション化のためのシステム及び方法 Download PDFInfo
- Publication number
- JP5468047B2 JP5468047B2 JP2011178888A JP2011178888A JP5468047B2 JP 5468047 B2 JP5468047 B2 JP 5468047B2 JP 2011178888 A JP2011178888 A JP 2011178888A JP 2011178888 A JP2011178888 A JP 2011178888A JP 5468047 B2 JP5468047 B2 JP 5468047B2
- Authority
- JP
- Japan
- Prior art keywords
- muscle
- face
- facial
- motion capture
- vectors
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 50
- 210000003205 muscle Anatomy 0.000 claims description 155
- 239000013598 vector Substances 0.000 claims description 64
- 230000008921 facial expression Effects 0.000 claims description 61
- 239000003550 marker Substances 0.000 claims description 44
- 230000001815 facial effect Effects 0.000 claims description 32
- 230000008602 contraction Effects 0.000 claims description 31
- 238000012545 processing Methods 0.000 claims description 24
- 210000001508 eye Anatomy 0.000 claims description 14
- 210000001097 facial muscle Anatomy 0.000 claims description 13
- 230000008859 change Effects 0.000 claims description 11
- 230000014509 gene expression Effects 0.000 claims description 7
- 210000003625 skull Anatomy 0.000 claims description 5
- 230000003993 interaction Effects 0.000 claims description 4
- 210000000744 eyelid Anatomy 0.000 description 12
- 230000008569 process Effects 0.000 description 11
- 230000008901 benefit Effects 0.000 description 6
- 210000005252 bulbus oculi Anatomy 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000004424 eye movement Effects 0.000 description 4
- 239000000463 material Substances 0.000 description 4
- 230000007704 transition Effects 0.000 description 4
- 210000003484 anatomy Anatomy 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000009432 framing Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 210000000988 bone and bone Anatomy 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 210000004709 eyebrow Anatomy 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 210000003195 fascia Anatomy 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000007920 subcutaneous administration Methods 0.000 description 2
- 206010011469 Crying Diseases 0.000 description 1
- 208000035126 Facies Diseases 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- QBWCMBCROVPCKQ-UHFFFAOYSA-N chlorous acid Chemical compound OCl=O QBWCMBCROVPCKQ-UHFFFAOYSA-N 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000005670 electromagnetic radiation Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 210000001061 forehead Anatomy 0.000 description 1
- 210000004392 genitalia Anatomy 0.000 description 1
- 239000003292 glue Substances 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000004118 muscle contraction Effects 0.000 description 1
- 230000003387 muscular Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 238000000053 physical method Methods 0.000 description 1
- 230000036314 physical performance Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 210000002027 skeletal muscle Anatomy 0.000 description 1
- 210000005070 sphincter Anatomy 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
- 210000000216 zygoma Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S345/00—Computer graphics processing and selective visual display systems
- Y10S345/949—Animation processing method
- Y10S345/952—Simulation
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S345/00—Computer graphics processing and selective visual display systems
- Y10S345/949—Animation processing method
- Y10S345/956—Language driven animation
- Y10S345/957—Actor
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
- Length Measuring Devices By Optical Means (AREA)
Description
本出願は、米国特許法第119条(e)項に基づき、2003年3月13日に出願された、米国仮特許出願番号60/454,871号、発明の名称「表情処理システム(Performance Facial System)」に対する優先権を主張する。
Claims (19)
- 顔の動きをアニメーション化する顔動きアニメーション化方法において、
アニメーション化される顔の3次元的なデジタルモデルを生成するステップと、
実際の顔面筋に対応する方向で上記デジタルモデルの表面に沿い、それぞれが複数の頂点を定義する複数の筋肉ベクトルを含む、上記デジタルモデルのための仮想顔面筋構造を定義するステップと、
顔の筋肉の起始点及び停止点、前記筋肉ベクトル及び関連する頂点の座標、及び、他の筋肉群との相互作用を含む、筋肉群のパラメータを定義する筋肉定義ファイルを生成するステップと、
上記複数の頂点に対応する演技者の顔の顔マーカ位置を定義するステップと、
前記顔マーカ位置に付されたマーカの動きに基づいて、演技者の顔の物理的な動きを反映するモーションキャプチャデータを受信するステップと、
前記モーションキャプチャデータに基づいて各筋肉ベクトルに適用される対応する収縮値を計算するとともに、計算された前記収縮値及び前記筋肉定義ファイルで定義されている他のパラメータに基づいて、選択された筋肉群及び影響を受ける他の筋肉群の座標を再計算して、上記複数の頂点のうち対応する頂点の位置を変更する少なくとも1つの上記複数の筋肉ベクトルの動きを生成し、それによって演技者の顔の上記物理的な動きに対応した上記デジタルモデルの動きをシミュレートするステップと、を有し、
さらに、上記演技者の顔に上記位置をマークするために用いられるマスクであって、演技者の顔に合うよう成形され、前記マーカ位置に、演技者の顔にマークを付すための孔が穿設された立体的なマスクを成形するステップを有する顔動きアニメーション化方法。 - 上記複数の筋肉ベクトルの少なくとも1つは、上記筋肉ベクトルの、演技者の頭蓋骨に対応する点との接続位置を定義する起始点を含むことを特徴とする請求項1記載の顔動きアニメーション化方法。
- 上記複数の筋肉ベクトルの少なくとも1つは、上記筋肉ベクトルの、実際の皮膚に対応する重なる表面との接続点を定義する停止点を含むことを特徴とする請求項1記載の顔動きアニメーション化方法。
- 上記複数の筋肉ベクトルの少なくとも1つは、上記複数の筋肉ベクトルのうちの他の1つとの相互接続点を含むことを特徴とする請求項1記載の顔動きアニメーション化方法。
- 前記モーションキャプチャデータに加えて上記動きを定義する入力信号を受信するステップを更に有する請求項1記載の顔動きアニメーション化方法。
- 上記入力信号は、ユーザが選択した、上記複数の筋肉ベクトルの少なくとも1つ及び上記複数の筋肉ベクトルの該選択された1つに適用する収縮値を示す情報を含むことを特徴とする請求項5記載の顔動きアニメーション化方法。
- 上記入力信号は、ユーザが選択した、上記複数の筋肉ベクトルのうちの複数個の筋肉ベクトルを含むポーズ及び上記複数の筋肉ベクトルの該選択された複数個の筋肉ベクトル1つに適用する収縮値を示す情報を含むことを特徴とする請求項5記載の顔動きアニメーション化方法。
- ディフォルトデータセットを用いて上記モーションキャプチャデータを較正するステップを更に有する請求項1記載の顔動きアニメーション化方法。
- 上記モーションキャプチャデータを異なるデジタルモデルに再ターゲットするステップを更に有する請求項1記載の顔動きアニメーション化方法。
- 上記モーションキャプチャデータから演技者の視線の向きを判定するステップと、上記判定された視線の向きに一致するように上記デジタルモデルの目をアニメーション化するステップとを更に有する請求項1記載の顔動きアニメーション化方法。
- ユーザインタフェースを有し、演技者の顔の3次元的なデジタルモデルを生成するアニメーションプロセッサと、
演技者の顔の物理的な動きを反映するモーションキャプチャデータを生成するモーションキャプチャプロセッサと、
上記アニメーションプロセッサ及び上記モーションキャプチャプロセッサと協働し、アニメーション化された顔の3次元的なデジタルモデルを生成し、実際の顔面筋に対応する方向で上記デジタルモデルの表面に沿い、それぞれが複数の頂点を定義する複数の筋肉ベクトルを含むデジタルモデルのための仮想顔面筋構造を与える表情処理装置であって、上記仮想顔面筋構造は、それぞれが複数の筋肉ベクトルの対応する筋肉ベクトルに関連づけられた少なくとも1つの収縮値を含む複数の筋肉定義ファイルを含み、上記複数の筋肉定義ファイルのうちの少なくとも1つの収縮値を変更することによって上記モーションキャプチャデータに応じて上記複数の筋肉ベクトルのうちの少なくとも1つの選択的な動きを生成し、それによって上記複数の頂点のうち対応する頂点の位置を変更し、演技者の顔の上記物理的な動きに対応する上記デジタルモデルの動きをシミュレートするように上記デジタルモデルを再構築する表情処理装置と、
を備え、
上記表情処理装置は、更に、上記複数の頂点に対応する顔マーカ位置を定義し、
上記演技者の顔に上記位置をマークするために用いられるマスクであって、演技者の顔に合うよう成形され、前記顔マーカ位置に、演技者の顔にマークを付すための孔が穿設された立体的なマスクを有する顔動きアニメーション化システム。 - 上記複数の筋肉ベクトルの少なくとも1つは、上記筋肉ベクトルの、演技者の頭蓋骨に対応する点との接続位置を定義する起始点を含むことを特徴とする請求項11記載の顔動きアニメーション化システム。
- 上記複数の筋肉ベクトルの少なくとも1つは、上記筋肉ベクトルの、実際の皮膚に対応する重なる表面との接続点を定義する少なくとも1つの停止点を含むことを特徴とする請求項11記載の顔動きアニメーション化システム。
- 上記複数の筋肉ベクトルの少なくとも1つは、上記複数の筋肉ベクトルのうちの他の筋肉ベクトルとの少なくとも1つの相互接続点を含むことを特徴とする請求項11記載の顔動きアニメーション化システム。
- 上記入力は、ユーザが選択した、上記複数の筋肉ベクトルの少なくとも1つ及び上記複数の筋肉ベクトルの該選択された1つに適用する収縮値を示す情報を含むことを特徴とする請求項11記載の顔動きアニメーション化システム。
- 上記入力は、ユーザが選択した、上記複数の筋肉ベクトルのうちの複数個の筋肉ベクトルを含むポーズと、上記複数の筋肉ベクトルの該選択された複数個の筋肉ベクトル1つに適用する少なくとも1つの関連する収縮値との組み合わせを示す情報を含むことを特徴とする請求項11記載の顔動きアニメーション化システム。
- 上記表情処理装置は、更に、ディフォルトデータセットを用いて上記モーションキャプチャデータを較正することを特徴とする請求項11記載の顔動きアニメーション化システム。
- 上記表情処理装置は、更に、上記モーションキャプチャデータを異なるデジタルモデルに再ターゲットすることを特徴とする請求項11記載の顔動きアニメーション化システム。
- 上記表情処理装置は、更に、上記モーションキャプチャデータから演技者の視線の向きを判定し、上記判定された視線の向きに一致するように上記デジタルモデルの目をアニメーション化することを特徴とする請求項11記載の顔動きアニメーション化システム。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US45487103P | 2003-03-13 | 2003-03-13 | |
US60/454,871 | 2003-03-13 | ||
US10/444,278 | 2003-05-23 | ||
US10/444,278 US7068277B2 (en) | 2003-03-13 | 2003-05-23 | System and method for animating a digital facial model |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006508691A Division JP2006520971A (ja) | 2003-03-13 | 2004-02-05 | デジタル顔モデルのアニメーション化のためのシステム及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011238291A JP2011238291A (ja) | 2011-11-24 |
JP5468047B2 true JP5468047B2 (ja) | 2014-04-09 |
Family
ID=32965487
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006508691A Pending JP2006520971A (ja) | 2003-03-13 | 2004-02-05 | デジタル顔モデルのアニメーション化のためのシステム及び方法 |
JP2011178888A Expired - Fee Related JP5468047B2 (ja) | 2003-03-13 | 2011-08-18 | デジタル顔モデルのアニメーション化のためのシステム及び方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006508691A Pending JP2006520971A (ja) | 2003-03-13 | 2004-02-05 | デジタル顔モデルのアニメーション化のためのシステム及び方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US7068277B2 (ja) |
EP (1) | EP1602073A4 (ja) |
JP (2) | JP2006520971A (ja) |
KR (1) | KR100715735B1 (ja) |
WO (1) | WO2004084144A1 (ja) |
Families Citing this family (72)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4849761B2 (ja) * | 2002-09-02 | 2012-01-11 | 株式会社 資生堂 | 質感に基づく化粧方法及び質感イメージマップ |
US7573480B2 (en) * | 2003-05-01 | 2009-08-11 | Sony Corporation | System and method for capturing facial and body motion |
US7068277B2 (en) * | 2003-03-13 | 2006-06-27 | Sony Corporation | System and method for animating a digital facial model |
US7218320B2 (en) * | 2003-03-13 | 2007-05-15 | Sony Corporation | System and method for capturing facial and body motion |
US7358972B2 (en) * | 2003-05-01 | 2008-04-15 | Sony Corporation | System and method for capturing facial and body motion |
US20050001842A1 (en) * | 2003-05-23 | 2005-01-06 | Woojin Park | Method, system and computer program product for predicting an output motion from a database of motion data |
US7239321B2 (en) * | 2003-08-26 | 2007-07-03 | Speech Graphics, Inc. | Static and dynamic 3-D human face reconstruction |
US10277290B2 (en) | 2004-04-02 | 2019-04-30 | Rearden, Llc | Systems and methods to exploit areas of coherence in wireless systems |
US10425134B2 (en) | 2004-04-02 | 2019-09-24 | Rearden, Llc | System and methods for planned evolution and obsolescence of multiuser spectrum |
US9826537B2 (en) | 2004-04-02 | 2017-11-21 | Rearden, Llc | System and method for managing inter-cluster handoff of clients which traverse multiple DIDO clusters |
US8654815B1 (en) | 2004-04-02 | 2014-02-18 | Rearden, Llc | System and method for distributed antenna wireless communications |
US9819403B2 (en) | 2004-04-02 | 2017-11-14 | Rearden, Llc | System and method for managing handoff of a client between different distributed-input-distributed-output (DIDO) networks based on detected velocity of the client |
US20060055706A1 (en) * | 2004-09-15 | 2006-03-16 | Perlman Stephen G | Apparatus and method for capturing the motion of a performer |
US8194093B2 (en) * | 2004-09-15 | 2012-06-05 | Onlive, Inc. | Apparatus and method for capturing the expression of a performer |
US7554549B2 (en) * | 2004-10-01 | 2009-06-30 | Sony Corporation | System and method for tracking facial muscle and eye motion for computer graphics animation |
WO2006050198A2 (en) * | 2004-10-28 | 2006-05-11 | Accelerated Pictures, Llc | Client/server-based animation software, systems and methods |
US20060164440A1 (en) * | 2005-01-25 | 2006-07-27 | Steve Sullivan | Method of directly manipulating geometric shapes |
US7633521B2 (en) * | 2005-02-25 | 2009-12-15 | Onlive, Inc. | Apparatus and method improving marker identification within a motion capture system |
DE102005018336A1 (de) * | 2005-02-28 | 2006-08-31 | Osram Opto Semiconductors Gmbh | Lichtleiter |
US7605861B2 (en) * | 2005-03-10 | 2009-10-20 | Onlive, Inc. | Apparatus and method for performing motion capture using shutter synchronization |
US20060262119A1 (en) * | 2005-05-20 | 2006-11-23 | Michael Isner | Transfer of motion between animated characters |
US8014565B2 (en) * | 2005-08-26 | 2011-09-06 | Sony Corporation | Labeling used in motion capture |
US8659668B2 (en) * | 2005-10-07 | 2014-02-25 | Rearden, Llc | Apparatus and method for performing motion capture using a random pattern on capture surfaces |
US7764283B2 (en) * | 2005-12-23 | 2010-07-27 | Sony Corporation | Eye movement data replacement in motion capture |
WO2007127743A2 (en) * | 2006-04-24 | 2007-11-08 | Sony Corporation | Performance driven facial animation |
US20070268293A1 (en) * | 2006-05-19 | 2007-11-22 | Erick Miller | Musculo-skeletal shape skinning |
US7548272B2 (en) * | 2006-06-07 | 2009-06-16 | Onlive, Inc. | System and method for performing motion capture using phosphor application techniques |
US7667767B2 (en) * | 2006-06-07 | 2010-02-23 | Onlive, Inc. | System and method for three dimensional capture of stop-motion animated characters |
US7567293B2 (en) * | 2006-06-07 | 2009-07-28 | Onlive, Inc. | System and method for performing motion capture by strobing a fluorescent lamp |
WO2008005946A2 (en) * | 2006-06-30 | 2008-01-10 | Imagemovers Digital Llc | Capturing and rendering dynamic surface deformations in human motion |
EP2039163A4 (en) * | 2006-07-11 | 2013-01-23 | Sony Corp | USING QUANTUM NANOPOUNTS IN FILMS OR VIDEO GAMES |
MX2009000206A (es) * | 2006-07-12 | 2009-06-08 | Medical Cyberworlds Inc | Sistema de entrenamiento medico computarizado. |
WO2008011352A2 (en) * | 2006-07-16 | 2008-01-24 | The Jim Henson Company | System and method of animating a character through a single person performance |
US8339402B2 (en) * | 2006-07-16 | 2012-12-25 | The Jim Henson Company | System and method of producing an animated performance utilizing multiple cameras |
US7733346B2 (en) * | 2006-07-28 | 2010-06-08 | Sony Corporation | FACS solving in motion capture |
US7961947B2 (en) * | 2006-07-28 | 2011-06-14 | Sony Corporation | FACS cleaning in motion capture |
US20080028312A1 (en) * | 2006-07-28 | 2008-01-31 | Accelerated Pictures, Inc. | Scene organization in computer-assisted filmmaking |
WO2008014486A2 (en) * | 2006-07-28 | 2008-01-31 | Accelerated Pictures, Inc. | Improved camera control |
US8094156B2 (en) * | 2006-07-31 | 2012-01-10 | Autodesk Inc. | Rigless retargeting for character animation |
US20100231692A1 (en) * | 2006-07-31 | 2010-09-16 | Onlive, Inc. | System and method for performing motion capture and image reconstruction with transparent makeup |
US7859538B2 (en) * | 2006-07-31 | 2010-12-28 | Autodesk, Inc | Converting deformation data for a mesh to animation data for a skeleton, skinning and shading in a runtime computer graphics animation engine |
US8749543B2 (en) * | 2006-08-15 | 2014-06-10 | Microsoft Corporation | Three dimensional polygon mesh deformation using subspace energy projection |
US8330823B2 (en) * | 2006-11-01 | 2012-12-11 | Sony Corporation | Capturing surface in motion picture |
US20080170750A1 (en) * | 2006-11-01 | 2008-07-17 | Demian Gordon | Segment tracking in motion picture |
US7889197B2 (en) * | 2007-01-26 | 2011-02-15 | Captivemotion, Inc. | Method of capturing, processing, and rendering images |
US20080278516A1 (en) * | 2007-05-11 | 2008-11-13 | Santon John C | System and method for adjusting perceived eye rotation in image of face |
EP2191445B1 (en) * | 2007-09-04 | 2017-05-31 | Sony Corporation | Integrated motion capture |
US8390628B2 (en) * | 2007-09-11 | 2013-03-05 | Sony Computer Entertainment America Llc | Facial animation using motion capture data |
US8581911B2 (en) * | 2008-12-04 | 2013-11-12 | Intific, Inc. | Training system and methods for dynamically injecting expression information into an animated facial mesh |
US8896622B2 (en) * | 2009-09-04 | 2014-11-25 | Adobe Systems Incorporated | Methods and apparatus for marker-based stylistic rendering |
WO2011034963A2 (en) * | 2009-09-15 | 2011-03-24 | Sony Corporation | Combining multi-sensory inputs for digital animation |
US9196074B1 (en) * | 2010-10-29 | 2015-11-24 | Lucasfilm Entertainment Company Ltd. | Refining facial animation models |
KR20120051342A (ko) * | 2010-11-12 | 2012-05-22 | 한국전자통신연구원 | 사용자 색감 기반의 감성 화장 추천 시스템 및 방법 |
KR101819535B1 (ko) | 2011-06-30 | 2018-01-17 | 삼성전자주식회사 | 표정 제어점에 기초한 강체 영역의 표현 방법 및 장치 |
US9165404B2 (en) | 2011-07-14 | 2015-10-20 | Samsung Electronics Co., Ltd. | Method, apparatus, and system for processing virtual world |
US20160004905A1 (en) * | 2012-03-21 | 2016-01-07 | Commonwealth Scientific And Industrial Research Organisation | Method and system for facial expression transfer |
US11189917B2 (en) | 2014-04-16 | 2021-11-30 | Rearden, Llc | Systems and methods for distributing radioheads |
US9973246B2 (en) | 2013-03-12 | 2018-05-15 | Rearden, Llc | Systems and methods for exploiting inter-cell multiplexing gain in wireless cellular systems via distributed input distributed output technology |
US9923657B2 (en) | 2013-03-12 | 2018-03-20 | Rearden, Llc | Systems and methods for exploiting inter-cell multiplexing gain in wireless cellular systems via distributed input distributed output technology |
US10488535B2 (en) | 2013-03-12 | 2019-11-26 | Rearden, Llc | Apparatus and method for capturing still images and video using diffraction coded imaging techniques |
US9747716B1 (en) * | 2013-03-15 | 2017-08-29 | Lucasfilm Entertainment Company Ltd. | Facial animation models |
RU2767777C2 (ru) | 2013-03-15 | 2022-03-21 | Риарден, Ллк | Системы и способы радиочастотной калибровки с использованием принципа взаимности каналов в беспроводной связи с распределенным входом - распределенным выходом |
CN103473801B (zh) * | 2013-09-27 | 2016-09-14 | 中国科学院自动化研究所 | 一种基于单摄像头与运动捕捉数据的人脸表情编辑方法 |
EP3341919A4 (en) * | 2015-09-07 | 2019-04-03 | Sony Interactive Entertainment America LLC | PICTURE REGULATORY AND RETARGETING SYSTEM |
US10430988B2 (en) | 2016-06-03 | 2019-10-01 | Facebook Technologies, Llc | Facial animation using facial sensors within a head-mounted display |
US9959678B2 (en) * | 2016-06-03 | 2018-05-01 | Oculus Vr, Llc | Face and eye tracking using facial sensors within a head-mounted display |
US10147218B2 (en) * | 2016-09-29 | 2018-12-04 | Sony Interactive Entertainment America, LLC | System to identify and use markers for motion capture |
US10825225B1 (en) * | 2019-03-20 | 2020-11-03 | Lucasfilm Entertainment Company Ltd. LLC | Simulation stream pipeline |
KR102181902B1 (ko) * | 2019-10-31 | 2020-11-23 | 넷마블 주식회사 | 애니메이션 생성 방법 |
US11715247B1 (en) * | 2020-07-02 | 2023-08-01 | Unity Technologies Sf | Generating a facial rig for use in animating a computer-generated character based on facial scans and muscle models of multiple live actors |
US11875504B2 (en) * | 2020-09-10 | 2024-01-16 | Unity Technologies Sf | Systems and methods for building a muscle-to-skin transformation in computer animation |
WO2022249539A1 (ja) * | 2021-05-26 | 2022-12-01 | ソニーグループ株式会社 | 情報処理装置、情報処理方法およびプログラム |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08194839A (ja) * | 1995-01-18 | 1996-07-30 | Oki Electric Ind Co Ltd | 顔画像表示装置及びその表示方法 |
JP3055666B2 (ja) * | 1997-03-11 | 2000-06-26 | 株式会社エイ・ティ・アール知能映像通信研究所 | 3次元画像作成装置 |
CA2227361A1 (en) * | 1998-01-19 | 1999-07-19 | Taarna Studios Inc. | Method and apparatus for providing real-time animation utilizing a database of expressions |
WO2001099048A2 (en) * | 2000-06-22 | 2001-12-27 | Lifef/X Networks, Inc. | Non-linear morphing of faces and their dynamics |
JP2002007101A (ja) * | 2000-06-22 | 2002-01-11 | Canon Inc | 情報処理装置、情報処理方法、および記憶媒体 |
FR2811792B1 (fr) * | 2000-07-13 | 2002-12-06 | France Telecom | Procede d'animation faciale |
JP2002041285A (ja) * | 2000-07-28 | 2002-02-08 | Toshiba Corp | データ処理装置およびデータ処理方法 |
JP2003044873A (ja) * | 2001-08-01 | 2003-02-14 | Univ Waseda | 顔の3次元モデルの作成方法及びその変形方法 |
JP2003058908A (ja) * | 2001-08-10 | 2003-02-28 | Minolta Co Ltd | 顔画像制御方法および装置、コンピュータプログラム、および記録媒体 |
US7068277B2 (en) * | 2003-03-13 | 2006-06-27 | Sony Corporation | System and method for animating a digital facial model |
-
2003
- 2003-05-23 US US10/444,278 patent/US7068277B2/en not_active Expired - Lifetime
-
2004
- 2004-02-05 KR KR1020057016984A patent/KR100715735B1/ko active IP Right Grant
- 2004-02-05 WO PCT/US2004/003598 patent/WO2004084144A1/en active Application Filing
- 2004-02-05 JP JP2006508691A patent/JP2006520971A/ja active Pending
- 2004-02-05 EP EP04708654A patent/EP1602073A4/en not_active Ceased
-
2011
- 2011-08-18 JP JP2011178888A patent/JP5468047B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
KR100715735B1 (ko) | 2007-05-09 |
WO2004084144A1 (en) | 2004-09-30 |
US7068277B2 (en) | 2006-06-27 |
EP1602073A1 (en) | 2005-12-07 |
EP1602073A4 (en) | 2009-12-23 |
JP2011238291A (ja) | 2011-11-24 |
KR20050103244A (ko) | 2005-10-27 |
JP2006520971A (ja) | 2006-09-14 |
US20040179013A1 (en) | 2004-09-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5468047B2 (ja) | デジタル顔モデルのアニメーション化のためのシステム及び方法 | |
Ersotelos et al. | Building highly realistic facial modeling and animation: a survey | |
EP1797537B1 (en) | System and method for computer graphics animation using emg data | |
AU2006282764B2 (en) | Capturing and processing facial motion data | |
Bhat et al. | High fidelity facial animation capture and retargeting with contours | |
KR20090081004A (ko) | 모션 픽쳐에서의 표면 캡처링 | |
KR20120006610A (ko) | 얼굴 애니메이션 시스템 및 방법 | |
US11443473B2 (en) | Systems and methods for generating a skull surface for computer animation | |
JP5109192B2 (ja) | モーションキャプチャにおけるfacs(顔の表情符号化システム)解決法 | |
Haber et al. | Facial modeling and animation | |
Zhang et al. | Anatomy-based face reconstruction for animation using multi-layer deformation | |
KR20080085181A (ko) | 모션 캡처에서의 안구 운동 데이터 대체 | |
Amirkhanov et al. | WithTeeth: Denture Preview in Augmented Reality. | |
US11587278B1 (en) | Systems and methods for computer animation of an artificial character using facial poses from a live actor | |
KR20060067242A (ko) | 해부 데이터를 이용한 얼굴 애니메이션 생성 시스템 및 그방법 | |
Bibliowicz | An automated rigging system for facial animation | |
WO2023022606A1 (en) | Systems and methods for computer animation of an artificial character using facial poses from a live actor | |
Lin | Three dimensional modeling and animation of facial expressions | |
Ragab | Supervised by | |
Prakash et al. | Literature Review of Facial Modeling and Animation Techniques | |
Kowalski | Realistic modelling of facial expressions using vol ume morphing | |
Hamilton | Facial Animation Driven by X-Ray Microbeam Data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110819 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120924 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121029 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20130129 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20130201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130430 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130527 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20130827 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20130830 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131127 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140120 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140128 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5468047 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |