名優・松田優作氏がデジタルで蘇る！過去の偉人がバーチャルヒューマン技術で復活させる第一弾　東映ツークン研究所

2022年4月3日 By ロボスタ編集部

デジタルヒューマンの企画・制作、研究開発を行う東映株式会社ツークン研究所では、「コンテンツの未来をデザインする」というミッションのもと、企画から制作、研究開発まで幅広く行なっており、昨今注力しているのがデジタルヒューマンの取り組みだ。

同研究所では2017年に専門チームを編成、2019年から3年間に及ぶデジタルヒューマン研究開発プロジェクトを進めており、機械学習、LightStageといったテクノロジーと、従来のコンテンツ制作で蓄積したノウハウを組み合わせることで様々な案件で一歩先の作品作りを体現する、新たな映像表現を目指して過去の偉人をデジタルヒューマン技術で蘇らせる取り組みを行なっている。

今回は名優・松田優作氏の復活に挑戦。従来のデジタルアーチストによる再現手法に加え、AIによる形状と音声の復元などテクノロジーを掛け合わせたアプローチでデジタルヒューマン化を進め、現代の作品に登場させるべく蘇らせる。

AIによる形状と音声の復元

AIによる形状復元では、LightStageで取得した複数人の超高精細3DCGデータをもとに機械学習を使った顔モデル生成を行なっている。肌の表現、動きの再現にも新たな解析や推定技術を取り入れた。さらに声の復元でも新たな取り組みに挑戦。ゲーム開発の3DCG制作から音声合成・声質変換を活用したソリューションまでを手掛ける株式会社ORENDAが、音声復元および音声部分の総合ディレクションを担当。株式会社TARVOが開発したAI音声変換技術を使用して復元に挑む。