獅童ツインに初音ミク『超歌舞伎 今昔饗宴千本桜』が東京歌舞伎座で初上演、NTTがIOWN新技術導入

NTTは、松竹が2023年12月3日～26日にかけて上演される「超歌舞伎 Powered by NTT 今昔饗宴千本桜」にIOWN構想による新たな舞台演出を提供することを発表した。

「超歌舞伎 Powered by NTT 今昔饗宴千本桜」は、東京・歌舞伎座で上演する「歌舞伎座新開場十周年 十二月大歌舞伎」において上演される。2023年3月からサービスを開始した、次世代ネットワーク「APN IOWN1.0」を導入した超歌舞伎初となるリアルタイムの演出などを盛り込む。

最先端のICTと古典歌舞伎を融合させた超歌舞伎は初演から8年目を迎えるが、「超歌舞伎 Powered by NTT 今昔饗宴千本桜」が歌舞伎座における初めての公演となる。

最新の関連記事

【歌舞伎座で初】中村獅童×初音ミク「超歌舞伎 今昔饗宴千本桜」を観劇、「裸眼XR 初音ミクあいせき」を体験してきた【オススメ】

新たな演出・ 技術のポイント

１：APN IOWN1.0を活用したリアルタイムCG演出

NTTはIOWN構想の一環として、2023年3月にAPN IOWN1.0の提供を開始した。このサービスにより、低遅延な伝送の実現、更に従来のベストエフォート品質のネットワークとは異なり遅延のゆらぎの無い伝送が可能となるため、遅延の振る舞いを理解した上でネットワークシステムやユーザエクスペリエンスを設計することが可能となる。

今回上演される「超歌舞伎 Powered by NTT今昔饗宴千本桜」では、これらの特徴を活用し、遠隔スタジオで演じる演者の動きをリアルタイムに劇場CGに載せることで、共演者との息の合った遅延なく動く演出を実現させる。

また、今回この演出をリアルタイム版裸眼XR相席対話システムにも適用することで、APNのネットワークを活かした遅延のないシステムならではの、リアルタイムな初音ミクとのやりとりが可能になる相席対話システムとなっている。

２：獅童ツインの更なる進化～バイリンガルな獅童ツイン

IOWN構想の柱である、デジタルツインコンピューティング構想においてNTTがめざす方向性の1つ「Another Me」 により生まれた獅童ツインは、 中村獅童であって中村獅童ではない、本人があたかもそこにいるかのように、デジタル空間上に 「獅童ツイン」を再現。本公演ではこれまで以上に獅童丈らしい声、モーションをAIで再現している。

さらに、今回獅童ツインは英語でのご挨拶に初挑戦。 英語音声の生成には、NTTのクロスリンガル音声合成技術を活用し、最新のAI技術を用いることにより、日本語しか話せない話者の音声から、話者の声色の特徴を保ったまま他言語の合成音声の生成を実現させる。

点群データによる新たな空間表現

NTTでは、自動運転などにも使われている実際の空間を広範囲かつ簡易に計測・把握することが可能なLiDARと呼ばれるセンサから得られる「点群データ」をもとに、リアルな空間を高精度・高精細に仮想空間上に再現する「3D点群メディア処理技術」の研究開発を進めてきた。

「3D点群メディア処理技術」は、粗い点群データを高解像度化する技術や欠損した部分を自動的に補完する技術等多数の要素技術から構成されているが、元になるLiDARの特性上これまでその対象は動きのない静的な空間に限定されていた。

今後は動的な点群データを扱う技術や舞台の世界観に沿った点群表現に関する技術等に取り組むことで、より多様で生き生きとした空間表現を可能にし、超歌舞伎の新たな舞台演出に活用していきたいとしている。

今回は松竹と、「超歌舞伎 Powered by NTT 今昔饗宴千本桜」の舞台美術を手掛ける中嶋正留氏の監修のもと、NTTがめざす点群データによる新たな空間表現の世界観について、「3D点群メディア処理技術」の一部を活用して制作・編集した映像を見ることができる。

「超歌舞伎 Powered by NTT 今昔饗宴千本桜」開催概要

この記事を読んだ人におすすめ

• 【NTTの新技術】中村獅童×初音ミク「超歌舞伎 今昔饗宴千本桜」と驚きの「裸眼XR 初音ミクあいせき」体験レポート【歌舞伎座で初公演】
• NTT版生成AI大規模言語モデル(LLM)「tsuzumi」驚異の性能を披露 NTT R&Dフォーラム2023開幕 NTT島田社長の基調講演と見どころ