AR三兄弟 VIRTUAL NIPPON PROJECT

開発ユニット「AR三兄弟」と株式会社precogによる人体のデジタル・アーカイブ（3Dデータとモーションキャプチャ）の可能性や利活用を考えるプロジェクト。身体に経験を宿した人間の動きとフォルムをデジタル化し、その活用方法やアートや法律、開発者等の様々な専門家らと意見交換し、新たなアートやパフォーマンスの可能性を探りました。

■「バーチャル身体の祭典／VIRTUAL NIPPON COLOSSEUM」（2021年度）

2021年度はアオイヤマダ（ダンサー）、加勢鳥（民俗行事）、男性ブランコ（お笑い芸人）、西矢椛（プロスケートボーダー）、前川楓（パラアスリート）、前田順康（太鼓芸能集団 鼓童）、村松卓矢（大駱駝艦/舞踏家）のデータを収集。それらを使ったデジタルパフォーマンス動画の配信やARアプリによるコンテンツの提供、オンラインカンファレンスなどを実施しました。

■「バーチャル身体図鑑／VIRTUAL NIPPON BODIES」（2022年度）

2022年度は芸能・音楽分野にフォーカスをあて、小林幸子（歌手）、ヨネダ2000（お笑い芸人）、鎮座DOPENESS（ラッパー）、元・たまの石川浩司（シンガーソングライター）、伝統芸能より、いがみの権太＋人形遣い（人形浄瑠璃　文楽）、音無史哉（笙）、伝統行事より、富山市のおわら風の盆（唄と踊りの民謡）、五島列島五島市のチャンココ（念仏踊り）を迎え、総勢約20名のデータをバーチャル身体図鑑として一覧公開。ARアプリでの展開やリアルでの関連イベントの開催に加え、ポスターやトレーディングカードを作成しARデータの新たな活用方法を提示しました。

プロセス

■身体表現へのアクセシビリティを考えるなかで生まれてきたアイディア

株式会社precogはアクセシビリティに特化した動画配信プラットフォーム「THEATRE for ALL」を運営しており、このプロジェクトは身体表現のアクセシビリティについて考えていく中で生まれてきたものです。人体とその動きのデジタルデータを収集し活用することで世界中いつでもどこからでも鑑賞できる身体表現の新たな可能性を開こうと開発者であるAR三兄弟とともにプロジェクトに取り組むことになりました。

プロジェクトが本格始動する前年の2020年度にはバレリーナと相撲取り、空手家の3Dモデル及びモーション（空手家は3Dモデルのみ）を収集し誰でも活用できるデータとして販売。その過程を収めたドキュメンタリー映像を『AR三兄弟の素晴らしきこの世界（バリアフリー編）』としてTHEATRE for ALLで配信しました。

■蓄積したデータやノウハウを活かした展開

令和2年度（2020年度）に文化芸術収益力強化事業（委託事業）として実施した『AR三兄弟の素晴らしきこの世界（バリアフリー編）』での取り組みを踏まえつつ、令和3年度（2021年度）から文化庁委託事業「戦略的芸術文化創造推進事業」に向けて5ヶ年計画を立案。まずは2年にわたるプロジェクトを実施しました。

プロジェクトの始動にあたっては、人体データをアーカイブし創造的に活用していくことの課題と可能性について、各分野の専門家にインタビューを行いました。

開発者や専門家のネットワーク、蓄積したデータなどを活用した新たなプロジェクトの展開が今後も期待されています。

■データの収集と販売

収集した3Dデータとモーションデータの一部は誰でも自由に活用できるものとして販売も行っています。新型コロナウイルスの影響でパフォーマーたちが窮地に立たされていたことを背景に生まれてきたこの企画では、身体に経験を宿した人たちの公演以外の仕事の可能性を模索することも目指しました。

データの収集、アーカイブはひとつの目的であり、次のステップとしてその利活用があります。人体とその動きのデジタルデータの活用範囲は、ゲームやVR、アバター等多岐にわたり、新しい用途も生まれていくことでしょう。

◉3Dデータ撮影風景

＜左から、鎮座DOPENESS氏、元・たまの石川浩司氏、小林幸子氏＞

◉モーションデータ撮影風景

＜左から、ヨネダ2000、いがみの権太＋人形遣い、鎮座DOPENESS氏＞

◉データ販売

■活用方法の検討・提案

収集したデータを披露し、その活用方法を提案するプラットフォームとして特設アプリ「社会実験」を公開し、アプリ上で様々なコンテンツを展開しました。

加えて、2021年度はデジタルパフォーマンス動画を配信。また、データを提供した実演家や各ジャンルに精通する専門家が登壇してデータ活用の可能性をリレー式に議論するトークイベントをオンラインで開催。技術者とアーティスト、障害当事者、サービス開発者らがデジタル空間での身体表現について意見や情報を交換しました。

2022年度は「バーチャル身体図鑑」の公開に合わせてシビック・クリエイティブ・ベース東京でイベントを実施。身体のデジタルデータをめぐるリレートークのほか、体験コーナーやワークショップの実施、収集したデータを使ったプロダクトとしてポスターやトレーディングカード（プロトタイプ）の販売も行いました。

◉特設アプリ「社会実験」

◉デジタルパフォーマンス動画配信（2021年度）

◉トークイベント開催（2021年度、2022年度）

◉イベント、ワークショップ開催（2022年度）

◉プロダクト企画（2022年度）

成果

■利活用可能な3Dデータの蓄積

本プロジェクトではこれまでに20を超える人体の3Dデータを収集してきました。データの収集を続けるなかで収録技術もアップデートされてスリム化し、汎用可能性も高まってきています。AR三兄弟を始め、これらのデータを活用した新しいアートやパフォーマンスが生み出されてくることを期待し、ニーズに応じて株式会社precogでは今後も積極的に企画の提案やデータの利活用に際してのアーティストとの調整などを行っていきます。

■身体表現のアクセシビリティの向上へ

そもそもこのプロジェクトのアイディアは身体表現へのアクセシビリティを考えるなかで生まれてきたものでした。家から出なくてもスマホで楽しめるARコンテンツによって身体表現の鑑賞体験は少しだけ身近なものになりました。現段階では3Dデータを活用したコンテンツに十全なアクセシビリティが提供できているわけではありませんが、ARコンテンツにはまだまだ可能性があります。2022年度までのプロジェクトで得た知見を踏まえ、今後の展開のなかでアクセシビリティの向上を目指します。

「AR三兄弟の素晴らしきこの世界（バリアフリー編）」　

開発・出演：AR三兄弟
出演：小林昭仁（元・鳥羽の山）、 田代良徳（元・東桜山）、 村中智（バレエダンサー）
プロデューサー：金森香（株式会社precog）
プロジェクトマネジメント：田井地直己、加藤夏帆（TASKO inc. ）
協力：株式会社ビーエスフジ、お相撲さんドットコム、株式会社Way、Palabra株式会社、株式会社デジタルアルティザン、株式会社グリオグルーヴ、株式会社Ｐヴァイン

「バーチャル身体の祭典　VIRTUAL NIPPON COLOSSEUM」

総合演出：川田十夢
開発：AR三兄弟
出演：アオイヤマダ / 加勢鳥 / 男性ブランコ / 前川楓 / 前田順康（鼓童） / 西矢椛 / 村松卓矢（大駱駝艦）
音楽：蓮沼執太
台本：ワクサカソウヘイ / 川田十夢（原案）
落語技術監修・衣装提供：立川談吉
衣装：飯嶋久美子
メイクアップ：冨沢ノボル
ドローン撮影：久保木肇 / 岩城忠幸
デザイン：いすたえこ
制作：TASKO inc.
バリアフリー制作：Palabra株式会社
バリアフリーコーディネート：THEATRE for ALL
制作デスク：株式会社precog
プロデュース：金森香（株式会社precog）

文化庁委託事業「令和3年度戦略的芸術文化創造推進事業」
主催：文化庁、株式会社precog

「VIRTUAL NIPPON BODIES　バーチャル身体図鑑」

総合演出：川田十夢
開発：AR三兄弟
出演：小林幸子（歌手）、鎮座DOPENESS（ラッパー）、石川浩司（シンガーソングライター）、ヨネダ2000（芸人）、いがみの権太＋人形遣い（人形浄瑠璃 文楽）、おわら風の盆（伝統）、チャンココ（念仏踊り）、音無史哉（笙）
協力：公益財団法人文楽協会
音楽：蓮沼執太
デザイン：いすたえこ
制作：TASKO inc.
バリアフリーコーディネート：THEATRE for ALL
制作デスク：株式会社precog
広報：村上晴香
プロデュース：金森香（株式会社precog）

文化庁委託事業「令和4年度戦略的芸術文化創造推進事業」
主催：文化庁、株式会社precog
提携：シビック・クリエイティブ・ベース東京［CCBT］