本田麻緒/情報デザイン研究II

act 2

VR空間で作るミュージカル映像

• 本田　麻緒
• Keywords：musical, VRChat, speech-synthesis, AI
• https://youtu.be/lWrChLffyBE
• https://k23as604.wixsite.com/act2

概要

これは何？

本プロジェクトは、VRChat上での撮影を想定したミュージカル作品の映像制作である。
前期から継続して取り組んでおり、最終的には約15分の映像作品として完成・公開することを目指している。
VR空間を舞台とすることで、現実の舞台では難しい、一瞬の画面・場所の切り替わりや、回想シーンの明確化を試みるものである。

背景と目的

近年、VRにおける表現活動は展示・ライブ・演劇など多様化している一方で、ミュージカル作品はまだほとんど未開拓の領域である。
そこで本プロジェクトでは、VRという新しい環境を活かし、少人数・低資本でも創作・上演が可能な新しい舞台表現の形を提示することを目的としている。
従来「大人数で行うもの」とされてきたミュージカルを、VR空間に適応させることで、個人でも創作を成立させられる場所と方法を提示することを目指している。

コンセプト

本プロジェクトのコンセプトは、「個人制作の可能性を広げる」ことである。
大規模な舞台制作ではなく、個人の想像力・技術・表現を中心に据え、VR空間という環境の中で、“ひとりでも作れるミュージカル”という新しい表現の可能性を探っていく。

成果物の仕様

15分の映像1本
1920×1080
YouTubeに投稿

WIXで作成した制作過程ブログ

制作ツール

• Chat GPT
• VRoid Studio
• Suno
• CoeFont
• After Effects
• WIX
  
  

プロジェクトの期間

2025.04.09 - 2026.01.07

まとめ

このプロジェクトでは、VRChatの中でミュージカルを作ることに挑戦した
目標は、1人~2人でも舞台作品を作れる方法を見つけること

• ミュージカルは本来たくさんの人が関わるものだが、VR空間やAIの力を使うことで、少人数でも作品を作れることが分かった
• VRChatのカメラは撮影の段階からエフェクトをかけられるため、その機能をもっと活かして、より印象的な映像表現を研究したいと思った
• GBでの合成も活用できることがわかった
• インターネット接続ができる場所なら、どこでも(座った状態でも)演者になることができることは可能性が広がると思った

調査

現状調査

舞台やミュージカルは人数がいないとできないのが現状
1人2人の少人数でも作品公開ができる場所、方法を考える

先行事例

VRミュージカルwish
↑メインはclusterで活動してる
FZMZ
↑バンド。ライブのティザー映像

技法・技術情報

• プロンプトエンジニアリング

プロジェクト管理

スケジュール

情報デザイン研究I_チャート

ToDo

• 中間審査までに試作(本編頭〜)を完成させる
• アバター修正
• 1人分の音声をCoeFontを使って出力
• 撮影
• 編集

1/7

制作過程についてまとめたブログの公開

• https://k23as604.wixsite.com/act2
  
  

12/1

編集

11/24

撮影
音楽生成完成

11/17

• 撮影
• After EffectsでGB素材の編集
  
  
  
  

10/27

10/20

• 撮影
• 録音
  
  

10/13

• 構成を再検討
  30分尺は個人で制作、その一部を撮影・編集方法含めた動画にする方がいいのでは？
  shorts動画等
• 撮影
  
  
  
  

2025.10.06

To Do

• quest対応アバターのアップロード・動作確認
• 音声録音
  
• 冒頭撮影(5分程度)

2025.09.29

PCのスペック的にPCVRできなかった

To Do

• 最優先：アバター1体quest対応必須
  https://tomo-shi-vi.hateblo.jp/entry/20191013/1570961847
• 終わったら冒頭撮影(中間発表までに撮影は終わらせる・10分程度)
• 撮影ワールド決め
• 撮影方法決め
  ミラーリングで撮影できる(ブレる)
  試作参考：https://youtu.be/Tus2b-sRkTI

Spout2(DL・動作確認済)
https://github.com/Off-World-Live/obs-spout2-plugin

2025.09.22

Question

SunoのStyleにどう入力したらミュージカルソングっぽくなるか？
↑これもプロンプトエンジニアリング？

To Do

• 1曲目を出力してもらって、それを一度歌い、Sunoにアップロードし、伴奏をつけてもらう
  ▶︎一番簡単で音も良い、誰でもできる方法

• 計4曲生成済

• PCとVRの接続
  参考:https://vrnavi.jp/pcvr-setup/

2025.09.15

スケジュールの更新

情報デザイン研究I_チャート
10月まで決定

To Doリストの更新

• 中間審査までに試作(冒頭〜)を完成させる

• アバター修正(quest対応させようとすると崩れる)
  調査：https://note.com/tonby_oxide/n/n83f3736b3cab
  PC版1台、PCVR1台でやるのが一番いいかも
  ▶︎quest対応させなくて良くなるからTo Doから修正を消せる

• 1人分の音声をCoeFontを使って出力
  ▶︎試作で作る予定の範囲までは出来た
  
  

• 撮影(多く見ても冒頭あたりは3日あれば撮れる)
  OBSと繋げて撮影することで画角固定して撮影可能
  PC版1台、PCVR1台でやることにより、2カメ使える
  調査：https://kohavrog.com/selfie-expression/

• 編集(中間審査までに試作)
  リア歌唱パートはピッチ補正で無理やり歌わせるか
  音楽生成AIから似てる声を作るか
  調査：https://youtu.be/9jX_PR3kD6A?si=WW_HUdPgVN1wVa-s