技術ハイライト
課題MediaPipeのLandmark座標をUnityでキャラクター制御に利用できるよう、変換と安定化が必要でした。
対応MediaPipeUnityPluginと連携してトラッキングデータを補正・平滑化し、Landmark座標系からUnity座標系への変換処理を研究・実装しました。
成果変換したデータを利用するプレイヤーキャラクターコントロールシステムを開発しました。
クライアントサイド担当
PC・Web向けバーチャルストリーミングプラットフォームです。
課題MediaPipeのLandmark座標をUnityでキャラクター制御に利用できるよう、変換と安定化が必要でした。
対応MediaPipeUnityPluginと連携してトラッキングデータを補正・平滑化し、Landmark座標系からUnity座標系への変換処理を研究・実装しました。
成果変換したデータを利用するプレイヤーキャラクターコントロールシステムを開発しました。
課題多人数接続を見据えた同期処理とリアルタイム通信の基盤が必要でした。
対応Dedicated Serverのプロトタイプ、マルチプレイヤー同期、サーバー・クライアント間のリアルタイム通信を実装しました。
成果多人数接続を検証できるプロトタイプ基盤を構築しました。