Skip to content
マクドナルド巡査部長のケースで、薄暗い寝室で2人の警察官が逮捕し、さらに2人がドアの前に立っています。
#xr#ai

ABLExR

警察官同士の介入を学ぶイマーシブ・トレーニング

law.georgetown.edu ↗
> for able project, georgetown law · via specialguestxxrトレーニング · 2023
01· プロジェクト
> ABLE Project, Georgetown Law向けプロジェクト(SpecialGuestXと協業)

介入の瞬間を、練習する

ジョージタウン大学ロースクールのABLE Project(Active Bystandership for Law Enforcement)のための没入型XRトレーニングです。同僚が危害を加えようとしたときに介入できるよう、警察官を訓練します。Meta CS Labs、1stAveMachine、SpecialGuestXとともに制作し、私たちはAIとXRの開発を主導しました。

3つのケースで、訓練者はシーンの中に入ります。家庭内の発砲事件で逮捕した直後のマクドナルド巡査部長、夜の小さな署にいるロペス巡査、そしてエスカレートしていく交通取り締まりです。登場人物は訓練者に話しかけて返答を待ち、その答えでケースが変わります。シーンは実際の俳優、AIによるモーショントラッキングと表情アニメーション、ボリュメトリックキャプチャー、Unreal Engineでモデリングした環境を組み合わせています。最初のビルドは2023年7月にワシントンDCで警察官とテストし、同年12月にはノックスビル警察で披露しました。

> cat /works/able-xr.md
種類XRトレーニング
クライアントABLE PROJECT, GEORGETOWN LAW
代理店SPECIALGUESTX
年2023
場所アメリカ
使用技術
  • Unreal Engine 5
  • MetaHuman
  • Motion capture
  • Depthkit
  • Voice intents
  • Meta Quest Pro
02· 数字で見る
3> つのケース:McDonald、Lopez、Traffic Stop
音声> 登場人物が訓練者の返答を待つ
DC> 警察官とのテスト(2023年7月)
ABLE> ジョージタウン大学ロースクールのプログラム
03· しくみ
キャプチャー用ビューアで見た、カウンターと2脚のスツールがあるキッチンの点群。
01

キャプチャー

実際の俳優を撮影してAIでトラッキングし、顔は実際の音声からアニメーションさせます。

このケースの登場人物4人のMetaHuman。3人の警察官とTシャツ姿の男性がアパートの部屋に立っています。
02

再現

登場人物はMetaHumanやボリュメトリックキャプチャーとなり、Unreal Engineでモデリングしたシーンに置かれます。

ベッドサイドのランプと窓の光に照らされた無人の寝室。
03

ライティング

ライティングとカメラは、ケースごと、シーンごとに調整します。

狭い廊下で、2人の警察官が男性を壁に押さえつけています。
04

介入

警察官は各ケースをVRで体験し、声に出して答え、介入の瞬間を練習します。

04· ギャラリー
05· 研究
> 研究 · text-to-xr

Text to XR

ABLExRの中で、Text to XRの研究にも取り組みました。書かれた説明からキャラクターのアニメーションを作り、MetaHumanに適用して、VRやAR用のシーンに配置します。

06· クレジット
for able project, georgetown law. via specialguestx. XR - AI - TRAINING. 2023
07· 参考リンク

似たようなプロジェクトをお考えですか。必要なことをお聞かせください。

08· 次のプロジェクト
> cd /works/mallorca-urban-experience
Mallorca Urban Experience> WebARアドベンチャー
> navbar collapsed · scroll to the end
Crowtec