---
title: 会議の癒しコンテンツにOpenAI Serviceを試してみた
tags:  #xr #azure  
author: [Miyaura](https://www.docswell.com/user/m-taka596)
site: [Docswell](https://www.docswell.com/)
thumbnail: https://bcdn.docswell.com/page/LE3PN1GDJ5.jpg?width=480
description: Microsoft Developer Dayの懇親会中に発生したLT会で話した資料(即席) Mesh 201を参考にMicrosoft Meshの中でAzure OpenAI Service実際にうごかしてみた話。
published: November 06, 24
canonical: https://www.docswell.com/s/m-taka596/Z3GE8L-MDD-mesh-openai-20241106
---
# Page. 1

![Page Image](https://bcdn.docswell.com/page/LE3PN1GDJ5.jpg)

会議の癒しコンテンツに
OpenAI Serviceを試してみた
2024/11
Microsoft Developer Day
@takabrz1
Takahiro Miyaura


# Page. 2

![Page Image](https://bcdn.docswell.com/page/8EDLWX12JG.jpg)

宮浦 恭弘
(Miyaura Takahiro)
Microsoft MVP for Mixed Reality 2018-2025
XRは趣味です
大阪駆動開発(とHolomagicians)コミュニティに生息
HoloLens日本販売してからxR系技術に取組む
新しい技術や、MRに使えそうな技術を調べる
技術Tips : https://qiita.com/miyaura
https://zenn.dev/miyaura
最近興味があって取り組んでいるもの
○ Microsoft Mesh
○ Snapdragon Spaces
○ Mixed Reality Toolkit v3.0.0
○ Vision Proもそろそろ・・・
@takabrz1
※よかったらこれを機にお知り合いになってください


# Page. 3

![Page Image](https://bcdn.docswell.com/page/V7P29PQL78.jpg)

この後コミュニティブースにいます！
まさかの
かけもち
2024/11/06
© 2024 Takahiro Miyaura


# Page. 4

![Page Image](https://bcdn.docswell.com/page/2JVDM256JQ.jpg)

いきなりのデモ
そして唐突なMicrosoft Mesh
@takabrz1
Takahiro Miyaura


# Page. 5

![Page Image](https://bcdn.docswell.com/page/5EGYGR62EL.jpg)



# Page. 6

![Page Image](https://bcdn.docswell.com/page/4JQMXV497P.jpg)

Microsoft Mesh
3D没入空間でミーティングやイベントを実施できるサービス
大きくは3つの構成
https://adoption.microsoft.com/en-us/microsoft-mesh/
Avatars for Teams
Immersive Spaces in Teams
Custom Immersive experiences
○ Mesh内で活用
○ Teamsで利用可な3D空間
○ 複数のAvatarを作成可
○ プリセットの空間を利用
✓ カスタマイズ不可
○ Unityで自由な空間作成
✓ Mesh Toolkitで開発
○ Teams内ではWebカメラの
代替としても利用可
○ Teams会議から利用可
✓ Meta Quest
✓ PC
○ 既存環境をカスタイズ
✓ 既製の空間に装飾
○ Meshポータル
✓ イベント/ミーティング作成
✓ カスタム環境の管理
○ Mesh Appを利用
✓ Meta Quest
今回はこれを使っています。
✓ PC
2024/11/06
© 2024 Takahiro Miyaura


# Page. 7

![Page Image](https://bcdn.docswell.com/page/K74V6MLRJ1.jpg)

今回のシステム構成
Meshの中でAzure OpenAI Service 使ってみた
2024/11/06
© 2024 Takahiro Miyaura


# Page. 8

![Page Image](https://bcdn.docswell.com/page/LJ13V8LV7G.jpg)

外部連携があるため
Mesh Cloud Scriptingを利用
Mesh用に構築されたAzure App Serviceを介して情報取得
https://w//.weatherapi.com/
該当地点の天気情報を取得
https://sunrise-sunset.org/
日の出・日の入り情報を取得
App Service
App Service Plan
Virtual Network
Storage Account
Mesh用
Azure OpenAI Service
ピーリャン回答用
2024/11/06
© 2024 Takahiro Miyaura


# Page. 9

![Page Image](https://bcdn.docswell.com/page/GJWPLZV372.jpg)

おしえてくん
3Dモデルの情報を使ってキャラクターが教えてくれる
○ Azure OpenAI Serviceを使っ
てみたかった・・・
2024/11/06
© 2024 Takahiro Miyaura


# Page. 10

![Page Image](https://bcdn.docswell.com/page/4EZKM14GE3.jpg)

元ネタ
Microsoft Meshのサンプル
2024/11/06
© 2024 Takahiro Miyaura


# Page. 11

![Page Image](https://bcdn.docswell.com/page/Y76QNL3Q7V.jpg)

Mesh 201
Open AI Serviceを使ったAIエージェントによる空間内の支援
https://github.com/microsoft/Mesh-Toolkit-Unity
2024/11/06
© 2024 Takahiro Miyaura
注意
Mesh 201のサンプルは
.NET SDK for Azure OpenAI
V1.00なのでクラス名が少し違う


# Page. 12

![Page Image](https://bcdn.docswell.com/page/G75R51L2E4.jpg)

解説記事はこちら
Qiita記事にしました
https://qiita.com/miyaura/items/029cddff4deeeaccd6
20
Microsoft Meshの
チュートリアルMesh201で
Open AI Serviceを試してみる
2024/11/06
© 2024 Takahiro Miyaura


# Page. 13

![Page Image](https://bcdn.docswell.com/page/9J2DN1L1JR.jpg)

こういったVR（XR）でAI使う意味
XR = 没入感やウェアラブルに関連した技術の1つ
○空間内のユーザの活動などをプロンプト化すると、行
動支援や様々なことができる可能性
○現実の行動（目をとめたもの/状況、発話など）
の中で人に寄り添うエージェントを呼び出したり
2024/11/06
© 2024 Takahiro Miyaura


# Page. 14

![Page Image](https://bcdn.docswell.com/page/DEY2PZQ4EM.jpg)

この後コミュニティブースにいます！（しつこい）
まさかの
かけもち
2024/11/06
© 2024 Takahiro Miyaura