1 of 13
Download to read offline
Ad
Recommended
HoloLensでCustom Vision Serviceを使ったオフライン推論を試した話
HoloLensでCustom Vision Serviceを使ったオフライン推論を試した話Takahiro Miyaura
?
HoloLensでもWindows 10 April 2018 Update（RS４）が適用可能になり、HoloLensでも学習済みモデルを使ってオフラインで推論が可能になった。
今回はCustom Vision Serviceで学習済みモデルをエクスポートしHoloLensで実行する実験を行った際のTips。HoloLens等 RS5(17763)で Windows MLを使う
HoloLens等 RS5(17763)で Windows MLを使うTakahiro Miyaura
?
HoloLensを含めたWindows 10 October Update(1809)でWindows MLを使った物体検知アプリの作り方を説明。
作成したサンプルコードは以下のGitHubに公開。
https://github.com/TakahiroMiyaura/HoloLensOnnxTinyYoLo
HoloLensでONNXを使って推論(Custom Vision - Object Detection編)
HoloLensでONNXを使って推論(Custom Vision - Object Detection編)Takahiro Miyaura
?
Azure Custom VisionサービスにあるObject Detectionがオフライン推論をサポートしたので、「Mixed Reality Academy」 の「MR And Azure 130 - Object Detection」を改造してオフラインで物体検知をできるようにした話贬辞濒辞尝别苍蝉に搁厂5(17763)を导入した
贬辞濒辞尝别苍蝉に搁厂5(17763)を导入したTakahiro Miyaura
?
HoloLensにInsider Preview版でRS5が適用できるようになったので、実際どの程度の機能が動いているかを検証。
「あれ」がスマホで动くのか试してみた
「あれ」がスマホで动くのか试してみたTakahiro Miyaura
?
Tokyo HoloLens ミートアップ vol.26資料
https://hololens.connpass.com/event/214415/
MS公式のラーニングパス「Azure Digital Twins と Unity を使用して Mixed Reality デジタル ツインを構築する」（https://docs.microsoft.com/ja-jp/learn/paths/build-mixed-reality-azure-digital-twins-unity/?WT.mc_id=MR-MVP-5003104)
はHoloLens 2向けアプリが体験できるサンプルですが、これをモバイル対応できるかどうか即興調査したという話。Spatial Mappingの設定が気になる
Spatial Mappingの設定が気になるTakahiro Miyaura
?
Mixed Reality Toolkit - UnityのSpatialMappingのいくつかの設定パラメータの違いや効果を調べていなかったので調査した内容です。UIデザイン設計から開発をつなぐ「MRTK Figma Bridge for Unity」を使ってみよう
UIデザイン設計から開発をつなぐ「MRTK Figma Bridge for Unity」を使ってみようTakahiro Miyaura
?
XR Kaigi 2021「HoloLens ミートアップ コミュニティオーガナイズドセッション」登壇資料。Figma toolkitとUnityを連携できる「Figma Bridge for Unity」の紹介と実際の利用方法についてAzure Object Anchors のQuick Startで理解を深めたい
Azure Object Anchors のQuick Startで理解を深めたいTakahiro Miyaura
?
XRミーティング 2021/5/19登壇資料。
https://osaka-driven-dev.connpass.com/event/211954/
Azure Object AnchorsのQuick Startの解説
久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -
久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -Takahiro Miyaura
?
XR ミーティング 2021/08 登壇資料
久しぶりにMicrosoft Meshを試した話。試験的機能等含めてコラボレーションに必要な機能が徐々に組み入れられていたのでその紹介とリアルタイムデモで共有。
Mixed Reality 250で UNETを使った Immersive連携について
Mixed Reality 250で UNETを使った Immersive連携についてTakahiro Miyaura
?
HoloLensとImmersiveのSharingを調べるためにMixed Reality 250を調査。このアプリのMixed Reality Toolkit - Unityはかなり特殊な構成だったので、まずはSharingWithUNETに関係する部品の概要調査を実施。惭搁用にログ出力部品を作り始めました。
惭搁用にログ出力部品を作り始めました。Takahiro Miyaura
?
Unity Editor上でデバッグするとコンソールにログを出力し、UWPの場合にはファイルで出力できるライブラリを作り始めた話。
ライブラリはGitで公開中で徐々に機能を作り込んでいます。
https://github.com/TakahiroMiyaura/MRLogAzure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニック
Azure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニックTakahiro Miyaura
?
「de:code夏まつり ～よりコミュニティを楽しくするためのコミュニティのすすめ the FINAL」LT登壇資料
de:codeパーソナルスポンサーで提供したAzure Spatial Anchorsを使ったサンプルコードの紹介HoloLens/Windows Mixed Reality Deviceについて～XR技術についての基本～
HoloLens/Windows Mixed Reality Deviceについて～XR技術についての基本～Takahiro Miyaura
?
XRについての基本的なことを整理した資料です。
XRの中でもVR/AR/MRの概念的な違いや特徴の説明と最近の事例情報をまとめています。HoloLens 1のアプリをHoloLens 2に移行する
HoloLens 1のアプリをHoloLens 2に移行するTakahiro Miyaura
?
XRミーティング 2021/01/20登壇資料。MRDL「Lunar Module」をHoloLens 2に移植するにあたり、移植手順について紹介しました。今回はとりあえず、ARM版ビルドできる状態までを進めてHoloLens 2でデプロイして実行するところまでを紹介。Oculus Quest 2 on Mixed Reality Toolkit V2.5.0～ ハンドトラッキングする方法 ～
Oculus Quest 2 on Mixed Reality Toolkit V2.5.0～ ハンドトラッキングする方法 ～Takahiro Miyaura
?
XRミーティング 10/21登壇資料。
先日手に入れたOculus Quest 2でもMixed Reality Toolkitが使えるので動作確認を行った際の手順を解説。クロスプラットフォーム開発としての「Mixed Reality Toolkit V2」が持つ可能性
クロスプラットフォーム開発としての「Mixed Reality Toolkit V2」が持つ可能性Takahiro Miyaura
?
XRKaigi:コミュニティオーガナイズドセッション「Tokyo HoloLens Meetup」登壇資料
OSSライブラリ「Mixed Reality Tookit V2」の概要説明と、マルチプラットフォーム対応への可能性について紹介。
当日利用したスライドの動画は以下のyoutubeに公開中。
https://youtu.be/_YXxcB0hDsoUnreal Engine でアプリ開発～ MRTK UXTools for Unreal V0.9.0 ～
Unreal Engine でアプリ開発～ MRTK UXTools for Unreal V0.9.0 ～Takahiro Miyaura
?
xR Developers Community ConferenceのHoloMagicians枠で登壇したUnreal Engineの開発に関する情報。OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ～ (私が)完全に理解できたらちゃんと作れて、いろ...
OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ～ (私が)完全に理解できたらちゃんと作れて、いろ...Takahiro Miyaura
?
Kobe HoloLens Meetup! vol.5 - 春休みスペシャル(https://arkobe.connpass.com/event/241397/)登壇資料。
HoloLens 2向けのコンテンツをOpenXRだけで開発したり、OpenXR+XR Interraction Toolkitの組合わせて作ってみたりした話。コンテンツは最小限でCubeをいじるもの。
サンプルコード：https://github.com/TakahiroMiyaura/OpenXRHoloLensSamples
動画：https://youtube.com/playlist?list=PLc2Vh5cXp2W1EvV6ZEykfPqRTnvgogbeU「次の」惭搁罢碍がもたらす素敌世界（导入编）
「次の」惭搁罢碍がもたらす素敌世界（导入编）Takahiro Miyaura
?
「Tokyo HoloLens ミートアップ vol.11 忘年会スペシャル！」で発表したLT資料です。
Mixed Reality Toolkitの次期バージョンの楽しみだということを共有したい資料。
Unityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTips
Unityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTipsTakahiro Miyaura
?
「MRDevDays Japan 前夜祭」登壇資料。
HoloLens開発で、Unity経験有でUnreal Engine 4が未経験に近い人に捧げるUnityから見るとUE4はこう見えるという話を紹介Mixed Reality Toolkit V2のMixed Reality Scene Systemを使う
Mixed Reality Toolkit V2のMixed Reality Scene Systemを使うTakahiro Miyaura
?
XRミーティング 2019/10/16 登壇資料
Mixed Reality Toolkit V2に追加されているScene Systemについての紹介。
UnityのSceneを管理し切替えを容易にするための機能として提供されています。Mixed Reality Toolkit V2 RC1を少し読みといてみた～HoloLens 2機能中心に～
Mixed Reality Toolkit V2 RC1を少し読みといてみた～HoloLens 2機能中心に～Takahiro Miyaura
?
Tokyo HoloLens Meetup LT資料。
Mixed Reality Toolkit V2 Rc1がリリースされたので、HoloLens 2系の機能を中心に調査した内容を解説した資料Mixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTips
Mixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTipsTakahiro Miyaura
?
Microsoft Developer Night(https://msdevjp.connpass.com/event/233822/)での登壇資料。
Mixed Realityとも関連が深いAzure Digital Twinsの関する資料。MS LearnやUnreal Engine用のプラグインでAzure Digital Twinsの学習を進めるにあたって必要な基本的な技術の話を共有。「Mixed Reality Toolkit V1」のあの機能ってV2では？～ 空間マッピングとTagalong ～
「Mixed Reality Toolkit V1」のあの機能ってV2では？～ 空間マッピングとTagalong ～Takahiro Miyaura
?
Mixed Reality Toolkit V1であったがV2になってから機能が移動したものについての紹介。
特によく使う「Tagalong」「空間マッピング」について解説。
合わせてV2で新しくなったSolverシステムについても例を交えて解説。
スライド内の動画は以下で公開。
https://www.youtube.com/playlist?list=PLc2Vh5cXp2W2q8bOUZfT1iGiAOeajHwDoMixed Reality Dev Daysから読み解くこれからのMixed Reality
Mixed Reality Dev Daysから読み解くこれからのMixed RealityTakahiro Miyaura
?
de:code夏まつり 登壇資料
https://msdevjp.connpass.com/event/175982/More Related Content
What's hot (20)
Azure Object Anchors のQuick Startで理解を深めたい
Azure Object Anchors のQuick Startで理解を深めたいTakahiro Miyaura
?
XRミーティング 2021/5/19登壇資料。
https://osaka-driven-dev.connpass.com/event/211954/
Azure Object AnchorsのQuick Startの解説
久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -
久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -Takahiro Miyaura
?
XR ミーティング 2021/08 登壇資料
久しぶりにMicrosoft Meshを試した話。試験的機能等含めてコラボレーションに必要な機能が徐々に組み入れられていたのでその紹介とリアルタイムデモで共有。
Mixed Reality 250で UNETを使った Immersive連携について
Mixed Reality 250で UNETを使った Immersive連携についてTakahiro Miyaura
?
HoloLensとImmersiveのSharingを調べるためにMixed Reality 250を調査。このアプリのMixed Reality Toolkit - Unityはかなり特殊な構成だったので、まずはSharingWithUNETに関係する部品の概要調査を実施。惭搁用にログ出力部品を作り始めました。
惭搁用にログ出力部品を作り始めました。Takahiro Miyaura
?
Unity Editor上でデバッグするとコンソールにログを出力し、UWPの場合にはファイルで出力できるライブラリを作り始めた話。
ライブラリはGitで公開中で徐々に機能を作り込んでいます。
https://github.com/TakahiroMiyaura/MRLogAzure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニック
Azure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニックTakahiro Miyaura
?
「de:code夏まつり ～よりコミュニティを楽しくするためのコミュニティのすすめ the FINAL」LT登壇資料
de:codeパーソナルスポンサーで提供したAzure Spatial Anchorsを使ったサンプルコードの紹介HoloLens/Windows Mixed Reality Deviceについて～XR技術についての基本～
HoloLens/Windows Mixed Reality Deviceについて～XR技術についての基本～Takahiro Miyaura
?
XRについての基本的なことを整理した資料です。
XRの中でもVR/AR/MRの概念的な違いや特徴の説明と最近の事例情報をまとめています。HoloLens 1のアプリをHoloLens 2に移行する
HoloLens 1のアプリをHoloLens 2に移行するTakahiro Miyaura
?
XRミーティング 2021/01/20登壇資料。MRDL「Lunar Module」をHoloLens 2に移植するにあたり、移植手順について紹介しました。今回はとりあえず、ARM版ビルドできる状態までを進めてHoloLens 2でデプロイして実行するところまでを紹介。Oculus Quest 2 on Mixed Reality Toolkit V2.5.0～ ハンドトラッキングする方法 ～
Oculus Quest 2 on Mixed Reality Toolkit V2.5.0～ ハンドトラッキングする方法 ～Takahiro Miyaura
?
XRミーティング 10/21登壇資料。
先日手に入れたOculus Quest 2でもMixed Reality Toolkitが使えるので動作確認を行った際の手順を解説。クロスプラットフォーム開発としての「Mixed Reality Toolkit V2」が持つ可能性
クロスプラットフォーム開発としての「Mixed Reality Toolkit V2」が持つ可能性Takahiro Miyaura
?
XRKaigi:コミュニティオーガナイズドセッション「Tokyo HoloLens Meetup」登壇資料
OSSライブラリ「Mixed Reality Tookit V2」の概要説明と、マルチプラットフォーム対応への可能性について紹介。
当日利用したスライドの動画は以下のyoutubeに公開中。
https://youtu.be/_YXxcB0hDsoUnreal Engine でアプリ開発～ MRTK UXTools for Unreal V0.9.0 ～
Unreal Engine でアプリ開発～ MRTK UXTools for Unreal V0.9.0 ～Takahiro Miyaura
?
xR Developers Community ConferenceのHoloMagicians枠で登壇したUnreal Engineの開発に関する情報。OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ～ (私が)完全に理解できたらちゃんと作れて、いろ...
OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ～ (私が)完全に理解できたらちゃんと作れて、いろ...Takahiro Miyaura
?
Kobe HoloLens Meetup! vol.5 - 春休みスペシャル(https://arkobe.connpass.com/event/241397/)登壇資料。
HoloLens 2向けのコンテンツをOpenXRだけで開発したり、OpenXR+XR Interraction Toolkitの組合わせて作ってみたりした話。コンテンツは最小限でCubeをいじるもの。
サンプルコード：https://github.com/TakahiroMiyaura/OpenXRHoloLensSamples
動画：https://youtube.com/playlist?list=PLc2Vh5cXp2W1EvV6ZEykfPqRTnvgogbeU「次の」惭搁罢碍がもたらす素敌世界（导入编）
「次の」惭搁罢碍がもたらす素敌世界（导入编）Takahiro Miyaura
?
「Tokyo HoloLens ミートアップ vol.11 忘年会スペシャル！」で発表したLT資料です。
Mixed Reality Toolkitの次期バージョンの楽しみだということを共有したい資料。
Unityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTips
Unityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTipsTakahiro Miyaura
?
「MRDevDays Japan 前夜祭」登壇資料。
HoloLens開発で、Unity経験有でUnreal Engine 4が未経験に近い人に捧げるUnityから見るとUE4はこう見えるという話を紹介Mixed Reality Toolkit V2のMixed Reality Scene Systemを使う
Mixed Reality Toolkit V2のMixed Reality Scene Systemを使うTakahiro Miyaura
?
XRミーティング 2019/10/16 登壇資料
Mixed Reality Toolkit V2に追加されているScene Systemについての紹介。
UnityのSceneを管理し切替えを容易にするための機能として提供されています。Mixed Reality Toolkit V2 RC1を少し読みといてみた～HoloLens 2機能中心に～
Mixed Reality Toolkit V2 RC1を少し読みといてみた～HoloLens 2機能中心に～Takahiro Miyaura
?
Tokyo HoloLens Meetup LT資料。
Mixed Reality Toolkit V2 Rc1がリリースされたので、HoloLens 2系の機能を中心に調査した内容を解説した資料Mixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTips
Mixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTipsTakahiro Miyaura
?
Microsoft Developer Night(https://msdevjp.connpass.com/event/233822/)での登壇資料。
Mixed Realityとも関連が深いAzure Digital Twinsの関する資料。MS LearnやUnreal Engine用のプラグインでAzure Digital Twinsの学習を進めるにあたって必要な基本的な技術の話を共有。「Mixed Reality Toolkit V1」のあの機能ってV2では？～ 空間マッピングとTagalong ～
「Mixed Reality Toolkit V1」のあの機能ってV2では？～ 空間マッピングとTagalong ～Takahiro Miyaura
?
Mixed Reality Toolkit V1であったがV2になってから機能が移動したものについての紹介。
特によく使う「Tagalong」「空間マッピング」について解説。
合わせてV2で新しくなったSolverシステムについても例を交えて解説。
スライド内の動画は以下で公開。
https://www.youtube.com/playlist?list=PLc2Vh5cXp2W2q8bOUZfT1iGiAOeajHwDoMixed Reality Dev Daysから読み解くこれからのMixed Reality
Mixed Reality Dev Daysから読み解くこれからのMixed RealityTakahiro Miyaura
?
de:code夏まつり 登壇資料
https://msdevjp.connpass.com/event/175982/惭搁滨医疗画像データを3顿ホログラフィックにしてみた
- 1. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 『 』 ＭＲＩ医療画像データを ３Dホログラフィックにしてみた ■ Plan B ■ Twitter: KenS @KSxRDevelop ■■■KENSUKE Saito■■■
- 2. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 自己紹介 KenS@KSxRDevelop ?FA向け組込エンジニア（画像処理） ?Unix-Windows C/S システム ?WEB系業務管理システム ?Unity,UE4等でxR系奮闘中 ?資格収集癖有 PMP、セキュスペ（申請中）、FP2級技能士 等々
- 3. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 de:code2018 日本マイクロソフト平野社長 “我々が非常に注力して、開発投資を大きくしている分野”
- 4. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 突然ですが問題です ?日本の人口100万人あたりの CT, MRI 台数は 世界何位でしょう？
- 5. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 注）中国は含まない 仏恥義理！ 医療画像大国 LABCOAT 「日本のCT?MRI?PET保有数は世界何位？｜医療機器数ランキングを世界各国で比較」より引用
- 6. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 ホロ作成手順（ざっくり） ①病院でDICOM形式医療画像データを入手 ※手数料が必要な場合もある ②OsiriX で3Dモデル化 ※ OsiriX 対応OS MacOSのみ ③MeshLab等でローポリ化?ノイズ削除④UnityでHoloアプリ作成 人間ドック 受診しろよ！
- 7. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 ビデオ https://twitter.com/KSxRDevelop/status/940777382712975360 ※医療データは個人情報です。取り扱いには十分注意しましょう
- 8. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 今回得た知見 ?医療画像思ったより入手は容易い ?手順さえわかれば３D化はすぐ出来る ?MRと医療は相性がいい！ ?LTは老化防止によい！が登壇内容は決めてから！ –登壇内容を決めずに申し込む。期日近づく焦る！ –おっと火事場の馬鹿力！アイデアが湧く！どんどん出ちゃう –やりたい事どんどん膨らむ。アイテムも買っちゃう –膨らみすぎて間に合わなくなる。お金も使っちゃった –結論、PlanA保留、PlanBで登壇。PlanA乞うご期待
- 9. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 ビデオ（PlanA） ※また、別の機会にデモをお見せできるよう頑張ります
- 10. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 High Speed CPU-based Marching cubes https://assetstore.unity.com/packages/tools/mod eling/high-speed-cpu-based-marching-cubes- 117483 Simple DICOM Loader https://assetstore.unity.com/packages/tools/inpu t-management/simple-dicom-loader-116915 これから ■2018/5 KOMPATH, INC. から下記アセットがリリースされたので検証したい
- 11. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 残りの人生！これに賭ける！思い描く未来を現実に！ 俺はホロで行く！ まとめ
- 12. TOKYO HoloLens ミートアップ Vol.9 2018/6/23
- 13. TOKYO HoloLens ミートアップ Vol.9 2018/6/23 Twitter: @KSxRDevelop FaceBook: 斉藤健輔 Thank You! ■フォロー大歓迎！お気軽に連絡下さい！