More Related Content
Similar to 础锄耻谤别を活用した贬辞濒辞尝别苍蝉アプリ开発 (20)
More from Satoshi Fujimoto (20)
Recently uploaded (15)
础锄耻谤别を活用した贬辞濒辞尝别苍蝉アプリ开発
- 2. 自己紹介 ? 株式会社ナレッジコミュニケーション ? HoloLensアプリ開発 ? KumaMCN ? クラッピーチャレンジ ? オペラ×ペッパー ? プログラミング教室 ? ヒャッカソン ? IoTLT@熊本市 ? ヘボコン熊本 ? ガチラボ ガチ本 ＠sotongshi
- 3. 会社紹介 ? クラウド（Azureなど）の構築，運用，監視 ? 本社は千葉，主にビジネスデベロップメント ? 2016年3月ごろ，熊本に顿别惫翱辫蝉と搁&补尘辫;顿拠点
- 6. AIの民主化 ? 養豚事業を手がけるグローバルピッグファーム豚の出荷予測にマイクロソフトのAzure Machine Learningを採用！ ? https://prtimes.jp/main/html/rd/p/000000003.000004474.html ? 専門家不要の機械学習自動モデル構築「ナレコムAI」の分析レポート大幅アップデート ? https://prtimes.jp/main/html/rd/p/000000005.000004474.html ? 名古屋大学様及び中部電力株式会社様（販売カンパニー法人営業部）との共同研究にて Azure Machine Learning Studio 及びPower BIを利用し予測分析結果の可視化を実現 ? https://prtimes.jp/main/html/rd/p/000000008.000004474.html
- 9. スケジュール 2016.12 HoloLensアドベントカレンダー2016 2017.01 ロボデックス2017 2017.04 コーヒーメーカーの操作手順アプリ 2017.06 AI-EXPO 2017 リモートサポートアプリ 2017.10 MRPP研修 2017.12 HoloLensアドベントカレンダー2017 2018.04 AI-EXPO 2018 椅子の組み立てマニュアルアプリ 2018.04 MR×Azure「ハンズオン+開発」 札幌HoloLensミートアップvol.1 HoloLensアプリ開発コンテスト 2018.05 de:code 2018 立教大学様 × スタジオミダス様 事例化 2018.06 熊本HoloLensミートアップvol.0 2018.07 熊本HoloLensミートアップvol.0.1 前哨戦 熊本HoloLensミートアップvol.0.1 MRPP認定 札幌HoloLensミートアップvol.2
- 10. コーヒーメーカーの操作手順アプリ 2016.12 HoloLensアドベントカレンダー2016 2017.01 ロボデックス2017 2017.04 コーヒーメーカーの操作手順アプリ 2017.06 AI-EXPO 2017 リモートサポートアプリ 2017.10 MRPP研修 2017.12 HoloLensアドベントカレンダー2017 2018.04 AI-EXPO 2018 椅子の組み立てマニュアルアプリ MR×Azure「ハンズオン+開発」 札幌HoloLensミートアップvol.1 HoloLensアプリ開発コンテスト 2018.05 de:code 2018 立教大学様 × スタジオミダス様 事例化 2018.06 熊本HoloLensミートアップvol.0 2018.07 熊本HoloLensミートアップvol.0.1 前哨戦 熊本HoloLensミートアップvol.0.1 MRPP認定 札幌HoloLensミートアップvol.2 https://youtu.be/kltitZULvNM
- 11. リモートサポートアプリ 2016.12 HoloLensアドベントカレンダー2016 2017.01 ロボデックス2017 2017.04 コーヒーメーカーの操作手順アプリ 2017.06 AI-EXPO 2017 リモートサポートアプリ 2017.10 MRPP研修 2017.12 HoloLensアドベントカレンダー2017 2018.04 AI-EXPO 2018 椅子の組み立てマニュアルアプリ MR×Azure「ハンズオン+開発」 札幌HoloLensミートアップvol.1 HoloLensアプリ開発コンテスト 2018.05 de:code 2018 立教大学様 × スタジオミダス様 事例化 2018.06 熊本HoloLensミートアップvol.0 2018.07 熊本HoloLensミートアップvol.0.1 前哨戦 熊本HoloLensミートアップvol.0.1 MRPP認定 札幌HoloLensミートアップvol.2 https://youtu.be/FmXzTQrAl8U
- 12. MRPP研修 2016.12 HoloLensアドベントカレンダー2016 2017.01 ロボデックス2017 2017.04 コーヒーメーカーの操作手順アプリ 2017.06 AI-EXPO 2017 リモートサポートアプリ 2017.10 MRPP研修 2017.12 HoloLensアドベントカレンダー2017 2018.04 AI-EXPO 2018 椅子の組み立てマニュアルアプリ MR×Azure「ハンズオン+開発」 札幌HoloLensミートアップvol.1 HoloLensアプリ開発コンテスト 2018.05 de:code 2018 立教大学様 × スタジオミダス様 事例化 2018.06 熊本HoloLensミートアップvol.0 2018.07 熊本HoloLensミートアップvol.0.1 前哨戦 熊本HoloLensミートアップvol.0.1 MRPP認定 札幌HoloLensミートアップvol.2
- 13. MRPP Day1 デモ（Mars，HoloSkype，JAL，Volvo，Trimble） チーム分け ? Developer ? Designer ? Business Development ? Consultant Day 2 デザインシンキング ? Brainstorming ? OLC(One Line Concept) ? Prototyping ? Storyboard Day3 コーディング Day4 コーディング，プレゼン Day5 デモ（ Ford，Loews）
- 14. デザインシンキング
- 15. 椅子の組み立てマニュアル 2016.12 HoloLensアドベントカレンダー2016 2017.01 ロボデックス2017 2017.04 コーヒーメーカーの操作手順アプリ 2017.06 AI-EXPO 2017 リモートサポートアプリ 2017.10 MRPP研修 2017.12 HoloLensアドベントカレンダー2017 2018.04 AI-EXPO 2018 椅子の組み立てマニュアルアプリ MR×Azure「ハンズオン+開発」 札幌HoloLensミートアップvol.1 HoloLensアプリ開発コンテスト 2018.05 de:code 2018 立教大学様 × スタジオミダス様 事例化 2018.06 熊本HoloLensミートアップvol.0 2018.07 熊本HoloLensミートアップvol.0.1 前哨戦 熊本HoloLensミートアップvol.0.1 MRPP認定 札幌HoloLensミートアップvol.2 https://youtu.be/RlcKwomZ4XU
- 16. AI-EXPO2018 “勝手にブルームするなよ” 2016.12 HoloLensアドベントカレンダー2016 2017.01 ロボデックス2017 2017.04 コーヒーメーカーの操作手順アプリ 2017.06 AI-EXPO 2017 リモートサポートアプリ 2017.10 MRPP研修 2017.12 HoloLensアドベントカレンダー2017 2018.04 AI-EXPO 2018 椅子の組み立てマニュアルアプリ MR×Azure「ハンズオン+開発」 札幌HoloLensミートアップvol.1 HoloLensアプリ開発コンテスト 2018.05 de:code 2018 立教大学様 × スタジオミダス様 事例化 2018.06 熊本HoloLensミートアップvol.0 2018.07 熊本HoloLensミートアップvol.0.1 前哨戦 熊本HoloLensミートアップvol.0.1 MRPP認定 札幌HoloLensミートアップvol.2
- 17. HoloLensアプリ開発コンテスト 2016.12 HoloLensアドベントカレンダー2016 2017.01 ロボデックス2017 2017.04 コーヒーメーカーの操作手順アプリ 2017.06 AI-EXPO 2017 リモートサポートアプリ 2017.10 MRPP研修 2017.12 HoloLensアドベントカレンダー2017 2018.04 AI-EXPO 2018 椅子の組み立てマニュアルアプリ MR×Azure「ハンズオン+開発」 札幌HoloLensミートアップvol.1 HoloLensアプリ開発コンテスト 2018.05 de:code 2018 立教大学様 × スタジオミダス様 事例化 2018.06 熊本HoloLensミートアップvol.0 2018.07 熊本HoloLensミートアップvol.0.1 前哨戦 熊本HoloLensミートアップvol.0.1 MRPP認定 札幌HoloLensミートアップvol.2 https://youtu.be/sWvw_1yxBU0
- 18. Academy 30X ? MR and Azure 301: Language translation ? MR and Azure 302: Computer vision ? MR and Azure 303: Natural language understanding (LUIS) ? MR and Azure 304: Face recognition ? MR and Azure 305: Functions and storage ? MR and Azure 306: Streaming video ? MR and Azure 307: Machine learning ? MR and Azure 308: Cross-device notifications https://docs.microsoft.com/en-us/windows/mixed-reality/academy
- 19. 立教大学×スタジオミダス様 事例化 2016.12 HoloLensアドベントカレンダー2016 2017.01 ロボデックス2017 2017.04 コーヒーメーカーの操作手順アプリ 2017.06 AI-EXPO 2017 リモートサポートアプリ 2017.10 MRPP研修 2017.12 HoloLensアドベントカレンダー2017 2018.04 AI-EXPO 2018 椅子の組み立てマニュアルアプリ MR×Azure「ハンズオン+開発」 札幌HoloLensミートアップvol.1 HoloLensアプリ開発コンテスト 2018.05 de:code 2018 立教大学様 × スタジオミダス様 事例化 2018.06 熊本HoloLensミートアップvol.0 2018.07 熊本HoloLensミートアップvol.0.1 前哨戦 熊本HoloLensミートアップvol.0.1 MRPP認定 札幌HoloLensミートアップvol.2 https://prtimes.jp/main/html/rd/p/000000006.000004474.html
- 20. 背景 ? 立教大学望月研究室 ? High Performance Computingによる分子 構造?状態のシミュレーション ? 3Dプリンタによる立体モデルの出力 2次元での理解，情報共有が困難 立体モデルの出力に時間がかかる
- 21. One Line Concept 3Dモデルを表示， コメントを貼り付け，シェアできる 特徴 ? 3Dモデルの表示 ? コメントの貼り付け ? コメントの翻訳 ? 画像や動画の貼り付け ? クラウド連携
- 23. アプリ概要 3Dモデルの表示 3Dモデルに視線を合わせて、 コメントの貼り付け 3Dモデルをダウンロード，表示，操作 コメントの貼り付け コメントの翻訳 多言語対応 Speak in 10 sec. Add Comment Brightness button Comment Botón de brillo Comment 明るさボタン Comment
- 26. 目指すところ ? 研究者のコミュニケーションを促進 ? 簡単で効果的に学べる授業 ? 3Dプリンタで出力した“リアル”と HoloLens上の”バーチャル”のモデルの 組み合わせ
- 27. 3Dモデルのフロー Table Storage Blob Storage FunctionsFunctions (SAS Generator) Convert to Asset Bundle at Knowledge Communication User/3D Model Creator Virtual Machine Unity Web App Microsoft HoloLens Queue Storage FunctionsEvent Grid Functions Save Blob metadata on Table Storage Feature works Automatically convert to Asset Bundle Asset Bundle3D Model Data Download Asset Bundle Generate SAS Token Batch
- 28. 3Dモデルのフロー Table Storage Blob Storage FunctionsFunctions (SAS Generator) Convert to Asset Bundle at Knowledge Communication User/3D Model Creator Virtual Machine Unity Web App Microsoft HoloLens Queue Storage FunctionsEvent Grid Functions Save Blob metadata on Table Storage Feature works Automatically convert to Asset Bundle Asset Bundle3D Model Data Download Asset Bundle Generate SAS Token Batch
- 29. AssetBundle ? HoloLensで始めるAzure BLOB Storage ~AssetBundleを添え て~ @morio36 ? https://qiita.com/morio36/items/d4b595c074d37f5d0f61
- 32. 础蝉蝉别迟叠耻苍诲濒别を作成
- 34. Blob Storage
- 36. 3Dモデルのフロー Table Storage Blob Storage FunctionsFunctions (SAS Generator) Convert to Asset Bundle at Knowledge Communication User/3D Model Creator Virtual Machine Unity Web App Microsoft HoloLens Queue Storage FunctionsEvent Grid Functions Save Blob metadata on Table Storage Feature works Automatically convert to Asset Bundle Asset Bundle3D Model Data Download Asset Bundle Generate SAS Token Batch
- 37. Tableからアセットバンドルのリストを 取得し、メニューに表示する Select 3D model Show 3D Model List Chicken Bear Dog Cat ＜＞ Chicken Dog assetBundleListload-3d-model-list Return Asset Bundle List (JSON) Send customerId (request query) Get Entities
- 38. メニューから、表示したい3Dモデルを タップ sas-generator Blob Storage Return SAS URL (Plain text) Send Blob container and asset bundle path (JSON) Generate SAS URL Asset Bundle (3D Model) Select 3D model Chicken Bear Dog Cat ＜＞ Chicken Dog Gaze & tap to Select
- 39. 3DモデルをAzure Blob Storageから ダウンロード Blob Storage Download Asset Bundle via SAS URL (Binary) Downloading... 68% Show Download Status Asset Bundle (3D Model)
- 40. 3Dモデルが表示され、既存のコメント リストを取得 Show 3D Model commentListload-3d-model-list Send customerId, modelId and language (JSON) Return translated comment list (JSON) Get Entities
- 41. 3Dモデルデータ容量と読み込み時間 ? 1モデル，40000頂点，13000面，アセットバンドル500KB ? 最低45fps以上を維持したい ? 视野角に映り込む3顿モデルが増えると蹿辫蝉は当然下がる
- 43. コメントモードにして、3Dモデルに視線 を合わせてタップ Gaze & Tap 3D Model Comment ニワトリは、 鳥類の種のひ とつ。
- 44. 音声入力で10秒間のコメント Comment within 10 seconds. add Comment Start Canc el Tap to start recording Comment ニワトリは、 鳥類の種のひ とつ。
- 45. Stopをタップすることで、録音を停止 Recording... add Comment Stop Canc el Tap to stop recording Comment ニワトリは、 鳥類の種のひ とつ。
- 46. Bing Speech APIを用いて、音声を テキスト化 Transcribing... add Comment Canc el Bing Speech Return transcribed text Send wave file Comment ニワトリは、 鳥類の種のひ とつ。
- 47. テキスト化されたコメントを表示 早朝から「コケ コッコー」と大声 で鳴く add Comment OK Canc el Tap to register the comment Show transcribed text Comment ニワトリは、 鳥類の種のひ とつ。 Retry
- 48. コメントリストへ新しいコメントを登録 Show message Comment 早朝から「コ ケコッコー」 と大声で鳴く commentListregister-comment Send comment and any other data (JSON) Insert Entity Comment ニワトリは、 鳥類の種のひ とつ。
- 49. 今後の展望 ? もうすぐリリース！ ? iOS対応 ? World AnchorとしてのARマーカー機能
- 50. 告知 7/27, 28 Pepperプログラミング教室@ソフトバンク健軍店 7/29 350インチスクリーンイベント@益城 8/4, 5 Maker Faire in Tokyo 2018 9/1, 2 ショッカソンくまもと 11/xx VTuberハッカソン 全国ツアー2018 熊本大会 熊本に来てください
- 51. ご清聴ありがとうございました