.NET Conf 2018 Tokyo MixedRealityなシステムを気持ちよく開発しよう
•Download as PPTX, PDF•
0 likes•339 views
.NET Conf 2018 Tokyo に登壇したときの資料
Recommended
More Related Content
Similar to .NET Conf 2018 Tokyo MixedRealityなシステムを気持ちよく開発しよう
Similar to .NET Conf 2018 Tokyo MixedRealityなシステムを気持ちよく開発しよう (20)
.NET Conf 2018 Tokyo MixedRealityなシステムを気持ちよく開発しよう
- 4. 会社紹介 HoloLab Inc. 株式会社ホロラボ 事業内容 Windows Mixed Reality他、xR技術やセンサー技術に関する ・調査研究 ・システム／アプリケーションの企画開発 ・普及啓発活動 設立 2017/1/18 住所 東京都品川区西五反田2-25-1 インテックス五反田ビル3F 取締役 5名 従業員 16名 Web http://hololab.co.jp/
- 11. しかし… HoloLab Inc. 開発の現場では 特有の 苦労 がある…
- 12. 開発苦労話 HoloLab Inc. • 航空法の縛りがあり、気軽に飛ばせない • GPSなど一部の機能は屋外でしか使えない ■ドローンアプ リ
- 13. 開発苦労話 HoloLab Inc. • デバイスの動作が環境に左右される • 設計をよく考えないと自動テストがやりにくい • 航空法の縛りがあり、気軽に飛ばせない • GPSなど一部の機能は屋外でしか使えない ■HoloLens ■ドローンアプ リ
- 14. 開発苦労話 HoloLab Inc. • デバイスの動作が環境に左右される • 設計をよく考えないと自動テストがやりにくい • 航空法の縛りがあり、気軽に飛ばせない • GPSなど一部の機能は屋外でしか使えない ■HoloLens ■ドローンアプ リ • 実機デバッグが難しく、現地検証でトラブルが発生すると悲惨 ■現地検証
- 16. デバイスに依存する機能 HoloLab Inc. ◆ドローン 飛行データ収集 カメラ操作 コントロール
- 17. デバイスに依存する機能 HoloLab Inc. ジェスチャー操作 音声コマンド 空間認識 ◆HoloLens
- 20. 解決策 • ジェスチャーの検出とオブジェクトを動かすコードを分離する ⇒ デバイスに依存する部分を抽出する • デバイス依存部分をインタフェースを使って抽象化する ⇒ ジェスチャー検出部分を置き換えることができる HoloLab Inc.
- 29. 自動テストはどうする？ HoloLab Inc. ■IDEに搭載されているテストランナーを使っている • Unityエディタに搭載されているPlayModeテストを使う • テスト用のSceneを作成し、それをテストコード内で読み込ませ実行する ■HoloLens • XCode上でXCTestを使う • RxSwiftをよく使うので、RxTest/RxBlockingを使うと捗る ■ドローンアプ リ
- 30. Tips HoloLab Inc. • UWP Platformでは、Playmodeテストのコードが含まれていると、 アプリのビルドができない • テストコードは#if UNITY_EDITORディレクティブで囲う必要がある • UnityでもMoqを使うことができる • ZenJectに組み込まれており、Moqだけ使用することも可能 • HoloLensアプリのテストコードについては以下参照 • MonoBehaviourTestでコンポーネントをテストする http://blog.d-yama7.com/archives/1458 • HoloLensのジェスチャー操作をテストする http://blog.d-yama7.com/archives/1433
- 32. 現場は怖い • 想定していなかったトラブルが起きる（体感7割くらい） • 現場の環境がデバイスに適さない • ネットワーク環境がよくない etc... • すぐさまトラブルシュートできるかが腕の見せ所 HoloLab Inc.
- 33. 事前準備はしっかりやる • 設計、実装、テストに十分な時間を確保する • うまく設計とテストができていれば、トラブル発生時にも問題の切り分けがや りやすい • マイクロソフトのガイドラインを参考にイメージトレーニング • https://docs.microsoft.com/ja-jp/windows/mixed-reality/testing-your- app-on-hololens • HoloLensの特性を踏まえた動作検証の考え方がよくまとまっている HoloLab Inc.
- 34. いざ現場へ HoloLab Inc. • 機材は予備も含めて多めに持っていく • メインデバイス以外にも、ルーター、電源、ビルド用PC、etc... • 現場でシステムのモニタリングができる環境を作る • パフォーマンスモニタリング • アプリケーションモニタリング
- 36. まとめ • HoloLensは他のデバイスと連携させると可能性が広がる • デバイスを使うアプリやシステムの開発特有の苦労がある • その特性に対してアプローチをとることが大切 • 設計の工夫 • テストの工夫 • 現場検証での工夫 HoloLab Inc.
Editor's Notes
- ホロラボはHoloLensやVRのイマーシブヘッドセットに特化した会社で、例えばHoloLensが仕事の中でこう使われる未来があるんじゃないか？と閃いたお客様と一緒になって何年か先の未来を一緒に作り、現場で実際に検証や実験などを主にやっています。ちなみにこういった未来を試作してみる取り組みはProof of conceptや、ポック、ピーオーシーと言われています。
- ホロラボはHoloLensやVRのイマーシブヘッドセットに特化した会社で、例えばHoloLensが仕事の中でこう使われる未来があるんじゃないか？と閃いたお客様と一緒になって何年か先の未来を一緒に作り、現場で実際に検証や実験などを主にやっています。ちなみにこういった未来を試作してみる取り組みはProof of conceptや、ポック、ピーオーシーと言われています。
- こちらは大阪の株式会社イトーキと共同で、HoloLensを活用した次世代遠隔コミュニケーションシステムのPoCを行いました。 会議の参加者は、 ・PCで参加の場合は、KinectやRealSenseで点群化した人間と、 ・HoloLensで参加の場合は、バーチャル参加者として表示され、 複数人同時に会議ができるシステムとなります。 プロトタイプは単に立体映像を表示するにとどまらず、ユーザーアカウントによるログインの仕組みや連絡先リストからの呼び出しと着信処理など、実際の会議システムとしての利用が想定される機能も一部実現しています。
- 千葉のドローンベンチャーである株式会社Liberawareと共同で、屋根裏や地下などの人の立ち入りが困難な狭所検査用ドローンをHoloLensから操作かつ、壁を透視して可視化するドローンナビゲーションシステムのPoCを行いました。 リベラウェアさんは産業用の屋内向けドローンとしては唯一で、基板からすべて自社でドローンのハードからソフトまでを自作されている会社さんで、Microsoftのイノベーションアワードをきっかけにホロラボから声をかけPoCが開始されました。 機能としてはドローンのボイスコマンドでの離着陸操作、ハンドジェスチャーでの操縦と、ドローン自体が持つSLAMと連携した非GPS環境での精密な位置情報の連携となります。 PoCでは、 ・ドローンを誰でも操縦できるようにするために音声やジェスチャー、手を前に動かせばドローンも前に、 ・操作の簡略化にプラスして、壁の向こうや床下や天井裏を飛ぶドローンをリアルタイムに可視化して、現在どこを飛んでいるのかを分かったうえでジェスチャーでの操作指示を行えるようになっています。 ・ゆくゆくの発展としては、ドローンをIoTのセンサーデバイスと位置づけ、HoloLensが入っていけないような環境マップ情報などをドローンに収集に行かせるようなことができるかもしれません。
- ホロラボはHoloLensやVRのイマーシブヘッドセットに特化した会社で、例えばHoloLensが仕事の中でこう使われる未来があるんじゃないか？と閃いたお客様と一緒になって何年か先の未来を一緒に作り、現場で実際に検証や実験などを主にやっています。ちなみにこういった未来を試作してみる取り組みはProof of conceptや、ポック、ピーオーシーと言われています。