yotiky Tech Blog

とあるエンジニアの備忘録

HoloLens2 リファレンス（公式）

HoloLens HoloLens2 MRTK2 Azure

主なページ
Hololens 2（製品）
Docs
- HoloLens
  - 概要
  - 管理
  - 商用環境
  - 操作方法
  - 環境
- Mixed Reality
MRTK

主なページ

Microsoft HoloLens（製品）
- https://www.microsoft.com/ja-jp/hololens
Microsoft HoloLens（Docs）
- https://docs.microsoft.com/ja-jp/hololens/
Mixed Reality
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/
Mixed Reality Toolkit (MRTK)
- https://microsoft.github.io/MixedRealityToolkit-Unity/README.html
Mixed Reality Toolkit (MRTK) リポジトリ
- https://github.com/microsoft/MixedRealityToolkit-Unity

Hololens 2（製品）

Microsoft HoloLens
- https://www.microsoft.com/ja-jp/hololens
- デバイス
  - https://www.microsoft.com/ja-jp/hololens/hardware
- 価格
  - https://www.microsoft.com/ja-jp/hololens/buy
- ソリューション
  - https://www.microsoft.com/ja-jp/hololens/apps
  - Dynamics 365 Remote Assist
    - https://dynamics.microsoft.com/ja-jp/mixed-reality/remote-assist/
  - Dynamics 365 Guides
    - https://dynamics.microsoft.com/ja-jp/mixed-reality/guides/
- デベロッパー
  - https://www.microsoft.com/ja-jp/hololens/developers
  - Azure Mixed Reality
    - https://azure.microsoft.com/ja-jp/topic/mixed-reality/
    - Azure Spatial Anchors
      - https://azure.microsoft.com/ja-jp/services/spatial-anchors/
    - Azure Remote Rendering
      - https://azure.microsoft.com/ja-jp/services/remote-rendering/
    - Azure Digital Twins
      - https://azure.microsoft.com/ja-jp/services/digital-twins/
  - Azure Kinect DK
    - https://azure.microsoft.com/ja-jp/services/kinect-dk/

Docs

HoloLens

Microsoft HoloLens
- https://docs.microsoft.com/ja-jp/hololens/

概要

HoloLens 2
HoloLens 1

管理

再起動、リセット、または回復する
- https://docs.microsoft.com/ja-jp/hololens/hololens-recovery
更新する、以前のバージョンに戻す
- https://docs.microsoft.com/ja-jp/hololens/hololens-update-hololens
セキュリティに関するよく寄せられる質問
- https://docs.microsoft.com/ja-jp/hololens/hololens-faq-security
デバイスおよびホログラムについてよく寄せられる質問
- https://docs.microsoft.com/ja-jp/hololens/hololens-faq
接続エンドポイントを管理する
- https://docs.microsoft.com/ja-jp/hololens/hololens-offline
アクセサリを接続する
- https://docs.microsoft.com/ja-jp/hololens/hololens-connect-devices
ユーザー管理
- https://docs.microsoft.com/ja-jp/hololens/hololens-identity
キオスクモード
- https://docs.microsoft.com/ja-jp/hololens/hololens-kiosk
Insider Preview
- https://docs.microsoft.com/ja-jp/hololens/hololens-insider
Windows Autopilot (Windows Deployment Platform)
- https://docs.microsoft.com/ja-jp/hololens/hololens2-autopilot
- https://docs.microsoft.com/ja-jp/windows/deployment/windows-autopilot/

商用環境

商用機能
- https://docs.microsoft.com/ja-jp/hololens/hololens-commercial-features
HoloLens を展開するための手順
- 必要な機能を決定する
  - https://docs.microsoft.com/ja-jp/hololens/hololens-requirements
- ライセンスを決定する
  - https://docs.microsoft.com/ja-jp/hololens/hololens-licenses-requirements
- ネットワークを構成する
  - https://docs.microsoft.com/ja-jp/hololens/hololens-commercial-infrastructure
- プロビジョニングパッケージを使用して HoloLens を構成する
  - https://docs.microsoft.com/ja-jp/hololens/hololens-provisioning
- MDM （モバイルデバイス管理）を設定する
  - https://docs.microsoft.com/ja-jp/hololens/hololens-enroll-mdm
- 更新プログラムの管理
  - https://docs.microsoft.com/ja-jp/hololens/hololens-updates
- Bitlocker の暗号化を有効にする (HoloLens1)
  - https://docs.microsoft.com/ja-jp/hololens/hololens-encryption

操作方法

スタートメニューと Mixed Reality ホーム
- https://docs.microsoft.com/ja-jp/hololens/holographic-home
音声を使う
- https://docs.microsoft.com/ja-jp/hololens/hololens-cortana
ファイル操作
- https://docs.microsoft.com/ja-jp/hololens/holographic-data
複合現実の写真とビデオをキャプチャして管理する
- https://docs.microsoft.com/ja-jp/hololens/holographic-photos-and-videos

環境

キャリブレーション
- https://docs.microsoft.com/ja-jp/hololens/hololens-calibration
環境に関する考慮事項
- https://docs.microsoft.com/ja-jp/hololens/hololens-environment-considerations
物理スペースのマッピング
- https://docs.microsoft.com/ja-jp/hololens/hololens-spaces

Mixed Reality

Mixed Reality の概要
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/
コミュニティ
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/community

概要（古め）

Mixed Reality の設計プロセス
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/case-study-expanding-the-design-process-for-mixed-reality
ケーススタディ
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/case-studies-overview
イマーシブヘッドセット
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/immersive-headset-hardware-details

設計

設計とプロトタイプ作成
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/design
- エクスペリエンスの主要な概念
  - https://docs.microsoft.com/ja-jp/windows/mixed-reality/design#what-are-the-core-concepts-of-an-experience
    - ユーザーの快適さを維持する (快適さ)
    - ユーザーには世界がどのように見えるかを考える - (ホログラフィックフレーム)
    - 複合現実アプリの種類
    - ホログラムの配置 - (座標系)
    - ホログラフィックオブジェクトを現実的なものにする - (空間マッピング)
- 操作の設計
  - https://docs.microsoft.com/ja-jp/windows/mixed-reality/design#interaction-design-factors-to-consider
    - 顧客の操作モデルを選択する
    - 手とモーションコントローラー
    - 音声入力でオブジェクトに直接コマンドを実行する
    - ユーザーの目の視線入力を利用する
    - 色、ライト、マテリアル
    - オブジェクトのスケールを示す
    - 明確で読みやすい文字体裁
    - 複合現実のための UX 要素

開発

ツールとアーキテクチャについて学習する
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/development
- ツールのインストール
  - https://docs.microsoft.com/ja-jp/windows/mixed-reality/install-the-tools
- クラウドサービス
  - Azure Remote Rendering のドキュメント
  - Azure Spatial Anchors のドキュメント
- チュートリアルとサンプルアプリ
- Unity 開発
  - https://docs.microsoft.com/ja-jp/windows/mixed-reality/unity-development-overview
  - 詳細は後述
- Unreal 開発
  - https://docs.microsoft.com/ja-jp/windows/mixed-reality/unreal-development-overview
  - 詳細は後述
- JavaScript 開発
  - https://docs.microsoft.com/ja-jp/windows/mixed-reality/javascript-development-overview
- ネイティブ開発
  - https://docs.microsoft.com/ja-jp/windows/mixed-reality/directx-development-overview
- プラットフォームの機能とAPI
- アプリの移植
  - https://docs.microsoft.com/ja-jp/windows/mixed-reality/mrtk-porting-guide

Unity 開発

Unity 開発の概要
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/unity-development-overview

はじめに

MRTK バージョン 2 の概要
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/mrtk-getting-started
Unity の推奨設定
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/recommended-settings-for-unity
Unity と Visual Studio を使用するためのベストプラクティス
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/best-practices-for-working-with-unity-and-visual-studio
Unity を使用したマネージデバッグ IL2CPP
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/managed-debugging-with-unity-il2cpp

コア要素開発

MRTK を使った基本的なインタラクション
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/mrtk-101
Unity のカメラ
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/camera-in-unity
Unity での座標系
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/coordinate-systems-in-unity
Unity での永続化
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/persistence-in-unity
Unity でのHead-gaze
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/gaze-in-unity
Unity のテキスト
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/text-in-unity
Unity のジェスチャとモーションコントローラー
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/gestures-and-motion-controllers-in-unity
Unity での手と視線の追跡
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/hand-eye-in-unit
Unity での音声入力
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/voice-input-in-unity
Unity での空間マッピング
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/spatial-mapping-in-unity
Unity での空間サウンド
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/spatial-sound-in-unity

プラットフォーム機能とAPI

Unity での共有エクスペリエンス
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/shared-experiences-in-unity
Unity でのロケータブルカメラ
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/locatable-camera-in-unity
Unity でのフォーカスポイント
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/focus-point-in-unity
Unity でのトラッキングロス
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/tracking-loss-in-unity
Unity でのキーボード入力
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/keyboard-input-in-unity
Unity for HoloLens の WinRT Api
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/using-the-windows-namespace-with-unity-apps-for-hololens
Unity での Mixed Reality ネイティブオブジェクト
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/unity-xrdevice-advanced
Unity での Vuforia Engine の使用
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/vuforia-development-overview

Unreal 開発

Unreal 開発の概要
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/unreal-development-overview
Unreal でのハンドトラッキング
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/unreal-hand-tracking
Unreal での視線入力
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/unreal-gaze-input
Unreal での空間マッピング
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/unreal-spatial-mapping
Unreal での空間アンカー
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/unreal-spatial-anchors
Unreal での音声入力
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/unreal-voice-input
Unreal での HoloLens カメラ
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/unreal-hololens-camera
Unreal での QR コード
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/unreal-qr-codes
Unreal のパフォーマンスに関する推奨事項
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/performance-recommendations-for-unreal

配布

Microsoft Store にアプリを送信する
- https://docs.microsoft.com/ja-jp/windows/mixed-reality/submitting-an-app-to-the-microsoft-store

MRTK

Mixed Reality Toolkit (MRTK) リポジトリ
- https://github.com/microsoft/MixedRealityToolkit-Unity
Mixed Reality Toolkit Documentation
- https://microsoft.github.io/MixedRealityToolkit-Unity/README.html
Mixed Reality Toolkit Documentation（非公式日本語翻訳）
- https://hololabinc.github.io/MixedRealityToolkit-Unity/Documentation.ja/GettingStartedWithTheMRTK.html
Mixed Reality Toolkit Documentation（非公式日本語翻訳）Version 2.3
- https://condescending-wilson-d1a22a.netlify.app/documentation.ja/gettingstartedwiththemrtk