タッチレスインターフェイス aeroTAP【近未来コンピューティング社会を実現】

株式会社ネクステッジテクノロジー 空間を手のひらや指先でタッピング… タッチレス インターフェイス aeroTAP(エアロタップ) タッチレスインターフェイスで近未来コンピューティング社会を実現 ～ make it touchless with aeroTAP ～ nextEDGE Technology K.K. May. 15 2019 Rev. 8.0 Copyright 2018 nextEDGE Technology K.K. All rights reserved.

aeroTAP (エアロタップ) タッチレスインターフェイスと3Dセンサー タッチレスインターフェイス、およびそれを支える独自3Dセンサーの開発と販売を行っています。  CPUへの負荷の少ないタッチレスインターフェイスの開発  ステレオ方式の安価で高性能な3Dセンサーをさまざまな分野に供給/利用をサポート タッチレスデバイスとして 3Dセンサーとして 既存のシステムのタッチレス化 3Dセンサー、マシンビジョンとして • ADAS • ゲーム/エンターテイメント 医療/福祉 • パーソナルモビリティ/移動ロボットの障害回避 • 物体人物カウント/セキュリティ • 介護/見守り/リハビリテーション • 手術ナビ • 3Dスキャナー • VTuber バーチャルアバター デジタル サイネージ プレゼンテーション Copyright 2018 nextEDGE Technology K.K. All rights reserved.

タッチレスインターフェイスのニーズ ICT化の浸透に伴い、様々な場面で、情報端末を操作することが求められるようになりました。 オフィスだけでなく、公共の端末、外科手術、医療機器、病院などの医療施設、工場の生産ライン、学校な どの教育施設、ホームオートメーション化が進む住居施設、自動車内、その他(アクセスビリティの向上) タッチレスインターフェイスの活躍する場面が広がっています。 滅菌性の維持、衛生的 非接触による端末操作 移動や操作時間の短縮による作業効率の向上 離れた場所で操作 医療/医療施設 利点 / 効果 情報共有の促進 FA施設 端末の操作を共有化 操作端末へのダメージを軽減 コンシューマ スペースの有効活用、省スペース化 マウスやキーボードよりも直感的な操作 プレゼンテーション/アノテーション力の向上 nextEDGE Technology K.K. Confidential need to know Do not distribute

ステレオビジョン 3Dセンサーの特徴 ステレオビジョン3D計測の利点 3Dセンサーの種類と方式 • パッシブ方式 時間遅延測量 三角測量 干渉法 構造が単純、安全(EyeSafe) • 干渉がない(複数センサーの利用が可能) Stereo Vision • 深度画像、カラー画像のマッチング TOF • Depth Map解像度が高い Structured LiDAR Light ステレオビジョン3D計測の欠点 Laser Triangulation • ステレオマッチングの計算量が多い(計算コスト) • 計測精度が距離により変化 • Occlusion(影)が発生 解決策: • 低テクスチャー環境での継続 • 暗い場所 • ICで処理することで、高速化、ホストの計算負荷 を軽減 aeroTAP 3D USBカメラの特徴 • ベースライン、レンズFOVの組み合わせ + 複数のセンサー • 複数のセンサーで対応可能 • IC化による高速・低価格 • IRプロジェクションにより対応可能 • USBバスパワーのみで稼動 • DOEプロジェクター(オプション 2019年予定) nextEDGE Technology K.K. Confidential need to know Do not distribute

aeroTAP ステレオビジョン 3Dカメラの特徴 aeroTAP ステレオビジョン3Dカメラ • カメラモジュール内ICにて深度計算 • USB2.0/3.0バスパワーで稼動 • FPS 15 から 60 • コンパクトデザイン • 複数デバイスの同時接続が可能 • UVC1.1互換 ( Linux ドライバー不要 ) • OpenNI2ドライバ (Windows版) • SDK ( Windows版 ) • nuiTrack SDK対応 • Raspberry Pi2でも利用可能 安価で扱いやすいステレオビジョン 3Dカメラ DOE IRプロジェクター (試作オプション) nextEDGE Technology K.K. Confidential need to know Do not distribute

aeroTAP 3D USBカメラ ( ステレオビジョン3Dセンサー ) nextEDGE Technology K.K. Confidential need to know Do not distribute

最新技術の応用例 肝切除開腹手術における臓器のリアルタイム3Dモデル化での応用 3D画像と、3Dモデル化した画像 2019年1月 東京医大にて *FOV30カスタム ステレオカメラを2台使用 nextEDGE Technology K.K. Confidential need to know Do not distribute

OpenNI2/スケルトントラッキング aeroTAP 3D USBカメラの場合、上半身 aeroTAP 3D USB GS カメラの場合、全身 利用用途:  従来Microsoft Kinect で運用していた環境の入 れ替えとして  ゲーム開発  ＶTuber向け、バーチャルアバター

aeroTAP(エアロタップ) Evolution Ver.5 aeroTAP(エアロタップ)は、カメラを介して離れた位置からコンピューターを操作するためのインターフェ イスシステムです。 タッチレスインターフェイスとして、デザインされたaeroTAPにより、既存のシステムを効率良くタッチレ ス化することができます。 主な機能 特徴  アプリケーション開発が不要 アプリケーションの開発が不要 既存のコンテンツをそのままタッチレス化 既存のアプリケーションをそのままタッチレス化 インターフェイスアシスタント機能  最小限のCPUリソース消費 最小限のCPUリソース消費 タブレット、スティックPCに対応 CPU、メモリ リソースを不要に消費しない設計  距離情報を使った3Dコンテンツのタッチレス操作  操作距離範囲が限定可能 手のひらでのシンプルな操作  指先操作、手のひら操作(近距/遠距離操作) ほとんどの操作が、手のひらたけで可能  ネットワーク接続  プラグアンドプレイ 利用可能環境  Windows 7 to 10 詳しくは、  タブレット、スティックPCなどの低CPU PC , USB2.0 http://www.aeroTAP.com nextEDGE Technology K.K. Confidential need to know Do not distribute

デジタルサイネージでの実績 aeroTAPで提供する、インターラクティブ デジタルコンテンツ カメラ画像から体の動き、音、手のひら認識、顔認識、色認識エンジン(複数の手のひらの追跡)により、インターラクティブ でエンターテイメント性の高いサイネージ コンテンツを提供します。 ショッピングモール  触らないから衛生的  Staples Center in L.A.  直接触らないから破損が少ない  楽しくて目立つ  つくばBivi  設置が簡単  大阪グランフロント コカコーラ  低価格  コカコーラ Heritage/ネームボトル  日本橋三越/新宿伊勢丹ショーウィンドウ  雪印6Pチーズ  KIRIN METS+ドラゴンボール 求む! 博物館/科学館 販売代理店  上野科学館  大阪科学技術館  東芝科学館  半田空の科学館  大阪キッズプラザ イベント  川崎東芝ビル 80面ディスプレイ  名古屋科学館ドラゴンボール展 Copyright 2018 nextEDGE Technology K.K. All rights reserved.

導入事例 ～ 外科手術室 滅菌を維持したICT ～ 近年の外科手術では、ICT化が進み、コンピューターに保存したデジタルデータ（PACS、DICOM、3Dモデ ル画像)を手術中に外科医が直接アクセスする機会が増えてきました。 また、筑波大学消化器外科では、独自の最先端医療システムの開発 にあわせて、タッチレスインターフェイスを手術室にて利用する機会 が増えてきました。 aeroTAPを外科医が持ち込むコンピューターで稼動することで、 外科手術室での患者医療情報へのタッチレス操作を容易に実現します。 • 術中における、情報端末の操作をタッチレス化! 医療画像アクセス支援 • 腹腔鏡手術でのアノテーション、ナビゲーション支援 aeroDRAW(エアロドロー)内視鏡手術支援 Copyright 2018 nextEDGE Technology K.K. All rights reserved.

株式会社ネクステッジテクノロジー 〒305-0051 茨城県つくば市二の宮1-13-4シーズツクバ2 302 Tel: 029-858-1126 Fax:029-858-7510