ORBBEC会社概要 製品カタログ 2024 11 10

イベントまとめ
【録画・資料公開あり】中国のAIロボット開発,RDKX3ボード,会員120万人のROSコミュニティ「古月居」、さらには深圳ORBBECの3Dカメラについて当事者が紹介 #rdkx3
https://togetter.com/li/2463708

世界最大のROSコミュニティ/スクールGuyuehome紹介　古月居　Robbin Hu
動画：
https://youtu.be/Pg20l4IV3Ps
資料:
https://speakerdeck.com/takasumasakazu/sukuruguyuehomeshao-jie-gu-yue-ju-robbin-hu

D-Robotics RDKシリーズと会社紹介
動画：
https://youtu.be/JR7XYhUSv08
資料:
https://speakerdeck.com/takasumasakazu/d-robotics-rdksirizutohui-she-shao-jie-number-rdkx3-english

RDKX3 ハンズオン資料 東京　D-Robotics 日本語
動画：
https://youtu.be/WbYXNsKX8w8
資料：
https://speakerdeck.com/takasumasakazu/rdkx3-hanzuonzi-liao-dong-jing-d-robotics-ri-ben-yu

ORBBEC紹介
動画：
https://youtu.be/o7rNfLLm3T8
資料：
https://speakerdeck.com/takasumasakazu/orbbechui-she-gai-yao-zhi-pin-katarogu-2024-11-10

Transcript

1. 3D Vision for A 3D World ORBBEC会社概要 製品カタログ
2. 自己紹介 • ロボット向けビジョンセンサー闇のフィクサー • Intelにてみんな大好きRealSenseの製品担当を約4年間担当 • 色々あって今年の6月に解雇される(ROSが好きすぎたせい？) • 複数の3DカメラやAIカメラ会社と色々やっている • ボランティアで学生や研究者などにカメラ貸出プログラムも行っている • 平日はUnity
3. 01 会社概要 02 ３Dビジョン 03 製品紹介 04 ソリューション
4. 3D Vision for A 3D World • 会社概要 取引実績 上場企業 技術開発 1000社以上のお客様取引実績 2022年上場成功（Shanghai Stock Exchange ） 3Dセンサー技術に関するトップ クラスの特許取得 量産能力 自設工場で生産 生産能力：百万 ユニットレベル
6. • 会社設立 • ・第2世代3DセンサーチップMX6000 • ・3D 顔認証ソリューション導入 • ・HPと協力で3Dスキャナー開発 • ・第3世代3DセンサーチップMX6300 • ・OPPO フラグシップスマホでミリオンレベ ルの構造化光3Dカメラ採用 • ・iToF センサー PLECO • ・第1世代の3D顔認証電子ロックを量産 • ・ロボット産業において、AstraとGeminiシリーズ は大量運用. • 第4世代3DセンサーチッMX6600 • dToF 用チップとSPAD ソリューション発表 • 開発者向けiToFカメラマイクロソフト社と共同 発表. • Meizu向け5GフラッグシップモデルスマホiToF ソリューション提供 • ・初の3Dセンサー処理チップ MX400開発 • ・コンシューマ向けの3Dカメラ量 産開始 • ・SH Stock上場成功 ・Single Point dToF チップ開発 • ・単線（Single Line）LiDAR開発 2013 2015 2017 2018 2020 2021 2022 2023 • OBBEC 新社屋建設完了と移転 • 次世代iToFカメラMicrosoft社と 共同開発 マイルストーン
7. 01 会社概要 02 ３Dビジョン テクノロジー 03 04 製品紹介 ソリューション
8. フルスタックの研究開発能力 全技術ルート把握 アプリケーション＆アルゴリズム （3D スキャンニング、ボディトラッキング、背景切り抜き、V-SLAM） ミドルウェア SDK 構造化光 iToF ステレオビ ジョン dToF Lidar 3D 測量 深度演算エンジ ンアルゴリズム スペシャライズ ド光学システム ドライブ＆ ファームウェア キャリブレー ション技術 アライン技術 自動校正技術 生産設備 R&D マスプロダクション技術 コア技術 ASIC Chip iTOF センシ ング Chip 単一光子検出 アレイ 構造化光Chip IC設計 すべての技術 ルート 異なる応用分野における共同開発 6つの3D画像認識技術 基盤コア技術に基づく協調的イノベーショ ン Upper layer 3Dビジョン画像認識AIoT演算チップ Full-stack R&D Capability Bottom layer ＋ 技術能力
9. 3D Vision for A 3D World 構造化光 MX400 構造化光 ステレオビジョン MX6000 構造化光 MX6300 (for mobile) iToF PLECO 積層型BSIセンサー （VGA，HQVGA) dToF Y/Z FSI CMOS BCD single point SPAD array SPAD MX6600 構造化光 ステレオビジョン ASIC Sensor MX6800 (for robot) ステレオビジョン用 コア・テクノロジー
10. 生産拠点 現在、東莞市で26000平方メートル以上の自社工場を運営しており、工場内には百級クラスのクリーンIR/RGB画像モジュール生産エリア、 千級クラスのクリーンレーザーモジュール生産エリア、万級クラスのクリーン3Dモジュール組立・試験エリアが設置されており、百万単 位の量産能力を備えています。 仏山市に3Dビジョンシステムのスマート製造基地を建設し、将来的に10万平方メートルを超えるエリアまで拡張し、ロボットとAIビジョ ンのシンボル拠点を構築し、これにより、3Dビジョンセンサー、Lidarなどの製品とロボットOEM/ODMの生産能力をさらに拡大します。
11. Class 100 cleanroom COB製造ライン ~5,382 sq. ft. Class 1,000 cleanroom LDM (レイザーモジュール製造ライン) ~9,688 sq. ft. 品質を確保するための無塵環境でのリアルタイムデータ監視 Class 10,000 cleanroom デバイス組立ライン ~53,820 sq. ft. 高効率ロボット最終組立ライン ロボット評価試験エリア ⚫ すべてのロボットタイプに対応する柔軟なテスト環境 ⚫ 500台の生産能力に対応するライン設計 ⚫ . ⚫ 効率的なモジュール化生産と多段階レイアウト をカスタマイズ。 ⚫ 多様で小規模なロボットの生産とテストに最適 ⚫ 約28万平方フィートの工場 ⚫ 100万平方フィート以上の製造拠点（建設中） ⚫ 将来的に年間1000万台の生産能力 モジュール/デバイス完全な自社製造
12. 01 会社概要 02 ３Dビジョン 03 04 ソリューション 製品紹介
13. LiDAR MS200 MS500 Astra Mini Pro Femto Bolt Gemini 2 Gemini 2 L Femto Mega Astra 2 製品ポートフォリオ
14. Software • Orbbec SDK: https://github.com/orbbec/OrbbecSDK/releases • Supports all Astra, Gemini, and Femto cameras • Cross-platform OS support • Open-source release available Sept'24 • Wrappers: Kinetic, Melodic, Noetic https://github.com/orbbec/OrbbecSDK_ROS1 Foxy, Humble, Jazzy https://github.com/orbbec/OrbbecSDK_ROS2
15. 15 ToF Cameras Femto Bolt • コンパクトで高性能な３D（RGB-D） ToFカメラで、マルチモードのデプスおよ びRGBカメラとUSB-Cでケーブル一本化可能（給電とデータ送信同時対応 USB3.0必要） • デプスカメラはMicrosoftの実証済みToF技術を使用し、Microsoft Azure KinectおよびOrbbec Femto Megaと同じロジックとプログラミング方法 で開発可能 • コスパ重視なToFカメラ、さまざまな分野におけるビジョンソリューションの開 発に幅広く利用されています。 ✓ 1 Mega Pixel ToF sensor Depth module 120° FOV ✓ Up to 15fps at 1024x1024 or 30fps at 640x576 depth resolution ✓ 4K RGB with HDR, 6DoF IMU ✓ USB Type-C 3.2 for power and data ✓ Sophisticated and accurate synchronization trigger control for multi- sensor network Developed with 3.1
16. 3.1 16 Femto Mega • プログラム可能な３D（RGB-D） ToFカメラで、Ethernet接続可能で、高精度な深度 画像をリアルタイムストリーミングが可能です。 • Microsoftの実証済みTOF技術とNVIDIA® Jetson プラットフォームを使用し、コン ピュータビジョンおよびAI開発者向けにデプスおよびRGBビジョンデータを出力し、幅 広くソフトウェアとソリューションの開発のためのプラットフォームを提供します。 ✓ 1 Mega Pixel ToF sensor ✓ 4K RGB ✓ IMU: 6DoF ✓ Processor: NVIDIA Jetson Nano ✓ Data interfaces: Ethernet, USB 3.2 Gen 1 Type-C ✓ Power: PoE/USB Type-C/DC ✓ Trigger/Sync Control ✓ OS: Windows or Linux ✓ Operating temperature: 10°C ~ 25°C ToF Cameras Developed with
17. 3.1 17 Femto Mega I • プログラム可能な産業用（IP65） ３D（RGB-D） ToFカメラで、Ethernet接続可能で、 高精度な深度画像をリアルタイムストリーミングが可能です。 • Microsoftの実証済みTOF技術とNVIDIA® Jetson プラットフォームを使用し、コン ピュータビジョンおよびAI開発者向けにデプスおよびRGBビジョンデータを出力し、産 業用ソフトウェアとソリューションの開発のためのプラットフォームを提供します。 ✓ 1 Mega Pixel ToF sensor Depth module 120° FOV ✓ 4K RGB with HDR, 6DoF IMU ✓ IP65 dust and water protection ✓ Industrial grade M12 X-coding Ethernet port with PoE ✓ Sophisticated and accurate synchronization trigger control for multi-sensor network Industrial ToF Cameras Developed with
18. 3.2 18 Gemini 335L • 95mmのベースライン • RGB＆IRカメラ グローバルシャッター • Orbbec独自開発の最新ステレオビジョンASIC（演算チップ）MX6800で高品質な 深度演算が可能です。 • 深度視野角（DFoV）は最大100°、USB 3.0ケーブル一本化で接続が行えます。 • 近距離での単点測距に適した近接センサーを搭載し、0.2～10mの範囲内での深度 測定の盲点を排除します。内蔵IMUにより、動きと位置の追跡が可能です • All-Passレンズの使用と独自の深度演算アルゴリズムにより、屋内外使用可能、さ まざまな照明条件下で精度の高いデプスデータを提供します。 Stereo Vision Cameras
19. 3.2 Stereo Vision Cameras 19 Gemini 335 • Orbbec独自開発の最新のステレオビジョン用ASIC MX6800を搭載し、高品質な 深度演算、IMU内蔵、ケーブル一本化（給電＆データ送信同時のUSB3.0対応）可能。 • 広い視野角と広範囲の深度センシングにより、Gemini 335は多くのアプリケーショ ンに適応でき、特にロボティクスに最適です。 • 屋内のみならず、屋外でも対応可能なカメラとして、さまざまな照明条件下で精度の 高いデプスデータを提供します。
20. 3.2 20 Gemini 2L • 100mmのベースライン • Orbbec独自開発の最新ステレオビジョン用ASICで高品質な深度演算が可能です。 • 深度視野角（FoV）は最大101°で、USB 3.0ケーブル一本化で接続が行えます。 • 近距離での単点測距に適した近接センサーを搭載し、0～10mの範囲内での深度測 定の盲点を排除します。内蔵IMUにより、動きと位置の追跡が可能です • 暗い環境から明るい室内まで、さまざまな照明条件下で精度の高いデプスデータを 提供します。 Stereo Vision Cameras
21. 3.2 Stereo Vision Cameras 21 Gemini 2 • Orbbec独自開発の最新のステレオビジョン用ASICを搭載し、高品質な深度演算、 IMU内蔵、ケーブル一本化（給電＆データ送信同時のUSB3.0対応）可能。 • 広い視野角と広範囲の深度センシングにより、Gemini 2は多くのアプリケーション に適応でき、特にロボティクスに最適です。 • 暗い環境から明るい室内まで、さまざまな照明条件下で精度の高いデプスデータを 提供します。
22. 3.2 Stereo Vision Cameras 22 Gemini 2XL • Gemini 2 XLは、ロボットやAIモニタリング・コミュニケーションシステムの主要なビ ジュアルシステムとし長距離用3Dカメラ • 真っ暗な環境から屋外まで、さまざまな照明条件下で正確なデプスデータを提供し ます。 • Orbbec SDKを提供し、簡単にセットアップとコントロール可能、さまざまな場面で活 躍できます。 ✓ Long range with high quality depth data output from 0.4m to 20m ✓ Low environmental influence ✓ Global shutter for RGB and IR cameras ✓ Wide Field of View at 91° Horizontal and 66° Vertical ✓ USB 2.0 Type-C & POE connectivity ✓ Internal IMU ✓ Multi-camera synchronization
23. 3.3 25 Structured Light Cameras Astra 2 • 広く使用されているAstraシリーズ製品の最新後継機種。 • 最新のOrbbecカスタムASICにより高品質な深度処理、IMU、複数カメラの同期が 向上しました。 • 屋内で正確で信頼性の高いデプスデータを提供可能。 • 一般的利用向け、コスパ重視の製品 ✓ High quality depth data output from 0.6m to 8m ✓ Up to 30 fps at 1600X1200 depth resolution ✓ Up to 30 fps at 1920X1080 RGB resolution ✓ Multi-camera synchronization supported
24. 3.3 26 Structured Light Cameras Astra Mini Pro • Astra Miniシリーズは、モジュール式な３Dカメラで、お客様のソリューションに簡単 に組み込み可能 • OrbbecのカスタムASICを使用した構造光技術に基づいており、高品質な深度処理 とケーブル一本化（USB 2.0対応）を備えています。 • Astra Mini S（短距離）およびAstra Mini Pro（長距離）バージョンは、開発者が運 用要件に最適な調整を行う自由を提供します。 ✓ Field of View at 58.4° Horizontal and 45.5° Vertical ✓ High quality depth data output from 0.35-5m (depending on camera model) ✓ Up to 30 fps at 640X480 for depth ✓ Up to 30 fps at 640X480 RGB resolution ✓ USB 2.0 for power and data connectivity
25. 3.4 27 Camera Computer Persee N1 Persee N1は、産業向けのインターフェースを備えたコンピュータと、幅広いアプリケー ションに適した３Dカメラを組み合わせたモジュール式のオールインワン製品です。計算 ユニットには、ユーザーアプリケーションを実行するための高性能GPUを備えた強力な NVIDIA® Jetson プラットフォームが使用され、POE、USB、HDMIのほか、MicroSDお よびM.2スロットによるストレージ拡張が可能です。活動的なステレオIR技術に基づくロ ボット産業で実用されたGemini 2カメラは、OrbbecのカスタムASICを使用して高品質 のデプス処理を行います。 Persee N1は、Orbbec SDKを使用して簡単にセットアップでき、屋内/セミ屋外での操 作に高精度かつ信頼性の高いデータを提供します。
26. 3.4 28 Camera Computer Persee + Persee+は、3Dカメラとコンピュータが一体化した製品で、構造光技術に基づき、 OrbbecのカスタムASICを使用して高品質のデプス演算を実現しています。これは Perseeの後継製品です。高性能なカメラと内蔵されたデプス処理機能に加え、高性能 GPUとNPUを搭載したAmlogic A311Dプロセッサを搭載し、ユーザーアプリケーションを 実行することができます。Android/Linuxのサポートと、イーサネット、USB、HDMI、 ヘッドフォンジャック、MicroSDなどの複数のポート選択肢を提供することで、Persee+ は低コストかつコンパクトなデザインに理想的なオールインワンソリューションです。 OrbbecのSDKは、屋内での操作に高精度かつ信頼性の高いデータを簡単に設定し、 提供することを可能にします。
27. 3.6 LiDAR MS200 MS200はSingle-Line LiDARセンサーです。精密な光学スキャニングシステムを採用し、 高周波レーザーパルス生成技術と精巧な構造設計を組み合わせて、360°/12.0m （@90%反射率の拡散反射面）の範囲で迅速かつ正確な距離測定を実現します。この 製品は、家庭用掃除ロボット、サービスロボットのナビゲーションと障害物回避、ロボット ROS教育、研究、地域セキュリティ、スキャニング、3D再構築など多岐にわたる分野で 使用できます。
28. 3.6 LiDAR MS500 MS500は2D LiDAR(光検出と測距)センサーです。このLiDARは、革新的な直接飛行時 間（dToF）測距技術を使用しています。LiDARには、精密な回転ミラー光学スキャニング システムと高周波レーザーパルス送信機が含まれています。洗練された光学、機械、お よび構造設計により、270°/30m（@90%反射率の拡散反射面）内での堅牢かつ正確 なスキャンが可能です。LiDARは、ロボットの位置決めとナビゲーション、エリアセキュリ ティ、物流、環境スキャニング、および3Dモデリングに使用できます。
29. 01 会社概要 02 ３Dビジョン 03 04 製品紹介 ソリューション
30. ビジネス展開 •中国のサービスロボティクスセンサー市場で70%以上の市場 シェアを占め（GGIIレポート)、No.1の地位を確立しています。 •100社以上のグローバルクライアント：Gausium、Pudu、 UBTECH、Hyundai、Bear、Lionsbotなど。 •顔認証決済システムおよびスマートフォンセンサー、百万 単位の出荷量 •顧客：Alipay、OPPO、および50社以上のスマートロッ カー企業 •グローバルな開発者コミュニティ •MicrosoftおよびNVIDIAとのパートナーシップ •スポーツ、教育、小売業、公共交通機関、畜産業 ロボティクス 3Dスキャニング 生体認証 ビジョン＆AI デベロッパー 一般産業のイン テリジェント化 •産業用および消費者向けのスキャニングソリューション、 OEM/ODMサービス •主要顧客：Creality
31. ロボティクスビジョンのリーダー 中国のサービスロボット3Dビジョンセ ンサー分野で70%以上の市場シェアを 占めています。（出典：GGII）。 2015年以来、ORBBECはGausium、 PUDU、UBTECH、Yunji Technology、 Hyundai、Bear、Lionsbotなどの業界 大手を含む100社以上のロボット企業と 提携してきました。ORBBECのカメラは、 スマートファクトリー、倉庫物流、建築 自動化、知能検査など、芝刈りから商業 および教育分野のROS教育に至るまで、 幅広いアプリケーションにおいて不可欠 となっています
32. ロボティクス全分野カバー 産業用ロボット サービスロボット 人型ロボット RGBD カメラ LiDAR MS200 MS500 Astra Mini Pro Femto Bolt Gemini 2 Gemini 2 L Femto Mega Astra 2
33. ORBBECの3Dビジョン技術は、これらのロボットが複雑な環境をナビゲートし、人間と知的に相互作用するのに役立って います。Gausium、Yunji、PUDU、UBTECHなどの主要なロボット製造メーカーとの協力は、法人向け清掃ロボット、ホ テルサービスロボット、配膳ロボット、受付ロボット、教育とエンターテインメント分野で広く応用されています。 サービスロボット UBTECH受付ロボット PUDU配膳ロボット Gausium清掃ロボット Yunji サービスロボット
34. Standard Robots（AMR） 物流ロボット（AGV) ORBBECのカメラは、Standard Robots、Multiway Robotics、SEER Roboticsを含むトップ産業クライアントに よってAMR、AGV、無人フォークリフトに広く利用されており、物流と輸送の効率を大幅に向上させています。 物流と産業向けAMR／AGV
35. ヒューマノイドロボット ORBBECは、さまざまなタイプのヒューマノイドロボット向けにカスタマイズされた視覚認識ソリューションを開発 し、人間のように正確で迅速な動作を実現するため、3Dビジョンは不可欠となっています。 UBTECH、Dataa Robotics、Zhiyuan Robotics、Astribot、AGIBOT.などの中国の主要企業とのビジネス協力を確立 し、さまざまなシーンにおけるヒューマノイドロボットの能力を向上させています。 Astribot Humanoid Robot Powered by Orbbec Femto Bolt UBTECH Walker X Humanoid Service Robot
36. ORBBECの3Dカメラは、協働ロボットが無秩序で混雑した環 境でターゲットを正確に把握するなど、さまざまな作業を効 率的かつ正確に行うのをサポートしています。 Aubo Robotics AI+ Cobot ロボットアーム／協働ロボット Showyu Physiotherapy Cobot ORBBECは、音声、言語、ビジョンラン ゲージの大規模言語(LLM)モデルと3Dカ メラを組み合わせて、音声命令を理解し 実行できる協働ロボットのデモを開発し ました。 ORBBEC LLM Cobot 1.0
37. 一般産業のインテリジェント化 • 動物顔認識 • 家畜の頭数カウント • 体重推定 • 飼料モニタリングシステム • 乗客数カウント • 輸送能力の最適化 • 1万台以上のバスで使用 スポーツ教育 • インテリジェントスポーツ教育 • 自動記録保持ソリューション • リアルタイム分析ソリューション • スポーツ専門校と70校以上と提携 • セルフサービス決済 • 商品スキャン認識 • バーチャル試着 • 複合現実ショッピング体験 リテール 公共交通 養殖畜産
38. 3D Vision for A 3D World 言いたいこと • ロボット開発に役立ちそうなセンサーとかカメラの情報を発信してる • 色々なカメラあるよ • みんなの助けが必要（要フィードバック） • ROSで色々作ってコミュニティを盛り上げて • ブラブラしてるから声かけて
39. 3D Vision for A 3D World 41