Сложности создания беспилотного автомобиля

Вадим Вашкелис
Руководитель проектов, EPAM Systems
SECR 2019

Типовые сложности в создании беспилотных автомобилей, связанные с интеграцией большого количества различного HW, с реализацией объемных SW решений, правовые и регуляторные сложности. Экосистемы, создающиеся вокруг БПА.

Отдельно будет рассказано, как различные компании преодолевают эти сложности.

Transcript

1. Autonomous driving Vadim Vashkelis EPAM Software Engineering Conference Russia November 14-15, 2019. Saint-Petersburg Why don’t we still have it?
2. Vadim Vashkelis Computer Vision, Machine Learning, Robotics, AI PhD in Computer Vision vashkelis@gmail.com https://www.linkedin.com/in/vashkelis/
3. What did we expect
4. What do we have
6. 1994 Ernst Dickmann Universität der Bundeswehr München ◦ Up to 130 km/h ◦ Up to 1600 km ◦ Lane tracking ◦ Lane change ◦ Obstacles tracking
7. HD cameras GPU GPS 7nm Broadband connection HD Maps LIDAR Radar / Infrared DDR4 Cloud computing IMU
8. HD cameras GPU GPS 7nm Broadband connection HD Maps LIDAR Radar / Infrared DDR4 Cloud computing IMU
14. Eye vs Camera ~256 Mp Effective 500-600 Mp Dynamic range 2 Full HD / 4K / 8K Dynamic range 210 24
18. Solutions
21. Custom HW is Key TESLA NXP ARM NVIDIA HUAWEI Performance • Power consumption • Latency • Heat • Size
22. Perception Understanding 3D Reconstruction Object Detection Image Processing Distance Estimation Context Analysis Time-domain Analysis Localization Mapping Prediction Context Analysis Agent Models Road Condition Planning Trajectory Planning Command Pipeline Sensors HW Sensors Cloud Sensor Integration GPS Activators Maps Architecture
23. Full Autonomy Two ways
24. Machine Learning Cycle Source: Waymo - 1,5B Real Self-Driving Miles Driven - 500K AD Capable Cars on Public Roads - 25K Simulated Cars 24/7 - 7B+ Simulated Miles - 100M Real Self-Driving Miles
25. Auto ML Source: Waymo
27. The End
28. The End Beginning