Хакеру удалось извлечь из своего автомобиля с пакетом «Full Self-Driving» нейросеть Tesla для восприятия глубины.
Вы можете увидеть, как автомобиль определяет глубину с помощью облака точек, работающего на компьютерном зрении.
Недавно Tesla начала отказываться от своих радарных датчиков, полезных для определения глубины, и вместо этого полагается только на компьютерное зрение на основе камер.
Это сильно отличается от подхода всей остальной отрасли, которая использует не только радар, но и лидарные датчики.
Генеральный директор Tesla Илон Маск утверждает, что камеры и нейросети являются ключом к достижению автопилотирования.
В прошлом месяце он сказал Electrek:
Вся дорожная система спроектирована для работы с оптическими имиджерами (глазами) и нейросетями (мозгом). Именно поэтому камеры и кремниевые нейросети являются решением.
Одной из проблем отсутствия радара является усложнение восприятия глубины, с которым радар прекрасно справляется, но Tesla планирует определять глубину с помощью облака точек, генерируемого ее камерами и нейросетями.
Green, хакер Tesla, который получил невероятный доступ к программному обеспечению Tesla с root-доступом к ее автомобилям, получил доступ к нейросети восприятия глубины в пакете Full Self-Driving от Tesla и опубликовал видео:
Как отметил Green, эта нейросеть на самом деле могла бы создавать 3D-изображение окружения автомобиля.
Но разрешение не такое высокое, как показывала Tesla в предыдущей презентации:
Однако эта новая нейросеть работает в реальном времени в автомобиле, когда он движется с активированным пакетом «Full Self-Driving» с функцией «городского вождения».
Green отметил, что эта нейросеть работает только с основной фронтальной камерой, которая является одной из трех фронтальных камер и одной из восьми камер в целом.
Эта нейросеть скоро должна появиться на большем количестве автомобилей Tesla, поскольку ожидается, что автопроизводитель расширит развертывание бета-версии FSD на большее количество автомобилей с выпуском обновления программного обеспечения FSD Beta v9.