XPENG представляет физический искусственный интеллект на выставке IFA в Берлине

IFA Berlin демонстрирует широкий спектр инноваций. Многие компании рекламируют ИИ как новейшую крылатую фразу. Но XPENG привнес технические подробности и понимание физического ИИ в текущие и будущие продукты, которые вскоре станут доступны европейским клиентам. Джон М.А., старший директор, руководитель отдела ADAS и доставки Smart Cabin за границу компании XPENG, выступил с основной презентацией о физическом искусственном интеллекте XPENG и новейшей модели XPENG VLA 2.0 Turing. После этого у меня была возможность задать ему несколько вопросов и получить дополнительную информацию о возможностях физического ИИ на XPENG.

В рамках презентации Джон М.А. обратился к ограничениям ИИ в физическом мире. Хотя XPENG обладает лучшей в отрасли вычислительной мощностью благодаря чипсету Turing, встроенная вычислительная мощность сталкивается с ограничениями и должна иметь низкое энергопотребление. В физическом мире задержка или время, необходимое для ответа, также должно быть минимальным. Скорость реагирования приводит к самому важному требованию - безопасности. Эта безопасность затем становится компонентом необходимости соблюдения нормативных требований.

Наиболее важной частью недавнего обновления версии VLA 2.0 до 6.3.0, вероятно, является компонент времени . Модель может понять историю того, что произошло, что приводит к нынешним действиям и пониманию того, что произойдет в будущем. Infini-VLA помещает принятие решений во временной контекст для повышения эффективности, ограничиваясь 30 секундами исторических данных для экономии вычислительной мощности. Опираясь на эти исторические данные, Streaming Inference предвидит, что произойдет дальше, что сокращает время отклика на 300%. Идя еще дальше, X-Foresight предсказывает, что произойдет в следующие 6 секунд, что также ограничено для экономии вычислительной мощности. Затем это приводит к согласованию потоков, которое составляет графикнесколько потенциальных решений, чтобы выбрать лучшую траекторию. Эти технологии в настоящее время внедряются в их автомобили в Китае, в том числе в их Robotaxi, который сейчас работает в Гуанчжоу, а более широкий охват запланирован на следующий год.

На видео ниже показаны некоторые основные моменты презентации, хотя качество звука несколько плохое из-за громкой среды шоу.

На презентации на IFA было немного меньше технической информации, чем при запуске версии 6.3.0 в Китае. о чем я подробно рассказывал ранее. Немного больше внимания было уделено предоставлению информации аудитории. Это произошло из-за более широкой аудитории IFA, которая обычно имела меньший опыт работы с XPENG и не так много инженерного опыта. Поэтому, чтобы избежать путаницы, все было немного проще.

Интервью с Джоном М.А. из XPENG

У меня также была возможность взять интервью у Джона М.А. после презентации. Несколько раз испытав VLA 2.0 и внимательно следя за деятельностью компании, у меня возникло несколько вопросов.

XPENG в настоящее время предлагает технологию VLA 2.0 на новых моделях с тремя чипами Turing собственной разработки, а также на их Robotaxi с четвертым чипом для резервирования. Они также планируют вскоре внедрить технологию VLA 2.0 на одиночные чипы Turing, а затем на предыдущие модели с двумя чипами Orin. Однако XPENG планирует создать «дистиллированную» версию модели, которая сможет работать с меньшей вычислительной мощностью, а не с урезанием функций. Итак, я спросил Джона М.А.: какую разницу ощутят пользователи с дистиллированной версией?

Мы только что провели несколько публичных испытаний нашей единственной машины с чипсетом Turing, а исполнение Orin все еще находится в разработке. Я бы не хотел сказать, что мы хотим что-то сделать дляопыт. Мы все еще думаем, что хотя бы в целях безопасности. Это должно быть гарантировано. Нет никаких проблем с безопасностью. А что касается плавности, возможно, есть небольшая разница, потому что вычислительная мощность имеет некоторые физические ограничения, даже если мы пытаемся выделить лучшую часть модели в какую-то модель небольшого размера. Но, тем не менее, в некоторых сценариях могут быть некоторые небольшие различия. Я не знаю наверняка; мы не получили официального разрешения на освобождение всех пассажиров. Также мы собираем обратную связь. Если мы увидим, что некоторые случаи или некоторые сценарии недостаточно хороши, возможно, мы выпустим какое-нибудь OTA-обновление или что-то в этом роде. Так что я точно не знаю, но теоретически мы ничего терять не хотим. Мы сделаем все возможное, чтобы убедиться, что это может быть что-то сравнимое с нашей машиной Ultra (с 3 чипсетами). Но должна быть какая-то небольшая разница. Таким образом, согласно нашему нынешнему подходу, мы также собираем обратную связь от клиентов.

Еще одним анонсом запуска версии 6.3.0 стало голосовое управление работой автомобиля с помощью Мастер-агента. При этом используется разговорное голосовое взаимодействие для управления функциями автомобиля, включая интеллектуальное вождение, на автомобилях Ultra с тремя чипсетами Turing, а также Robotaxi. Хотя китайский язык с субтитрами в прошлой презентации казался очень интуитивным, я спросил, как он будет распространяться на других языках и диалектах.

С нашим чипсетом Turing, как вы упомянули, речь идет о третьем чипсете. Мы используем его для некоторых голосового управления и аудиовзаимодействий. Он по-прежнему основан на нашей базовой модели и сам по себе является большой языковой моделью, а это значит, что он очень естественен. Он может узнать что-то о языке. Итак, мы поддерживаем несколько языков, включая не только английский, но также мандаринский и кантонский диалекты. А такжевключая некоторые другие иностранные языки, французский, немецкий и, возможно, некоторые другие: испанский, итальянский... Но я думаю, что во время Парижского автосалона будут опубликованы некоторые новости, и, возможно, у нас есть несколько демо на эту тему. Итак, следите за обновлениями.

Далее я спросил о XLLM и о том, может ли эта технология запускать большую языковую модель, ИИ локально на одном чипе, и ее можно применить практически ко всему.

Да, именно так. Вот в чем прелесть нашей технологии. Мы используем архитектуру VLA 2.0, что означает все в физическом мире с видением, языком и действиями... Вот почему мы также используем эту модель в качестве базовой модели или базовой модели наших гуманоидных роботов, а также наших летающих автомобилей. Итак, я думаю, что у него есть хороший потенциал для использования в различных приложениях, не только в транспортных средствах, не только в роботах, может быть, что угодно может случиться. Я все еще спрашиваю. Так что, возможно, в будущем мы что-нибудь придумаем.

Но сейчас главное то, что мы можем производить очень хорошее качество для европейского рынка. Очень, очень зрелая доставка нашим клиентам, а также пройти омологацию и настроить наши модели, чтобы они были более адаптированы к европейскому дорожному движению, законам дорожного движения и привычкам пользователей... У нас есть зарубежные разработки. У нас есть одна большая миссия: охватить различные рынки и адаптироваться к местному рынку.

Хотя некоторые компании в значительной степени полагаются на централизованные центры обработки данных и маркировку человеческих данных для своих реализаций ИИ, XPENG принимает все решения самостоятельно. Первоначально это создавало проблемы, но привело к ряду преимуществ, включая соблюдение правил конфиденциальности данных. Однако я спросил, какие еще потенциальные преимущества и новые приложения можно получить благодаря возможности разместить на борту такую большую вычислительную мощность искусственного интеллекта»

Есть одинключевой момент в последнее время, о котором я всегда думаю. Это большой следующий шаг в развитии физического ИИ. Итак, мы хотим изменить повседневную жизнь человека с помощью усовершенствований ИИ. Мы создаем беспилотные транспортные средства, роботов-гуманоидов, умеем летать на машинах. В этом случае я вижу, что некоторые другие компании также пытаются сделать что-то, на что будет влиять ИИ. Итак, я действительно думаю об этом. Но есть одно обстоятельство: если мы ограничим наш ИИ только транспортными средствами, он будет очень узким. Итак, еще одно применение - роботы-гуманоиды. Роботы-гуманоиды - наш главный продукт. И гуманоиды недавно получили инвестиции, независимые инвестиции...

Итак, я думаю, что в будущем я проверю, можем ли мы делать то же, что мы можем сделать для гуманоидных роботов, но мы можем объединить эти физические устройства искусственного интеллекта вместе... Роботы могут быть на борту транспортных средств и делать что-то для клиентов. Например, вы хотите что-то купить. Раньше вам приходилось выходить, водить машину и что-то покупать. А пока, возможно, вы можете попросить свой автомобиль ехать самостоятельно. Но вам все равно нужна доставка, и вы попросите своего робота выйти из машины в супермаркет, взять сумку и вернуться к машине, и машина поедет обратно...

Это означает, что это замкнутый цикл. Например, вы можете использовать приложение Xiaopeng на нашем устройстве. Мы можем создать агент XPENG. Мы можем попросить агента быть чем-то большим, чем нынешние цифровые агенты. Это новый физический агент. Это будет фантастика.

Мы могли бы продолжить, но Джону М.А. пришлось успеть на самолет. Меня всегда впечатляет, насколько отзывчивы руководители XPENG и с каким энтузиазмом они обсуждают новые идеи. На подходе еще кое-что, включая вещи, о которых я пока не могу говорить. Особенно вокруг роботов-гуманоидов.

На выставочной площадке

После презентации и интервью я зашел на стенд XPENG на выставке IFA. Стенд был заполнен людьми, рассматривающими ЖЕЛЕЗНОГО робота-гуманоида, летающую машину и L03. Многие фотографировались с помощью IRON. Несколько человек предположили, что выставленный на выставке летающий автомобиль был всего лишь концепт-каром, и были удивлены, узнав, что в этом году они находятся в процессе наращивания производства, одновременно добиваясь одобрения регулирующих органов.

Было много людей, изучающих L03, который я видел на презентации в Мюнхене. Я наблюдал, как люди изучают машину, спрашивал их, что они думают, и спрашивал некоторых людей на стенде о реакции, которую они видели. Люди, с которыми я разговаривал, считали, что это очень просторный автомобиль премиум-класса. Кто-то подключился к стереосистеме, которую я раньше не проверял, и звук звучал чисто и в полном диапазоне на громкости, намного превышающей ту, которую я когда-либо слушал. Несколько человек предположили, что у него будут пассажирские двери с электроприводом, думая, что это гораздо более дорогая машина. Они, похоже, были искренне шокированы, когда услышали реальную цену. Поставки в Европе должны скоро начать наращиваться, и у L03 есть потенциал стать очень успешным. Этот успех может быстро ускориться, как только в начале следующего года будет активирована интеллектуальная система вождения VLA 2.0, ожидающая одобрения регулирующих органов.

В компании XPENG работает более 31 600 сотрудников, 44,79% которых заняты исследованиями и разработками. Растет по всему миру, как в производстве, так и в сфере исследований и разработок, продается через местные дилерские группы. Многие долгосрочные проекты XPENG вскоре начнут реализовываться. Кажется, в XPENG сейчас очень занятое и захватывающее время. Скоро будет еще больше.