Lyubov Matich

Google обновил AI-продукты

AI-агент Astra. DeepMind продолжает работать над его предрелизной версией. В настоящий момент агент способен воспринимать видео на вход, искать физические объекты, определять их функции, читать код и вести диалог на естественном языке (впечатляющее демо-видео). Агент будет работать как на смартфонах, так и AR-очках. Дальнейшее направление развития агентов — повышения скорости обработки информации и ответов. Фокус на скорость становится трендом рынка чат-ботов и ассистентов.

Новая модель 1.5 Flash — самая быстрая из семейства, оптимизирована для масштабного промышленного выполнения объёмных высокочастотных задач, оснащена особенно широким контекстным окном. Модель мультимодальна и может обобщать разговоры, добавлять подписи к изображениям и видео, а также извлекать данные из длинных документов и таблиц. Ее обучение проходило при помощи дистилляции – процессе, при котором «навыки» передали из большой и мощной модели 1.5 Pro в более лёгкую и эффективную Flash.

Улучшение 1.5 Pro. Окно контекста расширено до 2 млн токенов (у ChatGPT-4o — 128 тыс.), улучшена генерация кода, планирование, ведение многоходовых диалогов, а также понимание аудио и изображений за счет усовершенствований данных и алгоритмов. Модель будет работать с аудиовизуальным контентом в Google AI Studio.

1.5 Pro может следовать более сложным и специфическим инструкциям, в том числе в части роли, формата и стиля поведения. Улучшен контроль над ответами модели для конкретных случаев применения, например, создание личности или ответов агента чата. Разработка будет доступна в Gemini Advanced и Workspace.

Мультимодальная Gemini Nano. Android становится первой мобильной ОС со встроенной мультимодальной моделью, работающей непосредственно на устройстве. Помимо текста модель теперь понимает также изображения. Оснащенные ею приложения на смартфонах Pixel смогут не только понимать текст, но также изображения, видео, PDF-документы, устную речь и иные звуки.

Следующее поколение открытых моделей Gemma. Эти модели созданы на тех же технологиях, что и Gimini. Gemma 2 получила оптимизацию архитектуры. Новая PaliGemma — лёгкая vision-language model (VLM). Она может распознавать изображения, текст на них, объекты, и анализировать короткие видео.

https://blog.google/technology/ai/google-gemini-update-flash-ai-assistant-io-2024/#gemini-model-updates

Apple работает над собственным AI-чипом для ЦОД

Серверный чип Apple, скорее всего, будет предназначен для обеспечения инференса
AI-моделей, а не для их обучения. Проект,получивший кодовое название ACDC (Apple Chips inData Center),  был запущен несколько лет назад, но пока неясно, будет ли разрабатываемый полупроводник когда-либо внедрён.

https://www.bloomberg.com/news/articles/2024-05-06/apple-is-working-on-its-own-ai-chip-for-data-centers-wsj-says?srnd=technology-vp

Первым устройством Apple на чипе M4 стал новый iPad Pro

Таким образом, компания отступила от своего привычного подхода, когда новые чипы сначала устанавливались на Mac и только после этого – на iPad.

Как сообщили в Apple, новый CPU обеспечит «до 50% более высокую производительность» по сравнению с чипом M2, который использовался в предыдущей модели. Кроме того, разработка получила различные технологии для ускорения запуска игр, например, трассировку лучей. Новый Neural Engine – 16 ядерный и, по оценке компании, «в 60 раз быстрее», чем NPU первого поколения.

https://techcrunch.com/2024/05/07/apple-ipad-pro-gets-a-refresh/

Hyundai выделит почти $1 млрд на поддержку разработчика беспилотных автомобилей Motional

Стартап Motional является совместным предприятием южнокорейского концерна ипроизводителя автокомплектующих Aptiv иработает над запуском сервиса роботакси на базе электромобиля Hyundai IONIQ 5. В январе Aptiv заявила, что прекратит вкладывать средства в стартап из-за высокой стоимости коммерциализации бизнеса роботакси и долгого пути к прибыли.

На этом фоне корейский автопроизводитель инвестировал $475 млн непосредственно в Motionalи потратит ещё $448 млн на покупку 11% доли Aptiv в капитале стартапа. Aptiv также сообщила, что планирует сократить свою долю в уставном капитале Motional с 50% до 15%, что обеспечит Hyundai контроль над 85%.

https://techcrunch.com/2024/05/05/hyundai/

Wayve привлёк $1,05 млрд на разработку embodied AI для беспилотных автомобилей

Ключевым инвестором в рамках очередного раунда финансирования выступила японская SoftBankGroup. Также свой вклад внесла инвестировавшая и ранее в Wayve Microsoft, и впервые – Nvidia.

Собранные средства британский стартап направит на ускорение разработки и запуск в серийное производство моделей беспилотных автомобилей, оснащённых собственной технологией embodied AI.Эта разработка предусматривает самостоятельное изучение правил и моделей вождения, а не их программирование, что позволяет автопилоту лучше реагировать на незнакомые места и непредсказуемые сценарии на дороге.

https://wayve.ai/press/series-c/