Snapdragon 8 Gen 3 позволит запускать Llama 2 и Stable Diffusion прямо на смартфоне

Автор: Богдан Каминский, 25 октября 2023, 20:36

Qualcomm

Новый флагманский чипсет Snapdragon 8 Gen 3 от Qualcomm привнесет возможности генеративного искусственного интеллекта непосредственно в смартфоны, значительно ускорив обработку данных по сравнению с облачными решениями.

Что известно

Чипсет поддерживает чат-бота на базе Llama 2 от Meta, а также генератор изображений Stable Diffusion, который теперь создает картинки менее чем за секунду. Для сравнения, на предыдущем Snapdragon 8 Gen 2 это занимало 15 секунд.

Возможности ИИ реализованы в нейропроцессоре Hexagon и модуле Sensing Hub, использующем распознавание речи от OpenAI. Hub также передает ИИ информацию о пользователе для персонализации.

Генеративный ИИ также будет в Snapdragon 8 Gen 3 для обработки изображений. Он поддерживает генеративную заливку для расширения изображения, что позволит увеличивать и изменять масштаб фотографий прямо на устройстве. 

В видео появится функция стирания объектов. Для этого достаточно коснуться, и нежелательный объект исчезнет. 

Также чип поддерживает Vlogger's View, которая позволяет объединить видео с фронтальной и основной камер в один вид. Это не "картинка в картинке", функция использует улучшенную сегментацию изображения для удаления фона из селфи-видео. Это создает эффект, что пользователь стоит перед тем, что видит задняя камера.

Чтобы защитить контент от подделок, Qualcomm сотрудничает с компанией Truepic. Используемая ею технология позволит внедрять в фото или видео метаданные, гарантирующие их подлинность.

Для тех, кто хочет знать больше:

Источник: The Verge