Ноутбуки для ИИ-вычислений: Почему обычного CPU больше недостаточно

от Alex Matk

Искусственный интеллект перебрался с серверов в ноутбуки. Теперь нейросети работают локально, без отправки данных в облако. Это стало возможно благодаря специальным чипам. Узнать больше про новые технологии можно в медиацентре Shop.kz.

Что такое NPU и зачем он нужен

NPU — это Neural Processing Unit. Отдельный чип, который обрабатывает задачи искусственного интеллекта. Работает параллельно с обычным процессором.

Обычный CPU может запускать нейросети, но медленно. NPU делает это в 5-10 раз быстрее и потребляет меньше энергии. Батарея ноутбука держится дольше.

Видеокарта тоже справляется с ИИ-задачами. Но она жрет много энергии и греется. NPU эффективнее для таких задач.

Intel Core Ultra и конкуренты

Intel добавил NPU в процессоры Core Ultra. Производительность — до 34 TOPS (триллионов операций в секунду). Этого хватает для большинства задач.

AMD ответила своими чипами Ryzen AI. Показатели похожие, иногда чуть выше. Qualcomm выпустил Snapdragon X Elite с NPU на 45 TOPS.

Apple использует Neural Engine в чипах M-серии уже несколько лет. По производительности они впереди, но работают только на MacBook.

Что можно делать с NPU

Обработка фото и видео. Нейросеть убирает шумы, улучшает детали, меняет фон. Раньше для этого нужна была мощная видеокарта. Теперь хватает NPU.

Рекомендую посмотреть
Как не ошибиться, когда решаете купить летние шины

Голосовые помощники работают быстрее. Распознавание речи происходит на ноутбуке, а не на серверах. Это важно для конфиденциальности.

Генерация текста и кода. Маленькие языковые модели запускаются локально. Скорость ниже, чем у ChatGPT, но данные не уходят в интернет.

Видеозвонки. NPU размывает фон, убирает шумы, следит за лицом в кадре. Нагрузка на процессор минимальная.

Производительность в реальных задачах

Тесты показывают разницу. Обработка 100 фотографий фильтрами ИИ:

  • Только CPU: 8-10 минут
  • С NPU: 2-3 минуты
  • Видеокарта: 1-2 минуты, но батарея садится вдвое быстрее

Для видеомонтажа NPU ускоряет рендер на 30-40%. Не революция, но заметно.

Запуск локальных языковых моделей. На CPU модель отвечает за 10-15 секунд. С NPU — за 2-3 секунды. Видеокарта еще быстрее, но греется и шумит.

Кому это нужно

Ноутбук с NPU стоит брать, если:

  • Работаете с фото и видео регулярно
  • Используете ИИ-инструменты в работе
  • Важна приватность данных
  • Нужна автономность без зарядки

Для офисных задач и браузера NPU бесполезен. Переплачивать не стоит.

Для игр NPU тоже не нужен. Там важнее видеокарта и процессор.

Что дальше

Производители обещают NPU в каждом ноутбуке через 2-3 года. Как когда-то стали обязательными Wi-Fi и камера.

Производительность NPU будет расти. К 2027 году планируют чипы на 100+ TOPS. Это позволит запускать большие модели вроде GPT-4 локально.

Пока технология новая. Программ, которые используют NPU, немного. Но с каждым месяцем их становится больше.

Связанные посты