Карта будущих дефицитов: как изменится архитектура искусственного интеллекта

Карта будущих дефицитов: как изменится архитектура искусственного интеллекта

Что мы видим сегодня

Сегодня развитие искусственного интеллекта в основном воспринимается через одну цепочку:

ИИ → большие модели → вычислительные ускорители → высокоскоростная память → дата-центры → электричество → сети → вода

Чем больше модели и пользователей, тем больше требуется вычислительной мощности, памяти, электроэнергии и инфраструктуры.

Отсюда возникает сегодняшняя карта потенциальных дефицитов:

  • вычислительные ускорители;
  • высокоскоростная память;
  • электроэнергия;
  • электросети;
  • охлаждение;
  • вода;
  • мощности дата-центров;
  • капитал.

Но здесь есть важный вопрос: не экстраполируем ли мы сегодняшнюю архитектуру ИИ слишком далеко в будущее?

Главная развилка — где будет выполняться ИИ?

1. Сценарий: централизация

1.1. Логика

Большие модели продолжают увеличиваться, а вычисления остаются сосредоточены в крупных дата-центрах.

Большая модель → вычислительные кластеры → дата-центр → облако

1.2. Последствия

Чем больше ИИ, тем больше требуется:

  • вычислительных ускорителей;
  • высокоскоростной памяти;
  • электроэнергии;
  • сетевой инфраструктуры;
  • охлаждения;
  • воды;
  • капитала.

1.3. Цепочка дефицитов

ИИ → дата-центры → вычислители → память → электричество → сети → вода

Если этот сценарий сохранится, сегодняшняя карта дефицитов может оказаться достаточно устойчивой.

2. Сценарий: децентрализация

2.1. Логика

Модели постепенно становятся меньше, эффективнее и дешевле в запуске.

Развиваются методы:

  • сжатия моделей;
  • уменьшения объёма вычислений;
  • удаления избыточных параметров;
  • создания специализированных моделей.

В результате часть задач можно выполнять непосредственно на устройстве пользователя или локальном сервере.

Компактная модель → локальная память → компьютер / смартфон / локальный сервер → выполнение задачи на месте

NVIDIA прямо описывает локальный запуск моделей и сейчас указывает, например, DGX Spark с 128 ГБ объединённой памяти, способный запускать модели до 200 млрд параметров локально.

2.2. Что меняется

Вместо:

Запрос → облако → дата-центр → вычислительный кластер → ответ

часть задач начинает работать так:

Запрос → локальная модель → локальный ответ

Тогда часть нагрузки уходит из крупных дата-центров непосредственно на устройства и периферийные серверы.

2.3. Модель — это не весь ИИ

Для решения конкретной задачи необязательно иметь гигантскую универсальную модель.

Система может выглядеть так:

Модель + методология + база знаний + контекст + правила работы

И это уже близко к тому, что мы сейчас делаем в проекте «Росток».

Часть «интеллекта» находится не только внутри самой модели, но и в:

  • методологии;
  • структурированной базе знаний;
  • накопленных ответах;
  • контексте;
  • правилах обработки информации.

Поэтому компактная специализированная модель в сочетании с хорошей базой знаний может решать достаточно сложные прикладные задачи без обращения к огромной облачной модели.

2.4. Новая цепочка

ИИ → локальные модели → память → устройства / периферийные серверы

При таком сценарии давление на крупные дата-центры, энергосистему и связанную с ними инфраструктуру может оказаться ниже первоначальных ожиданий.

3. Сценарий: гибрид

3.1. Простые задачи — локально

Небольшая модель на устройстве пользователя решает:

  • рутинные задачи;
  • работу с локальными данными;
  • поиск;
  • классификацию;
  • персональные задачи;
  • задачи, где не требуется максимальная вычислительная мощность.

3.2. Сложные задачи — в облаке

Если требуется большая модель или сложное рассуждение:

Локальная модель → облако → большая модель → ответ

Получается:

Сначала локально → в облако только при необходимости

Большая модель используется не для каждого запроса, а только там, где она действительно нужна.

3.3. Что это означает для инфраструктуры

Дата-центры продолжают расти, но нагрузка распределяется между:

локальным ИИ + периферийными серверами + облаком

Поэтому рост ИИ не обязательно означает пропорциональный рост потребности в огромных централизованных вычислительных мощностях.

Что это означает для «Карты будущих дефицитов»

Сегодня мы видим:

ИИ → дата-центры → электричество → сети → медь

Но технологическая эволюция может изменить саму цепочку.

Централизация:

ИИ ↑ → дата-центры ↑ → вычислители ↑ → память ↑ → электричество ↑ → сети ↑ → медь ↑

Децентрализация:

ИИ ↑ → локальный ИИ ↑ → память ↑ → устройства / периферия ↑

Гибрид:

Локальный ИИ → большинство задач Облако → сложные задачи

Главный вопрос

Поэтому для нашей карты важен не только вопрос:

«Будет ли расти ИИ?»

а гораздо более важный:

«Какая архитектура ИИ окажется экономически эффективной через 5–10 лет?»

Технологический прогресс может не отменить дефицит.

Он может перенести его в другое место.

Именно поэтому в «Карте будущих дефицитов» нужно отслеживать не только рост спроса, но и технологии, способные сломать сегодняшнюю экстраполяцию.

Архитектор капитала (@architect_capital)
Автор AI-агента Росток — @RostokFinanceBot

11