Прогресс ИИ зашел в тупик дефицита мощностей, энергоресурсов и чипов. - The Economist
В марте Anthropic, чьи модели популярны среди бизнеса, начала ограничивать доступ к своим инструментам в часы пик. В апреле ее сервис испытывал перебои в работе около 30 минут в день. В марте конкурент OpenAI внезапно закрыл Sora, свой инструмент для генерации видео, чтобы перенаправить дефицитные вычислительные мощности. 20 апреля GitHub прекратил принимать новые подписки на своего бота для программирования. Спрос растет быстрее, чем лаборатории ИИ могут наращивать мощности.
Отрасль спешит построить новую инфраструктуру. 20 апреля Anthropic объявила о партнерстве с Amazon на сумму 100 миллиардов долларов для обеспечения до пяти гигаватт серверных мощностей, причем почти пятая часть будет введена в эксплуатацию к концу года. 24 апреля компания заявила, что Google также инвестирует 40 миллиардов долларов, чтобы помочь лаборатории удовлетворить свои вычислительные потребности. 27 апреля OpenAI заявила, что пересматривает свое партнерство с Microsoft, чтобы позволить ей распространять все свои продукты через любого облачного провайдера, что даст ей большую гибкость в использовании вычислительных ресурсов.
Пять крупных компаний — Alphabet, Amazon, Meta*, Microsoft и Oracle — инвестируют все большие суммы денег в центры обработки данных. Alphabet, Amazon и Oracle уже привлекли более 100 миллиардов долларов в виде заемных средств в этом году. Чтобы высвободить денежные средства, Meta* недавно заявила о сокращении 10% своего персонала, а Microsoft сообщила о предложении около 7% своих сотрудников добровольного увольнения. (*Meta признана в РФ экстремистской организацией).
Однако наращивание мощностей становится все более сложной задачей. В Америке и за ее пределами растет политическое противодействие строительству центров обработки данных. Более того, компании, производящие оборудование для них — от чипов и сетевого оборудования до систем охлаждения — инвестируют слишком мало, чтобы угнаться за спросом. Таким образом, дефицит мощностей будет только усугубляться.
Начнем с политики. В апреле законодатели штата Мэн проголосовали за законопроект, запрещающий строительство центров обработки данных мощностью более 20 мегаватт до ноября следующего года. Хотя губернатор впоследствии наложил вето, законодатели более чем в десяти других американских штатах рассматривают аналогичные меры. По некоторым подсчетам, в прошлом году в Америке из-за местной оппозиции и судебных разбирательств были заблокированы или отложены проекты центров обработки данных на сумму 156 миллиардов долларов. В других странах, от Ирландии до Бразилии, наблюдается растущее недовольство. В частности, широко распространилась обеспокоенность по поводу влияния энергоемких центров обработки данных на счета за электроэнергию — и она может еще больше усилиться по мере того, как война в Персидском заливе повышает цены на энергоносители.
Помимо сложностей со строительством центров обработки данных и дефицитом электроэнергии, становится все труднее достать необходимое вычислительное оборудование. Чипов недостаточно для заполнения строящихся в настоящее время центров обработки данных.
Рассмотрим графические процессоры (GPU), разработанные Nvidia, которые обеспечивают более двух третей мировых вычислительных мощностей для искусственного интеллекта. Цена аренды одного из графических процессоров H100, выпущенных в 2022 году, с ноября выросла примерно на 30%, поскольку клиенты, не сумевшие приобрести более новые модели, перешли на более старые поколения. Конкурирующие процессоры для ИИ также становится все сложнее достать. В апреле глава Amazon Энди Джасси заявил, что его компания практически распродала все доступные чипы Trainium2 для ИИ. Значительная часть мощностей Trainium4, который должен появиться в следующем году, «уже зарезервирована».
Дефицит также затронул микросхемы памяти, в частности, высокоскоростную память (HBM), на которую полагаются модели ИИ. Все три крупнейших производителя — SK Hynix, Samsung и Micron — заявляют, что большая часть их запасов на 2026 год распродана. Некоторая надежда появилась в марте, когда Google представил TurboQuant, алгоритм, предназначенный для уменьшения объема памяти, необходимой ИИ, что вызвало кратковременное падение цен на акции производителей памяти. Тем не менее, ожидается, что спрос на HBM будет превышать предложение как минимум в течение следующих трех лет.
Дефицит теперь распространяется и на центральные процессоры (ЦП). «Агентные» инструменты ИИ, которые планируют, рассуждают и выполняют задачи, в большей степени полагаются на эти типы микросхем для координации своей работы. Инвестиционный банк Morgan Stanley подсчитал, что агентным системам требуется один ЦП на каждый графический процессор, по сравнению с соотношением один к двенадцати для систем типа чат-ботов. Спрос на процессоры был настолько высок, что вдохнул новую жизнь в Intel, которая еще недавно, казалось, шла к краху. Рыночная капитализация американского производителя чипов, одного из ведущих производителей процессоров, за последние шесть месяцев выросла более чем вдвое.
Суть проблемы заключается в том, что компании, работающие в цепочке поставок ИИ, инвестируют гораздо меньше, чем крупные облачные провайдеры.
The Economist изучил запланированные капитальные затраты на этот год 50 крупнейших производителей чипов, оборудования для производства чипов, серверов, сетевого оборудования и систем охлаждения. Пять крупных облачных провайдеров утроили свои совокупные капитальные затраты до 750 млрд долларов, но поставщики оборудования увеличили свои только вдвое и инвестируют в этом году менее трети от суммы, которую инвестируют гиганты облачных вычислений.
Возьмем, к примеру, TSMC, крупнейшего в мире контрактного производителя чипов и доминирующего поставщика передовых графических процессоров и центральных процессоров. Глава компании, Си-Си Вэй, признает, что предложение «очень ограничено», но «быстрых путей нет»: строительство нового завода занимает от двух до трех лет. Осторожность TSMC расстроила ее клиентов. Сэм Альтман, глава OpenAI, призвал компанию «просто нарастить мощности». Илон Маск, глава Tesla и SpaceX, заявил, что построит так называемый «Terafab» со скромной целью ежегодно производить больше вычислительной мощности, чем вся мировая полупроводниковая промышленность сегодня. Завод, в создании которого г-н Маск привлек Intel, вряд ли начнет производство раньше 2028 года, и даже тогда масштабы производства будут значительно ниже запланированных. Более того, г-ну Маску может быть сложно достать достаточное количество необходимого для его работы современного оборудования, которого также не хватает. Это иллюстрирует несоответствие, которое сейчас омрачает будущее.
Тим Кук уходит, оставляя Apple в позиции отстающего в ИИ-гонке. Какие вызовы стоят перед преемником Джоном Тернусом?