Сбер запустит суперкомпьютер: что это может значить
К концу 2021 Сбер планирует запустить суперкомпьютер. Зачем компании второй суперкомпьютер, кто им будет пользоваться и почему это больше, чем просто кейс внедрения?
Бриф про суперкомпьютеры
Суперкомпьютеры– это НРС-кластеры, в которых вычисления реализуются параллельно, т.е. задача дробится на несколько и они решаются одновременно. Такой подход позволяет в десятки раз ускорить вычисления.
Важно различать суперкомпьютеры для науки и суперкомпьютеры для бизнеса. Для рынка важнее суперкомпьютеры для коммерческого сектора и в них основная точка роста: там нет гонки вычислений и мощностей ради мощностей, но зато есть экономика и прикладные задачи, решение которых с помощью НРС позволяет каким-то образом повысить прибыль. НРС – вещь дорогая, администрировать ее сложно, нужен адаптированный софт и для окупаемости суперкомпа необходимо обеспечивать загрузку мощностей хотя бы на 60-70%. Иначе экономика не сходится. На практике обеспечить такой загруз бывает сложно и компаниям не всегда выгодно иметь собственный вычкластер.
Отсюда следуют важные направления развития HPC:
первое – HPC-as-a-service, в мире такая услуга активно развивается, в РФ пока что - с трудом, но, возможно, именно Сбер эту ситуацию исправит.
второе – снижение операционных затрат, которое позволит окупать суперкомпы при меньшей загруженности мощностей. Снижение костов обозначает повышение энергоэффективности НРС, лидеры в области производства железа для НРС совершенствуют продукты именно в этой части. Основное преимущество нового суперкомпа Сбера, о котором сказал Греф, как раз энергоэффективность.
Кому нужны суперкомпьютеры
Раньше НРС использовались преимущественно в науке и госсекторе для решения вычислительных задач, предполагающих моделирование процессов.
Если изучить недавние кейсы внедрений, то очевиден запрос на НРС со стороны сферы BFSI, машиностроения, транспортной сферы и добывающей промышленности, однако в формате as-a-service HPC могут быть интересны широкому спектру самых разных компаний, даже небольших.
Зачем Сберу 2 самых мощных кластера в РФ
У Сбера уже есть один суперкомпьютер - Кристофари, он запущен в 2019 году и используется в т.ч. для обработки данных биометрии, часть мощностей сдается в формате as-a-service.
Сегодня Кристофари является самым мощным в РФ и единственной российской машиной, адаптированной под работу с искусственным интеллектом. Кристофари занимает 61 позицию в топ-500, в рейтинге от июня 2021 другие российские кластеры в первой сотне не представлены.
По текущим данным, мощность нового кластера Сбера будет выше, чем мощность Кристофари.
По мировой практике мы видим, что последовательный запуск нескольких НРС-машин - типичная история: попробовав НРС-кластер в деле и оценив его выгоду, компании понимают, что у них есть задачи для еще одного кластера и его внедрение окупится.
Скорее всего, у Сбера случилось то же самое: у компании очень много вычислительных задач, с учетом приоритета государства на развитие единой биометрической системы и агрессивного и успешного инвестирования компании в ИИ их количество будет увеличиваться. Помимо этого, вероятно, что опыт сдачи мощностей Кристофари в аренду показал, что спрос на НРС-as-a-service высокий. Сбер смотрит в сторону создания инфраструктуры НРС-as-a-service и сдачи ее в аренду - это было ясно уже из пресс-релизов о запуске Кристофари.
Мы видим свою миссию в том, чтобы сделать супервычисления и разработку решений на базе искусственного интеллекта доступными любой компании независимо от ее размера, отрасли и территориального расположения.
Помимо этого, у Сбера много своих задач, решение которых с помощью НРС оправдано: в первую очередь - обработка биометрии, риск-анализ, стратегии гибкого ценообразования в режиме реального времени.
Но сейчас, конечно, ждем информации о запуске нового суперкомпьютера, его мощностях и планах по использованию, по заявлению Грефа, запуск машины анонсируют в ноябре.
Я пишу о трендах в tg - велкам. Изучаю то, что меняет мир, общество и рынки прямо сейчас и кажется интересным и важным. Там же будет более подробный и предметный разбор этого кейса.
Это очень крутое название :)
А что насчёт вкладов до 1991-го года?
Это не мы. Мы другой банк)
Сберкомпьютер
СберСуперМегаКомпьютер
Комментарий недоступен
Не удивлюсь, если тюремные колл-центры в будущем заменит ИИ, для которого будут арендовать мощности этого суперкомпа, и расплачиваться сворованными у клиентов сбера деньгами.
Круговорот пиздежа на зоне
Уже началось, мошеннические роботы стали звонить
Чтобы еще быстрее обрабатывать мошеннические операции, которые нельзя отменить. Бред весь ИИ их. Не могут элементарно понять где мошенники.
Могут, но в чем профит для сбера?
Если люди дебилы, никакие ИИ не спасут от мошенников...
Биометрия? Нее, без паспорта на кассе все равно не обслужат)
Вы все шутите, а у меня реально чуть паспорт не попросили в провинциальной пятерочке при получение заказа из сбермегамаркета... Собрались два кассира и их главная
второй чтобы первому не было скучно одному
Будут в шашки играть, в свободное время
Утверждение автора: "и для окупаемости суперкомпа необходимо обеспечивать загрузку мощностей хотя бы на 60-70%. Иначе экономика не сходится."
А почему? Я, честно говоря, не вижу прямой связи..
Создание кластера - это высокие капитальные затраты и даже если потом железо будет стоять и не использоваться (простой условно), операционные издержки просто на поддержание инфраструктуры будут достаточно высокими.
То есть фактический кост за пользование машиной лишь частично привязан к загрузке и к решаемым задачам
И чтобы не работать в убыток, надо использовать мощности по назначению и ускорять какие-то свои вычислительные процессы - то есть снижать кост на них
Вот и окупаемость)
Комментарий недоступен
Суперкомпьютер это конечно здорово. Но нищему населению России всё равно неоткуда генерировать прибыль. Это как город на 300.000 человек, который собирается строить Шойгу – никому не нужен.
0,16 ТФлопс - это как-то совсем мало, один средненький ноутбук. А вот 0,16 ПФлопс - понятно зачем, для физики: Ansys, OpenFOAM, Schlumberger и т.д. Физику на нейросетях не считают (пока, хотя это возможно), поэтому предел её масштабирования - размеры сетки месторождения, небольшие по сравнению с данными для нейросети.
На своем сайте написали, что 0,16ТФлопс ~ 160 компов. Вообще я слышала, что в нефтяке очень мощные кластеры есть, но о них особо не говорят.
Лично мне мнение - вряд ли они мощнее сберсовского Кристофари, если бы было что-то супер-выдающееся, они бы об этом рассказали, чтобы все видели, какие они цифровые...
Кластеры - основа рекомендательных систем для ритейла. Петабайты личных данных клиентов загружаются в модель, и кластер вычисляет рекомендательные профили для продуктов компании - по шуруповёртам, или по кредитам - не важно. В большом масштабе модель через данные "чувствует" в каком регионе какая ситуация, выявляет неочевидные закономерности. Результат получается удивительно точный. Но нужно действительно много данных, например даже этот комментарий.
Ну и все-таки важно различать какой-нибудь кластер Газпромнефти на 0,16 ТФлопс и Кристофари на 6,7 ПФлопс. Компании любят называть и те, и другие суперкомпами и кластерами, по факту же это совсем разные по сложности системы.
Для ритейла, кстати, интересно) Мне кажется, в этой отрасли вся революция с рекоммендашками и той же биометрией впереди, хотя очевидно, что уже сейчас она началась
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
@Инспектор
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
@Инспектор
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
@Инспектор
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
@Инспектор
Комментарий удален модератором
@Инспектор
Комментарий удален модератором
@Инспектор
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Так и всё-таки, зачем обычному бизнесу мощности на суперкомпьютере?
Если нейросетки гонять, то кажется проще n серверов с gpu (в режиме предсказания они обычно помещаются на одну карточку), а большие сети типа gpt-2/3 нужны очень редким компаниям. По крайней мере сейчас.
При этом под параллельные вычисления на gpu почти все есть из коробки у современных фреймворков.
Ну есть такое понятие как fine tuning. Это когда берется почти подходящая сетка и дообучается под конкретную задачу. Для этого может понадобиться довольно большая мощность на не очень долгий срок. Так что такие проекты могут понадобиться hpc-as-a-service
Теперь Греф будет с гордостью говорить, что в его компании deep machine learning самый глубокий
Они нам в Казахстане собираются писать ГовТех. Думаю плакали данные казахстанцев.
Ну во первых на этом компьютере можно играть в fifa.
Будут майнить крипту....