Сбер запустит суперкомпьютер: что это может значить

К концу 2021 Сбер планирует запустить суперкомпьютер. Зачем компании второй суперкомпьютер, кто им будет пользоваться и почему это больше, чем просто кейс внедрения?

Бриф про суперкомпьютеры

Суперкомпьютеры– это НРС-кластеры, в которых вычисления реализуются параллельно, т.е. задача дробится на несколько и они решаются одновременно. Такой подход позволяет в десятки раз ускорить вычисления.

Важно различать суперкомпьютеры для науки и суперкомпьютеры для бизнеса. Для рынка важнее суперкомпьютеры для коммерческого сектора и в них основная точка роста: там нет гонки вычислений и мощностей ради мощностей, но зато есть экономика и прикладные задачи, решение которых с помощью НРС позволяет каким-то образом повысить прибыль. НРС – вещь дорогая, администрировать ее сложно, нужен адаптированный софт и для окупаемости суперкомпа необходимо обеспечивать загрузку мощностей хотя бы на 60-70%. Иначе экономика не сходится. На практике обеспечить такой загруз бывает сложно и компаниям не всегда выгодно иметь собственный вычкластер.

Отсюда следуют важные направления развития HPC:

первое – HPC-as-a-service, в мире такая услуга активно развивается, в РФ пока что - с трудом, но, возможно, именно Сбер эту ситуацию исправит.

второе – снижение операционных затрат, которое позволит окупать суперкомпы при меньшей загруженности мощностей. Снижение костов обозначает повышение энергоэффективности НРС, лидеры в области производства железа для НРС совершенствуют продукты именно в этой части. Основное преимущество нового суперкомпа Сбера, о котором сказал Греф, как раз энергоэффективность.

Кому нужны суперкомпьютеры

Раньше НРС использовались преимущественно в науке и госсекторе для решения вычислительных задач, предполагающих моделирование процессов.

Если изучить недавние кейсы внедрений, то очевиден запрос на НРС со стороны сферы BFSI, машиностроения, транспортной сферы и добывающей промышленности, однако в формате as-a-service HPC могут быть интересны широкому спектру самых разных компаний, даже небольших.

Зачем Сберу 2 самых мощных кластера в РФ

У Сбера уже есть один суперкомпьютер - Кристофари, он запущен в 2019 году и используется в т.ч. для обработки данных биометрии, часть мощностей сдается в формате as-a-service.

Сегодня Кристофари является самым мощным в РФ и единственной российской машиной, адаптированной под работу с искусственным интеллектом. Кристофари занимает 61 позицию в топ-500, в рейтинге от июня 2021 другие российские кластеры в первой сотне не представлены.

По текущим данным, мощность нового кластера Сбера будет выше, чем мощность Кристофари.

По мировой практике мы видим, что последовательный запуск нескольких НРС-машин - типичная история: попробовав НРС-кластер в деле и оценив его выгоду, компании понимают, что у них есть задачи для еще одного кластера и его внедрение окупится.

Скорее всего, у Сбера случилось то же самое: у компании очень много вычислительных задач, с учетом приоритета государства на развитие единой биометрической системы и агрессивного и успешного инвестирования компании в ИИ их количество будет увеличиваться. Помимо этого, вероятно, что опыт сдачи мощностей Кристофари в аренду показал, что спрос на НРС-as-a-service высокий. Сбер смотрит в сторону создания инфраструктуры НРС-as-a-service и сдачи ее в аренду - это было ясно уже из пресс-релизов о запуске Кристофари.

Мы видим свою миссию в том, чтобы сделать супервычисления и разработку решений на базе искусственного интеллекта доступными любой компании независимо от ее размера, отрасли и территориального расположения.

Давид Рафаловский, ИТ-директор, технический директор группы "СберБанк"

Помимо этого, у Сбера много своих задач, решение которых с помощью НРС оправдано: в первую очередь - обработка биометрии, риск-анализ, стратегии гибкого ценообразования в режиме реального времени.

Но сейчас, конечно, ждем информации о запуске нового суперкомпьютера, его мощностях и планах по использованию, по заявлению Грефа, запуск машины анонсируют в ноябре.

Я пишу о трендах в tg - велкам. Изучаю то, что меняет мир, общество и рынки прямо сейчас и кажется интересным и важным. Там же будет более подробный и предметный разбор этого кейса.

0
98 комментариев
Написать комментарий...
Ленин-гриб
 Назвали систему Christofari в честь первого клиента Сберкассы Николая Кристофари.

Это очень крутое название :)

Ответить
Развернуть ветку
Kelerius

А что насчёт вкладов до 1991-го года?
Это не мы. Мы другой банк)

Ответить
Развернуть ветку
3 комментария
Вадимов Вадим

Сберкомпьютер

Ответить
Развернуть ветку
Uranus In Fire

СберСуперМегаКомпьютер

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
xxx xxx

Не удивлюсь, если тюремные колл-центры в будущем заменит ИИ, для которого будут арендовать мощности этого суперкомпа, и расплачиваться сворованными у клиентов сбера деньгами.  

Ответить
Развернуть ветку
CUYS.ru

Круговорот пиздежа на зоне

Ответить
Развернуть ветку
KitchenCutter

Уже началось, мошеннические роботы стали звонить 

Ответить
Развернуть ветку
Rusakover Rusakover

Чтобы еще быстрее обрабатывать мошеннические операции, которые нельзя отменить. Бред весь ИИ их. Не могут элементарно понять где мошенники.

Ответить
Развернуть ветку
Jevgeni Vakker

Могут, но в чем профит для сбера?

Ответить
Развернуть ветку
Леонид Бережной

Если люди дебилы, никакие ИИ не спасут от мошенников...

Ответить
Развернуть ветку
33 комментария
Виталий Томилин

Биометрия? Нее, без паспорта на кассе все равно не обслужат)

Ответить
Развернуть ветку
Светлана Шапошникова

Вы все шутите, а у меня реально чуть паспорт не попросили в провинциальной пятерочке при получение заказа из сбермегамаркета... Собрались два кассира и их главная

Ответить
Развернуть ветку
2 комментария
Vyacheslav Teplyakov

второй чтобы первому не было скучно одному

Ответить
Развернуть ветку
Pretty Sober

Будут в шашки играть, в свободное время

Ответить
Развернуть ветку
S.Capusta

Утверждение автора: "и для окупаемости суперкомпа необходимо обеспечивать загрузку мощностей хотя бы на 60-70%. Иначе экономика не сходится."
А почему? Я, честно говоря, не вижу прямой связи.. 

Ответить
Развернуть ветку
Vika S
Автор

Создание кластера - это высокие капитальные затраты и даже если потом железо будет стоять и не использоваться (простой условно), операционные издержки просто на поддержание инфраструктуры будут достаточно высокими.
То есть фактический кост за пользование машиной лишь частично привязан к загрузке и к решаемым задачам
И чтобы не работать в убыток, надо использовать мощности по назначению и ускорять какие-то свои вычислительные процессы - то есть снижать кост на них 
Вот и окупаемость) 

Ответить
Развернуть ветку
4 комментария
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
3 комментария
Alex Suv

Суперкомпьютер это конечно здорово. Но нищему населению России всё равно неоткуда генерировать прибыль. Это как город на 300.000 человек, который собирается строить Шойгу – никому не нужен.

Ответить
Развернуть ветку
Dmitry Mikushin

0,16 ТФлопс - это как-то совсем мало, один средненький ноутбук. А вот 0,16 ПФлопс - понятно зачем, для физики: Ansys, OpenFOAM, Schlumberger и т.д. Физику на нейросетях не считают (пока, хотя это возможно), поэтому предел её масштабирования - размеры сетки месторождения, небольшие по сравнению с данными для нейросети.

Ответить
Развернуть ветку
Vika S
Автор

На своем сайте написали, что 0,16ТФлопс  ~ 160 компов. Вообще я слышала, что в нефтяке очень мощные кластеры есть, но о них особо не говорят.
Лично мне мнение - вряд ли они мощнее сберсовского Кристофари, если бы было что-то супер-выдающееся, они бы об этом рассказали, чтобы все видели, какие они цифровые...

Ответить
Развернуть ветку
14 комментариев
Dmitry Mikushin

Кластеры - основа рекомендательных систем для ритейла. Петабайты личных данных клиентов загружаются в модель, и кластер вычисляет рекомендательные профили для продуктов компании - по шуруповёртам, или по кредитам - не важно. В большом масштабе модель через данные "чувствует" в каком регионе какая ситуация, выявляет неочевидные закономерности. Результат получается удивительно точный. Но нужно действительно много данных, например даже этот комментарий.

Ответить
Развернуть ветку
Vika S
Автор

Ну и все-таки важно различать какой-нибудь кластер Газпромнефти на 0,16 ТФлопс и Кристофари на 6,7 ПФлопс. Компании любят называть и те, и другие суперкомпами и кластерами, по факту же это совсем разные по сложности системы.
Для ритейла, кстати, интересно) Мне кажется, в этой отрасли вся революция с рекоммендашками и той же биометрией впереди, хотя очевидно, что уже сейчас она началась

Ответить
Развернуть ветку
3 комментария

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Frut Dzentready
Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Frut Dzentready
Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Frut Dzentready
Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Frut Dzentready
Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Frut Dzentready
Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Frut Dzentready
Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Renat

Так и всё-таки, зачем обычному бизнесу мощности на суперкомпьютере?

Если нейросетки гонять, то кажется проще n серверов с gpu (в режиме предсказания они обычно помещаются на одну карточку), а большие сети типа gpt-2/3 нужны очень редким компаниям. По крайней мере сейчас.
При этом под параллельные вычисления на gpu почти все есть из коробки у современных фреймворков.

Ответить
Развернуть ветку
Frut Dzentready

Ну есть такое понятие как fine tuning. Это когда берется почти подходящая сетка и дообучается под конкретную задачу. Для этого может понадобиться довольно большая мощность на не очень долгий срок. Так что такие проекты могут понадобиться hpc-as-a-service

Ответить
Развернуть ветку
1 комментарий
Pavel Loginov

Теперь Греф будет с гордостью говорить, что в его компании deep machine learning самый глубокий

Ответить
Развернуть ветку
Robert Coolige

Они нам в Казахстане собираются писать ГовТех. Думаю плакали данные казахстанцев. 

Ответить
Развернуть ветку
joncieres

Ну во первых на этом компьютере можно играть в fifa.

Ответить
Развернуть ветку
Анатолий Марков

Будут майнить крипту.... 

Ответить
Развернуть ветку
95 комментариев
Раскрывать всегда