По словам Самуйловой, при использовании прогнозов моделей машинного обучения, нужен инструмент, показывающий, насколько данным можно доверять. Таким инструментом будет Evidently. Сейчас проект находится на ранней стадии разработки, команда планирует создать полноценную платформу для мониторинга.
Комментарий недоступен
Пора пилить стартап по сбору и анализу результатов нейронок, собирающих и анализирующих результаты других. Раз уж начинать цифровую бюрократию - то и не останавливаться.
Ну вы бы почитали сначала, ну. Нет там никакой второй нейронки, идея то инструмента оч грамотная - задетектить ситуацию, что в сетку полетели данные, которые сильно отличаются от тех, на которых она училась (а значит поведение будет непредсказуемое)
Kiss my shiny metal ass.
Нет там никакой нейронки, откуда вы всё это выдумываете? Задача у данного инструмента - визуализировать изменение в данных и таргете (Data Drift) и оценить насколько изменился её перфоманс на новых данных.
Вот, даже ссылку на зависимости оставлю, там нет ни одного пакета с "нейронками".
Смешно конечно. Но факт
Молодцы и удачи от души, но вообще непонятно, как на этом вообще можно зарабатывать? Если норм МЛ команда, которая по этим метрикам сможет адекватные выводы сделать, то они и сами такую штуку себе соберут за спринт. Более того проблема больше не в визуализации и анализе, а в сборе и хранении телеметрии с инференс сервисов.