YandexGPT // первый тест

В индустрии уже есть общепринятый термин, когда языковые модели выдают неверные, неадекватные или вообще бредовые ответы. Этот термин - галлюцинации. Надеюсь их будет немного...

Поехали

YandexGPT // первый тест

Пока вроде, норм, сразу пробуем сделать саммари документа по ссылке..

YandexGPT // первый тест

Ну вот, началось, простая инструкция "Сгенерируй саммари публикации" не распозналась (.

YandexGPT // первый тест

Другие попытки сделать саммари пока не увенчались успехом. И это ок, вчера Google Bard тоже не смог корректно сделать саммари видео с ютуба (.

Пробуем логическую задачку - "Сколько пальцев на ноге у двух людей и одного дельфина?" И, ура - ответ верный! К слову, на этой задачке, заглючила не одна модель. А тут, сразу правильный ответ, вот только с объяснением логики немного не то.

YandexGPT // первый тест

Задать уточняющий вопрос не получается... Пробуем более сложный вопрос:

В озере есть участок, заросший кувшинками. Каждый день этот участок увеличивается в размере в 2 раза. Известно, что кувшинки покроют всю поверхность озера за 48 дней.

За сколько дней кувшинки покроют ровно половину поверхности озера?

YandexGPT // первый тест

Получить цифру в ответе не удалось.. Вместо этого рассуждения. Попытка неплохая но безрезультатная.

Несмотря ни на что - работает, и со временем улучшится.

А какой вопрос еще можно задать для оценки возможностей?) Интересно, а она может генерить код, в другой раз проверим..

33
2 комментария

аппарат выдает тексты не связанные между собой и сессиями.. придумать оно ничего не может

Ответить

Яндекс молодцы жаль доки по апи неудобные и маленькие

Ответить