5 важных недостатков популярных нейросетей (Часть 1)

Многие читатели справедливо заметят: о нейросетях стали говорить слишком много, а зачастую даже чрезмерно нахваливают их возможности. Я же стараюсь не нахваливать, но искреннее удивление от прогресса скрыть не могу.

Тем не менее, несмотря на способности ИИ генерировать тексты, рисовать, обрабатывать аудио/видео и ещё очень много всего, у существующих нейросетей есть много проблем, которые я собрал в этом материале.

Некоторые из них известны большинству, а какие-то могут стать открытием для читателя (спойлер: пункт 4). Давайте смотреть.

Midjourney я могу назвать первым популяризатором нейронок до появления ChatGPT. Нейросеть генерирует фантастические изображения по текстовому описанию, которые лично мой мозг сам не всегда в состоянии даже вообразить.

Тем не менее, с генерацией некоторых деталей у сервиса возникают регулярные проблемы, одна из них — руки. Пальцев то слишком много, то их не хватает. Иногда вовсе становятся похожи на щупальца.

Для чистоты эксперимента я прописал prompt, где указал "рукопожатие". Вот какой результат получил с первого раза:

Если с английским языком у модели всё обстоит более, чем хорошо, то вот с русским — не очень.

Во-первых, текст создаётся сильно медленнее. Примерно раз в 5.

Во-вторых, по моим наблюдениям, он гораздо чаще обрывается и вынуждает писать "продолжи", чтобы закончить повествование. Зачастую он продолжает не с того места или теряет логику.

Насколько знаю, проблема с изображением текста есть не только у Midjourney. Если попросить нанести какую-нибудь запись, вы увидите совершенно новый язык.

Здесь я попросил сгенерировать UI бледно-розового сайта и нанести буквы VC. Получилось это:

По такому принципу работают любые просьбы нанести текст. Как бы чётко не прописывались prompt, результат всегда не тот.

По задумке нейросеть должна улучшать качество речи на записи, убирая посторонние шумы и эхо. С этими задачами она справляется, но результат иногда далёк от идеального, особенно если голос записан не на профессиональный микрофон.

Речь после обработки становится слегка "приглушенной". По моим ощущениям похоже на то, если бы вы прислонились к уху человека и что-то начали тихо говорить сквозь пальцы.

Ко всему прочему, сильные посторонние шумы могут иногда слиться с речью и нейросеть просто вырежет этот отрывок вместе с вашим голосом.

С хорошим оборудованием такие проблемы случаются реже, но с ним использовать нейронку может быть не всегда целесообразно, потому что изначально звук должен сильно отличаться от качества телефонного микрофона.

Я сделал 2 записи. В первом случае я не обрабатывал нейросетью, во втором я добавил помехи в виде звука перфоратора (осторожно, может быть громко). Шум Enhance Speech не убрал, а мои слова стали звучать как-то странно... С неестественным для меня акцентом.

Вот что точно может сделать художник, но не может нейронка — добавить изображению пикантности. В свою очередь писатель может добавить мат, где считает уместным, а его искусственный помощник — нет.

Порой ChatGPT не говорит со мной на вполне нормальные темы, если ему кажется, что это неуместно или в моём запросе есть что-то неприличное. Ну и Midjourney не захочет рисовать темнокожего человека, если в запросе будет указано "стоп-слово".

При всём при этом прогресс очень заметен. В статьях, которые были написаны год назад, нейросети в принципе мало что умели и без помощи человека не могли сделать что-то реально классное. Уже сейчас это в корне изменилось, а что будет в недалёком будущем — мы с вами увидим.

Если материал вам понравился, то приглашаю в свой Телеграм. Там я изучаю нейросети, рассказываю об их возможностях и провожу весёлые исследования.

Буду очень рад поддержке и вашим комментариям. Всех люблю.

#нейросети #gpt #adobe #midjourney