Почему учёным нужно использовать LLM
Недавно я наткнулся на статью доктора физико-математических наук о возможности использования LLM в научных исследованиях. Автор убедительно доказал, что такой возможности нет. Но в своих экспериментах в качестве доказательства он использовал поисковый сервис Нейро от Яндекса, а не топовые LLM. Для меня это было настолько странно, что я задался вопросом о том, что часть ученых, возможно, просто не понимают, как использовать нейросети в науке.
Эта статья не о научных открытиях с помощью LLM, а о том, что нейросети полезный инструмент, отказ от которого ставит науку в невыгодное положение, бонусом небольшой скандал, интрига и расследование.
С чего всё началось
В одну из традиционных киберленинских суббот я прочитал интересную статью. Автор Самохин Александр Александрович, доктор физико-математических наук, главный научный сотрудник Института общей физики им. А.М. Прохорова РАН. Статья называется "Что говорит искусственный интеллект" (Науковедческие исследования, 2026, №3).
В этой статье автор оценил способности ИИ к научному исследованию на примере сервиса Нейро от Яндекса.
Автор сам приводит схему работы сервиса:
Нейросеть перефразирует вопрос в поисковый запрос. Поисковая система находит топ подходящих источников и выбирает из них пять. На их основе нейросеть из семейства YandexGPT-3 генерирует ответ.
И делает вывод:
…работа слабо отличается от процесса подбора из доступной ему элементной базы некоторой совокупности утверждений, определений и т.п., выделяемых из этой базы на основе ключевых слов.
Тут у меня возникло подозрение, что автор по-другому понимает понятия поиск и исследование. То есть по этой поисковой сводке он судит, может ли ИИ быть учёным:
…рассмотренный вариант ИИ не может самостоятельно выполнять функции нормального научного исследователя.
Вспомнил годы своей незаконченной аспирантуры, и внезапно понял, что да. Для многих процесс исследования, это и есть процесс поиска и обзора литературы по теме. Не эксперименты, не доказательство гипотез, не исследование нового… А именно поиск и обзор.
Я оставлю в стороне тот факт, что на основании экспериментов с поисковым сервисом делается вывод о полезности LLM в исследовательской работе (хоть и с оговоркой, что для этого конкретного ИИ). Возможно, это результат блокировок, либо традиционная консервативность большой науки. Но вывод, который мог бы быть вполне логичным на другой экспериментальной базе, становится странной шуткой конкретно здесь.
Такое ощущение, что часть научного мира всё ещё скептически относится к использованию LLM в своей работе. Но если не ждать от LLM прорывных идей, новых теорий, а использовать нейросети в том, в чём они действительно сильны, то результат может быть крайне полезен. Поиск и обзоры по теме, оценка внутренних противоречий в текстах, проверка расчётов, написание кода, соответствие формальным требованиям и последовательность логики – будут полезны любому учёному.
Я решил провести небольшой эксперимент. Взял пять статей подряд на Киберленинке, выданных поиском по ключевым словам “искусственный интеллект” + фильтр “2026”, исключил студенческие работы и провёл анализ содержания совместно с Claude Opus и Gemini Argon.
Результаты ниже.
Анализ пяти научных статей
Первая статья “Предпринимательство и искусственный интеллект”, автор Кондрух Антон Вячеславович, кандидат педагогических наук, доцент кафедры экономики и управления Севастопольского филиала РЭУ имени Г.В. Плеханова. Universum: экономика и юриспруденция. июль 2026г.
Сразу о библиографии, то, в чём раньше обвиняли LLM, сейчас я скорее ставлю в вину авторам.
15
Farre-Mensa, Koudijs, Manso; IZA DP 17055; с. 1–48
Под номером 17055 у IZA значится работа Fossen, McLemore и Sorgner с тем же названием
Реквизиты настоящие, авторы не те
16
Smith, Miller; Cogent Business & Management, 12(1), 2533433
У статьи с этим номером один автор, Hanan Alsharah, и название кончается на "entrepreneurial performance"
Авторы не те, к названию дописан хвост
17
Wang L., Chen Y.; SEPS, 2025, 98(1), 102307
Похожая статья вышла в томе 103 за февраль 2026 под номером 102381, авторы Tian, Wang, Chen и Zhang
Искажены авторы, название, том и номер
Методы. Заявлены системный и феноменологический подходы, синергетика, ресурсная концепция, динамические способности. В тексте ни один не применён.
Семантический анализ. Сказано, что автор установил отсутствие единого определения ИИ, но ни одного чужого определения не приведено и не сравнено.
Таблица. Девять строк без источников, данных и примеров. При этом она названа результатом сравнительного анализа, выполненного “впервые в научном дискурсе”.
В целом статья скорее не исследование, а оформление без исследования.
Вторая статья “К проблеме необъяснимости решений искусственного интеллекта”. Автор Поляков С.В. аспирант кафедры истории и философии РЭУ имени Г.В. Плеханова. Философия и культура. 2026г.
Аналогия вместо доказательства. В аннотации стоит “доказано существование принципиальной связи” между эффективностью и необъяснимостью. В тексте доказательства нет: есть ссылки на два обзора и сравнение с интуицией эксперта. Переход от “сходство не случайно” к “фундаментальное свойство” просто объявлен.
Каталепсис. Автор пишет, что каталепсис обходится без активного участия рассудка. У стоиков наоборот: каталепсис наступает, когда ум видит, что впечатление не может быть ложным, и соглашается с ним. В жесте Зенона согласие идёт раньше сжатого кулака, которым он обозначал постижение.То есть стоическое понятие использовано буквально в обратном смысле. Ни одного источника по стоикам в библиографии нет.
Критерии. Стабильность, граничные условия, робастность и внешняя валидация — обычный набор тестирования моделей. К тому же первый и третий совпадают: “стабильность результатов при сходных входных данных” и “стабильность решений при небольших вариациях входных параметров”.
Кроме того, отмечена вольная интерпретация или даже отклонение при цитировании источников (Я. Хохви, цифры KPMG). Но библиография в порядке.
Стоит отметить, что официальный рецензент обратил внимание, на явные ляпы, но автор их проигнорировал.
Третья статья “Искусственный интеллект в педагогическом образовании” авторы кандидаты педагогических наук А.М. Магомедгаджиева и А.Ш. Бакмаев. Дагестанский педагогический университет имени Р. Гамзатова. Мир науки, культуры, образования. 2026г.
Гипотеза не проверяется. Она заявлена как "ИИ позволяет оптимизировать и улучшить процесс обучения". Измерений, сравнения групп или хотя бы опроса в тексте нет. В заключении вторая фраза гипотезы повторена дословно, уже как вывод.
Типов ИИ нет. Цель — "выделить типы ИИ", заключение сообщает, что они выделены. В тексте вместо типов стоит перечень сервисов, от MathGPT до Google Translate.
Рекомендации: сводятся к пяти общим строкам: два принципа "руководства" и три пункта "необходимо избегать". Именно они названы научной новизной.
В уроке нет ИИ. План-конспект "с использованием искусственного интеллекта" — обычный урок по оператору if, где ИИ не упомянут ни в одном из восьми этапов.
В библиографии есть подозрительная ссылка: Касперская Н.И. Цифровая трансформация образования: вызовы и возможности // Высшее образование в России. 2023; Т. 32, № 1: 22–35. Эта ссылка встречается в библиографии нескольких научных статей, но такую работу Касперской я не нашёл. Предполагаю, что это изначальная галлюцинация LLM в статье 2025 года, откуда ссылка потихоньку расползается по другим научным статьям.
Таким образом, это добротная методическая заметка двух преподавателей, но заявленных результатов в тексте нет. Сам урок примера использования ИИ не содержит.
Четвертая статья “К вопросу о правосубъектности искусственного интеллекта” автор Токолов Александр Владимирович, кандидат юридических наук. Финансовый университет при Правительстве Российской Федерации. Вестник Московского университета МВД России. 2026г.
Содержательно статью я не рассматривал, поскольку большая её часть является пересказом статьи Зыкова Сергея Викторовича “Проблема субъектности искусственного интеллекта”, научного сотрудника Института философии и права СО РАН. Актуальные проблемы российского права. 2024г. При этом ссылки на Зыкова в статье отсутствуют. Пересказ был выявлен LLM через семантический поиск.
Пример пересказа, остальное в спойлере:
Зыков 2024 г.:
Следует заметить, что и в рамках правовых систем, предполагающих фикционную теорию юридического лица, за последним всегда стоят конкретные люди. Они наделены, в частности, инстинктом самосохранения...
Токолов 2026г.:
Важно отметить, что даже в правовых системах, применяющих теорию фикции, за юридическим лицом всегда стоит реальный человек, обладающий инстинктом самосохранения.