Как разные LLM-модели создают мета-теги
Описание исследования
Основные параметры
- Инструмент: Генератор мета-тегов WebWize AI.
- Задача: Сгенерировать пять уникальных вариантов мета-заголовков Title (до 60 символов) и мета-описаний Description (до 160 символов) для SEO-оптимизации веб-страниц.
- Количество моделей: В тесте участвовали девять LLM последних версий.
Тестируемые модели и их ценовые категории
- Очень дешевые (Free):
Gemini 2.5 Flash Lite –самая дешевая модель, в 3 раза дешевле следующей по цене.
Qwen3-Next-Instruct – вторая по дешевизне. Grok 4 Fast – незначительно дороже Qwen3.
GPT-5 Nano – самая дорогая на тарифе Free, в 12 раз дороже Gemini 2.5 Flash Lite. - Бюджетные (Starter):
Gemini 2.5 Flash –доступная цена, в 5 раз дешевле GPT-5 Mini.
GPT-5 Mini – самая дорогая на тарифе Starter. - Дорогие (Pro):
Gemini 2.5 Pro – флагман Google, дешевле GPT-5.
GPT-5 – полная версия OpenAI, немного дороже Gemini 2.5 Pro. - Премиум (Studio):
Claude Opus 4.1 — самая дорогая модель, в 3 раза дороже Gemini 2.5 Pro.
Методология тестирования
Промпты
- System Prompt: В системном промпте модели назначалась роль SEO-эксперта с четкими техническими требованиями: Title строго до 60 символов с основным ключевым словом. Description строго до 160 символов без переспама. Пять уникальных вариантов с разными акцентами. Вывод в структурированном Markdown формате.
- User Prompt: Пользовательский промпт запрашивал генерацию на основе кластера ключевых слов с соблюдением всех правил.
Тестовый кластер
Для стресс-теста моделей использовали намеренно неоднородный кластер из двенадцати ключевых слов:
- апельсиновый сахар как сделать в домашних условиях
- ванильный сахар в домашних условиях как сделать
- как сделать вареный сахар в домашних условиях
- как сделать желирующий сахар в домашних условиях
- как сделать карамельный сахар в домашних условиях
- как сделать колотый сахар в домашних условиях
- как сделать коричневый сахар в домашних условиях
- как сделать кусковой сахар в домашних условиях
- как сделать молочный сахар в домашних условиях
- как сделать мятный сахар в домашних условиях
- как сделать сахар в домашних условиях
- как сделать фруктовый сахар в домашних условиях
Критерии успешности
- Правильный результат: Генерация мета-тегов для одной общей страницы (хаба или лонгрида), охватывающей все виды сахара.
- Грубая ошибка: Генерация мета-тегов для пяти разных страниц, каждая из которых посвящена отдельному виду сахара.
Результаты тестирования
1. Gemini 2.5 Flash Lite
Создание сахара в домашних условиях
Вариант 1
Title Сделай сахар дома: от ванильного до карамельного
Description Научитесь делать сахар в домашних условиях! Ре рецепты апельсинового, ванильного, карамельного, коричневого и других видов сахара. Простые шаги к идеальному результату.
Вариант 2
Title Домашний сахар: простые рецепты разных видов
Description Создайте ароматный ванильный, насыщенный карамельный или освежающий мятный сахар дома. Подробные инструкции, как сделать сахар в домашних условиях из любых ингредиентов.
Вариант 3
Title Как сделать цветной и фруктовый сахар дома
Description Откройте секреты создания цветного, фруктового и молочного сахара. Пошаговое руководство, как сделать сахар разных текстур: желирующий, кусковой, колотый.
Вариант 4
Title Сладкие эксперименты: разные виды сахара своими руками
Description Узнайте, как сделать вкусный апельсиновый, вареный или коричневый сахар в домашних условиях. Идеи для творчества и кулинарии с домашним сахаром.
Вариант 5
Title Домашний сахар: от базовых рецептов до экзотических вкусов
Description Сделайте свой сахар дома! Освойте приготовление ванильного, мятного, фруктового и других видов сахара. Просто, быстро и с гарантией качества.
2. GPT-5 Nano (
Название задачи
Вариант 1
Title Апельсиновый сахар – как сделать в домашних условиях
Description Узнайте, как сделать апельсиновый сахар в домашних условиях – быстро и просто. Рецепты: ванильный, вареный, желирующий, карамельный и фруктовый сахар; как сделать молочный сахар в домашних условиях.
Вариант 2
Title Ванильный сахар – как сделать в домашних условиях
Description Научитесь готовить ванильный сахар в домашних условиях: аромат, хранение и простые шаги; как сделать коричневый сахар в домашних условиях и молочный сахар.
Вариант 3
Title Вареный сахар – как сделать в домашних условиях
Description Пошагово о том, как сделать вареный сахар в домашних условиях: применение, хранение и варианты рецептов, включая как сделать кусковой сахар в домашних условиях.
Вариант 4
Title Желирующий сахар – как сделать в домашних условиях
Description Учитесь готовить желирующий сахар в домашних условиях – идеален для джемов, мармелада и фруктовых заготовок; советы по хранению и как сделать молочный сахар в домашних условиях.
Вариант 5
Title Карамельный сахар – как сделать в домашних условиях
Description Пошагово о карамельном сахаре в домашних условиях – идеи применения, фруктовый сахар и апельсиновый сахар; как сделать сахар в домашних условиях.
3. Qwen3-Next-Instruct
Название задачи
Вариант 1
Title Апельсиновый сахар – как сделать в домашних условиях
Description Узнайте, как сделать апельсиновый сахар в домашних условиях – быстро и просто. Рецепты: ванильный, вареный, желирующий, карамельный и фруктовый сахар; как сделать молочный сахар в домашних условиях.
Вариант 2
Title Ванильный сахар – как сделать в домашних условиях
Description Научитесь готовить ванильный сахар в домашних условиях: аромат, хранение и простые шаги; как сделать коричневый сахар в домашних условиях и молочный сахар.
Вариант 3
Title Вареный сахар – как сделать в домашних условиях
Description Пошагово о том, как сделать вареный сахар в домашних условиях: применение, хранение и варианты рецептов, включая как сделать кусковой сахар в домашних условиях.
Вариант 4
Title Желирующий сахар – как сделать в домашних условиях
Description Учитесь готовить желирующий сахар в домашних условиях – идеален для джемов, мармелада и фруктовых заготовок; советы по хранению и как сделать молочный сахар в домашних условиях.
Вариант 5
Title Карамельный сахар – как сделать в домашних условиях
Description Пошагово о карамельном сахаре в домашних условиях – идеи применения, фруктовый сахар и апельсиновый сахар; как сделать сахар в домашних условиях.
4. Grok 4 Fast
Мета-теги для приготовления сахара дома
Вариант 1
Title Как сделать апельсиновый сахар дома просто
Description Простой рецепт апельсинового сахара в домашних условиях: свежий вкус без консервантов. Идеально для чая и десертов, сэкономьте на покупных добавках.
Вариант 2
Title Ванильный сахар дома: легкий рецепт
Description Готовьте ванильный сахар в домашних условиях шаг за шагом. Натуральные ингредиенты для аромата выпечки, плюс советы по вареному и карамельному вариантам.
Вариант 3
Title Коричневый сахар дома: быстрый способ
Description Как сделать коричневый и колотый сахар в домашних условиях без хлопот. Получите натуральный продукт для кулинарии, богатый вкусом и полезнее магазинного.
Вариант 4
Title Фруктовый сахар дома: вкусно и полезно
Description Рецепты фруктового и мятного сахара в домашних условиях для здорового питания. Легкие методы с желирующим и кусковым сахаром, добавьте свежести в блюда.
Вариант 5
Title Молочный сахар дома: домашние секреты
Description Узнайте, как приготовить молочный и вареный сахар в домашних условиях. Экономичный вариант для сладостей, с уникальными идеями по карамельному и желирующему.
5. Gemini 2.5 Flash
Генерация мета-тегов для страницы "Как сделать сахар в домашних условиях"
Вариант 1
Title Сахар своими руками: от апельсинового до молочного
Description Узнайте, как сделать апельсиновый, ванильный, карамельный, молочный и другие виды сахара в домашних условиях. Простые рецепты!
Вариант 2
Title Как сделать сахар: желирующий, коричневый, кусковой дома
Description Секреты приготовления желирующего, коричневого, кускового сахара, а также фруктового и мятного. Пошаговые инструкции.
Вариант 3
Title Ванильный и фруктовый сахар: рецепты для дома
Description Научитесь готовить ванильный, фруктовый и вареный сахар в домашних условиях. Натуральные добавки к вашим блюдам.
Вариант 4
Title Колотый и карамельный сахар: простые домашние рецепты
Description Изучите, как сделать колотый, карамельный, апельсиновый сахар и множество других видов. Экономьте и экспериментируйте!
Вариант 5
Title Домашний сахар: мятный, молочный, желирующий и другие
Description Полное руководство по приготовлению мятного, молочного, желирующего сахара. Все о сахаре, который можно сделать дома.
6. GPT-5 Mini
Название задачи
Вариант 1
Title Как сделать апельсиновый сахар в домашних условиях
Description Пошаговые рецепты апельсинового и ванильного сахара – как сделать сахар в домашних условиях быстро и без лишних ингредиентов.
Вариант 2
Title Ванильный сахар в домашних условиях – простой рецепт
Description Подробно о том, как сделать ванильный сахар в домашних условиях, плюс рецепты мятного и фруктового сахара – мягкий вкус и экономия.
Вариант 3
Title Как сделать карамельный сахар в домашних условиях
Description Рецепты карамельного, вареного и желирующего сахара – как сделать сахар в домашних условиях легко, с техникой и тонкостями приготовления.
Вариант 4
Title Как сделать коричневый и кусковой сахар в домашних условиях
Description Инструкции по коричневому, кусковому, колотому и молочному сахару – практичные способы, как сделать сахар в домашних условиях без химии.
Вариант 5
Title Как сделать мятный и фруктовый сахар в домашних условиях
Description Свежие идеи для мятного, фруктового и апельсинового сахара – рецепты и пропорции, как сделать сахар в домашних условиях для десертов и напитков.
7. Gemini 2.5 Pro
Генерация мета-тегов для страницы
Вариант 1
Title Как сделать сахар дома: 10+ пошаговых рецептов
Description Простые инструкции, как сделать ванильный, карамельный, коричневый и даже мятный сахар. Готовьте кусковой и апельсиновый сахар в домашних условиях легко!
Вариант 2
Title Как сделать сахар в домашних условиях: простые способы
Description Узнайте, как сделать вареный, кусковой или фруктовый сахар своими руками. Легкие пошаговые руководства с фото для начинающих кулинаров. Попробуйте сами!
Вариант 3
Title Домашний сахар для выпечки: лучшие рецепты и идеи
Description Улучшите свои десерты! Как сделать идеальный желирующий, ванильный или карамельный сахар дома. Ваша выпечка и напитки станут еще вкуснее и ароматнее.
Вариант 4
Title Ароматный сахар дома: ванильный, мятный, апельсиновый
Description Удивите близких! Простые рецепты, как сделать мятный, апельсиновый или ванильный сахар. Идеально для выпечки, напитков и в качестве оригинального подарка.
Вариант 5
Title Как сделать коричневый и кусковой сахар в домашних условиях
Description Пошаговая инструкция, как сделать коричневый, колотый и кусковой сахар дома. Простые ингредиенты и гарантированный результат для ваших кулинарных экспериментов.
8. GPT-5
Генерация мета-тегов
Вариант 1
Title Как сделать сахар дома: все виды от А до Я
Description Собрали простые рецепты, как сделать сахар в домашних условиях: ванильный, коричневый, карамельный, кусковой, мятный и апельсиновый. Пошаговые инструкции.
Вариант 2
Title Ароматный сахар своими руками – простые рецепты
Description Узнайте, как сделать ванильный, мятный, апельсиновый и другой фруктовый сахар дома. Идеально для выпечки, напитков и десертов. Удивите близких!
Вариант 3
Title Вареный, карамельный и кусковой сахар в домашних условиях
Description Пошаговый гайд, как сделать вареный, колотый и карамельный сахар. Наши рецепты помогут вам приготовить кусковой сахар как в магазине, но дешевле.
Вариант 4
Title Как сделать желирующий и коричневый сахар дома: лайфхаки
Description Не знаете, как сделать желирующий сахар для варенья или заменить коричневый? Показываем, как приготовить разные виды сахара в домашних условиях.
Вариант 5
Title Рецепты домашнего сахара: кусковой, молочный, ванильный
Description Как самому сделать кусковой или молочный сахар? Пошаговые рецепты для приготовления ванильного, коричневого и даже колотого сахара у вас на кухне.
9. Claude Opus 4.1
Генерация мета-тегов для страницы о приготовлении сахара
Вариант 1
Title Как сделать сахар в домашних условиях: 12 видов
Description Узнайте, как сделать ванильный, апельсиновый, карамельный и другие виды сахара дома. Простые рецепты фруктового, мятного и коричневого сахара.
Вариант 2
Title Домашний сахар: рецепты ванильного и фруктового
Description Пошаговые инструкции, как сделать кусковой, колотый и желирующий сахар в домашних условиях. Проверенные рецепты для начинающих.
Вариант 3
Title Ароматный сахар дома: апельсиновый и мятный
Description Научитесь делать вареный, молочный и карамельный сахар своими руками. Подробные рецепты коричневого и фруктового сахара для десертов.
Вариант 4
Title Коричневый и ванильный сахар в домашних условиях
Description Мастер-классы по приготовлению желирующего, колотого и кускового сахара дома. Секреты создания апельсинового и мятного сахара.
Вариант 5
Title Карамельный сахар дома: рецепт и 11 альтернатив
Description Полное руководство, как сделать молочный, вареный и фруктовый сахар в домашних условиях. Рецепты ванильного и коричневого сахара.
Сравнительный анализ моделей
1. Понимание концепции хабовой страницы
- Справились идеально (поняли концепцию общей страницы): Gemini 2.5 Pro и Claude Opus 4.1: Безошибочно поняли задачу. Claude Opus 4.1 даже посчитал и указал точное число видов ("12 видов"), а Gemini 2.5 Pro использовал разные акценты (количество, простота, применение) для каждого варианта.GPT-5 и Gemini 2.5 Flash: Также отлично справились, используя формулировки "все виды от А до Я" (GPT-5) и "от апельсинового до молочного" (Gemini 2.5 Flash), что ясно указывает на общую страницу.
- Справились частично (каждый Title для отдельного вида, но Description обобщает): Grok 4 Fast и GPT-5 Mini: Эти модели допустили ошибку, сфокусировав заголовки на отдельных видах сахара. Однако в описаниях они пытались расширить контекст, упоминая другие типы. Примечательно, что Gemini 2.5 Flash, который в 5 раз дешевле GPT-5 Mini, понял задачу значительно лучше.
- Провалили задачу (создали 5 вариантов для 5 разных страниц): GPT-5 Nano и Qwen3-Next-Instruct: Полностью провалили задание, сгенерировав 5 наборов мета-тегов для 5 разных страниц. Интересно, что их результаты на 100% идентичны.Gemini 2.5 Flash Lite: Несмотря на принадлежность к той же ценовой категории, эта модель правильно поняла концепцию хабовой страницы, но провалила технические требования (см. пункт 3).
2. Качество и стиль контента
- Креативность и эмоциональность: Лидер по креативности: Gemini 2.5 Pro – использует эмоциональные триггеры ("Удивите близких!", "Попробуйте сами!") и добавляет ценность ("с фото для начинающих").GPT-5: Занимает промежуточную позицию, используя современный язык ("гайд", "лайфхаки") и практичные УТП ("как в магазине, но дешевле"). Claude Opus 4.1: Более сдержанный и профессиональный, делает акцент на авторитетности ("Мастер-классы", "Полное руководство").
- Переспам ключевых слов: Проблема: GPT-5 Nano и Qwen3-Next-Instruct избыточно повторяют фразу "как сделать ... сахар в домашних условиях", что является устаревшей SEO-практикой.Отличный результат: Gemini 2.5 Pro, Claude Opus 4.1 и GPT-5 естественно вплетают ключевые слова без избыточных повторений.
- Лаконичность: Gemini 2.5 Flash показал себя мастером лаконичности, оставляя запас до лимитов символов. Это преимущество для мобильной выдачи, где Description может обрезаться. Gemini 2.5 Pro и GPT-5 используют доступное пространство почти полностью, чтобы вместить больше ценной информации и триггеров.
3. Технические параметры и соблюдение лимитов
- Безупречное соблюдение: 8 из 9 моделей идеально выполнили требования по длине Title и Description.
- Критические проблемы: Только Gemini 2.5 Flash Lite массово нарушил лимиты:4 из 5 Title превысили лимит в 60 символов.1 из 5 Description превысил лимит в 160 символов.
- Парадокс: Самая дешевая модель (Gemini 2.5 Flash Lite) правильно поняла концептуальную задачу, но провалила базовые технические требования. Модель GPT-5 Nano (в 12 раз дороже) – наоборот, технически идеальна, но не поняла суть задачи.
4. Покрытие кластера ключевых слов
- Полное покрытие (11–12 из 12 видов): Claude Opus 4.1, Gemini 2.5 Pro, GPT-5, Gemini 2.5 Flash.
- Высокое покрытие (10–11 видов): Gemini 2.5 Flash Lite.
- Среднее покрытие (8–9 видов): Grok 4 Fast, GPT-5 Mini.
- Низкое покрытие (5 из 12 видов в заголовках): GPT-5 Nano, Qwen3-Next-Instruct. Эффективное покрытие низкое из-за неверного понимания задачи.
Итоговые выводы и рекомендации
- Цена не коррелирует с качеством напрямую. Самые дешевые модели (Gemini 2.5 Flash Lite, Grok 4 Fast) превзошли более дорогие (GPT-5 Nano). Модель среднего сегмента Gemini 2.5 Flash оказалась на голову выше дорогой GPT-5 Mini.
- Семейство Gemini показало лучшее понимание задачи. Все три модели Gemini (Pro, Flash, Flash Lite) правильно поняли концепцию хабовой страницы. В то же время младшие модели семейства GPT (Nano, Mini) с этим не справились.
- Оптимальный выбор по соотношению цена/качество – Gemini 2.5 Flash. Она идеально поняла задачу, показала высокое качество текста и полное покрытие кластера при цене в 5 раз ниже, чем у GPT-5 Mini, которая справилась хуже. Gemini 2.5 Flash предлагает 90% качества флагмана Gemini 2.5 Pro за малую долю его цены.
- Флагманы (Gemini 2.5 Pro, Claude Opus 4.1, GPT-5) – для максимального качества. Все три показали превосходный результат.Gemini 2.5 Pro: Наиболее креативный и эмоциональный.Claude Opus 4.1: Самый структурированный и точный, но и самый дорогой.GPT-5: Практичный, использует современный язык.
- Модели, которые не рекомендуется использовать для этой задачи: GPT-5 Nano и Qwen3-Next-Instruct: Фундаментально не поняли задачу. Qwen3 к тому же показал 100% идентичный GPT-5 Nano результат, что ставит под вопрос его независимость.GPT-5 Mini: Неконкурентоспособен по цене-качеству в сравнении с Gemini 2.5 Flash.
- Бюджетный парадокс: На бесплатном тарифе лучшим выбором будет Grok 4 Fast для автоматизации (так как он технически безупречен) или Gemini 2.5 Flash Lite для работы с ручной доработкой (так как он лучше понял задачу, но требует исправления лимитов).