Кто лучше решает задачи: DeepSeek или ChatGPT?
Впервые после релиза рассуждающих моделей обеих компаний состоялось серьезное мероприятие, и можно независимо оценить качество решений моделей.
🔥 Еще больше интересного в моем канале продуктовые штучки
Кто судьи?
Состоялось American Invitational Mathematics Examination (AIME), первая часть. Это олимпиадные задачами по математике. Напомню, что рассуждающие модели специально предназначены именно для узко специализированных задач, в том числе – по математике.
Результаты выложены на Matharena
Каков результат?
Таблица показывает, как разные модели справились с олимпиадой. Каждая модель решала каждую задачу 4 раза (независимо от других своих попыток). Зелёный – модель справилась 4/4 раз, желтый – справилась 1 раз, красный — 0 раз из 4.
В колонке «Acc» отображена средняя точность моделей. В колонке Cost – стоимость рассуждений.
Как видим, модели OpenAI серьезно превосходят модели DeepSeek по уровню точности ответов.
Хотя по стоимости DeepSeek выигрывает; однако модель R1 «жрет» больше, чем o3-mini (хотя на то она и mini, обычная модель пожирает в 10 раз больше).
В тестировании также принимали участие модели QwQ-32B (модель от Alibaba, которая вышла в ноябре 2024), gemini-2.0-flash (от Google, вышла на днях), claude-3.5-sonnet (Anthropic).
Но все эти модели существенно проигрывают моделям DeepSeek и OpenAI по точности, хотя цена вычислений невысока. Однако модели не справились с задачами, и если так посмотреть, то затраты высокие.
Модель от Mistral не принимала участия, т.к. У них нет рассуждающей модели.
Пожалуйста, поддержите меня, поставьте лайк! 🙏
Это принципиально новые модели, которые нацелены на другой тип задач, нежели ставший уже привычным нам чат. А потому важно понимать, как с ними работать правильно, чтобы не разочароваться. Поделюсь секретами тех, кто уже успел набить шишки.
В техно и финансовых кругах развернулась дискуссия (если не сказать паника). Шутка ли, что можно вот так вот создать модель с 20 раз дешевле, да и еще в условиях санкций? Но не все так просто. Расскажу, в чем дело
На прошлой неделе DeepSeek поверг в шок технологический и финансовый рынок США, заявив, что смог создать свою модель в 20 раз дешевле, чем у OpenAI. А тут – даже не за $6 000, а $50! И не китайцы (голь на выдумку хитра), а американцы! О чем речь и почему это так важно?
1 апреля 2025 года начал действовать обязательный сбор в размере 3% от квартального дохода, полученного в качестве вознаграждения за распространение Интернет-рекламы. Оплачивать сбор придется тем, кто получает доход, то есть рекламораспространителям: владельцам интернет-площадок, на которых публикуется реклама, и Посредникам, помогающим в распростр…
OpenAI запускает свою новейшую модель рассуждений o3-mini и впервые делает версию доступной для бесплатных пользователей ChatGPT. Но есть особенности
Я приехала в Португалию с маленьким чемоданчиком в отпуск, а осталась навсегда. Теперь у меня дома зимой +10°C, а летом я собираю апельсины в саду. В статье расскажу, как искала дом среди руин, как я открыла счёт в банке вопреки запретам, сколько я потратила на ремонт и сколько стоит жизнь в деревне из 22 человек.
Тарифы начнут действовать с 5 апреля 2025 года для 185 стран и территорий, за исключением России, Беларуси, Кубы и Северной Кореи.
Не наводи порядок в том, от чего нужно избавиться. Про бесконечные списки задач, фокусировку и "У меня все задачи важные"