Прекрасная история, как мультиагентная AI система слила $47,000 после запуска в продакшен. И как этого избежать. Учимся на чужих ошибках!
Как строится хранилище данных: кратко о главном.
Хранилище данных (Data Warehouse, DWH) не просто база. Это централизованная система, где данные из разных источников объединяются, очищаются и структурируются для аналитики и отчетности.
Если операционные системы отвечают на вопрос «Что произошло?», то DWH - на вопросы «Почему? Что будет? Где рост?»
Развертывание Marco o1 на локальном PC. Языковая модель рассуждений
Недавно я запускал и тестировал Marco o1. Это одна из первых опенсорсных языковых моделей с многоступенчатой логикой, эта модель использует Chain-of-Thoughts и некоторые другие алгоритмы, которые помогают с решением задач на математику, логику и кодинг. Marco-o1 названа по аналогии с OpenAI o1, благодаря которой Chain-of-Thoughts промптинг и файнтю…
Qwen 2.5 и Qwen 2.5 Coder - перспективная коллекция LLM для систем агентов
Разработчикам приложений Generative AI стоит обратить внимание на новую коллекцию моделей Qwen 2.5 и Qwen 2.5 Coder. С сентября 2024 года эти модели привлекают внимание разработчиков благодаря своей эффективности.
Во-первых, веса Qwen 2.5 доступны в версиях от 0.5B параметров — это очень легковесная модель — до 72B. Посередине есть 3,…
Квантизация позволяет запускать Llama 3.2 на мобилках
Квантизация помогла портировать последнюю версию LLM Llama 3.2 на мобильные платформы - iOS и Android. Для этого разработчики выпустили квантованные версии Llama 3.2 1B и 3B, которые при тестах на ARM-процессорах показали высокую скорость инференса, по сравнению с несжатыми весами в формате BF16.
Как вообще получилось, что Llama работает на…
Мультимодальные приложения на Llama 3.2 и Llama Stack
Недавний релиз Llama 3.2 с мультимодальными версиями 11B и 90B открывает возможности для создания AI приложений, анализирующих визуальный ввод.
Мультимодальные модели были и раньше, но это первая официальная версия Llama с такими функциями. Модель может быть использована для распознавания объектов и текста на изображении, как это делает GPT-4…
OpenAI o1 - LLM, обученная выполнять сложные логические рассуждения
OpenAI изменили направление развития своих языковых моделей, от просто генерации текста их последняя модель перешла к решению задач с использованием логики и пошагового анализа проблемы.
До сих пор LLM генерировали текст на основе данных, использованных в процессе обучения. Веса модели хранят представление о зависимостях между текстовы…
Data Engineering: концепции, процессы и инструменты
Data science, машинное обучение и искусственный интеллект — не просто громкие слова: многие организации стремятся их освоить. Но прежде чем создавать интеллектуальные продукты, необходимо собрать и подготовить данные, которые станут топливом для ИИ. Фундамент для аналитических проектов закладывает специальная дисциплина — data engineering. Связанны…
Почему мир Big Data запомнит 20.03.2023
В этот понедельник Яндекс выложил в open source свой движок обработки больших массивов информации YTsaurus (ранее изве…
pdf-inspector - локальный инструмент на Rust, который сначала пытается понять, что вообще находится внутри PDF, и только потом решает, какие страницы действительно требуют тяжёлой обработки.
PDF-пайплайны не должны начинаться с OCR.
Как найти инженера данных и других data-специалистов в 2026 году: полный гид — профили, стеки, каналы поиска и почему стандартный рекрутинг здесь не работает
На одну вакансию Data Engineer в России приходится в среднем 3–4 релевантных резюме. Сильный специалист одновременно рассматривает 5–7 предложений и принимает решение за 48–72 часа. Это не просто дефицит — это структурная асимметрия: хороших специалистов по данным катастрофически мало, все хотят одних и тех же, побеждает тот кто действует быстрее и…