Data Fabric - Конструктор ваших витрин данных

Data Fabric - это конструктор ваших витрин данных. Мы берем ваши сложные SQL-запросы, выполняем их по расписанию и готовим для вас оптимизированные таблицы, чтобы ваши отчеты в BI летали.

Data Fabric - Конструктор ваших витрин данных

Инкрементальное обновление

Молниеносные отчеты без лишней нагрузки Превратите ваши сложные SQL-запросы в готовые к использованию таблицы, которые ежедневно автоматически пополняются свежими данными.Как это работает:

  1. Создайте SQL-запрос со всей необходимой логикой преобразований (JOIN, агрегации, фильтры).
  2. Добавьте условие WHERE date BETWEEN '$start_date
AND '$end_date
- система автоматически подставит в него нужные даты для каждого нового запуска.
  • В поле Date укажите, как называется ваша дата по которой Data Fabric будет выполнять условие с фильтрацией дат. Важно, если вы в SQL запросе указываете "date as created_at" в поле Date указываем created_at.
  • Data Fabric выполнит ваш запрос один раз, создав новую, оптимизированную таблицу с результатами. Далее процесс полностью автоматизирован: система будет инкрементально (только за выбранный диапазон не более 30 дней) обновлять эту таблицу, выполняя ваш SQL запрос только для новых данных.
  • Что вы получаете?

    1. Скорость: Ваши BI-системы подключаются к уже готовой таблице. Запросы выполняются мгновенно, а отчеты обновляются в разы быстрее.
    2. Эффективность: Снимается нагрузка с BI-систем и исходной базы данных. Сложные вычисления выполняются в фоне, один раз в день.
    3. Простота: Вам больше не нужно хранить и поддерживать громоздкие SQL-запросы в BI. Вся логика надежно хранится в Retrafic. Data Fabric автоматически готовит для вас витрину данных, избавляя от рутины и ускоряя получение готовой аналитики.

    Справочники по SQL запросам

    Автоматическое обновление ключевых данных по расписаниюРегулярно получайте готовые таблицы-справочники, которые полностью пересчитываются по вашему SQL-запросу каждый день. Идеально для данных, где важна актуальность на текущий момент (курсы валют, справочники товаров, текущие балансы и т.д.).Как это работает:

    1. Напишите SQL-запрос, который возвращает актуальные на данный момент данные. Например, получение последнего курса валюты или текущего статуса заказов.
    2. Data Fabric ежедневно выполняет ваш запрос по расписанию. Процесс обновления происходит в два этапа:
    • Полная очистка: Существующие данные в таблице полностью удаляются (TRUNCATE).
    • Новая запись: Выполняется ваш SQL-запрос, и результат записывается в таблицу заново. Ваша BI-система подключается к этой таблице и всегда видит только самые свежие данные, рассчитанные на момент последнего запуска.

    Что вы получаете?

    1. Актуальность: Вы всегда работаете с данными, которые отражают ситуацию "на сейчас". Каждый день справочник полностью обновляется.
    2. Производительность: Ваши дашборды загружаются быстро, так как подключаются к простой таблице, а не к тяжелому запросу.
    3. Автоматизация: Вам не нужно вручную перезапускать запросы и обновлять данные — система делает это за вас.

    Важное ограничение: Пожалуйста, не используйте в вашем SQL-запросе колонку с именем ID. Это служебное поле зарезервировано системой.
    Рекомендуем изучить видео инструкцию перед работой с инструментом:

    Начать дискуссию
    AND '$end_date AND '$end_date - система автоматически подставит в него нужные даты для каждого нового запуска.
  • В поле Date укажите, как называется ваша дата по которой Data Fabric будет выполнять условие с фильтрацией дат. Важно, если вы в SQL запросе указываете "date as created_at" в поле Date указываем created_at.
  • Data Fabric выполнит ваш запрос один раз, создав новую, оптимизированную таблицу с результатами. Далее процесс полностью автоматизирован: система будет инкрементально (только за выбранный диапазон не более 30 дней) обновлять эту таблицу, выполняя ваш SQL запрос только для новых данных.
  • Что вы получаете?

    1. Скорость: Ваши BI-системы подключаются к уже готовой таблице. Запросы выполняются мгновенно, а отчеты обновляются в разы быстрее.
    2. Эффективность: Снимается нагрузка с BI-систем и исходной базы данных. Сложные вычисления выполняются в фоне, один раз в день.
    3. Простота: Вам больше не нужно хранить и поддерживать громоздкие SQL-запросы в BI. Вся логика надежно хранится в Retrafic. Data Fabric автоматически готовит для вас витрину данных, избавляя от рутины и ускоряя получение готовой аналитики.

    Справочники по SQL запросам

    Автоматическое обновление ключевых данных по расписаниюРегулярно получайте готовые таблицы-справочники, которые полностью пересчитываются по вашему SQL-запросу каждый день. Идеально для данных, где важна актуальность на текущий момент (курсы валют, справочники товаров, текущие балансы и т.д.).Как это работает:

    1. Напишите SQL-запрос, который возвращает актуальные на данный момент данные. Например, получение последнего курса валюты или текущего статуса заказов.
    2. Data Fabric ежедневно выполняет ваш запрос по расписанию. Процесс обновления происходит в два этапа:

    Что вы получаете?

    1. Актуальность: Вы всегда работаете с данными, которые отражают ситуацию "на сейчас". Каждый день справочник полностью обновляется.
    2. Производительность: Ваши дашборды загружаются быстро, так как подключаются к простой таблице, а не к тяжелому запросу.
    3. Автоматизация: Вам не нужно вручную перезапускать запросы и обновлять данные — система делает это за вас.

    Важное ограничение: Пожалуйста, не используйте в вашем SQL-запросе колонку с именем ID. Это служебное поле зарезервировано системой.
    Рекомендуем изучить видео инструкцию перед работой с инструментом:

    Начать дискуссию
    - система автоматически подставит в него нужные даты для каждого нового запуска.","В поле Date укажите, как называется ваша дата по которой Data Fabric будет выполнять условие с фильтрацией дат. Важно, если вы в SQL запросе указываете \"date as created_at\" в поле Date указываем created_at.","Data Fabric выполнит ваш запрос один раз, создав новую, оптимизированную таблицу с результатами. Далее процесс полностью автоматизирован: система будет инкрементально (только за выбранный диапазон не более 30 дней) обновлять эту таблицу, выполняя ваш SQL запрос только для новых данных."],"type":"OL"}},{"type":"text","cover":false,"hidden":false,"anchor":"","data":{"text":"\u003Cp\u003EЧто вы получаете?\u003C/p\u003E"}},{"type":"list","cover":false,"hidden":false,"anchor":"","data":{"items":["Скорость: Ваши BI-системы подключаются к уже готовой таблице. Запросы выполняются мгновенно, а отчеты обновляются в разы быстрее.","Эффективность: Снимается нагрузка с BI-систем и исходной базы данных. Сложные вычисления выполняются в фоне, один раз в день.","Простота: Вам больше не нужно хранить и поддерживать громоздкие SQL-запросы в BI. Вся логика надежно хранится в Retrafic. Data Fabric автоматически готовит для вас витрину данных, избавляя от рутины и ускоряя получение готовой аналитики."],"type":"OL"}},{"type":"header","cover":false,"hidden":false,"anchor":"","data":{"style":"h2","text":"Справочники по SQL запросам"}},{"type":"text","cover":false,"hidden":false,"anchor":"","data":{"text":"\u003Cp\u003EАвтоматическое обновление ключевых данных по расписаниюРегулярно получайте готовые таблицы-справочники, которые полностью пересчитываются по вашему SQL-запросу каждый день. Идеально для данных, где важна актуальность на текущий момент (курсы валют, справочники товаров, текущие балансы и т.д.).Как это работает:\u003C/p\u003E"}},{"type":"list","cover":false,"hidden":false,"anchor":"","data":{"items":["Напишите SQL-запрос, который возвращает актуальные на данный момент данные. Например, получение последнего курса валюты или текущего статуса заказов.","Data Fabric ежедневно выполняет ваш запрос по расписанию. Процесс обновления происходит в два этапа:"],"type":"OL"}},{"type":"list","cover":false,"hidden":false,"anchor":"","data":{"items":["Полная очистка: Существующие данные в таблице полностью удаляются (TRUNCATE).","Новая запись: Выполняется ваш SQL-запрос, и результат записывается в таблицу заново. Ваша BI-система подключается к этой таблице и всегда видит только самые свежие данные, рассчитанные на момент последнего запуска."],"type":"UL"}},{"type":"text","cover":false,"hidden":false,"anchor":"","data":{"text":"\u003Cp\u003EЧто вы получаете?\u003C/p\u003E"}},{"type":"list","cover":false,"hidden":false,"anchor":"","data":{"items":["Актуальность: Вы всегда работаете с данными, которые отражают ситуацию \"на сейчас\". Каждый день справочник полностью обновляется.","Производительность: Ваши дашборды загружаются быстро, так как подключаются к простой таблице, а не к тяжелому запросу.","Автоматизация: Вам не нужно вручную перезапускать запросы и обновлять данные — система делает это за вас."],"type":"OL"}},{"type":"text","cover":false,"hidden":false,"anchor":"","data":{"text":"\u003Cp\u003EВажное ограничение: Пожалуйста, не используйте в вашем SQL-запросе колонку с именем ID. Это служебное поле зарезервировано системой.\u003Cbr /\u003EРекомендуем изучить видео инструкцию перед работой с инструментом:\u003C/p\u003E"}},{"type":"video","cover":false,"hidden":false,"anchor":"","data":{"title":"","video":{"type":"video","data":{"thumbnail":{"type":"image","data":{"uuid":"819b80db-05c0-5f45-a142-574a04624c38","width":1278,"height":720,"size":165286,"type":"jpg","color":"eff1f3","hash":"","external_service":[],"base64preview":"/9j/4AAQSkZJRgABAQAAAQABAAD/2wBDAAUDBAQEAwUEBAQFBQUGBwwIBwcHBw8LCwkMEQ8SEhEPERETFhwXExQaFRERGCEYGh0dHx8fExciJCIeJBweHx7/2wBDAQUFBQcGBw4ICA4eFBEUHh4eHh4eHh4eHh4eHh4eHh4eHh4eHh4eHh4eHh4eHh4eHh4eHh4eHh4eHh4eHh4eHh7/wAARCAAKAAoDASIAAhEBAxEB/8QAFQABAQAAAAAAAAAAAAAAAAAABAj/xAAgEAACAgIABwAAAAAAAAAAAAABAgMRAAQSISIxMkFh/8QAFQEBAQAAAAAAAAAAAAAAAAAAAQL/xAAVEQEBAAAAAAAAAAAAAAAAAAAAAf/aAAwDAQACEQMRAD8AqzXLrDPUjjhYV1Y3UZm1YmZiWKKSb78sBD4kejV/cShIQAGgAKAyqI//2Q=="}},"width":1278,"height":720,"time":0,"external_service":{"name":"vk","id":"-132757131_456239057","additional_data":{"hash":"3058d1f30144ef50","o_id":"-132757131","v_id":"456239057"}}}}}}],"customUri":"data-fabric-konstruktor-vitrin-dannykh","commentEditor":{"enabled":true,"who":null,"text":"","until":null,"reason":null,"type":"everybody"},"commentsSeenCount":null,"counters":{"comments":0,"favorites":0,"reposts":0,"views":29,"hits":11,"reads":null,"online":0,"timespent":null,"shares":0,"reactions":0,"total":40},"isPinned":false,"isNews":false,"ogTitle":null,"ogDescription":"Data Fabric, конструктор витрин данных, инкрементальное обновление, автоматизация SQL-запросов, мгновенные отчеты, актуальные данные для BI.","isAudioAvailable":false,"audioUrl":null,"isAudioAvailableToGenerate":false,"summaryContent":null,"isExistSummaryContent":false,"reactions":{"counters":[],"reactionId":0},"url":"https://vc.ru/id1418063/2298351-data-fabric-konstruktor-vitrin-dannykh","repostData":null,"dateFavorite":0,"isFavorited":false,"warningFromEditorTitle":null,"warningFromEditor":null,"subscribedToTreads":false,"author":{"id":1418063,"name":"Retrafic","nickname":null,"description":"Аналитика для онлайн школ, маркетплейса, платформа для аналитика данных. Сбор и хранение данных в MySQL для онлайн-школ и маркетплейс Wildberries","uri":"","avatar":{"type":"image","data":{"uuid":"44065914-3240-5edd-893f-e9d7ae47b1dc","width":960,"height":1280,"size":186214,"type":"jpg","color":"c4c4c4","hash":"","external_service":[]}},"cover":{"cover":{"type":"image","data":{"uuid":"4bde94c6-b884-5136-b9f8-5df764d282d3","width":1280,"height":720,"size":59727,"type":"png","color":"e3f2f9","hash":"","external_service":[]}},"cover_y":0},"achievements":[{"title":"3 года на vc.ru","code":"registration_3_years","description":"Провёл 3 года вместе с vc.ru. Получена 28 января 2026.","previewUuid":"d9d72ac5-bcb5-55e0-8c72-b99251e5cdd9","formats":{"glb":"https://static.vc.ru/achievements/shark.glb","usdz":"https://static.vc.ru/achievements/shark.usdz"},"viewData":{"contentColor":"#8E6F09","textMaxWidth":0.66796875,"textX":0.5205078125,"textY":0.341796875,"logoX":0.5205078125,"logoY":0.4609375,"logoXNoText":0.5,"logoYNoText":0.3662109375},"id":6530033,"userId":1418063,"count":0,"shareImage":"https://api.vc.ru/achievements/share/6530033"},{"title":"Год на vc.ru","code":"registration_1_year","description":"Первый год с vc.ru. Получена 24 июля 2025.","previewUuid":"0d11c244-49de-50e7-894e-b9b27945d42b","formats":{"glb":"https://static.vc.ru/achievements/fish.glb","usdz":"https://static.vc.ru/achievements/fish.usdz"},"viewData":{"contentColor":"#C67AA3","textMaxWidth":0.634765625,"textX":0.5888671875,"textY":0.54296875,"logoX":0.5859375,"logoY":0.6669921875,"logoXNoText":0.6044921875,"logoYNoText":0.5439453125},"id":4035004,"userId":1418063,"count":0,"shareImage":"https://api.vc.ru/achievements/share/4035004"}],"lastModificationDate":1776192933,"isSubscribed":false,"isSubscribedToNewPosts":false,"isMuted":false,"isAvailableForMessenger":true,"badgeId":null,"isDonationsEnabled":false,"isPlusGiftEnabled":true,"isUnverifiedBlogForCompanyWithoutPro":true,"isRemovedByUserRequest":false,"isFrozen":false,"isDisabledAd":false,"isPlus":false,"isVerified":false,"isPro":false,"yandexMetricaId":null,"badge":null,"isOnline":false,"tgChannelShortname":null,"category":{"discoveryType":"blogs"},"counters":{"subscribers":2},"isUnsubscribable":true,"type":1,"subtype":"personal_blog"},"subsite":{"id":1418063,"name":"Retrafic","nickname":null,"description":"Аналитика для онлайн школ, маркетплейса, платформа для аналитика данных. Сбор и хранение данных в MySQL для онлайн-школ и маркетплейс Wildberries","uri":"","avatar":{"type":"image","data":{"uuid":"44065914-3240-5edd-893f-e9d7ae47b1dc","width":960,"height":1280,"size":186214,"type":"jpg","color":"c4c4c4","hash":"","external_service":[]}},"cover":{"cover":{"type":"image","data":{"uuid":"4bde94c6-b884-5136-b9f8-5df764d282d3","width":1280,"height":720,"size":59727,"type":"png","color":"e3f2f9","hash":"","external_service":[]}},"cover_y":0},"achievements":[{"title":"3 года на vc.ru","code":"registration_3_years","description":"Провёл 3 года вместе с vc.ru. Получена 28 января 2026.","previewUuid":"d9d72ac5-bcb5-55e0-8c72-b99251e5cdd9","formats":{"glb":"https://static.vc.ru/achievements/shark.glb","usdz":"https://static.vc.ru/achievements/shark.usdz"},"viewData":{"contentColor":"#8E6F09","textMaxWidth":0.66796875,"textX":0.5205078125,"textY":0.341796875,"logoX":0.5205078125,"logoY":0.4609375,"logoXNoText":0.5,"logoYNoText":0.3662109375},"id":6530033,"userId":1418063,"count":0,"shareImage":"https://api.vc.ru/achievements/share/6530033"},{"title":"Год на vc.ru","code":"registration_1_year","description":"Первый год с vc.ru. Получена 24 июля 2025.","previewUuid":"0d11c244-49de-50e7-894e-b9b27945d42b","formats":{"glb":"https://static.vc.ru/achievements/fish.glb","usdz":"https://static.vc.ru/achievements/fish.usdz"},"viewData":{"contentColor":"#C67AA3","textMaxWidth":0.634765625,"textX":0.5888671875,"textY":0.54296875,"logoX":0.5859375,"logoY":0.6669921875,"logoXNoText":0.6044921875,"logoYNoText":0.5439453125},"id":4035004,"userId":1418063,"count":0,"shareImage":"https://api.vc.ru/achievements/share/4035004"}],"lastModificationDate":1776192933,"isSubscribed":false,"isSubscribedToNewPosts":false,"isMuted":false,"isAvailableForMessenger":true,"badgeId":null,"isDonationsEnabled":false,"isPlusGiftEnabled":true,"isUnverifiedBlogForCompanyWithoutPro":true,"isRemovedByUserRequest":false,"isFrozen":false,"isDisabledAd":false,"isPlus":false,"isVerified":false,"isPro":false,"yandexMetricaId":null,"badge":null,"isOnline":false,"tgChannelShortname":null,"category":{"discoveryType":"blogs"},"counters":{"subscribers":2},"isUnsubscribable":true,"type":1,"subtype":"personal_blog"},"donations":{"amount":0,"isDonated":false},"isBlur":false,"keywords":[],"media":{"type":"image","data":{"uuid":"9773ba2a-52c9-5dc2-8b83-7879a037deec","width":1200,"height":1200,"size":754123,"type":"jpg","color":"0f1f29","hash":"","external_service":[],"base64preview":"/9j/4AAQSkZJRgABAQAAAQABAAD/2wBDAAEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQH/2wBDAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQEBAQH/wAARCAAKAAoDASIAAhEBAxEB/8QAFgABAQEAAAAAAAAAAAAAAAAABwgK/8QAHRAAAwEBAQADAQAAAAAAAAAAAQIDBAUGABEhEv/EABQBAQAAAAAAAAAAAAAAAAAAAAf/xAAeEQADAQACAgMAAAAAAAAAAAABAgMEERMABRIhIv/aAAwDAQACEQMRAD8Ayy87LhHiez53ubreV4Hbrm0YcKc+lVr6GF+lse/Ijn1wHks0uTrznClpdHTtfVfNpzQlRAxAuHyUVWU+ryLTkBNLXnB71RB/K0s7/TPV1AajMAzOSWAJI+T57jsda9PMWt1OjayLa6Vru00olm0hmsrvUstWZVY0BDllBJ+wD8NqbNjUdm1aSxdiSb1JJLEkkl/skn9JP6T8QNO1MtCOg6HYS5pezEqvVHiaLNZok15JA+JYszszEt9F3rfSvtzhk1rkTsqxjnySE2cXaRs5d2rS7rNA9KUb8JOaqqTA8//Z"}},"customCover":null,"robotsTag":"noindex","categories":[2],"isAnonymized":true}}; AND '$end_date - система автоматически подставит в него нужные даты для каждого нового запуска.
  • В поле Date укажите, как называется ваша дата по которой Data Fabric будет выполнять условие с фильтрацией дат. Важно, если вы в SQL запросе указываете "date as created_at" в поле Date указываем created_at.
  • Data Fabric выполнит ваш запрос один раз, создав новую, оптимизированную таблицу с результатами. Далее процесс полностью автоматизирован: система будет инкрементально (только за выбранный диапазон не более 30 дней) обновлять эту таблицу, выполняя ваш SQL запрос только для новых данных.
  • Что вы получаете?

    1. Скорость: Ваши BI-системы подключаются к уже готовой таблице. Запросы выполняются мгновенно, а отчеты обновляются в разы быстрее.
    2. Эффективность: Снимается нагрузка с BI-систем и исходной базы данных. Сложные вычисления выполняются в фоне, один раз в день.
    3. Простота: Вам больше не нужно хранить и поддерживать громоздкие SQL-запросы в BI. Вся логика надежно хранится в Retrafic. Data Fabric автоматически готовит для вас витрину данных, избавляя от рутины и ускоряя получение готовой аналитики.

    Справочники по SQL запросам

    Автоматическое обновление ключевых данных по расписаниюРегулярно получайте готовые таблицы-справочники, которые полностью пересчитываются по вашему SQL-запросу каждый день. Идеально для данных, где важна актуальность на текущий момент (курсы валют, справочники товаров, текущие балансы и т.д.).Как это работает:

    1. Напишите SQL-запрос, который возвращает актуальные на данный момент данные. Например, получение последнего курса валюты или текущего статуса заказов.
    2. Data Fabric ежедневно выполняет ваш запрос по расписанию. Процесс обновления происходит в два этапа:

    Что вы получаете?

    1. Актуальность: Вы всегда работаете с данными, которые отражают ситуацию "на сейчас". Каждый день справочник полностью обновляется.
    2. Производительность: Ваши дашборды загружаются быстро, так как подключаются к простой таблице, а не к тяжелому запросу.
    3. Автоматизация: Вам не нужно вручную перезапускать запросы и обновлять данные — система делает это за вас.

    Важное ограничение: Пожалуйста, не используйте в вашем SQL-запросе колонку с именем ID. Это служебное поле зарезервировано системой.
    Рекомендуем изучить видео инструкцию перед работой с инструментом:

    Начать дискуссию