Обзор схемы

Данные IoT Query организованы на уровнях Raw, Transformation и Insight. Ознакомьтесь с доступными схемами, структурами таблиц и узнайте, как ссылаться на них в SQL

В этом разделе представлен Обзор IoT Query структуры схем данных, помогая вам понять, как данные организованы и как эффективно получать к ним доступ. Хранилище данных предназначено для того, чтобы предоставить вам полный и гибкий доступ к данным вашей платформы через структурированную систему баз данных.

Что вы узнаете:

• Как данные структурированы в слоях и схемах

• Ключевые таблицы в каждой схеме и что они содержат

• Как таблицы данных связаны между собой

• Как получать доступ к данным с помощью SQL-запросов

• Как работает проверка данных

• Предстоящие улучшения структуры данных

Ключевые термины:

• Слой: Уровень в хранилище данных, который представляет этап обработки, организации или доступа к данным, каждый со своей отдельной функцией.

• Схема: Логическая группировка объектов базы данных (таблицы, представления и т. д.)

Структура данных

Этот IoT Query использует многоуровневую архитектуру хранения для организации ваших данных. Эта архитектура обеспечивает надежность, производительность и масштабируемость, обеспечивая при этом надлежащую изоляцию данных между клиентами.

Слои данных

Система использует трехслойную модель организации данных:

Слой сырых данных

• Сырые данные с минимальной трансформацией

• Прямой прием из источников бизнес-данных и телематических данных

• Исходная структура данных с единообразными правилами именования

• Medallion - Bronze

слой преобразования

• Уже обработанные данные с проверкой и обогащением

• Преобразованные структуры для улучшенной аналитики

• Введены контроль качества данных и применение бизнес-правил

• Medallion - Silver

Слой аналитики

• Наборы данных, готовые для бизнеса и оптимизированные для отчетности

• Предварительно агрегированные метрики и денормализованные структуры

• Подготовленные представления, согласованные с конкретными процессами бизнес-отчетности

• Medallion - Gold

Далее в этом разделе документации вы найдете более подробные схемы данных для каждого слоя.

Архитектура базы данных

У каждого клиента есть выделенный экземпляр базы данных, чтобы обеспечить изоляцию данных и охрану. В этой базе данных:

Схема	Описание	Содержимое
raw_business_data	Бизнес-сущности и операционные данные	Основные таблицы сущностей, операционные данные, справочные данные, исторические данные, таблицы связей
raw_telematics_data	Мониторинг устройств и данные датчиков	Основные данные мониторинга, входные данные, данные состояния
BDR	Актив и управление запасами	Определения типов активов, настраиваемые поля, экземпляры активов, связи активов, иерархии запасов, геопространственные данные
Метаданные	Справочные данные системы	таблица description_parameters

При запросе данных необходимо указать как схему (например, raw_business_data) так и имя таблицы (например, объекты):

SELECT * FROM raw_business_data.objects;

Метаданные клиента и изоляция данных

Система использует таблицы метаданных, чтобы обеспечить надлежащую изоляцию данных и поддержку многопользовательской среды:

• Метаданные дилера отслеживают отношения между дилером и клиентом и параметры инфраструктуры

• Метаданные клиента сопоставляют бизнес-данные и телематические данные между схемами

• Сопоставление устройства и клиента обеспечивает корректную привязку телематических данных к нужному клиенту

Этот слой метаданных обеспечивает следующее:

• Каждый клиент может получать доступ только к своим данным

• Телематические и бизнес-данные можно корректно объединять

• Операции на уровне системы правильно сегментируются по клиентам