Выявление проблем с производительностью

Преобразование и анализ данных с Microsoft Fabric

Luis Silva

Solution Architect - Data & AI

Мощности Fabric

Диаграмма, показывающая, что Fabric основан на хранилище OneLake и вычислительных мощностях, с выделением вычислительных мощностей

Мощности Fabric

Диаграмма, показывающая элементы Fabric на основе хранилища OneLake и вычислительных мощностей, с выделением увеличения вычислительных мощностей

SKU Fabric

SKU Fabric именуются от F2 до F2048.
Чем больше число, тем выше вычислительная мощность.
Можно сравнить с v-ядрами Power BI в качестве ориентира.

Таблица с перечнем доступных SKU Fabric Azure — от наименьшего F2 до наибольшего F2048

Проблемы выбора размера ресурсов

Диаграмма, показывающая исчерпание вычислительных ресурсов мощности Fabric

Недостаточная оценка ресурсов
Исчерпание вычислительных ресурсов ведёт к снижению производительности

Проблемы выбора размера ресурсов

Диаграмма, показывающая исчерпание вычислительных ресурсов мощности Fabric

Избыточная оценка ресурсов
Неиспользуемые вычислительные ресурсы увеличивают затраты

Автоматическое управление ресурсами

Bursting

Столбчатая диаграмма, иллюстрирующая концепцию bursting: всплеск нагрузки, временно превышающий установленный лимит мощности

Автоматическое управление ресурсами

Bursting
Smoothing

Столбчатая диаграмма, иллюстрирующая концепцию smoothing: всплеск нагрузки распределяется на более длительный период, чтобы не превысить лимит мощности

Автоматическое управление ресурсами

Bursting
Smoothing
Throttling

Столбчатая диаграмма, иллюстрирующая концепцию throttling: несколько запросов, превышающих лимит мощности, отклоняются

Мониторинг использования мощностей

Снимок экрана со страницей загрузки приложения Microsoft Fabric Capacity Metrics

Приложение Fabric Capacity Metrics

Использование вычислений во времени (CU%)
Время обработки
Количество операций/час
Количество пользователей/час

Снимок экрана части приложения Fabric Capacity Metrics с графиками использования CU, длительности, количества операций и пользователей

Мониторинг использования мощностей

Использование вычислений во времени (CU%)
Время обработки
Количество операций/час
Количество пользователей/час
Throttling

Снимок экрана части приложения Fabric Capacity Metrics с графиком throttling

Мониторинг использования мощностей

Использование вычислений во времени (CU%)
Время обработки
Количество операций/час
Количество пользователей/час
Throttling
Метрики по элементам

Снимок экрана части приложения Fabric Capacity Metrics с матрицей по элементам и операциям

Мониторинг использования мощностей

Использование вычислений во времени (CU%)
Время обработки
Количество операций/час
Количество пользователей/час
Throttling
Метрики по элементам
Хранилище

Снимок экрана части приложения Fabric Capacity Metrics с данными об использовании хранилища

Monitoring hub

Более детальное представление, чем в приложении Capacity Metrics
- Приложение Capacity Metrics: акцент на совокупном потреблении ресурсов во времени
- Monitoring hub: акцент на времени выполнения отдельных операций

Значки, представляющие конвейеры, потоки данных, лейкхаусы, ноутбуки, семантические модели и задания Spark

Monitoring hub

Снимок экрана Monitoring hub со списком ноутбуков, потоков данных и других элементов Fabric

Давайте потренируемся!

Преобразование и анализ данных с Microsoft Fabric