PDF de programación - Optimización de modelos multidimensionales en SSAS

#SQLSatMexCity

Bienvenidos!!!

Optimización de modelos

multidimensionales en SSAS

Marco Tulio Gómez
[email protected]
MSc. Tecnologías de la Información
MCITP Business Intelligence Developer
MCTS Business Intelligence Development and Maintenance

Patrocinadores del SQL Saturday México 2015

Marco Tulio Gómez

 Mas de 15 años de experiencia en las áreas de desarrollo de

software, bases de datos e inteligencia de negocios

 Los últimos 10 años dedicado a productos Microsoft: SQL Server,

Analysis Services, Reporting Services, Integration Services,
Windows Server, C#, Azure, Power BI, etc.

 Consultor en inteligencia de negocios con productos Microsoft.
 Consultor en diseño y desarrollo de software.
 Arquitecto de soluciones de SSAS para Tigo Guatemala (Millicom

International Cellular).

Agenda

Introducción

Sistema operativo

Servicio de Analysis Services

Hardware

Diseño

Introducción - ¿Porque?

 ¿Porque hablar sobre mejora en desempeño?

 Normalmente no se considera en la fase de

desarrollo y despliegue de la solución.
 Requiere la combinación de diferentes

habilidades y conocimientos.

 Dificultad para organizar un plan de trabajo.

Introducción – Aspectos a considerar

La mejora en el desempeño de
cubos OLAP desarrollados con
SSAS dependerá de la correcta
combinación de cuatro
aspectos:

1. Hardware
2. Sistema Operativo
3. Servicios de Analysis Services
4. Diseño de base de datos y/o

cubos

Base de

Datos
OLAP
(Cubo)

SQL

Server
Analysis
Services

Hardware

Sistema
Operativo

Introducción – Momentos a monitorear

Diferentes momentos a los que se debe prestar atención
durante un proceso de optimización

Procesamiento

de

Dimensiones

Procesamiento
de Particiones

Actualización

de

Dimensiones

Respuesta a

Consultas

Agenda

Introducción

Sistema operativo

Servicio de Analysis Services

Hardware

Diseño

Sistema Operativo

 Aplicar mejoras en la configuración del sistema operativo es

una actividad que genera impacto inmediato.

 Muchas de las mejoras son fáciles y rápidas de aplicar.

Sistema Operativo - Configuración

 Efectos de presentación

 Ajustar para optimizar el desempeño

 Memoria virtual

 RAM x 1.5, preferiblemente en un disco

independiente

 Programación del procesador

 Servicios de segundo plano o background services

 Opciones de energía

 Alto desempeño o high performance

Agenda

Introducción

Sistema operativo

Servicio de Analysis Services

Hardware

Diseño

Servicio de Analysis Services

 Al igual que con el sistema operativo aplicar mejoras en la

configuración del servicio de Analysis Services es una
actividad que genera impacto inmediato.

 Distribución de datos: separar carpetas de data, temp, log y

backup

Servicio de Analysis Services - Configuración

 Consumo de memoria

 Memory \ LowMemoryLimit
 Memory \ TotalMemory Limit

 QueryLog

 CreateQueryLogTable
 QueryLogConnectionString
 QueryLogSampling
 QueryLogTableName

Servicio de Analysis Services - Configuración

 Lazzy Aggregations

 Olap \ LazyProcessing \ MaxCPUUsage
 Olap \ LazyProcessing \ MaxObjectsInParallel

 Aggregation Processing

 Olap \ Process \ AggregationMemoryLimitMin
 Olap \ Process \ AggregationMemoryLimitMax

 Threads \ Query

 ThreadPool\Query\MinThreads
 ThreadPool\Query\MaxThreads

 Threads \ Process

 ThreadPool\Process\MaxThreads
 ThreadPool\Process\MinThreads

Agenda

Introducción

Sistema operativo

Servicio de Analysis Services

Hardware

Diseño

Hardware

 Las optimizaciones de hardware se orientan

a aprovechar la infraestructura existente

 Es necesario prestar atención a los

siguientes aspectos
 Procesamiento
 Uso de memoria
 Almacenamiento y tiempos de I/O

Hardware - Procesamiento

 El primer indicador es la estadística de utilización del CPU

que se puede obtener con el Performance Monitor del
Sistema operativo
 Cantidad de cores

 Cubos a procesar y/o actualizar
 Particiones a procesar y/o actualizar
 Consultas simultaneas
 Usuarios simultáneos

Hardware - RAM

 Verificar que la cantidad de RAM disponible para SSAS y

otros servicios instalados sea suficiente.

 Verificar que estén definidos los limites de utilización de

memoria para cada servicio.

 Fijar como objetivo siempre disponer de memoria para
actividades del sistema operativo y tareas reactivas de
administración en caso de ser necesario.

 Mas RAM Mejor!

Hardware - Almacenamiento y tiempos de I/O

 SSAS hace uso intenso del I/O esto se observa en tiempo de

procesamiento como en tiempo de consulta

 Comprender la distribución física de los recursos
 Procurar tener suficiente espacio para los temporales que se

generan en tiempo de procesamiento

 Verificar con SQLIO

http://www.microsoft.com/en-us/download/details.aspx?id=20163

Agenda

Introducción

Sistema operativo

Servicio de Analysis Services

Hardware

Diseño

Diseño

 Las mejoras en diseño producen resultados significativos.
 Al realizar estas mejoras será necesario hacer un nuevo

despliegue y procesamiento de las soluciones.

 Muchas de las mejoras requieren de tiempos importantes

para ser realizadas.

Diseño - Dimensiones

 KeyColumns
 Esconder atributos que estan en jerarquias
 Esconder el surrogate key

 AttributeHierarchyVisible = false
 Definir criterio de ordenamiento

 OrderBy + OrderByAttribute

 Definir el default attribute member
 Remover el nivel all

Diseño - Dimensiones

 Relaciones entre atributos

 Definen dependencias jerárquicas entre atributos
 Estas relaciones deben estar respaldadas por los datos

Diseño - Dimensiones

 Relaciones Flexibles vs Rígidas

 Relaciones flexibles pueden cambiar en el tiempo por ejemplo un

cliente y la zona en que vive o trabaja.

 Relaciones rígidas no cambian en el tiempo por ejemplo la relación

entre año y mes.

Las relaciones rígidas demandan un menor procesamiento durante el
process update

Diseño - Dimensiones

 Jerarquías

 Naturales: están representadas en las relaciones entre atributos.
 No Naturales: no están representadas en las relaciones entre

atributos por lo tanto no están almacenadas en disco.

 ¿Atributo o propiedad?

 AttributeHierarchyEnabled = False

(*) No permite hacer slice and dice

Diseño - Dimensiones

 Cuidado con el tamaño de la dimensión

 Máximo almacenamiento 4GB

 StringStoresCompatibilityLevel
 1050 por default (máximo 4GB)
 1100 permite almacenar hasta 4 billones de strings únicos

 Cardinalidad muy alta  Menor Desempeño

 AttributeHierarchyEnabled = false
 AttributeHierarchyOptimizedState = NotOptimized

 Process Add

 Técnica para cargar información a la dimensión sin requerir un process

update.

Diseño - Particiones

 ¿Cuando Particionar?

 Mejorar tiempos de procesamiento
 Ganar flexibilidad en procesamiento
 Facilidad para incorporar nuevas fuentes (con la misma estructura)
 Mejorar respuesta de las consultas
 Manejar diferentes modelos de agregación

Diseño - Particiones

 Consideraciones

 Impacto en el process update.
 El limite de 20 millones se puede ignorar.
 Considerar la cantidad de cores disponibles

 Otros Beneficios

 Permite manejar particiones pequeñas en datos recientes y

particiones grandes para datos históricos.

 Permite manejar paralelismo durante las consultas

Diseño - Agregaciones

 Agregación es una estructura que almacena datos pre

calculados para mejorar el rendimiento de las consultas en
SSAS.

 Incrementa el tiempo de procesamiento.
 Dentro de un measure group es posible presentar diferentes

modelos de agregaciones para cada partición.

Diseño - Agregaciones

 Los diseños de agregaciones pueden ser generados por el

Aggregation Desing Wizard o por el usage based
optimization.

 Estimated Count y Partition Count son propiedades que

almacenan la estadística de cada partición.
 Por ejemplo el atributo date almacena 365 valores pero en una

partición solo se encuentra uno de esos valores.

Diseño – Cache Warming

 Busca llevar a memoria datos que anticipadamente se ha

determinado que serán consultados.

 Se puede lograr al ejecutar una serie de consultas o por

medio del comando CREATE CACHE

#sqlsatMexCity

Preguntas y Respuestas

http://www.marcotuliogomez.com

https://www.linkedin.com/in/mgomezgt

https://twitter.com/mgomezgt

[email protected]

Sea cual sea su pasión tenemos un capítulo virtual para usted!

24 Horas PASS en Español

1 y 2 Diciembre 2015

Este evento del 24 Horas de PASS en Español consta de 24 sesiones
en los días 1 y 2 de Diciembre en los cuales tendremos a MVPs,
Lideres de Comunidades y otros expertos en la Plataforma de Datos
de Microsoft exponiendo diversos temas sobre estas tecnologías y las
recientes tendencias en el manejo de datos y analíticos.

Regístrese YA!!!

#sqlsatMexCity

Evaluación

Sesión: http://www.sqlsaturday.com/457/sessions/sessionevaluation.aspx
Evento: http://www.sqlsaturday.com/457/eventeval.aspx

#SQLSatMexCity

Gracias!!!