PDF de programación - Operational Data Store (ODS)

Actas del III Taller Nacional de Minería de Datos y Aprendizaje, TAMIDA2005, pp.359-365
ISBN: 84-9732-449-8 © 2005 Los autores, Thomson

Operational Data Store (ODS) Rosa María Castillo Div. de Servicios de Redes de Datos Telefónica I+D 28037 Madrid [email protected] Jesús Morata Div. DataWareHouse para Telefónica de España Telefónica I+D 28037 Madrid [email protected] Luis del Arbol Div. DataWareHouse para Telefónica de España Telefónica I+D 28037 Madrid [email protected] 1. Resumen El ODS es un sistema destinado a liberar a los sistemas operacionales de realizar las labores de query & reporting. Tiene como objetivo general unificar la plataforma de almacenamiento donde se copien los datos de todas las aplicaciones en un solo sistema. 2. Motivación. ¿Qué es el ODS? ODS es un sistema que recopila la información existente en los Sistemas Operacionales y la ofrece a los Sistemas Informacionales o directamente a los Usuarios Finales de Negocio. Para ello existe una plataforma común donde conviven tanto la información procedente de los Sistemas Operacionales (Subsistema ODS Replicación) como la información integrada en Sistemas Informacionales (Subsistema ODS Analítico). Esta plataforma contiene herramientas/procedimientos de extracción, transformación, carga y consulta de la información común para todas las aplicaciones que se encuentran en el entorno del ODS. Toda aplicación que desee entrar en el Sistema ODS deberá cubrir como mínimo el Subsistema ODS Replicación, es decir, deberá dejar la información para ser consultada por el usuario final y/o para ser fuente de información hacia sistemas informacionales. Una vez que la información esté almacenada en la parte operacional del ODS, esta deberá ser puesta a disposición de los usuarios para que pueda ser consultada. Para ello tendrá dos alternativas: • El Subsistema ODS Replicación podrá ser fuente de información hacia usuarios finales a través de una capa de presentación lo menos transformada posible a la información existente en los Sistemas Operacionales, pero intentando adaptar los datos operacionales hacia una información más sencilla de analizar. • Si la necesidad de información de los usuarios esta orientada a un análisis más complejo, la aplicación podrá optar por ofrecer la información a través de un sistema informacional (Data Mart) implementado dentro del ODS (sobre el Subsistema ODS Analítico) o fuera del entorno ODS. En cualquier caso, siempre que una aplicación entre en el entorno ODS deberá suministrar como mínimo al Subsistema ODS Replicación la información que necesite de los sistemas operacionales y que aun no se encuentre almacenada en el ODS. Los sistemas informacionales: • Se alimentan de datos provenientes de los sistemas de gestión u operacionales, con la periodicidad que se precise. Para esto, es necesario diseñar los procesos de carga de datos de los sistemas al ODS, y configurar las autorizaciones de acceso pertinentes. • Sirven para consultar datos (Query), generar informes (Reporting) o realizar estudios y análisis de información (OLAP, DSS, EIS, Cuadros de Mando, Data Mining, etc). Con ODS se solucionan varios de los problemas inherentes de los Data Marts tradicionales: 360 III Taller de Minería de Datos y Aprendizaje

Figura 1. ODS. Arquitectura Lógica • La extracción de información no afecta a la ejecución de trabajos en los Sistemas Operacionales. • La información se replica en un sistema paralelo, y no en los propios Sistemas Operacionales. • Se evita la sobrecarga de los equipos donde se albergan los Sistemas Operacionales con acciones externas al propio sistema propietario. Por lo tanto, aporta las siguientes ventajas: • Ahorro de costes por la reutilización de recursos. • Disponibilidad de un dato único, evitando múltiples copias del mismo dato en sistemas dispersos. • Posibilidad de cruzar la información de diferentes aplicaciones. La arquitectura del ODS se basa en un gestor de base de datos Sybase Adaptive Server IQ Multiplex desarrollado específicamente para cubrir las necesidades de un sistema de Consulta y Análisis de Información. La modelización física difiere algo de los sistemas tradicionales, por lo que existen diferencias detalladas en los procedimientos al efecto. 3. Descripción funcional La orientación del Sistema ODS es hacia un sistema informacional, no hacia un sistema transaccional, ya que la funcionalidad principal es el ser fuente de información para usuarios finales directamente o a través de sistemas informacionales. Por tanto, la disponibilidad y criticidad del sistema deben ser similares a la de un sistema informacional (como es el caso de un Data Warehouse) teniendo en cuenta que los tiempos de respuesta y la disponibilidad de la información son lo más óptimos posible pero sin tener la necesidad de llegar al mismo nivel que un sistema transaccional. Debido a la posible dependencia de información que podría existir entre los distintos sistemas operacionales, el ODS cubre la funcionalidad que estos ofrecen pero teniendo en cuenta las premisas anteriores, es decir, que terceros sistemas que accedan al Sistema ODS para recoger información deben tener una necesidad de dicha información similar a la de un sistema informacional, y que la disponibilidad de la información no va ser como si esta se encontrase en un sistema transaccional. Con esto se consigue que el Sistema ODS no sea el pivote sobre el que giren todos los demás sistemas, sino únicamente los sistemas informacionales, con lo que una inactividad del III Taller Nacional de Minería de Datos y Aprendizaje, TAMIDA2005 361

Figura 2. ODS. Arquitectura de Datos ODS no provocaría dependencias en posibles sistemas críticos. 4. Arquitectura de Datos El Sistema ODS mantendrá una interfaz de datos con los sistemas y usuarios con los que interactúa: • Interfaz de entrada (Operacionales): Interfaz que se establece con los sistemas operacionales mediante la cual se recoge la información de estos para almacenarla en el Subsistema ODS Replicación. • Interfaz de salida: Interfaz que el Subsistema ODS Replicación mantiene con: - El Subsistema ODS Analítico para suministrar la información a los sistemas informacionales que se encuentran dentro del entorno ODS. - Los sistemas informacionales que se encuentran fuera del alcance del entorno ODS. - Ciertos sistemas operacionales que necesitan información con una baja criticidad. • Capa de presentación: Interfaz que el Subsistema ODS Replicación mantiene con los usuarios finales. La información de los sistemas operacionales, que se encuentra almacenada en el Subsistema ODS Replicación es accesible para los usuarios a través de una capa de presentación. Esta capa se crea mediante Vistas a partir de las Tablas de la Base de Datos. • Interfaz de los Sistemas Informacionales: Interfaz creada para la accesibilidad de los usuarios finales a los sistemas informacionales del ODS. Esta interfaz se establecerá a partir de las herramientas de usuario final utilizadas por cada uno de los sistemas. 5. Servicios ofrecidos El Sistema ODS ofrece diferentes tipos de servicios, dependiendo del destino de la información. 5.1. Servicios a usuarios finales • A través de una capa de presentación de la información que se encuentre en el Subsistema ODS Replicación. Esta franja de presentación tendrá como primer nivel una capa de VISTAS de la Base de Datos, no permitiendo en ningún caso que los usuarios puedan acceder directamente a la información que se almacena en las tablas de la Base de Datos, consiguiendo por un lado una mayor seguridad de los datos y por otro ofrecer una visión de la información un poco más cercana a la visión de negocio de los 362 III Taller de Minería de Datos y Aprendizaje

usuarios finales. Este es un servicio similar al Ofrecido por el Centro de Información. • A través de Subsistemas Informacionales que convivan dentro del Sistema ODS. Estos Subsistemas recogerán la información a partir del Subsistema ODS Replicación y seguirán la Arquitectura específica del entorno ODS. Tendrán herramientas/procedimientos de extracción, carga y consulta de la información, comunes para todos y definidos a medida que el Sistema ODS evolucione. La forma de abastecer de información a estos sistemas se realizará mediante acceso directo desde la Base de Datos del Sistema Informacional a la Base de Datos del Subsistema ODS Replicación. 5.2. Servicios a otros sistemas • A Sistemas Informacionales que no se encuentren dentro de la plataforma definida para el Sistema ODS. Es decir podrán ser Data Marts que no sigan las especificaciones del ODS pero que si necesiten información que se encuentre o pueda ser almacenada en el Subsistema ODS Replicación. La forma de abastecer de información a estos sistemas se realizará de forma similar a como se realiza cuando el Sistema Informacional se encuentra dentro del ODS: - Ficheros planos descargados a partir de las tablas de la Base de Datos del Subsistema ODS Replicación. - Acceso directo desde el Sistema Informacional a la Base de Datos del Subsistema ODS Replicación. • A Sistemas Operacionales con ciertas necesidades informacionales de otros sistemas para su operativa, teniendo en cuenta que la criticidad de la información que solicitan debe ser muy baja. Esto es debido a que las funcionalidades principales del ODS están orientadas a ofrecer información de negocio directamente a usuarios finales o a través de Subsistemas Informacionales que convivan dentro del Sistema ODS. Este servicio pretende cubrir la funcionalidad de ofrecida por los Sistemas Operacionales a terceros sistemas a través de servicios NA. En el ámbito del ODS, esta funcionalidad se realizará mediante la implementación de procedimientos con interfaz Java para los casos en los que los sistemas que soliciten este s