Metadados e Operações OLAP

Prévia do material em texto

INTELIGÊNCIA EMPRESARIAL
Aula 8 - Metadados e Operações OLAP
 
Conteúdo Programático desta aula
Conceitos e principais características dos Metadados
Principais operações OLAP
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
METADADOS
A definição mais simples de metadados é que eles são dados sobre dados – mais especificamente, informações (dados) sobre um determinado conteúdo (os dados).
Os metadados são utilizados para facilitar o entendimento, o uso e o gerenciamento de dados.
Um registro de metadados consiste de alguns elementos pré-definidos que representam determinados atributos de um recurso, sendo que cada elemento pode ter um ou mais valores. 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
METADADOS
“Metadado é uma abstração do dado capaz, por exemplo, de indicar se uma determinada base de dados existe, quais são os atributos de uma tabela, tais como: tamanho e/ou formato.”
			(IMMON, Willian H. Enterprise meta dada. DM Review Magazine, v.8. n. 10, Nov 1998)
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
METADADOS
O metadados é extremamente importante para a organização pois transforma dados em informação empresarial, aumentando a produtividade  e melhorando a tomada de decisão
As regras de negócio das aplicações alternam de forma muito rápida, o que implica no fato das aplicações precisarem ser desenvolvidas rapidamente e de forma flexível.
(Adaptado de: Cristofoli, F – Metadados – FEA/USP, disponível em http://stoa.usp.br/cristofoli/files/675/6553/Slides+-+Metadados.pdf, acesso em 26 de março de 2012)
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
IMPORTÂNCIA DO METADADOS
Os metadados asseguram a correta interpretação ( baseado em atividades, objetos, relações e regras) do que os dados realmente significam para o negócio. Exemplo:
O que é lucro?
Lucro = receita das vendas menos os custos de produção
(Adaptado de: Cristofoli, F – Metadados – FEA/USP, disponível em http://stoa.usp.br/cristofoli/files/675/6553/Slides+-+Metadados.pdf, acesso em 26 de março de 2012)
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
IMPORTÂNCIA DO METADADOS
Ou, é um cálculo mais complicado como:
“O Total das receitas anuais, menos
A soma do custo médio real por produto, menos
Overhead deduzido de cada produto acumulado da produção anual, menos
Gratificações, menos
Cupons de descontos, dividido por doze”
(Adaptado de: Cristofoli, F – Metadados – FEA/USP, disponível em http://stoa.usp.br/cristofoli/files/675/6553/Slides+-+Metadados.pdf, acesso em 26 de março de 2012)
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Será que toda organização tem a mesma compreensão de lucro? Existe somente um cálculo para o lucro?
Se existem diversas interpretações para o lucro, todas são verdadeiras?
IMPORTÂNCIA DO METADADOS
(Adaptado de: Cristofoli, F – Metadados – FEA/USP, disponível em http://stoa.usp.br/cristofoli/files/675/6553/Slides+-+Metadados.pdf, acesso em 26 de março de 2012)
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Se existirem várias versões para o cálculo de lucro, vários elementos devem ser criados, cada um com o seu próprio nome, sua definição, regras, conteúdo, relacionamentos ... e assim por diante.
Toda esta informação sobre lucro é metadado.
“A finalidade principal dos metadados é documentar e organizar de forma estruturada os dados das organizações, com o objetivo de minimizar duplicação de esforços e facilitar a manutenção dos dados” (Moriarty)	
IMPORTÂNCIA DO METADADOS
(Adaptado de: Cristofoli, F – Metadados – FEA/USP, disponível em http://stoa.usp.br/cristofoli/files/675/6553/Slides+-+Metadados.pdf,
 acesso em 26 de março de 2012)
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
TIPOS DE METADADOS
Em um projeto de DW, os metadados devem gerar e gerenciar uma documentação sobre o levantamento de dados, do banco de dados, relatórios a serem gerados, origem dos dados que alimentam do DW , processos de extração, tratamento e rotinas de carga dos dados, as regras de negócio da empresa e todas as suas mudanças.
 São divididos em dois grupos:
 Técnicos
 Negócios
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
METADADOS TÉCNICOS
Fornecem aos desenvolvedores e usuários técnicos a confiança de que os dados estão corretos;
São críticos para a manutenção e o crescimento contínuo do DW
 Exemplos:
 Controles de auditoria;
 Tabelas com a estrutura do DW;
 Dependência dos programas;
 Nomes das tabelas do DW
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
METADADOS DE NEGÓCIO
São o elo de ligação entre os usuários de negócios e o DW; 
Mostram que relatórios, consultas e dados estão no DW, a localização dos dados, contexto dos dados, regras de transformação que foram aplicados e as origens desses dados
Exemplos:
Mapeamento dos campos das tabelas físicas do DW;
Regras para drill-down, drill-up e drill-across;
Informações sobre sumarizações e transformações dos dados;
Estruturas dos dados com a nomenclatura que possa ser facilmente entendida pelo usuário final;
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
TIPOS DE METADADOS
Repositório de metadados
Metadados
técnicos
Metadados de negócios
Administrador de dados
Usuários técnicos
(desenvolvedores e analistas)
Usuários de negócios
(executivos e analistas de negócios)
Fonte: Machado, F.N.R.
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
METADADOS COMO INSTRUMENTO DE NAVEGAÇÃO
 
Em um ambiente de tomada de decisões os metadados assumem um novo papel, tampém muito importante:
o de navegação, e não apenas de documentação 
Pois ajudam os executivos a:
Localizar
Gerenciar
Compreender e
Utilizar os dados de um DW
 
(Adaptado de: Cristofoli, F – Metadados – FEA/USP, disponível em http://stoa.usp.br/cristofoli/files/675/6553/Slides+-+Metadados.pdf, acesso em 26 de março de 2012)
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Tipos de Informação Metadados
 
Por serem considerados um dicionário de informações os metadados devem descrever:
Fonte dos dados 
Destino dos dados
Formato dos dados
Nome e Alias
Definições de Negócios
 
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Tipos de Informação Metadados
 
Regras de Transformação
Atualização dos dados
Requisitos de Teste
Processos Automáticos
Propriedade e responsabilidade sobre os dados
Acesso e Segurança
 
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Camadas de Metadados
Normalmente, os metadados em um DW podem ser apresentados em três camadas diferentes:
Metadados operacionais: definem a estrutura dos dado mantidos pelos bancos operacionais, usados pelas aplicações de produção da empresa
Metadados centrais do DW: são orientados por assunto e definem como os dados transformados devem ser interpretados, incluem definições de agregação e campos calculados, assim como visões sobre cruzamento de assuntos
Metadados de nível do usuário: organizam os metadados do DW para os conceitos que sejam familiares e adequados aos usuários finais
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
OPERAÇÕES OLAP
Operação
Definição
drill-down
analisa os dados em níveis de agregação progressivamente
mais detalhados, ou de menor granularidade
roll-up
analisa os dados em níveis de agregação progressivamente
menos detalhados, ou de maior granularidade
sliceanddice
restringe os dados sendo analisados a um subconjunto destes dados
slice: corte para um valor fixo
dice: seleção de faixas de valores
drill-across
compara medidas numéricas distintas que são relacionadas
entre si através de pelo menos uma dimensão em comum
pivot
reorienta a visão multidimensional dos dados, oferecendo
diferentes perspectivas dosmesmos dados
(Adaptado de : CIFERRI, C.A, CIFERRI, R.R. - Processamento Analítico de Dados -
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
 
Drill-Down - Exemplo
http://www.inf.ufsc.br/~ronaldo/ine5342/6-dw.pdf, acesso em 24/03/2012
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
 
Roll-Up - Exemplo
http://www.inf.ufsc.br/~ronaldo/ine5342/6-dw.pdf, acesso em 24/03/2012
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
 
Slice-and-Dice - Exemplo
http://www.inf.ufsc.br/~ronaldo/ine5342/6-dw.pdf, acesso em 24/03/2012
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
 
Pivot - Exemplo
http://www.inf.ufsc.br/~ronaldo/ine5342/6-dw.pdf, acesso em 24/03/2012
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
Quando o usuário necessita mudar a perspectiva da visão de análise dos dados, utiliza a operação de: 
Drill Up
Drill Across 
Drill Down 
Dice 
Slice
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
Quando o usuário necessita mudar a perspectiva da visão de análise dos dados, utiliza a operação de: 
Drill Up
Drill Across 
Drill Down 
Dice 
Slice
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
As afirmações abaixo são Verdeiras ( V ) ou Falsas ( F )?
( ) Os Metadados de Negócio asseguram a confiança de que os dados estão corretos e são críticos para a manutenção e o crescimento contínuo do Data Warehouse.
( ) Drill in, drill out, roll over e roll on são típicas operações disponibilizadas pelas ferramentas de consultas OLAP para navegar pela hierarquia de uma dimensão.
( ) No ambiente de Data Warehouse os usuários, através dos Metadados, podem conhecer a estrutura e o significado dos dados
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
As afirmações abaixo são Verdeiras ( V ) ou Falsas ( F )?
( F ) Os Metadados de Negócio asseguram a confiança de que os dados estão corretos e são críticos para a manutenção e o crescimento contínuo do Data Warehouse.
( ) Drill in, drill out, roll over e roll on são típicas operações disponibilizadas pelas ferramentas de consultas OLAP para navegar pela hierarquia de uma dimensão.
( ) No ambiente de Data Warehouse os usuários, através dos Metadados, podem conhecer a estrutura e o significado dos dados
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
As afirmações abaixo são Verdeiras ( V ) ou Falsas ( F )?
( F ) Os Metadados de Negócio asseguram a confiança de que os dados estão corretos e são críticos para a manutenção e o crescimento contínuo do Data Warehouse.
( F ) Drill in, drill out, roll over e roll on são típicas operações disponibilizadas pelas ferramentas de consultas OLAP para navegar pela hierarquia de uma dimensão.
( ) No ambiente de Data Warehouse os usuários, através dos Metadados, podem conhecer a estrutura e o significado dos dados
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
As afirmações abaixo são Verdeiras ( V ) ou Falsas ( F )?
( F ) Os Metadados de Negócio asseguram a confiança de que os dados estão corretos e são críticos para a manutenção e o crescimento contínuo do Data Warehouse.
( F ) Drill in, drill out, roll over e roll on são típicas operações disponibilizadas pelas ferramentas de consultas OLAP para navegar pela hierarquia de uma dimensão.
( ) No ambiente de Data Warehouse os usuários, através dos Metadados, podem conhecer a estrutura e o significado dos dados
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
As afirmações abaixo são Verdeiras ( V ) ou Falsas ( F )?
( F ) Os Metadados de Negócio asseguram a confiança de que os dados estão corretos e são críticos para a manutenção e o crescimento contínuo do Data Warehouse.
( F ) Drill in, drill out, roll over e roll on são típicas operações disponibilizadas pelas ferramentas de consultas OLAP para navegar pela hierarquia de uma dimensão.
( V ) No ambiente de Data Warehouse os usuários, através dos Metadados, podem conhecer a estrutura e o significado dos dados
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
As afirmações abaixo são Verdeiras ( V ) ou Falsas ( F )?
( ) Os Metadados centrais do Data Warehouse são orientados por assunto e definem como os dados transformados devem ser interpretados, incluindo definições de agregação e campos calculados.
( ) Do ponto de vista gerencial o ambiente OLTP é uma ferramenta muito importante pois proporciona uma grande capacidade de efetuar cálculos complexos como previsões e percentuais de crescimento.
( ) As operações Drill down e Roll up são operações para movimentar a visão dos dados ao longo dos níveis hierárquicos de uma dimensão 
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
As afirmações abaixo são Verdeiras ( V ) ou Falsas ( F )?
( V ) Os Metadados centrais do Data Warehouse são orientados por assunto e definem como os dados transformados devem ser interpretados, incluindo definições de agregação e campos calculados.
( ) Do ponto de vista gerencial o ambiente OLTP é uma ferramenta muito importante pois proporciona uma grande capacidade de efetuar cálculos complexos como previsões e percentuais de crescimento.
( ) As operações Drill down e Roll up são operações para movimentar a visão dos dados ao longo dos níveis hierárquicos de uma dimensão 
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
As afirmações abaixo são Verdeiras ( V ) ou Falsas ( F )?
( V ) Os Metadados centrais do Data Warehouse são orientados por assunto e definem como os dados transformados devem ser interpretados, incluindo definições de agregação e campos calculados.
( F ) Do ponto de vista gerencial o ambiente OLTP é uma ferramenta muito importante pois proporciona uma grande capacidade de efetuar cálculos complexos como previsões e percentuais de crescimento.
( ) As operações Drill down e Roll up são operações para movimentar a visão dos dados ao longo dos níveis hierárquicos de uma dimensão 
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL 
Registro de Frequência
As afirmações abaixo são Verdeiras ( V ) ou Falsas ( F )?
( V ) Os Metadados centrais do Data Warehouse são orientados por assunto e definem como os dados transformados devem ser interpretados, incluindo definições de agregação e campos calculados.
( F ) Do ponto de vista gerencial o ambiente OLTP é uma ferramenta muito importante pois proporciona uma grande capacidade de efetuar cálculos complexos como previsões e percentuais de crescimento.
( V ) As operações Drill down e Roll up são operações para movimentar a visão dos dados ao longo dos níveis hierárquicos de uma dimensão 
 
INTELIGÊNCIA EMPRESARIAL – AULA 8
INTELIGÊNCIA EMPRESARIAL