Ferramentas de extração e exploração de dados para ...· Ferramentas de extração e exploração

Mrio Joo Gomes Cardoso

Ferramentas de extrao e explorao de

dados para Business Intelligence

Projeto de Dissertao de Mestrado Integrado

em Engenharia e Gesto de Sistemas de Informao

Trabalho efetuado sob a orientao de:

Professor Doutor Manuel Filipe Santos

e

Professor Doutor Antnio Silva Abelha

Fevereiro de 2018

Ferramentas de extrao e explorao de dados para Business Intelligence |iii

RESUMO

Atualmente os sistemas de Business Intelligence tm sofrido constantes mudanas, devido ao

crescente surgimento de novas tecnologias, que so introduzidas para melhorar os processos inerentes

tomada de deciso nas organizaes. Com as organizaes desejando aumentar cada vez mais a sua

competitividade, estas procuram utilizar os seus sistemas de BI, de forma eficiente e eficaz, para terem

mais agilidade nas tomadas de deciso, quer sejam estratgicas ou operacionais. Para tal,

necessrio realizar decises bem informadas e eficazes, que obrigam uma relao forte com os dados

do negcio, e isto exige que os utilizadores do negcio tenham melhor acesso aos dados, para

efetuarem suas anlises.

No entanto, nem todos os utilizadores de uma organizao esto familiarizados com as ferramentas de

um sistema de BI, de modo que, exista uma enorme dependncia da assistncia dos tcnicos de

tecnologia de informao para a explorao e extrao dos dados do negcio, na realizao de anlises

ad-hoc. Tendo em conta este pressuposto, este trabalho de dissertao tem como objetivo (i)

levantamento dos requisitos desses utilizadores; (ii) identificao de ferramentas de extrao e

explorao de dados, a partir de Data Warehouses e Data Marts associados a sistemas de BI; (iii)

experimentao das ferramentas identificadas; (iiii) a avaliao das ferramentas atravs de uma

topologia, para responder aos requisitos desses utilizadores.

Neste documento possvel averiguar a contextualizao do tema em estudo, a descrio dos objetivos

e dos resultados esperados. Tambm apresentadas, esto as metodologias de investigao e de

desenvolvimento definidas, e a estratgia de pesquisa adotada para a descrio do estado da arte,

relativo aos conceitos inerentes ao tema da dissertao. Rene ainda a calendarizao, que traa o

desenvolvimento do trabalho at concluso da dissertao.

Palavras-Chave: Business Intelligence, DATA EXTRACTION, DATA EXPLORATION, DATA, ETL, DATA

WAREHOUSE, DATA EXTRACTION TOOLS, DATA EXPLORATION TOOLS.

Ferramentas de extrao e explorao de dados para Business Intelligence |iv

ABSTRACT

Currently, business intelligence systems have undergone constant changes, due to the increasing

appearance of new technologies, which are introduced to improve the processes inherent in decision

making in organizations. With organizations keen to increase their competitiveness more and more,

they seek to use their BI systems efficiently and effectively to have more agile decision making, whether

strategic or operational. To do so, it is necessary to make informed and effective decisions, which

require a strong relationship with business data, and this requires business users to have better access

to the data for their analysis.

However, not all users in an organization are familiar with the tools of a BI system, so there is a heavy

reliance on the assistance of information technology technicians in the exploitation and extraction of

business data, for ad hoc analyzes. Considering this assumption, this dissertation project has as

objectives: (i) survey of the requirements of these users; (ii) identification of data extraction and

exploration tools from Data Warehouses and Data Marts associated with BI systems; (iii)

experimentation of identified tools; (iiii) the evaluation of the tools through a topology, to respond to the

requirements of these users.

In this document it is possible to ascertain the contextualization of the topic being studied, the

description of the objectives and the expected results. Also presented, are the research and

development methodologies defined, and the research strategy adopted for the description of the state

of the art, related to the concepts inherent to the topic of the dissertation. It also gathers the schedule,

which traces the development of the work until the conclusion of the dissertation.

KEYWORDS: Business Intelligence, DATA EXTRACTION, DATA EXPLORATION, DATA, ETL, DATA WAREHOUSE, DATA

EXTRACTION TOOLS, DATA EXPLORATION TOOLS.

Ferramentas de extrao e explorao de dados para Business Intelligence |v

NDICE

Resumo.............................................................................................................................................. iii

Abstract.............................................................................................................................................. iv

ndice .................................................................................................................................................. v

Lista de Figuras .................................................................................................................................. ix

Lista de Tabelas .................................................................................................................................. x

Notao e Lista de Abreviaturas, Siglas e Acrnimos ........................................................................... xi

Notao .......................................................................................................................................... xi

Abreviaturas, Siglas e Acrnimos .................................................................................................... xi

1 Introduo .................................................................................................................................. 1

1.1 Enquadramento e Motivao ............................................................................................... 1

1.2 Estrutura do Documento...................................................................................................... 1

2 Objetivos e Resultados Esperados ............................................................................................... 3

2.1 Objetivo Principal ................................................................................................................ 3

2.1.1 Questes de investigao ............................................................................................. 3

2.2 Objetivos Especficos ........................................................................................................... 3

2.3 Resultados Esperados ......................................................................................................... 3

3 Abordagem Metodolgica ............................................................................................................ 5

3.1 Metodologia de Investigao ................................................................................................ 5

3.2 Metodologia de Desenvolvimento ......................................................................................... 6

3.2.1 Fases da metodologia .................................................................................................. 7

4 Reviso de Literatura ................................................................................................................ 12

4.1 Estratgia de Pesquisa ...................................................................................................... 12

4.1.1 Fontes ....................................................................................................................... 12

4.1.2 Keywords .................................................................................................................. 12

4.1.3 Gesto de referncias ................................................................................................ 13

4.1.4 Critrios de seleo ................................................................................................... 13

4.2 Dados ............................................................................................................................... 14

Ferramentas de extrao e explorao de dados para Business Intelligence |vi

4.2.1 Conceito .................................................................................................................... 14

4.2.2 Tipo de dados ............................................................................................................ 14

4.2.3 Extrao e explorao de dados ................................................................................. 15

4.3 Business Intelligence ......................................................................................................... 16

4.3.1 Origem ...................................................................................................................... 16

4.3.2 Conceito .................................................................................................................... 17

4.3.3 Arquitetura BI ............................................................................................................ 18

4.3.4 Business users ......