93
Pós-Graduação em Ciência da Computação PREVISÃO DE SÉRIES TEMPORAIS USANDO SÉRIES EXÓGENAS E COMBINAÇÃO DE REDES NEURAIS APLICADA AO MERCADO FINANCEIRO Manoel Christovam de Amorim Neto DISSERTAÇÃO DE MESTRADO Universidade Federal de Pernambuco [email protected] www.cin.ufpe.br/~posgraduacao Recife, Dezembro/2008

PREVISÃO DE SÉRIES TEMPORAIS USANDO …viisar/doc/dissertations/2008_msc_mcan.pdf · Figura 3-8: Gráfico da série SP500 X Fechamento PETR4. ..... 22 Figura 3-9: Gráfico da série

Embed Size (px)

Citation preview

Pós-Graduação em Ciência da Computação

PREVISÃO DE SÉRIES TEMPORAIS USANDO SÉRIES EXÓGENAS E COMBINAÇÃO DE

REDES NEURAIS APLICADA AO MERCADO FINANCEIRO

Manoel Christovam de Amorim Neto

DISSERTAÇÃO DE MESTRADO

Universidade Federal de Pernambuco

[email protected]

www.cin.ufpe.br/~posgraduacao

Recife, Dezembro/2008

Universidade Federal de Pernambuco

Centro de Informática

Manoel Christovam de Amorim Neto

PREVISÃO DE SÉRIES TEMPORAIS USANDO

SÉRIES EXÓGENAS E COMBINAÇÃO DE

REDES NEURAIS APLICADA AO MERCADO

FINANCEIRO

Dissertação apresentada ao Programa de Pós-

graduação em Ciência da Computação do Centro de

Informática da Universidade Federal de

Pernambuco, como requisito para obtenção do título

de Mestre em Ciência da Computação

Orientador: Prof. George Darmiton da Cunha

Cavalcanti

Recife, Dezembro/2008

Amorim Neto, Manoel Christovam

Título da Dissertação / Manoel Christovam de Amorim Neto – Recife: O

autor, 2008.

viii, p. : il., fig., quadros.

Orientador: George Darmiton da Cunha Cavalcanti

Dissertação (mestrado profissional) – Universidade Federal de Pernambuco.

CIN. Ciência da Computação, 2008.

Inclui bibliografia e apêndice.

1. Previsão. 2. Séries Temporais. 3. Redes Neurais. 4.Combinação de

Classificadores. 5.Séries Exógenas

IV

AGRADECIMENTOS

A Deus, por minha saúde e por ter permitido que eu concluísse mais este

trabalho;

À minha querida e maravilhosa esposa Karina, musa da minha vida, por todo seu

amor, compreensão e suporte, e às minhas filhas Manoela e Isabela que foram

obrigadas a aceitar a ausência de seu pai devido ao tempo dedicado a este trabalho;

A George Darmiton, meu orientador, por todo o auxílio, paciência e confiança

indispensáveis durante toda esta etapa acadêmica;

A todos que fazem a Facilit Tecnologia, pelo suporte necessário, principalmente,

a Lenildo Moraes Aragão, Lenildo Aragão Júnior e Higor Neto Lima, pela ajuda

durante esta caminhada;

Aos professores, amigos e colegas da primeira turma do mestrado profissional do

Centro de Informática da UFPE, pelo apoio, incentivo e troca de idéias...

O meu “muito obrigado”!

V

Para Karina, Manu e Belinha –

As mulheres da minha vida.

VI

RESUMO

A previsão de séries temporais tem sido usada em diversos problemas do mundo real,

tais como: meteorologia, previsão de carga em redes de computadores, análise de

mercado, entre outras, com o objetivo de minimizar riscos, auxiliar no planejamento e

na tomada de decisões.

Nesta dissertação, as séries temporais são analisadas para realizar previsões de

cotações de ações do mercado financeiro e, para tanto, uma metodologia baseada no

uso de séries exógenas e de combinação de classificadores é proposta.

As principais contribuições do presente trabalho são: i) utilização de séries

exógenas como variáveis de entrada para o classificador a fim de capturar

informações externas que influenciam na série a ser prevista; ii) utilização de

combinação de classificadores, em especial, combinação de Redes Neurais do tipo

MLP (Multi-Layer Perceptron); e, iii) concepção de uma nova medida de

desempenho SLG (Sum of Loses and Gains), que é mais aderente na área de

investimentos. Além disso, foram propostas diferentes abordagens para pré-processar

os dados.

Os estudos experimentais foram realizados utilizando a série temporal

correspondente à ação preferencial da Petrobras (PETR4). Os resultados mostraram

que o modelo proposto superou os modelos tradicionais, conseguindo prever a série

com maior precisão e relevância para os investidores.

Palavras-chave

Previsão; Séries temporais; Redes Neurais Artificiais; Combinação de classificadores;

Séries exógenas.

VII

ABSTRACT

Time forecast series has been used in several real world problems, such as:

meteorology, prediction in computer networks, stock analysis market, among others.

The objective is to minimize risks and help in planning and decisions making.

In this dissertation, time series were analyzed to forecasts stock market. A

methodology based on the use of exogenous series and a combination of classifiers

was proposed. The main contributions were: i) the use of exogenous series as input

variables for the classifier, in order to capture external information that act on the

series to be foreseen; ii) the use of combination methods, especially the combination

using MLP (Multi-Layer Perceptron) neural networks; and iii) the conception of a

new performance measure - the SLG (Sum of Loses and Gains) which is more

adherent in the investment area. Moreover, different approaches to data pre-

processing were proposed.

The experimental studies were accomplished using the Petrobras time series

(PETR4) the results showed that the proposed model overcomed the traditional ones,

which predicts a series with better precision and relevance for investors.

Keywords

Forecasting; time series; artificial neural network; classifiers combination; exogenous

series;

VIII

SUMÁRIO

1. Introdução .................................................................................................................. 1

1.1 Motivação, Justificativas e Objetivos ............................................................. 1

1.2 Metodologia ............................................................................................... 2

1.3 Organização do Documento ......................................................................... 2

2. Previsão de Séries Temporais aplicada ao Mercado de Ações utilizando Redes

Neurais Artificiais.......................................................................................................... 4

2.1 Séries Temporais........................................................................................ 4

2.1.1 Formas Tradicionais de Previsão de Séries Temporais .................................. 4

2.1.2 O que são Redes Neurais ......................................................................... 5

2.1.3 Avaliação das séries ................................................................................ 6

2.2 A importância das Bolsas de Valores e seus principais conceitos ....................... 7

2.2.1 A BOVESPA e a nova cultura ..................................................................... 9

2.2.2 O nascimento da Superbolsa Brasileira .................................................... 10

2.2.3 Ações: definição e termos técnicos específicos .......................................... 10

2.2.4 Petrobras – a maior empresa brasileira .................................................... 13

3. Metodologia para definição das variáveis de entrada de uma Rede Neural Artificial

15

3.1 Seleção das Variáveis de Entrada ............................................................... 15

3.2 Análise da Dependência usando a Função de Autocorrelação Amostral ............ 16

3.3 Análise das relações de dependência temporal entre as séries de mercado. ..... 22

3.4 Análise das relações de dependência entre as séries ligadas à ação PETR4. ..... 27

3.5 Número de registros necessários para o treinamento da Rede Neural. ............. 29

3.6 Definição das variáveis de entrada na rede neural ........................................ 30

4. Métricas de Desempenho das Previsões e Pré-processamento das Séries............... 31

4.1 Métricas para Analisar o Desempenho ......................................................... 31

4.1.1 MSE (Mean Square Error)....................................................................... 31

4.1.2 MAPE (Mean Absolute Percentual Error) ................................................... 32

4.1.3 U de THEIL - NMSE (Normalised Mean Square Error) ................................. 32

4.1.4 POCID (Prediction On Change In Direction) .............................................. 33

4.1.5 ARV (Average Relative Variance) ............................................................ 33

4.1.6 SLG (Sum of Losses and Gains) .............................................................. 34

4.2 Pré-processamento das bases de dados ...................................................... 34

4.2.1 Ajuste das datas das séries exógenas ...................................................... 35

4.2.2 Normalização........................................................................................ 37

IX

5. Resultados Experimentais ....................................................................................... 39

5.1 Banco de Dados ....................................................................................... 39

5.2 Treinamento ............................................................................................ 39

5.3 Experimentos ........................................................................................... 40

5.3.1 Experimento 1: Utilização de 3 variáveis de entrada, retardos temporais ..... 41

5.3.2 Experimento 2: Inclusão de 8 variáveis sendo 5 exógenas ........................ 44

5.4 Combinação das melhores redes baseado nos desempenhos .......................... 49

5.4.1 Seleção do subconjunto de Redes Neurais MLP treinadas ........................... 50

5.4.2 Combinação “Simple Average” ................................................................ 50

5.4.3 Combinação através da Média Ensemble .................................................. 53

5.4.4 Combinação através de uma Rede Neural MLP .......................................... 55

6. Conclusões e Trabalhos Futuros .............................................................................. 59

6.1 Contribuições ........................................................................................... 59

6.2 Trabalhos Futuros ..................................................................................... 60

6.3 Considerações Finais ................................................................................. 60

Apêndice A – Detalhes dos Experimentos .................................................................. 61

Referências Bibliográficas ........................................................................................... 76

X

LISTA DE FIGURAS

Figura 2-1: Representação do Perceptron.................................................................... 6

Figura 3-1: Gráfico com os dados históricos do fechamento diário da ação PETR4. ......... 17

Figura 3-2: Gráfico do Fechamento Diário da PETR4 após pré-processamento ............... 18

Figura 3-3: Espectrograma da série Fechamento PETR4. ............................................. 19

Figura 3-4: Gráfico de autocorrelação da série Fechamento PETR4. .............................. 19

Figura 3-5: Componente de tendência �� da série Fechamento PETR4. ......................... 20

Figura 3-6: Gráfico dos resíduos estacionários da série de Fechamento PETR4. .............. 21

Figura 3-7: Autocorrelação dos resíduos da série Fechamento. .................................... 22

Figura 3-8: Gráfico da série SP500 X Fechamento PETR4. ........................................... 22

Figura 3-9: Gráfico da série DÓLAR X Fechamento PETR4. .......................................... 23

Figura 3-10: Gráfico da série DAX X Fechamento PETR4. ............................................ 23

Figura 3-11: Gráfico da série Euro X Fechamento PETR4. ............................................ 24

Figura 3-12: Gráfico da Série IBOV X Fechamento PETR4. ........................................... 24

Figura 3-13: Gráfico da série Brent X Fechamento PETR4. ........................................... 25

Figura 3-14: Gráfico Petróleo X Fechamento PETR4. ................................................... 26

Figura 3-15: Gráfico Maior Alta PETR4 X Fechamento PETR4. ..................................... 27

Figura 3-16: Gráfico Maior Baixa PETR4 X Fechamento PETR4. .................................... 28

Figura 3-17: Gráfico Abertura PETR4 X Fechamento PETR4. ........................................ 28

Figura 3-18: Gráfico Volume PETR4 X Fechamento PETR4. .......................................... 29

Figura 4-1: Gráfico da função tangente sigmóide hiperbólica. ...................................... 37

Figura 4-2: Gráfico da função linear. ........................................................................ 37

Figura 5-1: Experimento 1 - Treinamento com faixas mais utilizadas. ........................... 40

Figura 5-2: Modelo de Rede Neural MLP do primeiro experimento. ............................... 41

Figura 5-3: Gráfico com resultado do conjunto de teste do Experimento 1. ................... 43

Figura 5-4: Gráfico com os últimos 100 dias do conjunto de testes resultantes do

Experimento 1. ...................................................................................................... 44

Figura 5-5: Modelo de Rede Neural MLP proposto no segundo experimento. .................. 45

Figura 5-7: Gráfico com os últimos 100 dias do conjunto de testes resultantes do

Experimento 2. ...................................................................................................... 48

Figura 5-6: Gráfico com resultado do Experimento 2 e os valores reais no conjunto de

teste. ................................................................................................................... 48

Figura 5-8: Diagrama em blocos da máquina de comitê baseada na combinação Simple

Average. ............................................................................................................... 51

Figura 5-9: Gráfico da previsão do conjunto de teste usando como Combinação Simple

Average. ............................................................................................................... 51

XI

Figura 5-10: Gráfico da previsão dos 100 últimos dias do conjunto de teste usando como

Combinação Simple Average. .................................................................................. 52

Figura 5-11: Diagrama em blocos da máquina de comitê baseada na média de Ensemble.

........................................................................................................................... 53

Figura 5-12: Gráfico da previsão do conjunto de teste usando como Combinação Média

Ensemble. ............................................................................................................. 54

Figura 5-13: Gráfico da previsão dos 100 últimos dias do conjunto de teste usando como

Combinação Média Ensemble. .................................................................................. 54

Figura 5-14: Diagrama em blocos da máquina de comitê baseado em uma Rede Neural

MLP. ..................................................................................................................... 56

Figura 5-15: Gráfico com da previsão usando como Combinação uma Rede Neural. ....... 56

Figura 5-16: Gráfico da previsão dos 100 últimos dias do conjunto de teste usando como

Combinação uma Rede Neural. ................................................................................ 57

XII

LISTA DE TABELAS

Tabela 2-1: Variação da capitalização das Bolsas de Valores mundiais entre outubro de

2006 e outubro de 2007. .......................................................................................... 9

Tabela 3-1: Coeficientes de correlação cruzada estimados para as séries de mercado. .... 26

Tabela 3-2 Coeficiente da correlação cruzada estimada com as séries da PETR4. ........... 29

Tabela 3-3: Dados do desempenho da rede neural na fase de treinamento com diversos

períodos. .............................................................................................................. 30

Tabela 3-4 Variáveis de entrada para a rede neural. ................................................... 30

Tabela 4-1: Variáveis de Entrada da Rede Neural proposta no Capítulo 3. ..................... 34

Tabela 4-2: Variável de Camada de Saída da Rede Neural proposta no Capítulo 3. ......... 35

Tabela 4-3: Variáveis que estão relacionadas a ação PETR4. ....................................... 38

Tabela 5-1: Média e Desvio Padrão do Experimento 1 sobre o conjunto de Treinamento. 42

Tabela 5-2: Médias e Desvio Padrão dos desempenhos do melhor modelo do Experimento

1. ........................................................................................................................ 43

Tabela 5-3: Média e Desvio Padrão dos resultados do MSE da melhor modelo do

Experimento 2. ...................................................................................................... 45

Tabela 5-4: Médias e Desvio Padrão dos desempenhos da melhor arquitetura do

Experimento 2. ...................................................................................................... 46

Tabela 5-5: Comparação entre o conjunto de testes no Experimento 1 e o Experimento 2.

........................................................................................................................... 47

Tabela 5-6: Resultado das 8 melhores Redes Neurais MLP baseado no desempenho SLG

durante fase do treinamento. .................................................................................. 50

Tabela 5-7: Resultados dos desempenhos depois da combinação Simple Average. ......... 51

Tabela 5-8: Comparação entre os desempenhos das médias do Experimento 2 e a

combinação Simple Average. ................................................................................... 52

Tabela 5-9: Vetor W com os parâmetros da rede contendo os pesos e bias. .................. 53

Tabela 5-10: Resultados dos desempenhos com a Combinação Média Ensemble. ........... 54

Tabela 5-11: Comparação entre os desempenhos dos métodos de combinação Simple

Average e Combinação Média Ensemble. ................................................................... 55

Tabela 5-12: Resultados dos desempenhos da combinação com Rede Neural sem camada

escondida. ............................................................................................................ 56

Tabela 5-13: Comparação entre os desempenhos dos métodos de combinação Simple

Average e combinação com Redes Neurais. ............................................................... 57

Tabela 5-14: Resultado comparativo no conjunto de teste entre o Experimento 2 e a

Combinação com Rede Neural. ................................................................................ 58

XIII

Tabela 5-15: Resultado comparativo no conjunto de teste entre o Experimento 1 e a

Combinação com Rede Neural. ................................................................................ 58

Tabela A-0-1: Resultados do Experimento 1 .............................................................. 62

Tabela A-0-2: Resultados do Experimentos 2............................................................. 69

XIV

LISTA DE ABREVIATURAS, SIGLAS E SÍMBOLOS

Siglas Descrição

x� Valor médio de x.

σ Desvio Padrão.

ADR Recibo de ações de companhias não sediadas nos Estados Unidos emitido por um banco e custodiadas por banco norte-americano.

AMEX American Stock Exchange.

AVR Average Relative Variance – Métrica de desempenho que mede a variância relativa média.

Backpropagation Algoritmo para treinamento de redes neurais MLP, também conhecido como retropropagação, é estático e supervisionado, já que para cada entrada é conhecida a saída esperada. A aprendizagem ocorre pela correção de erros através do ajuste de pesos.

Bovespa Bolsa de Valores do Estado de São Paulo.

BRENT Série da Cotação Futura do Light Sweet Crude Oil Futures, NYMEX (New York Mercantile Exchange), também conhecida como “valor do barril de petróleo”.

d Indica que está sendo referenciado o dia atual.

d+1 Indica que está sendo referenciado o próximo dia ou dia da previsão.

DAX Série temporal do índice de Bolsa que reuni 30 ações alemãs cotadas na Bolsa de Valores de Frankfurt – FWB (Frankfurter Wertpapierbörse).

DÓLAR Série que conterá os valores de 1 (um) real em dólar.

FWB Frankfurter Wertpapierbörse – Bolsa de Valores Alemã.

Lag Retardo Temporal.

MAPE Mean Absolute Error – Medida de desempenho que apresenta o erro médio percentual absoluto.

MLP Multiple Layer Perceptron – Perceptron de Multi-Camadas.

MSE Mean Square Error – Medida de desempenho que apresenta o erro médio quadrático.

XV

NYMEX New York Mercantile Exchange - Bolsa de Futuros e Commodities de Nova Iorque, com ativos na área de energia, petróleo, platina e paládio.

NYSE New York Stock Exchange - Bolsa de Valores de Nova Iorque, a maior do mundo em volume.

Perceptron A forma mais simples de uma rede neural artificial usada para classificação de padrões linearmente separáveis.

PETR4 Representa a ação preferencial da Petrobras na Bolsa de Valores de São Paulo, que movimenta o maior número de negócios da BOVESPA.

PETRÓLEO Série temporal que representa a cotação da ADR relacionada à Petrobras (termo utilizado neste trabalho).

PN Preferencial, usado principalmente do lado de ações para indicar que a ação é do tipo preferencial.

POCID Predict On Change In Direction – Medida de desempenho que apresenta o erro percentual para previsão de tendência instantânea.

Quanta Unidade fundamental do tempo para o problema, escala da série temporal.

Random Walk Caminho aleatório segundo o qual a previsão de um determinado valor da série, no instante t, é calculado a partir de uma dependência linear com seu último retardo no tempo t-1.

RBF Radial Base Function, redes neurais de função de base radial.

Simple Average Método de combinação de resultados baseado na média aritmética dos seus elementos de entrada.

SLG Sum of Loses and Gains – Medida de desempenho que apresenta a soma dos ganhos e perdas da previsão baseada no acerto da direção instantânea e seus valores.

SP500 Standard & Poors: índice ponderado calculado pela Standard &

Poors sobre 500 ações negociadas na NYSE (New York Stock

Exchange) e AMEX (American Stock Exchange).

TAEF Time Lag Added Evolutionary Forecasting – metodologia híbrida inteligente para previsão de séries temporais.

THEIL Estatística de U de Theil – representa o desempenho da previsão baseado na relação entre os quadrados do sistema testado e o quadrado dos erros de um modelo do tipo Random

Walk.

VALE5 Ação preferencial da companhia Vale do Rio Doce na BOVESPA, a segunda em movimentação em número de negócios.

1

CAPÍTULO 1

Introdução

O presente trabalho apresenta um estudo sobre a previsão de séries temporais aplicada

à cotação de ações do mercado financeiro, através da combinação de redes neurais

denominadas Máquinas de Comitê [1], do tipo MLP [2] (Multi-Layer Perceptron)

utilizando séries exógenas como variáveis de entrada a fim de capturar informações

externas que influenciem na série a ser prevista.

1.1 Motivação, Justificativas e Objetivos

A previsão de séries temporais tem sido usada em diversos problemas do mundo real,

tais como: meteorologia, previsão de carga em redes de computadores, análise de

mercado, entre outras, com o objetivo de minimizar riscos, auxiliar no planejamento e

na tomada de decisões.

Esforços foram conduzidos para aplicar os princípios e fundamentos de Redes

Neurais Artificiais ao mercado de ações da Bolsa de Valores, com o objetivo de obter

a melhor previsão de cotação das ações do mercado financeiro, ou seja, propor novos

procedimentos ou ferramentas que maximize os ganhos e auxilie os investidores a

tomarem decisões no processo de formação da sua carteira.

No caso específico de previsão de séries temporais relacionada a cotações de

ações do mercado financeiro, é importante prever com maior precisão a tendência do

movimento (subida ou descida) da série que pode definir a estratégia de compra e

venda, e, como visto em Charkha [3], a utilização de Redes Neurais Feed forward são

as melhores para prever tendência, e as Redes Neurais do tipo Radial Basis para

previsão da cotação de ações. Dispondo das estimativas fornecidas pela rede, o

investidor passa a ter maior segurança na escolha das ações que lhe oferecem melhor

relação risco-retorno de acordo com seu perfil, visando à minimização do risco e a

maximização do retorno esperado.

2

Preços de ativos financeiros dependem, em geral, de outros preços do mercado. A

volatilidade também pode depender de outros eventos, como anúncios

governamentais de taxas de desemprego, de inflação, PIB trimestral, taxas de juros,

entre outros.

Será apresentado o uso de séries exógenas como variáveis de entrada para a rede

neural, o que é relevante no caso de previsão de cotação de ações, uma vez que existe

uma grande relação entre os mercados internacionais de capital e gera muita

interferência mundial, o usos das séries exógenas adiciona novas informações a

previsão.

A utilização dos conhecimentos específicos do domínio da previsão para o

mercado financeiro e cuidado com alguns procedimentos, como é o caso do pré-

processamento das séries exógenas, ou da proposta da nova medida de desempenho,

são de grande importância para um investidor. Por exemplo, para se conseguir uma

melhor previsão para a cotação da ação preferencial da Petrobras (PETR4) pode ser

relevante adicionar à rede a série com o valor do barril de Petróleo, cotado na Bolsa

de Nova Iorque, como variável de entrada; a relação entre Dólar e Real; o índice

SSP500 (da Bolsa América), e o índice IBOV (da Bovespa). Dessa forma, maior

precisão na previsão de cotação de ações é alcançada.

1.2 Metodologia

Para alcançar os objetivos previamente propostos, quatro etapas foram seguidas, a

saber: investigação dos fundamentos, princípios e modelos empregados na previsão

de séries temporais; estudo e análise do mercado de ações das Bolsas de Valores;

criação de protótipos dos vários modelos de redes neurais artificiais com o objetivo de

verificar a sua utilização no domínio específico de previsão das cotações das ações [4]

[5].

Finalmente a implementação dos experimentos já com a utilização dos

procedimentos e inclusão das séries exógenas especificamente para previsão da

cotação das ações preferenciais da Petrobras (PETR4).

1.3 Organização do Documento

3

Esta dissertação está estruturada da seguinte forma:

Capítulo 1: Introdução

Neste capítulo é realizada uma breve introdução apresentando motivação,

justificativas e objetivos da dissertação.

Capítulo 2: Previsão de Séries Temporais aplicada ao Mercado de Ações

utilizando Redes Neurais Artificiais

Neste capítulo, são apresentados os fundamentos da previsão de séries temporais

e do mercado de ações, particularmente, da ação preferencial da Petrobras (PETR4),

que é comercializada na Bolsa de Valores da São Paulo, Bovespa, que será utilizada

nos experimentos.

Capítulo 3: Metodologia para definição das variáveis de entrada de uma Rede

Neural Artificial

É apresentada a metodologia para definição das variáveis de entrada da rede

neural MLP, principalmente para séries exógenas.

Capítulo 4: Métricas para Analisar o Desempenho e Pré-processamento

São apresentadas as métricas de desempenho para as previsões e alguns pré-

processamentos importantes, principalmente, no domínio do mercado financeiro.

Capítulo 5: Resultados Experimentais

Neste capítulo é apresentado o resultado dos experimentos e analisado os

resultados obtidos.

Capítulo 6: Conclusões e Trabalhos Futuros

Este último capítulo apresenta as considerações finais sobre o trabalho

desenvolvido, suas principais contribuições e algumas propostas de trabalhos futuros.

Capítulo 7: Apêndice A – Detalhes dos Experimentos

São apresentados todos os resultados do Experimento 1 e do Experimento 2.

4

CAPÍTULO 2

Previsão de Séries Temporais aplicada ao Mercado

de Ações utilizando Redes Neurais Artificiais

Neste capítulo serão apresentados os fundamentos da Previsão de Séries Temporais e

do Mercado de ações, particularmente, da ação preferencial da Petrobras (PETR4),

que é comercializada na Bolsa de Valores da São Paulo, Bovespa, e será utilizada nos

experimentos.

2.1 Séries Temporais

Uma série temporal é definida como um conjunto de observações feitas

seqüencialmente no tempo, podendo ser contínuas ou discretas, sobre uma variável de

interesse. A geração se faz através de um processo observacional e conseqüente

quantificação numérica com uma seqüência de dados distribuídos no tempo, isso não

significa que deve haver igualdade entre os intervalos de tempo na sua observação.

Séries temporais surgem em vários campos do conhecimento como Economia

(preços diários de ações, taxa mensal de desemprego, produção industrial), Medicina

(eletrocardiograma, eletro encefalograma), Epidemiologia (número semanal de casos

de uma doença), Meteorologia (precipitação pluviométrica, temperatura diária,

velocidade do vento), entre outras.

2.1.1 Formas Tradicionais de Previsão de Séries Temporais

Previsões de séries temporais procuram identificar estruturas e padrões que existam

em dados históricos e, com isso, construir um modelo que preveja padrões futuros da

série. Ela deve proporcionar um meio de fornecer informações para tomada de

decisão com objetivo específico e, nesse sentido, modelos estatísticos foram

propostos.

5

Um dos modelos mais populares é o de Box & Jenkins, conhecido como

ARIMA, um modelo linear [6]. Modelos não-lineares também foram propostos, tais

como: os bilineares, os auto-regressivos exponenciais (exponencial autoregressive

models), o de limiar auto-regressivo (threshold autoregressive models), os auto-

regressivos de transição suave, os auto-regressivos com coeficientes dependentes do

tempo [7], os heterocedásticos condicionais auto-regressivos (ARCH) e os

heterocedásticos condicionais auto-regressivos gerais (GARCH) [8], dentre outros.

2.1.2 O que são Redes Neurais

Redes neurais artificiais são um sistema de processamento de informação complexo,

não-linear e paralelo que se fundamenta no funcionamento do sistema neural

biológico e, em particular, no cérebro humano. Cada entrada da rede neural

(representada pela série ��, ��,.., � na Figura 2-1) recebe um sinal que é ponderado

de acordo com os pesos sinápticos nas conexões de entrada (representada pela série

��, ��,.., � na Figura 2-1). Depois, é processada por uma função matemática de

ativação ou função de transferência, e produz um sinal de saída que é propagado pela

rede, conforme Figura 2-1.

As redes neurais têm algumas características importantes, tais como: aprendizado

e generalização a partir de um conjunto de dados, e universalidade na aproximação de

funções contínuas multi-variáveis lineares e não-lineares, que fazem delas uma

ferramenta bastante atrativa para a tarefa de modelagem e previsão de séries não

estacionárias [2]. As redes são capazes de aprender com os dados da série sem que

haja conhecimento prévio do problema. Elas aprendem com exemplos e capturam os

relacionamentos funcionais entre os dados, mesmo que sejam desconhecidos ou

difíceis de descrever. Dessa forma, as redes neurais são indicadas para problemas

cujas soluções requerem conhecimentos que sejam difíceis de especificar, mas para os

quais existam dados ou observação suficientes.

Ao simular o funcionamento do cérebro humano, a rede neural adquire

conhecimento para a solução de um determinado problema através de um processo de

aprendizagem. Além disso, as habilidades de lidar com dados ruidosos e de prever

sistemas não-lineares torna sua aplicação aderente ao mercado financeiro [3], pelo

6

fato de ser este um sistema não-linear que sofre a influência de fatores políticos e

econômicos, entre outros.

Figura 2-1: Representação do Perceptron.

Dentre os muitos tipos de redes neurais como a Multi-Layer Perceptron (MLP),

as redes recorrentes, a de Kohonen, a de Hopfield e ART, as redes MLP são as mais

utilizadas no problema de previsão [1]. Contudo, também aparece – com certa

freqüência na literatura – o relato da utilização de outros modelos, como as redes de

função de base radial (RBF) e as de Wavelets [9].

2.1.3 Avaliação das séries

Foram utilizados no experimento, valores das ações da BOVESPA, principalmente os

das cotações da PETR4, ação ordinária que mais é negociada na citada Bolsa [10].

No problema de previsão, a medida de desempenho vai da medição da precisão,

passando pela facilidade de interpretação e uso, até a complexidade do modelo.

Assim, não existe uma forma única para avaliar o desempenho da previsão, mas a

precisão é utilizada como principal critério de comparação de modelos de séries

temporais. Com isso, as métricas mensuram os erros e apontam vantagens e

desvantagens [9]. Cinco medidas clássicas de desempenho foram usadas, mais uma

medida proposta para avaliar o desempenho das previsões geradas pelos modelos. As

7

medidas foram: MSE – (Mean of Squared Errors), MAPE – (Mean Absolute

Percentual Error), U de THEIL ou NMSE – (Normalised Mean Square Error),

POCID – (Prediction On Change In Direction), ARV – (Average Relative Variance)

e SLG – (Sum of Losses and Gains) a medida proposta. As métricas de desenpenho

serão detalhadas na Seção 4.1.

2.2 A importância das Bolsas de Valores e seus principais conceitos

Segundo Adam Smith, “nenhuma sociedade pode ser florescente e feliz, se a grande

maioria de seus membros for pobre e miserável” [11]. O desenvolvimento econômico

depende da evolução de indicadores sociais, tais como: acesso à saúde, educação,

saneamento básico e igualdade social. Para os teóricos, a expansão contínua da

capacidade de produção, que está associada ao investimento em capital e recursos

humanos, é precondição para o desenvolvimento sustentável. Essa expansão é, por

sua vez, resultante da poupança [12].

A principal função do mercado monetário ou de capital é o comércio de crédito

com o propósito de financiar o desenvolvimento, que o cria e alimenta, e, em seu

curso, uma terceira função lhe é atribuída: o mercado das próprias fontes de

rendimento [13]. O mercado monetário, como um todo, é importante para o

desenvolvimento econômico. Entretanto, quando economia e mercado se

desenvolvem, surge o mercado de fontes de capital, que nada mais é do que o

mercado de ações, títulos de dívidas e bens de capital.

Os mercados de capital permitem que os investidores diversifiquem suas carteiras

de investimentos, ajustando a exposição ao risco de acordo com seu perfil [14].

Investidores institucionais e instituições financeiras em geral podem destinar maior

parcela de suas carteiras a projetos de investimentos que tenham maior liquidez.

Dessa forma, permite aos bancos, enquanto investidores, diversificar a exposição de

seus ativos em várias empresas e setores, reduzindo o risco do sistema financeiro

nacional.

8

As limitações de uso do capital de terceiros e o esgotamento da capacidade do

Estado de financiar os crescentes investimentos da indústria nacional em

transformação, fizeram com que o mercado de capitais se tornasse estrategicamente

importante. Logo, a decisão de abertura de capital ganhou o merecido destaque e pode

ser entendida como a democratização do capital social de uma companhia, pois

permite distribuição de suas ações por um grande número de investidores e envolve,

entretanto, um conjunto de exigências legais e custos que devem ser atendidos de

acordo com determinado cronograma. As empresas que assim operam são

denominadas companhias abertas.

Dentre as exigências legais para a abertura de capital das empresas destacam-se:

• A empresa ser sociedade anônima (S/A);

• Adequação do estatuto social da companhia ao que prevê a lei das S/As

visando à equiparação dos direitos dos acionais minoritários e controladores;

• Criação do conselho de administração;

• Criação da diretoria de relações com o investidor;

• Compromisso de “disclosure” e acerto de pendências fiscais.

Medidas com a realização de palestras e o lançamento de diversas publicações

pela Bolsa de Valores de São Paulo vêm desmistificando o investimento em ações por

causa de sua conseqüente popularização. As estratégias para a promoção do

desenvolvimento do mercado de capitais têm como objetivo criar condições

financeiras adequadas à realização de investimentos de longo prazo, destinando

recursos a projetos eficientes para a sociedade.

Com a globalização, que permitiu intenso intercâmbio entre os países, cada vez

mais o mercado acionário adquire importância no cenário financeiro internacional e

hoje, além de ser uma importante fonte de financiamento empresarial, é, também, um

meio importante de captação de finanças individuais. Ao realizar investimento em

uma carteira, o investidor espera que seu retorno seja grande o suficiente para

compensar os riscos que corre, ou seja, seu objetivo é tentar minimizar o risco e

maximizar o retorno esperado.

9

2.2.1 A BOVESPA e a nova cultura

No primeiro semestre de 2008, o mercado brasileiro de ações viveu um momento

ímpar de crescimento: ele foi acelerado pela combinação inédita – e feliz – de juros

internos declinantes, percepção de queda do risco País, abundância de recursos

internacionais, adesão das companhias emissoras às melhores práticas de governança

corporativa e crescente popularização do investimento em ações. Juntos, esses fatores

resultaram em um mercado fortemente crescente com entrada de novas empresas e

investidores, e a valorização dos papéis [15].

Tabela 2-1: Variação da capitalização das Bolsas de Valores mundiais entre outubro de 2006 e

outubro de 2007.

Posição Bolsa/Mercado

Capitalização

Out/2007

(US$ trilhões)

Variação 12

meses

1ª NYSE Group (EUA) 16.282 +10,0%

2ª Tokio SE (Japão) 4.627 +2,4%

3ª Euronext (Europa) 4.418 +29,9%

4ª Nasdaq (EUA) 4.390 +15,5%

5ª London SE (Reino Unido) 4.207 +16,9%

6ª Shanghai SE (China) 3.018 +392,3%

7ª Hong Kong Exchanges (China) 2.974 +103,0%

8ª São Paulo SE (Brasil) 2.294 +126,3%

9ª Deutsche Börse (Alemanha) 2.119 +42,6%

10ª BME Spanish Exchanges 1.832 +50,3%

Fonte: World Federation of Exchanges

10

Concomitante ao aprimoramento desse mercado veio o crescimento da Bolsa de

Valores do Brasil. Além de posição de destaque entre as regiões emergentes, a

BOVESPA – chamada pela WFE (World Federation of Exchanges) como São Paulo

SE – ganhou projeções globais. Entre as 51 Bolsas monitoradas pela WFE, ela, ao

final de outubro de 2007, ocupava a posição de oitava maior Bolsa do mundo em

termos de capitalização, valor de mercado de todos os ativos cotados em uma

determinada Bolsa de Valores, em um ranking dominado por mercados de países

desenvolvidos.

Entre as dez maiores Bolsas do mundo, em termos de capitalização, além da

BOVESPA aparecem apenas as de Shanghai e Hong Kong como representantes de

economias emergentes. Além disso, chama atenção o altíssimo crescimento

percentual da capitalização da Bolsa brasileira. Das 51 Bolsas acompanhadas pela

WFE, a BOVESPA ocupa o oitavo posto da bolsa mais capitalizada conforme Tabela

2-1, e ainda o quinto posto nas maiores evoluções percentuais entre outubro de 2006 e

o mesmo período em 2007.

2.2.2 O nascimento da Superbolsa Brasileira

Uma das lições do século 20 é que não existe potência econômica sem um grande

centro financeiro. Não por coincidência, os cinco primeiros colocados no ranking das

maiores economias – Estados Unidos, Japão, Alemanha, China e Inglaterra – são os

países que hospedam as seis Bolsas mais importantes do mundo. Já no Brasil, a união

da BOVESPA com a Bolsa de Mercadorias & Futuros (BM&F), anunciada no final

de março de 2008, inseriu o país na luta real dos grandes centros financeiros globais.

A Nova Bolsa, nome provisório da empresa, deu origem à terceira maior Bolsa do

mundo, com valor de mercado de 20 bilhões de Dólares, atrás somente das Bolsas

Mercantil de Chicago (CME) e alemã, e a sexta entres as BM&F.

2.2.3 Ações: definição e termos técnicos específicos

Ações são títulos que representam frações de capital de uma determinada empresa.

Elas podem ser:

11

• Ordinárias: aquelas que conferem a seu titular o direito de voto nas

assembléias gerais da empresa, e são geralmente menos líquidas, ou seja,

menos negociadas que as preferenciais;

• Preferenciais: as que não concedem direito de voto nas assembléias, mas seu

proprietário tem prioridade no recebimento dos dividendos e, havendo

falência da empresa, tem preferência no reembolso do capital. Elas são mais

freqüentemente negociadas que as ordinárias.

As ações podem ser vendidas em unidades ou lotes (de 10, 100 ou 1000

unidades) definidos pela CVM, Comissão de Valores Mobiliários, e representam o

mercado integral. Quando da compra de um lote menor do que 100.000, por exemplo,

usa-se o mercado fracionário, pois permite que unidades de ações sejam negociadas.

Os preços variam de um dia para outro e formam padrões definidos. Tais variações

podem causar valorização ou desvalorização radical e são definidas pela lei da oferta

e procura. O sistema de Home-Broker, oferecido pela maioria das corretoras on-line

do país, é muito simples. Qualquer pessoa com acesso à Internet é capaz de executar

as ordens de compra e venda. No entanto, saber QUANDO comprar e QUANDO

vender é que determinarão lucro ou prejuízo. O eixo de tempo – com períodos

mensais, semanais, diários, de 15 em 15 minutos ou até mesmo de minuto a minuto –

e o eixo de preço em um período específico dão forma a gráficos diários de ações,

inclusive com a cotação do fechamento do pregão.

Para que um investidor profissional entenda o comportamento de uma ação, pelo

menos cinco séries são necessárias:

• O valor mais alto pelo qual a ação foi negociada no dia determinado;

• O valor mais baixo pelo qual ela foi negociada naquele mesmo dia;

• O valor do primeiro negócio do dia: preço de abertura;

• O valor do último negócio do dia: preço de fechamento;

• O volume de negócios efetivados da ação naquele dia.

O preço de fechamento é o que realmente importa, pois nele os investidores

profissionais e os institucionais atuam intensamente. Eles observam as cotações

durante todo o dia e, no final do pregão, podem dizer o preço que aquela ação está

valendo.

12

O crescimento da BOVESPA pode ser comprovado com informações publicadas

em seu site [10]. São elas:

Home Broker

Assim como Home Banking, é uma ferramenta que permite

operações de compra e venda de ações na Bolsa de Valores pela

Internet, e apresentou crescimento bastante expressivo em

2007. Em relação ao ano anterior, o volume médio mensal

aumentou 153,50%, passando de R$ 6 bilhões para R$ 15,6

bilhões. A média mensal de negócios subiu 122,37%, de 752,4

mil operações para 1,7 milhão, e a média mensal de

investidores aumentou 117,78%, indo de 62.266 para 135.603.

As operações por meio do Home Broker foram responsáveis por

8,4% do volume total de transações na BOVESPA naquele ano.

Em dezembro de 2007, o Home Broker registrou mais três

recordes históricos, a saber: média diária de negócios,

alcançando 121.739 (foram 117.794 no mês anterior);

participação no número de negócios da BOVESPA, 31,14%

contra 29,58% em novembro; e número de investidores com

ofertas colocadas, que atingiu 230.175, contra 215.424. O

volume total mensal foi de R$ 19,5 bilhões, com média diária

de R$ 1 bilhão e valor médio de R$ 8,9 mil por negócio. No

total, 2,2 milhões de negócios foram realizados em dezembro

via Home Broker e a participação no volume da Bolsa ficou em

9,53%. No final do mês 57 corretoras ofereciam o serviço.

Investidores individuais

O número de investidores individuais mais que dobrou em

2007, passando de 219.634 contas no final de 2006, para

456.557, em dezembro último, segundo dados da Companhia

Brasileira de Liquidação e Custódia (CBLC). Em novembro,

eram 327.740 investidores, o que indica o ingresso de mais de

100 mil somente no último mês.

13

Clubes de investimento

O programa de popularização "BOVESPA vai até você"

impulsionou, em 2007, a criação de 683 clubes de investimento,

o maior número de novos registros no período de um ano.

Desde o lançamento, em setembro de 2002, foram criados

2.047 clubes, sendo: 22 em 2002, 217 em 2003, 349 em 2004,

356 em 2005 e 420 em 2006. No total, a BOVESPA listou

2.160 clubes de investimento até 28 de dezembro de 2007. Em

relação ao patrimônio líquido, segundo os últimos dados

disponíveis em 30 de novembro, os clubes totalizam R$ 14,5

bilhões, e reúnem 153,9 mil cotistas.

2.2.4 Petrobras – a maior empresa brasileira

Em outubro de 1953, através da Lei 2.004, a criação da Petrobras foi autorizada com

o objetivo de executar as atividades do setor de petróleo no Brasil, em nome da

União. Sendo assim, a Petróleo Brasileiro S/A iniciou suas atividades com o acervo

recebido do antigo Conselho Nacional do Petróleo (CNP), o qual manteve sob

fiscalização:

• Campos de petróleo com capacidade para produzir 2.700 barris por dia (bpd);

• Bens da Comissão de Industrialização do Xisto Betuminoso;

• Refinaria de Mataripe-BA (atual RELAM), processando 5.000 bpd;

• Refinaria em fase de montagem, em Cubatão-SP (atual RPBC);

• Vinte petroleiros com capacidade para transportar 221 mil toneladas;

• Reservas recuperáveis de 15 milhões de barris;

• Consumo de 137.000 bpd de derivados;

• Fábrica de fertilizantes em construção (Cubatão - SP).

Ao longo de cinco décadas tornou-se líder em distribuição de derivados no país,

num mercado competitivo fora do monopólio da União, e internacionalmente

reconhecida como a oitava maior companhia aberta de petróleo do mundo. Detentora

de uma das tecnologias mais avançadas para a produção de petróleo em águas ultra

profundas e profundas, a companhia foi premiada duas vezes, em 1992 e 2001, pela

14

OTC (Offshore Technology Conference), com o mais importante prêmio do setor. Em

1997, através da Petrobras, o Brasil ingressou no seleto grupo dos 16 países que

produzem mais de um milhão de barris de óleo por dia. Nesse mesmo ano foi

promulgada a Lei n º 9.478, que abriu as atividades da indústria petrolífera à iniciativa

privada brasileira. A partir daí, foram criados a ANP (Agência Nacional do Petróleo)

– encarregada de regular, contratar e fiscalizar as atividades do setor –, e o Conselho

Nacional de Política Energética, órgão formulador da política pública de energia.

Em sintonia com a mudança, a Petrobras segue preparada para a livre

competição, ampliando novas perspectivas de negócios e tendo maior autonomia

empresarial. Desde então, dobrou sua produção, em 2003, ultrapassou a marca de 2

milhões de barris de óleo e gás natural por dia, e continuará crescendo. O ano de 2006

foi cenário de muitas conquistas e recordes de produção e exportação. A explicação

para o sucesso está na eficiência de suas unidades espalhadas por todo o Brasil:

refinarias, áreas de exploração e produção, dutos, terminais, gerências regionais, e sua

grande frota petroleira.

O capital social da Petrobras é composto por 8.774.076.740 (oito bilhões,

setecentos e setenta e quatro milhões, setenta e seis mil e setecentas e quarenta) ações

sem valor nominal, sendo 5.073.347.344 (cinco bilhões, setenta e três milhões,

trezentos e quarenta e sete mil e trezentas e quarenta e quatro) ordinárias e

3.700.729.396 (três bilhões, setecentos milhões, setecentos e vinte e nove mil e

trezentas e noventa e seis) preferenciais. Para os investidores detentores de ADR

(American Depository Receipt) – Certificados Americanos de Depósitos –, após

aprovação do desdobramento das ações, a relação de troca de duas ações para cada

ADR da Petrobras negociada no NYSE (New York Stock Exchange) será mantida, e

nenhuma alteração no valor do capital social será permitida. Os objetivos do

desdobramento são: facilitar para o pequeno investidor a compra de ações,

conseqüentemente ampliando a base de acionistas, e demonstrar a confiança da

companhia em seus resultados futuros. No caso das ações da Petrobras, em 2007,

cada ADR passou a representar duas ações subjacentes.

15

CAPÍTULO 3

Metodologia para definição das variáveis de

entrada de uma Rede Neural Artificial

Nesse capítulo será apresenta a metodologia para definição e seleção das variáveis de

entrada que fazem parte da Rede Neural MLP com objetivo de previsão de cotação de

ações em Bolsa de Valores. Estes procedimentos auxiliam na determinação dos

neurônios da camada de entrada, mas não ajudam no que diz respeito à determinação

da arquitetura global da rede.

3.1 Seleção das Variáveis de Entrada

Em aplicações de Redes Neurais com objetivo de prever séries temporais econômicas,

a escolha dos neurônios de entrada pode ser feita utilizando a teoria econômica para

determinar as variáveis exógenas relevantes e os procedimentos comumente

utilizados em análise de séries temporais, tais como funções de autocorrelação e

autocorrelação parcial, testes para raízes unitárias, análise gráfica, entre outros [8].

Como o domínio está relacionado ao mercado de ações, mais especificamente à

previsão da cotação da ação PETR4, foram realizadas entrevistas com especialistas

neste mercado e inicialmente selecionadas algumas séries exógenas baseadas na

análise econômica dos principais relacionamentos da Petrobras, essas possíveis

candidatas a variáveis de entrada são:

• IBOVESPA - Índice Bovespa. Aquele que acompanha a evolução média das

cotações das ações negociadas na Bolsa de Valores de São Paulo e é aqui

representado pela sigla IBOV;

• S&P500 - Standard & Poors: índice ponderado calculado pela Standard &

Poors sobre 500 ações negociadas na NYSE (New York Stock Exchange) e

AMEX - American Stock Exchange: representando 80% das ações negociadas

na NYSE e representado por SP500;

16

• DAX - Índice de Bolsa que reuni 30 ações alemãs cotadas na Bolsa de Valores

de Frankfurt – FWB (Frankfurter Wertpapierbörse), sob a sigla DAX;

• NYSE:PBR - Cotação da ADR relacionada à Petrobras: recibo de ações de

companhias não sediadas nos Estados Unidos emitido por um banco e

custodiado por banco norte-americano, será utilizado o termo PETRÓLEO;

• Cotação do Dólar em Reais - Será utilizado o termo DÓLAR para referenciar

essa série;

• Cotação do Euro em Reais - Será utilizado o termo EURO será usado para

referenciar essa série;

• Cotação Futura do Light Sweet Crude Oil Futures, NYMEX (New York

Mercantile Exchange) - Bolsa de Futuros e Commodities de Nova Iorque com

ativos na área de energia, petróleo, platina e paládio – Esta cotação é

conhecida no mercado financeiro como a referência da cotação do barril do

petróleo. Será usado o termo BRENT para referenciar essa série.

A cotação de uma ação dentro do mercado de Bolsa de Valores é representada

por um conjunto de 5 (cinco) séries que são correlacionadas à ação. No caso da

PETR4, que representa a ação Petrobras PN (preferencial), são elas:

• Valor de Fechamento da PETR4;

• Valor de Abertura da PETR4;

• Volume Negociado da ação PETR4;

• Valor da Cotação Máxima do dia da PETR4;

• Valor da Cotação Mínima do dia da PETR4.

3.2 Análise da Dependência usando a Função de Autocorrelação

Amostral

O primeiro passo para analisar qualquer série temporal é gerar o gráfico de seus

dados. Caso exista qualquer descontinuidade na série, por exemplo, uma mudança de

nível repentina, é um aviso de que a série deve ser analisada nessa primeira quebra

dentro do seu segmento homogêneo e deverá ser estudada com bastante atenção para

que se demonstre a existência de alguma justificativa para descartá-la (registro

errado) ou interpretar a diferença.

17

Foram selecionados 1488 pregões, no período de 01/08/2002 a 31/07/2008, o que

resultou na seguinte representação da variação dos valores diários do fechamento da

ação PETR4, conforme Figura 3-1.

Figura 3-1: Gráfico com os dados históricos do fechamento diário da ação PETR4.

Analisando o gráfico correspondente a Figura 3-1, observou-se a existência de

uma descontinuidade nos valores da série histórica dos fechamentos diários da

PETR4, a partir do registro 1.423, que corresponde ao dia 28/04/2008, data em que

ocorreu o desmembramento da ação, que é uma elevação do número de ações

representativas do capital de uma companhia por desdobramento, sem alteração do

capital social. Nesse caso específico, todos os acionistas da PETR4 receberam o

dobro de ações que possuíam, fazendo com que o valor de mercado fosse divido por

dois (este ponto está destacado na Figura 3-1, ilustrado por uma elipse). Por isso, foi

necessário fazer um pré-processamento dos dados da ação, com divisão por dois nos

valores das séries até a data do desdobramento. Como resultado, os valores de

fechamento da PETR4 passaram a variar de acordo com o descrito na Figura 3-2.

18

Figura 3-2: Gráfico do Fechamento Diário da PETR4 após pré-processamento.

Uma análise gráfica de uma série apresenta os componentes determinísticos

presentes da mesma, como tendências, sazonalidade e ruídos conforme o modelo

clássico de decomposição baseado na Equação 3-1 [8], em que � representa a

função de mudança lenta, conhecida como componente de tendência; � representa o

componente sazonal e � o ruído ou resíduo.

� = � + � + � (3-1)

Para verificar a existência de uma tendência na série, foi utilizado o gráfico de

função espectral [8]. A Figura 3-3 corresponde ao gráfico da função espectral da série

Fechamento PETR4 e, nesse caso, observou-se um pico maior de amplitude em uma

região com freqüência próxima a zero, o que corresponde a um período infinito. Tal

característica comprova um comportamento ao longo de todo o nível da série, ou seja,

a série Fechamento PETR4 tem o componente de tendência � conforme Equação 3-

1.

19

Figura 3-3: Espectrograma da série Fechamento PETR4.

Para detectar o componente de sazonalidade � da Equação 3-1 foi usado o

gráfico de autocorrelação da série Fechamento PETR4, representado pela Figura 3-3

e, analisando o mesmo, constatou-se o valor máximo com lag 0 e valores

decrescentes tendendo a zero quando se distanciavam do valor de lag 0. Isto indicou

que não existia sinal de movimentos cíclicos ou de sazonalidade da série, ou seja, que

neste caso o � = 0.

Figura 3-4: Gráfico de autocorrelação da série Fechamento PETR4.

20

Para estimar o componente de tendência � da série Fechamento PETR4 foi

feita a aplicação de um filtro finito de médias móveis bilaterais (two-side), com janela

de tamanho 5 (q=2) [8] [5], conforme descrito pela Equação 3-2.

� = �2� + 1��� ∑ � ��, � + 1 ≤ � ≤ � − �!�"�! (3-2)

em que m$ representa o componente de tendência estimado; 2q + 1, o tamanho da

janela para a aplicação do filtro; X$, a série temporal original; e n o número de

amostras da série, conforme o gráfico da Figura 3-5.

Figura 3-5: Componente de tendência �� da série Fechamento PETR4.

Após o cálculo do componente de tendência estimado (m$), e sabendo que o

componente de sazonalidade � não existe nesta série, os valores dos resíduos

estacionários foram obtidos através da equação Y$ = X$ − m$ e estão representados

pela Figura 3-6.

21

Figura 3-6: Gráfico dos resíduos estacionários da série de Fechamento PETR4.

Após a descoberta dos resíduos estacionários da série Fechamento PETR4, que

correspondem ao elemento Y$ da Equação 3-1, foi necessário fazer a análise da

dependência temporal do resíduo estacionário da série para identificar os atrasos

relevantes.

Observou-se na Figura 3-7, que representa o gráfico com as estimativas dos

coeficientes de autocorrelação para a série de resíduos (Y$), a existência de

coeficientes de autocorrelação fora do intervalo de confiança representada pelos

limites de ±1.96/√n, o que levou à conclusão de que a série Y$, no período de tempo

considerado (agosto de 2002 a julho de 2008), teve comportamento que depende de

seus valores passados. A característica apontada pela função de autocorrelação

amostral [8] ilustrada na Figura 3-7, sugeriu valores de entrada para os modelos de

previsão baseados em redes neurais artificiais [5], ou seja, era possível usar os valores

referentes aos lags 2 e 3, que correspondem aos dados PETR42�� e PETR42��,

valores passados para prever os seguintes. Porém foram feitos experimentos que

comprovaram a importância do lag 1, correpondente ao PETR4d, o que tem sentido

numa previsão de cotação de ações, já que os investidores utilizam esse dado como

orientação das próximas operações, com isso serão utilizados os lags 1, 2 e 3.

22

Figura 3-7: Autocorrelação dos resíduos da série Fechamento.

3.3 Análise das relações de dependência temporal entre as séries de

mercado

Ao definir quais séries do mercado tinham relação temporal com a série Fechamento

PETR4 diário, uma precisão maior no processo de prever os valores foi alcançada

através das séries exógenas inseridas na rede neural.

Em primeiro lugar, foi feita uma análise dos gráficos com visualização das séries

exógenas e da série de Fechamento PETR4. Observou-se que, no gráfico representado

na Figura 3-8 existe alguma relação entre as séries do SP500, porém não tão forte.

Figura 3-8: Gráfico da série SP500 X Fechamento PETR4.

23

No caso do gráfico Dólar x Fechamento PETR4, representado pela Figura 3-9,

verifica-se que existe um relacionamento entre a série do Dólar e a série Fechamento

PETR4.

Figura 3-9: Gráfico da série DÓLAR X Fechamento PETR4.

O gráfico da série DAX x Fechamento PETR4 apresenta um relacionamento

entre as duas séries, conforme Figura 3-10.

Figura 3-10: Gráfico da série DAX X Fechamento PETR4.

24

No gráfico da Figura 3-11 representa a visualização das séries Euro x

Fechamento PETR4, que demonstra um fraco relacionamento entre as duas séries.

Figura 3-11: Gráfico da série Euro X Fechamento PETR4.

O gráfico IBOV x Fechamento do PETR4, Figura 3-12, apresenta a relação entre

as duas séries, uma vez que a série IBOVESPA é o índice que acompanha a evolução

média das cotações das mais importantes ações negociadas na Bolsa de Valores de

São Paulo e tem grande influência da ação PETR4.

Figura 3-12: Gráfico da Série IBOV X Fechamento PETR4.

25

No gráfico BRENT x Fechamento do PETR4, representado pela Figura 3-13, o

relacionamento entre as duas séries é grande, posto que a Petrobras possui como um

dos seus principais produtos a extração de petróleo e a série BRENT é cotação do

Light Sweet Crude Oil Futures da New York Mercantile Exchange e, no contexto do

mercado financeiro, é conhecido o valor referência do petróleo internacional.

Figura 3-13: Gráfico da série Brent X Fechamento PETR4.

Forte relacionamento se observa no gráfico, conforme Figura 3-14, entre as séries

Fechamento PETR4 e PETRÓLEO que é a cotação ADR da Petrobras, recibo de

ações de companhias não sediadas nos Estados Unidos, que comprova a estreita

relação.

26

Figura 3-14: Gráfico Petróleo X Fechamento PETR4.

A Tabela 3-1 representa os coeficientes estimados de correlação cruzada [8] para

as séries de mercado. Foram colocadas as correlações com lags 0 e +1 para

demonstrar que algumas vezes é interessante colocar os valores que se pretende

prever do dia determinado, por exemplo, o DAX, índice da Bolsa de Frankfurt que

fecha 4 horas antes da Bolsa de São Paulo.

Tabela 3-1: Coeficientes de correlação cruzada estimados para as séries de mercado.

Séries Exógenas Correlação com PETR4

lag 0

Correlação com PETR4

lag +1

SP500 0,7921 0,7937

DÓLAR 0,9594 0,9591

DAX 0,8734 0,8742

EURO1 -0,0817 -0,0794

IBOV 0,9669 0,9668

BRENT 0,9550 0,9537

PETRÓLEO 0,9282 0,9288

1 A série do EURO só está disponível a partir de 24/04/2006, e neste caso o coeficiente de correlação

cruzada foi calculado entre as datas 24/04/2006 até 31/07/2008.

27

De acordo com a análise da Tabela 3-1 apenas as séries exógenas EURO e

SP500 tiveram valores de correlação abaixo de 0,8, por isso não serão consideradas

como boas variáveis de entrada na Rede Neural MLP que tem como objetivo prever a

série Fechamento PETR4.

3.4 Análise das relações de dependência entre as séries ligadas à

ação PETR4

Nos três gráficos seguintes pode-se visualizar grande relacionamento entre

Fechamento PETR4 e Maior Alta PETR4, e Maior Baixa PETR4 e Abertura PETR4.

Figura 3-15: Gráfico Maior Alta PETR4 X Fechamento PETR4.

28

Figura 3-16: Gráfico Maior Baixa PETR4 X Fechamento PETR4.

Figura 3-17: Gráfico Abertura PETR4 X Fechamento PETR4.

No entanto, a Figura 3-18 que representa o gráfico entre a série Volume e o

Fechamento PETR4 tem um fraco relacionamento.

29

Figura 3-18: Gráfico Volume PETR4 X Fechamento PETR4.

As correlações cruzadas entre as séries PETR4 Fechamento, Abertura, Maior

Alta, Maior Baixa e Volume estão representadas na Tabela 3-2. No entanto, os dados

utilizados como variáveis de entrada na rede neural foram as séries Abertura PETR4,

Maior Alta PETR4 e Maior Baixa PETR4.

Tabela 3-2 Coeficiente da correlação cruzada estimada com as séries da PETR4.

Séries relacionadas com PETR4 Correlação com Fechamento PETR4

Abertura PETR4 0,9992

Maior Alta PETR4 0,9996

Maior Baixa PETR4 0,9997

Volume da PETR4 -0,3567

Conforme Tabela 3-3 apenas a série Volume da PETR4 será descartado como

variável de entrada.

3.5 Número de registros necessários para o treinamento da Rede

Neural

Nos estudos realizados relativos à quantidade de registros necessários para uma boa

previsão da série temporal, não se chegou a um valor definitivo. Na verdade, uma

grande variação entre 500 à 2.500 registros foi encontrada.

30

Buscando a definição do melhor período para datas mais interessantes, seis

períodos diferentes foram simulados, variando de 2 a 7 anos, e representados através

de médias e medianas dos erros quadráticos gerados pelas redes neurais.

Tabela 3-3: Dados do desempenho da rede neural na fase de treinamento com diversos períodos.

Período Mediana MSE Média MSE 01/08/2006 à 31/07/2008 0,6060 0,6085 01/08/2005 à 31/07/2008 0,4517 0,4529 01/08/2004 à 31/07/2008 0,3512 0,3563 01/08/2003 à 31/07/2008 0,2878 0,4511 01/08/2002 à 31/07/2008 0,2451 0,2439 01/08/2001 à 31/07/2008 0,2109 2,4834

Conforme dados da Tabela 3-3, foi escolhido o período com registros entre os

anos de 2002 e 2008, por ele ter alcançado a menor média MSE entre os outros

períodos.

3.6 Definição das variáveis de entrada na rede neural

Como conclusão deste capítulo é apresentada na Tabela 3-4 as variáveis de entrada na

Rede Neural MLP que têm como finalidade prever o Fechamento PETR4.

Tabela 3-4 Variáveis de entrada para a rede neural.

Quantidade Variáveis de Entrada

1 Fechamento PETR4 d

2 Fechamento PETR4 d-1

3 Fechamento PETR4 d-2

4 Abertura PETR4 d

5 Maior Alta PETR4 d

6 Maior Baixa PETR4 d

7 DÓLAR

8 DAX - Bolsa Frankfurt

9 IBOV – Índice Ibovespa

10 BRENT - Petróleo Internacional

11 PETRÓLEO - ADR Petrobras

31

CAPÍTULO 4

Métricas de Desempenho das Previsões e Pré-

processamento das Séries

Neste capítulo serão apresentadas as métricas para analisar o desempenho das Redes

Neurais treinadas, como também serão analisadas algumas formas de pré-

processamento que são úteis para melhorar a previsão no domínio de cotação de ações

nas bolsas de valores.

4.1 Métricas para Analisar o Desempenho

As medidas de desempenho foram definidas com base no erro de previsão, cuja

formulação se deu a partir da diferença entre o valor atual da série (valor desejado ou

target – alvo ou objetivo da rede) e o valor previsto (de saída do modelo, output–

saída ou resposta da rede). Assim, foram representadas pela equação

3 = ��4563� − 78�98� � (4-1)

em que �4563� é a saída desejada para o modelo preditor no tempo t, e 78�98�

é a saída da rede neural, no tempo t.

Abaixo seguem as métricas de análise de seus significados e equações:

4.1.1 MSE (Mean Square Error)

A Métrica MSE é a mais comum para analisar o de modelos construídos por redes

neurais, tem como equação

:�; = �< ∑ ��4563� − 78�98� �²< "� (4-2)

sendo N a quantidade de pontos da série temporal. Quanto melhor a solução da

rede neural menor o resultado do MSE.

32

Embora seja possível utilizar o erro MSE como parâmetro de desempenho, ele

não fornece uma visão completa e livre de dúvidas sobre o desempenho do modelo

[16]. Dessa forma, para melhor compreensão da análise dos modelos de previsão,

outras métricas foram incorporadas para maior confiabilidade.

4.1.2 MAPE (Mean Absolute Percentual Error)

A métrica de desempenho MAPE, erro médio percentual absoluto, apresenta os erros

em percentuais e isto é uma grande vantagem em relação à métrica MSE, pois não

depende de valores ou escalas das séries e com isso simplifica a sua utilização. O

MAPE tem sua equação definida por:

:>?; = �< ∑ @ ABCD E�FG HG E ABCD E @< "� (4-3)

Quanto menor o valor do MAPE, mais próximos os resultados desejados estão da

saída fornecida pela rede.

4.1.3 U de THEIL - NMSE (Normalised Mean Square Error)

A métrica U de THEIL – também conhecida como NMSE [17], que será chamado

nesse trabalho através do seu acrônimo THEIL, e cujo valor mede a relação entre os

quadrados do sistema testado e o quadrado dos erros de um modelo do tipo Random

Walk, caminho aleatório, segundo o qual a previsão de um determinado valor da série

no instante t é calculada a partir de uma dependência linear com o seu último retardo

no tempo t-1. A partir daí tem-se output$ = output$�� − r$, em que r$ é um termo

aleatório gerado por uma distribuição uniforme de números aleatórios, e a equação

final

NO;PQ = ∑ � ABCD E�FG HG E�RSETU∑ �FG HG E�FG HG EVU�RSETU (4-4)

sendo THEIL = 1, o modelo testado tem desempenho igual ao Random Walk; quando

THEIL > 1, o desempenho é inferior e, se THEIL < 1, o modelo é superior ao

33

Random Walk. Quanto mais próximo de 0 (zero) o THEIL, melhor o resultado de um

modelo.

4.1.4 POCID (Prediction On Change In Direction)

A métrica POCID apresenta o percentual de acerto quanto à previsão da alteração da

direção no caso das cotações das ações, ou seja, suas subidas e descidas.

?WXPY = 100 ∑ [ESETU< (4-5)

Sabendo que,

Y = \1, �3 ��4563� − �4563� ����78�98� − 78�98� ��� > 00, ^4�7 ^7��5á5`7 a

O POCID terá resultado entre 0 (zero) e 100 (cem), e, quanto mais próximo de

100, melhor será o modelo de previsão. Essa métrica de desempenho é muito

importante quando aplicada ao mercado de ações, pois a correta previsão de subidas e

descidas das cotações das ações afetam diretamente os ganhos e as perdas financeiras.

4.1.5 ARV (Average Relative Variance)

A medida de desempenho ARV mede o ganho de desempenho do modelo testado em

relação a outro que realiza previsões apenas calculando a média aritmética das

observações da série. Ela tem como equação

>bc = �<

∑ �FG HG E� ABCD E�RSETU∑ �FG HG E� ABCD �����������RSETU (4-6)

em que �4563���������� é a média aritmética da saída desejada.

Se ARV = 1, o modelo é equivalente ao cálculo da média da série para previsão.

Se ARV > 1, o modelo testado é pior do que utilizar a média aritmética dos pontos da

série para realizar a previsão. Se o ARV < 1, melhores serão os resultados em

comparação com a média aritmética dos pontos da série. Quanto mais próximo de 0

(zero) o ARV, melhor o modelo testado.

34

4.1.6 SLG (Sum of Losses and Gains)

Para um investidor a informação prevista da subida ou da descida de uma ação é

capaz de gerar uma operação (compra/venda). Por esse motivo, o SLG é proposto

neste trabalho, e sua medida apresenta o somatório dos ganhos e das perdas do

modelo, considerando a direção dada pela previsão. Havendo acerto na direção da

série o valor absoluto |��4563� − �4563� ���| é somado; caso o modelo erre a

direção o valor |��4563� − �4563� ���| é subtraído. Seu valor é calculado pela

equação:

�Qe = ∑ fESETU< (4-7)

em que

Q = \+|��4563� − �4563� ���|, �3 ��4563� − �4563� ����78�98� − 78�98� ��� > 0−|��4563� − �4563� ���|, ^4�7 ^7��5á5`7 a Caso o valor do SLG seja menor ou igual a 0 (zero), o modelo proposto tem um

desempenho considerado fraco e não deve ser utilizado, pois poderá gerar prejuízos.

Quanto maior o SLG, melhor o desempenho da previsão.

4.2 Pré-processamento das bases de dados

Um das importantes fases para se obter uma boa previsão é o pré-processamento das

séries temporais, principalmente, as ligadas ao mercado financeiro.

Tabela 4-1: Variáveis de Entrada da Rede Neural proposta no Capítulo 3.

Quantidade Variáveis de Entrada

1 Fechamento PETR4 d

2 Fechamento PETR4 d-1

3 Fechamento PETR4 d-2 4 Abertura PETR4 d 5 Maior Alta PETR4 d 6 Maior Baixa PETR4 d

7 DÓLAR d 8 DAX - Bolsa Frankfurt

9 IBOV – Ibovespa 10 BRENT - Petróleo Internacional

11 PETRÓLEO - ADR Petrobras

35

A previsão de séries temporais exige uma série de processamentos iniciais com o

conjunto de dados que serão utilizados como variáveis de entradas, conforme Tabela

4-1, e a de saída, conforme Tabela 4-2, para a rede neural.

Tabela 4-2: Variável da Camada de Saída da Rede Neural proposta no Capítulo 3.

Quantidade Variáveis de Saída

1 Fechamento PETR4 d+1

4.2.1 Ajuste das datas das séries exógenas

No modelo proposto existem 5 (cinco) séries exógenas que não são dados diretamente

ligados à ação que se deseja prever. São elas: DÓLAR, DAX – Bolsa de Frankfurt,

IBOV – índice da Bovespa, BRENT- Petróleo Internacional e PETRÓLEO – ADR

Petrobras, conforme Tabela 4-1.

Apesar de serem consideradas diárias, as séries são formadas quando do pregão

na Bolsa de Valores, o que significa que só existem nos dias úteis, desconsiderando

feriados e fins de semana. O modelo proposto tem como objetivo prever a cotação da

ação PETR4, da BOVESPA e, por isso, todas as séries exógenas serão ajustadas para

as datas em que ocorreu pregão na Bolsa de Valores de São Paulo.

Para que se tenha a previsão de cotação “próximo dia” (d+1) da PETR4, são

consideradas como entrada na rede neural as variáveis de entrada chamadas “dia de

hoje” (d), mais atualizadas quanto possível, para que melhor seja a previsão.

No caso de um feriado no Brasil, por exemplo, quando pregões não são

realizados na segunda-feira e terça-feira de carnaval, para prever a quarta-feira de

cinzas é preciso que se saiba dos valores da sexta-feira anterior ligados à Bovespa e

os valores da terça-feira no mundo. O Algoritmo 4-1 foi criado para sincronizar as

datas da série PETR4 e das séries exógenas levando em consideração a sincronização

dos feriados.

36

Algoritmo 4-1: Ajusta valores das séries exógenas de acordo com os feriados.

Feriado = 0; // Valor que indica feriado

Indice = 1; // Valor usado como índice para os valores da série exógena

Tamanho_da_Série = Size(Serie_Exogena); // Tamanho da série exógena

If Primeiro dia do Petr4 for posterior ao da Séria Exógena

While Primeiro dia do Petr4 for posterior ao da Serie_Exogena and Indice < Tamanho_da_Série

Indice = Indice + 1;

End While

End If

If Primeiro dia do Petr4 for anterior ao da Serie_Exogena(Indice)

Valor = NULL;

Else

Valor = Serie_Exogena_Valor_Antigo(Indice);

End If

i = 1;

While i <= Tamanho do Vetor Petr4

If Dia do Petr4(i) for anterior ao da Serie_Exogena(Indice)

Valor_Serie_Exogena_Atual = Valor;

i = i + 1;

Else

If Dia do Petr4(i) for posterior ao da Serie_Exogena(Indice)

Valor = Serie_Exogena_Valor_Antigo (indice);

If Indice < Tamanho_da_Série

Indice = Indice + 1;

End If;

Feriado = 1;

End If;

If Feriado == 1

Feriado = 0;

Serie_Exogena_Valor_Atual(i-1) = Valor;

End If;

Serie_Exogena_Valor_Atual(i) = Serie_Exogena_Valor_Antigo (Indice);

Valor = Serie_Exogena_Valor_Antigo (Indice);

i = i + 1;

If Indice < Tamanho_da_Série

Indice = Indice + 1;

End If;

End If;

End While;

37

4.2.2 Normalização

No modelo proposto, foram utilizadas como funções de ativação na camada

escondida a tangente sigmóide hiperbólica, e a função de transferência linear para a

camada de saída, por isso, foi necessário que todos os valores utilizados pela rede

fossem normalizados dentro do intervalo definido no domínio da função de ativação.

Figura 4-1: Gráfico da função tangente sigmóide hiperbólica.

Figura 4-2: Gráfico da função linear.

As funções de ativação não-lineares estão definidas em um dado intervalo. No

caso da função tangente sigmóide hiperbólica o intervalo está entre [-1,1], o que

significa que, todo intervalo deverá estar normalizado sob o domínio da função de

ativação utilizada. Porém, no caso de séries temporais que correspondam à cotação de

ações, é comum encontrar soluções que estejam acima do máximo da série original,

como também um valor menor que o mínimo histórico. Sendo assim, foi estabelecido

para normalização o intervalo [-0,9; 0,9].

Transformação linear para o intervalo [a,b]:

� = �g − 4� hi�hjklhjmn�hjkl + 4 (4-8)

Em que � é o valor normalizado, �o o valor original, �pAq o valor máximo dá

série, e �pr o valor mínimo da série.

38

Como a série do Fechamento PETR4 teve como intervalo da normalização os

valores entre [-0,9; +0,9], a Equação 4-8 ficou com os valores da Equação 4-9.

� = �1.8� hi�hjklhjmn�hjkl − 0.9 (4-9)

No caso específico, existem séries de mesma origem (a cotação da ação PETR4),

conforme Tabela 4-3. Por isso, foi necessário normalizá-las sob o mesmo padrão,

primeiro calculando os valores máximos e mínimos de todos os seus valores juntos e,

depois, utilizando a Equação 4-9 para normalização, todas com os mesmos

parâmetros.

Tabela 4-3: Variáveis que estão relacionadas a ação PETR4.

Fechamento PETR4 d

Fechamento PETR4 d-1

Fechamento PETR4 d-2

Abertura PETR4 d

Maior Alta PETR4 d

Maior Baixa PETR4 d

39

CAPÍTULO 5

Resultados Experimentais

Neste capítulo serão apresentados 2 (dois) experimentos utilizando arquiteturas

diferentes de Redes Neurais Artificiais Perceptron de Multi-Camadas, MLP. A

primeira com 3 (três) variáveis de entrada, que correspondem aos retardos temporais

(lags), observações passadas utilizadas para determinação de próximo valor futuro, da

série Fechamento PETR4. O segundo modelo terá 11 variáveis de entrada, sendo 3

(três) variáveis do primeiro experimento mais 8 (oito) variáveis, sendo 5 (cinco)

exógenas que foram definidas no Capítulo 3.

5.1 Banco de Dados

Um total de 1488 amostras foi utilizado nos experimentos que correspondem ao

período entre os dias 01/08/2002 à 31/07/2008. Para criar o banco de dados as

seguintes fonte de dados foram consultadas:

• Para as séries relacionadas à ação PETR4 foram obtidas através do site da

Bovespa, Bolsa de Valores de São Paulo [10], dentro do menu mercado de

ações, dados históricos;

• As outras séries utilizadas no modelo (DAX, IBOV, DÓLAR, PETRÓLEO,

EURO, SP500, BRENT) foram conseguidas através do site ADVFN [18], que

tem acesso restrito a assinantes.

5.2 Treinamento

Os experimentos foram feitos com a divisão do conjunto de dados em três partes

respeitando a seguinte proporção: 60% para o treinamento da rede neural, 20% para a

validação da rede e 20% para o conjunto de testes, conforme a Figura 5-1.

40

Figura 5-1: Experimento 1 - Treinamento com faixas mais utilizadas.

Os experimentos realizados com Redes Neurais MLP foram desenvolvidos e

implementados com a ferramenta MatLab 7.5 Release R2007b, e o toolbox de redes

neurais (Artificial Neural Network Toolbox). O algoritmo Backpropagation

Levenberg-Marquardt [19] foi usado para otimização dos pesos da rede, sendo o

mesmo também o mais utilizado no método TAEF (Time Lag Added Evolutionary

Forecasting) [9].

Para cada arquitetura, ou seja, opções de número de neurônios na camada

escondida, foram executadas dez inicializações distintas com o objetivo de obter um

comportamento médio do modelo, e produzidas, então, vinte e seis arquiteturas

diferentes, que correspondiam à variação de número de neurônios na camada

escondida entre 25 e 50. Esta escolha foi alcançada tendo em vista um conjunto de

testes realizados, onde constatou-se que nunca foram escolhidas arquiteturas com

menos de 25 neurônios em sua camada escondida.

5.3 Experimentos

Estes experimentos têm como objetivo principal apresentar a análise do desempenho

que se obtém com a inclusão de séries exógenas, como variáveis de entrada, na Rede

Neural MLP para previsão de séries temporais.

As arquiteturas básicas dos experimentos consistiram em uma Rede Neural MLP

de 3 (três) camadas (camada de entrada, camada escondida e camada de saída). Em

todos os experimentos tem-se 1 (um) neurônio na camada de saída que tem como

41

objetivo a previsão da cotação do Fechamento da PETR4 para o dia seguinte,

denominado PETR4 d+1.

Foi realizada uma variação na quantidade de neurônios na camada escondida

entre 25 (vinte e cinco) e 50 (cinqüenta) nos experimentos. Como já visto, o protótipo

gera para cada modelo 10 repetições, com valores iniciais escolhidos de forma

aleatória e como se tem 26 arquiteturas diferentes de Redes Neurais MLP para os

experimentos, são gerados como resultado 260 Redes Neurais MLP treinadas.

5.3.1 Experimento 1: Utilização de 3 variáveis de entrada, retardos temporais

Neste primeiro experimento foram utilizados apenas 3 (três) variáveis de entrada, que

representam os retardos temporais significantes para a previsão da série temporal.

Esta arquitetura de redes neurais foi definida a partir dos parâmetros de modelos

lineares de Box-Jenkins [8], como visto no Capítulo 3. Este modelo está representado

na Figura 5-2.

Figura 5-2: Modelo de Rede Neural MLP do primeiro experimento.

Entre as 26 arquiteturas de redes neurais MLP propostas, o melhor resultado

obtido foi o modelo que tinha 38 neurônios na camada escondida, porque a média do

42

MSE, na fase de treinamento, considerando 10 repetições, obteve o menor MSE

dentre os outros modelos testados. Conforme Tabela 5-1.

Tabela 5-1: Média e Desvio Padrão do Experimento 1 sobre o conjunto de Treinamento.

N. Neurônios Camada Escondida Média MSE Desvio Padrão MSE

25 0,050139658 0,005872713

26 0,051431234 0,012508607

27 0,046522566 0,000700334

28 0,047418049 0,002048195

29 0,046963687 0,001035609

30 0,047596753 0,002301051

31 0,047805972 0,003350859

32 0,047342434 0,002049464

33 0,046634266 0,000985134

34 0,046854113 0,000948295

35 0,046715825 0,001148051

36 0,046947139 0,001181908

37 0,046720108 0,000669280

38 0,046253619 0,000617237

39 0,047406380 0,002072850

40 0,046787628 0,000999415

41 0,046658958 0,000640195

42 0,047255184 0,001820189

43 0,047433627 0,004004548

44 0,049913216 0,004561817

45 0,048084359 0,002330344

46 0,052660011 0,019245893

47 0,047055052 0,002192191

48 0,047272838 0,001824644

49 0,047397029 0,002419188

50 0,046882317 0,001536801

Foi feita uma análise dos desempenhos, conforme definido no Capítulo 3, da

arquitetura escolhida (com 38 neurônios na camada escondida) apresentando os

resultados médios e o desvio padrão das 10 repetições desta arquitetura.

43

Tabela 5-2: Médias e Desvio Padrão dos desempenhos do melhor modelo do Experimento 1.

Desempenhos Conjunto de Treinamento Conjunto de Validação Conjunto de Teste

Média Desvio Padrão Média Desvio Padrão Média Desvio Padrão MSE 0,046254 0,000617 0,157641 0,002440 1,086715 0,298071

MAPE 0,015148 0,000096 0,014280 0,000152 0,020840 0,002533 THEIL 0,845654 0,048279 0,909144 0,076305 0,904944 0,272586 POCID 51,580717 0,360182 51,587838 0,657604 52,828283 2,161477 ARV 0,000881 0,000424 0,136071 0,102418 0,000058 0,000075 SLG 0,015364 0,002230 0,005885 0,005090 0,087391 0,053765

Verifica-se que os resultados obtidos com a modelo proposto no Experimento 1,

conforme Tabela 5-2 obtiveram valores satisfatórios de acordo com os desempenhos

propostos no Capítulo 3. O MAPE correspondendo a 2,08% erros, o valor de POCID

acima de 52% que corresponde a uma previsão melhor do que o experimento do tipo

cara e coroa. Os valores do THEIL tiveram valores abaixo de 1 indicando uma

previsão melhor que o modelo do tipo Random Walk,, e o baixo valor do ARV indica

que o Experimento 1 é melhor que a previsão baseado na média móvel.

Figura 5-3: Gráfico com resultado do conjunto de teste do Experimento 1.

44

Figura 5-4: Gráfico com os últimos 100 dias do conjunto de testes resultantes do Experimento 1.

A Figura 5-3 representa o gráfico com o conjunto de testes com a série real (linha

sólida) e a previsão gerada do Experimento 1 (linha tracejada) e a Figura 5-4

apresenta o detalhe com os últimos 100 pontos do conjunto teste. Observou-se que a

previsão gerada no Experimento 1, em relação à série original, apresentou um

deslocamento de – aproximadamente – um dia de defasagem, o que é uma previsão

fora de fase [9], aquelas que tendem a um modelo do tipo Random Walk, estando a

rede defasada negativamente em um quanta, ou seja, atrasada em sua previsão em

uma unidade fundamental de tempo ou um passo, o que neste caso representa um dia

útil de pregão.

5.3.2 Experimento 2: Inclusão de 8 variáveis sendo 5 exógenas

Neste experimento foram utilizadas onze variáveis de entrada que representam os

retardos significantes para a previsão da série temporal, mais oito séries sendo cinco

exógenas, estando tal modelo representado na Figura 5-5.

Entre as 26 arquiteturas de redes neurais MLP propostas, o modelo que tem 45

neurônios na camada escondida apresentou o melhor resultado. Ele foi determinado

porque obteve a menor média do desempenho MSE durante a fase de treinamento,

conforme Tabela 5-3.

45

Figura 5-5: Modelo de Rede Neural MLP proposto no segundo experimento.

Tabela 5-3: Média e Desvio Padrão dos resultados do MSE da melhor modelo do Experimento 2.

N. Neurônios Camada Escondida Média MSE Desvio Padrão MSE

25 0,049149200 0,005349789

26 0,051684793 0,006424363

27 0,053436527 0,015384322

28 0,046972696 0,005118560

29 0,057201721 0,020583428

30 0,048563409 0,005651585

31 0,050165327 0,008265760

32 0,053742659 0,015838287

33 0,055670429 0,013110028

34 0,048570138 0,008437730

35 0,045120717 0,003498908

36 0,062322108 0,029247378

37 0,051691981 0,012022216

38 0,057940867 0,016900525

46

39 0,053728268 0,018432330

40 0,048427495 0,007877339

41 0,054616024 0,021961664

42 0,049369915 0,006738582

43 0,055047763 0,016996115

44 0,056556329 0,030246134

45 0,043696879 0,003086995

46 0,052138096 0,014504169

47 0,050406489 0,009028342

48 0,049199678 0,012839301

49 0,050073291 0,011329232

50 0,057441845 0,033150860

O experimento escolhido como aquele de melhor arquitetura apresentou 45

neurônios na camada escondida e média do MSE de 0,043696879. A partir daí, então,

uma análise de todos os desempenhos foi feita e os resultados médios e do desvio

padrão das 10 repetições desta arquitetura foram definidos conforme Tabela 5-4.

Tabela 5-4: Médias e Desvio Padrão dos desempenhos da melhor arquitetura do Experimento 2.

Os resultados obtidos no Experimento 2 se apresentaram superiores àqueles

encontrados no Experimento 1 e, como descrito na Tabela 5-5, cinco dos seis critérios

de desempenho foram melhores no Experimento 2, observando ainda que o MSE foi

23,86% melhor, o MAPE, 14,35%, o POCID, 6,31% e, principalmente, o SLG, que

representa o somatório dos ganhos e lucros com a previsão, foi 96,87% maior e

conseqüentemente melhor.

Apenas o critério de desempenho ARV foi pior no Experimento 2, porém o

resultado desse desempenho é considerado bom quando se obtém resultados menores

Desempenhos Conjunto de Treinamento Conjunto de Validação Conjunto de Teste

Média Desvio Padrão Média Desvio Padrão Média Desvio Padrão MSE 0,043697 0,003087 0,156676 0,005931 0,827401 0,076608

MAPE 0,014066 0,001053 0,014323 0,000364 0,017849 0,000984 THEIL 0,792461 0,108781 0,966696 0,112369 0,745869 0,136815 POCID 58,464126 2,890382 50,912162 1,957323 56,161616 3,076916 ARV 0,000564 0,000569 2,042147 3,392381 0,000084 0,000103 SLG 0,043700 0,010078 0,004436 0,012156 0,172051 0,064053

47

que 1 (um), e nesse caso o próprio Experimento 2 teve como resultado um valor

muito pequeno 0,000084 e é considerado uma boa previsão.

Tabela 5-5: Comparação entre o conjunto de testes no Experimento 1 e o Experimento 2.

Desempenhos Experimento 1 Experimento 2 Comparação

MSE 1,086715 0,827401 +23,8622%

MAPE 0,02084 0,017849 +14,3522%

THEIL 0,904944 0,745869 +17,5784%

POCID 52,828283 56,161616 +6,3098%

ARV 0,000058 0,000084 -44,8276%

SLG 0,087391 0,172051 +96,8750%

A Tabela 5-5 representa uma comparação entre dois modelos de previsão no

qual a 2a coluna representa o experimento antigo e a 3a coluna o novo experimento,

no caso específico, entre o Experimento 1 e o Experimento 2. A coluna

“Comparação”, apresenta a relação entre o novo experimento e o experimento antigo.

Cada vez que os percentuais da coluna “Comparação” tiverem valor positivo indica

que o novo experimento é melhor nesta determinada métrica de desempenho, caso

seja negativo o novo experimento é pior nesta métrica de desempenho.

Para calcular os valores da coluna “Comparação” em relação aos desempenhos

MSE, MAPE, THEIL e ARV, que quanto menor o valor melhor é a previsão, foi

utilizada a seguinte equação

X7�9454çã7 = v1 − w �é�5`^4 y7 �7z7 3�935`�3��7�é�5`^4 y7 3�935`�3��7 4��`67{| x 100

já em relação aos desempenhos POCID e SLG, que quanto maior o valor melhor é a

previsão, foi utilizado a seguinte equação

X7�9454çã7 = vw �é�5`^4 y7 �7z7 3�935`�3��7�é�5`^4 y7 3�935`�3��7 4��`67{ − 1| x 100

48

Figura 5-7: Gráfico com os últimos 100 dias do conjunto de testes resultantes do Experimento 2.

Através dos resultados observados, a previsão utilizando redes neurais com séries

exógenas (Experimento 2) teve melhor desempenho, o qual foi alcançado graças ao

maior número de informações que se pode adicionar como variáveis de entrada,

principalmente analisando-se o domínio da série que se deseja prever. Melhores

resultados são obtidos se forem adicionados o maior número de entradas significantes

na Rede Neural incluindo com isso alguns fatores fundamentais e/ou econômicos [3].

Um maior esforço se fez necessário quando da definição de características das

séries temporais usadas, e do processo de análise do relacionamento com a série a ser

prevista. O uso de características de domínio depende da análise da série temporal por

um especialista. Dessa forma, o processo de construção do conjunto de variáveis de

Figura 5-6: Gráfico com resultado do Experimento 2 e os valores reais no conjunto de teste.

49

entrada com a utilização de séries exógenas é mais demorado e custoso [20], porém

com melhores resultados.

O gráfico representado pela Figura 5-7, com os últimos 100 dias do conjunto de

testes resultante do Experimento 2, encontra-se em fase [9], são previsões que

produzem séries que não tendem ao modelo Random Walk, ou seja, o Experimento 2

obteve uma previsão superior ao gráfico representado pela Figura 5-4, resultado do

Experimento 1, que encontra-se fora de fase.

5.4 Combinação das melhores redes baseado nos desempenhos

Para a previsão de séries temporais, os melhores resultados são obtidos pela

combinação de diferentes modelos de previsão ao invés da seleção daqueles que

apresentam os melhores desempenhos individualmente. A Combinação de

especialistas, ou máquina de comitê, é capaz de agregar o conhecimento adquirido

para chegar a uma decisão global supostamente superior àquela alcançável por

qualquer um atuando isoladamente [1].

A principal motivação na combinação de modelos de previsão baseado em Redes

Neurais é a melhoria da habilidade de generalização, além disso, a combinação

permite que o modelo combinado minimize as falhas que possam ocorrer nas redes

individuais [21].

O processo de previsão usando combinação pode ser sumarizado nos seguintes

passos:

1. Treinamento de todas as Redes Neurais MLP; 2. Seleção das melhores redes baseado em critério relevante à série que será

prevista, gerando um subconjunto; 3. Criação da combinação dos elementos desse subconjunto para se obter o

resultado da previsão.

50

5.4.1 Seleção do subconjunto de Redes Neurais MLP treinadas

O problema da seleção para previsão é essencialmente determinar quais são as

melhores Redes Neurais ou as mais importantes [22]. O teste de maior significância

econômica foi escolhido para selecionar o subconjunto com as melhores Redes

Neurais MLP treinadas. Como no caso, o domínio da previsão está relacionado ao

mercado financeiro, o desempenho que tem maior aderência é o SLG (Sum of Lose

and Gain) que apresenta a tendência da previsão (subida e descida da cotação da

ação) mas também quanto essa previsão representaria de lucro ou prejuízo.

Do Experimento 2, que tem 26 arquiteturas diferentes cada uma com 10

inicializações diferentes totalizando 260 Redes Neurais MLP, foram selecionadas as 8

(oito) Redes Neurais MLP que obtiveram as melhores métricas de desempenho

através do SLG, ou seja, aquelas que tiveram os maiores valores no teste do SLG

durante a fase de treinamento, conforme Tabela 5-6.

Tabela 5-6: Resultado das 8 melhores Redes Neurais MLP baseado no desempenho SLG durante

fase do treinamento.

Neurônios na camada escondida

Inicialização Medidas de Desempenho

MAPE THEIL POCID ARV MSE SLG 45 2 0,013046 0,726801 63,901345 0,001865 0,041033 0,062949 43 2 0,013689 0,711426 63,004484 0,001569 0,041088 0,062904 47 8 0,013550 0,705504 63,901345 0,000757 0,049383 0,060889 46 9 0,012833 0,805477 61,995516 0,000266 0,037402 0,060187 50 4 0,012684 0,660081 62,331839 0,000307 0,041119 0,059311 50 9 0,015541 0,572685 62,780269 0,000024 0,137650 0,059040 33 3 0,018597 0,755284 63,565022 0,002139 0,071662 0,058736 48 6 0,013625 0,690845 62,556054 0,000514 0,054558 0,058642

Média (x�) 0,014196 0,703513 63,00448 0,00093 0,059237 0,060332 Desvio Padrão (σ) 0,001987 0,068503 0,721581 0,00081 0,033568 0,001769

5.4.2 Combinação “Simple Average”

O método de combinação Simple Average e os baseados em regressão são de fato os

mais discutidos na literatura, estudos comparativos entre diversas regras de

combinação apresentam a combinação Simple Average, ou média simples, das Redes

Neurais selecionadas como um dos métodos mais simples e mais eficazes [23].

51

Figura 5-8: Diagrama em blocos da máquina de comitê baseada na combinação Simple Average.

A abordagem comumente adotada por diversos autores é definir pesos iguais para

os modelos candidatos a serem combinados, ou seja, é necessário apenas criar uma

média aritmética das redes selecionadas como redes candidatas.

Tabela 5-7: Resultados dos desempenhos depois da combinação Simple Average.

Desempenho Conjunto de Treinamento Conjunto de Validação Conjunto de Teste

MSE 0,042504 0,139589 0,534453 MAPE 0,011990 0,013414 0,015194 THEIL 0,673838 0,907423 0,616343 POCID 63,789238 49,662162 57,575758 ARV 0,000664 2,241334 3,8315e-8 SLG 0,064702 -0,010304 0,253047

Figura 5-9: Gráfico da previsão do conjunto de teste usando como Combinação Simple Average.

52

Figura 5-10: Gráfico da previsão dos 100 últimos dias do conjunto de teste usando como

Combinação Simple Average.

A combinação Simple Average, apesar de ser um método simples, apresenta bons

resultados, conforme vários artigos e textos técnicos [24]. A Figura 5-9 representa o

gráfico com o conjunto de testes com a série real (linha sólida) e a previsão gerada

com a Combinação Simple Average (linha tracejada) e a Figura 5-10 apresenta o

detalhe com os últimos 100 pontos do conjunto teste.

Tabela 5-8: Comparação entre os desempenhos das médias do Experimento 2 e a combinação

Simple Average.

Desempenhos Médias Experimento 2 Combinação Simple Average Comparação

MSE 0,827401 0,534453 +35,4058%

MAPE 0,017849 0,015194 +14,8748%

THEIL 0,745869 0,616343 +17,3658%

POCID 56,161616 57,575758 +2,5180%

ARV 0,000084 3,8315e-8 +99,9544%

SLG 0,172051 0,253047 +47,0767%

Analisando a Tabela 5-8 com as comparações, o método da combinação Simple

Average teve o melhor resultado em todos os critérios de desempenho previamente

estabelecidos neste trabalho.

53

5.4.3 Combinação através da Média Ensemble

A Figura 5-11 mostram 8 (oito) Redes Neurais MLP treinadas diferentemente

(especialistas) que compartilham uma entrada comum e cujas saídas individuais são

combinadas de alguma forma para produzir uma saída global y. Esta técnica é

referida como um método de média de ensemble.

Figura 5-11: Diagrama em blocos da máquina de comitê baseada na média de Ensemble.

Os parâmetros do método Ensemble (pesos e bias) foram obtidos a partir da

equação

= ���}�����} (5-1)

em que W é a matriz de parâmetros da rede contendo os pesos e bias, X é a matriz de

padrões de entrada da rede, Y é o vetor de saída desejada e ��}�����} é a pseudo-

inversa de X, que minimiza a soma dos erros quadráticos ∑~� − �~�, resultando

em solução ótima para a matriz de pesos W [25], na Tabela 5-9 é apresentado os

valores do vetor W obtidos com a Equação 5-1 no experimento.

Tabela 5-9: Vetor W com os parâmetros da rede contendo os pesos e bias.

� ��

1 0,122285

2 0,176341

3 0,177254

4 0,189026

5 0,060446

6 0,116039

7 0,044494

8 0,114117

54

Tabela 5-10: Resultados dos desempenhos com a Combinação Média Ensemble.

Desempenhos Conjunto de

Treinamento Conjunto de

Validação Conjunto de

Teste

MSE 0,040554 0,138854 0,554393 MAPE 0,011870 0,013414 0,015499 THEIL 0,686568 0,916520 0,652661 POCID 63,565022 50,000000 56,565657 ARV 0,000632 1,848931 9,0512e-9 SLG 0,064589 -0,004223 0,237458

Figura 5-12: Gráfico da previsão do conjunto de teste usando como Combinação Média

Ensemble.

Figura 5-13: Gráfico da previsão dos 100 últimos dias do conjunto de teste usando como

Combinação Média Ensemble.

Os resultados obtidos com a previsão utilizando Combinação Média Ensemble

apresentaram melhores desempenhos que os Experimento 1 e Experimento 2.

55

Tabela 5-11: Comparação entre os desempenhos dos métodos de combinação Simple Average e

Combinação Média Ensemble.

Desempenhos Combinação Simple Average Combinação Média

Ensemble Comparação

MSE 0,534453 0,554393 -3,7309%

MAPE 0,015194 0,015499 -2,0074%

THEIL 0,616343 0,652661 -5,8925%

POCID 57,575758 56,565657 -1,7544%

ARV 3,8315e-8 9,0512e-9 +76,3769%

SLG 0,253047 0,237458 -6,1605%

Observou-se na Tabela 5-11, a comparação entre os desempenhos da previsão

obtidos entre as combinações Simple Average e a Média Ensemble que apesar de

terem tido desempenhos próximos em praticamente todos os métodos de desempenho,

a Combinação Média de Ensemble foi pior, menos no desempenho ARV.

5.4.4 Combinação através de uma Rede Neural MLP

A outra combinação proposta nesta dissertação é bem parecida com o método Média

de Ensemble. Porém no lugar de apenas um perceptron, a proposta agora é criar uma

Rede Neural MLP com 8 (oito) neurônios na camada de entrada e 1 (um) neurônio na

camada de saída que será o resultado da previsão.

A Figura 5-14 representa o comitê baseado na Rede Neural MLP sendo que os 8

(oito) neurônios da camada de entrada são alimentados com os valores

correspondentes às respectivas saídas individuais dos 8 modelos de previsão

selecionados na seção anterior que são Redes Neurais MLP treinadas diferentemente

(especialistas) que compartilham uma entrada comum.

56

Figura 5-14: Diagrama em blocos da máquina de comitê baseado em uma Rede Neural MLP.

Neste caso é preciso treinar essa nova rede, e após o treinamento são encontrados

os novos valores pesos e bias da rede que correspondem a máquina de comitê.

Tabela 5-12: Resultados dos desempenhos da combinação com Rede Neural sem camada

escondida.

Desempenho Conjunto de Treinamento Conjunto de Validação Conjunto de Teste

MSE 0,038514 0,140996 0,518795 MAPE 0,011651 0,013527 0,014779 THEIL 0,682552 0,935640 0,589597 POCID 64,573991 48,648649 59,595960 ARV 0,000480 2,136038 0,000003 SLG 0,067742 -0,012264 0,288232

Figura 5-15: Gráfico com da previsão usando como Combinação uma Rede Neural.

57

Figura 5-16: Gráfico da previsão dos 100 últimos dias do conjunto de teste usando como

Combinação uma Rede Neural.

A Figura 5-15 representa o gráfico com o conjunto de testes com a série real

(linha sólida) e a previsão gerada com a Combinação utilizando a Rede Neural (linha

tracejada) e a Figura 5-16 apresenta o detalhe com os últimos 100 pontos do conjunto

teste.

Na Tabela 5-13 foi realizado a comparação entre o melhor resultado até aquele

momento, Combinação Simple Average, e a Combinação com a Rede Neural e

verificou-se que em praticamente todos os desempenhos, menos o ARV, a

combinação que utilizou redes neurais obteve resultados superiores, destacando que o

desempenho SLG teve um resultado 13,90% melhor na utilização dessa combinação.

Tabela 5-13: Comparação entre os desempenhos dos métodos de combinação Simple Average e

combinação com Redes Neurais.

Desempenhos Combinação Simple Average Combinação com Rede Neural Comparação

MSE 0,534453 0,518795 +2,9297%

MAPE 0,015194 0,014779 +2,7313%

THEIL 0,616343 0,589597 +4,3395%

POCID 57,575758 59,59596 +3,5088%

ARV 3,8315e-8 0,000003 -98,7228%

SLG 0,253047 0,288232 +13,9045%

Como visto anteriormente a combinação que obteve melhor desempenho foi a

utilizando uma rede neural, com isso foi feito uma nova comparação, conforme

Tabela 5-14, com os resultados do conjunto de teste do Experimento 2. Assim, ficou

58

demonstrado que a previsão tem melhores resultados com a utilização de combinação,

ou máquina comitê. A métrica de desempenho SLG teve um ganho de 67,53% em

relação ao Experimento 2, o que representa um investimento com uma lucratividade

67,53% superior.

Tabela 5-14: Resultado comparativo no conjunto de teste entre o Experimento 2 e a Combinação

com Rede Neural.

Desempenhos Média Experimento 2 Combinação com Rede Neural Comparação

MSE 0,827401 0,518795 +37,30%

MAPE 0,017849 0,014779 +17,20%

THEIL 0,745869 0,589597 +20,95%

POCID 56,161616 59,59596 +6,12%

ARV 0,000084 0,000003 +96,43%

SLG 0,172051 0,288232 +67,53%

Para concluir os experimentos foi feita a comparação do resultado da combinação

com a rede neural, que apresentaram os melhores desempenhos, com o resultado do

Experimento 1, que representa o modelo tradicional que tem como variáveis de

entrada apenas os retardos temporais, conforme apresentado na Tabela 5-15.

Observa-se que o resultado da comparação apresenta uma grande melhoria em

todas as métricas de desempenho sugeridas, o que demonstra que a utilização da

metodologia proposta nesta dissertação eleva em muito a assertividade da previsão.

Vale ainda ressaltar o ganho obtido com a métrica SLG, que representa a soma

dos ganhos e perdas, foi a que teve o maior benefício, com um incremento de

229,82%, ou seja a lucratividade do investimento foi acrescido em 229,82%.

Tabela 5-15: Resultado comparativo no conjunto de teste entre o Experimento 1 e a Combinação

com Rede Neural.

Desempenhos Média Experimento 1 Combinação com Rede Neural Comparação

MSE 1,086715 0,518795 +52,2603%

MAPE 0,02084 0,014779 +29,0835%

THEIL 0,904944 0,589597 +34,8471%

POCID 52,828283 59,59596 +12,8107% ARV 0,000058 0,000003 +94,8276% SLG 0,087391 0,288232 +229,8189%

59

CAPÍTULO 6

Conclusões e Trabalhos Futuros

Este capítulo apresenta uma síntese do trabalho desenvolvido e as principais

contribuições desta dissertação. Também são relatadas novas possibilidades de

pesquisa que podem ser geradas em trabalhos futuros e que estendam o modelo

proposto.

6.1 Contribuições

O objetivo principal do presente estudo foi propor um modelo de previsão que

conseguisse uma previsão mais precisa, principalmente, utilizando mais informações

sobre o domínio da série temporal que será prevista.

Considerando o que foi exposto, as principais contribuições apresentadas por esta

dissertação foram:

• A apresentação da relevância da utilização de séries exógenas para melhorar a

precisão das previsões geradas por Redes Neurais;

• A criação de uma nova medida de desempenho SLG (Sum of Loses and

Gains) que tem maior aderência no contexto de previsões no mercado

financeiro;

• A proposição de um novo pré-processamento nas séries exógenas levando-se

em consideração os feriados no intuito de apresentar a informação sempre

mais atualizada para a previsão;

• A utilização de combinação baseado em um Rede Neural MLP sem camada

escondida utilizando as 8 melhores redes baseado no critério de desempenho

SLG.

60

6.2 Trabalhos Futuros

Diversos são os trabalhos que podem ser desenvolvidos a partir da nova proposta

explanada neste trabalho. Um dos mais imediatos seria a utilização de outra ação do

mercado financeiro para testar o modelo de previsão aqui apresentado, por exemplo, a

previsão da ação VALE5, ação preferencial da empresa Vale do Rio Doce, a segunda

mais comercializada na Bovespa [10].

Outras possibilidades de trabalhos futuros são:

• A utilização de outros classificadores para melhorar a combinação das redes;

• O uso de novos parâmetros para seleção das Redes Neurais treinadas;

• A pesquisa de possibilidade de automatização das escolhas das séries

exógenas com base em dados das principais séries do mercado financeiro;

• Estudos sobre a utilização de dados misturados nos conjuntos de treinamento,

avaliação e testes em redes neurais.

6.3 Considerações Finais

A previsão de séries temporais utilizando mais informações sobre o domínio da

previsão é uma área de pesquisa muito interessante e que requer estudo aprofundado,

com a certeza de ser possível melhorar substancialmente as previsões.

Espera-se que esse trabalho possa servir como uma boa fonte de consulta e

estudo para pessoas interessadas neste tema, assim como contribuir para o

desenvolvimento de novas aplicações.

Como um dos frutos desta dissertação foi a aceite do artigo [26] no IJCNN 2009

que acontecerá em junho de 2009 em Atlanta nos Estados Unidos.

61

Apêndice A – Detalhes dos Experimentos

Neste apêndice são mostrados os resultados obtidos para todos os Experimentos 1 e

Experimento 2 que foram apresentados no Capítulo 5 e gerados com as Redes Neurais

MLP.

Para cada um dos experimentos contendo os 26 modelos propostos e foram

realizadas 10 inicializações distintas totalizando 260 redes treinadas.

Cada um dos experimentos é mostrado em uma tabela contendo todos os valores

das métricas de desempenho, conforme Capítulo 4, de cada rede neural treinada para

os conjuntos de treinamento, validação e teste, sendo:

Tabela A-1: Resultados do Experimento 1;

Tabela A-2: Resultados do Experimento 2.

62

Tabela A-0-1: Resultados do Experimento 1

Neurônio Repetição Medidas de Desempenho - Treinamento Medidas de Desempenho - Validação Medidas de Desempenho - Teste

MAPE THEIL POCID ARV MSE ALG MAPE THEIL POCID ARV MSE ALG MAPE THEIL POCID ARV MSE ALG 1 1 0,015291 0,822642 52,354260 0,001667 0,047521 0,021769 0,013910 0,915306 52,702703 0,076810 0,152098 0,014966 0,020215 0,900779 49,158249 0,000003 1,009831 0,010589 1 2 0,015167 0,799287 52,130045 0,001710 0,046493 0,016192 0,014113 0,900339 52,364865 0,068508 0,155247 0,006791 0,018986 0,850518 52,525253 0,000000 0,842366 0,103990 1 3 0,017350 1,037735 52,242152 0,002100 0,053318 0,022271 0,014576 1,065226 52,027027 0,056764 0,160214 0,011588 0,019285 0,680456 54,208754 0,000061 0,908435 0,135168 1 4 0,014982 0,800927 51,569507 0,000664 0,045630 0,016617 0,014145 0,811730 51,351351 0,090569 0,156328 -0,000811 0,019583 0,699195 50,841751 0,000001 0,923456 0,082003 1 5 0,020761 0,880291 52,466368 0,000002 0,062086 0,018028 0,014182 0,965645 52,702703 0,172806 0,154234 0,016824 0,020376 0,836437 51,515152 0,000076 0,993153 0,011599 1 6 0,019104 0,975644 52,466368 0,000151 0,058751 0,020516 0,014270 0,951018 52,027027 0,282367 0,158045 0,007838 0,022372 0,726520 52,188552 0,000096 1,637734 0,056010 1 7 0,015231 0,825585 51,457399 0,001230 0,046826 0,015133 0,014264 1,057935 52,364865 0,100759 0,156696 0,009122 0,019790 0,805578 51,851852 0,000018 0,896674 0,086852 1 8 0,015114 0,913732 51,681614 0,000469 0,046735 0,018100 0,014226 0,966784 52,702703 0,040436 0,155232 0,018277 0,018866 0,715010 52,861953 0,000003 0,850030 0,107727 1 9 0,015135 0,900295 51,681614 0,000769 0,047677 0,017288 0,014123 1,017955 51,689189 0,110359 0,156479 0,000743 0,019372 0,834814 47,811448 0,000005 0,910727 0,037963 1 10 0,015152 0,835765 51,793722 0,000804 0,046359 0,018369 0,014814 0,935698 51,689189 0,006245 0,168241 0,010101 0,019916 0,881358 50,168350 0,000022 0,954162 0,000084 2 1 0,016497 0,948850 51,793722 0,001885 0,050090 0,017848 0,014225 0,944264 50,675676 0,164568 0,157089 0,000338 0,020062 0,870508 51,515152 0,000052 0,884923 0,044832 2 2 0,015170 0,789488 51,905830 0,001426 0,046176 0,019385 0,014028 0,914809 51,351351 0,055863 0,152996 0,005507 0,019426 0,894721 50,505051 0,000000 0,927115 0,033855 2 3 0,015517 0,737754 51,569507 0,001478 0,048412 0,016498 0,013990 0,925965 53,378378 0,165334 0,153630 0,010912 0,019891 1,055416 49,831650 0,000023 0,937367 0,049310 2 4 0,015061 0,834761 52,017937 0,000678 0,046029 0,018140 0,014041 0,867502 50,675676 0,068133 0,155304 -0,003514 0,018991 0,851986 50,168350 0,000000 0,848326 0,071128 2 5 0,015011 0,788358 51,457399 0,000812 0,045365 0,014835 0,014276 0,855479 52,702703 0,081959 0,157467 0,006385 0,020383 0,830470 50,505051 0,000008 1,012673 0,020017 2 6 0,027105 1,685225 50,896861 0,000104 0,086803 0,012490 0,014127 0,908155 52,027027 0,031845 0,154763 0,001047 0,021413 1,181970 51,515152 0,000003 1,177857 0,065000 2 7 0,015591 0,763273 52,130045 0,002312 0,047955 0,021380 0,014254 0,819132 50,337838 0,032132 0,155745 -0,002669 0,019318 0,752295 50,505051 0,000009 0,917002 0,042744 2 8 0,015113 0,856610 52,690583 0,000577 0,047713 0,022310 0,014105 0,942869 52,702703 0,097595 0,153021 0,004628 0,019611 0,841642 52,188552 0,000005 0,865322 0,134630 2 9 0,015231 0,879524 51,793722 0,000956 0,047044 0,016783 0,013920 0,870409 50,675676 0,096647 0,151616 0,000743 0,021219 0,958683 48,821549 0,000002 1,144776 0,012239 2 10 0,015854 0,781284 52,130045 0,001026 0,048726 0,015755 0,014655 0,787039 51,013514 0,035176 0,163684 -0,000743 0,019642 0,953357 50,505051 0,000020 0,930096 0,023552 3 1 0,015317 0,707106 53,026906 0,000487 0,047459 0,023778 0,014729 0,858979 52,364865 0,011582 0,166968 0,007669 0,019187 0,957614 50,168350 0,000032 0,853291 0,041330 3 2 0,015064 0,929353 51,793722 0,000797 0,045944 0,018695 0,014295 0,869129 51,013514 0,061191 0,156529 0,004831 0,019664 0,789175 53,535354 0,000006 0,912211 0,072441 3 3 0,015790 0,869074 50,560538 0,000167 0,047930 0,013266 0,014216 1,005381 52,364865 0,099733 0,156071 0,000608 0,019598 0,854604 49,831650 0,000016 0,935669 0,093215 3 4 0,015095 0,875357 50,784753 0,000557 0,045777 0,012594 0,014200 0,753848 51,689189 0,099722 0,158820 0,001318 0,018771 0,717648 53,198653 0,000000 0,787568 0,176751 3 5 0,015156 0,780414 51,793722 0,000840 0,046401 0,017968 0,014205 1,003112 52,364865 0,065328 0,155702 0,016689 0,019632 0,887587 49,831650 0,000014 0,967054 0,035842 3 6 0,015267 0,788220 51,233184 0,001022 0,046707 0,016379 0,014027 0,870646 52,027027 0,090101 0,153287 0,005372 0,019441 0,706724 52,861953 0,000012 0,916675 0,118704 3 7 0,015204 0,912861 51,905830 0,000676 0,046136 0,017163 0,014202 0,799387 53,378378 0,068655 0,157166 0,012804 0,020152 1,038397 49,831650 0,000014 0,912479 0,008300 3 8 0,015014 0,801719 52,130045 0,000894 0,046237 0,016276 0,014237 0,817642 52,027027 0,035884 0,157389 0,010405 0,020124 0,766168 51,178451 0,000000 1,006018 0,034966 3 9 0,015040 0,783498 51,457399 0,000671 0,045928 0,012725 0,014319 0,863667 51,013514 0,025581 0,155402 0,004865 0,019955 0,853684 51,178451 0,000000 0,947274 0,089411 3 10 0,015334 0,886463 52,130045 0,000275 0,046706 0,019011 0,014098 0,845691 52,364865 0,067922 0,153575 0,006858 0,019619 0,872690 50,841751 0,000000 0,931101 0,062609 4 1 0,015099 0,771087 51,905830 0,000993 0,046367 0,018067 0,014101 0,841946 51,351351 0,127717 0,154988 0,007128 0,019558 0,846528 50,505051 0,000012 0,915789 0,036785 4 2 0,015050 0,878067 51,121076 0,000556 0,046230 0,017492 0,014101 0,905991 53,716216 0,081363 0,155581 0,019662 0,019165 0,723463 52,861953 0,000001 0,861605 0,109242 4 3 0,015092 0,801324 51,569507 0,000725 0,045760 0,012447 0,014171 0,894782 52,027027 0,032585 0,154346 -0,000878 0,019614 0,736927 51,178451 0,000001 0,878626 0,109276 4 4 0,017319 0,852301 52,466368 0,000331 0,052533 0,021704 0,014147 0,947459 51,013514 0,082764 0,154116 0,003547 0,019495 0,822967 52,188552 0,000022 0,929512 0,099108 4 5 0,016012 0,829899 51,793722 0,000517 0,048261 0,015881 0,014328 1,057901 52,364865 0,062960 0,157611 -0,001588 0,019701 0,977634 49,831650 0,000009 0,919771 0,026414 4 6 0,015443 0,791323 52,802691 0,000599 0,048446 0,021076 0,014257 0,869055 52,027027 0,040700 0,154652 0,002736 0,019414 0,747018 50,505051 0,000002 0,900971 0,063586 4 7 0,015037 0,765898 52,017937 0,000700 0,045896 0,016772 0,014351 0,840627 51,351351 0,092202 0,160762 0,002128 0,019644 0,684094 52,188552 0,000015 0,890064 0,096111 4 8 0,015061 0,778059 51,793722 0,001009 0,046139 0,013771 0,014140 0,789719 51,689189 0,080029 0,155424 0,000811 0,019434 1,034954 52,525253 0,000001 0,897086 0,076212 4 9 0,015034 0,749189 52,017937 0,000930 0,047808 0,015639 0,014277 0,956458 50,675676 0,087603 0,156861 0,006115 0,019660 0,995556 51,515152 0,000034 0,934221 0,072643

63

4 10 0,015113 1,002030 50,896861 0,000410 0,046740 0,013212 0,014062 1,064476 52,027027 0,093726 0,154457 0,002703 0,019523 0,880126 52,525253 0,000030 0,908652 0,080152 5 1 0,015520 0,745935 52,130045 0,001393 0,048926 0,019882 0,014193 0,919378 52,364865 0,075658 0,153356 0,014865 0,019236 0,731582 51,178451 0,000049 0,943050 0,104461 5 2 0,015160 0,913993 50,672646 0,000812 0,046574 0,011875 0,014202 0,794744 51,689189 0,120900 0,160091 0,004865 0,020413 0,825274 52,525253 0,000005 1,053128 0,150253 5 3 0,015029 0,849800 51,793722 0,000734 0,046147 0,016351 0,014018 0,831928 52,702703 0,104939 0,155041 0,013851 0,019750 0,790231 49,831650 0,000002 0,939938 0,027963 5 4 0,015427 0,756714 51,793722 0,001744 0,046988 0,015777 0,014166 0,934730 52,027027 0,038719 0,155061 0,006791 0,019532 0,877590 50,841751 0,000003 0,926109 0,088468 5 5 0,015010 0,789119 51,793722 0,000494 0,046160 0,017750 0,014081 0,852585 52,702703 0,130285 0,156280 0,013784 0,019345 0,952680 50,505051 0,000017 0,860129 0,058434 5 6 0,014986 0,776498 52,017937 0,000398 0,046236 0,018832 0,014099 0,900902 52,364865 0,043856 0,154097 0,008074 0,020027 0,788619 50,505051 0,000004 1,033134 0,053418 5 7 0,015290 0,768891 52,242152 0,001491 0,047347 0,018418 0,014134 0,827334 51,689189 0,097680 0,154883 0,006047 0,019436 0,878499 50,168350 0,000003 0,894098 0,040892 5 8 0,015082 0,854497 51,793722 0,001558 0,045951 0,016405 0,014206 0,965004 51,013514 0,036751 0,154943 0,003986 0,019411 0,842334 51,178451 0,000005 0,842795 0,074428 5 9 0,016266 0,847825 50,896861 0,000489 0,048572 0,013493 0,014094 0,882758 51,013514 0,095539 0,154740 -0,003514 0,019887 0,871583 52,188552 0,000002 0,888284 0,131431 5 10 0,015282 0,779875 51,121076 0,001874 0,046736 0,015397 0,014162 0,894053 52,702703 0,067341 0,154941 0,008716 0,019471 0,730284 49,831650 0,000000 0,863880 0,089646 6 1 0,015003 0,822945 51,569507 0,000447 0,046032 0,018902 0,013983 0,932633 51,689189 0,088920 0,152800 0,000304 0,019521 0,909973 49,494949 0,000015 0,904337 0,080825 6 2 0,015053 0,819018 51,569507 0,000451 0,046255 0,017355 0,014303 0,902644 51,351351 0,031725 0,157455 0,002703 0,019136 0,679001 51,851852 0,000012 0,939286 0,069444 6 3 0,016327 0,917725 51,345291 0,000098 0,049384 0,016270 0,014056 0,890031 51,351351 0,055247 0,151846 0,002905 0,019721 0,777723 48,484848 0,000005 0,904025 0,051330 6 4 0,015385 0,915032 51,681614 0,000799 0,047717 0,016433 0,014116 0,951729 52,702703 0,061727 0,153410 0,009595 0,020303 0,920821 51,515152 0,000012 0,999582 0,106886 6 5 0,015085 0,841187 51,793722 0,000954 0,045874 0,014908 0,014042 0,850852 52,027027 0,153493 0,154195 0,007466 0,019517 0,682953 52,188552 0,000022 0,913007 0,074125 6 6 0,018179 0,852903 52,130045 0,000275 0,053340 0,016957 0,014073 0,871099 50,675676 0,057866 0,154837 -0,002770 0,020135 1,002324 51,851852 0,000000 0,991988 0,071700 6 7 0,015776 0,839150 51,121076 0,001293 0,048046 0,014665 0,014011 0,889451 52,702703 0,096592 0,154662 0,011993 0,020331 0,962365 50,841751 0,000008 0,984991 0,070589 6 8 0,015061 0,820434 51,905830 0,001003 0,046556 0,019485 0,014142 0,818155 52,027027 0,044515 0,153971 0,010236 0,019233 0,865372 50,841751 0,000012 0,921420 0,071263 6 9 0,015401 0,871195 51,345291 0,001001 0,046431 0,017063 0,014260 0,888631 51,689189 0,020743 0,155951 0,009459 0,019054 0,887329 50,505051 0,000001 0,852059 0,081700 6 10 0,015129 0,789501 51,457399 0,000991 0,046333 0,016119 0,014049 0,976507 53,040541 0,086123 0,155092 0,020338 0,018981 0,784030 49,494949 0,000013 0,842432 0,079242 7 1 0,014967 0,763717 52,242152 0,000549 0,045651 0,019891 0,014155 0,824055 51,351351 0,056961 0,154865 0,004628 0,018929 0,746606 52,525253 0,000003 0,842799 0,112744 7 2 0,020008 1,017660 51,233184 0,000000 0,056448 0,014833 0,014298 0,876749 51,351351 0,118829 0,157938 0,000574 0,021279 0,607736 54,545455 0,000051 1,225273 0,073215 7 3 0,015470 0,810203 51,233184 0,001183 0,047900 0,014886 0,015060 0,796227 52,027027 0,006603 0,170076 0,006858 0,020049 0,736543 50,168350 0,000123 1,036659 0,047155 7 4 0,016944 0,865530 51,121076 0,000085 0,050456 0,013588 0,014610 0,872466 52,364865 0,011035 0,163836 0,015236 0,019711 0,913833 51,851852 0,000017 0,942363 0,112273 7 5 0,015077 0,812984 51,345291 0,000691 0,046535 0,015878 0,014416 0,773091 51,013514 0,077274 0,157349 0,005270 0,019440 0,787006 52,525253 0,000002 0,867455 0,102306 7 6 0,015001 0,803228 52,130045 0,000700 0,045932 0,018330 0,014092 0,918379 51,013514 0,101812 0,153773 -0,000338 0,019646 0,917179 49,831650 0,000011 0,918670 0,036347 7 7 0,015015 0,815231 52,354260 0,001025 0,046483 0,019706 0,014240 0,930165 51,351351 0,042594 0,155978 0,001622 0,019804 0,692261 52,188552 0,000004 1,079063 0,062845 7 8 0,015030 0,840975 51,905830 0,000929 0,045880 0,016814 0,014504 0,940365 51,689189 0,036467 0,161247 0,000743 0,019746 0,708685 48,148148 0,000002 0,963546 -0,056010 7 9 0,015011 0,760967 52,017937 0,001148 0,046168 0,018341 0,014207 0,858215 52,364865 0,047242 0,154496 0,011757 0,019402 0,893694 52,188552 0,000000 0,844483 0,108737 7 10 0,015298 0,849977 51,457399 0,001769 0,046607 0,017798 0,014154 0,861605 50,675676 0,108791 0,154712 -0,002264 0,019832 0,712512 51,178451 0,000003 1,004835 0,036987 8 1 0,015513 0,805992 51,121076 0,001991 0,047616 0,015198 0,014003 0,959363 52,364865 0,179124 0,153962 0,004527 0,019930 0,841523 50,505051 0,000040 0,924048 0,080657 8 2 0,015073 0,790854 51,905830 0,000482 0,046706 0,018784 0,014044 0,983058 52,027027 0,090047 0,152634 0,006791 0,019866 0,707977 51,851852 0,000045 0,945252 0,056010 8 3 0,017589 1,064918 51,457399 0,003704 0,052809 0,015921 0,014234 0,967500 51,013514 0,188630 0,158548 0,007297 0,020568 0,886762 51,178451 0,000041 0,998886 0,067222 8 4 0,015355 0,792573 51,793722 0,001484 0,047294 0,015265 0,014161 0,841716 50,675676 0,067649 0,155309 -0,005980 0,020632 0,896881 52,525253 0,000000 1,154625 0,059646 8 5 0,014933 0,855800 51,121076 0,001115 0,046156 0,015186 0,014015 0,871127 52,027027 0,144718 0,153810 0,010980 0,020496 1,029351 52,525253 0,000009 0,993539 0,074024 8 6 0,015281 0,772687 50,336323 0,000317 0,046973 0,010707 0,014048 0,865558 52,364865 0,110775 0,155037 0,007196 0,019687 0,928169 52,188552 0,000017 0,949367 0,061801 8 7 0,015620 0,844185 52,017937 0,001260 0,047853 0,016298 0,014442 0,927405 52,027027 0,041079 0,158612 0,005980 0,019972 0,783906 50,168350 0,000022 0,928155 0,044327 8 8 0,015103 0,809286 51,793722 0,001122 0,046428 0,017145 0,014101 0,951969 52,027027 0,078852 0,155594 0,007061 0,020389 0,744742 50,168350 0,000001 1,073962 0,080387 8 9 0,014974 0,875883 52,242152 0,000652 0,045850 0,018327 0,014181 0,845963 51,013514 0,137941 0,156524 -0,004054 0,020483 0,683234 51,515152 0,000010 1,012415 0,070051 8 10 0,015040 0,847622 50,784753 0,001219 0,045740 0,013118 0,014352 0,820619 51,689189 0,053928 0,159534 0,003919 0,019002 0,722237 53,872054 0,000000 0,890433 0,085438 9 1 0,015029 0,798077 51,905830 0,000489 0,045856 0,017251 0,014420 0,951989 51,689189 0,185745 0,158382 0,010912 0,019798 0,817924 53,535354 0,000085 0,898620 0,143182 9 2 0,015057 0,894952 51,905830 0,001041 0,046314 0,017414 0,014312 1,129696 52,027027 0,134230 0,157477 0,017061 0,020077 0,678135 53,198653 0,000083 1,267499 0,113182

64

9 3 0,015150 0,756169 52,578475 0,000374 0,046661 0,017562 0,014101 0,864889 52,364865 0,116248 0,155596 0,007331 0,019811 0,846018 52,188552 0,000015 1,005759 0,068468 9 4 0,015425 1,042322 51,457399 0,000719 0,048104 0,018328 0,014102 0,879791 51,689189 0,075548 0,154172 0,006655 0,019335 1,099361 50,168350 0,000000 0,893713 0,064226 9 5 0,015228 0,877115 51,233184 0,000796 0,047125 0,013408 0,014263 0,766894 51,351351 0,114346 0,157784 0,003176 0,019749 0,944424 51,515152 0,000005 0,913735 0,055842 9 6 0,015174 0,761011 52,242152 0,000226 0,047399 0,021329 0,014128 0,909183 52,027027 0,039234 0,153113 0,011014 0,020608 0,836222 49,831650 0,000002 0,980620 0,065202 9 7 0,014977 0,826216 51,008969 0,001017 0,045340 0,014883 0,014334 0,832105 50,675676 0,055464 0,156643 0,002061 0,019950 0,930759 49,831650 0,000002 0,934313 0,076515 9 8 0,015294 0,828691 51,905830 0,001150 0,048000 0,016744 0,014187 0,843979 52,364865 0,145607 0,155491 0,002838 0,019563 0,817873 50,505051 0,000020 0,902187 0,087189 9 9 0,015094 0,834743 51,457399 0,001244 0,045700 0,015220 0,014320 0,871129 50,337838 0,044682 0,156851 -0,000270 0,018980 0,769612 51,851852 0,000001 0,874960 0,082710 9 10 0,015159 0,877706 51,681614 0,001068 0,045844 0,014774 0,014088 0,949851 54,054054 0,114435 0,158947 0,010135 0,019226 0,857641 51,851852 0,000007 0,898372 0,098636

10 1 0,015017 0,903291 51,681614 0,000713 0,046089 0,017150 0,014108 0,992407 53,040541 0,063002 0,154519 0,005608 0,019279 0,842736 50,168350 0,000000 0,841774 0,087492 10 2 0,015022 0,755893 52,130045 0,000882 0,046939 0,020348 0,014334 0,722957 52,364865 0,040990 0,158006 0,010946 0,018944 0,850694 50,168350 0,000024 0,872059 0,037155 10 3 0,015076 0,894321 51,233184 0,000759 0,046472 0,014508 0,014162 0,795961 52,364865 0,108972 0,155703 0,005169 0,019907 0,749099 52,188552 0,000010 0,929207 0,095404 10 4 0,015149 0,871236 51,008969 0,000942 0,046534 0,011576 0,014192 0,919653 51,351351 0,051233 0,154875 -0,005169 0,018972 0,823449 54,208754 0,000000 0,864917 0,127525 10 5 0,015015 0,856334 52,242152 0,000724 0,046377 0,019134 0,014253 0,881571 51,689189 0,161738 0,156251 0,004088 0,020605 0,704981 50,505051 0,000017 1,102619 0,080488 10 6 0,015213 0,705429 51,905830 0,000880 0,046940 0,018765 0,013922 0,916370 52,027027 0,114794 0,152590 0,006250 0,019628 0,812908 52,525253 0,000005 0,909908 0,113923 10 7 0,015098 0,803701 51,905830 0,000634 0,047001 0,017228 0,014179 0,794644 50,675676 0,073998 0,156747 0,001723 0,021059 0,722267 51,515152 0,000019 1,154289 0,060488 10 8 0,015102 0,849162 51,905830 0,000542 0,046331 0,015433 0,014191 0,981035 52,702703 0,027532 0,155530 0,012399 0,018839 0,800176 55,555556 0,000000 0,916192 0,117323 10 9 0,015161 0,854923 52,130045 0,000436 0,046444 0,018072 0,014346 0,958428 51,689189 0,045034 0,159174 0,003750 0,019473 0,818023 51,515152 0,000002 0,909504 0,074731 10 10 0,015967 0,847135 52,017937 0,001261 0,049414 0,020095 0,013969 0,903022 51,013514 0,139679 0,153040 -0,005507 0,020747 0,827458 52,188552 0,000014 1,054524 0,062677 11 1 0,015075 0,787054 51,457399 0,000650 0,045474 0,017467 0,014421 0,738860 51,013514 0,035627 0,157723 -0,000541 0,019146 0,789226 53,198653 0,000015 0,867921 0,136448 11 2 0,015204 0,849510 51,345291 0,000579 0,046771 0,017027 0,014295 0,935762 51,351351 0,163440 0,158254 -0,001216 0,019504 0,752499 50,841751 0,000005 0,939467 0,063754 11 3 0,015178 0,776589 51,681614 0,001179 0,046695 0,016758 0,014167 0,866523 51,351351 0,068181 0,155056 0,000811 0,019394 0,894675 53,535354 0,000002 0,849171 0,125135 11 4 0,014933 0,921040 50,896861 0,001004 0,046054 0,013661 0,014228 0,799320 52,027027 0,071114 0,156114 0,008446 0,020727 0,986959 51,515152 0,000000 1,133914 0,048737 11 5 0,015083 0,926029 52,130045 0,000639 0,046458 0,021447 0,014392 0,953327 52,027027 0,023290 0,159699 0,004155 0,019573 0,761317 50,505051 0,000012 0,909832 0,070152 11 6 0,015171 0,849257 51,569507 0,000677 0,045787 0,016405 0,014355 0,922033 51,689189 0,025535 0,157044 0,011723 0,018918 0,827544 55,218855 0,000008 0,835530 0,132239 11 7 0,015163 0,833559 52,017937 0,000687 0,046645 0,016677 0,013909 0,861738 51,351351 0,071207 0,150672 0,010709 0,019792 0,894277 51,515152 0,000002 0,956583 0,122003 11 8 0,015326 0,835549 51,681614 0,001230 0,047835 0,017638 0,014288 0,818591 53,040541 0,292076 0,159616 0,013108 0,019544 0,663038 53,872054 0,000097 0,926308 0,152340 11 9 0,015084 0,891227 52,242152 0,000653 0,046035 0,020323 0,014206 0,864938 52,027027 0,052507 0,155819 0,010980 0,019697 0,899531 47,811448 0,000000 0,938767 -0,021902 11 10 0,016472 0,740727 52,130045 0,000300 0,049404 0,018112 0,014489 0,743847 51,689189 0,061302 0,160185 -0,000845 0,020320 0,685384 54,545455 0,000000 1,135517 0,124596 12 1 0,015229 0,814685 51,905830 0,000843 0,045850 0,019922 0,014104 0,971625 51,013514 0,097845 0,155501 0,001453 0,020529 0,856893 50,168350 0,000011 1,221513 0,034630 12 2 0,015927 0,850169 52,578475 0,000623 0,048829 0,017553 0,014393 0,940049 51,013514 0,045747 0,159602 -0,004324 0,020730 0,703342 48,821549 0,000000 1,014171 0,066246 12 3 0,014965 0,840809 52,017937 0,000835 0,045724 0,017271 0,014234 0,894656 50,337838 0,084849 0,155380 -0,002635 0,018853 0,686904 54,208754 0,000005 0,843047 0,157290 12 4 0,015047 0,884634 51,569507 0,000715 0,047738 0,015101 0,014895 0,850531 51,013514 0,002868 0,166130 0,001351 0,019473 0,741402 52,861953 0,000048 0,884246 0,123990 12 5 0,015142 0,830772 51,233184 0,000844 0,045983 0,012458 0,014312 0,825737 50,675676 0,053042 0,162303 -0,005777 0,018875 0,857991 51,515152 0,000002 0,858399 0,078468 12 6 0,015199 0,805567 51,681614 0,000303 0,046122 0,016135 0,014201 0,914874 52,027027 0,076700 0,154820 0,014662 0,019700 0,962000 51,515152 0,000011 0,874582 0,089141 12 7 0,015015 0,913834 50,784753 0,000873 0,046889 0,012999 0,014182 0,868791 52,027027 0,104073 0,153893 0,004764 0,019329 0,868959 52,525253 0,000019 0,882092 0,064663 12 8 0,015123 0,853053 51,793722 0,000594 0,046150 0,017988 0,014382 1,063982 50,337838 0,055310 0,155787 0,008378 0,019652 0,883687 50,841751 0,000084 0,901279 0,061094 12 9 0,015390 0,942906 51,345291 0,000119 0,047448 0,013638 0,014331 1,095096 51,013514 0,041096 0,155952 0,001115 0,019501 0,930877 52,525253 0,000008 0,947260 0,080657 12 10 0,015466 0,686153 52,017937 0,000686 0,048738 0,017599 0,014116 1,041663 52,702703 0,060091 0,155001 0,010845 0,019714 0,928429 51,515152 0,000004 0,902629 0,100993 13 1 0,015212 0,813797 50,896861 0,000701 0,046412 0,013611 0,014207 0,912134 51,689189 0,139572 0,154722 0,006791 0,019769 0,832047 51,851852 0,000061 0,880463 0,105303 13 2 0,015059 0,842794 51,793722 0,000754 0,045462 0,017464 0,014353 0,911730 51,351351 0,123039 0,160046 0,001419 0,019424 0,795399 51,178451 0,000003 0,871728 0,092138 13 3 0,015082 0,854579 52,242152 0,000629 0,046637 0,018257 0,014117 0,966863 51,689189 0,045959 0,153740 0,003243 0,019560 0,899589 53,872054 0,000000 0,886559 0,123956 13 4 0,015557 0,811699 51,345291 0,000804 0,047056 0,014004 0,014332 0,829569 51,689189 0,051520 0,159637 0,001351 0,018968 0,802841 50,841751 0,000003 0,888796 0,064158 13 5 0,015131 0,845311 50,784753 0,001276 0,046527 0,014399 0,014220 1,011650 52,027027 0,046737 0,155755 0,012703 0,019516 0,885121 53,535354 0,000015 0,940217 0,077593

65

13 6 0,015401 0,908853 51,008969 0,000361 0,048082 0,015048 0,014263 0,819714 51,689189 0,076036 0,157601 0,018277 0,019186 0,702400 53,535354 0,000061 0,964658 0,164663 13 7 0,015163 0,830068 52,130045 0,000406 0,046684 0,019905 0,014498 1,007968 49,324324 0,042866 0,158941 -0,009797 0,019710 0,990538 53,872054 0,000033 0,909484 0,129714 13 8 0,015108 0,897760 51,905830 0,000530 0,047197 0,019989 0,014212 0,932290 51,351351 0,175029 0,156604 -0,003919 0,018903 0,869122 51,178451 0,000037 0,811296 0,078603 13 9 0,015006 0,817733 51,905830 0,000843 0,046385 0,017273 0,014286 0,884567 52,364865 0,028399 0,157094 0,006250 0,019832 0,915766 51,515152 0,000009 0,949691 0,090488 13 10 0,015171 0,860290 51,457399 0,000951 0,046759 0,016452 0,014675 0,971680 51,689189 0,011445 0,163513 0,012568 0,019052 0,862538 51,515152 0,000017 0,859823 0,091027 14 1 0,015039 0,829492 51,345291 0,001045 0,045521 0,014244 0,014242 0,896171 51,689189 0,159793 0,160824 0,014358 0,019090 0,706302 53,535354 0,000034 0,891840 0,113350 14 2 0,015187 0,837542 51,905830 0,000303 0,045900 0,015931 0,014254 0,807381 51,351351 0,240070 0,158897 -0,002568 0,020643 0,959197 49,158249 0,000034 1,044238 0,027256 14 3 0,015141 0,802249 51,569507 0,001220 0,046703 0,015466 0,014109 0,907208 51,689189 0,087302 0,155994 0,006554 0,019927 0,572181 53,535354 0,000004 1,019291 0,165337 14 4 0,015090 0,842375 50,896861 0,000838 0,046201 0,012257 0,014131 0,848759 51,689189 0,093666 0,155486 0,000203 0,019867 0,875044 51,515152 0,000008 0,962809 0,020758 14 5 0,015144 0,842025 52,017937 0,000471 0,047055 0,018574 0,014227 0,919098 50,000000 0,067565 0,153927 0,001791 0,026431 1,484594 51,178451 0,000040 1,803430 0,085673 14 6 0,015095 0,782114 51,457399 0,000462 0,045978 0,013232 0,014351 0,909614 51,351351 0,096645 0,157497 0,004764 0,019691 0,851417 53,535354 0,000061 1,012050 0,091869 14 7 0,015394 0,825416 51,905830 0,000939 0,047077 0,015171 0,014456 0,831478 52,364865 0,022419 0,158543 0,010912 0,019010 0,822687 54,882155 0,000004 0,860381 0,116919 14 8 0,015126 0,841658 51,905830 0,000734 0,045323 0,019518 0,014253 0,941457 51,689189 0,123514 0,157702 0,009426 0,018923 0,706066 56,902357 0,000128 0,842624 0,167054 14 9 0,015158 0,903382 51,233184 0,001743 0,046025 0,014255 0,014174 0,949622 52,364865 0,093438 0,155827 0,006723 0,020371 0,817816 52,525253 0,000023 1,019238 0,042374 14 10 0,015103 0,950285 51,569507 0,001052 0,046752 0,014996 0,014601 1,080649 51,689189 0,376300 0,161712 0,006689 0,024453 1,254131 51,515152 0,000243 1,411245 0,043316 15 1 0,015057 0,770985 52,242152 0,000850 0,047346 0,019751 0,014641 0,761903 51,351351 0,031390 0,160971 0,001622 0,018869 0,795265 52,861953 0,000000 0,852040 0,101364 15 2 0,015060 0,745604 52,130045 0,000524 0,046629 0,020135 0,014200 0,937464 51,013514 0,057197 0,153521 0,007534 0,019977 0,676164 53,198653 0,000032 1,076018 0,113013 15 3 0,015100 0,785531 51,681614 0,001164 0,046731 0,016155 0,014138 0,941547 50,337838 0,087399 0,153445 0,002297 0,020186 0,908285 52,861953 0,000022 0,983432 0,088737 15 4 0,015805 0,787008 52,242152 0,000357 0,048164 0,020228 0,014494 0,856603 53,040541 0,038166 0,159649 0,013243 0,019909 0,779112 52,188552 0,000001 0,994266 0,103283 15 5 0,015072 0,807631 51,905830 0,001275 0,046305 0,017271 0,014033 0,908802 51,689189 0,086427 0,153260 0,001419 0,019813 0,848670 53,872054 0,000007 0,916771 0,130387 15 6 0,017188 0,997684 51,681614 0,000970 0,052982 0,018540 0,014181 0,933673 51,351351 0,122847 0,154521 0,005743 0,019090 0,826731 52,188552 0,000046 0,815817 0,141835 15 7 0,015242 0,747049 51,233184 0,000767 0,046993 0,015256 0,014327 0,825777 51,689189 0,088734 0,156279 0,009020 0,019110 0,828935 52,188552 0,000039 0,832388 0,075539 15 8 0,014985 0,814167 51,457399 0,001018 0,046084 0,015129 0,014106 0,915286 51,351351 0,133716 0,156101 -0,003682 0,020178 0,807361 49,831650 0,000010 0,980631 0,040387 15 9 0,015038 0,739631 51,233184 0,000938 0,045765 0,012629 0,014437 0,766280 51,351351 0,101267 0,161277 0,004865 0,019172 0,825401 54,208754 0,000012 0,878435 0,089613 15 10 0,015413 0,815641 51,345291 0,000249 0,047064 0,017211 0,014344 0,770576 50,000000 0,032901 0,160992 0,002568 0,020491 0,733751 57,575758 0,000003 0,990761 0,178771 16 1 0,015136 0,942199 52,242152 0,001211 0,046972 0,019732 0,013941 0,850339 51,689189 0,117530 0,152556 0,004088 0,019699 0,873571 50,841751 0,000005 0,908681 0,091465 16 2 0,015363 0,711529 52,354260 0,001666 0,047329 0,021873 0,014100 0,971158 52,027027 0,105350 0,151891 0,008818 0,020972 1,013792 52,188552 0,000035 1,058785 0,056987 16 3 0,015102 0,856953 51,233184 0,000851 0,046336 0,014998 0,014073 0,822747 51,351351 0,055852 0,154837 0,008851 0,019296 0,860443 49,494949 0,000000 0,861913 0,073485 16 4 0,015563 0,758288 52,690583 0,001816 0,048923 0,020726 0,014579 1,018183 51,351351 0,306534 0,161156 -0,000709 0,020350 0,975015 53,535354 0,000167 1,005784 0,071599 16 5 0,015100 0,915493 51,121076 0,001023 0,045401 0,013726 0,014190 0,905042 51,013514 0,120477 0,155406 0,002905 0,019917 0,739574 52,525253 0,000030 0,996910 0,057525 16 6 0,015138 0,784280 51,905830 0,000567 0,045829 0,017781 0,014199 0,919195 52,702703 0,062349 0,157282 0,012331 0,020020 0,790847 53,535354 0,000010 1,111262 0,092441 16 7 0,015155 0,843609 51,793722 0,000742 0,047373 0,018563 0,014365 0,815800 50,675676 0,065437 0,156379 0,002162 0,019561 0,809787 51,515152 0,000003 0,904573 0,063990 16 8 0,015333 0,797809 52,130045 0,000521 0,047185 0,019028 0,014274 0,849880 51,013514 0,120310 0,160461 -0,005304 0,019187 0,967476 50,841751 0,000000 0,883849 0,057222 16 9 0,015148 0,849944 51,457399 0,000954 0,046320 0,014663 0,014244 0,945526 51,013514 0,092591 0,158083 0,003885 0,019945 0,843572 52,861953 0,000009 0,945926 0,114327 16 10 0,015253 0,739648 52,130045 0,000715 0,046207 0,022093 0,014181 0,916770 52,027027 0,079237 0,153455 0,020473 0,019519 0,645248 52,525253 0,000047 0,937968 0,106717 17 1 0,015204 0,761171 52,242152 0,001133 0,047498 0,019622 0,014064 0,967341 52,027027 0,057511 0,153223 0,012669 0,019214 0,886449 51,515152 0,000005 0,888044 0,076616 17 2 0,015258 0,968819 51,457399 0,000296 0,047019 0,019120 0,014148 1,007993 52,364865 0,114694 0,155479 0,010507 0,019554 0,850856 50,505051 0,000020 0,910421 0,071633 17 3 0,015154 0,887347 51,793722 0,000895 0,046441 0,017627 0,014053 0,913699 50,337838 0,103970 0,155692 -0,008885 0,019319 0,755782 53,198653 0,000012 0,879807 0,130118 17 4 0,015331 0,943468 51,569507 0,001053 0,047374 0,016018 0,014354 0,897094 52,702703 0,342500 0,161425 -0,001081 0,019980 0,974715 52,861953 0,000042 1,014726 0,108232 17 5 0,015232 0,739318 52,130045 0,000787 0,046780 0,018132 0,014055 0,780134 52,702703 0,122258 0,156012 0,013818 0,018814 0,722656 52,861953 0,000002 0,845400 0,101936 17 6 0,015028 0,755986 51,905830 0,000580 0,045887 0,014471 0,014263 0,778386 50,337838 0,109196 0,158237 -0,007736 0,020184 0,889391 51,515152 0,000005 1,239853 0,045774 17 7 0,015137 0,836276 52,354260 0,000612 0,047018 0,020564 0,014281 0,900186 51,351351 0,032242 0,156839 0,000101 0,020052 0,918296 51,515152 0,000005 0,885271 0,101061 17 8 0,015232 1,001805 50,896861 0,000913 0,046829 0,013911 0,014114 0,922217 51,351351 0,072520 0,154618 0,000811 0,019678 0,862315 52,525253 0,000000 0,895191 0,118771

66

17 9 0,015029 0,860335 51,681614 0,000984 0,046252 0,019606 0,014166 1,005220 51,689189 0,054018 0,156929 0,004324 0,020095 0,946428 51,515152 0,000000 1,010383 0,059983 17 10 0,015080 0,755460 52,017937 0,000765 0,045492 0,018305 0,014144 1,037472 52,027027 0,102788 0,154561 0,003682 0,019394 0,919081 51,178451 0,000045 0,854804 0,095471 18 1 0,015197 0,708175 52,017937 0,001220 0,047399 0,017669 0,014286 0,847652 52,364865 0,088914 0,156835 0,012500 0,019279 0,919930 53,198653 0,000029 0,877859 0,080892 18 2 0,015234 0,867418 52,466368 0,000386 0,047988 0,020270 0,014739 0,840018 51,689189 0,010906 0,165163 0,005135 0,019635 0,883119 52,525253 0,000020 0,875588 0,110488 18 3 0,015124 0,969651 51,905830 0,000628 0,047490 0,018176 0,014194 0,983180 52,702703 0,042496 0,153883 0,015203 0,019594 0,874073 51,178451 0,000016 0,868201 0,083013 18 4 0,015016 0,854111 51,793722 0,000573 0,045649 0,018935 0,014291 0,918793 53,716216 0,056592 0,157539 0,022804 0,018956 0,729678 55,555556 0,000003 0,882633 0,160758 18 5 0,014999 0,884632 52,354260 0,000529 0,045693 0,017010 0,014379 0,816280 51,013514 0,045786 0,159970 -0,010642 0,020685 0,836189 49,494949 0,000000 1,295285 0,060589 18 6 0,015232 1,005376 51,233184 0,000654 0,047126 0,014827 0,014116 0,938392 52,702703 0,082087 0,155332 0,013547 0,021513 0,690840 54,882155 0,000004 1,582887 0,125168 18 7 0,015294 0,750599 51,569507 0,000451 0,048053 0,015562 0,014248 0,937932 52,702703 0,030840 0,159024 0,018142 0,020908 0,676002 53,198653 0,000010 1,404336 0,094562 18 8 0,017047 0,936148 52,017937 0,000223 0,051475 0,016060 0,014225 0,909355 52,702703 0,118045 0,155541 0,009932 0,020629 0,817140 50,505051 0,000031 1,138103 0,041835 18 9 0,015187 0,859510 50,896861 0,001277 0,046767 0,014822 0,014200 0,942652 52,027027 0,034226 0,154220 0,011385 0,019399 0,900946 54,208754 0,000001 0,944709 0,134394 18 10 0,015016 0,793852 52,578475 0,000565 0,044912 0,021197 0,014059 0,902489 52,364865 0,121073 0,155224 0,000608 0,019916 0,751574 50,168350 0,000049 1,010536 0,099916 19 1 0,014986 0,771412 51,905830 0,000546 0,046280 0,017100 0,014304 0,869023 52,027027 0,045880 0,156777 0,009628 0,020409 0,763183 51,178451 0,000014 1,331691 0,091397 19 2 0,015084 0,817561 51,457399 0,000485 0,046188 0,015303 0,014409 0,952021 51,013514 0,067982 0,158006 0,004561 0,019948 0,719295 52,188552 0,000021 0,965714 0,121128 19 3 0,020268 1,114764 51,008969 0,000149 0,058656 0,015769 0,014046 0,863259 51,689189 0,226504 0,157782 0,017365 0,020668 0,908224 49,158249 0,000009 1,069531 0,035572 19 4 0,014988 0,798462 52,017937 0,000952 0,045206 0,018773 0,013990 0,993635 52,702703 0,091024 0,155766 0,014730 0,018550 0,652361 53,198653 0,000003 0,840283 0,082542 19 5 0,015214 0,854721 51,793722 0,000580 0,046150 0,019692 0,014485 0,838671 50,000000 0,096823 0,156958 0,000270 0,020146 0,851698 52,861953 0,000057 1,053748 0,087391 19 6 0,015158 0,815961 52,017937 0,000678 0,045733 0,016948 0,014195 0,797160 51,351351 0,086141 0,156308 -0,000473 0,019946 0,709334 51,851852 0,000000 0,928929 0,113350 19 7 0,015209 0,792088 51,121076 0,000166 0,045985 0,016045 0,014230 0,867953 52,364865 0,049018 0,157097 0,008615 0,019755 0,775305 50,168350 0,000001 0,926040 0,117929 19 8 0,015195 0,931937 52,242152 0,000463 0,047920 0,022700 0,014069 1,045825 51,689189 0,066884 0,153720 -0,004628 0,019825 1,161466 51,851852 0,000004 0,938304 0,056785 19 9 0,015138 0,896163 51,008969 0,000444 0,045821 0,016502 0,014229 0,965624 52,364865 0,070313 0,154470 0,013412 0,019598 0,764319 56,228956 0,000028 0,953261 0,129680 19 10 0,015222 0,821726 51,233184 0,000463 0,046397 0,016032 0,014284 0,816375 51,351351 0,051640 0,154840 -0,000811 0,019586 0,883677 53,535354 0,000002 0,916827 0,115269 20 1 0,018146 1,136762 51,569507 0,000707 0,059144 0,014533 0,015066 1,042802 50,675676 0,003448 0,171083 -0,000777 0,020352 0,710301 51,515152 0,000001 1,003717 0,076886 20 2 0,016925 1,030215 51,681614 0,001786 0,055495 0,017134 0,014551 0,936486 50,675676 0,146220 0,162891 0,000236 0,019563 0,808268 54,545455 0,000038 0,939779 0,092340 20 3 0,015304 0,811552 51,681614 0,000356 0,048010 0,017189 0,014269 0,997758 52,027027 0,044876 0,158417 0,007500 0,020233 0,649507 52,188552 0,000005 1,066190 0,152879 20 4 0,015172 0,974631 51,569507 0,000974 0,047872 0,016927 0,014126 0,880275 50,675676 0,061437 0,156111 -0,001250 0,019715 0,766695 51,851852 0,000000 0,903860 0,080993 20 5 0,015112 0,879818 51,121076 0,000315 0,046480 0,015522 0,014245 0,948269 51,013514 0,192243 0,155359 0,001757 0,019950 0,837568 52,188552 0,000065 0,893420 0,117997 20 6 0,017594 0,993846 51,233184 0,000370 0,053275 0,013249 0,014681 1,013247 52,027027 0,018949 0,164419 0,000811 0,019437 0,863022 52,188552 0,000009 0,871067 0,083721 20 7 0,014916 0,819258 51,457399 0,000558 0,045501 0,016234 0,014154 0,885728 52,027027 0,074481 0,154091 0,016689 0,019731 0,690669 53,198653 0,000013 1,086061 0,144663 20 8 0,016334 0,785138 51,569507 0,000128 0,049782 0,019174 0,014266 0,852955 51,013514 0,038722 0,154567 0,002500 0,018880 0,874972 50,168350 0,000000 0,828693 0,086347 20 9 0,015243 0,763371 52,130045 0,000924 0,047501 0,019171 0,014560 1,041198 52,702703 0,021981 0,161663 0,009662 0,019039 0,861302 52,861953 0,000009 0,878580 0,162003 20 10 0,014968 0,929879 51,457399 0,000696 0,046072 0,017795 0,014018 0,913999 52,027027 0,075142 0,153317 0,011655 0,020333 0,674667 52,861953 0,000000 1,184164 0,071700 21 1 0,015209 0,905469 51,793722 0,000962 0,046863 0,020992 0,014421 1,042085 51,689189 0,035333 0,160457 0,003480 0,019098 0,843675 52,525253 0,000000 0,860327 0,074798 21 2 0,016799 0,885794 51,793722 0,001963 0,050597 0,016714 0,014191 0,776975 53,378378 0,218169 0,158436 0,016351 0,018951 0,827704 52,861953 0,000046 0,830685 0,086650 21 3 0,015365 0,937035 50,896861 0,001378 0,046853 0,013729 0,014279 0,997096 52,027027 0,036975 0,157209 0,011047 0,019608 0,721280 52,861953 0,000009 0,959999 0,067963 21 4 0,015085 0,892433 51,233184 0,000483 0,046004 0,018371 0,014086 0,870358 52,702703 0,060032 0,153265 0,017432 0,020209 0,805415 49,158249 0,000001 1,049775 0,076481 21 5 0,015007 0,857745 52,017937 0,000748 0,045873 0,017588 0,014048 0,900367 52,027027 0,074575 0,153171 0,015608 0,020407 0,662894 54,208754 0,000003 1,417969 0,112003 21 6 0,015689 0,820584 51,569507 0,000336 0,047695 0,015147 0,014132 0,839594 51,351351 0,095781 0,155824 0,002466 0,019158 0,837569 51,515152 0,000002 0,870417 0,089276 21 7 0,015233 0,797831 51,681614 0,000837 0,046970 0,017675 0,014034 0,985701 51,351351 0,074940 0,154057 0,005304 0,018755 0,655639 51,851852 0,000001 0,862049 0,103923 21 8 0,016887 1,035627 51,121076 0,000279 0,053189 0,015936 0,014717 0,990285 52,027027 0,006086 0,167523 0,000372 0,019160 0,846770 51,515152 0,000061 0,851907 0,077559 21 9 0,015524 0,878363 49,887892 0,000194 0,047243 0,012618 0,014091 0,983611 52,364865 0,147586 0,154833 0,001622 0,019478 0,817530 50,505051 0,000031 0,886134 0,047424 21 10 0,015524 0,864644 51,905830 0,000713 0,049558 0,018095 0,014615 0,963822 51,689189 0,030326 0,163614 -0,002331 0,019991 0,762449 51,515152 0,000014 0,979090 0,118199 22 1 0,015062 0,795215 51,457399 0,000612 0,045609 0,018434 0,014102 0,851548 51,013514 0,217317 0,155812 0,002872 0,024661 0,812211 52,188552 0,000045 2,755795 0,139377

67

22 2 0,015350 0,792144 51,681614 0,000513 0,046337 0,015741 0,014308 0,830925 51,689189 0,072751 0,157621 -0,000236 0,020382 0,690031 50,841751 0,000001 0,981196 0,083788 22 3 0,015228 0,748241 51,905830 0,000497 0,045976 0,018459 0,014134 0,836190 52,027027 0,077745 0,156543 0,009155 0,019800 0,973143 53,535354 0,000009 0,960491 0,163013 22 4 0,015643 0,934139 51,681614 0,000862 0,047789 0,018395 0,014472 0,949477 51,013514 0,036065 0,161055 0,003818 0,021126 0,991528 53,535354 0,000001 1,117447 0,097626 22 5 0,032995 2,138690 51,457399 0,002993 0,107405 0,016289 0,014420 0,873088 49,662162 0,117808 0,160513 -0,000203 0,020965 0,815014 54,208754 0,000022 1,000951 0,147660 22 6 0,015023 0,929764 51,569507 0,000615 0,047086 0,017215 0,014108 0,964032 52,364865 0,087160 0,156546 0,000439 0,020379 1,340948 51,851852 0,000000 1,298564 0,054865 22 7 0,015324 0,883690 51,233184 0,000873 0,046401 0,014309 0,014259 0,901708 52,702703 0,166510 0,158007 0,005135 0,019282 0,795156 50,841751 0,000072 0,840418 0,092643 22 8 0,015687 0,859377 51,793722 0,001077 0,047102 0,019533 0,014389 0,857612 51,013514 0,033337 0,160869 -0,000980 0,019933 0,813148 49,494949 0,000010 0,939349 0,051061 22 9 0,015114 0,730794 51,793722 0,000743 0,046096 0,019568 0,014134 0,855530 51,689189 0,059600 0,154581 0,010135 0,019760 0,914159 47,138047 0,000000 0,957647 0,020522 22 10 0,015284 0,931855 51,569507 0,000669 0,046798 0,018297 0,014086 0,933690 52,364865 0,102926 0,153104 0,006081 0,018759 0,819906 53,198653 0,000025 0,812356 0,123552 23 1 0,016076 0,879614 51,233184 0,001672 0,052602 0,014900 0,015462 0,941351 51,013514 0,006132 0,181964 -0,003919 0,021015 0,949398 54,208754 0,000043 1,009021 0,091465 23 2 0,015077 0,781155 51,569507 0,000627 0,045767 0,016551 0,014300 0,991765 52,027027 0,039273 0,156679 0,005878 0,019086 0,582553 55,218855 0,000013 0,960679 0,146212 23 3 0,016675 0,921709 51,457399 0,001489 0,049116 0,017910 0,014122 0,876829 50,337838 0,089219 0,155973 -0,001655 0,020979 0,911742 51,515152 0,000000 1,043613 0,068838 23 4 0,015302 0,834297 51,681614 0,000361 0,046245 0,016758 0,014195 0,868068 51,013514 0,091628 0,156124 0,003176 0,019618 0,702158 50,168350 0,000021 0,880149 0,079680 23 5 0,015249 0,876093 50,896861 0,000229 0,045800 0,017393 0,014053 0,836237 51,351351 0,051768 0,155913 0,001824 0,019757 0,967016 51,515152 0,000000 0,944711 0,122508 23 6 0,015146 0,893071 51,121076 0,000950 0,045671 0,016727 0,014045 0,912242 53,040541 0,133069 0,153565 0,027027 0,019071 0,761019 59,259259 0,000131 0,883136 0,195808 23 7 0,015072 0,854903 51,905830 0,000729 0,046810 0,020177 0,014816 0,873953 50,000000 0,002702 0,167391 -0,006182 0,021328 0,930104 52,188552 0,000071 1,373062 0,122609 23 8 0,015088 0,781696 52,130045 0,001125 0,046376 0,018535 0,014433 1,206303 52,364865 0,095400 0,159293 0,009696 0,019874 1,009225 52,188552 0,000075 0,977951 0,119007 23 9 0,015183 0,801639 51,569507 0,000857 0,046007 0,016663 0,014290 0,852333 52,027027 0,074219 0,156353 0,011419 0,019547 0,775393 50,841751 0,000006 0,945849 0,071633 23 10 0,015144 0,859909 51,233184 0,000597 0,046157 0,014827 0,014175 0,865910 51,351351 0,038336 0,155229 0,003108 0,019583 1,026694 51,178451 0,000003 0,899721 0,079141 24 1 0,015046 0,774166 52,242152 0,000417 0,046571 0,021029 0,014096 0,913464 51,351351 0,081585 0,154750 0,004291 0,019188 0,743587 52,525253 0,000007 0,872297 0,132205 24 2 0,015187 0,877597 51,569507 0,001320 0,046288 0,017066 0,014296 0,958815 51,013514 0,051776 0,158221 -0,000507 0,020863 1,101009 54,882155 0,000009 1,007193 0,129646 24 3 0,016206 0,855181 51,345291 0,001298 0,051897 0,014337 0,014236 0,920522 53,040541 0,046740 0,156184 0,005642 0,019548 0,963243 52,861953 0,000002 0,911381 0,093215 24 4 0,015373 0,944176 52,130045 0,000532 0,048366 0,021267 0,014346 1,011413 52,364865 0,122675 0,161960 0,015709 0,019044 0,855477 54,208754 0,000012 0,858033 0,089478 24 5 0,015194 0,847896 50,896861 0,000860 0,045619 0,012333 0,014029 0,833296 52,364865 0,078243 0,155326 0,007736 0,019450 1,127224 50,168350 0,000001 0,922300 0,074394 24 6 0,015156 0,719293 51,681614 0,000201 0,046287 0,016015 0,014396 0,783478 52,364865 0,043269 0,159957 0,002669 0,020129 0,645492 51,178451 0,000002 1,114041 0,123721 24 7 0,015124 0,840373 52,017937 0,000701 0,046723 0,018972 0,014249 0,885802 52,027027 0,038305 0,155590 0,010878 0,019533 0,699887 51,515152 0,000000 0,996959 0,099276 24 8 0,015057 0,814828 52,130045 0,000348 0,046160 0,018210 0,014017 0,958656 52,027027 0,180839 0,156981 -0,001655 0,019186 0,875384 51,178451 0,000029 0,929126 0,097997 24 9 0,015686 0,982068 51,008969 0,001466 0,047972 0,015878 0,014046 0,943330 52,364865 0,084191 0,154081 0,011047 0,019727 0,907348 50,841751 0,000005 1,041501 0,092205 24 10 0,015318 0,825177 50,896861 0,000355 0,046846 0,013711 0,014500 1,034607 52,364865 0,094339 0,159743 0,017466 0,020375 0,759232 52,861953 0,000055 1,125439 0,102239 25 1 0,015282 0,788197 51,457399 0,001035 0,045593 0,017753 0,014316 0,963120 52,364865 0,061286 0,155105 0,013919 0,019581 0,642879 54,882155 0,000011 1,056560 0,141734 25 2 0,015205 0,739732 51,793722 0,000561 0,046291 0,017938 0,014056 0,897444 53,040541 0,092027 0,158125 0,023953 0,018490 0,888078 54,545455 0,000002 0,872759 0,131498 25 3 0,015134 0,860249 51,681614 0,000537 0,045949 0,020250 0,014015 0,907452 51,689189 0,088689 0,154149 0,006588 0,019015 0,856153 53,198653 0,000003 0,823597 0,120253 25 4 0,015049 0,845752 51,345291 0,000797 0,046926 0,018283 0,014036 0,952966 51,351351 0,105161 0,153810 0,002331 0,020131 0,714844 52,861953 0,000006 1,027105 0,110690 25 5 0,018194 0,927556 51,345291 0,002264 0,053972 0,014451 0,014399 0,932824 51,689189 0,021386 0,160249 0,006554 0,019012 0,753136 52,188552 0,000007 0,831120 0,121936 25 6 0,015056 0,807330 52,017937 0,000558 0,047174 0,021110 0,013935 0,874163 53,040541 0,090436 0,151602 0,009054 0,019807 0,689845 55,555556 0,000006 0,960118 0,194091 25 7 0,015095 0,919828 51,793722 0,000885 0,046009 0,018053 0,014184 0,931494 51,689189 0,069336 0,156758 0,011959 0,020734 0,848380 54,545455 0,000003 1,778304 0,112475 25 8 0,015047 0,696829 51,233184 0,000787 0,047163 0,015104 0,014183 0,842514 52,364865 0,097511 0,159305 0,009088 0,018844 0,858148 54,545455 0,000014 0,840768 0,125909 25 9 0,015180 0,928846 51,681614 0,000683 0,046894 0,017523 0,014071 0,879646 51,013514 0,091634 0,154342 0,001284 0,022485 1,045206 52,861953 0,000000 1,261154 0,126414 25 10 0,015987 0,918720 50,672646 0,000102 0,048000 0,015510 0,014401 0,782432 52,702703 0,078084 0,159027 0,008041 0,018815 0,730319 52,861953 0,000000 0,852522 0,106717 26 1 0,015488 0,874148 50,560538 0,001150 0,047349 0,013112 0,014580 1,099440 51,351351 0,006670 0,162260 0,006689 0,019304 0,884259 51,178451 0,000001 0,887147 0,068535 26 2 0,015987 0,800720 52,354260 0,001638 0,048401 0,018055 0,014127 0,888993 52,027027 0,062546 0,158694 0,014020 0,021696 0,664296 50,505051 0,000004 1,563635 0,010118 26 3 0,015151 0,800657 51,793722 0,000864 0,045132 0,016576 0,014297 0,800209 50,675676 0,139850 0,160249 -0,000236 0,019511 0,751627 51,851852 0,000001 0,898994 0,085168 26 4 0,016243 0,809377 52,017937 0,000289 0,050233 0,018288 0,014414 0,951222 52,027027 0,016923 0,159694 0,016216 0,018893 0,874346 51,515152 0,000005 0,891152 0,060488

68

26 5 0,014988 0,720146 52,578475 0,000752 0,046013 0,020494 0,014165 0,881152 51,351351 0,056753 0,155957 0,003514 0,019147 0,813519 54,545455 0,000000 0,861742 0,132071 26 6 0,015037 0,847041 51,569507 0,000548 0,046360 0,018574 0,014098 1,041279 52,027027 0,090665 0,151982 0,007736 0,020365 0,806167 51,515152 0,000037 1,041603 0,064091 26 7 0,015544 0,855440 51,569507 0,001405 0,047442 0,018509 0,014098 0,954128 52,027027 0,066213 0,152441 0,012500 0,020849 0,986800 53,198653 0,000012 1,113982 0,119209 26 8 0,015124 0,790915 51,681614 0,000545 0,045657 0,018173 0,014122 0,871677 52,027027 0,104042 0,157099 0,010574 0,018636 0,702021 55,555556 0,000000 0,825313 0,161667 26 9 0,015273 0,947897 51,121076 0,001157 0,046580 0,014735 0,014078 0,984677 53,716216 0,093522 0,153981 0,010439 0,020574 0,937084 52,861953 0,000014 1,056082 0,142306

26 10 0,015070 0,769159 51,569507 0,000602 0,045656 0,016247 0,014125 0,902780 52,027027 0,124438 0,155424 0,008581 0,020352 0,820636 49,494949 0,000033 1,056863 0,089680

69

Tabela A-0-2: Resultados do Experimentos 2

Neurônio Repetição Medidas de Desempenho - Treinamento Medidas de Desempenho - Validação Medidas de Desempenho - Teste

MAPE THEIL POCID ARV MSE ALG MAPE THEIL POCID ARV MSE ALG MAPE THEIL POCID ARV MSE ALG 1 1 0,019118 1,125945 54,820628 0,002537 0,058737 0,030803 0,014118 0,979892 50,000000 0,086284 0,152871 0,013007 0,019404 0,963224 52,525253 0,000081 0,942937 0,123451 1 2 0,015254 0,841247 53,587444 0,001316 0,046296 0,024516 0,013983 0,842304 49,662162 0,666423 0,150331 0,002297 0,018179 0,955972 53,872054 0,000014 0,849050 0,114562 1 3 0,016223 0,847618 54,484305 0,000127 0,050375 0,029719 0,014593 1,108117 50,675676 0,083630 0,156936 0,005541 0,018547 0,902729 55,555556 0,000085 0,809780 0,137391 1 4 0,019447 1,138391 57,511211 0,001195 0,057639 0,043194 0,014378 1,193981 48,648649 0,096476 0,157304 -0,008682 0,018520 0,858114 52,525253 0,000081 0,993930 0,072845 1 5 0,015590 0,885065 55,493274 0,000913 0,048713 0,032735 0,014306 1,192458 52,027027 0,509786 0,154692 0,011892 0,018200 0,976329 51,178451 0,000054 0,778583 0,085370 1 6 0,015699 0,896411 53,587444 0,000478 0,049519 0,027037 0,014898 1,052629 49,662162 0,186410 0,165095 -0,011047 0,019545 0,944415 52,861953 0,000536 0,902221 0,065808 1 7 0,014419 0,920292 53,699552 0,000919 0,043461 0,028068 0,014558 1,083490 51,013514 0,179734 0,156345 -0,000946 0,018405 0,927905 52,861953 0,000133 0,856308 0,079141 1 8 0,015255 0,898200 52,466368 0,002320 0,048365 0,020179 0,014252 1,121943 49,324324 0,962747 0,152541 -0,005507 0,018551 1,012744 53,198653 0,000014 0,793323 0,094562 1 9 0,014756 0,911088 54,820628 0,000681 0,045065 0,031919 0,014262 0,893042 51,351351 0,000016 0,159411 0,012872 0,018784 0,783072 53,872054 0,000009 0,846169 0,155303 1 10 0,014618 0,844546 53,699552 0,000113 0,043322 0,026977 0,014236 0,939528 52,702703 0,107666 0,156762 0,019628 0,019323 1,033364 51,515152 0,000035 0,869216 0,076616 2 1 0,013689 0,664131 60,650224 0,000121 0,054301 0,051835 0,014473 1,039579 50,000000 1,491964 0,154843 0,014291 0,020026 0,831541 53,535354 0,000050 1,391413 0,072576 2 2 0,014917 0,826127 52,130045 0,000063 0,046563 0,020511 0,014128 0,847181 51,689189 3,084563 0,153036 0,013074 0,018145 0,605158 55,218855 0,000014 0,844448 0,167189 2 3 0,016423 0,766424 61,771300 0,002411 0,057478 0,053347 0,014040 1,077080 51,013514 0,178687 0,154919 0,002669 0,019500 0,624098 61,616162 0,000188 1,199202 0,201532 2 4 0,014853 0,962994 53,139013 0,000606 0,046480 0,027035 0,013838 1,024138 51,689189 0,833099 0,149420 -0,001250 0,019183 0,601287 56,228956 0,000000 1,028132 0,159714 2 5 0,015210 0,797435 53,363229 0,000617 0,045244 0,028608 0,014278 0,896420 49,324324 0,294217 0,157455 -0,002432 0,018118 0,751507 53,198653 0,000056 0,837754 0,127458 2 6 0,015022 0,977597 52,242152 0,001188 0,047021 0,020447 0,013846 0,880011 51,689189 0,291981 0,150911 0,011824 0,019040 0,986729 54,545455 0,000003 0,877299 0,101532 2 7 0,021730 1,089773 55,717489 0,000220 0,063214 0,032519 0,014155 0,930041 51,013514 0,161877 0,151502 0,002365 0,017903 0,872520 58,585859 0,000072 0,838612 0,228165 2 8 0,019473 1,114240 53,811659 0,005947 0,059523 0,023639 0,013937 0,923964 49,662162 0,342910 0,151997 -0,002736 0,018161 0,861531 53,535354 0,000061 0,783314 0,108973 2 9 0,015580 0,857403 55,605381 0,000017 0,048526 0,035701 0,014071 0,921475 51,689189 0,758509 0,149632 0,017601 0,018242 0,781516 52,861953 0,000029 0,922315 0,112475 2 10 0,015776 0,891468 52,578475 0,000061 0,048497 0,023963 0,014188 1,073569 51,351351 0,396721 0,153764 0,023142 0,018812 0,958280 54,208754 0,000072 0,888480 0,133519 3 1 0,015761 0,966808 53,699552 0,000825 0,048245 0,026836 0,014620 0,834485 49,662162 1,233272 0,158836 -0,010912 0,018659 0,870827 55,892256 0,000709 0,885565 0,128838 3 2 0,015386 0,784315 52,690583 0,000040 0,046530 0,023277 0,014032 1,077216 52,364865 0,059232 0,152113 0,008986 0,019532 0,897726 53,198653 0,000064 0,892842 0,073013 3 3 0,015632 0,922703 55,381166 0,000913 0,048363 0,034870 0,015154 0,921986 48,986486 0,346055 0,173704 0,002196 0,019514 0,958965 53,535354 0,000515 0,930102 0,160993 3 4 0,015042 0,890205 53,587444 0,000429 0,045855 0,027071 0,014421 0,992893 54,054054 0,125358 0,159668 0,031047 0,018350 0,898930 52,188552 0,000002 0,804555 0,090926 3 5 0,013337 0,811442 60,538117 0,000015 0,048511 0,052006 0,014291 0,898677 50,000000 0,018652 0,159712 -0,002770 0,019284 0,876187 56,565657 0,000086 0,944892 0,197290 3 6 0,013084 0,815747 59,977578 0,000154 0,042464 0,050316 0,014931 1,122742 50,675676 1,129698 0,165880 0,006284 0,018070 0,832312 54,545455 0,000006 0,929417 0,143384 3 7 0,016293 0,835047 54,484305 0,000214 0,051437 0,031533 0,015324 1,129105 52,702703 0,169771 0,171966 0,018581 0,019071 0,752280 53,535354 0,000127 0,886977 0,142037 3 8 0,022365 1,145308 54,820628 0,000000 0,065391 0,028537 0,013786 0,955996 48,310811 0,358297 0,147923 -0,021216 0,019199 0,969190 52,525253 0,000175 0,882735 0,061061 3 9 0,014701 0,852258 53,475336 0,000587 0,044191 0,028276 0,014083 0,983764 50,337838 0,530797 0,151885 0,000135 0,019678 0,946338 51,515152 0,000607 0,989876 0,001970 3 10 0,027720 1,770192 54,708520 0,000065 0,093376 0,030229 0,015125 1,048827 51,351351 0,234988 0,170088 0,019527 0,020772 1,122067 52,861953 0,000007 1,070383 0,077492 4 1 0,014172 0,818034 54,708520 0,001320 0,045125 0,031511 0,014150 0,986418 53,716216 0,363299 0,152693 0,032568 0,017885 0,792930 58,249158 0,001088 0,749173 0,201768 4 2 0,014632 0,783062 53,139013 0,000483 0,050656 0,033097 0,014364 0,898853 51,351351 0,360057 0,154842 0,000372 0,019317 0,890702 53,872054 0,000257 1,088897 0,094394 4 3 0,013375 0,827276 61,210762 0,000002 0,042914 0,053050 0,014367 0,859148 53,040541 2,340235 0,159938 0,023716 0,018895 0,662149 54,882155 0,000123 0,908241 0,160185 4 4 0,015105 0,912448 53,587444 0,000011 0,045822 0,028039 0,014034 1,124592 53,716216 0,596517 0,153036 0,020676 0,019665 0,641914 53,198653 0,000063 1,093065 0,151599 4 5 0,014470 0,901988 54,820628 0,000009 0,046521 0,033133 0,014863 1,041383 51,351351 1,849086 0,162503 0,016655 0,019832 0,779153 53,198653 0,000702 0,977859 0,088805 4 6 0,015098 0,767287 54,708520 0,000991 0,046347 0,030104 0,014148 1,022829 49,662162 0,022507 0,155611 -0,006723 0,018630 0,931288 53,872054 0,000135 0,794462 0,128165 4 7 0,013991 0,733132 54,147982 0,000010 0,043215 0,031034 0,013995 0,766421 51,351351 0,109918 0,148473 0,010169 0,019021 0,841654 56,565657 0,000009 0,899147 0,157559 4 8 0,013495 0,772203 59,977578 0,000733 0,043307 0,052160 0,014438 0,985496 51,351351 0,636595 0,158592 0,013682 0,018980 0,844403 52,188552 0,000007 1,061216 0,053316 4 9 0,014306 0,914998 55,269058 0,000964 0,045756 0,033766 0,014305 0,869928 53,378378 0,833576 0,157013 0,011824 0,017995 0,816158 56,228956 0,000084 0,869474 0,182172

70

4 10 0,020124 1,268714 56,165919 0,000655 0,060064 0,036787 0,014412 1,017343 48,648649 0,038397 0,154644 -0,010980 0,019076 0,990908 54,882155 0,000064 0,944074 0,121027 5 1 0,018299 0,632105 61,547085 0,001778 0,108199 0,053368 0,014125 0,921192 53,378378 0,324232 0,152444 0,022872 0,017793 0,634162 55,218855 0,000228 0,744330 0,194360 5 2 0,014976 0,805695 53,026906 0,000001 0,045910 0,019463 0,014479 0,934594 54,391892 0,719480 0,155494 0,029358 0,018010 0,869914 53,872054 0,000328 0,808444 0,140960 5 3 0,018185 1,018159 56,278027 0,000007 0,054724 0,034699 0,015161 1,050812 51,351351 0,056252 0,169420 0,004966 0,018607 0,751937 53,872054 0,000001 0,832442 0,148300 5 4 0,014031 0,831079 55,381166 0,000786 0,043597 0,035863 0,014120 0,963838 52,027027 0,239909 0,154598 0,015980 0,017997 0,693236 51,851852 0,000010 0,796505 0,102542 5 5 0,014910 0,749685 53,811659 0,001080 0,048362 0,028814 0,014239 0,793700 54,054054 1,235394 0,149324 0,021014 0,018919 0,844892 54,208754 0,000078 0,866948 0,132677 5 6 0,015487 0,965179 56,165919 0,000104 0,049074 0,041091 0,014959 0,988205 52,027027 0,005643 0,172613 0,016926 0,019069 0,747041 52,188552 0,000027 0,942478 0,085808 5 7 0,015743 0,960002 55,717489 0,000061 0,052488 0,034722 0,014168 0,924879 51,351351 2,576030 0,156101 0,012500 0,018369 0,974031 57,912458 0,000027 0,927485 0,163451 5 8 0,025335 1,349165 53,811659 0,004893 0,078534 0,027637 0,013967 0,989396 51,689189 0,138939 0,154070 0,017061 0,018343 0,737359 53,535354 0,000055 0,806689 0,163788 5 9 0,014571 0,793456 53,811659 0,000087 0,046357 0,030710 0,014921 1,097644 51,689189 1,346831 0,167520 0,014899 0,021146 0,866458 54,208754 0,000467 1,042139 0,113687 5 10 0,014563 0,797775 55,493274 0,000384 0,044773 0,033324 0,015338 0,928693 52,027027 0,086331 0,176620 0,021824 0,019520 0,897785 52,188552 0,000027 0,998066 0,086212 6 1 0,015768 0,679170 59,529148 0,002308 0,049931 0,049073 0,014014 0,830461 50,000000 0,577885 0,154681 0,001149 0,018229 0,567752 56,565657 0,001501 1,013622 0,168838 6 2 0,018451 1,052995 56,726457 0,000000 0,054309 0,036606 0,014009 1,124508 52,027027 0,678986 0,153693 0,008682 0,021181 1,023642 56,565657 0,000102 1,040106 0,186010 6 3 0,014865 0,878065 53,251121 0,000985 0,044525 0,026791 0,014298 0,876032 50,337838 1,677418 0,157309 -0,004054 0,019194 1,037026 52,188552 0,000078 0,868043 0,062576 6 4 0,015330 0,810911 53,587444 0,000204 0,046390 0,025043 0,014754 1,001340 50,000000 0,061183 0,164618 -0,006892 0,018704 0,875352 54,882155 0,000009 0,872103 0,144428 6 5 0,013651 0,763372 56,614350 0,000028 0,041446 0,038274 0,014345 0,870101 51,689189 0,428795 0,152723 0,010574 0,019693 0,869056 52,861953 0,000004 0,997918 0,129848 6 6 0,015902 0,820819 57,062780 0,000000 0,051915 0,042790 0,014529 0,837260 53,040541 0,846352 0,160820 0,007230 0,018314 0,493674 57,239057 0,000453 1,009191 0,247660 6 7 0,014299 0,799612 54,484305 0,001033 0,041590 0,034260 0,013973 0,904321 51,689189 0,474822 0,154623 0,007669 0,018233 0,706807 53,198653 0,000054 0,944279 0,092677 6 8 0,015205 0,843138 52,802691 0,000976 0,045947 0,022713 0,014069 1,015160 51,351351 1,460069 0,152701 0,011419 0,019893 0,873384 55,555556 0,000385 0,956804 0,109377 6 9 0,019571 1,082851 53,475336 0,000419 0,059070 0,032406 0,014662 1,083778 50,675676 0,043315 0,164638 0,001047 0,020113 0,678492 51,515152 0,000007 1,062658 0,104495 6 10 0,016813 1,053758 57,062780 0,000779 0,050513 0,041905 0,013929 1,205011 52,364865 0,247246 0,153527 0,013750 0,018717 0,841453 56,565657 0,000001 0,865591 0,192744 7 1 0,015071 0,807493 53,811659 0,000835 0,044961 0,027449 0,013805 0,964728 52,702703 0,132167 0,147328 0,030203 0,019365 0,785362 52,861953 0,000018 0,890357 0,129209 7 2 0,017269 1,149087 57,623318 0,000222 0,064713 0,038340 0,014170 0,988627 53,378378 2,910901 0,156031 0,022196 0,018497 1,049513 53,535354 0,000005 0,851674 0,146818 7 3 0,015359 0,859599 52,354260 0,000637 0,044995 0,021426 0,014122 1,085285 52,702703 0,866055 0,156647 0,020608 0,020363 1,250384 56,228956 0,000149 1,082460 0,191700 7 4 0,013784 0,669644 59,641256 0,000914 0,043664 0,044305 0,014158 0,774240 53,040541 0,290588 0,150604 0,027264 0,016751 0,696347 56,565657 0,000945 0,933162 0,178535 7 5 0,019618 1,160848 56,614350 0,000022 0,056878 0,037557 0,014099 1,020284 50,337838 0,643275 0,151168 -0,001622 0,018894 0,873361 54,208754 0,000393 0,841504 0,173485 7 6 0,013880 0,864340 55,381166 0,000034 0,043524 0,034718 0,014273 1,000985 52,364865 3,051786 0,156724 0,020811 0,018693 0,658423 52,525253 0,000000 0,903020 0,085943 7 7 0,016236 0,742096 53,923767 0,000112 0,054227 0,031589 0,015154 1,123216 52,027027 0,088953 0,173586 0,015676 0,019567 0,884807 53,198653 0,000514 0,880149 0,097121 7 8 0,016400 0,730315 55,044843 0,001024 0,060974 0,034557 0,014595 0,886125 51,351351 0,041598 0,159664 0,017804 0,018969 0,982880 51,515152 0,000061 0,905049 0,049310 7 9 0,013896 0,766073 55,381166 0,000126 0,042262 0,035425 0,014153 0,964470 51,689189 0,288280 0,154522 -0,000135 0,018963 0,775134 53,535354 0,000273 0,896863 0,093653 7 10 0,014373 0,739222 52,914798 0,000069 0,045454 0,025320 0,014039 0,944551 51,689189 0,266891 0,150740 0,005777 0,018352 0,900860 52,861953 0,000069 0,785643 0,155067 8 1 0,016433 0,770630 53,923767 0,000238 0,048342 0,031502 0,014937 1,078649 48,648649 0,083443 0,168127 -0,005507 0,019133 0,925209 53,872054 0,000140 0,924239 0,096886 8 2 0,014521 0,742325 56,838565 0,000748 0,046927 0,039596 0,014054 1,041833 50,675676 0,011908 0,154672 0,005845 0,018419 0,566209 52,525253 0,000332 0,843822 0,131936 8 3 0,014486 0,801581 55,829596 0,000518 0,044371 0,037565 0,014396 0,800669 51,689189 0,879818 0,155380 0,018277 0,018390 0,769250 54,545455 0,000036 0,878204 0,114966 8 4 0,020286 1,156471 54,372197 0,000009 0,061043 0,030732 0,014398 0,936786 52,702703 0,086206 0,156677 0,030912 0,018474 0,757992 52,188552 0,000001 0,840546 0,102071 8 5 0,020203 1,112963 54,484305 0,000061 0,059120 0,031918 0,013963 0,868283 49,324324 0,730656 0,152807 0,000304 0,018947 0,651205 57,239057 0,000112 0,889611 0,203485 8 6 0,013271 0,757832 58,632287 0,000006 0,042269 0,044369 0,014259 0,918009 52,027027 3,055484 0,153586 0,004628 0,020479 0,888062 50,841751 0,000145 1,240033 -0,007862 8 7 0,016192 0,861902 54,596413 0,000243 0,051125 0,032608 0,014548 1,031770 50,000000 0,026997 0,163598 0,005135 0,019550 1,072257 54,545455 0,000018 1,086067 0,122609 8 8 0,015061 0,862627 58,632287 0,000650 0,044539 0,042468 0,014397 0,989697 48,986486 1,605322 0,155239 -0,010946 0,016709 0,797088 57,575758 0,000350 0,681341 0,223923 8 9 0,014331 0,802683 56,502242 0,000537 0,044643 0,037793 0,014200 0,916855 51,013514 0,947660 0,155441 0,008885 0,019375 0,872087 54,545455 0,000007 1,039671 0,146145 8 10 0,030991 1,701048 59,192825 0,002296 0,095047 0,048086 0,014458 0,990846 50,000000 0,155265 0,158003 -0,014020 0,019382 0,735190 49,494949 0,000003 0,938368 0,029916 9 1 0,026220 1,587199 56,838565 0,000862 0,081421 0,036306 0,014404 0,890542 51,013514 0,750910 0,158936 0,017432 0,019099 0,708363 54,208754 0,001203 0,937597 0,141566 9 2 0,015348 0,894767 55,605381 0,000025 0,048113 0,038455 0,015094 1,137422 48,648649 6,071523 0,170077 -0,005946 0,018874 1,180247 55,555556 0,000798 0,924064 0,124596

71

9 3 0,018597 0,755284 63,565022 0,002139 0,071662 0,058736 0,014678 0,982486 49,324324 6,384810 0,170235 -0,006318 0,018394 0,498274 64,983165 0,000093 1,573971 0,302508 9 4 0,016361 0,822195 53,475336 0,000404 0,049026 0,027765 0,015163 1,032236 50,675676 1,709545 0,171482 -0,001757 0,019103 0,944799 55,218855 0,000088 0,817485 0,158535 9 5 0,014938 0,777901 53,699552 0,000952 0,045376 0,025662 0,013771 0,974684 53,040541 0,140460 0,147420 0,023480 0,018404 0,805090 55,218855 0,000000 0,784199 0,181869 9 6 0,015313 0,905047 55,044843 0,000431 0,047361 0,035008 0,014314 0,869221 50,675676 0,170351 0,160525 0,003176 0,018982 0,631901 54,208754 0,000034 1,065105 0,090354 9 7 0,015173 0,954173 53,699552 0,001506 0,045104 0,027749 0,014202 1,109060 52,027027 0,068989 0,152819 0,009966 0,018301 0,961168 53,872054 0,000010 0,813924 0,128603 9 8 0,016519 0,972931 56,838565 0,000044 0,046254 0,038545 0,014723 1,075935 50,337838 0,820396 0,161882 0,004865 0,018407 0,783348 55,555556 0,000005 0,939544 0,163586 9 9 0,023284 1,394570 55,605381 0,000354 0,067917 0,033170 0,014045 0,903101 51,013514 0,242181 0,148510 0,014189 0,019380 0,819026 51,178451 0,000046 0,929271 0,051465 9 10 0,018242 1,074800 55,941704 0,001684 0,054470 0,038699 0,014309 1,058344 50,337838 0,765076 0,152667 0,004189 0,018279 0,716026 53,535354 0,000069 0,800223 0,138098

10 1 0,014235 0,778158 55,605381 0,000385 0,042256 0,037969 0,013805 0,963605 50,675676 0,462270 0,143737 -0,011081 0,019507 0,612929 55,555556 0,000015 1,148659 0,173418 10 2 0,020307 1,138478 60,089686 0,001015 0,062117 0,048333 0,015586 1,173345 52,364865 4,711484 0,182807 0,023986 0,018933 0,876266 55,555556 0,000083 0,922139 0,140758 10 3 0,018242 0,927830 54,372197 0,001654 0,057374 0,031531 0,014719 0,892047 50,337838 0,060402 0,161902 0,002027 0,017907 1,004633 53,872054 0,000004 0,827118 0,087155 10 4 0,013058 0,838155 57,511211 0,000008 0,041375 0,043674 0,014361 0,948804 51,013514 0,699136 0,159009 0,006791 0,019369 1,002379 54,208754 0,000023 0,955060 0,072845 10 5 0,014316 0,978671 58,295964 0,000096 0,046948 0,043599 0,014083 0,937876 52,702703 0,051059 0,153023 0,016284 0,018897 0,885732 51,851852 0,000383 0,918859 0,134663 10 6 0,015469 0,910449 55,269058 0,000005 0,045771 0,033653 0,014279 1,076856 51,013514 0,275328 0,151931 0,006081 0,017953 0,922871 56,228956 0,000024 0,835284 0,136515 10 7 0,013854 0,793347 55,044843 0,000344 0,042160 0,034800 0,014375 0,912795 51,013514 1,191331 0,155647 0,005169 0,019222 0,954038 55,218855 0,000221 0,885663 0,190253 10 8 0,014886 0,919584 56,278027 0,000526 0,044124 0,038999 0,014488 1,056634 49,662162 0,090781 0,167850 -0,009459 0,018229 0,984191 54,545455 0,000705 0,887042 0,178502 10 9 0,013418 0,810125 58,856502 0,000201 0,041888 0,047902 0,014342 0,926182 53,378378 0,686204 0,154480 0,025338 0,019083 0,718295 53,535354 0,000100 1,066384 0,129209 10 10 0,019431 1,095504 55,156951 0,000013 0,061689 0,035797 0,015021 1,158158 51,351351 0,199376 0,171653 0,003176 0,017683 0,880562 55,555556 0,000247 0,809996 0,171061 11 1 0,013607 0,827148 56,053812 0,000002 0,042108 0,037539 0,014078 0,901784 51,013514 1,162741 0,149356 0,012973 0,018017 0,848860 55,218855 0,000062 0,864389 0,140421 11 2 0,016240 0,830417 55,493274 0,000656 0,051915 0,032364 0,014308 1,018608 49,324324 0,252023 0,155896 -0,003446 0,019147 0,783749 51,515152 0,000067 0,821219 0,089040 11 3 0,013456 0,775728 55,829596 0,000036 0,041501 0,037716 0,013863 0,842352 51,013514 1,062145 0,148803 -0,003885 0,019087 0,956043 51,515152 0,000004 0,939838 0,035303 11 4 0,014774 0,850742 57,847534 0,000004 0,048670 0,043217 0,013957 0,962312 53,716216 1,335599 0,152953 0,008885 0,019652 0,677142 50,505051 0,000164 0,987323 0,077761 11 5 0,014003 0,822306 55,829596 0,000465 0,041800 0,034476 0,014236 0,922692 50,337838 0,081867 0,156781 -0,008412 0,018599 0,970127 54,208754 0,000027 0,791135 0,156684 11 6 0,015460 0,866204 57,735426 0,000987 0,047951 0,042068 0,014054 0,984959 52,702703 0,027331 0,154232 0,007500 0,019891 0,947544 53,198653 0,000029 0,940432 0,139310 11 7 0,014317 0,743647 58,632287 0,000236 0,043619 0,043760 0,014418 0,756996 51,013514 0,093971 0,156184 0,019966 0,018685 0,670088 59,259259 0,000006 1,364398 0,212879 11 8 0,014294 0,808998 53,587444 0,001397 0,043917 0,028253 0,014045 1,062805 50,675676 0,052227 0,148721 0,003311 0,018416 0,871412 54,882155 0,000003 0,843910 0,151801 11 9 0,015891 0,996246 56,390135 0,000002 0,046647 0,039022 0,014656 0,910384 51,351351 0,297583 0,161285 0,009054 0,017996 0,938411 52,188552 0,000000 0,852944 0,046785 11 10 0,013989 0,837146 54,596413 0,000102 0,043079 0,034976 0,014209 1,001163 50,000000 4,307061 0,159843 -0,004527 0,018118 0,798525 54,208754 0,000012 1,020612 0,140017 12 1 0,021389 1,498176 53,251121 0,000086 0,071364 0,026096 0,016069 1,180202 51,013514 0,002467 0,197389 0,006351 0,019023 1,010546 55,555556 0,000260 0,853899 0,118939 12 2 0,013245 0,711530 58,968610 0,000669 0,045083 0,043557 0,014418 0,885626 52,364865 1,014213 0,160357 0,030642 0,018069 0,563110 59,932660 0,000254 0,973668 0,199983 12 3 0,014181 0,874702 54,596413 0,000530 0,043486 0,032065 0,014529 1,172508 51,689189 0,257267 0,157570 0,003547 0,018325 0,772109 55,218855 0,000041 0,854570 0,160556 12 4 0,012605 0,931235 60,201794 0,000115 0,039164 0,048459 0,013909 1,012755 52,027027 1,523622 0,147273 0,016453 0,020298 0,881678 53,535354 0,000097 1,500752 0,102912 12 5 0,034278 2,565933 56,165919 0,011438 0,123762 0,040106 0,015874 1,057792 51,689189 2,298744 0,187353 0,009122 0,020550 1,029953 53,535354 0,000161 1,009642 0,137458 12 6 0,013646 0,741126 56,726457 0,000753 0,041907 0,040281 0,014163 0,912747 51,013514 0,150041 0,152732 0,014223 0,017999 0,853767 54,882155 0,000028 0,792259 0,123249 12 7 0,013199 0,715938 59,753363 0,000103 0,044131 0,051830 0,014206 0,956640 52,027027 0,318266 0,150727 0,013446 0,018562 0,661613 53,198653 0,000142 0,851561 0,120859 12 8 0,029720 2,113057 56,614350 0,002653 0,104553 0,034425 0,014759 1,064470 52,364865 0,337612 0,165628 0,003345 0,022374 0,920227 53,535354 0,000039 1,173998 0,148535 12 9 0,019392 1,076656 55,829596 0,000473 0,057337 0,035339 0,015126 0,878897 52,702703 0,040293 0,170710 0,023378 0,018388 0,797510 54,545455 0,000624 0,836917 0,144091 12 10 0,016989 0,843704 61,995516 0,000309 0,052433 0,057017 0,014223 1,076445 51,689189 0,286315 0,154779 0,015642 0,018200 0,742816 56,565657 0,000023 0,943564 0,153687 13 1 0,014805 0,869215 52,690583 0,001011 0,043873 0,022921 0,014352 0,892713 52,027027 1,286482 0,156181 0,007635 0,018098 1,073109 55,555556 0,000016 0,812715 0,162104 13 2 0,013337 0,776175 57,959641 0,000074 0,040863 0,044344 0,014215 0,840996 51,351351 0,645353 0,156891 0,005574 0,017239 0,685266 53,872054 0,000019 0,850866 0,139983 13 3 0,018122 1,089972 60,426009 0,000690 0,049558 0,052975 0,014233 1,013558 51,689189 0,318226 0,159139 0,009223 0,019659 0,894153 55,892256 0,000073 1,023460 0,190118 13 4 0,021900 1,131238 56,614350 0,000020 0,066415 0,034003 0,014232 0,884956 53,040541 0,308274 0,151898 0,029122 0,019296 0,947967 57,239057 0,000013 0,920837 0,178502 13 5 0,014564 0,837120 56,950673 0,000044 0,047386 0,037847 0,014269 0,896785 52,027027 0,492178 0,156887 0,008176 0,018351 0,840739 54,545455 0,000021 0,785367 0,150724

72

13 6 0,027440 1,413065 55,044843 0,001084 0,079588 0,033871 0,014325 0,871625 53,378378 0,304798 0,157188 0,012061 0,018520 0,697066 54,208754 0,000064 0,881176 0,120354 13 7 0,014543 0,807051 56,614350 0,000162 0,043258 0,038029 0,014036 0,912746 51,689189 0,096739 0,153081 0,010811 0,018141 0,757240 54,882155 0,000074 0,765619 0,092677 13 8 0,016482 0,830141 56,726457 0,000000 0,050594 0,039154 0,014170 1,060259 50,675676 0,062415 0,156545 0,011318 0,018115 0,726658 56,902357 0,000040 0,814854 0,126515 13 9 0,015946 0,808700 56,278027 0,001795 0,047707 0,036870 0,014074 0,764907 51,689189 2,455192 0,151053 0,004595 0,018212 0,940325 58,585859 0,000085 0,897558 0,215135 13 10 0,014624 0,809363 54,596413 0,000356 0,047677 0,030107 0,014476 0,939953 49,324324 0,070147 0,160343 -0,007703 0,018435 0,900304 53,198653 0,000000 0,817867 0,102576 14 1 0,015836 0,872742 57,623318 0,000668 0,050703 0,042383 0,014652 0,937554 52,364865 0,198064 0,162393 0,008446 0,018582 0,913502 53,872054 0,000283 0,918484 0,111296 14 2 0,013273 0,723383 61,771300 0,000114 0,042180 0,051885 0,014177 0,953164 50,000000 0,697204 0,161061 -0,016486 0,018939 0,653725 54,882155 0,000007 0,929275 0,171498 14 3 0,016034 0,983757 53,923767 0,000002 0,048875 0,028674 0,015755 1,268019 51,689189 0,154111 0,192472 0,009493 0,021288 1,197095 54,208754 0,000123 0,984126 0,150051 14 4 0,015536 0,904049 52,802691 0,000284 0,046361 0,028251 0,014165 0,986630 53,378378 1,340355 0,153560 0,026791 0,018984 0,921081 54,208754 0,000039 0,940013 0,141162 14 5 0,021242 1,534658 53,251121 0,002216 0,078257 0,027787 0,017374 1,482282 51,689189 3,591115 0,222436 0,009899 0,021381 1,081332 53,198653 0,001120 0,981635 0,163384 14 6 0,026163 1,648861 56,053812 0,002031 0,084666 0,033789 0,015567 1,081765 52,027027 0,008886 0,183969 0,012365 0,020394 0,743418 51,851852 0,000709 0,993887 0,066414 14 7 0,027606 1,597387 55,605381 0,006368 0,082040 0,034602 0,014548 0,885585 51,351351 0,276774 0,160268 0,018345 0,018929 0,865637 56,565657 0,000000 0,972497 0,155236 14 8 0,013929 0,766803 54,147982 0,000023 0,044949 0,034297 0,013974 1,056674 52,364865 15,637741 0,149132 0,019223 0,017910 0,709469 55,892256 0,000402 0,879168 0,132407 14 9 0,017405 0,944708 60,426009 0,000309 0,056681 0,050223 0,015421 1,013512 51,351351 34644,510897 0,179306 0,008818 0,023126 0,997821 53,198653 0,000131 1,260165 0,162374 14 10 0,013723 0,867118 61,098655 0,000773 0,044696 0,054971 0,014242 1,223068 50,000000 0,702234 0,158226 0,008784 0,019190 0,862754 55,218855 0,000128 1,027963 0,142172 15 1 0,017807 0,930467 60,201794 0,000357 0,056141 0,048829 0,014243 0,944190 50,675676 0,016905 0,156725 0,001858 0,018609 0,850216 53,535354 0,000012 0,945302 0,105572 15 2 0,016379 0,955498 52,578475 0,000958 0,050788 0,024890 0,014286 0,918966 51,351351 0,440118 0,152653 0,013514 0,018922 0,937526 52,861953 0,000372 0,843581 0,077492 15 3 0,016017 0,944916 61,098655 0,000247 0,051533 0,055910 0,014356 0,825317 51,689189 0,658505 0,161093 0,003108 0,019752 0,901957 56,902357 0,000078 1,025104 0,173956 15 4 0,014083 0,841431 54,596413 0,000553 0,042477 0,033677 0,014151 0,975362 52,364865 0,409061 0,151717 0,011014 0,019134 0,803374 54,208754 0,000000 0,871306 0,138805 15 5 0,014350 0,587082 62,780269 0,000117 0,101472 0,056361 0,014110 0,943474 49,662162 0,239215 0,152575 -0,007331 0,018201 1,006014 54,208754 0,000047 0,814747 0,130286 15 6 0,019109 1,233524 58,856502 0,001051 0,064794 0,044587 0,014116 1,198835 53,040541 1,039648 0,152390 0,019899 0,018480 0,826588 53,872054 0,000026 0,814692 0,095000 15 7 0,013485 0,855332 56,726457 0,000005 0,040316 0,039080 0,014396 1,061115 50,337838 1,963512 0,157436 -0,004189 0,018705 0,691101 54,545455 0,000001 1,055241 0,167323 15 8 0,014747 0,899944 53,699552 0,000227 0,044024 0,023428 0,014050 0,964532 51,351351 0,362087 0,150907 0,003682 0,018202 0,851488 55,218855 0,000000 0,865315 0,111162 15 9 0,013919 0,880753 56,726457 0,000014 0,042992 0,042516 0,014806 0,894809 50,000000 23,958820 0,165693 -0,015845 0,018005 0,826423 53,872054 0,000091 0,894050 0,184899 15 10 0,014068 0,876337 54,932735 0,000067 0,042746 0,035005 0,014133 0,918757 51,351351 0,139043 0,151707 0,011182 0,018456 0,766074 54,882155 0,000001 0,851700 0,135000 16 1 0,015261 0,871915 55,156951 0,000060 0,046594 0,031296 0,014108 0,867887 50,675676 0,098482 0,156789 0,003784 0,019263 0,697786 56,902357 0,000058 1,021711 0,204933 16 2 0,013065 0,856164 58,295964 0,000012 0,040235 0,042555 0,014336 0,957304 51,351351 0,686589 0,157558 0,003581 0,017904 0,823339 51,851852 0,000214 0,853028 0,122811 16 3 0,014271 0,875124 56,165919 0,000941 0,045663 0,037664 0,014300 1,041423 53,040541 5,538478 0,152866 0,013649 0,018473 0,861415 51,178451 0,000034 0,905196 0,092273 16 4 0,013082 0,619610 63,228700 0,000194 0,050699 0,056362 0,014010 0,821195 50,000000 0,253298 0,153791 -0,015946 0,017323 0,636020 59,595960 0,000398 0,810128 0,270152 16 5 0,018889 0,966546 59,529148 0,005496 0,055170 0,044060 0,014592 1,024756 49,662162 9,025955 0,166065 0,003209 0,018851 0,643034 56,565657 0,000159 0,946373 0,224731 16 6 0,013680 0,805932 57,511211 0,000911 0,040598 0,042430 0,013919 0,981896 53,378378 1,785604 0,147381 0,016318 0,018433 0,542118 55,218855 0,000004 0,952221 0,188401 16 7 0,022158 1,261314 56,390135 0,000191 0,065620 0,038522 0,015956 1,132491 49,662162 0,071369 0,197855 0,010270 0,019676 0,882086 55,555556 0,000320 1,090270 0,184933 16 8 0,013874 0,917532 57,847534 0,000541 0,044334 0,041513 0,014511 0,928318 51,013514 0,668119 0,161165 -0,007196 0,018019 0,805849 57,912458 0,000000 0,822799 0,213889 16 9 0,016281 1,011588 54,484305 0,000108 0,052924 0,032632 0,014164 1,127458 52,364865 0,221339 0,156297 0,008074 0,019036 0,809331 54,208754 0,000017 0,851307 0,139949 16 10 0,014043 0,889834 58,183857 0,000001 0,042438 0,040913 0,013895 1,085959 50,000000 0,322711 0,146836 0,011351 0,018737 0,754327 57,239057 0,000027 0,843417 0,214966 17 1 0,014677 0,750755 53,026906 0,001298 0,043953 0,026626 0,014012 1,012197 48,986486 0,243642 0,151770 -0,008750 0,018047 1,000153 52,525253 0,000002 0,838632 0,051094 17 2 0,013591 0,674432 57,062780 0,000217 0,042169 0,043284 0,013986 0,776061 52,027027 1,204655 0,151208 0,010608 0,018389 0,560535 55,892256 0,000229 0,948183 0,200892 17 3 0,019091 1,210376 59,417040 0,000826 0,056308 0,048982 0,014731 1,000017 51,013514 0,424505 0,164005 0,011216 0,020929 0,955622 54,208754 0,000376 1,083175 0,161667 17 4 0,015004 1,203916 55,381166 0,000099 0,052581 0,031774 0,017630 1,400100 50,337838 0,145625 0,227562 0,004966 0,020302 0,857517 52,525253 0,001052 1,003913 0,088232 17 5 0,015137 0,566768 63,004484 0,001215 0,115735 0,058266 0,014130 0,730804 55,067568 5,412679 0,153920 0,028378 0,019959 0,815575 53,535354 0,000122 0,960915 0,115842 17 6 0,013663 0,892525 57,735426 0,000238 0,045177 0,039437 0,015614 1,291170 51,351351 0,204329 0,183447 0,003345 0,021255 0,851984 50,505051 0,000355 1,237744 0,056145 17 7 0,012795 0,708951 60,986547 0,000069 0,043022 0,050573 0,014286 0,922046 53,040541 0,186653 0,155554 0,022331 0,018515 0,798490 57,912458 0,000065 1,150021 0,200051 17 8 0,015045 0,946986 59,417040 0,000030 0,046076 0,050075 0,014447 0,948125 50,337838 0,135312 0,163766 0,012264 0,018935 0,800743 54,208754 0,000069 1,005857 0,104360

73

17 9 0,017782 0,963797 57,735426 0,000001 0,051054 0,041502 0,014388 1,082194 51,013514 0,840937 0,157840 0,010000 0,018043 0,698263 52,861953 0,000004 0,840221 0,127593 17 10 0,017985 1,058867 54,372197 0,000219 0,050084 0,032557 0,014433 1,082361 50,337838 0,930788 0,163421 0,008277 0,019837 0,909830 50,168350 0,000498 0,966114 0,003788 18 1 0,021178 1,193461 54,147982 0,000216 0,060029 0,030604 0,014277 0,971601 52,027027 0,614716 0,155921 0,014257 0,018227 0,800283 52,525253 0,000024 0,839390 0,050219 18 2 0,014648 0,792497 54,932735 0,000002 0,044642 0,033451 0,014271 0,830792 53,040541 2,587747 0,154828 0,029764 0,017586 0,779949 55,892256 0,000010 0,880539 0,176077 18 3 0,014288 0,936115 56,614350 0,001129 0,045205 0,033206 0,014083 0,904189 54,391892 4,721460 0,151059 0,015777 0,018060 0,755816 56,228956 0,000070 0,838904 0,171330 18 4 0,015445 1,048171 58,295964 0,000517 0,048203 0,043521 0,014240 0,869028 53,040541 1,117367 0,154815 0,008784 0,019411 0,676573 53,535354 0,000180 1,158673 0,116111 18 5 0,013964 0,918458 56,614350 0,001253 0,043012 0,034467 0,014137 0,983606 53,716216 0,356440 0,151158 0,031115 0,018749 1,056970 53,535354 0,000004 0,859423 0,141465 18 6 0,014949 1,003328 59,192825 0,000345 0,051802 0,046766 0,014469 0,995607 51,013514 0,093913 0,153253 0,008581 0,019153 0,732298 54,882155 0,000899 0,941243 0,205774 18 7 0,014247 0,790617 55,493274 0,000277 0,043699 0,035698 0,014360 0,975156 50,337838 0,028328 0,157811 0,001993 0,017983 0,788600 54,545455 0,000007 0,799091 0,108434 18 8 0,019710 1,227936 53,139013 0,000450 0,061944 0,029555 0,014525 0,968167 51,689189 0,230537 0,161736 0,000034 0,019371 0,941325 59,259259 0,000725 1,175230 0,187795 18 9 0,016691 1,007362 52,914798 0,002075 0,049930 0,023825 0,015205 1,078713 50,337838 0,023912 0,174332 0,003649 0,018792 0,889710 54,208754 0,000038 0,841381 0,147896 18 10 0,014765 0,834772 56,726457 0,000001 0,045234 0,039552 0,014197 0,961526 51,351351 1,105009 0,151519 0,015068 0,018128 0,725623 52,525253 0,000460 0,897688 0,110118 19 1 0,018218 1,026103 53,026906 0,000003 0,054558 0,023928 0,014537 0,875726 51,689189 0,146232 0,156710 0,014561 0,019277 0,892167 52,525253 0,000026 0,928403 0,095202 19 2 0,013689 0,711426 63,004484 0,001569 0,041088 0,062904 0,014199 0,828475 50,000000 1,553626 0,154381 0,003480 0,022343 0,927350 55,892256 0,000044 2,256874 0,174327 19 3 0,019317 0,991397 54,260090 0,000014 0,058666 0,031455 0,015165 1,136175 50,675676 0,036898 0,172465 -0,001959 0,018898 0,994315 55,218855 0,000036 0,873464 0,138199 19 4 0,015067 0,734369 58,520179 0,000507 0,046432 0,046052 0,014507 0,902223 49,662162 0,240776 0,163779 -0,004392 0,018786 0,908648 58,585859 0,000008 0,930586 0,179916 19 5 0,030158 2,040835 57,062780 0,005805 0,091652 0,042259 0,015171 0,832273 49,662162 2,778346 0,176213 0,004324 0,019776 0,804377 55,555556 0,000431 1,023120 0,124562 19 6 0,017115 0,957458 54,932735 0,000000 0,050047 0,034666 0,013853 0,821822 51,013514 0,358154 0,150247 0,010203 0,018931 0,846106 54,545455 0,000444 0,940575 0,098165 19 7 0,024830 1,334533 55,941704 0,002468 0,078085 0,041188 0,013997 0,854405 51,689189 2,650499 0,152344 0,001588 0,019321 0,715365 55,555556 0,000363 0,906785 0,184226 19 8 0,013963 0,765612 57,847534 0,000169 0,044881 0,041557 0,013934 0,963691 50,337838 0,039540 0,150235 0,003277 0,018607 0,705148 53,535354 0,000005 0,894321 0,108670 19 9 0,013846 0,731073 60,874439 0,000706 0,044154 0,054800 0,013775 0,807649 51,689189 17,264286 0,151529 0,009899 0,025677 0,567913 54,882155 0,000002 3,504666 0,146448 19 10 0,014225 0,822212 61,659193 0,000284 0,040915 0,056270 0,014747 1,058554 46,959459 0,412051 0,168001 -0,010642 0,018485 0,815052 59,259259 0,000067 0,935544 0,234495 20 1 0,015711 0,889765 54,820628 0,000488 0,046041 0,032957 0,014716 1,009522 48,986486 0,085472 0,161316 -0,012297 0,020015 1,116896 54,545455 0,000102 1,065612 0,094495 20 2 0,014008 0,810068 54,484305 0,000275 0,044946 0,030437 0,014368 0,985441 51,351351 0,130398 0,160913 0,006284 0,018729 0,738464 54,882155 0,000110 0,845616 0,106414 20 3 0,021598 1,061929 56,165919 0,000838 0,067313 0,033173 0,014050 0,983048 51,351351 0,211899 0,151239 0,005507 0,019409 0,864213 52,188552 0,000565 0,886765 0,110859 20 4 0,019197 1,086081 58,632287 0,000498 0,054295 0,047437 0,014215 0,918954 53,040541 1,257636 0,159461 0,013378 0,017638 0,780709 56,902357 0,000123 0,792994 0,163013 20 5 0,013397 0,691607 56,838565 0,000028 0,043177 0,040062 0,014058 0,749950 52,364865 0,595355 0,148645 0,009189 0,018643 1,201988 53,872054 0,000036 1,069508 0,117357 20 6 0,014128 0,804288 58,295964 0,000190 0,043863 0,042196 0,014523 1,006933 50,000000 0,201798 0,159039 0,015068 0,017629 1,005150 57,239057 0,000055 0,746307 0,204495 20 7 0,013919 0,744008 59,080717 0,000084 0,041953 0,044918 0,014020 0,899886 52,027027 1,106854 0,150312 0,013041 0,018942 0,953487 56,565657 0,000063 0,918837 0,158232 20 8 0,013446 0,907342 56,502242 0,000003 0,041077 0,038040 0,013837 1,040408 52,027027 0,145180 0,146926 0,009459 0,018643 0,841336 56,228956 0,000053 1,043732 0,137795 20 9 0,013981 0,808615 58,744395 0,000194 0,043286 0,043494 0,014018 1,039427 52,027027 0,664959 0,150066 0,018311 0,019585 0,983729 59,259259 0,000020 1,119820 0,226010 20 10 0,015864 0,567605 62,556054 0,000056 0,139612 0,057633 0,013959 1,085285 48,986486 0,001276 0,148635 -0,009459 0,019390 0,719270 53,198653 0,000002 0,928533 0,129680 21 1 0,013507 0,751397 60,426009 0,000385 0,049587 0,048471 0,014858 0,961425 53,716216 2,918102 0,161213 0,018818 0,018113 0,781924 53,872054 0,000286 0,793945 0,157896 21 2 0,013046 0,726801 63,901345 0,001865 0,041033 0,062949 0,013858 0,992159 50,000000 11,257117 0,152459 -0,003682 0,015617 0,537530 64,309764 0,000006 0,829397 0,330051 21 3 0,013449 0,636774 57,735426 0,000335 0,040321 0,043410 0,014338 0,883940 52,027027 0,277339 0,161203 0,003446 0,017608 0,733250 56,228956 0,000014 0,742607 0,189242 21 4 0,014654 0,867913 59,417040 0,000549 0,042528 0,047412 0,013929 0,977532 52,364865 2,736250 0,146654 0,011115 0,017427 0,640132 56,565657 0,000139 0,990917 0,209545 21 5 0,014431 0,860927 54,596413 0,000615 0,042879 0,030532 0,014953 1,257344 48,310811 0,722065 0,166659 -0,012568 0,019588 0,986363 53,198653 0,000094 0,899658 0,093249 21 6 0,015023 0,724397 56,053812 0,000053 0,045896 0,035843 0,014124 0,872078 53,040541 1,176459 0,154338 0,015574 0,017821 0,809169 54,208754 0,000055 0,745588 0,141599 21 7 0,013651 0,901408 56,053812 0,000798 0,040203 0,033845 0,014339 0,956836 48,310811 0,470756 0,155406 0,004797 0,017835 0,727974 56,228956 0,000002 0,817922 0,152744 21 8 0,013212 0,746738 61,771300 0,000002 0,045070 0,055515 0,014525 0,856388 48,986486 0,486683 0,160519 -0,017230 0,017922 0,623295 55,555556 0,000008 0,800429 0,172912 21 9 0,013302 0,713266 57,735426 0,000020 0,042546 0,039621 0,014127 0,957140 51,689189 0,045058 0,157547 0,014595 0,018375 0,693064 55,892256 0,000229 0,776595 0,141094 21 10 0,016380 0,994993 56,950673 0,001016 0,046905 0,039397 0,014178 0,952113 50,675676 0,331642 0,150757 0,009493 0,018186 0,925987 55,555556 0,000011 0,876950 0,132172 22 1 0,013263 0,686508 56,838565 0,000048 0,043168 0,041213 0,013901 0,851826 52,702703 0,253986 0,151274 0,007196 0,018426 0,672281 54,545455 0,000153 0,923342 0,167222

74

22 2 0,026395 1,456390 60,426009 0,000228 0,080484 0,045872 0,015282 0,987353 49,662162 10,169341 0,174532 -0,001554 0,020553 0,592488 56,902357 0,000802 1,098598 0,203990 22 3 0,016401 1,223054 60,089686 0,000481 0,053757 0,051518 0,014459 0,880686 52,364865 0,225869 0,157346 0,014628 0,019922 0,736382 53,198653 0,000168 0,984381 0,111633 22 4 0,024241 1,702381 57,511211 0,001195 0,074509 0,041289 0,014484 1,023719 49,662162 0,206392 0,158434 -0,002466 0,019699 0,994129 56,902357 0,000779 0,948833 0,187593 22 5 0,013449 0,891265 56,502242 0,000373 0,042696 0,034844 0,014481 1,009103 52,702703 1,180646 0,158895 0,008243 0,018261 0,815506 54,208754 0,000037 0,792549 0,206987 22 6 0,015498 1,013257 56,165919 0,000028 0,053450 0,037161 0,016312 1,349588 51,689189 34,656328 0,198225 0,009865 0,019670 1,207858 52,525253 0,000620 0,984260 0,112811 22 7 0,015017 0,855593 54,147982 0,002432 0,045908 0,025180 0,013922 0,898098 50,000000 0,342818 0,151407 0,009831 0,018477 1,103915 52,525253 0,000127 0,926246 0,059007 22 8 0,016725 0,750038 53,363229 0,002910 0,050370 0,023436 0,014313 0,910396 48,986486 0,247194 0,154537 -0,009426 0,021556 1,210999 56,228956 0,000001 1,130194 0,174360 22 9 0,012833 0,805477 61,995516 0,000266 0,037402 0,060187 0,014078 0,860704 54,054054 0,509697 0,148089 0,028480 0,017312 0,696076 59,932660 0,000006 0,977267 0,302778 22 10 0,014147 0,798542 61,771300 0,000013 0,039637 0,053000 0,014271 0,893623 52,027027 0,170258 0,160114 -0,001115 0,017930 0,693029 54,545455 0,000072 0,896290 0,162239 23 1 0,017819 1,034556 57,286996 0,001346 0,055511 0,039899 0,019317 1,562952 53,040541 0,000768 0,270045 0,014595 0,021301 0,882982 53,872054 0,000482 1,113779 0,160993 23 2 0,013243 0,710822 57,959641 0,000030 0,045649 0,042055 0,014484 0,950434 52,027027 0,138884 0,158578 0,022061 0,019409 0,695808 56,902357 0,000112 1,021176 0,218131 23 3 0,018074 1,103570 53,811659 0,000396 0,069942 0,027069 0,018168 1,537589 48,310811 0,056377 0,246595 -0,015236 0,019442 0,690566 55,555556 0,000378 0,936817 0,146279 23 4 0,014500 0,986866 53,139013 0,000631 0,043089 0,028141 0,014832 1,229303 49,662162 0,063167 0,167280 0,000743 0,018292 0,852058 54,545455 0,000157 0,896824 0,096953 23 5 0,014854 0,761891 53,363229 0,002066 0,044496 0,028085 0,014145 0,884652 51,351351 0,490191 0,149793 0,012601 0,018332 0,752503 52,861953 0,000070 0,793283 0,059209 23 6 0,015173 0,827937 52,130045 0,000871 0,043197 0,023507 0,013959 0,926281 52,364865 0,562557 0,148185 0,009392 0,018738 0,653868 54,882155 0,000028 0,925908 0,147963 23 7 0,015035 0,839765 53,587444 0,000990 0,046430 0,028079 0,015224 1,130833 50,337838 0,234271 0,172256 -0,006791 0,018230 0,932662 55,218855 0,000027 0,870742 0,103754 23 8 0,013550 0,705504 63,901345 0,000757 0,049383 0,060889 0,014373 1,213960 52,702703 1,669911 0,154124 0,008953 0,019135 0,801575 51,851852 0,000051 1,012826 0,115303 23 9 0,020255 1,251491 57,174888 0,005304 0,061263 0,039567 0,013774 0,845086 50,000000 0,863834 0,146132 0,017230 0,016606 0,750772 60,606061 0,000002 0,802125 0,251330 23 10 0,015846 1,021595 57,511211 0,001500 0,045105 0,042581 0,014017 0,938141 52,364865 0,367904 0,155019 0,009223 0,019119 0,924329 54,545455 0,000180 0,976066 0,147694 24 1 0,013495 0,843840 57,286996 0,000626 0,040208 0,039212 0,014193 1,024684 52,364865 0,527242 0,154751 0,016655 0,018775 0,849996 54,882155 0,000009 0,922152 0,168838 24 2 0,014632 0,784670 55,044843 0,000655 0,048513 0,035426 0,014452 1,037714 51,689189 1,017048 0,159969 0,018851 0,018362 0,907629 53,535354 0,000317 0,809956 0,118872 24 3 0,014256 0,752674 55,829596 0,000015 0,043191 0,034871 0,014190 0,960451 49,324324 0,176583 0,156172 0,000507 0,017987 0,836670 57,239057 0,000182 0,895788 0,185842 24 4 0,015100 0,839125 55,269058 0,002389 0,048338 0,030283 0,014221 1,011360 50,675676 0,088626 0,153354 0,004899 0,018652 0,824656 54,882155 0,000015 0,905361 0,105168 24 5 0,012243 0,792081 61,098655 0,000116 0,038722 0,056277 0,013985 0,949434 51,351351 0,217243 0,149421 0,005574 0,017814 0,614276 54,882155 0,000001 0,981655 0,137189 24 6 0,013625 0,690845 62,556054 0,000514 0,054558 0,058642 0,013741 0,910134 49,662162 8,689857 0,146073 -0,011520 0,020061 0,729969 55,892256 0,000175 1,032096 0,168266 24 7 0,025341 1,626042 54,596413 0,000749 0,083095 0,029310 0,014787 1,143674 49,324324 0,067897 0,165983 -0,008176 0,017863 0,706170 55,555556 0,000428 0,929913 0,139141 24 8 0,016623 0,938191 55,829596 0,000110 0,046006 0,035969 0,014373 1,123483 51,689189 0,146932 0,155402 0,011385 0,017536 0,776894 55,892256 0,000003 0,784742 0,207559 24 9 0,013479 0,660352 57,511211 0,000572 0,041003 0,041919 0,014098 0,844345 51,351351 1,027852 0,150749 0,006655 0,017809 0,863460 56,228956 0,000429 0,827982 0,185168 24 10 0,014822 0,923190 55,941704 0,000441 0,048362 0,037541 0,014281 0,918043 49,324324 0,780529 0,151349 -0,006959 0,019199 0,744656 54,882155 0,000078 1,037071 0,190859 25 1 0,014038 0,861078 56,053812 0,000028 0,042397 0,035894 0,014601 0,916131 50,000000 0,180461 0,157969 0,006385 0,018070 0,669577 57,239057 0,000012 0,859791 0,220185 25 2 0,019297 1,021666 56,165919 0,000269 0,054505 0,038220 0,014016 0,980670 52,364865 0,077724 0,146327 0,021081 0,022924 1,494397 53,872054 0,000365 1,445131 0,089983 25 3 0,012956 0,710905 60,089686 0,001457 0,039165 0,053136 0,014190 0,915490 53,378378 3,559353 0,155034 0,017703 0,020137 0,747254 51,515152 0,000061 1,109235 0,123013 25 4 0,016084 0,974885 58,408072 0,000053 0,050046 0,047525 0,014083 0,979185 49,662162 0,329779 0,151321 -0,001453 0,018386 0,613364 55,555556 0,000064 0,983859 0,190253 25 5 0,021095 1,479376 55,381166 0,000035 0,074846 0,029129 0,014498 0,945789 50,000000 0,984328 0,153440 0,005845 0,021835 1,046576 53,535354 0,000002 1,147883 0,151229 25 6 0,019731 1,186951 58,968610 0,000220 0,063558 0,046916 0,015117 1,045144 52,027027 0,123074 0,175924 0,012601 0,018882 0,723760 52,525253 0,000041 0,911414 0,110320 25 7 0,014115 0,861001 54,820628 0,001567 0,042667 0,030491 0,014397 1,067986 52,027027 2,001367 0,155768 0,005101 0,019050 0,763445 54,545455 0,000096 0,942966 0,161027 25 8 0,013796 0,793644 56,053812 0,000271 0,042003 0,034961 0,014246 0,931147 49,662162 0,270552 0,152215 -0,005878 0,018454 1,010333 54,545455 0,000024 0,871801 0,118973 25 9 0,015604 1,010493 57,286996 0,000575 0,047372 0,044881 0,014348 0,923120 53,040541 1,627902 0,153654 0,010608 0,019029 0,733896 51,851852 0,000080 0,886140 0,105337 25 10 0,015594 0,867694 54,708520 0,000072 0,044174 0,036875 0,013762 1,029275 49,662162 0,407157 0,149300 0,001520 0,016636 0,777951 56,902357 0,000070 0,746580 0,178906 26 1 0,012776 0,724849 61,547085 0,000038 0,041578 0,054844 0,014687 1,074870 50,337838 0,002339 0,163850 0,010811 0,021451 0,928908 56,228956 0,000395 1,164486 0,086481 26 2 0,014354 0,754403 54,820628 0,000060 0,045226 0,033929 0,014058 0,740363 52,364865 2,729382 0,152732 0,006622 0,018834 0,764873 56,228956 0,000187 0,893894 0,125875 26 3 0,013390 0,763509 61,210762 0,000149 0,038996 0,051609 0,013954 0,831686 52,027027 0,361715 0,153200 0,014155 0,018180 0,786491 54,882155 0,000060 0,935557 0,145337 26 4 0,012684 0,660081 62,331839 0,000307 0,041119 0,059311 0,014602 0,835484 50,675676 1,547264 0,167531 0,008919 0,017395 0,641845 58,249158 0,000142 0,865256 0,264024

75

26 5 0,013115 0,761283 58,856502 0,000671 0,040149 0,047729 0,014546 1,034643 47,972973 1,010995 0,158628 -0,005946 0,021250 1,175179 54,882155 0,001904 1,668528 0,155168 26 6 0,014458 0,834637 60,201794 0,002644 0,044563 0,053458 0,013795 0,906723 51,689189 0,211147 0,144113 0,007365 0,018953 0,686301 58,585859 0,000001 1,372385 0,170152 26 7 0,031016 1,826515 53,811659 0,001613 0,097498 0,032296 0,014307 0,942336 52,364865 0,138613 0,164891 0,019932 0,020700 0,914391 54,208754 0,000063 1,073643 0,157155 26 8 0,014909 0,982694 54,260090 0,000947 0,046000 0,031096 0,013861 1,041244 50,675676 0,418889 0,147460 0,006824 0,018135 0,689656 52,861953 0,000019 0,860448 0,114327 26 9 0,015541 0,572685 62,780269 0,000024 0,137650 0,059040 0,013914 0,877754 52,702703 0,807245 0,154277 0,012635 0,018574 0,813415 57,575758 0,000129 0,839425 0,220758 26 10 0,013796 0,835429 57,623318 0,000899 0,041639 0,043833 0,014268 1,042632 50,675676 0,423729 0,155511 -0,012297 0,019280 0,778233 55,892256 0,000233 1,102023 0,204966

76

Referências Bibliográficas

[1] Haykin, Simon. Redes Neurais - Princípios e práticas. [trad.] Paulo Martins Engel. 2ª. Ontário : Bookman, 2001. 978-85-7307-718-6.

[2] Braga, Antônio P., Ludermir, Teresa Bernarda e Carvalho, A. C. Redes Neurais Artificiais: Teoria e Aplicação. Belo Horizontes : LTC - Livros Técnicos e Científicos Editora S.A., 2000.

[3] Charkha, Pritam R. Stock Prediction and Trend Prediction using Neural Network. First International Conference on Emerging Trends in

Engineering and Technology. [Anais]. s.l. : IEEE, 2008. pp. 592-594. DOI 10.1109/ICETET.2008.223.

[4] Portugal, Marcelo S. Neural Networks Versus Time Series Methods: A Forecasting Exercise. Revista Brasileira de Economia. 1995, Vol. 49, pp. 611-629.

[5] Castro, Cristiano Leite, Braga, Antônio Pádua e Andrade, Alessandro Vivas. Aplicação de um modelo Essemble de Redes Neurais Artificias para previsão de Séries Temporais não Estacionárias. Anais XXV Congresso da Sociedade Brasileira de Computação - SBC.

2005, pp. 722-731.

[6] Chu, Ching Wu e Zhang, Guoqiang Peter. A comparative study of linear and nonlinear models for agregate retail sales forecasting. International Journal of Production Economics. 2003, pp. 217-23.

[7] De Gooijer, Jan G e Kumar, Kuldeep. Some recent developments in non-linear times series modeling, testing and forecasting. International

Journal of Forecasting. 8, 1992, pp. 135-156.

[8] Brockwell, P. J. and Davis, R. A. Introduction to Time Series and

Forecasting. New York, USA : Springer Verlag, 1996.

[9] Ferreira, Tiago A. E. Uma Nova Metodologia Híbrida Inteligente para Previsão de Séries Temporais. Tese Doutorado. Recife - PE : CIN-UFPE, 2006. p. 233.

[10] BOVESPA BM&F . BM&F BOVESPA a Nova Bolsa. BM&F BOVESPA a

Nova Bolsa. [Online] [Citado em: 15 de 08 de 2008.]

77

www.bovespa.com.br.

[11] Smith, Adam. A Riqueza das Nações. 1776.

[12] Oliveira, André Alírio Barbosa. O Mercado de Capitais do Brasil no período de 1994 a 2003: sua Importância para o Desenvolvimento do País. VI Concurso de Monografia Comissão de Valores Mobiliários. São Paulo, SP, Brasil : Curso de Ciências Econômicas - Universidade Católica de Salvador , 2005.

[13] Schumpeter, Joseph Alois. Teoria do Desenvolvimento: O mercado

monetário. s.l. : Abril, 1984. pp. 86-87.

[14] Afonso, Antônio. Economia dos Intermediários Financeiros: Desenvolvimento do sistema. Dissertação. 2001. pp. 6-12.

[15] Senra, Fernanda. Infomoney. [Online] 08 de 08 de 2007. [Citado em: 06 de 06 de 2008.] www.infomoney.com.

[16] Clements, M. P. and Hendry, D. F. On the limitations of comparing mean square forecast errors. Journal of Forecasting. december, 1993, Vol. 12(8), pp. 617-637.

[17] Hann, T. H. e Steurer, E. Much ado about nothing? exchangerate forecasting Neural networks vs. linear models using monthly and weekly data. Neurocomputing. 10, 1996, pp. 323-339.

[18] ADVFN . ADFFN Brasil: O maior site de cotação de ações da Bovespa BM&F e mundo. [Online] ADVFN PLC. [Citado em: 15 de 08 de 2008.] br.advfn.com.

[19] Moré, Jorge J. The Levenberg-Marquadt algorithm: Implementation and Theory. Numerical Analysis. G. A. Watson. s.l. : Springer Berlin / Heidelberg, 1978, Vol. 630, pag 105-116.

[20] Prudêncio, Ricardo Bastos Cavalcate. Meta-Aprendizado para Seleção e Combinação de Modelos de Séries Temporais. Tese

Doutorado. [Tese Doutorado]. Recife, PE, Brasil : Centro de Informática - UFPE, dezembro de 2004.

[21] Sharkey, Amanda J.C. On Combining Artificial Neural Nets. Connection

Science. 8(3/4), 1996, pp. 299-314.

[22] Zhang, Feng and Roundy, Robin. Improving Forecast Accuracy by Combination. School of Operations Research and Industrial Engineering

78

Cornell University. January 2004, Technical Report 1395.

[23] Menezes, Lilian M., Bunn, Derek W. and Taylor, W. James. Review of guidelines for the use of combined forecasts. [ed.] Elsevier Science B.V. European Journal of Operational Research. october 14, 1990, pp. 190-204.

[24] Kittler, Josef, et al. On Combinig Classifiers. IEEE Transactions on

Parttner Analysis and Machine Intelligence. March 1998, Vols. 20, No.3, pp. 226-239.

[25]

[26]

Lipschutz, S. Álgebra Linear. São Paulo : Makron Books, 1991.

Amorim Neto, Manoel, Cavalcanti, George D. C. and I. R. Tsang.

Financial Time Series Predictions Using Series and Combined Neural

Networks. IJCNN 2009 International Neural Network Society IEEE

Computational Intelligence Society Atlanta, USA, June 2009.