text analytics para o mercado financeiro - devcamp 2015
TRANSCRIPT
Leandro Guerra
E-mail: [email protected]
@leandro_warartedosdados.com.br
TEXT ANALYTICS
MERCADO FINANCEIRO
/artedosdados
2
Gerente de Projetos de Analytics
Compartilhar Ideias eConhecimento!
www.artedosdados.com.br
3
Usamos Big Data?Fontes de dados
Texto
Imagem
Voz
4
Usamos Big Data?
Boeing 737 e Airbus 380
5
Usamos Big Data?O Cientista de Dados
6
Usamos Big Data?O Cientista de Dados
7
InvestimentosConceitos
Como são feitas as decisões de
investimentos?
Por “feeling”?
Por fatos e dados?
8
InvestimentosWe want information!
Number Six: Where am I?Number Two: In the Village.
Number Six: What do you want?Number Two: Information.
9
InvestimentosDados e Informação
InformaçãoSaída do processamento
dos dados, com um significado para o
usuário
DadosEntidades
armazenadas
ConhecimentoInformação aplicada para a tomada de
decisão
10
Seus investimentos!
Uma empresa...
11
É possível estimar a qual é o lucro de uma companhia listada em bolsa na próxima
publicação de resultados, para auxiliar na tomada de decisão de investimentos?
12
Nosso objetivo...
Propor uma equação para estimar a variação de lucro de
empresas, evidenciando os elementos mais relevantes relacionados a este evento
13
Relacionar os elementos publicados nos balanços financeiros com indicadores macroeconômicos e a publicação de notícias em mídias eletrônicasAnalisar o comportamento dos preços das ações com a variação na probabilidade de lucro
Extrair informações relevantes de dados não estruturados através de técnicas de text mining
Sendo mais específico...
14
E na prática?Identificação de empresas lucrativas – maior retorno para o acionista
Facilitar a tomada de decisão de investimentos para o pequeno investidor e as pequenas e médias empresas
15
16
Como fazer?Levantamento dos balanços trimestrais do últimos 2 anos das empresas listadas no Ibovespa Desenvolvimento de um
crawler para captação das notícias na web relacionadas à estas companhiasColeta de informações macroeconômicas: inflação, PIB, câmbio
Consolidação da base de dados adquiridos e desenvolvimento do modelo
17
Como fazer?Levantamento dos balanços trimestrais do últimos 2 anos das empresas listadas no Ibovespa
18
Como fazer?Levantamento dos balanços trimestrais do últimos 2 anos das empresas listadas no IbovespaDesenvolvimento de um
crawler para captação das notícias na web relacionadas à estas companhias
Coleta de informações macroeconômicas: inflação, PIB, câmbio
Consolidação da base de dados adquiridos e desenvolvimento do modelo
19
20
Termos Diretos
Termos Indiretos
21
Text Mining
22
Como fazer?Levantamento dos balanços trimestrais do últimos 2 anos das empresas listadas no IbovespaDesenvolvimento de um crawler para captação das notícias na web relacionadas à estas companhias
Coleta de informações macroeconômicas: inflação, PIB, câmbio
Consolidação da base de dados adquiridos e desenvolvimento do modelo
23
Como fazer?Levantamento dos balanços trimestrais do últimos 2 anos das empresas listadas no IbovespaDesenvolvimento de um crawler para captação das notícias na web relacionadas à estas companhiasColeta de informações macroeconômicas: inflação, PIB, câmbio
Consolidação da base de dados adquiridos e desenvolvimento do modelo
24
Fluxo de Modelagem
25
Book de Variáveis
26
Resultados
27
MLL
LA
ILS
PIBRT1 9.655 Trigramas
DólarDilmaPIB
Variáveis
R2 – 0,88 R2 – 0,75ComTrigrama
SemTrigrama
28
MLO
IPCA_TEND
RT21 6 Trigramas
VarejoBolsas Internacionais
Variáveis
R2 – 0,68 R2 – 0,43ComTrigrama
SemTrigrama
29
MLB
PIB_TEND
RT7 1 Trigrama
Nível de alta das bolsas
Variáveis
R2 – 0,89 R2 – 0,24ComTrigrama
SemTrigrama
30
RT4
Variáveis
R2 – 0,41 R2 – 0,11ComTrigrama
SemTrigrama
PIB_TEND
1 Trigrama
Nível de alta das bolsas
31
MLB
LA
RT2 4 Trigramas
BolsasInternacionais
Dólar
Variáveis
R2 – 0,81 R2 – 0,56ComTrigrama
SemTrigrama
RT4 3 Trigramas
EUAEmprego
32
Variáveis
PIB_TEND
IPCA
RT1 4.831 Trigramas
IPCAJuros
RT2 1 Trigrama
Abertura Bovespa
33
Variáveis
RT9 73 Trigramas
BolsasInternacionais
AltaBovespa
R2 – 0,97 R2 – 0,25ComTrigrama
SemTrigrama
RT15 3 Trigramas
EUADólar
34
Consolidação dos Resultados
35
http://leanpub.com/textminingparaomercadofinanceiro
