Apresentao do PowerPoint

Deteco Preventiva de Fracionamento de Compras

Brasil 100% Digital: 1 Seminrio sobre Anlise de Dados na Administrao Pblica | 11/09/2015 @ TCUDr. Rommel Novaes Carvalho Coordenador-Geral do ODP/DIE/CGU | https://about.me/rommelnc

Using Bayesian Networks to Identify and Prevent Split Purchases in BrazilRommel N. Carvalho, Leonardo J. Sales, Henrique A. da Rocha, and Gilson L. Mendes

Coordenador-Geral do ODP / Cientista de Dados / Professorhttps://about.me/rommelnc

Departamento de Pesquisas e Informaes Estratgicas (DIE) / Departamento de Cincia da Computao (CIC)Controladoria-Geral da Unio (CGU) / Universidade de Braslia (UnB)

BMAW workshop @ UAI 2014Quebec City, Quebec, Canada - 07/27/2014

Artigo: http://ceur-ws.org/Vol-1218/bmaw2014_paper_7.pdf Slides: http://pt.slideshare.net/rommelnc/bmaw-2014-using-bayesian-networks-to-identify-and-prevent-split-purchases-in-brazil Apresentao: https://www.youtube.com/watch?v=UVOsztdSQ3A Baseado no Artigo

#

2

IntroduoMetodologiaEntendimento e Preparao dos DadosModelagem e AvaliaoImplantaoConclusoAgenda3

3

Introduo

Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso4

4

Trilha de FracionamentoIntroduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

R$ 9.890,005

5

Ser que vai fracionar?Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

?6

6

Metodologia

Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso7

CRISP-DM

CRoss Industry Standard Process for Data MiningIntroduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso8

Entendimento e Preparao dos DadosEntendimento para levantar hipteses sobre o melhor uso dos dados e preparao para transformar os dados brutos em um conjunto de dados utilizados para criao do modelo

Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso9

Dados UtilizadosIntroduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

SIASG

CPF

CNPJ

CNAE2005 a 2010Compras de materiais e servios de TI

42 atributos~ 70 mil registros

,

NA-9-80?

IDs?26 atributos~ 50 mil registros

centavos e bilhesanlise do especialista

10

Modelagem e AvaliaoAprendizagem de modelos a partir dos conjunto de dados finais, ajuste de parmetros para melhorar performance, escolha do melhor modelo baseado na validao e teste com conjunto desconhecido de dadosIntroduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

11

Ser que vai fracionar?

?12

Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

12

De Volta Preparaao

13Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

13

Nave Bayes vs Bayes Net (K2) com e sem Resampling

14Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

Mudando algoritmos e nmero de pais

15Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

Tem como melhorar?

16Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

ImplantaoDescoberta de novas regras, validao das regras existentes, documentao e elaborao de relatrio com resultados finais, e implantao do modelo final em produo

17Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

Possvel Fracionamento

O sistema identificou que h outras compras semelhantes a essa, que podem caracterizar um fracionamento. Usurio XXXX, matrcula YYYY, tem certeza que deseja continuar?Confirmar operao?

18

Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

?

18

Concluso

19Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso

Concluses possvel usar Minerao de Dados para prevenoResultados satisfatriosTodos fracionamentos foram classificados corretamenteAUROC bastante alta (.999)Acurcia bastante alta (99.197%) preciso fortalecer integrao entre diferentes rgosEntender e avaliar resultados com dados mais atuaisAvaliar tabelas de probabilidades da redeCuidado com overfittingAplicar tcnicas em novos problemas governamentais20Introduo Metodologia Entendimento e Preparao dos Dados Modelagem e Avaliao Implantao Concluso