identificação automática de tipos de pedidos mais frequentes da lai

Download Identificação automática de tipos de pedidos mais frequentes da LAI

Post on 08-Jan-2017

271 views

Category:

Government & Nonprofit

2 download

Embed Size (px)

TRANSCRIPT

  • Identificao Automtica de

    Tipos de Pedidos mais Frequentes da LAI

    Brasil 100% Digital: 1 Seminrio sobre Anlise de Dados na Administrao Pblica | 10/09/2015 @ TCU

    Dr. Rommel Novaes Carvalho Coordenador-Geral do ODP/DIE/CGU | https://about.me/rommelnc

    https://about.me/rommelnc

  • Identificao Automtica de Tipos de

    Pedidos mais Frequentes da LAI

    Identificao dos principais assuntos

    abordados nos mais de 300 mil

    pedidos de informao no e-SIC

    2

  • Descobrir tpicos em uma grande

    quantidade de documentos

    Descrever uma coleo de

    documentos via tpicos

    LDA = Latent Dirichlet Allocation

    Descrever pequeno resumo

    Achar documento por tema

    Achar documentos correlatos

    Problema da LAI

    3

    Como voc organizaria + de 300 mil pedidos?

    Operaes teis Modelagem de Tpicos

  • Descrever pequeno resumo:

    distribuio de tpicos

    Achar documento por tema:

    tpicos de peso alto

    Achar documentos correlatos:

    comparao entre vetores

    O que LDA?

    4

    Soluo LDA: vetor de

    pesos por tpico

    Usando LDA

    http://cseweb.ucsd.edu/~dhu/docs/exam09.pdf

  • Como funciona?

    5http://cseweb.ucsd.edu/~dhu/docs/exam09.pdf

  • Tpicos - BACEN

    69.220 pedidos (~3,06%)

  • Tpicos - BACEN

    79.220 pedidos (~3,06%)

  • 8

    Tpicos - BACEN

    9.220 pedidos (~3,06%)

  • 9

    Tpicos - BACEN

    9.220 pedidos (~3,06%)

  • 10

    Tpicos - BACEN

    9.220 pedidos (~3,06%)

  • 11

    Tpicos - BACEN

    9.220 pedidos (~3,06%)

  • 12

    Tpicos - Negado

    44.322 pedidos (~14,71%)

  • 13

    Tpicos - Negado

    44.322 pedidos (~14,71%)

  • 14

    Tpicos - Negado

    44.322 pedidos (~14,71%)

  • 15

    Tpicos - Negado

    44.322 pedidos (~14,71%)

  • 16

    Tpicos - Negado

    44.322 pedidos (~14,71%)

  • 17

    Tpicos - Negado

    44.322 pedidos (~14,71%)

  • 18

    Tpicos - Negado

    Concurso Pblico

    "gostaria de ser informada sobre a minha

    classificacao final no concurso ...relativa ao edital ... ou seja quero a classificacao obtida apos

    a eliminacao de 1715 candidatos nas provas de aptidao fisica

    psicologica exames medicos e investigacao social

    atenciosamente e desde ja agradeco ..."

    "gostaria de obter as seguintes informacoes 01 quantidade de

    servidores concursados do poder executivo federal e o

    gasto mensal com os salarios destes servidores 02

    quantidade de servidores nomeados em

    cargo de confiaca do poder executivo federal e o gasto

    mensal com os salarios destes servidores 03

    quantidade de servidores aposentados

    vinculados ao poder executivo federal e o gasto mensal com

    a aposentadoria destes servidores"

    "venho requerer minha classificacao apos

    provas objetivas e subjetiva teste de

    aptidao fisica e exames medico

    considerando as eliminacoes no concurso no concurso publico para provimento de vagas e formacao de

    cadastro de reserva no cargo de ... da terceira classe prova

    aplicada pela banca ... a banca examinadora se omite da

    prestacao da informacao ou a presta equivocadamente ... "

    "solicito informar a quantidade de empregados

    do cargo de analista de sistemas que foram promovidos

    de estagio do cargo conforme a seguir desde a

    implantacao do ... analista de sistemas 1

    do estagio jr para o pleno 2 do estagio jr para o pleno 2 do estagio pl para o..."

  • Anlise de Recurso

    19

    0%

    5%

    10%

    15%

    20%

    25%

    30%

    35%

    40%

    45%

    60%20%

    6%

    14%

    Atendido Negado

    Recurso - Atendido Recurso - Negado

    declaracao

    2014

    ano

    imposto renda

    numero recibo

    exercicio

    irpf

    restituicao

    ...

    "solicito resgate do numero de recibo

    da declaracao de irpf referente ao

    ano de 2014 por ter perdido os

    dados no computador ficando assim

    impossibilitada de realizar a

    declaracao de 2015"

  • 20

    Desafios

    Quantos Tpicos?Tempo de Execuo?

    0

    100

    200

    300

    400

    500

    600

    700

    10.000 20.000 130.000 300.000

    Tem

    po

    de

    pro

    cessam

    en

    to(m

    in)

    Nmero de pedidos

    0

    0,1

    0,2

    0,3

    0,4

    0,5

    0,6

    0,7

    0,8

    0,9

    1 10 20 30 40 50 60 70 80 90 100

    Pon

    tuao

    do

    Agru

    pa

    men

    to

    Nmero de tpicos

    Big Data?!

    10 horas x 100 rodadas = 1.000 horas ou ~ 41 dias se 100 ncleos (paralelo) 10 horas