Processo de Avalição da Atenção Básica/PMAQ:

A Experiência da UFRN ( UFRN- RENASF-FIOCRUZ-CE; NESPI/UFPI

Coordenação Geral DSC/UFRN Alice Uchoa , Paulo Rocha ,Themis Xavier

Coordenações Estaduais: Ana Tania Sampaio(DSC/UFRN), Anya Pimentel (FIOCRUZ-CE), José Ivo Pedrosa (NESP/UFPI)

Coordenação TI : Ricardo Valentim ( SEDIS/UFRN) Coordenação Estatística: Flávio Freire (DE/UFRN)Nilma Costa (DSC/UFRN)

APRESENTAÇÃOOBJETIVOS1.Socializar a experiência da UFRN na Avaliação Externa do PMAQ2.Levantar alguns pontos para discussão de uma agenda estratégica IES/DAB/MSCONTEXTODA PESQUISA Projeto de pesquisa, de natureza avaliativa, a ser realizado de forma multicêntrica, padronizada e simultânea, em todos os Estados brasileiros, sob patrocínio do Departamento de Atenção Básica do Ministério da Saúde, envolvendo 32 IESUFRN – através do DSC / Grupo de Estudos em Saúde Coletiva: estados do RN, CE e PI

CONTEXTO DE PARTICIPAÇÃO DA UFRN 2 Pós-Graduação com área de Saúde Coletiva e 1 Mestrado

Profissional em Saúde da FamÍlia - RENASF Coordenação do PROESF- CE,SE,BA 2004-2006 Centro Colaborador ( Avaliação )– SES/RN - 2006 AMQ-SES-UFRN- 2006 Parceria com IMIP – Tutoria a Distancia em Avaliação de Programas

e Consultoria (Análise - Pesquisa Qualitativa em Avaliação Parceria com a OPAS (observatório de RH para o SUS) Outros projetos de pesquisa avaliativa (CNPq): atenção ao

abortamento, tbc, Saúde da Familia Indígena; Atenção Básica na TBC ( Enf. USP de Ribeirão Preto

Publicações na área

QUALIFICAÇÃO DA EQUIPECoordenação Geral : 3 doutores com experiência em pesquisa avaliativa Coordenação TI: doutorCoordenações Estaduais (doutores):Equipe por estado : 1 Coordenador 1: supervisor (mestre) :5 avaliadores de qualidade (mínimo nível médio). RN e PI = 5 supervisores e 20 avaliadores; CE 10supervisores e 40 avaliadoresNúcleo central de análise (doutores e mestres): epidemiologista 2, estatísticos 2 , 6 pesquisadores da área de avaliação de programas ; Alunos de pós-graduação 8 e graduação 8

Metodologia do TCFase preparatória Oficinas com MS e IES : elaboração e padronização dos instrumentos, capacitação e protocolo de validação (fev a jun, 2012)Oficinas internas: elaboração do plano de trabalho de campo (logística)Capacitação – 60 horas: Módulo I (8hs)– PMAQ na Atenção Básica; Módulo II (8 horas presencias e 4 a distancia) Web- Básico e Moodle; Módulo III ( 40 horas) – Instrumentos (16horas) e campo assistido (24hs)

MetodologiaEstratégia de campo: Logística semanal: agendamento, alojamento, transporte, alimentação, mapeamento das áreas, distribuição das equipes: realiza primeiro o censo e depois EAB ou dividia a equipe a depender dos quantitativosSupervisão no campo– 3 dias Supervisão a distancia: Diário de bordo dos avaliadores ( http://pmaq.sedis.ufrn.br/pmaq/index.php) :identificação, dificuldades de aplicação de cada instrumento; permissão das SMS, hospedagem, transporte; fechamento de UBS, negativa de entrevistados; uso do moodle e do diário.Moodle academico (www.sedis.ufrn): fóruns, notas técnicas e documentos de capacitação e apoio

Metodologia TC Divulgação e comunicação: PMAQ – News Instrumentos: Módulo I – Observação na Unidade Básica de

Saúde (100%) ; Módulo II - Entrevista com o profissional da equipe de atenção básica- PMAQ e verificação de documentos na Unidade Básica de Saúde, Módulo III - Entrevista com o usuário na Unidade Básica de Saúde( 4: EAB)

Protocolo de Validação: pactuação nacional, registro por IES ( senha), por estado, município e por supervisor, critérios ,

validação automática, confirmação d a validação e envio Critérios de validação: tempo de preenchimento, início e

término ( I – 30 a 120; II-90 a 240; III- 20 a 90 ) percentual Não/respondeu e não sabe, correspondências da coordenadas geográficas(GPS); caracteres repetidos.

FLUXO DA VALIDAÇÃO

QUANTITATIVOS OUT 2012 Total de questionários previsto/recebidos: 12 954/ 12863 Total de questionários previstos CE -6689, RN3190,

PI3075 Diferença entre previsto (12954) e recebidos (12863)=91 Questionários processados pela UFRN: 12424 Diferença entre recebidos (12863) e processados (12424)

= 439 Questionários considerados válidos pela UFRN: 12340 Questionários considerados inválidos pela UFRN: 84

Quantitativo do Trabalho de Campo PMAQ/UFRN(dados preliminares)

35/37

QUANTITATIVO DO TRABALHO DE CAMPO(dados preliminares)

RESULTADOS DO ACOMPANHAMENTO DO CAMPO

36/37

Diário de Bordo

Perspectiva de Análise Pré-análise: passagem da linguagem CSV para SPSS “Limpeza do banco e codebook? Avaliação da qualidade dos indicadores utilizados (validade, sensibilidade,

confiabilidade e especificidade?Questão da evidencias: que indicadores serão considerados de efetividade? Refinamento das questões de pesquisa Análise Variáveis para caracterização da amostra(UBS , EAB, Usuários) Avaliação do nível de acesso e qualidade??? Avaliação do nível de acesso e qualidade estratificado por variáveis chaves

(estado, etc.). Relação entre características da população de estudo e distintos níveis de acesso

e qualidade. Refinamento das questões de pesquisa e análise multivariada

Oficinas, regionais IES/MS???

CONSIDERAÇÕES FINAISAVANÇOS Fortalecimento da parceria MS/IES-SES-SMSConsolidação do consórcio UFRN/ RENASF- Fiocruz/CE; NESPI/UFPI Visibilidade na pós- graduação na área Saúde Coletiva UFRNEixo Estruturante o Grupo de Estudos em Saúde ColetivaArticulação de Vários Grupos de Pesquisa/UFRN ( GED, TI)Aplicações de Tecnologia da Informação: dados on-line, possibilidades de acompanhamento on-line, validador

CONSIDERAÇÕES FINAISDESAFIOS para um agenda estratégica PMAQ/MS/IESHomogeneidade do banco e dos padrões de análise?Aplicabilidade dos resultados Institucionalização da avaliação Socialização dos resultados: “política de publicação”: acesso, critérios éticos e tecnocientíficosAplicabilidade da metodologia PMAQ-AB em avaliações posterioresConectividade e dados em tempo realIES e acesso aos dados módulo IV, aproximações metodológicas entre certificação e análise dos dados da avaliação externa? Banco de dados único?Aprimoramento dos Mecanismos de financiamento