TRIBUNAL DE CONTAS DA UNIO Secretaria-Geral de Controle Externo Secretaria de Fiscalizao e Avaliao de Programas de Governo

TCNICAS DE AUDITORIA MARCO LGICO

SEPROG/SEGECEX 2001

TRIBUNAL DE CONTAS DA UNIO

Presidente: Ministro Humberto Guimares Souto Vice-Presidente: Ministro Antonio Valmir Campelo Bezerra Ministros: Adhemar Paladini Ghisi Marcos Vinicios Rodrigues Vilaa Iram de Almeida Saraiva Adylson Motta Walton Alencar Rodrigues Guilherme Palmeira Ubiratan Diniz de Aguiar Auditores: Jos Antonio Barreto de Macedo Lincoln Magalhes da Rocha Benjamin Zymler

Procurador-Geral: Lucas Rocha Furtado Subprocuradores-Gerais: Jair Batista da Cunha Paulo Soares Bugarin Ubaldo Alves Caldas Procuradores: Maria Alzira Ferreira Marinus Eduardo Vries Marsico Cristina Machado da Costa e Silva

Comisso Permanente de Regimento: Ministro Marcos Vinicios Vilaa (Presidente) Ministro Adylson Motta (Membro) Ministro Guilherme Palmeira (Membro) Auditor Benjamin Zymler (Suplente) Comisso Permanente de Jurisprudncia: Ministro Iram de Almeida Saraiva (Presidente) Ministro Antnio Valmir Campelo Bezerra (Membro) Ministro Walton Alencar Rodrigues (Membro)

TRIBUNAL DE CONTAS DA UNIO Secretaria-Geral de Controle Externo Secretaria de Fiscalizao e Avaliao de Programas de Governo

TCNICAS DE AUDITORIA MARCO LGICO

Braslia, maio de 2001.

Tribunal de Contas da Unio Internet: http://www.tcu.gov.br SAFS Lt. 01 CEP: 70.042-900 - Braslia (DF)

Secretrio-Geral de Controle Externo: Luciano Carlos Batista

Secretria de Fiscalizao e Avaliao de Programas de Governo: Marlia Zinn Salvucci

Gerente de Projeto TCU/RU: Glria Maria Merola da Costa Bastos

Analistas de Finanas e Controle Externo - rea de Controle Externo: Carmen Pereira Rgo Meireles

657.63 B823t

Brasil. Tribunal de Contas da Unio. Tcnicas de Auditoria : marco lgico / Tribunal de Contas da Unio. - Braslia : TCU, Secretaria de Fiscalizao e Avaliao de Programas de Governo, 2001. 26 p. 1. Auditoria I. Ttulo.
Ficha Catalogrfica elaborada pela Diviso de Documentao do TCU.

PORTARIA N 39, DE 22 DE MAIO DE 2001.

Aprova a Tcnica de Auditoria "Marco Lgico".

O SECRETRIO-GERAL DE CONTROLE EXTERNO DO TRIBUNAL DE CONTAS DA UNIO, no uso das competncias que lhe conferem o artigo 10, inciso II, da Resoluo TCU n 140, de 13 de dezembro de 2000, e o artigo 6, inciso XII da Portaria TCU n 81 de 17/5/1994 , RESOLVE:

Art. 1. Fica aprovada a Tcnica de Auditoria "Marco Lgico", com vistas a subsidiar a atuao dos servidores deste Tribunal designados a realizar trabalhos de auditoria de natureza operacional. Art. 2. A Secretaria de Fiscalizao e Avaliao de Programas de Governo SEPROG manter atualizada a Tcnica de que trata o artigo anterior, cabendo-lhe, ainda, o esclarecimento de dvidas e o recebimento de sugestes para o seu aperfeioamento. Art. 3. Esta Portaria entra em vigor na data de sua publicao.

LUCIANO CARLOS BATISTA Secratrio-Geral de Controle Externo

APRESENTAO
Este documento produto das atividades desenvolvidas no mbito do Projeto de Cooperao Tcnica TCUReino Unido. Na sua elaborao, a Secretaria de Fiscalizao e Avaliao de Programas de Governo - Seprog contou com a colaborao dos analistas participantes do Projeto e com o apoio tcnico da KPMG, empresa contratada pelo Governo britnico para prestar consultoria ao TCU na rea de auditoria de natureza operacional. A tcnica aqui apresentada, Marco Lgico, foi testada com sucesso durante a realizao das auditorias-piloto realizadas em 1998 e 1999 e complementa informaes contidas no Manual de Auditoria de Natureza Operacional do TCU.

Luciano Carlos Batista Secretrio-Geral de Controle Externo

TCNICAS DE AUDITORIA: MARCO LGICO

iv

SUMRIO

1. INTRODUO .................................................................................................................................. 7 2. APLICAO...................................................................................................................................... 7 3. ESTRUTURA ..................................................................................................................................... 8 4. ELABORAO ............................................................................................................................... 12 5. COMPONENTES DA MATRIZ DE MARCO LGICO .............................................................. 14 5.1. INDICADORES ......................................................................................................................... 14 5.2. MEIOS DE VERIFICAO....................................................................................................... 15 5.3. PRESSUPOSTOS ....................................................................................................................... 15 6. LISTA DE VERIFICAO............................................................................................................. 16 7. CONCLUSO .................................................................................................................................. 17 ANEXO................................................................................................................................................. 19 BIBLIOGRAFIA.................................................................................................................................. 21 FOLHA DE SUGESTES................................................................................................................... 23

TCNICAS DE AUDITORIA: MARCO LGICO

vi

1. INTRODUO
O Marco Lgico um modelo analtico para orientar a formulao, a execuo, o acompanhamento e a avaliao de programas ou de projetos governamentais. Criado pelo Banco Interamericano de Desenvolvimento BID, um instrumento de planejamento obrigatoriamente adotado por todas as organizaes pblicas que postulam financiamento junto quele Banco. O Modelo de Marco Lgico, que, segundo o BID1, oferece inmeras vantagens sobre outros enfoques menos estruturados (BID 1997, p. 66-77), tambm vem sendo utilizado pela Agncia Brasileira de Cooperao, rgo do ministrio das Relaes Exteriores, na anlise de projetos submetidos a sua apreciao.

2. APLICAO
O Modelo de Marco Lgico propicia a anlise detalhada do programa ou do projeto objeto da auditoria. A equipe deve avaliar, contudo, a convenincia do emprego desta tcnica, pois, por ser complexa, requer considervel disponibilidade de tempo, alm da existncia de sofisticado sistema de informaes gerenciais. Considerando que muitos programas governamentais so financiados por agncias internacionais que adotam esse modelo, provvel que a equipe possa obter, junto ao gestor, uma verso do Marco Lgico previamente elaborada, o que facilitaria os trabalhos de anlise preliminar do objeto da auditoria. Com tais consideraes em mente, a equipe pode: montar o marco lgico com base em informaes coletadas e em workshops com os auditados; usar informao do marco lgico j existente; analisar o marco lgico j existente e apontar melhorias possveis na prpria concepo do programa ou do projeto.

O modelo permite responder a questes como: os objetivos fixados guardam ntida relao com a finalidade ltima do programa ou projeto auditado, bem como definem precisamente os bens e servios que sero ofertados, e a clientela que ser beneficiada? os objetivos de cada nvel hierrquico mantm relaes de causalidade plausveis entre si? o impacto (ou benefcios) almejado claro e mensurvel?

Evaluacin: Una herramienta de gestin para mejorar el desempeno de los proyectos, elaborado pela Oficina de Evaluacin do Banco Interamericano de Desarrollo em maro de 1997.

TCNICAS DE AUDITORIA: MARCO LGICO

3. ESTRUTURA
Para obter respostas objetivas s questes relacionadas acima, o Modelo de Marco Lgico trata os programas ou projetos como conjuntos logicamente estruturados de processos organizacionais que devem atingir tanto a finalidade quanto os objetivos destes programas ou projetos. Nessa estrutura lgica devem constar os seguintes itens: atividades: tarefas que devem ser executadas para a gerao de bens e servios; produtos: bens e servios ofertados (metas fixadas); objetivos: resultados diretos associados gerao de bens e servios; finalidades: benefcios almejados (impacto da ao governamental).

O Marco Lgico deve demonstrar a compatibilidade lgica entre, sucessivamente, a finalidade (impacto da ao governamental), o objetivo, os produtos e as atividades, conforme ilustrado pela figura que se segue. Dito de outra forma, a realizao das atividades deve resultar em produtos (bens e/ou servios) que, entregues clientela, possibilitam alcanar o objetivo proposto. As conseqncias da realizao do objetivo, por sua vez, so o impacto esperado, i.e., a finalidade do programa ou projeto.

FIGURA 1 ESTRUTURA LGICA

FINALIDADE

OBJETIVO

PRODUTO

PRODUTO

ATIVIDADE

ATIVIDADE

ATIVIDADE

ATIVIDADE

Dispondo essa estrutura em ordem decrescente, obtm-se algo semelhante ao apresentado no quadro a seguir.

TCNICAS DE AUDITORIA: MARCO LGICO

QUADRO 1 EXEMPLO DO MODELO DE MARCO LGICO PARA UM PROJETO HIPOTTICO DE PERFURAO DE POOS COM GUA POTVEL EM UMA ZONA RURAL

Finalidade: Reduo da incidncia de enfermidades causadas pelo consumo de gua no-potvel. Objetivo: Adoo de prticas higinicas pela populao beneficiada. Produtos: extenso do acesso gua potvel a 60% da populao local. melhor capacitao dos servidores da rea de sade. Atividades: 1 componente: selecionar locais para a perfurao de poos; mobilizar os trabalhadores do local; perfurar os poos selecionados. 2 componente: preparar um programa de capacitao na rea de sade; recrutar servidores da rea de sade; ministrar o programa de capacitao para os servidores recrutados. Fonte: BID2, 199-, p. 16.

Alm de ordenar os processos organizacionais, os Modelos de Marco Lgico devem: definir indicadores prticos, objetivos, mensurveis e independentes para cada nvel, que devem ser expressos em termos quantitativos, qualitativos e temporais; indicar as fontes que contm dados sobre os indicadores (meios de verificao); identificar os fatores exgenos (pressupostos) que podem afetar o objeto da auditoria em cada nvel, avaliando os riscos existentes e formulando aes alternativas.

Sua estrutura corresponde a uma matriz de quatro por quatro, onde as linhas apresentam informaes acerca dos objetivos, indicadores, meios de verificao e pressupostos em quatro momentos diferentes da vida de um projeto ou programa governamental, conforme mostra o quadro abaixo.

Evaluacin: Una herramienta de gestin para mejorar el desempeno de los proyectos, elaborado pela Oficina de Evaluacin do Banco Interamericano de Desarrollo em maro de 1997. 9

TCNICAS DE AUDITORIA: MARCO LGICO

QUADRO 2 ESTRUTURA DO MARCO LGICO

DESCRIO FINALIDADE: Definio de como o projeto/programa contribuir para a soluo do problema identificado. Pode ser considerado como o impacto da ao governamental. OBJETIVO: Resultado direto a ser obtido a partir da gerao dos bens e servios produzidos pelo projeto/programa. MEIOS DE VERIFICAO Medem o impacto geral do So as fontes de informao que se pode utilizar para projeto/programa e devem ser especificados em termos verificar que os objetivos foram alcanados. Podem de quantidade, qualidade e tempo (grupo social e local, incluir material publicado, observao direta, pesquisas quando apropriado) de opinio, etc. INDICADORES Descrevem as conseqncias da realizao do objetivo, podendo tambm indicar que existe um problema e sugerir a necessidade de mudanas nos componentes projeto/ programa. Devem incluir metas que reflitam a situao ao finalizar o projeto/programa. Cada indicador deve ser expresso em termos de quantidade, qualidade e tempo dos resultados a serem alcanados. Descries concisas e claras de cada um dos produtos que devem ser concludos durante a execuo. Devem ser expressos em termos de trabalhos terminado (sistemas instalados, pessoal capacitado, bem ofertado, etc.) e especificados pela sua quantidade, qualidade e oportunidade. Essa clula dever conter o oramento para cada produto a ser produzido pelo projeto/programa. So as fontes que o gestor e o avaliador podem consultar para ver se os objetivos esto sendo alcanados. Podem incluir material publicado, observao direta, pesquisa, etc. PRESSUPOSTOS Indicam os acontecimentos, as condies ou as decises importantes necessrias para a sustentabilidade (continuidade no tempo) dos benefcios gerados pelo projeto/programa. Indicam os acontecimentos, as condies ou as decises que tm que ocorrer para que o projeto/programa contribua significativamente para o alcance da finalidade.

PRODUTOS: Bens e/ou servios necessrios, para a consecuo dos objetivos.

Essa clula indica onde o gestor ou avaliador pode encontrar as fontes de informao para verificar se os resultados planejados foram realizados. As fontes podem incluir observao direta, relatrios de auditoria interna, etc.

Indicam os acontecimentos, as condies ou as decises que tm que ocorrer para que os produtos previstos no projeto/programa alcancem o objetivo para o qual foram realizados.

ATIVIDADES: So as tarefas que o gestor deve executar para gerar cada um dos produtos do projeto/programa e que implicam em custos, listadas em ordem cronolgica para cada produto.

Essa clula indica onde o gestor ou avaliador pode obter informao para verificar se o oramento foi executado como o previsto. Normalmente constitui o registro contbil da unidade executora.

Indicam os acontecimentos, as condies ou as decises (fora do controle do gestor do projeto/programa) que tm que ocorrer para que os produtos possam ser gerados.

10

TCNICAS DE AUDITORIA: MARCO LGICO

Quando se tratar de programas com vrios objetivos, torna-se necessrio construir um marco mestre do programa, com sua finalidade e objetivo, e com os projetos que o integram, como mostra o quadro a seguir. A finalidade de cada um dos marcos lgicos dos projetos idntica ao objetivo do programa. Porm, cada projeto tem seu objetivo especfico. QUADRO 3 MARCO LGICO MESTRE DE UM PROGRAMA COM VRIOS PROJETOS

FINALIDADE DO PROGRAMA: __________________________________________ ________________________________________________________________________

OBJETIVO DO PROGRAMA = FINALIDADE DOS PROJETOS: ______________ ________________________________________________________________________

PROJETOS: 1. ______________________________________________________________________ 2. ______________________________________________________________________ ... PROJETOS 1 OBJETIVO ... ... ... PRODUTOS ... ... ... ATIVIDADES

...

...

11

TCNICAS DE AUDITORIA: MARCO LGICO

O prximo quadro ilustra como o Quadro 3 pode ser empregado. QUADRO 4 EXEMPLO DE MARCO LGICO MESTRE PARA O PROGRAMA DE MONITORAMENTO E CONTROLE DE DESMATAMENTOS E QUEIMADAS NA AMAZNIA PRODESQUE

FINALIDADE DO PROGRAMA: Contribuir para a proteo dos ecossistemas e da manuteno da qualidade ambiental.

OBJETIVO DO PROGRAMA = FINALIDADE DOS PROJETOS: Contribuir para a reduo das taxas atuais de desmatamento e queimadas na Amaznia.

PROJETOS: 1. Monitoramento de desmatamento e queimadas em reas prioritrias; 2. Controle e fiscalizao de desmatamento e queimadas em reas prioritrias. PROJETOS OBJETIVO Monitorar os desmatamentos e queimadas em reas prioritrias. PRODUTOS Dados bsicos de monitoramento gerados e disponveis; Dados georreferenciados para os temas definidos gerados. Emisso de relatrios analticos mensais com diretrizes para fiscalizao das reas prioritrias; Banco de dados informatizados atualizados e disponveis. ATIVIDADES Gerar mapas georreferenciados; Gerar banco de dados alfanumricos georreferenciados para reas prioritrias. Estabelecer normas e procedimentos de acesso ao banco de dados; Consolidar e atualizar banco de dados alfanumricos georreferenciados para reas prioritrias.

Controlar e fiscalizar os desmatamentos e queimadas em reas prioritrias

4. ELABORAO3
Os passos a serem seguidos na elaborao do Marco Lgico devem ser os seguintes: 1 passo: Definir a finalidade (impacto da ao governamental): A finalidade deve ser apresentada na forma da descrio da soluo de um problema e deve estar sempre ligada ao sentido de mudanas estruturais. Um problema deve ser uma
3

Este trabalho foi desenvolvido tendo como base o material denominado Evaluacin: Una herramienta de gestin para mejorar el desempeno de los proyectos, elaborado pela Oficina de Evaluacin do Banco Interamericano de Desarrollo em maro de 1997. 12

TCNICAS DE AUDITORIA: MARCO LGICO

situao negativa existente e no uma ausncia de soluo. Por exemplo, um problema, na rea de educao, seria o aumento do nmero de alunos repetentes e a finalidade do programa seria a reduo da taxa de repetncia nas escolas. Para a Agncia Brasileira de Cooperao ABC, a finalidade ou o objetivo de desenvolvimento trata da situao ideal no horizonte que a instituio nacional espera um dia alcanar, sendo que o programa ou o projeto far uma contribuio parcial para a sua materializao. (MRE, 1996, Anexo I, p. 17) 2 passo: Descrever o objetivo do programa ou do projeto: O objetivo o resultado esperado ao final do perodo da execuo do programa ou do projeto governamental. Deve ser considerado como a conseqncia prevista da produo e entrega dos bens e servios ou a situao4 que dever existir depois de solucionado o problema. Em resumo, os objetivos so os efeitos pretendidos, advindos do cumprimento das metas. interessante, nessa etapa, desenvolver o seguinte raciocnio: as atividades geram os produtos; os produtos geram os efeitos pretendidos, ou seja, os objetivos; os objetivos contribuem para as mudanas estruturais (finalidade). A descrio do objetivo do programa ou do projeto deve ser apresentada, se possvel, em uma nica frase, e deve iniciar com expresses concretas do tipo: criar, instalar, atender, implantar, aumentar de x para y e reduzir de x para y. Assim, o Marco Lgico deve apresentar um nico objetivo, de forma que fique clara a inteno proposta, evitando a ambigidade. Por exemplo, reduzir a taxa de repetncia de 60% para 20% at o ano 2003 nas escolas da zona rural. 3 passo: Identificar os produtos: Os produtos so os resultados (bens ou servios) obtidos ao final de uma srie de atividades, expressos em termos de trabalho concludo. Por exemplo: obras terminadas, estudos terminados e capacitao terminada. Devem ser quantificveis e de fcil verificao para quem analisa o desempenho do programa ou projeto. Deve-se estar atento para no confundir produto com atividade. Ex.: No projeto de desenvolvimento de tcnicas de auditoria de natureza operacional do TCU com o Reino Unido, temos como um produto "auditorias de natureza operacional realizadas". Assim, algumas atividades necessrias ao atingimento desse resultado so "desenvolvimento de tcnicas de avaliao, capacitao de pessoal no Brasil e no Reino Unido, desenvolvimento de material de treinamento ", entre outras 4 passo: Listar as atividades: As atividades so as tarefas que, uma vez executadas, levam obteno de um produto (bem ou servio). Devem ser listadas detalhadamente pois so o ponto de partida do plano de execuo. Ao mesmo tempo devem determinar os insumos (tempo e recursos) necessrios sua execuo. Deve-se estar atento para no confundir atividades com aes de natureza administrativa.
4

Essas situaes devem ser as desejadas e possveis de serem realizadas. 13

TCNICAS DE AUDITORIA: MARCO LGICO

Ex.: Ainda com base no mesmo exemplo, considerando a atividade "capacitao de pessoal no Brasil e no Reino Unido", as aes de natureza administrativa seriam "contratao de consultores, aquisio de passagens areas e impresso de material de treinamento", entre outras.

5. COMPONENTES DA MATRIZ DE MARCO LGICO

Como mostrado no Quadro 2, a matriz de Marco Lgico composta pelas seguintes colunas: "Descrio", "Indicadores", "Meios de Verificao" e "Pressupostos". O primeiro item foi examinado nos tpicos anteriores. Nesse tpico sero examinados os demais. 5.1. INDICADORES Os indicadores podem ser classificados da seguinte forma: A) Indicadores de Finalidade e Objetivo Esses so indicadores de resultado e devem: servir de base para o estabelecimento de metas, o monitoramento e a avaliao; medir o impacto geral que deve ser atribudo ao programa ou ao projeto governamental; ser obtidos a um custo razovel, preferivelmente das fontes de dados j existentes; contribuir no sentido de auxiliar a boa gesto do programa ou do projeto; permitir ajustes e correes de rumos para a obteno do seu objetivo.

Muitas vezes o desenvolvimento de indicadores tarefa rdua que requer tempo, disponibilidade de dados e conhecimento sobre o objeto do estudo. Assim, a dificuldade na elaborao de um indicador de resultado no deve prejudicar o desenho do programa ou do projeto governamental, podendo ser substitudo por indicadores indiretos. A Tcnica de Auditoria "Indicadores de Desempenho e Mapa de Produtos" (TCU, 2000), traz orientaes sobre a elaborao de indicadores de desempenho. B) Indicadores de Produtos Esses indicadores devem possuir uma descrio breve dos bens e servios (estudos a serem desenvolvidos, plano de capacitao definido e obras fsicas) que abastecero o programa ou o projeto. A descrio deve especificar quantidade, qualidade e tempo. C) Indicadores de Atividades O mtodo desenvolvido pelo BID estabelece a identidade entre o oramento necessrio para gerar cada atividade e seu indicador. Quando da reviso dos diversos indicadores, a equipe deve certificar-se que:
14

os indicadores de objetivos no sejam um resumo dos produtos; os indicadores de produtos meam o que importante; os indicadores sejam especificados em termos de quantidade, qualidade e tempo; os indicadores no se repitam, ou seja, para cada nvel de objetivo, diferentes indicadores.

TCNICAS DE AUDITORIA: MARCO LGICO

5.2. MEIOS DE VERIFICAO O Marco Lgico exige que se identifiquem as informaes a respeito dos indicadores, pois obriga o avaliador a localizar as fontes de informaes existentes ou planejar a forma de coleta dessas informaes. Como se obtm essas informaes? Dados primrios5 Dados secundrios6 Quem ir financiar essas atividades? Quem ir executar essas atividades? Qual a quantidade ideal de informaes?

Considerando-se, p. ex., que a atividade de elaborao de material de difuso de combate queimadas (de acordo com o plano aprovado) ter, como produto final, material de difuso produzido para diversos pblicos alvos, no total de 35 folders, 27 cartilhas, 18 cartazes, e a elaborao de uma home-page, o indicador e os meios de verificao sero: INDICADOR Percentual de material produzido em um nvel adequado e na poca certa (antes do perodo de seca). MEIOS DE VERIFICAO Levantamento, contabilizao e verificao da tempestividade, junto ao gestor e na Internet, do que foi produzido.

5.3. PRESSUPOSTOS Todo projeto est sujeito a uma srie de contingncias ambientais, polticas, socioeconmicas, dentre outras, sobre as quais o gestor no tem controle, que podem interferir no resultado esperado. Os pressupostos representam um juzo de probabilidade de xito do programa ou do projeto, ou seja, indicam os acontecimentos, as condies ou as decises que tm que ocorrer para que se possa alcanar o seu objetivo. Em outras palavras, so condies externas necessrias para que as atividades previstas no nvel organizacional imediatamente superior da matriz possam ter sucesso. A coluna de pressupostos tem um papel importante tanto na fase de planejamento como na fase de execuo. Na fase de planejamento, serve para identificar os riscos que podem comprometer o resultado do programa, incorporando componentes que venham sanar as dificuldades apontadas. Na fase de execuo, possibilita a rpida constatao de problemas e a imediata comunicao com o nvel superior. O fato do pressuposto ser um evento fora da responsabilidade do gerente, no cria constrangimento para que este comunique a sua ocorrncia. Por exemplo, um dos pressupostos do Programa Sade da Famlia na zona rural poderia ser o fato de no haver dificuldade de o pessoal qualificado aceitar mudar-se da cidade para a rea rural e dado que esse pressuposto pode ser um fator crtico para o atingimento do objetivo, o gestor do programa deve identificar todas as alternativas possveis de contornar tal situao. Uma soluo seria tornar mais atraente o contrato de trabalho desenvolvendo atividades e produtos que assegurem a mudana da equipe para a rea rural. A ao poderia ser o pagamento de salrio acima do de mercado, residncia gratuita ou algum outro tipo de incentivo.
5 6

Dados primrios so os dados coletados diretamente pela equipe de auditoria. Dados secundrios so aqueles obtidos de outrem. 15

TCNICAS DE AUDITORIA: MARCO LGICO

QUADRO 4 PRESSUPOSTOS Acerca do pressuposto: pessoal qualificado para formar equipes de sade da famlia aceita mudar-se da cidade para a rea rural. 1. externo ao programa ou projeto? SIM NO NO INCLUIR (est fora do controle do Ministrio da Sade) 2. importante? SIM NO NO INCLUIR (o sucesso do programa depende da formao de equipes) Qual a probabilidade que ocorra? NO PROVVEL PROVVEL MUITO PROVVEL NO INCLUIR PRESSUPOSTO O programa ou projeto pode ser redesenhado? SIM REDESENHAR O PROGRAMA A importncia da identificao dos pressupostos: identifica o que est fora do controle do gerente do projeto; proporciona um juzo acerca da probabilidade de xito; na eventualidade da ocorrncia de uma contingncia, existe uma maior probabilidade de que o gerente se comunique com o nvel superior; torna o programa/projeto mais adaptvel, aumentando as probabilidades de xito. NO PARAR

6. LISTA DE VERIFICAO
Com o objetivo de facilitar a anlise da matriz de Marco Lgico por parte da equipe de auditoria, sugerimos a utilizao da seguinte lista de verificao: 1) A finalidade est claramente expressa. 2) Os indicadores de finalidade so verificveis em termos de quantidade, qualidade e tempo. 3) O projeto tem um s objetivo. 4) O objetivo est claramente expresso. 5) Os indicadores de objetivo: a) no so um resumo dos produtos, mas uma forma independente de medir o alcance dos objetivos; b) medem apenas o que importante; c) tm medidas de quantidade, qualidade e tempo; d) medem os resultados esperados ao final da execuo do projeto. 6) Os produtos do projeto:
16

TCNICAS DE AUDITORIA: MARCO LGICO

7) 8)

9) 10) 11) 12) 13) 14) 15)

16) 17)

a) esto claramente expressos; b) esto expressos como resultados; c) so todos necessrios para cumprir o objetivo; d) incluem todos os itens pelos quais responsvel a gerncia do projeto. Os indicadores de produto so verificveis em termos de quantidade, qualidade e tempo. As atividades: a) incluem todas as aes necessrias para gerar cada produto; b) identificam todas as aes necessrias para obter informao sobre os indicadores; c) so as tarefas para as quais se incorre em custos para realizar os produtos. A relao entre as atividades e o oramento realista. A relao se ento entre o objetivo e a finalidade lgica e no omite passos importantes. A relao entre os produtos e o objetivo realista. A lgica vertical entre as atividades, os produtos, o objetivo e a finalidade realista em sua totalidade. O objetivo, junto com os pressupostos correspondentes, descrevem as condies necessrias, ainda que no suficientes, para se alcanar a finalidade. Os produtos, junto com os pressupostos correspondentes, descrevem as condies necessrias e suficientes para se alcanar os objetivos. Os pressupostos a nvel de atividade no incluem nenhuma ao que tenha que ser realizada antes do incio das atividades. As condies precedentes esto detalhadas separadamente. A coluna de meios de verificao indica onde se pode obter a informao para verificar cada indicador. O Marco Lgico define a informao necessria para a avaliao do projeto (avaliao ex-post).

7. CONCLUSO
Caso opte pela presente abordagem, a equipe encarregada do levantamento de auditoria deve apurar se os elementos tratados nos pargrafos anteriores foram contemplados na etapa de planejamento das aes desenvolvidas pelo objeto da auditoria. O modo como essas aes esto logicamente estruturadas pode ser obtido a partir dos relatrios internos de auditoria e de avaliao de desempenho institucional. Contudo, como esses documentos podem estar incompletos ou defasados, importante que seja obtida a opinio dos gestores acerca da verso da matriz de Marco Lgico desenvolvida pela equipe. Caso a equipe de auditoria constate a existncia de uma matriz de Marco Lgico j elaborada para o programa ou projeto, o que deve acontecer em relao maioria daqueles atualmente financiados pelo BID, as informaes constantes podem ser checadas e atualizadas pela equipe de auditoria com a colaborao dos gestores responsveis. Colhidos os dados necessrios, a equipe poder emitir juzo sobre a qualidade do sistema de planejamento existente. Convm notar que, quanto melhor for o sistema de planejamento, melhores sero as condies de realizao de uma avaliao de programa, em todos os seus aspectos, j que esta demanda informaes confiveis e atualizadas sobre o desempenho do programa. Na falta de informaes gerenciais precisas, as equipes podem optar por realizar um trabalho de coleta de dados sobre o desempenho do programa ou ater-se a verificao dos aspectos relativos economicidade, eficincia e eficcia das aes h pouco citadas (auditorias de desempenho operacional).
17

TCNICAS DE AUDITORIA: MARCO LGICO

18

ANEXO
MARCO LGICO: Projeto de Desenvolvimento de Tcnicas de Auditoria de Natureza Operacional Pas: Brasil Data da preparao: 4 de agosto de 2000 Resumo/Descrio Finalidade: Indicadores Meios de verificao Relatrios de monitoramento produzidos pelo TCU Pressupostos A melhoria do desempenho do setor pblico contribui para o melhor uso dos recursos disponveis em favor da sociedade

1. Contribuir para a melhoria do desempenho de Aes adotadas pelos auditados, em decorrncia instituies governamentais e da utilizao de das recomendaes do TCU resultantes de recursos pblicos auditorias de natureza operacional Objetivo: 1. Melhorar a capacidade de o TCU conduzir auditorias de natureza operacional e aumentar o impacto positivo dessas auditorias no setor pblico Produtos: O TCU conta com pessoal treinado, metodologia e tcnicas desenvolvidas, apropriados para conduzir auditorias de natureza operacional e disseminar o conhecimento para outros rgos de controle

Relatrios trimestrais do O TCU tem o compromisso Grupo de Coordenao estratgico de desenvolver a GC e relatrio de auditoria de natureza operacional avaliao do projeto

1. Normas e guias tcnicos de auditoria de 1. Trs guias tcnicos de auditoria produzidos por 1. Relatrios do GC natureza operacional produzidos e disseminados ano e disseminados 2. Relatrios do GC no TCU e em outros rgos de controle 2. Trinta tcnicos treinados e viagem de estudos ao 2. Experincia terica e prtica em tcnicas de Reino Unido para seis tcnicos e seis dirigentes auditoria de natureza operacional adquirida realizadas 3. Relatrios do GC e 3. Pelo menos duas auditorias, por rea, por ano cpia dos relatrios 3. Auditorias de natureza operacional realizadas realizadas 4. Relatrios de 4. ID testados, documentados, publicados e monitoramento 4. Indicadores de desempenho desenvolvidos ou utilizados para monitorar resultados auditados (verificados) e utilizados para 5. 30% dos auditores do TCU treinados ao final do 5. Relatrios do GC monitorar resultados projeto e 30% dos TCEs treinados para formar multiplicadores 5. Metodologia e tcnicas disseminadas Custo (em libras Atividades: Recursos esterlinas) 0. Definio do programa de trabalho para o ..................................... quarto ano do projeto e, em seguida, para os ........................................................................

1. Normas e guias tcnicos so aplicados rotineiramente 2. Pessoal treinado permanece no TCU, conduz auditorias e dissemina conhecimento 3. As auditorias testam e desenvolvem tcnicas de auditoria 4. O TCU monitora resultados das auditorias 5. TCU tem o compromisso de disseminar os conhecimentos para outros rgos de controle

perodos subseqentes; 1. Reviso e elaborao de normas e guias de auditoria de natureza operacional; 2. Desenvolvimento de tcnicas de avaliao de impacto de polticas pblicas; 3. Capacitao de pessoal no Brasil e no Reino Unido; 4. Aumento da capacidade para conduzir auditorias de natureza operacional, mediante realizao de auditorias piloto e treinamento de pessoal; 5. Avaliao, mediante mecanismos de controle de qualidade das auditorias; 6. Desenvolvimento ou auditoria de Indicadores de Desempenho; 7. Monitoramento da implementao das recomendaes do TCU; 8. Desenvolvimento de material de treinamento e especificao do plano de cursos a ser seguido pela ENICEF; 9. Disseminao de conhecimentos entre os tcnicos do TCU e demais rgos de controle externo e interno nas trs esferas de governo.

Consultores do Reino Unido (42 semanas) Visitas de estudos ao Reino Unido (42 semanas) Software e equipamento Contingncias

275.000 62.000 20.000 39.000

Total

396.000

BIBLIOGRAFIA
BANCO INTERAMERICANO DE DESARROLLO. Evaluacin: Una herramienta de gestin para mejorar el desempeo de los proyectos. Marzo de 1997. MINISTRIO DAS RELAES EXTERIORES. Formulao de Projetos de Cooperao Tcnica Internacional (PCT). Manual de Orientao da Agncia Brasileira de Cooperao. 1996. TRIBUNAL DE CONTAS DA UNIO. Indicadores de Desempenho e Mapa de Produtos. Julho de 2000.

TCNICAS DE AUDITORIA: MARCO LGICO

22

FOLHA DE SUGESTES
O TCU preocupa-se com o constante aperfeioamento da qualidade de seus manuais e orientaes, buscando, para isso, ouvir a valiosa opinio do pblico-alvo dos referidos trabalhos. O questionrio a seguir refere-se especificamente s Tcnicas de Auditoria Marco Lgico a partir de maro de 2001. Ser muito til para o TCU se o leitor deste documento puder dispor de alguns minutos para responder s perguntas constantes no referido questionrio e envi-lo pelos Correios (no preciso selar, pois o porte ser pago pelo TCU). Sugestes sobre este documento tambm podem ser enviadas das seguintes formas: E-mail: seprog@tcu.gov.br Fax: (61) 316-7896 Fone: (61) 316-7313 Endereo: Tribunal de Contas da Unio - TCU SEPROG Setor de Administrao Federal Sul - Lote 01 CEP: 70042-900 - Braslia-DF

TCNICAS DE AUDITORIA: MARCO LGICO

24

Tribunal de Contas da Unio Secretaria de Fiscalizao e Avaliao de Programas de Governo

QUESTIONRIO DE AVALIAO

FINALIDADE Este questionrio de avaliao tem por objetivo obter a opinio dos leitores sobre as Tcnicas de Auditoria Marco Lgico, com vistas ao seu aperfeioamento. Por favor, responda s questes abaixo assinalando com um X a alternativa mais adequada. Desde j agradecemos a sua colaborao. 1. Em que esfera do governo voc trabalha? Federal 2. Em que rgo voc trabalha? Poder Legislativo Poder Executivo Poder Judicirio Controle Interno Outro [especificar] ________________ Estadual ou DF Municipal

3. Que partes das Tcnicas de Auditoria Marco Lgico voc leu? Todo Itens I, II e III [todo ou parte] Itens IV e V [todo ou parte] Itens VI e VII [todo ou parte]

4. Leia com ateno cada indicador e escolha o ponto da escala que melhor descreve a sua opinio sobre as Tcnicas de Auditoria Marco Lgico. Marque com um X a opo que melhor representa o seu julgamento. Concorda integralmente 5 O manual : Fcil de ser lido Fcil de ser entendido Lgico Sucinto Completo til Concorda 4 5 Indiferente 3 4 Discorda 2 3 2 Discorda integralmente 1 1

5. Como voc tomou conhecimento das Tcnicas de Auditoria Marco Lgico? Quando recebeu Divulgao interna do TCU Por mensagem do SIAFI 6. Como voc obteve das Tcnicas de Auditoria Marco Lgico? Solicitou diretamente ao TCU Download pela Internet Outros [especificar] _______________ Pela Internet Pela imprensa Outros [especificar] _______________________

7. Apresente, a seguir, comentrios e sugestes para o aprimoramento da qualidade das Tcnicas de Auditoria Marco Lgico. No caso de sugestes para alterao/supresso/aditamento de itens de verificao, favor preencher o quadro anexo.

Tribunal de Contas da Unio Secretaria de Fiscalizao e Avaliao de Programas de Governo

QUADRO DE SUGESTES

FINALIDADE Este quadro de sugestes tem por objetivo obter a opinio dos leitores sobre as Tcnicas de Auditoria Marco Lgico, com vistas ao seu aperfeioamento. N do item Proposta de alterao, supresso ou aditamento Fundamentao

PTR/BSB 880/92 UP-AC/TCU DR/BSB

CARTA - RESPOSTA
NO NECESSRIO SELAR O SELO SER PAGO POR TRIBUNAL DE CONTAS DA UNIO BRASLIA-DF

70099-999

UNIDADES DA SECRETARIA DO TRIBUNAL DE CONTAS DA UNIO

Secretaria da Presidncia Consultoria Jurdica Instituto Serzedello Corra Secretaria de Controle Interno Secretaria de Planejamento e Gesto Secretaria de Tecnologia da Informao Assessoria de Cerimonial e Relaes Institucionais Assessoria de Comunicao Social Assessoria de Relaes Internacionais Assessoria Parlamentar Secretaria-Geral das Sesses Secretaria do Plenrio Secretaria-Geral de Administrao Secretaria de Recursos Humanos Secretaria de Oramento, Finanas e Contabilidade Secretaria de Material, Pat. e Com. Administrativa Secretaria de Engenharia e Servios Gerais Secretaria-Geral de Controle Externo Secretaria-Adjunta de Contas Secretaria-Adjunta de Fiscalizao 1 Secretaria de Controle Externo 2 Secretaria de Controle Externo 3 Secretaria de Controle Externo 4 Secretaria de Controle Externo 5 Secretaria de Controle Externo 6 Secretaria de Controle Externo Secretaria de Fiscalizao de Desestatizao Secretaria de Fiscalizao de Obras e Pat. da Unio Secretaria de Fiscalizao de Pessoal Secretaria de Fiscalizao e Aval. de Prog. de Governo Secretaria de Macroavaliao Governamental Secretaria de Recursos Secretaria de Controle Externo/AC Secretaria de Controle Externo/AL Secretaria de Controle Externo/AP Secretaria de Controle Externo/AM Secretaria de Controle Externo/BA Secretaria de Controle Externo/CE Secretaria de Controle Externo/ES Secretaria de Controle Externo/GO Secretaria de Controle Externo/MA Secretaria de Controle Externo/MT Secretaria de Controle Externo/MS Secretaria de Controle Externo/MG Secretaria de Controle Externo/PA Secretaria de Controle Externo/PB Secretaria de Controle Externo/PR Secretaria de Controle Externo/PE Secretaria de Controle Externo/PI Secretaria de Controle Externo/RJ Secretaria de Controle Externo/RN Secretaria de Controle Externo/RS Secretaria de Controle Externo/RO Secretaria de Controle Externo/RR Secretaria de Controle Externo/SC Secretaria de Controle Externo/SP Secretaria de Controle Externo/SE Secretaria de Controle Externo/TO Paulo Emlio Lustosa Jos Moacir Cardoso da Costa Salvatore Palumbo Leila Fonseca dos Santos V. Ferreira Mauro Giacobbo Cludio Silva da Cruz Erivan Carlos de Carvalho Francisco Raul Flix de Souza Ramos Ana Beatriz Pascal Kraft Severino Lucena da Nbrega Eugnio Lisboa Vilar de Melo Elenir Teodoro Gonalves dos Santos Antnio Jos Ferreira da Trindade Cludia de Faria Castro Pedro Martins de Sousa Ary Fernando Beiro Alfredo Henrique Bauchspiess Luciano Carlos Batista Ricardo de Mello Arajo Cludio Souza Castello Branco Rosendo Severo dos Anjos Neto Eduardo Duailibe Murici Carlos Nivan Maia Maria do P. Socorro Teixeira Rosa Odilon Cavallari de Oliveira Ismar Barbosa Cruz Jorge Pereira de Macedo Cludio Sarian Altounian Antonio Jlio Ferreira Marlia Zinn Salvucci Paulo Roberto Pinheiro Dias Pereira Marcos Bemquerer Costa Dion Carvalho Gomes de S Edimilson Monteiro Batista Gilmar Gomes de Lira Helena Montenegro Valente Evilsio Magalhes Vieira Paulo Nogueira de Medeiros Hamilton Caputo Delfino Silva Rosngela Paniago Curado Fleury Osmir da Silva Freire Luiz Guilherme da Boamorte Silveira Raimundo Nonato Coutinho lsio Geov dos Santos Jos Mrcio Paulino Murta Raimundo Nonato Soares Arajo Nazar do Socorro G. Rosrio Zuardi Ild Ramos Rodrigues Jos Maria Arajo Lima Francisco Carlos Ribeiro de Almeida Marcos Valrio de Arajo Antnio Jos Martins de Almeida Fbio Arruda de Lima Rainrio Rodrigues Leite Rafael Blanco Muniz Eloi Carnovali Maria Salete Fraga Silva Palma Carlos Martins dos Santos