VII SEMEAD

ESTUDO DE CASO TERCEIRO SETOR

MONITORAMENTO E AVALIAO DE PROGRAMAS E PROJETOS SOCIAIS DESENVOLVIMENTO DE UM PLANO DE AVALIAO Autores: Paulo da Rocha Ferreira Borba Ttulo Acadmico: Graduado em Administrao de Empresas pela FEA-USP Instituio: Faculdade de Economia, Administrao e Contabilidade da Universidade de So Paulo FEA-USP Endereo: Rua Lisboa, 104, apto 101-A, Jardim Amrica So Paulo SP CEP: 05413-000 E-mail: pfborba@uol.com.br Telefone: (11) 3082-9285 Mrio Lus Farah Ttulo Acadmico: Mestre em Administrao - PUC/SP 2003 Instituio: Faculdade de Administrao - Fundao Armando Alvares Penteado (FAAP) Endereo: Rua Cel. Melo de Oliveira, 668 - Ap. 53 - So Paulo - SP CEP: 050511-040 E-mail: mariofarah@picture.com.br Telefone: (11) 3865 - 4913 Maria Cristina Lopes Fedato Ttulo Acadmico: Graduada em Engenharia Mecanica Poli USP - 1986 Instituio: Fundao Instituto Administrao (FIA) Endereo: Rua Adib Auada, 111 - casa 49 - Cotia - SP CEP: 06710-700 E-mail cristinap@fia.com.br Telefone: (11) 4612-5293 Marco Antonio Figueiredo Milani Filho Ttulo Acadmico: Especialista em Finanas e Contabilidade - USP Instituio: FEA/USP Endereo: Rua Miranda de Azevedo, 1400 Apto 64 So Paulo/SP CEP: 05027-1000 E-mail: marcoamilani@aol.com Telefone: (11) 9838-3941 Joo Teixeira Pires Ttulo Acadmico: MBA-RH Instituio: Fundao Instituto Administrao (FIA) Endereo: Rua Ea de Queiroz, 527 - apto. 132 Paraso So Paulo - SP CEP: 04011-032 Email: joaotp@fia.com.br Tel: (11) 5572-0682

Resumo As mudanas que vm ocorrendo no cenrio scio-poltico-econmico brasileiro nas ltimas dcadas tm dado espao expanso e ao fortalecimento das organizaes sem fins lucrativos, entidades que compem o Terceiro Setor. Este trabalho prope-se a elaborar um projeto de avaliao e monitoramento de resultados para um programa social de uma organizao sem fins lucrativos. O trabalho foi desenvolvido numa instituio filantrpica, a Casa Transitria Fabiano de Cristo (CTFC), responsvel pelas aes sociais da Federao Esprita do Estado de So Paulo (FEESP). A Casa realiza diversos programas e projetos sociais, sendo que o escopo deste trabalho se limita ao programa de apoio a gestantes por este estar diretamente vinculado misso da entidade, representando a sua atividade-chave. A elaborao deste projeto de avaliao se baseia em conhecimentos especficos deste campo de pesquisa, podendo-se destacar como princpios orientadores o carter participativo e inclusivo do processo avaliativo, servindo a avaliao como ferramenta de amadurecimento e aprendizado para as partes interessadas no programa. Este trabalho deixa como uma perspectiva futura para a Casa o aprimoramento do processo avaliativo, como tcnicas mais inovadoras de coleta de dados com o pblico beneficiado e o aprofundamento do estudo. Palavras chave: terceiro setor; avaliao, programas sociais

Monitoramento e Avaliao de Programas Desenvolvimento de um Plano de Avaliao Introduo e Objetivo

Projetos

Sociais

As mudanas que vm ocorrendo no cenrio scio-poltico-econmico brasileiro nas ltimas dcadas tm dado espao expanso e ao fortalecimento das organizaes sem fins lucrativos, entidades que compem o Terceiro Setor. Por desempenharem funo de interesse pblico, so crescentes as exigncias para que estas entidades demonstrem transparncia e prestem contas comunidade, a parceiros e financiadores. Neste contexto, a avaliao de resultados assume um papel fundamental como ferramenta de gesto e sustentabilidade destas entidades. O objetivo deste trabalho a elaborao de um projeto de avaliao e monitoramento de resultados para um programa social de uma organizao sem fins lucrativos. O trabalho foi desenvolvido numa instituio filantrpica, a Casa Transitria Fabiano de Cristo (CTFC), responsvel pelas aes sociais da Federao Esprita do Estado de So Paulo (FEESP). A Casa realiza diversos programas e projetos sociais, sendo que o escopo deste trabalho se limita ao programa de apoio a gestantes. Este programa foi selecionado por estar diretamente vinculado misso da entidade, representando a sua atividade-chave. A elaborao deste projeto de avaliao se baseia em conhecimentos especficos deste campo de pesquisa, podendo-se destacar como princpios orientadores o carter participativo e inclusivo do processo avaliativo, servindo a avaliao como ferramenta de amadurecimento e aprendizado para as partes interessadas no programa. O escopo deste trabalho se limita elaborao do projeto de avaliao e capacitao da entidade para sua implementao. Este estudo traz contribuies no campo de pesquisa organizacional, especificamente sobre o tema Avaliao de Projetos e Programas Sociais. Fundamentao Terica O Terceiro Setor no Brasil As enormes, rpidas e profundas modificaes observadas no cenrio mundial esto a exigir da sociedade novas formas de articulao dos grupos sociais, visando dar respostas mais efetivas s complexas demandas sociais decorrentes desses movimentos. Neste contexto, surge um tipo de organizao singular, caracterizada nem pela ligao com o Estado nem objetivada ao lucro, como se espera das empresas, e sim pelo atendimento s demandas sociais, recebendo seu conjunto a denominao de Terceiro Setor. Dentro deste contexto, o chamado Terceiro Setor pode ser definido como o espao composto por organizaes privadas, sem fins lucrativos, cuja atuao dirigida a finalidades coletivas ou pblicas (Fischer, 2002:45). Trata-se de um campo de estudos recente, ainda marcado pela grande heterogeneidade de abordagens, classificaes e conceitos, que refletem tanto a diversidade de organizaes que compem o setor, quanto o olhar que se coloca sobre o fenmeno em estudo, conduzindo a diversas indagaes e questionamentos acerca de sua caracterizao e gesto, pois alm de congregar representativas parcelas da sociedade civil organizada, apresenta nmeros significativos enquanto recursos envolvidos e usurios atendidos. Este complexo universo de organizaes se constitui em terreno frtil para a Administrao, por intermdio da investigao dos fenmenos concernentes ao seu desenvolvimento e gesto. A multiplicidade de organizaes pode ser observada mediante a anlise empreendida por Falconer (1993: 94), a qual classifica o Terceiro Setor brasileiro em (1) o setor formado por instituies religiosas (...), (2) as organizaes no-governamentais e novos movimentos sociais, (3) os empreendimentos sem
3

fins lucrativos no setor de servios, (4) o setor para-estatal e nascido sob a tutela do Estado e (5) o setor das fundaes e entidades empresariais. Apesar da ampliao e o fortalecimento da atuao destas organizaes, isto no tem resultado em uma identidade prpria para o setor, pois conforme assevera Falconer (1999: 91), as organizaes que formam o terceiro setor brasileiro esto divididas em linhas que refletem suas origens em grupos sociais diversos, que espelham este abismo social encontrado na sociedade bem como a diversidade de interesses existentes. No contexto em que surgem h poucos elementos e incentivos para a criao espontnea de uma identidade de setor que se caracteriza por um grande nmero de organizaes com caractersticas, origens, finalidades, portes e recursos os mais diversos. A diversidade de organizaes do Terceiro Setor existentes no Brasil dificulta a formao de um perfil claramente delineado em relao a aspectos comuns entre si, como seu propsito, fontes de financiamento, origem, etc. As diferentes tipologias disponveis na literatura no conseguem nem a unanimidade dos estudiosos, nem tampouco a sinalizao na direo de um caminho mais fluido e instrumental. A classificao internacional proposta por Salamon & Anheier (apud Hudson, 1999: 236) prev a diviso das organizaes em doze grupos: cultura e recreao; educao e pesquisa; sade; servios sociais; meio ambiente; desenvolvimento e habitao; direito, advocacy e poltica; intermedirios filantrpicos e promoo do voluntariado; atividades internacionais; religio; associaes profissionais e sindicatos; e no classificados em outros grupos. No entanto, como a utilizao deste sistema no unnime entre pesquisadores da rea e para uma melhor contextualizao da organizao pesquisada neste estudo, adotamos outras tipologias propostas por autores que abordam, embora com diferenas, o universo constitudo pelas entidades filantrpicas e religiosas, como Mendes (1999:11) que prope a seguinte classificao: organizaes sem fins lucrativos; associaes; entidades filantrpicas, beneficentes ou de caridade; fundaes; e organizaes no governamentais. Outra possibilidade a tipologia proposta por Fischer (2002:47), que enfatiza as origens e o desenvolvimento histrico do terceiro setor no Brasil, classificando as organizaes que compem o terceiro setor em entidades tradicionais, laicas e religiosas; organizaes no-governamentais, entidades paraestatais; entidades associativas; e entidades de iniciativa empresarial. Segundo a autora, as associaes laicas e religiosas remontam o prprio surgimento do terceiro setor no Brasil, cuja presena data do perodo colonial brasileiro. O papel inicialmente desempenhado pela Igreja Catlica na criao e no apoio a entidades associativas diversas, posteriormente passou a ser assumido por outras instituies religiosas, principalmente nas reas de educao e assistncia social. J as associaes voluntrias laicas assumem destaque apenas a partir do final do sculo XIX. Desta forma, no Brasil, como no mundo, a assistncia social historicamente possui, em suas razes, uma forte associao com doutrinas religiosas, cujo principal componente o carter assistencialista das aes empreendidas. Avaliao de Projetos e Programas Sociais Delimitao do Marco Conceitual Os recentes movimentos de ocupao dos espaos pblicos no-estatais, no que se refere a aes sociais no Brasil, vm demonstrando a crescente importncia do papel das organizaes da sociedade civil sem fins lucrativos. Dentro desse processo de consolidao de papis, tem-se criado presses junto aos setores pblico e privado no sentido de garantir transparncia no uso de recursos e efetividade das polticas pblicas e programas sociais exercidos neste contexto. Desse modo, a avaliao de programas e projetos sociais tem

assumido papel fundamental, sendo objeto de um contnuo aperfeioamento em seu entendimento e em sua aplicao. No escopo deste trabalho, utilizaremos a seguinte definio de avaliao, conforme mencionada em Chianca (2001:16), como ponto de partida para reflexo do escopo envolvido: A coleta sistemtica de informaes sobre as aes, as caractersticas e os resultados de um programa, e a identificao, esclarecimento e aplicao de critrios, passveis de serem defendidos publicamente, para determinar o valor (mrito e relevncia), a qualidade, utilidade, efetividade ou importncia do programa sendo avaliado em relao aos critrios estabelecidos, gerando recomendaes para melhorar o programa e as informaes para prestar contas aos pblicos interno e externo ao programa do trabalho desenvolvido. Complementando esta definio, torna-se relevante destacar o carter de aprendizagem contido no entendimento de um processo avaliativo. Segundo Silva e Brando (2003), pode-se entender avaliao como a elaborao, negociao e aplicao de critrios explcitos de anlise, em um exerccio metodolgico cuidadoso e preciso, com vistas a conhecer, medir, determinar ou julgar o contexto, mrito, valor ou estado de um determinado objeto, a fim de estimular e facilitar processos de aprendizagem e de desenvolvimento de pessoas e organizaes. A idia central que os processos avaliativos ajudem os envolvidos a encontrar seus prprios caminhos de aprendizagem e desenvolvimento, e que ampliem o nvel de conscincia dos empreendedores sociais. Para cumprir estes objetivos, o papel da avaliao precisa transcender a fiscalizao ou controle, abrangendo uma intensa reflexo que deve ser feita com todos os envolvidos no processo. Como apontam Chianca, Marino e Schiesari (2001):A aprendizagem do adulto no contexto organizacional ou em outros sistemas sociais s possvel atravs de um processo contnuo de ao e reflexo. A reflexo ocupa um papel fundamental: provocar mudanas nas aes dos indivduos. Este especificamente o papel da avaliao: construir momentos reflexivos que permitam aos indivduos a anlise da realidade e dos fatos, para da direcionarem suas aes, aprendendo pela experincia. A definio de avaliao proposta por Chianca (2001:16) menciona explicitamente a avaliao de um programa. Podemos encontrar, tambm, a avaliao de um projeto. Segundo Armani (2001:18) podem-se identificar trs nveis de formulao da ao social: a) o nvel dos grandes objetivos e eixos estratgicos de ao (a poltica); b) um nvel intermedirio em que as polticas so traduzidas em linhas mestras de aes temticas e/ou setoriais (programas); e c) o nvel das aes concretas, delimitadas no tempo, no espao e pelos recursos existentes, que possam realizar os programas e as polticas, ou seja, os projetos. No contexto de programa, entendemos atividades que so oferecidas em bases contnuas. J no contexto de projeto, entendemos atividades que so oferecidas por um perodo determinado de tempo. Para efeito deste trabalho, a avaliao aqui concebida e analisada se presta a avaliao de um projeto social especfico de assistncia a gestantes carentes dentro de uma organizao no lucrativa denominada Casa Transitria Fabiano de Cristo. A avaliao global de projetos e programas sociais pode ser subdividida nas seguintes avaliaes: avaliao do marco zero, avaliao de processo ou formativa, e avaliao somativa (Chianca, 2001). Segundo Chianca (2001:18) a avaliao do marco zero ocorre antes da instalao de um determinado programa ou projeto e serve para orientar a equipe responsvel por ele no planejamento das aes, garantindo o mximo de proximidade s reais necessidades e expectativas dos futuros usurios. Ainda segundo Chianca (2001:17), a avaliao de processo ou formativa tem como objetivo prover informaes essenciais sobre um
5

determinado programa para que os gestores possam introduzir mudanas a fim de melhor-lo ainda durante seu processo de implementao. J a avaliao de produto ou somativa conduzida aps o trmino de um programa ou projeto, servindo basicamente para julgar o mrito e a relevncia de um programa ou projeto em relao a determinados critrios (Chianca, 2001:18). Marino (1998 :23) acrescenta a chamada avaliao de impacto afirmando que o efeito final ou impacto de um projeto deve ser examinado aps o perodo de implementao das aes(Marino,1998:23). Os indicadores de resultados devem ser comparados queles iniciais, observados no Marco Zero. Para que seja possvel a avaliao de um projeto ou programa social, deve-se fazer um esforo, desde o planejamento inicial das atividades, para identificar e desenvolver indicadores de resultados do projeto. Segundo Valarelli (1999), em projetos sociais, indicadores so parmetros qualificados e/ou quantificados que servem para detalhar em que medida os objetivos de um projeto foram alcanados, dentro de um prazo delimitado de tempo e numa localidade especfica. Ainda segundo o autor so uma espcie de marca ou sinalizador, que busca expressar e demonstrar a realidade sob uma forma que possamos observar e obter dados mais concretos para melhor avaliao. Os indicadores indicam mas no so a prpria realidade. Baseiam-se na identificao de uma varivel, ou seja, algum aspecto que varia de estado ou situao, variao esta que consideramos capaz de expressar um fenmeno que nos interessa (Valarelli, 1999). Marino (1998) considera, ainda sobre a questo dos indicadores de resultados, que os objetivos do projeto ou programa e as perguntas formuladas para orientar a avaliao so importantes fontes para se definir os indicadores de resultados parciais ou finais. Ao pensarmos em indicadores para projetos e programas sociais, deparamo-nos com dificuldades adicionais para defini-los e interpret-los adequadamente. Segundo artigo da Profa. Rebecca Raposo (in vila, 2001:98), a diversidade de aes sociais, bem como os diferentes cenrios e conjunturas onde ocorrem, torna inconveniente, quando no injusta para com as diferenas sociais, a definio de um conjunto de indicadores-padro. A autora prope uma melhor compreenso dos possveis impactos dos projetos e programas, ao visualizar, primeiramente, as aes inseridas num foco localizado e pontual. Depois, ao considerar uma srie de variveis, verificar o impacto de uma forma ampliada, podendo atingir, em alguns casos, o chamado plano das polticas pblicas. Ao mesmo tempo, prope o impacto tangvel, mais facilmente mensurvel, e o impacto intangvel, que pode ser mensurado pela observao e mais facilmente contaminvel pelas variveis subjetivas (vila, 2001:99). Uma pergunta que se coloca neste momento, diz respeito a qual seria a combinao mais adequada de indicadores quantitativos e qualitativos e quantos seriam necessrios para fornecer uma base confivel de informao para o monitoramento e a avaliao. Segundo Armani (2001), um bom sistema de indicadores deve: ter mais indicadores nos nveis de atividades e resultados e menos no nvel de objetivo geral; conter um nmero de indicadores adequado para o projeto, trazendo informaes importantes porm no em excesso, de modo a facilitar a operacionalizao da avaliao; fazer com que o processo de definio de indicadores seja o mais participativo possvel, envolvendo todos os principais atores do projeto; promover reflexes peridicas com os atores ao longo de todo o projeto; explicitar os meios de verificao e coleta de dados, bem como seus responsveis; e buscar fazer uso de informaes j existentes ou de simples produo, com o objetivo de otimizar o uso de recursos. Processos de Avaliao de Projetos e Programas Sociais

Chianca (2001), prope um modelo de etapas de planejamento, execuo e anlise/divulgao dos resultados da avaliao. Os principais itens identificados pelo autor so: a) PLANEJAMENTO: - Estudo da viabilidade: determinao dos interessados, quem deve conduzir, como selecionar os avaliadores, e o porque e quando avaliar; - Esclarecimento de objetivos da avaliao e anlise do contexto: determinao do que avaliar e mapeamento do contexto poltico envolvido (relaes de poder, interesses); - Identificao e seleo de perguntas avaliativas; - Identificao de indicadores: ndices relacionados s perguntas avaliativas; - Seleo de fontes e mtodos de informao: determinao de amostras, mtodos de anlises de dados e determinao de forma de comunicao dos resultados obtidos na avaliao. b) EXECUO DA AVALIAO - Atentar para aspectos polticos e ticos durante a avaliao: no se deve permitir que valores individuais e interesses influenciem a avaliao; - Coleta de dados: sempre testar os instrumentos de coleta, capacitar profissionais que coletam os dados, fazer cpia dos dados coletados, checar dados anotados. Focar a simplicidade, buscar sempre incluir mais de uma fonte de informao e mtodo de coleta de dados no estudo, procurar combinar mtodos qualitativos e quantitativos. Quanto aos mtodos, procurar combinar os seguintes mtodos: anlise de documentos; observao, questionrios; entrevistas individuais; entrevistas por telefone; entrevistas em grupo foco. c) ANLISE DE RESULTADOS - A fase de anlise envolve o manuseio e interpretao de dados quantitativos (freqncias, mdias, desvios-padro, quantidades), dados qualitativos (agrupamento de respostas em categorias, anlises de campo) d) DIVULGAO E UTILIZAO DOS RESULTADOS - Elaborao de relatrios para cada pblico de interesse envolvido no processo; - Os constituintes principais dos relatrios de avaliao so: resumo executivo; introduo; descrio do foco de avaliao; metodologia; resultados; concluses e recomendaes; anexos. - Avaliao da avaliao: anlise crtica do processo de avaliao, analisando pontos fortes, dificuldades e pontos a melhorar no processo como um todo. De maneira geral, os processos avaliativos, a nosso ver, devem apresentar uma abordagem pluralista, que envolva aspectos qualitativos e quantitativos, e centrada nas relaes entre o sistema de ao e a lgica dos atores. Os processos so enriquecidos quando h o envolvimento de diferentes atores e a preocupao em se criar um sistema diversificado de indicadores, combinando conceitos, meios de coleta e diferentes responsveis. Metodologia Este trabalho baseia-se no estudo de caso de um programa social de uma organizao, selecionada por convenincia, para o qual foi criado um plano de avaliao de resultados.Os dados primrios foram obtidos atravs de entrevistas semi-estruturadas. Os roteiros foram elaborados com base na literatura e em experincias vivenciais. Foram realizadas duas entrevistas em grupo com a equipe da Casa e do Programa, com o objetivo de envolver e sensibilizar estes atores para a importncia do processo avaliativo. Tambm foram ouvidos o dirigente da Casa, os dirigentes do Programa e tambm uma instrutora do Programa.
7

Juntamente com este grupo foram definidos a pergunta avaliativa e os principais indicadores de resultados. O pblico beneficiado foi ouvido atravs de entrevista a uma amostra aleatria. O principal objetivo desta etapa foi aferir as expectativas e necessidades das beneficiadas. Os dados obtidos propiciaram tambm um melhor entendimento do Programa e serviram de referncia para o detalhamento dos indicadores de resultado. Os dados secundrios da organizao e do programa foram obtidos a partir de documentos da organizao e de registros de dados especficos do Programa, tendo servido de fontes de informaes sobre o histrico e caractersticas da organizao e do programa. Todos os dados coletados foram submetidos a uma anlise de contedo. A Casa Transitria Fabiano de Cristo Histrico e Caracterizao A Casa Transitria Fabiano de Cristo CTFC surgiu como uma necessidade decorrente da expanso das atividades assistenciais da Federao Esprita do Estado de So Paulo FEESP. A FEESP foi fundada em 12/07/1936 na cidade de So Paulo, tendo como uma de suas finalidades a criao, manuteno e orientao de instituies e servios assistenciais de amparo e reajustamento de necessitados em geral, em consonncia com o princpio doutrinrio que preconiza. As suas atividades assistenciais comearam a ser desenvolvidas no local onde hoje ainda situa-se a sua sede, na regio central da cidade, e desenvolveram-se desde ento. Conforme Ary Lex1 , em 1948 passou a oferecer consultas mdicas e odontolgicas gratuitas e em 1953 foram registradas 2.875 consultas homeopticas e 164 alopticas, alm de atendimento odontolgico a 4.717 pessoas e farmacutico a 3.763. (Lex, 1996). Assim, o atendimento da infncia e parturientes carentes sempre foi uma das preocupaes da Instituio. Fundada em 1960, a CTFC rapidamente aumentou a quantidade de atendimentos, realizando em 1968 o total de 9.933 consultas mdicas e 8.934 odontolgicas, entre outros servios. Nas dcadas seguintes, outras atividades foram criadas no somente para o atendimento da sade, mas tambm na rea da educao. Em 1999, o nmero de registros de atendimento somou 39.006 pessoas (Fernandes, 2000). Atualmente a instituio possui cerca de 700 voluntrios regulares, isto , com tarefas semanais e presena constante. No banco de dados existem cerca de 4 mil pessoas cadastradas no voluntariado, mas sem presena regular ou encontram-se inativas. Programa de Orientao Maternal O atual programa de Orientao Maternal surgiu em 1956, decorrente da prpria atividade de assistncia social da FEESP. A assistncia nunca se restringiu ao simples amparo material e orientaes bsicas sobre sade, higiene e cuidados domsticos, mas fundamentalmente visou a estruturao familiar em alicerces morais e ao estmulo de melhores condies socioeconmicas atravs de cursos profissionalizantes ou atividades geradoras de renda. Considerada a fundadora da Orientao Maternal, a Sra. Ceclia Fragoso Pinheiro Dias (1917-), educadora profissional, ingressou na FEESP nos incios dos anos 50 e passou a freqentar a 1 turma do curso de Aprendizes do Evangelho, criada pela instituio. Ao final do curso, foi convidada por seu professor e futuro fundador da Casa Transitria, o Sr. Jos Gonalves Pereira, a participar das atividades de assistncia social desenvolvidas pela FEESP. A Sra. Ceclia integrou o grupo de visitadores que tinha como funo avaliar as

Dr. Ary Lex, mdico formado pela Faculdade de Medicina da USP, foi diretor do centro cirrgico do Hospital das Clnicas (SP) e professor universitrio. Atuou como voluntrio e Conselheiro da FEESP de 1942 a 1988. 8

condies socioeconmicas das famlias cadastradas que recebiam assistncia regularmente, verificando se as mesmas j haviam sido promovidas socialmente e se ainda possuam reais necessidades de continuarem como assistidas. Aps a fundao da Casa Transitria, a Sra. Ceclia organizou as atividades que permanecem seguindo a proposta inicial at hoje. Caractersticas do Programa a) Perfil da gestante assistida: baixa renda ou desempregada; solteira ou abandonada; e baixa possibilidade de insero social b) Enfoque dos cursos: sade da mulher e da criana; orientao moral e assistncia espiritual; treinamento para obteno de renda complementar (cursos de corte e costura, manicure, cabeleireira e culinria) c) Durao: 30 aulas de 90 minutos cada, oferecidas duas vezes por semana s mulheres que encontram-se com gestao entre trs e cinco meses; 10 aulas de 90 minutos cada, oferecidas uma vez por semana s mulheres que encontram-se com gestao entre seis e sete meses. O tempo mdio de permanncia das gestantes nas atividades do programa de seis meses, com um ndice de concluso de 75%. Aps a finalizao das aulas, a mulher pode freqentar por mais quinze semanas os cursos de complementao de renda. A evaso verificada atribuda, conforme os responsveis pelos cursos, dificuldade financeira para o transporte at a CTFC. Apesar de haver a orientao doutrinria durante o curso, o atendimento no exige qualquer vnculo com o Espiritismo, fato este comprovado pelas diferentes religies professadas pelas gestantes. Os benefcios materiais recebidos durante o perodo do programa, como lanche, enxoval para o beb e mantimentos, sugerem ser o maior atrativo para a freqncia, no ignorando os benefcios intangveis percebidos pelas gestantes e relatados como fundamentais em depoimentos e manifestaes escritas ao trmino do curso. Para manter esta estrutura o programa de Orientao Maternal conta com 75 voluntrias que atuam como instrutoras ou coordenadoras das turmas. Historicamente so matriculadas semestralmente cerca de 600 gestantes, distribudas em 20 novas turmas. Em 2003, o nmero de mulheres matriculadas foi de 1030. Resultados Projeto de Avaliao luz da contribuio terica dos diversos autores apresentados e atravs de trs sees de entrevista com os responsveis e beneficirios do programa Orientao Maternal tornou-se possvel elaborar um Projeto de Avaliao para este programa, a fim de que um melhor controle e monitoramento das aes, alm de um aprendizado contnuo, empoderasse os responsveis pelo programa, principalmente, o diretor da Casa Transitria e as coordenadoras do prprio programa, no sentido de que os objetivos e os meios para alcan-los pudessem ser melhor definidos. Em um primeiro momento, definiram-se algumas perguntas avaliativas, em reunio com o diretor da Casa Transitria e coordenadora do programa, a partir dos objetivos da Casa, ou seja, amparar a criana reajustando-lhe a famlia, e do programa Orientao Maternal. Assim, foram levantadas, inicialmente, quatro questes: - Em que medida o programa contribuiu para a melhoria da vida em famlia? - Em que medida o programa contribuiu para a melhoria da vida da prpria gestante / me? - Em que medida o programa contribuiu para a melhoria de vida deste filho em relao aos outros j existentes? - Em quais aspectos ocorreram melhorias concretas? De renda, sade, educao, higiene ou psicolgicos?

A partir destas quatro questes iniciais, o grupo de trabalho e os responsveis pelo programa optaram por reduzi-las para apenas duas, visando maior foco e preciso do objetivo. Sendo assim, as duas perguntas avaliativas consensuais foram: - Em que medida o programa contribuiu para a melhoria da vida em famlia? - Em quais aspectos ocorreram melhorias visveis? De sade, higiene, relaes familiares e cuidados com o beb? Com as duas perguntas avaliativas definidas, iniciou-se um processo conjunto de definio de alguns indicadores com os responsveis pelo programa e com o prprio pblico beneficirio, ou seja, as gestantes participantes dos cursos, em entrevistas semi estruturadas separadas, a fim de evitar possveis vieses. Atravs destas entrevistas, identificou-se a existncia de um marco zero (Armani, 2001) para o processo avaliativo, como o pronturio (vide anexos) preenchido pela interessada em participar do programa e o relatrio de visita (vide anexos) realizada por colaboradores do programa a fim de constatar as reais condies de vida da gestante candidata a uma vaga do curso. Assim, a situao inicial das gestantes participantes do programa poderia ser facilmente obtida, j que se constitua em procedimentos j realizados pelos colaboradores do programa. Alm disso, com base no referencial terico e nas entrevistas, trs dimenses de indicadores (Chianca, 2001) puderam ser elaborados: - Dimenso da Gesto; - Dimenso do Processo e - Dimenso do Impacto Social. No que se refere Dimenso da Gesto, alguns indicadores simples, porm importantes, poderiam ser criados rapidamente a fim de que ocorresse um melhor monitoramento das atividades. Os indicadores desta dimenso seriam: - Custo do Programa em R$ / Nmero Total de Beneficirios; - Nmero Total de Colaboradores / Nmero Total de Beneficirios e - Taxa de Evaso. Estes indicadores, conforme pode ser observado, seriam estritamente quantitativos e de relativa facilidade de mensurao, porm, muito importantes, na medida em que permitiriam um melhor controle da eficincia do programa e serviriam at mesmo como fonte de informaes para problemas ainda maiores do programa, como o caso da Taxa de Evaso. Vale observar que a importncia deste indicador foi muito enfatizada pelos responsveis pelo programa, j que, atualmente, a taxa alcanaria nveis de aproximadamente 25%, o que prejudicaria muito o andamento do programa e a consecuo dos objetivos. Este indicador, inicialmente apenas quantitativo, estimularia a busca pelas razes e motivos da evaso, como, por exemplo, o custo do transporte para se chegar Casa Transitria, enriquecendo muito o processo avaliativo. O responsvel pelos indicadores desta dimenso seria a gestora do programa, j que esta pessoa estaria em contato direto com estas questes, utilizando-se de documentos internos para a coleta de dados e em uma periodicidade trimestral. Por sua vez, a Dimenso do Processo seria constituda por indicadores obtidos atravs das prprias gestantes, ao final de cada curso, em um processo participativo composto por duas fases. Em uma primeira fase, alguns questionrios previamente elaborados seriam preenchidos pelas gestantes participantes do curso e, em uma segunda fase, seria realizado um grupo focal semi - estruturado com a participao das gestantes e de um facilitador. Os indicadores desta dimenso seriam: - Principal necessidade atendida; - Assuntos de maior interesse dos cursos;
10

- Grau de entendimento do contedo; - Percepo quanto ao instrutor; - Percepo quanto s instalaes e - Sugestes. O responsvel direto por esta dimenso seria o instrutor de cada turma, porm, no caso da conduo do grupo focal, este seria substitudo pela figura de um facilitador, evitando-se vieses cognitivos e outras influncias nas respostas das gestantes. Desse modo, os instrumentos de coleta de informaes seriam o questionrio e o grupo focal, ambos sendo aplicados ao trmino de cada turma. Assim, o grupo focal serviria como uma espcie de maior estimulao de participao das gestantes, ao invs da aplicao exclusiva e pouco interativa do questionrio. Finalmente, a dimenso do impacto social consistiria em indicadores qualitativos e um pouco mais custosos, entretanto, seriam essenciais para a constatao de resultados reais nas vidas das gestantes beneficirias. Alm disso, a existncia de pronturios preenchidos pelas gestantes e os relatrios de visitas realizadas ao seu domiclio constituiria importante fonte de informaes do marco zero da situao social das gestantes, o que serviria de base de comparao em relao situao social posterior participao no curso. Desse modo, a partir das diretrizes obtidas nas entrevistas com as gestantes e com os responsveis pelo programa, do contedo programtico dos cursos (vide anexos) e dos aspectos levantados nos pronturios e nos relatrios de visita como habitao, higiene e sade, relacionamento familiar, processos jurdicos, aspectos espirituais e necessidades materiais, foram elaborados os seguintes indicadores de impacto social: - Aspectos gerais de higiene; - Condies de sade; - Cuidados com o beb; - Relaes familiares. Esta dimenso reveste-se de importncia fundamental, na medida em que permite observar os resultados reais e concretos que o programa alcanou na vida das beneficirias. Os responsveis pela coleta de informaes seriam os mesmos assistentes sociais que realizam a triagem inicial e os mesmos colaboradores que realizam as visitas s casas das gestantes no incio do curso. Dessa forma, atravs do relatrio de visita ao final do curso, seria possvel comparar as situaes inicial e final social da gestante, ou seja, observar o impacto social alcanado pelo programa. A periodicidade da coleta destas informaes qualitativas ocorreria trs meses aps a concluso do curso pelas gestantes. Assim, atravs da definio deste projeto de avaliao, seria possvel para os responsveis pelo programa iniciarem um processo avaliativo e de aprendizagem contnuos, permitindo a definio mais clara dos objetivos do programa, um melhor controle e monitoramento das atividades, e uma constatao mais adequada e precisa dos efeitos concretos na vida das gestantes atendidas. importante observar que todo este processo de construo do projeto de avaliao foi realizado com a participao dos responsveis pelo programa e do pblico beneficirio, j que de outra forma no seria possvel identificar as necessidades e expectativas dos envolvidos no programa Orientao Maternal. Alm disso, este projeto de avaliao necessitar periodicamente de uma meta avaliao, ou seja, as pessoas diretamente envolvidas com o programa sero responsveis pelo prprio desenvolvimento e aprimoramento do processo avaliativo, j que este trabalho constituiu-se apenas de um ponto de partida do processo e de um meio de sensibilizao dos responsveis pela necessidade de avaliao sistemtica de programas sociais como o Orientao Maternal.

11

Consideraes Finais Ao longo do trabalho observou-se que os colaboradores da Casa Transitria um grande interesse e disponibilidade para a avaliao de resultados de seus projetos e programas. Enquanto algumas organizaes muitas vezes se mostram refratrias interveno de avaliadores, baseadas numa viso ainda punitiva da avaliao, a Casa demonstra uma significativa disponibilidade para rever o programa e implementar melhorias a partir do processo avaliativo. Alm disso, tambm observou-se que so as aes assistenciais do Programa aquelas que atraem o pblico para ele, tais como distribuio de alimentos e enxovais. As aes que procuram fortalecer as beneficiadas como cidads e que vo alm do assistencialismo trazem um benefcio que vai alm das expectativas iniciais das gestantes. Esta constatao nos leva a refletir sobre o papel do assistencialismo como medida necessria para a criao de condies mnimas de aprendizado e protagonismo de populaes extremamente carentes. O referencial terico utilizado nos levou a propor Casa um processo avaliativo altamente participativo, inclusivo e empoderativo. Entretanto, a Casa se mostrou ainda imatura neste tema e neste caminho, dando diversos indcios de que desejava que o projeto fosse desenvolvido e proposto pela nossa equipe, no papel de avaliadores e especialistas externos. Esta constatao nos sugere que prticas mais participativas de avaliao dependem de um amadurecimento da cultura de avaliao das entidades. Portanto, a proposta de avaliao foi elaborada levando em considerao a atual capacidade da organizao em absorver e efetivamente utilizar os mtodos propostos. Este trabalho deixa como uma perspectiva futura para a Casa o aprimoramento do processo avaliativo, podendo ser includas tcnicas mais inovadoras de coleta de dados com o pblico beneficiado, bem como o aprofundamento do estudo da evaso do Programa. Referncias Bibliogrficas ARMANI, D. Como elaborar projetos? Guia Prtico para Elaborao e Gesto de Projetos Sociais . Porto Alegre: Tomo, 2001. VILA, C.M. de Gesto de Projetos Sociais. So Paulo: AAPCS, 3 ed. rev., 2001. CHIANCA, T.; MARINO, E.; SCHIESARI, L. Desenvolvendo a cultura de avaliao em organizaes da sociedade civil. Coleo Gesto e Sustentabilidade. So Paulo: I. Fonte/Editora Global; 2001. FALCONER, Andres Pablo. A Promessa do Terceiro Setor um estudo sobre a construo do papel das organizaes sem fins lucrativos e do seu campo de gesto. Dissertao (Mestrado), FEA/USP, So Paulo, 1999. FERNANDES, Washington L. N. A Feesp promove a assistncia social: a Casa Transitria Fabiano de Cristo. So Paulo: Feesp, 2000. FISCHER, Rosa Maria. O desafio da colaborao prticas de responsabilidade social entre empresas e terceiro setor. So Paulo, Gente, 2002. HUDSON, Mike. Administrando Organizaes do Terceiro Setor: o desafio de administrar sem receita. So Paulo: Makron Books, 1999. LEX, Ary. 60 Anos de Espiritismo no Estado de So Paulo. So Paulo: Feesp, 1996. MARINO, E. Manual de Avaliao de Projetos Sociais So Paulo: IAS Pedagogia Social, 1a edio, 1998. MENDES, Luiz Carlos Abreu. Visitando o Terceiro Setor (ou parte dele). IPEA, Texto para Discusso n.647, Braslia, Maio 1999.

12

SILVA, R.R.; BRANDO, D.B. Os quatro elementos da avaliao. Fonte Instituto para o Desenvolvimento Social. Disponvel em www.fonte.org.br; Maio 2003. VALARELLI, L. Indicadores de resultados de projetos sociais. In: Apoio Gesto. Rio de Janeiro; site da RITS; 1999.

13