Para uma utilização integrada das metodologias de avaliação
Definições de avaliação:
1. “Avaliar é comparar num momento determinado o que se conseguiu através da acção, com o que se devia ter alcançado de acordo com a planificação prévia” (Vergara, 1993: 14).
2. “Avaliação é um julgamento sistemático do valor ou do mérito de um objecto” (Stufflebeam e Shinkfield, 1995: 19).
Objectivo central da avaliação:
Medir os efeitos de um programa ou projecto por comparação com as metas que se propôs alcançar, em vista a contribuir para a tomada de decisões sobre o projecto e para melhorar a programação futura (Weiss, 1975).
Funções da avaliação:
i) Diagnóstico
ii) Preditiva
iii) Orientadora
iv) De controlo
O que vamos avaliar?
i) Avaliação das necessidades
ii) Avaliação do desenho (diagnóstico)
iii) Avaliação do desempenho
iv) Avaliação por objectivos
v) Avaliação das competências
vi) Avaliação da transferência (pós-formativa)
Quem faz a avaliação?
i) Avaliação externa
ii) Avaliação interna
iii) Avaliação mista
Segundo os momentos:
i) Avaliação do diagnóstico
ii) Avaliação processual
iii) Avaliação final
iv) Avaliação pós-acção
Avaliação do diagnóstico:
Implica um estudo do contexto onde se desenrola a formação, no sentido de detectar in loco os indicadores que põem de relevo situações problemáticas ou passíveis de melhoria
Avaliação do processo:
i) Utilizar técnicas de investigação para recolher o máximo de informação sobre o processo em curso
ii) Utilizar instrumentos regulares de avaliação das acções
iii) Emitir juízos de valor sobre todo o processo
Avaliação final:
Implica uma síntese que combine todos os elementos obtidos através das avaliações anteriores. Analisando os resultados chagamos a uma apreciação global que nos diz o que foi conseguido com a formação em causa.
Avaliação pós-acção:
i) Mudança e transferência da mudança à prática
ii) Organizar sistema de observação / inquérito que nos permitir saber em que medidas as mudanças conseguidas pelo projecto foram ou não incorporadas na prática
Instrumentos de avaliação:
i) Análise estatística
ii) Análise de documentos
iii) Inquérito por questionário
iv) Inquérito por entrevista
v) Observação das actividades / tarefas/ etc.
vi) Avaliação por parte da equipa executora
vii) Avaliação por parte dos participantes ou beneficiários, directos ou indirectos, do projecto
viii) Follow-up
Modelos tradicionais de avaliação:
i) Avaliação orientada para os objectivos (geralmente mais quantitativo)
ii) Avaliação para a tomada de decisões:
- Três propósitos: servir de guia para a tomada de decisões; obtenção de dados para a responsabilização; compreender os fenómenos para aperfeiçoar o projecto.
- Estipula 4 passos a seguir: Avaliação do contexto com vista a estabelecer de forma segura objectivos específicos para planificar; Avaliação de input para saber como começar a acção, que estratégias empregar, etc.; Avaliação do processo; Avaliação do produto
iii) Modelo de discrepância: centra-se na comparação entre a execução e a realização prática. Passos: desenho, implantação, processo, produto e comparação. O último passo centra-se nas análises de custo / benefício.
Modelos alternativos:
A. Avaliação respondente (Stake (1975), Guba e Lincoln (1982):
i) Centra-se no processo
ii) Também se chama reactivo, opondo-se à avaliação como algo pré-estabelecido
iii) Pretende obter um cenário completo e holístico
iv) Geralmente é levado a cabo pelos agentes da acção
v) Principais passos: Rever as actividades; Descobrir o propósito do projecto; Identificar as categorias para determinar o método de avaliação; Seleccionar os observadores e os instrumentos; Realizar estudos de casos para entender os dados em profundidade; Redigir os relatórios e as recomendações correspondentes.
B. Avaliação democrática:
i)Dirigido à mudança de todos os participantes no projecto
ii)Todos participam na avaliação, na interpretação dos dados, nas decisões sobre o desenho da avaliação, etc.
iii)Implica uma participação responsável dos avaliadores e dos avaliados, que formam uma equipa
iv)Técnicas mais utilizadas: observação, entrevistas, debates, questionários, etc.
A Integração dos Educadores Sociais em Contexto Comunitário
Formas de melhorar a integração – nível comunitário
i)Adoptar uma postura humilde, ouvinte, pouco interventiva
ii)Realizar um estudo prévio estatístico / documental e histórico sobre o território
iii) Identificar os principais actores sociais e as principais instituições
iv)Vagabundear
v) Frequentar os espaços públicos onde se criam as normas / valores comunitários (produzindo registos, como por ex. diário de campo)
vi) Insistir sempre nas vias informais de relação entre as pessoas
vii)Não julgar nem fazer juízos de moral até obter uma compreensão mínima do território, das pessoas, dos modos de básicos de funcionamento das relações entre elas, etc.
Formas de melhorar a integração – nível institucional
i)Adoptar uma postura humilde, ouvinte, pouco interventiva
ii)Realizar um estudo prévio sobre a instituição, e sobre os seus principais parceiros
iii)Conhecer a cultura particular da organização / instituição / entidade
iv)Identificar os actores sociais mais influentes na organização
v)Conhecer bem o organograma da instituição e os seus canais formais de funcionamento
vi) Gradualmente, conhecer as formas informais de funcionamento que podem não coincidir com as formais, aprendendo a navegar da forma mais eficiente, sem prejudicar nenhuma delas.
vii)Não julgar nem fazer juízos de moral até obter uma compreensão mínima do território, das pessoas, dos modos básicos de funcionamento das relações entre elas, etc.
Redes Sociais: a sua utilidade para os Educadores
A perspectiva centrada nas redes sociais inclui uma série de pressupostos (Wasserman e Faust, 1994)[1]:
i)Os actores sociais são vistos nas suas relações de inter-dependência e não como unidades autónomas.
ii)As suas relações implicam canais para a transferência ou fluxo de recursos diversos, como por exemplo informação, dinheiro, amizade, etc.
iii)O ambiente estruturante da rede pode conceder oportunidades ou, pelo contrário, constrangimentos à acção.
iv)A investigação centrada sobre redes sociais conceptualiza a estrutura como padrões de relação entre os mais distintos actores sociais.
[1] Wasserman, S., & Faust, K. (1994). Social Network Analysis: Methods and Applications. New York: Cambridge University Press.
O apoio social que os indivíduos de uma rede podem receber e ceder é função dos seguintes factores (Walker et al. (1994)[1]:
i)Dimensão: Quanto maior a rede, maior o nº de membros que cedem a outros ajuda emocional. Bens e serviços, etc. Quanto maior a rede, maior a percentagem de indivíduos que recebem apoio social.
ii)Densidade: definida pela relação entre as ligações construídas e as potencialmente possíveis. A investigação não é conclusiva quanto à densidade da rede. Algumas redes menos densas podem mostrar-se mais satisfatórias, dependendo do tipo de links existentes.
iii)Centralidade e Status, referindo-se à proeminência relativa de membros individuais dentro das redes. Uma certa pessoa é central se estabelece muitas relações e o seu Status pode variar.
[1] Walker, M. E., Wasserman, S., & Wellman, B. (1994). Statistical Models for Social Support Networks. In Stanley Wasserman & Joseph Galaskiewicz (eds.), Advances in Social Network Analysis. Research in the Social and Behavorial Sciences (pp. 53-78). Thousand Oaks: Sage.
Para a definição das configurações particulares das redes, será assim preciso definir os seguintes pontos (Fragoso e Lucio-Villegas, 2004)[1]:
i)A sua dimensão total
ii)As sub-redes em que a rede total se fragmenta e o estado de fragmentação resultante.
iii)Os fluxos de informação, dinheiro, serviços, etc., não só nas sub-redes, como também na rede total. Há zonas das redes mais sensibilizadas? Há zonas inacessíveis?
iv)O efeito de competição no espaço social no caso de redes de pequena dimensão.
v)Os efeitos de todos estes factores sobre os MODOS DE COOPERAÇÃO.
[1] Fragoso, A., & Lucio-Villegas, E. (2004). Social networks research in southern local development: An analysis to overcome theoretical and practice constrains. In Between Old and New Worlds of Adult Learning, 4th ESREA European Research Conference (pp. 41-57). Wroclaw: University of Wroclaw / University of Lower Silesia.
Vantagens que o bom conhecimento das redes sociais pode trazer:
i)Aprofunda o conhecimento dos actores sociais e das várias instituições do território.
ii)Melhora-se o conhecimento sobre os modos típicos de relação entre as pessoas, entre as sub-redes, entre os mecanismos típicos de fluxos de informação, serviços ou bens.
iii)O educador pode exercer uma acção mediadora mais eficaz, se achar por bem realizá-la ou se não conseguir evitá-la
iv)O educador ganha uma clara percepção dos possíveis pontos de bloqueio da acção na rede que tem ao dispor
v)Permite que os mecanismos de cooperação sejam mais adequados
vi)Evitam-se, se possível, bloqueios por efeitos de competição no espaço social
***
CONSTRUÇÃO DE PROJECTOS SOCIAIS DE INTERVENÇÃO
O que implica um projecto social de intervenção?
Uma reflexão rigorosa sobre o problema social concreto que pretendemos melhorar.
Tomar consciência das múltiplas necessidades e, uma vez estudada a realidade social, escolher um problema concreto bem como uma previsível solução.
Elaborar um desenho o mais completo possível, sistemático e reflexivo.
Aplicar à prática com a finalidade de a transformar.
Abertura e flexibilidade na aplicação.
Originalidade e criatividade na elaboração.
Partir sempre da prática e da óptica de quem vive o problema, como o vive e como vislumbra as possíveis soluções.
Programar a acção através de um projecto
O que se quer fazer? = Natureza do projecto
Porque se quer fazer? = Origem e fundamentos
Para que se quer fazer? = Objectivos
Quanto se quer fazer? = Metas
Onde se quer fazer? = Localização física
Como se quer fazer? = Actividades /técnicas/métodos
Quem vai fazer? = Recursos humanos
Com que se quer fazer? = Recursos materiais / financeiros
Natureza do Projecto (Explicitar)
A ideia central do projecto
A origem da ideia ou a necessidade que a origina (inexistência de estruturas, de serviços, aplicação de planos específicos, etc…)
Fundamentação (Explicitar)
Os antecedentes para chegar ao diagnóstico
Dados estatísticos / qualitativos
Elementos que justifiquem a estratégia
Previsões sobre a evolução da situação problemática
Justificação filosófica e técnica
Objectivos (Explicitar)
Objectivos gerais (claros, realistas, pertinentes)
Dentro de cada um deles, os objectivos específicos – de forma a que possam ser avaliados.
Metas
Uma meta não passa de um objectivo quantificado e qualificado. Formular uma meta é assinalar quanto queremos alcançar de cada objectivo e a qualidade do que queremos alcançar.
As metas devem ser realistas levando em conta os meios possuídos.
Metodologia
Descrever o processo, se possível por etapas.
Enumerar e explicar os passos técnicos ou outros.
Definir as tarefas, normas e procedimentos para a execução.
Elaborar um calendário integrado.
Recursos
Humanos: descrever a quantidade e qualidade das pessoas necessárias para a execução das tarefas, atribuindo responsabilidades e não esquecendo a avaliação.
Materiais: Instalações necessárias, materiais, equipamentos, instrumentos, etc.
Financeiros: Orçamento e financiamento.
Fases de desenho de um projecto social de intervenção:
Diagnóstico:
-detectar necessidades /prioridades
-fundamentar
-delimitar problema
-localizar o projecto
-rever a bibliografia
-prever a população
-prever os recursos
Planificação:
-objectivos
-metodologia
-temporalização
-recursos
Execução:
-desenvolvimento do projecto
-seguimento do projecto
-controle do projecto
Avaliação:
-avaliação do diagnóstico
-avaliação do processo
-avaliação final
Relatório Final
***
ESCOLA SUPERIOR DE EDUCAÇÃO E COMUNICAÇÃO
| CURSO DE EDUCAÇÃO SOCIAL – 1.º CICLO (diurno) |
FICHA
Unidade Curricular: Metodologias de Intervenção Comunitária
Área Científica: Metodologias Científicas
Ano Lectivo: 2009-2010 / Ano: 2º / Semestre: 1º
Créditos ECTS: 6 / Distribuída: com exame final
Tempo Horas Contacto: 24T; 20TP; 4OT / Tempo Trabalho Total (horas): 168
Professor responsável: Helder Faustino Raimundo (gabinete 88)
Resumo descritivo
Esta unidade pretende abordar a diversidade de técnicas e instrumentos que se enquadram num conjunto que podemos designar de metodologias de intervenção de enfoque comunitário. Abordaremos os antecedentes sociológicos desta tipologia de intervenção. E aprofundaremos os dois modos mais conhecidos de investigação interventiva: a investigação-acção e a investigação participativa. Veremos, ainda, os métodos mais consentâneos de intervenção nas comunidades, através da metodologia de projecto.
Competências a desenvolver
Instrumentais:
Conhecer as diversas metodologias de intervenção comunitária
Saber adequar a acção a cada contexto social
Dominar a construção de projectos de intervenção social
Ter uma actuação prática de estímulo à participação e à mudança
Interpessoais:
Ter uma acção agregadora e de interacção grupal
Desenvolver criatividade, autonomia e participação dos indivíduos
Conhecer, respeitar e estimular as redes sociais locais
Sistémicas:
Desenvolver a participação e a acção local das comunidades
Estimular as redes de parceria e de organização comunitária
Aplicar uma visão global nos problemas locais
Conteúdos Programáticos
a) Metodologias de intervenção em contexto comunitário:
A sociologia de intervenção; o papel do diagnóstico no contexto da intervenção; a construção de projectos sociais; função do educador; dos métodos clássicos à metodologia participada; o auto-diagnóstico comunitário e institucional.
b) As metodologias de investigação-acção (IA):
Os precursores e a história da IA; as várias correntes a partir dos anos 70 do século passado.
c) A investigação participativa (IP):
Origem e evolução da IP; dimensões e características; a metodologia da IP; exemplos de IP.
Estratégias / Métodos de Ensino-Aprendizagem
Exposição e debate; leitura e discussão de textos; trabalho em grupo e de auto-formação individual.
Resultados esperados de aprendizagem
Conhecer a origem e evolução histórica das metodologias de intervenção social
Dominar a técnica de construção de projectos sociais
Saber conduzir um diagnóstico social clássico e um auto-diagnóstico participativo
Ter uma acção deontológica respeitadora dos indivíduos, grupos e redes sociais locais
Conhecer a história da IA e o seu papel no desenvolvimento das metodologias participativas
Conhecer os principais aspectos da investigação participativa
Saber conduzir uma intervenção de enfoque participativo
Ter uma visão sistémica e global sobre a realidade local de cada contexto comunitário
Saber desenvolver uma acção mobilizadora das energias, redes e autonomias de cada local
Métodos de avaliação
a) Redacção de um trabalho individual sobre um ou mais pontos da alínea a) dos conteúdos programáticos, com o máximo de 1000 palavras, a entregar em papel na última aula antes das férias do Natal (50%);
b) Trabalho colectivo (3 ou 4 pessoas) sobre as alíneas b) ou c) dos conteúdos programáticos, com o máximo de 3000 palavras, a entregar em papel na última semana de aulas (50%).
Nota: os trabalhos referidos devem respeitar as Normas dos Trabalhos Académicos do curso.
Bibliografia básica
Carmo, H. (1999). Desenvolvimento Comunitário. Lisboa: Universidade Aberta.
Claves (1991). De Quién es
Cordioli, S. (2001). Enfoque Participativo: um processo de mudança. Conceitos, Instrumentos e Aplicação Prática. Porto Alegre: Génesis.
Delorme, C. (1985). De
Gabarrón, L. R. & Hernández Landa, L. (1994). Investigación Participativa. Madrid: Centro de Investigaciones Sociológicas.
Guerra, I. C. (2002). Fundamentos e Processos de uma Sociologia de Acção. O planeamento
Lucio-Villegas, E. (1993).
Pérez Serrano, G. (2008). Elaboração de Projectos Sociais. Casos práticos. Porto: Porto Editora.
Pérez Serrano, G. (2000). Modelos de Investigación Cualitativa en Educación Social y Animación Sociocultural. Aplicaciones prácticas. Madrid: Narcea.
Prieto, D. (1988). El Autodiagnóstico Comunitario e Institucional. Buenos Aires: Humanitas.
Quintana Cabanas, J. M. (1986). Investigación Participativa. Educación de Adultos. Madrid: Narcea.
Silva, M. I. (1996). Práticas Educativas e Construção de Saberes. Metodologias de investigação-acção. Lisboa: Instituto de Inovação Educacional.
Observações / Sugestões
Aconselha-se a leitura atenta do Regulamento Geral de Avaliação da Universidade do Algarve
