4
Dar particular atenção ao contexto e reagir às mudanças à medida que estas vão ocorrendo Sendo que o contexto conta na maioria das avaliações, é particularmente importante compreender a natureza e a influência do contexto em iniciativas complexas e em iniciativas em ambientes complexos. O contexto em avaliação envolve normalmente a compreensão de dimensões específicas: “características demográficas, materiais e económicas; o clima institucional e organizacional; dimensões interpessoais ou meios típicos de interação e normas para as relações nesse ambiente; dinâmica política, incluindo questões e interesses” (Greene, 2005, citado por Fitzpatrick, 2012, p. 9). Tendo em conta que as iniciativas complexas tendem a envolver múltiplos intervenientes e organizações, são implementadas ao longo de vários anos e, naturalmente, se adaptam respondendo à mudança de condições (desafios e oportunidades, bem como estímulos negativos e positivos), as avaliações precisam de obter informações sobre como a iniciativa e o seu contexto “coevoluem”. Por outras palavras, a avaliação deve não só estudar o contexto e a sua influência, mas também medir a forma como a iniciativa afeta o contexto. Isto inclui frequentemente a recolha de informações descritivas sobre a organização e/ou o ambiente político mais amplo, a história, as culturas, as normas sociais, os valores, as suposições e as expectativas, a situação económica anterior e atual da organização e/ou comunidade. Adicionalmente, os resultados da avaliação devem ser interpretados e assentes no contexto, registando o progresso e o impacto de uma iniciativa. Por exemplo, uma avaliação pode descobrir que um programa criado para oferecer bolsas de estudo leva a um aumento do custo da habitação na área dada a crescente procura por parte de famílias que querem aproveitar a oportunidade concedida. Os avaliadores teriam de ter este facto em consideração ao fazerem a avaliação sobre a eficácia e o impacto da iniciativa. Este processo recursivo (o contexto afeta a iniciativa e a iniciativa afeta o contexto) tipifica a forma como ocorre a mudança em contextos complexos e deve, por isso, ser estudado. O contexto é também fundamental para entender como, quando, de que forma e para quem a iniciativa pode ser replicada ou escalada. A compreensão das razões pelas quais uma iniciativa tem sucesso numa comunidade e se existem condições básicas noutra (por exemplo, a existência a priori de relações de trabalho positivas entre os participantes) é fundamental na avaliação da complexidade. Por fim, a recolha de informação sólida sobre o contexto de uma iniciativa auxilia os avaliadores a concluírem em que medida e como é que a iniciativa tem contribuído para os seus objetivos desejados, bem como o sistema tem respondido ao contexto, exibindo manifestações de resiliência ou atrofia. Colecionar informação sobre o contexto de uma iniciativa poderá passar pelo desenvolvimento de um cronograma de eventos-chave, nomeadamente de cultura popular, mudanças organizacionais, eleições políticas, introdução de novas políticas, crises a nível local, nacional e mundial, flutuações económicas ou desvios na “narrativa”. Os avaliadores deverão analisar a forma como a imprensa e os social media tratam os temas relevantes para a iniciativa, rever mudanças demográficas e outros dados disponíveis publicamente, e conduzir entrevistas com uma amostra de indivíduos que tenham uma longa experiência com a iniciativa ou com o tema principal a que a iniciativa se destina.
Avaliação em contextos de complexidade: propostas para melhorar práticas | Proposta IV
23