Caderno de Campo #11 — Nem todo impacto cabe numa planilha

Caderno de Campo #11 — Nem todo impacto cabe numa planilha

O que os números mostram — e aquilo que eles ainda não conseguem contar. É o que conversaremos nesse Caderno de Campo #11

Nos projetos culturais e sociais, chega um momento em que quase tudo precisa ser transformado em dado. Quantas pessoas participaram? Quantas atividades foram realizadas? Quantas escolas foram atendidas? Quantas horas de formação foram oferecidas? Quantos profissionais foram contratados? Quantas peças foram produzidas?

Essas informações são importantes. Elas ajudam no planejamento, no acompanhamento da execução, na prestação de contas e na verificação de metas. Também são fundamentais quando trabalhamos com recursos públicos, porque permitem demonstrar que aquilo que foi proposto realmente aconteceu.

Mas, nas últimas semanas, tenho pensado bastante sobre uma questão: esses números conseguem explicar o que um projeto realmente produziu?

Nem sempre.

Existe uma diferença importante entre comprovar que uma atividade aconteceu e compreender o que aconteceu com as pessoas que passaram por ela.

Entrega não é a mesma coisa que impacto

Se um projeto realizou oito apresentações, essas apresentações são entregas. Se uma oficina ofereceu quarenta vagas, cumpriu determinada carga horária e certificou seus participantes, temos informações concretas sobre sua execução. Se estudantes foram transportados para uma atividade cultural, também podemos registrar quantas pessoas participaram, de quais escolas vieram e quantas viagens foram realizadas.

Tudo isso importa.

O impacto, porém, começa em outro nível de análise: o que mudou porque aquela ação aconteceu? Por isso resolvi escrever esse Caderno de Campo #11.

Uma pessoa pode ter entrado pela primeira vez em um teatro. Um adolescente pode ter descoberto uma profissão que desconhecia. Uma criança pode começar a reconhecer um equipamento cultural como um espaço também destinado a ela. Uma formação pode gerar uma primeira oportunidade profissional. Um encontro pode criar uma relação que continue depois do encerramento oficial do projeto.

Nada disso aparece automaticamente quando registramos apenas “300 pessoas atendidas”.

Por isso, talvez seja importante separar duas perguntas: o que entregamos? e o que essa entrega produziu?

Os números continuam sendo fundamentais

Também não acredito que seja necessário escolher entre quantidade e qualidade.

Os indicadores quantitativos permitem compreender escala, alcance e até desigualdades. Se uma ação pública pretende ampliar o acesso à cultura, precisamos saber quem conseguiu participar, de quais territórios essas pessoas vieram, quais grupos estão chegando e quais continuam ausentes.

Da mesma forma, se um projeto previa atender cem pessoas e alcançou apenas dez, existe uma diferença que precisa ser compreendida. Se uma formação começa com cinquenta participantes e termina com quinze, o dado pode revelar algo sobre permanência, condições de participação ou adequação da metodologia.

O problema não está na planilha.

O problema aparece quando tratamos aquilo que conseguimos contabilizar como se fosse a totalidade do resultado.

Número mede uma dimensão do projeto. Não todas.

Algumas transformações aparecem na experiência

Na quinta edição do Teatro é Popular, por exemplo, existia toda uma estrutura mensurável: número de apresentações, estudantes atendidos, escolas participantes, profissionais envolvidos, transporte, acessibilidade e programação realizada.

Mas, durante a execução, havia também coisas que não apareciam imediatamente nesses indicadores. É o que quero abordar nesse Caderno de Campo #11

A reação de uma criança durante um espetáculo. A conversa com uma professora. A percepção de um adolescente sobre o espaço onde estava. O comentário de alguém que nunca havia participado de uma experiência semelhante.

Esses registros não substituem os indicadores formais, mas ajudam a compreender outra dimensão do projeto: a experiência vivida.

E isso me fez pensar que talvez precisemos criar melhores formas de observar justamente aquilo que acontece entre a atividade realizada e o significado que ela ganha para quem participa.

Avaliar também é fazer perguntas melhores

É comum terminarmos uma atividade perguntando se a pessoa gostou.

A resposta pode ser útil, mas é limitada.

Talvez outras perguntas tragam informações mais interessantes: o que chamou sua atenção? Você já havia participado de algo parecido? Houve alguma coisa que descobriu durante a atividade? Você voltaria a esse espaço? O que contaria para alguém sobre essa experiência?

Para professores, organizações ou equipes parceiras, as perguntas podem ser diferentes: aquela ação dialogou com o público esperado? Quais barreiras apareceram? O que facilitou a participação? Houve alguma mudança perceptível? O que deveria ser revisto em uma próxima edição? São muitas reflexões que não cabem só nesse Caderno de Campo #11.

Quando fazemos isso, a avaliação deixa de funcionar apenas como comprovação do que já aconteceu e passa a cumprir outra função: produzir conhecimento para orientar decisões futuras.

Escuta também produz evidência

Tenho me aproximado cada vez mais dessa discussão nos estudos sobre políticas públicas e projetos sociais.

Planejamento, execução, monitoramento e avaliação fazem parte de um mesmo ciclo. A avaliação não deveria entrar somente no final, como uma etapa burocrática destinada a preencher indicadores. Ela pode acompanhar o projeto e ajudar a compreender seus efeitos durante o próprio processo.

Para isso, precisamos combinar métodos. E agora chegamos ao objetivo desse Caderno de Campo #11.

Planilhas, frequência, metas e indicadores são uma parte. Entrevistas, relatos, observação, fotografias, depoimentos e registros das equipes são outra.

Cada instrumento responde a uma pergunta diferente.

Uma lista de presença pode mostrar quantas pessoas chegaram. Uma conversa pode ajudar a entender por que elas chegaram, quais dificuldades encontraram e se aquela experiência produziu interesse em retornar.

Uma informação complementa a outra.

No audiovisual também avaliamos muito pelo que conseguimos contar

Essa reflexão também vale para o audiovisual.

Podemos medir uma obra por orçamento, duração, tamanho da equipe, sessões realizadas, festivais, visualizações ou público alcançado. Esses dados ajudam a compreender circulação e alcance.

Mas existem efeitos culturais que são mais difíceis de capturar, por isso trouxe essa reflexão nesse Caderno de Campo #11.

Um filme pode preservar uma memória, fazer alguém se reconhecer em determinada história, provocar uma discussão em uma escola, aproximar gerações ou despertar interesse por um patrimônio cultural.

Às vezes esses efeitos acontecem muito tempo depois da finalização da obra, em lugares onde quem produziu jamais estará presente para registrar.

Isso cria um desafio importante para projetos culturais: parte do resultado pode aparecer depois do encerramento formal da execução.

Também precisamos ter cuidado com a palavra “impacto”

Impacto se tornou uma palavra muito presente em projetos.

Falamos em impacto social, cultural, econômico, territorial.

Mas existe uma diferença entre declarar uma intenção de impacto e demonstrar que alguma transformação realmente aconteceu.

Não podemos afirmar que um projeto transformou uma realidade apenas porque essa era sua intenção inicial.

Precisamos procurar evidências. Algumas listadas aqui no Caderno de Campo #11.

E essa busca inclui reconhecer resultados positivos, mas também problemas, limites e efeitos inesperados.

Talvez uma ação tenha alcançado muita gente, mas criado pouca continuidade. Talvez um projeto pequeno tenha estabelecido vínculos muito mais fortes do que esperávamos. Talvez determinada estratégia de comunicação tenha falhado. Talvez o público que imaginávamos não tenha chegado.

Avaliar significa também estar disposto a descobrir resultados diferentes daqueles que gostaríamos de apresentar.

Isso não enfraquece necessariamente um projeto.

Pode torná-lo mais consistente.

Do cumprimento de metas ao aprendizado

Tenho tentado acrescentar uma pergunta ao final dos projetos em que trabalho:

o que aconteceu aqui que não estava previsto na meta?

A meta nos ajuda a responder se fizemos aquilo que prometemos.

A avaliação permite perguntar o que aconteceu porque fizemos.

São questões diferentes e complementares.

Precisamos saber quantas pessoas participaram, mas também compreender como participaram.

Precisamos registrar quantas atividades foram realizadas, mas também observar se elas produziram vínculo, aprendizagem, acesso ou continuidade.

Precisamos acompanhar orçamento, cronograma e indicadores.

Mas também precisamos escutar.

Porque projetos são planejados em documentos, mas são vividos por pessoas.

E talvez seja justamente por isso que nem todo impacto cabe numa planilha, como diz o título desse Caderno de Campo #11.

E no seu projeto: o que você está medindo?

Na Cinese, temos trabalhado cada vez mais com projetos audiovisuais, culturais e de impacto social considerando não apenas execução e entrega, mas também público, participação, acesso, acompanhamento, avaliação e legado.

Se você está estruturando uma iniciativa e precisa organizar objetivos, indicadores ou formas de acompanhar seus resultados, esse pode ser um ponto de partida para uma Sessão Estratégica ou consultoria.

Espero que tenha gostado desse Caderno de Campo #11.

→ Conheça as consultorias da Cinese

Porque executar bem um projeto é fundamental.

Entender o que ele produziu é o que permite melhorar o próximo.

Assista aos resultados que já alcançamos:
https://www.youtube.com/@CineseAudiovisual