Orientação sobre depoimentos e declarações para comprovar o impacto

Compartilhe!
estudos de caso de impacto para incluir evidências de impacto. Essa evidência pode assumir muitas formas, quantitativa ou qualitativa. Declarações de usuários de pesquisa, partes interessadas e beneficiários podem ser uma poderosa forma de evidência qualitativa, " data-share-imageurl="http://observatorio.fiocruz.br/sites/default/files/kelly-sikkema-382044-unsplash.jpg">

Por  LSE Impact Blog* 
 

Uma das formas mais convincentes de evidência submetidas ao REF2014 pelas universidades que buscam demonstrar o impacto da pesquisa foi a afirmação corroborativa ou o depoimento de um usuário de pesquisa ou organização parceira.Stephen Kemp fornece orientações claras sobre o que essas declarações devem incluir e têm como objetivo transmitir, ao mesmo tempo em que compartilham conselhos sobre como elas podem ser obtidas, bem como outras considerações mais facilmente negligenciadas.

A avaliação de impacto REF requer estudos de caso de impacto para incluir evidências de impacto. Essa evidência pode assumir muitas formas, quantitativa ou qualitativa. Declarações de usuários de pesquisa, partes interessadas e beneficiários podem ser uma poderosa forma de evidência qualitativa, como visto no REF 2014 (veja  aqui  uma tentativa de analisar as ligações entre os tipos de evidências e os resultados dos estudos de caso de impacto). Para o próximo REF, temos a oportunidade de coletar essas declarações à medida que avançamos e este guia deve facilitar essa coleta de declarações.

O que incluir

Em declarações gerais deve:

  1. Seja escrito no papel timbrado da organização externa (ou em um e-mail de aparência profissional).
  2. Ser assinado por alguém em um nível apropriado. Isso variará de acordo com o estudo de caso, mas as considerações devem incluir antiguidade versus conexão com a pesquisa (por exemplo, a declaração deve vir de seu contato direto, a pessoa responsável pela área ou o chefe da organização?), Maturidade de relacionamento, reputação e conflitos de interesse.
  3. Nomeie o pesquisador e refira-se à pesquisa (pode ser em termos descritivos, citação de um resultado de pesquisa, nome do programa de pesquisa - o que quer que seja mais apropriado).
  4. Descreva como a organização “encontrou” a pesquisa / pesquisador.
  5. Descreva como isso se encaixa nas atividades, estratégias, necessidades, desafios, oportunidades e outros fatores da organização.
  6. Descreva como a pesquisa / conhecimento / habilidades foram colocadas em ação ou usadas - por exemplo, a organização trabalhou com o acadêmico (talvez por meio de pesquisa encomendada, consultoria, concessão de transferência de conhecimento, trabalho de consultoria, outras atividades conjuntas); eles usaram a pesquisa em sua tomada de decisão? eles treinaram seus funcionários de acordo com a pesquisa?
  7. Descreva o que aconteceu como resultado do uso da pesquisa / conhecimento / habilidades ou trabalho com o pesquisador - por exemplo, eles produziram diretrizes para a prática; foram eles melhor informados na tomada de decisões estratégicas; a prestação de serviços foi melhorada diretamente?
  8. Descreva o impacto resultante deste trabalho - qual foi o benefício de usar a pesquisa / conhecimento ou trabalhar com o pesquisador? Inclua indicadores quantitativos ou qualitativos para mostrar o impacto - ou seja, como eles sabem que foi benéfico. Eles também poderiam dizer onde eles estariam se não  tivessem usado a pesquisa. Esta é a parte mais importante da declaração, pois é onde o impacto é realmente articulado (e qualquer evidência quantitativa / qualitativa que a organização forneça pode ser citada no estudo de caso e tecida na narrativa).
  9. Diga algo sobre o futuro - o que vem a seguir nesta linha de trabalho? Eles prevêem benefícios contínuos e crescentes? Eles vão trabalhar com o pesquisador novamente? Eles estarão mais abertos a usar pesquisas acadêmicas no futuro? Talvez eles mudem a maneira como operam como resultado do trabalho impactante.

Crédito da imagem: Kelly Sikkema , via Unsplash (licenciado sob uma   licença CC0 1.0 ).

Como recolher depoimentos

A primeira (e de longe a melhor) opção é colocar a lista acima em suas próprias palavras (de modo que não soa muito como uma lista de verificação) e usar isso para solicitar uma declaração do seu parceiro. Você poderia colocá-lo por escrito e deixá-los responder de acordo ou você poderia usar isso como base de uma conversa / entrevista. A beleza da última abordagem é que você pode explorar e esclarecer e pode descobrir outras informações relevantes.

Em segundo lugar, você poderia usar a lista acima como uma lista de verificação / questionário. Eu não recomendaria essa abordagem. Pode economizar tempo, mas é improvável que você obtenha a riqueza ou a autenticidade de uma interação mais pessoal / personalizada. Não vai fortalecer o seu relacionamento com a organização e pode até danificá-lo.

Finalmente, em alguns casos, pode ser necessário escrever a declaração e entregá-la ao parceiro para assinar. Isso não é recomendado, pois você perde a voz autêntica e pode perder algum aspecto do que tornou o trabalho tão valioso (incluindo, possivelmente, alguma informação extra que os parceiros teriam incluído se tivessem que escrever eles mesmos). Além disso, há um risco muito real de que, se o acadêmico escrever várias dessas cartas para diferentes parceiros assinarem, todas elas acabariam parecendo fundamentalmente as mesmas, o que prejudica a credibilidade das mensagens. Considere como você veria isso como um avaliador.

Outras considerações

  • Certifique-se de que a pessoa que fornece a declaração saiba para que serve e tenha autoridade para oferecê-la.
  • Observe as políticas relevantes de gerenciamento de dados e ética ao coletar, armazenar e usar essas informações.
  • No REF2014, algumas organizações foram sobrecarregadas com pedidos de depoimentos até o ponto em que os relacionamentos foram afetados e, em alguns casos, eles simplesmente se recusaram a fornecer depoimentos. É nesse ponto que os relacionamentos fortes realmente contam, portanto, concentre-se em interações duradouras, em vez de superficiais, com as partes interessadas e os parceiros.
  • Algumas organizações estarão preocupadas com a confidencialidade. Embora atualmente não saibamos como isso funcionará para os estudos de caso de impacto e as evidências no REF2021, havia provisões para isso no REF2014, portanto, podemos esperar algo semelhante no REF2021.
  • Não espere para obter depoimentos. Os detalhes, a natureza e o valor dos impactos podem se tornar embotados com o tempo, então pule neles enquanto estiverem frescos. Além disso, você nunca sabe onde as pessoas estarão em alguns anos.

Exemplos

Essas declarações não são apenas uma fonte a ser referenciada - você pode usar citações de escolha para contar a história e ilustrar os resultados. Aqui estão alguns exemplos do REF2014 mostrando os tipos de coisas ditas em depoimentos e como elas podem ser tecidas na narrativa. Todos eles são da UoA 22 (Serviço Social e Política Social) só porque eram úteis. Você encontrará exemplos semelhantes nos UoAs.

1. De “ Melhoria da política e programação baseadas em evidências para crianças afetadas pela AIDS na África Subsaariana ”:

Isto é evidenciado por um comentário de um Conselheiro Regional de HIV e AIDS da Save the Children: “Ao compartilhar evidências rigorosas sobre como as crianças afetadas pelo HIV enfrentaram vulnerabilidades crescentes ao longo do tempo, o Dr. Cluver envolveu importantes formuladores de políticas, doadores e implementadores de programas. criticamente "repensar" e redesenhar os programas com ênfase na medição eficaz dos resultados. Com base na pesquisa do Dr. Cluver, o UNICEF, PEPFAR lançou novas orientações técnicas (UNICEF: From Evidence to Impact; PEPFAR: OVC Guidance: 2012) para implementadores de programas. Seu trabalho é um testemunho de como a pesquisa rigorosa é a base para a programação eficaz ... um exemplo claro de como uma verdadeira parceria entre pesquisadores, formuladores de políticas e implementadores pode resultar em programas que realmente fazem a diferença na vida das crianças ”.

Um consultor sênior do PEPFAR também declarou: “Eu citei os dados do Dr. Cluver mais do que qualquer outra pesquisa para apoiar nosso trabalho e também para justificar e definir políticas para o nosso portfólio global. Todos os dados apresentados a partir desses estudos têm sido influentes, no entanto, de particular influência foram os dados discutidos em Cluver [et al] (2011) e 2012. ”

2. De “ Reduzir o comportamento anti-social infantil através de intervenções parentais eficazes: impacto internacional sobre políticas, profissionais e famílias ”:

Conforme explicado pelo então vice-diretor da Força-Tarefa de Exclusão Social no Gabinete, que desempenhou um papel importante na condução de novas políticas trabalhistas sobre intervenções precoces entre parentescos no final dos anos 2000:  “Apoio desde o início” e os testes de Gardner no Reino Unido foram altamente influentes na criação de impulso para estes desenvolvimentos políticos importantes, incluindo o lançamento muito substancial liderado pela Academia Nacional de Profissionais de Parenting (NAPP) a partir de 2008 .

O fundador e diretor de pesquisa do NAPP acrescenta a isso: “ A pesquisa de Gardner foi fundamental para ajudar a persuadir o Gabinete a criar o NAPP. Seu julgamento foi o primeiro no mundo a mostrar que os programas para pais podem ser eficazes na redução do comportamento antissocial severo, fora dos estreitos limites dos serviços de saúde mental infantil, mostrando que o setor voluntário poderia fazer um trabalho tão bom quanto os casos difíceis. Influenciado por essas descobertas, o governo concedeu £ 35 milhões ao NAPP para disseminar programas parentais baseados em evidências em todo o setor voluntário; estima-se que isso tenha beneficiado mais de 150.000 crianças; Gardner foi um membro importante de seu grupo de direção para garantir que esta pesquisa fosse implementada ”.

A pesquisa da equipe de Gardner é freqüentemente citada em revisões sistemáticas influentes, diretrizes e documentos de políticas. Por exemplo, quatro dos ensaios foram citados nas diretrizes do NICE (Instituto Nacional de Saúde e Excelência Clínica); o Presidente confirma sua influência política: “ Como presidente da NICE Guideline sobre comportamento anti-social e transtornos de conduta, supervisionei a organização das evidências que devem ser relevantes para a prática britânica, e o trabalho de Gardner foi importante na formulação das recomendações, pois que as intervenções funcionam na Grã-Bretanha - nem todas as intervenções psicossociais desenvolvidas nos EUA fazem isso. O trabalho deles também contribuiu para a plausibilidade das recomendações, uma vez que demonstrou que o mecanismo de mediação foi um aumento na parentalidade positiva ”.

 3 De “ Política e prática de prevenção do crime situacional ”:

Uma carta do Ministério do Interior declara: “ O trabalho do Departamento e sua defesa e perícia nas estratégias situacionais de prevenção ao crime são bem conhecidas pelos funcionários responsáveis ​​pela política de Crime no Ministério do Interior e pelos especialistas de minha própria área, Office Science, cuja tarefa é assegurar que fornecemos a melhor evidência na qual basear a evolução das políticas ”. Como exemplo, nota-se que “ em um recente dia de fórum” ele [Wortley] liderou uma sessão sobre prevenção de roubo da pessoa, que é um dos únicos tipos de crime que aumentou recentemente e, em particular, enfocou a Precisamos converter boas ideias de prevenção em políticas e práticas concretas ”.

A Polícia da Nova Zelândia explicitamente credita à SCS um papel significativo na definição de suas estratégias de crime e na ajuda para reduzir o crime:  “O Instituto Jill Dando (JDI) fez uma contribuição significativa para o desenvolvimento da ciência do crime e do policiamento na Nova Zelândia. Somos gratos à equipe e associados da JDI que aumentaram nossa base de conhecimento, contribuíram para o desenvolvimento de nossos principais produtos e ajudaram fundamentalmente a desenvolver a mentalidade da Polícia da Nova Zelândia nos últimos 10 anos ... Nos últimos quatro anos, conseguimos reduções consideráveis no crime, em um cenário de níveis muito altos (e melhores) de confiança e confiança pública na Polícia ”.

O valor prático da pesquisa é reconhecido pela Agência: “ De particular valor nos últimos anos tem sido o trabalho realizado pelo Departamento em torno do tema do Tráfico Interno do Tráfico Infantil (ICST) ... Em 2010, a SOCA apoiou ativamente dois projetos de pesquisa realizados. pela professora Gloria Laycock com dois alunos de mestrado, Ella Cockbain e Helen Brayley. Um projeto examinou as redes sociais de infratores e vítimas e o outro desconstruiu a ofensa em uma 'escrita de crime'. A pesquisa tem sido influente em ajudar a moldar a resposta da SOCA ao ICST ”.

Espero que isso seja útil. Se você tem alguma experiência ou dicas de sua preferência, por favor, compartilhe!

Este post originalmente apareceu no blog pessoal do autor  e foi republicado com permissão.

Nota: Este artigo fornece as opiniões do autor e não a posição do Blog de Impacto do LSE, nem da London School of Economics. Por favor, reveja nossa  política de comentários  se você tiver alguma dúvida em postar um comentário abaixo.

Sobre o autor:


Stephen Kemp
 é um consultor de financiamento e impacto que trabalha com universidades e acadêmicos individuais. Anteriormente, trabalhou como pesquisador de química, gerente de portfólio do Conselho de Pesquisa (gerenciando o processo de financiamento), gerente de financiamento universitário (ajudando o pessoal acadêmico a navegar no processo de financiamento) e gerente de impacto universitário (estimulando a cultura de impacto e apoiando preparações de impacto REF2021).Financiamento e impacto são temas centrais que correm através de seu trabalho. Stephen pode ser encontrado no Twitter @stephenckemp .

*Texto publicado originalmente pelo LSE Impact Blog

http://blogs.lse.ac.uk/impactofsocialsciences/2018/06/08/guidance-on-tes...

Tipo de em foco: 
Compartilhe!
estudos de caso de impacto para incluir evidências de impacto. Essa evidência pode assumir muitas formas, quantitativa ou qualitativa. Declarações de usuários de pesquisa, partes interessadas e beneficiários podem ser uma poderosa forma de evidência qualitativa, " data-share-imageurl="http://observatorio.fiocruz.br/sites/default/files/kelly-sikkema-382044-unsplash.jpg">