Resumo Executivo: entre o rato e a manchete existe um salto que o artigo original quase nunca dá, e que o comunicado da universidade dá em um terço dos casos. E onde dá para conferir, o que acontece no animal e o que acontece na pessoa muitas vezes não coincidem.
Um terço dos comunicados já dá o salto que o artigo não deu
O número é direto. Em pouco mais de um terço dos comunicados de universidade britânica, o que valia para animal já saía esticado para gente, além do que o artigo original afirmava [2]. Não é invenção do jornalista. É um passo dado antes, no texto institucional.
A engrenagem é compreensível. Um resultado em roedores é frequentemente limpo, rápido e impressionante, e a frase que descreve a descoberta com honestidade, dizendo que aconteceu em camundongos, é justamente a que tira a força da manchete. Some-se a isso a pressão por visibilidade, e o salto deixa de ser acidente.
O whey tem uma linha inteira de alegações nesse formato. Peptídeos bioativos do soro, como a lactoferrina, as imunoglobulinas e fragmentos com atividade antimicrobiana ou anti-hipertensiva, mostram efeito consistente em cultura de célula e em roedor, e é daí que sai boa parte do que se lê sobre imunidade e pressão arterial. O que quase nunca acompanha a alegação é a resposta de gente de verdade, bebendo a quantidade de whey que alguém realmente bebe.
Quando compararam modelo animal e resposta humana, eles discordaram
Dá para conferir isso de frente. Existe um punhado de tratamentos cujo efeito em gente já é conhecido sem dúvida, entre eles o corticosteroide no traumatismo craniano, o antifibrinolítico na hemorragia, a trombólise no acidente vascular cerebral isquêmico e o corticosteroide antes do parto. Colocados lado a lado com o que o animal anunciava, os dois lados discordam [1].
O caso do corticosteroide é o mais didático dos seis
No traumatismo craniano, o corticosteroide não traz benefício nenhum a quem sofreu o trauma. No animal, trazia, e com folga [1]. O modelo apontava para um ganho que o corpo humano não confirmou.
Há duas causas possíveis para a discordância, e as duas são incômodas. Ou existe viés no que se sabe do animal, ou o modelo falha em reproduzir a doença de verdade [1]. Nenhuma das duas se resolve com mais ratos, e as duas continuam operando enquanto ninguém confere em gente.
Por que o modelo erra, e o que isso muda na leitura
Quatro fatores se repetem [3].
- Tamanho. Os grupos de animais são pequenos.
- Sorteio. Falta sorteio, e falta ocultar quem recebeu o quê.
- Divulgação. O resultado positivo é escolhido a dedo na hora de divulgar.
- Modelo. O animal reproduz um traço da doença, não a doença inteira.
São problemas de método e de incentivo, não de biologia.
| O que a medição em roedor oferece | O que ela não oferece |
|---|---|
| Mecanismo plausível e controle experimental estrito | Garantia de que o mesmo mecanismo domine em humanos |
| Resposta rápida e barata a uma hipótese | Dose, duração e contexto alimentar comparáveis aos de uma pessoa |
| Possibilidade de medir tecido diretamente | Resultado com relevância clínica para quem vai consumir |
| Ponto de partida legítimo para uma medição em pessoas | Substituto da medição em pessoas |
Aplicado ao whey, o filtro é simples e serve para qualquer alegação. Quando uma afirmação sobre proteína aparece ligada a longevidade, metabolismo ou proteção de algum órgão, a primeira pergunta é em qual espécie aquilo aconteceu. Se a resposta for roedor, a segunda é se alguém já viu a mesma coisa em gente. Na maior parte das vezes ninguém viu, e a manchete pisa exatamente nessa distância.
O Que Ainda Não Sabemos
A comparação cobre seis tratamentos, escolhidos justamente porque a resposta em gente já era conhecida, e isso faz dela um grupo pequeno e enviesado por construção [1]. Não se sabe com que frequência o animal e a pessoa concordam, porque saber isso exigiria conhecer a resposta humana em todos os casos, o que é impossível.
Também segue em aberto quanto do problema é viés e quanto é biologia. As duas explicações produzem o mesmo sintoma, e separá-las exigiria tratar o animal com o mesmo rigor com que se trata a pessoa, o que existe, mas ainda é exceção [3].
Nada disso pede para descartar o trabalho com animais. Ele segue sendo o passo anterior legítimo. Pede apenas para não tratá-lo como se já fosse o passo seguinte.
Para quem lê sobre whey, a regra prática cabe numa frase. A espécie é parte do resultado, não um detalhe de método. O que acontece no roedor descreve o roedor, e o caminho da proteína no corpo humano precisa ser visto em gente para ser afirmado sobre gente.
Para entender o assunto por inteiro
Este artigo responde uma parte. As outras três:
- De onde vêm as manchetes exageradas sobre whey: onde a manchete exagera antes mesmo de o jornalista escrever
- O estudo deu resultado. Ele é grande o bastante para você notar? Por que um resultado real pode ser pequeno demais para você sentir
- Somando tudo o que já se pesquisou, o que dá para afirmar sobre whey: o que sobra quando se soma tudo o que já se pesquisou
Isto se conecta com
- História da Nutrição Esportiva: Como um Resíduo do Queijo Virou o Whey Protein que Você Conhece: como o soro que se jogava fora virou a proteína mais estudada
- Whey Sem Vaca: Como a Fermentação de Precisão Está Recriando a Proteína do Soro do Zero: como se faz proteína do soro sem passar por uma vaca
Perguntas Frequentes
Vale como etapa anterior. Ele testa mecanismo com controle experimental que não seria possível em pessoas, e serve para decidir o que merece um ensaio humano. O erro está em tratá-lo como substituto desse ensaio.
Na análise de 462 comunicados de imprensa acadêmicos, 36% continham inferência exagerada de animais para humanos em relação ao que o artigo original dizia.
Os fatores apontados são de desenho e de incentivo: amostras pequenas, falta de randomização e de ocultação de alocação, publicação seletiva de resultados positivos, e modelos que reproduzem um traço da doença sem reproduzir a doença inteira.
O resumo do artigo original diz, quase sempre na primeira linha da metodologia. É a informação que mais some no caminho até a notícia, e a mais fácil de recuperar.
Referências Científicas
[1] Perel P, Roberts I, Sena E, Wheble P, Briscoe C, Sandercock P, Macleod M, Mignini LE, Jayaram P, Khan KS. (2007). Comparison of treatment effects between animal experiments and clinical trials: systematic review. BMJ, 334(7586), 197. DOI: 10.1136/bmj.39048.407928.BE
[2] Sumner P, Vivian-Griffiths S, Boivin J, Williams A, Venetis CA, Davies A, Ogden J, Whelan L, Hughes B, Dalton B, Boy F, Chambers CD. (2014). The association between exaggeration in health related science news and academic press releases: retrospective observational study. BMJ, 349, g7015. DOI: 10.1136/bmj.g7015
[3] van der Worp HB, Howells DW, Sena ES, Porritt MJ, Rewell S, O’Collins V, Macleod MR. (2010). Can animal models of disease reliably inform human studies? PLoS Medicine, 7(3), e1000245. DOI: 10.1371/journal.pmed.1000245

