análises de artigos científicos, por thadeu.

nem toda evidência tem o mesmo peso

artigo analisado

Murad e colaboradores (2016), “New evidence pyramid”, publicado na revista Evidence-Based Medicine. Acessar o artigo.

contexto

A pirâmide de evidências tornou-se uma forma simples de representar a hierarquia entre diferentes desenhos de pesquisa. Relatos de caso aparecem na base, estudos observacionais ocupam níveis intermediários, ensaios clínicos randomizados ficam próximos do topo e revisões sistemáticas e meta-análises aparecem acima de todos.

Essa representação ensina um princípio importante: diferentes estudos não oferecem o mesmo grau de proteção contra vieses. Entretanto, ela também pode criar um atalho inadequado: olhar apenas para o tipo de estudo e tratá-lo como um certificado automático de qualidade.

o que o estudo investigou

Este não é um estudo experimental nem uma revisão sistemática. Trata-se de um artigo de perspectiva no qual os autores reavaliam a pirâmide tradicional a partir de avanços metodológicos da medicina baseada em evidências.

Eles propõem duas mudanças principais:

O objetivo não é abandonar a hierarquia, mas mostrar que o desenho do estudo é apenas o início da avaliação.

principais resultados

A primeira modificação parte do sistema GRADE, utilizado para avaliar o grau de confiança que podemos depositar em um conjunto de evidências. Nessa abordagem, a certeza não depende exclusivamente do desenho do estudo.

Um ensaio clínico randomizado costuma começar em uma posição mais favorável porque a randomização ajuda a reduzir diferenças entre os grupos. Ainda assim, sua confiança pode diminuir quando existem problemas metodológicos, resultados imprecisos, inconsistências entre os estudos ou diferenças importantes entre a pesquisa e a situação na qual desejamos aplicar seus achados.

Os autores ilustram isso com uma meta-análise de cinco ensaios clínicos sobre controle glicêmico intensivo em pacientes hospitalizados. Embora fossem estudos randomizados, havia problemas de cegamento e ocultação da alocação, além de um intervalo de confiança amplo, compatível tanto com possível benefício quanto com dano. O desenho, sozinho, não justificava classificar a evidência como altamente confiável.

O movimento contrário também pode ocorrer. Evidências observacionais, normalmente posicionadas abaixo dos ensaios clínicos, podem ganhar força quando apresentam resultados muito consistentes ou efeitos difíceis de explicar apenas por vieses. O artigo utiliza os benefícios da substituição do quadril em pessoas com osteoartrite incapacitante como exemplo de uma conclusão considerada confiável mesmo sem ter sido estabelecida originalmente por ensaios randomizados.

A segunda mudança está na posição das revisões sistemáticas e meta-análises. Para os autores, elas não deveriam ocupar automaticamente o topo porque seu resultado depende dos estudos incluídos e da qualidade do próprio processo de revisão.

Uma revisão sistemática organiza, seleciona e avalia os estudos disponíveis. A meta-análise, quando possível, combina estatisticamente seus resultados. Nenhuma dessas operações elimina os problemas presentes nas pesquisas originais. Uma meta-análise de estudos observacionais sujeitos a confundimento não se torna equivalente a uma meta-análise de ensaios clínicos bem conduzidos apenas porque reuniu muitos trabalhos.

Por isso, os autores representam a revisão sistemática como uma lente: uma ferramenta para observar, sintetizar e aplicar as evidências, e não como um desenho de pesquisa necessariamente superior a todos os demais.

o que os resultados permitem concluir

O peso de uma evidência não pode ser determinado apenas pelo nome dado ao estudo.

O desenho metodológico continua sendo relevante porque alguns formatos oferecem maior controle sobre determinados vieses. No entanto, também é necessário avaliar como o estudo foi conduzido, a precisão dos resultados, a consistência com outras pesquisas e a correspondência entre a evidência produzida e a pergunta que queremos responder.

Revisões sistemáticas e meta-análises permanecem ferramentas valiosas. A proposta do artigo apenas retira delas uma superioridade automática: uma síntese bem conduzida ajuda a enxergar melhor as evidências disponíveis, mas não transforma evidências frágeis em conclusões fortes.

limitações e o que não podemos concluir

O artigo apresenta uma proposta conceitual e didática. Ele não realiza um experimento para demonstrar que a nova pirâmide melhora decisões clínicas, nem conduz uma revisão sistemática sobre todas as formas possíveis de organizar hierarquias de evidência.

Os próprios autores reconhecem que representações em forma de pirâmide continuam simplificando conceitos complexos. Até mesmo “validade interna” — o grau de confiança de que o resultado foi produzido pela relação investigada, e não por vieses — pode ser definida e interpretada de maneiras diferentes.

Eles também observam que representar revisões sistemáticas apenas como ferramentas de síntese pode diminuir a percepção de seu papel na descoberta de fenômenos que não aparecem claramente em estudos individuais, como efeitos adversos raros.

A proposta foi desenvolvida no contexto da medicina baseada em evidências. Portanto, não deve ser transformada em uma hierarquia universal para toda pergunta científica.

Também não podemos concluir que estudos observacionais sejam equivalentes a ensaios clínicos, que toda meta-análise seja fraca ou que a pirâmide tradicional não tenha utilidade. O argumento é mais específico: o desenho indica vulnerabilidades prováveis, mas não substitui a avaliação crítica do estudo real.

aplicação no cotidiano

Quando uma notícia ou publicação afirmar que determinado resultado veio de um “ensaio clínico” ou de uma “meta-análise”, essa classificação deve ser o começo da leitura, não o fim.

Algumas perguntas ajudam a dimensionar o peso da evidência:

  1. Qual pergunta esse desenho consegue responder? Diferentes perguntas exigem diferentes formas de investigação.

  2. Como o estudo foi conduzido? Um desenho considerado forte ainda pode apresentar vieses, amostras inadequadas ou resultados muito imprecisos.

  3. Se for uma revisão, quais estudos foram incluídos? É necessário avaliar tanto o processo de revisão quanto a qualidade das pesquisas que a alimentaram.

  4. Qual é o grau de incerteza? O tamanho do efeito, os intervalos de confiança e a consistência dos resultados importam mais do que um resultado isolado apresentado apenas como “positivo” ou “significativo”.

Assim, dizer que uma evidência possui mais peso não significa apenas colocá-la em um nível mais alto da pirâmide. Significa justificar por que aquela conclusão merece mais confiança.

referência completa

MURAD, M. Hassan; ASI, Noor; ALSAWAS, Mouaz; ALAHDAB, Fares. New evidence pyramid. Evidence-Based Medicine, v. 21, n. 4, p. 125-127, 2016. DOI: 10.1136/ebmed-2016-110401.

Esta análise foi desenvolvida com auxílio de inteligência artificial. O texto final foi revisado e editado por mim.