O que a literatura publicada esconde e por que isso muda sua leitura da evidência
Aldemar Araujo Castro
Criação: 13/09/2026
Atualização: 13/09/2026
Palavras: 1615
Tempo de leitura: 8 minutos
Gaveta fechada
os papéis que ninguém leu
o pó cobre tudo
Resumo. Este texto examina por que o conjunto de artigos recuperado em uma base de dados não representa a pesquisa efetivamente realizada sobre um tema. Distingue três mecanismos de desaparecimento, o viés de publicação em sentido estrito, o relato seletivo de desfechos e os filtros de idioma e de indexação, e apresenta a evidência empírica que documenta cada um deles. Discute os instrumentos de detecção disponíveis, como o gráfico de funil, e seus limites reconhecidos. Encerra com condutas práticas para o pesquisador, na leitura da literatura alheia e na produção da própria.
Introdução
Uma mestranda pesquisa a eficácia de determinada cobertura para cicatrização de feridas crônicas. Recupera quarenta e dois artigos na base de dados, lê os resumos e observa que trinta e seis relatam benefício. A conclusão parece impor-se sozinha: a intervenção funciona, e a literatura é consistente a respeito. O que ela não viu, porque não havia como ver, são os estudos que testaram a mesma cobertura, não encontraram diferença alguma e jamais chegaram a ser publicados.
Essa é a forma mais silenciosa de erro na leitura da evidência científica, e também a mais difícil de perceber, porque não se manifesta em nenhum dado visível. Manifesta-se em uma ausência. O conjunto de artigos que o pesquisador recupera não é uma amostra aleatória da pesquisa efetivamente realizada sobre o tema, é o resíduo de um processo de seleção sucessiva no qual autores, patrocinadores, revisores e editores decidiram, cada um a seu modo e por razões distintas, o que mereceria existir publicamente.
Este texto examina os mecanismos desse desaparecimento, a evidência empírica que os documenta, os instrumentos disponíveis para detectá-los e, sobretudo, o que o pesquisador em formação pode fazer, tanto ao ler a literatura alheia quanto ao produzir a própria.
O avião que voltou do combate
Há uma história recorrente nos cursos de metodologia. Durante a Segunda Guerra Mundial, analistas examinavam os bombardeiros que retornavam das missões e mapeavam a localização dos furos de projétil na fuselagem. A proposta inicial foi reforçar a blindagem exatamente onde havia mais furos. O estatístico encarregado teria observado o contrário: os furos indicavam justamente as regiões em que uma aeronave podia ser atingida e ainda assim voltar. O reforço deveria ir para as áreas sem furos, porque os aviões atingidos ali não retornavam para serem examinados.
Convém uma ressalva antes de prosseguir. A narrativa circula em versões muito estilizadas, e o trabalho técnico original tratava de estimar vulnerabilidade a partir de dados incompletos, não de uma cena de inspiração súbita. Ela serve como ilustração do raciocínio, não como evidência metodológica, e é assim que deve ser usada em sala de aula.
Feita a ressalva, a transposição para a pesquisa em saúde é direta e desconfortável. A base indexada é a frota que voltou. O pesquisador examina apenas os estudos que sobreviveram a todos os filtros do percurso editorial, e desses estudos extrai conclusões sobre o universo inteiro de pesquisas realizadas. Chamamos isso de viés de sobrevivência quando a sobrevivência é do objeto observado, e de viés de publicação quando o filtro atua sobre a divulgação de resultados científicos. O mecanismo lógico é o mesmo: inferir o todo a partir de um recorte que foi produzido por um critério correlacionado com aquilo que se quer medir.
Três modos de desaparecer
O desaparecimento não é um fenômeno único. Convém separar ao menos três mecanismos, porque as contramedidas diferem.
O primeiro é o viés de publicação em sentido estrito, isto é, a menor probabilidade de um estudo com resultado nulo ou desfavorável ser publicado. A revisão mais abrangente sobre o tema mostra que o determinante principal não é a rejeição pelo editor, como costuma supor o pesquisador iniciante, mas a decisão do próprio investigador de não submeter o manuscrito, por antecipar desinteresse, por já ter deslocado seu tempo para outro projeto ou por julgar que resultado nulo não constrói carreira (Song et al., 2010). O filtro, portanto, opera dentro do laboratório antes de operar na redação do periódico.
O segundo é o relato seletivo de desfechos, que é mais insidioso porque não elimina o estudo, apenas o reescreve. A comparação sistemática entre protocolos submetidos a comitês de ética e artigos posteriormente publicados revelou que a maioria dos ensaios apresentava ao menos uma discrepância no desfecho primário, seja por omissão, seja por introdução de desfecho não previsto, seja por troca daquilo que fora declarado como principal, e que os desfechos com resultado estatisticamente significativo tinham chance consideravelmente maior de serem relatados de forma completa (Chan et al., 2004). O estudo está publicado, é recuperável e aparenta integridade, mas responde a uma pergunta diferente daquela que se propôs responder.
O terceiro é o conjunto de filtros de acesso, entre os quais o viés de idioma e o de indexação. Pesquisa relevante conduzida no Brasil e publicada em português em periódico não indexado nas grandes bases internacionais é, para efeitos práticos de uma revisão sistemática conduzida apenas em inglês, inexistente. O efeito desse filtro é assimétrico por região e por tema, o que compromete de modo particular a evidência sobre condições prevalentes em países de renda média.
O caso dos antidepressivos
A demonstração mais persuasiva do fenômeno surge quando existe um registro independente que permita comparar o que foi feito com o que foi publicado. Foi esse o caso dos ensaios de antidepressivos submetidos à agência reguladora de alimentos e medicamentos dos Estados Unidos (Food and Drug Administration, FDA), cujos resultados eram conhecidos do regulador independentemente de qualquer publicação.
O confronto entre os dois conjuntos mostrou um padrão nítido. Praticamente todos os ensaios classificados como positivos pela agência foram publicados, ao passo que a maior parte dos ensaios classificados como negativos ou duvidosos ou não foi publicada, ou foi publicada de maneira que sugeria resultado favorável. A consequência quantitativa é o que mais importa aqui: o tamanho de efeito agregado calculado a partir da literatura publicada excedeu em cerca de um terço aquele calculado a partir do conjunto completo de ensaios (Turner et al., 2008).
O ponto a reter não é que antidepressivos não funcionem, conclusão que o estudo não autoriza. O ponto é que a magnitude aparente de um efeito depende do subconjunto de estudos acessível, e que essa dependência é sistemática, não aleatória. Uma revisão sistemática metodologicamente impecável, conduzida sobre um conjunto enviesado de estudos, produz uma estimativa precisa e errada. O rigor do método não corrige a seletividade do insumo.
O que se pode detectar e o que não se pode
Existem instrumentos estatísticos para investigar a assimetria de um conjunto de estudos. O mais difundido é o gráfico de funil, que dispõe cada estudo conforme seu tamanho de efeito e sua precisão, com a expectativa de que estudos pequenos se dispersem simetricamente em torno da estimativa comum, enquanto estudos grandes se concentrem no centro. A ausência de estudos pequenos com resultado desfavorável produz uma lacuna característica em um dos lados do funil, e existe teste estatístico específico para avaliar essa assimetria (Egger et al., 1997).
O uso desses instrumentos exige cautela que nem sempre é observada. As recomendações consolidadas sobre a matéria advertem que assimetria de funil não equivale a viés de publicação: ela também pode decorrer de heterogeneidade clínica genuína entre os estudos, de diferenças de qualidade metodológica associadas ao tamanho da amostra, de relato seletivo dentro dos estudos ou simplesmente do acaso, sobretudo quando o número de estudos é pequeno. Daí a orientação de não aplicar testes de assimetria a conjuntos com menos de dez estudos e de interpretar o resultado como hipótese a investigar, nunca como diagnóstico (Sterne et al., 2011).
Há, além disso, um limite lógico intransponível. Nenhum teste estatístico recupera informação que não existe no conjunto analisado. Os métodos de detecção indicam que algo pode estar faltando, jamais o que está faltando nem quanto. A solução real do problema não é estatística, é de infraestrutura da pesquisa, e passa pelo registro daquilo que se pretende fazer antes de se conhecer o resultado.
O que fazer, como leitor e como autor
Na condição de leitor, três hábitos alteram substancialmente a qualidade da leitura. O primeiro é procurar o protocolo registrado do ensaio que se está lendo e conferir se o desfecho primário declarado corresponde ao desfecho primário relatado, verificação que leva poucos minutos em bases como o Registro Brasileiro de Ensaios Clínicos (ReBEC) e o ClinicalTrials.gov. O segundo é examinar, em qualquer revisão sistemática, se os autores avaliaram o risco de viés de publicação e como o fizeram, tratando a omissão desse item como sinal de alerta. O terceiro é estender a busca à literatura cinzenta, incluindo teses, dissertações e anais, onde resultados nulos sobrevivem com frequência maior do que nos periódicos.
Na condição de autor, a contribuição é mais exigente e mais decisiva. Registrar prospectivamente o estudo, declarar o desfecho primário antes da coleta e sustentá-lo depois, publicar o resultado obtido ainda quando ele contrarie a hipótese, e reportar integralmente os desfechos secundários e os eventos adversos, mesmo os que enfraquecem a narrativa do artigo. O estudo nulo bem conduzido é informação científica legítima, e o silêncio sobre ele não é neutro: desloca a estimativa coletiva na direção do efeito aparente. A gaveta em que dorme um resultado negativo é, em termos agregados, uma forma de distorção da literatura.
Considerações finais
A pergunta que abre uma revisão de literatura não deveria ser apenas o que os estudos mostram, mas também quais estudos teriam chegado até aqui se tivessem encontrado o contrário. Essa segunda pergunta não é retórica nem cética em sentido estéril: ela reorienta a leitura, obriga a procurar protocolos, registros e literatura não indexada, e recalibra a confiança depositada em um conjunto de artigos que parecia unânime. A unanimidade aparente de um campo é, com frequência, a assinatura de um filtro operando, não de uma verdade consolidada.
Há também uma dimensão que ultrapassa a técnica. Todo pesquisador decide, ao menos uma vez na carreira, o que fazer com um resultado que não confirmou a hipótese e que dificilmente renderá citações. Essa decisão individual, replicada por milhares de pesquisadores, é exatamente o mecanismo que produz o viés de publicação. Não existe correção estatística capaz de compensar a soma dessas escolhas privadas. O que existe é a possibilidade de cada um escrever o artigo que ninguém pediu, submetê-lo, registrar o protocolo antes de saber o desfecho e assumir que a integridade do conjunto depende de gestos que raramente são recompensados. A literatura científica é, afinal, o que os pesquisadores decidem contar sobre aquilo que fizeram.
Fontes
[1]. Song F, Parekh S, Hooper L, Loke YK, Ryder J, Sutton AJ, et al. Dissemination and publication of research findings: an updated review of related biases. Health Technol Assess. 2010;14(8):1-193.
DOI: https://doi.org/10.3310/hta14080
Disponível em: https://doi.org/10.3310/hta14080
Comentário: revisão de grande amplitude sobre os vieses que afetam a disseminação de resultados de pesquisa, reunindo estudos empíricos sobre publicação, tempo até a publicação, idioma e duplicação. Sustenta no texto a afirmação de que o filtro principal atua na decisão do investigador de não submeter o manuscrito, e não na rejeição editorial. É a referência indicada a quem pretenda aprofundar a tipologia dos vieses de disseminação.
[2]. Chan AW, Hróbjartsson A, Haahr MT, Gøtzsche PC, Altman DG. Empirical evidence for selective reporting of outcomes in randomized trials: comparison of protocols to published articles. JAMA. 2004;291(20):2457-65.
DOI: https://doi.org/10.1001/jama.291.20.2457
Disponível em: https://doi.org/10.1001/jama.291.20.2457
Comentário: estudo que comparou protocolos aprovados por comitês de ética com os artigos correspondentes, quantificando omissões, introduções e trocas de desfecho primário. Fundamenta a seção sobre relato seletivo e demonstra que a distorção pode ocorrer dentro de um estudo publicado, sem qualquer supressão visível. Continua sendo a referência canônica do problema.
[3]. Turner EH, Matthews AM, Linardatos E, Tell RA, Rosenthal R. Selective publication of antidepressant trials and its influence on apparent efficacy. N Engl J Med. 2008;358(3):252-60.
DOI: https://doi.org/10.1056/NEJMsa065779
Disponível em: https://doi.org/10.1056/NEJMsa065779
Comentário: comparação entre ensaios de antidepressivos registrados na agência reguladora norte-americana e ensaios efetivamente publicados, com estimativa do quanto a eficácia aparente foi inflada pela seleção. Serve no texto como demonstração empírica do efeito quantitativo do viés de publicação sobre a magnitude do efeito estimado.
[4]. Egger M, Davey Smith G, Schneider M, Minder C. Bias in meta-analysis detected by a simple, graphical test. BMJ. 1997;315(7109):629-34.
DOI: https://doi.org/10.1136/bmj.315.7109.629
Disponível em: https://doi.org/10.1136/bmj.315.7109.629
Comentário: artigo que propôs o teste de assimetria do gráfico de funil que passou a levar o nome do primeiro autor. É a base do instrumento de detecção discutido na quinta seção e leitura obrigatória para quem conduz meta-análise.
[5]. Sterne JAC, Sutton AJ, Ioannidis JPA, Terrin N, Jones DR, Lau J, et al. Recommendations for examining and interpreting funnel plot asymmetry in meta-analyses of randomised controlled trials. BMJ. 2011;343:d4002.
DOI: https://doi.org/10.1136/bmj.d4002
Disponível em: https://doi.org/10.1136/bmj.d4002
Comentário: documento de recomendações que delimita o uso responsável do gráfico de funil, esclarecendo que a assimetria admite explicações alternativas ao viés de publicação. Fundamenta as cautelas apresentadas no texto, inclusive a orientação de não aplicar testes de assimetria a conjuntos com menos de dez estudos.
Pontos para Recordar
- O conjunto de artigos recuperado em uma base de dados é o resultado de filtros sucessivos, e não uma amostra aleatória da pesquisa realizada sobre o tema.
- O principal determinante do viés de publicação é a decisão do próprio investigador de não submeter resultados nulos, e não a rejeição pelos editores.
- O relato seletivo de desfechos distorce a literatura sem suprimir nenhum artigo, pois altera a pergunta que o estudo publicado aparenta responder.
- A comparação entre protocolos registrados e artigos publicados revela discrepância de desfecho primário na maioria dos ensaios examinados.
- Quando existe registro independente dos ensaios, como o de uma agência reguladora, a eficácia estimada pela literatura publicada tende a superar a eficácia estimada pelo conjunto completo de estudos.
- A assimetria do gráfico de funil sugere investigação adicional, mas não equivale a diagnóstico de viés de publicação, pois admite explicações alternativas.
- Registrar o estudo prospectivamente, sustentar o desfecho primário declarado e publicar resultados nulos são as condutas que efetivamente reduzem o problema na origem.
Declaração de uso de Inteligência Artificial Generativa. Este texto foi produzido com o auxílio de Claude, desenvolvida pela Anthropic, utilizado como ferramenta de apoio nas fases de brainstorming, de estruturação do conteúdo e de produção do texto. A responsabilidade pela versão final e precisão das informações, pelo pensamento crítico, pela seleção das fontes e pelo conteúdo publicado é integralmente do autor.