Métodos de pesquisa

Como escrever uma seção de métodos em que os revisores possam confiar

Um revisor que não consegue dizer como você produziu os seus resultados não vai confiar nos seus resultados. Esse julgamento muitas vezes cai na seção de métodos, não porque a análise estava errada, mas porque a descrição estava incompleta o bastante para que repetir o estudo exigisse adivinhar.

A escrita de métodos não é um exercício estilístico. É um contrato: estes são os passos, estes são os materiais, é assim que as decisões foram tomadas, e isto mudaria se outra pessoa seguisse as mesmas instruções. As seções abaixo são as que os revisores mapeiam primeiro para esse contrato.

Para que a seção de métodos de fato serve?

Ela existe para que um leitor informado possa avaliar se o seu desenho sustenta as suas afirmações e, em princípio, reproduzir a análise.

Essa segunda palavra importa. A reprodução completa é rara em muitas áreas, mas a reprodução parcial é rotineira: reanalisar os seus dados com o seu código, repetir uma simulação com as suas sementes, repetir uma intervenção com o seu protocolo. Os revisores perguntam se essas repetições parciais são possíveis a partir do texto sozinho.

Uma seção de métodos que apenas narra o que você fez no passado (“coletamos dados,” “realizamos a análise”) sem nomear instrumentos, versões, regras de inclusão e critérios de parada força o revisor a inferir. A inferência é onde a confiança se erode.

O que toda seção de métodos deveria incluir?

Não há um modelo universal entre disciplinas, mas os mesmos movimentos estruturais aparecem em artigos empíricos, seja a unidade uma linhagem celular, um painel de pesquisa ou um benchmark de modelo de linguagem.

Cubra estes movimentos em algum lugar dos Métodos (ou em suplementos vinculados, se o periódico permitir):

  1. Desenho e contexto do estudo. O que foi observado, manipulado ou comparado, e ao longo de que período ou em que ambiente.
  2. Participantes, unidades ou corpus. Quem ou o que foi incluído e excluído, com contagens em cada passo de filtragem.
  3. Materiais e instrumentos. Questionários, ensaios, dispositivos, conjuntos de dados, prompts e software, com versões e citações a protocolos estabelecidos onde existirem.
  4. Procedimento. A ordem das operações que um membro do laboratório seguiria no primeiro dia do estudo.
  5. Desfechos e medidas. O que foi registrado, como foi operacionalizado, e qualquer validação na qual você se apoia.
  6. Plano de análise. Modelos estatísticos, regras de correção, critérios de exclusão aplicados depois da coleta de dados, e como a incerteza é relatada.

Se algum desses movimentos estiver ausente, um revisor vai pedi-lo. Se dois estiverem vagos, o artigo muitas vezes recebe um comentário de métodos mesmo quando o resultado principal parece forte.

Como testar se um estranho conseguiria repetir o seu estudo?

Imprima a seção de métodos e destaque cada substantivo que nomeia algo concreto: um kit, um conjunto de itens de questionário, uma semente aleatória, uma URL, um hiperparâmetro, um número de protocolo de CEP. Circule cada verbo que descreve uma ação que alguém tomaria: “centrifugou,” “imputou,” “fez fine-tuning,” “codificou em duplicata.”

Para cada verbo circulado, pergunte: um colega competente na minha subárea conseguiria realizar essa ação amanhã apenas com o que aparece no manuscrito e nos seus suplementos?

Faça três verificações pontuais que pegam a maior parte das lacunas:

A verificação do reagente. Escolha um material central para o resultado (lote de anticorpo, checkpoint de modelo, onda de pesquisa, snapshot de corpus). Busque no PDF o identificador. Se você encontrar um nome de marca mas não uma versão, uma data ou um DOI, acrescente um.

A verificação da ramificação. Encontre cada lugar em que você fez uma escolha discricionária: largura de bin, comprimento de janela, divisão treino/validação, regra de outlier, template de prompt. Ou justifique-a com uma citação a uma prática padrão, ou relate que você tentou alternativas razoáveis e a conclusão se manteve. Ramificações sem rótulo leem como pesca.

A verificação do código. Se o código de análise existe, indique onde ele vive (repositório, DOI de arquivo, “disponível sob pedido” apenas se a política do periódico permitir e você for honrá-la). Nomeie a linguagem, os pacotes-chave e as versões que afetam a saída numérica. Os revisores cada vez mais esperam que uma tabela possa ser regenerada, e não apenas descrita.

Como estruturar a seção de métodos?

A ordem segue o modelo mental do estudo que o leitor tem, e não a ordem em que você aconteceu de fazer o trabalho.

Na psicologia experimental e em muitos periódicos biomédicos, o diagrama de fluxo CONSORT treinou os revisores a esperar contagens de participantes na inclusão, alocação, acompanhamento e análise. Você não precisa do diagrama em todas as áreas, mas precisa dos números que ele conteria se alguém o desenhasse. Uma frase como “412 incluídos, 387 completaram o acompanhamento, 12 excluídos por violação de protocolo antes da análise” responde à primeira pergunta que um revisor estatístico faz.

Em artigos computacionais, espelhe essa transparência com uma frase de pipeline de dados: tamanho do corpus bruto, filtros aplicados, n final usado no treino e na avaliação, e se as divisões são no nível do documento ou no nível da instância. Os revisores em aprendizado de máquina aprenderam a desconfiar de benchmarks em que o vazamento entre treino e teste é possível a partir de como a divisão é descrita.

Uma estrutura que sobrevive à revisão na maior parte das áreas empíricas:

  1. Visão geral do desenho (um parágrafo curto: observacional, experimental, simulação, misto).
  2. Amostragem e recrutamento (ou aquisição da fonte de dados).
  3. Variáveis e mensuração (instrumentos antes do procedimento se a mensuração define o protocolo).
  4. Procedimento (passos cronológicos).
  5. Análise (modelos, pressupostos, software).

Artigos qualitativos e computacionais muitas vezes trocam 3 e 4: defina o corpus ou o roteiro de entrevista antes de descrever como foi aplicado. O teste é se cada subseção pode ser lida sozinha, sem referências para frente como “como descrito acima” que apontam para termos indefinidos.

Use subtítulos que nomeiem o conteúdo, não rótulos de processo. “Análise estatística” serve. “Dados” não serve quando esconde três conjuntos de dados diferentes. Os revisores percorrem os títulos; torne-os informativos.

O que os revisores sinalizam primeiro em uma seção de métodos?

Revisores de triagem editorial e revisores estatísticos convergem para uma lista curta.

Exclusão subespecificada. “Participantes com dados incompletos foram excluídos” sem indicar quantos, quais campos dispararam a exclusão, e se a exclusão foi decidida antes ou depois de ver os desfechos. O pré-registro ou um script de análise datado fecha isso.

Pseudorreplicação. Tratar réplicas técnicas, medidas repetidas do mesmo sujeito, ou vários tuítes de uma mesma conta como observações independentes, sem um modelo que dê conta do aninhamento. A correção é agrupamento explícito, modelos mistos, ou uma unidade de análise clara.

Assinaturas de HARKing. Desfechos ou subgrupos que aparecem nos Resultados sem uma definição prévia nos Métodos ou no registro. Se você acrescentou uma análise exploratória, rotule-a como exploratória nos Métodos, e não só na Discussão.

Deriva de instrumento. Uma escala, ensaio ou versão de benchmark mudou no meio do estudo sem uma análise estratificada ou verificação de sensibilidade. Nomeie versões e datas.

Fluxos de IA irreproduzíveis. “Usamos o GPT-4” sem snapshot do modelo, temperatura, texto do prompt, e se as saídas foram filtradas ou editadas manualmente. Para estudos assistidos por modelo, trate prompts e sementes como protocolos de laboratório.

Poder e tamanho amostral sem um plano. Relatar um cálculo de poder post hoc depois de um resultado nulo, ou afirmar que “a amostra foi determinada pela disponibilidade” quando o desfecho primário é binário e raro. Os revisores em áreas clínicas e de ciências sociais esperam ou um alvo pré-especificado ou um argumento explícito de precisão. Se você não conseguiu recrutar até o alvo, diga isso e discuta quão amplo é o intervalo de confiança.

Nenhum desses exige mais páginas se você antecipar os identificadores e mover o detalhe volumoso para suplementos com ponteiros no texto (“texto completo do questionário, Métodos Suplementares S2”).

Qual deve ser o comprimento da seção de métodos?

O comprimento segue a complexidade, não a importância. Um ensaio clínico bem dimensionado com desfechos pré-especificados precisa de mais espaço do que uma análise secundária de um conjunto de dados público com um codebook publicado.

Um teto útil para muitos formatos de periódico: se os Métodos excederem cerca de 40% do texto principal, mova manuais de instrumentos, aprovações éticas e protocolos estendidos para suplementos e mantenha a seção principal nas decisões que afetam a interpretação.

Os revisores raramente reclamam de Métodos longos demais quando cada parágrafo responde a uma pergunta de reprodutibilidade. Reclamam quando o comprimento é enchimento: reiterar a justificativa da introdução ou listar software sem dizer o que cada pacote fez.

Quando dois artigos de métodos no seu periódico-alvo citam o mesmo protocolo central, cite esse protocolo e descreva apenas os seus desvios. “Seguimos Smith et al. (2019) com as seguintes alterações:” é ao mesmo tempo mais curto e mais auditável do que reescrever um pipeline padrão com as suas próprias palavras.

O que pertence aos suplementos em vez dos métodos principais?

Mova o material de que um revisor precisa uma vez, mas não deveria atravessar na primeira leitura:

  • Roteiros completos de questionário ou entrevista
  • Diagramas detalhados de fluxo de inclusão/exclusão com contagens
  • Tabelas estendidas de parâmetros para modelos ou simulações
  • Aprovações éticas e linguagem de consentimento (resuma no texto principal; anexe os formulários completos se for exigido)
  • Verificações adicionais de robustez que não mudam a conclusão primária

Mantenha nos Métodos principais qualquer coisa que mude o peso que um leitor dá ao resultado primário: regras de parada, definição do desfecho primário, tratamento de dados faltantes, e qualquer desvio de um plano pré-registrado.

Como revisar os métodos depois da revisão por pares?

As revisões de métodos costumam ser aditivas. Os revisores pedem clareza, não um estudo novo.

Quando um comentário diz “por favor esclareça,” responda com uma inserção específica: uma frase com um número, uma string de versão, ou uma citação. Quando um comentário pede uma análise nova, acrescente a análise aos Resultados e acrescente a regra de decisão que a define aos Métodos, mesmo que a regra tenha sido implícita antes.

Evite correções silenciosas. Se você corrige um erro na descrição do protocolo, diga isso na carta de resposta. Os editores comparam versões; mudanças não declaradas erodem a confiança mais depressa do que a omissão original.

Algumas ferramentas acadêmicas especializadas, o Fukurō entre elas, sinalizam inconsistências entre as suas afirmações de métodos e a seção de resultados (tamanhos amostrais que não coincidem, desfechos mencionados sem definição). Isso pega contradições internas; não substitui um colega lendo em busca de lacunas de reprodutibilidade.

O que você deveria fazer antes de submeter?

Faça esta passagem ordenada no PDF final:

  1. Leia os Métodos sem ler os Resultados. Anote o desfecho primário e o desenho com as suas próprias palavras. Se você não conseguir, um revisor também não consegue.
  2. Faça as verificações do reagente, da ramificação e do código em três itens cada.
  3. Faça coincidir cada legenda de figura e tabela que cita um método (barras de erro, nome do teste, n) com uma frase nos Métodos.
  4. Confirme que as declarações de ética, disponibilidade de dados e disponibilidade de código coincidem com o que os Métodos prometem.
  5. Peça a um coautor que não escreveu os Métodos que realize uma repetição parcial ou que liste as três primeiras perguntas que precisaria ter respondidas para tentar.

A seção de métodos é a parte do artigo mais propensa a gerar pedidos de revisão que são mais baratos de corrigir antes da submissão do que depois de três meses em revisão. Trate-a como a especificação, não como o apêndice.