Relato Registrado

Relatos Registrados (Registered Reports) são um formato de publicação de pesquisa empírica no qual a justificativa do estudo, as questões de pesquisa, as hipóteses (quando aplicável), os métodos e o plano de análise são avaliados antes da conclusão do estudo principal e, em geral, antes da realização das análises confirmatórias. Esse formato busca reduzir o viés de publicação, o viés de relato e a flexibilidade analítica não declarada, ao mesmo tempo em que permite análises exploratórias claramente identificadas e o relato de achados inesperados.

Cad_Lin aceita Relatos Registrados que proponham pesquisas originais, bem como estudos de reprodutibilidade e replicação. As submissões são avaliadas com base na qualidade científica da questão de pesquisa, na lógica das hipóteses ou objetivos propostos, no desenho do estudo, no plano de análise e no nível de especificação metodológica. As decisões editoriais não se baseiam no ineditismo, na direção esperada ou na importância percebida dos resultados.

Os Relatos Registrados são revisados em duas etapas. Na Etapa 1 (Stage 1), os autores submetem um Protocolo contendo a justificativa do estudo e o plano prospectivo completo para a coleta e análise de dados. Se o Protocolo for aprovado após a revisão por pares, ele recebe uma aceitação em princípio (in-principle acceptance - IPA). Os autores, então, conduzem o estudo de acordo com o Protocolo aprovado e, posteriormente, submetem o Relato Registrado finalizado da Etapa 2 (Stage 2), que inclui os resultados e a discussão. Na Etapa 2, a avaliação concentra-se na adesão ao Protocolo aprovado, na qualidade das evidências e em saber se as conclusões são justificadas pelas evidências apresentadas.

Submissões via PCI Registered Reports (PCI RR)

A Cad_Lin é uma revista PCI RR-friendly. Autores cujos Protocolos da Etapa 1 e Relatos Registrados da Etapa 2 tenham sido avaliados e recomendados pela Peer Community in Registered Reports (PCI RR) podem submeter a versão recomendada diretamente à revista sem uma nova rodada de revisão por pares.

Para submissões via PCI RR, os autores devem incluir:

1. o link para a recomendação do PCI RR e para os pareceres;
2. uma declaração confirmando que o manuscrito submetido é idêntico à versão recomendada; e
3. uma carta de apresentação (cover letter) declarando que a submissão segue o fluxo do PCI RR.

Nesses casos, a equipe editorial verificará se o manuscrito submetido corresponde à versão recomendada e se ele se enquadra no escopo da revista.

Protocolo de Relato Registrado – Submissão Inicial (Etapa 1)

As submissões da Etapa 1 devem ser redigidas no tempo futuro e, normalmente, devem incluir as seguintes seções:

Resumo

Introdução

Esta seção deve apresentar a(s) questão(ões) de pesquisa, a motivação teórica ou empírica para o estudo, os objetivos da pesquisa e, quando aplicável, as hipóteses. A Introdução deve fornecer uma fundamentação completa para o trabalho proposto. Após a aceitação em princípio (IPA), esta seção deve permanecer inalterada, exceto por pequenas correções factuais, correções tipográficas e a mudança do tempo verbal do futuro para o passado.

Métodos

A seção de Métodos deve fornecer detalhes metodológicos suficientes para que outro pesquisador reproduza os procedimentos e as análises propostas sem necessitar de informações adicionais. Ela deve incluir, conforme aplicável:

• Uma descrição completa do desenho, procedimentos, materiais e medidas;
• Uma descrição completa da amostra planejada e dos critérios para inclusão e exclusão de dados;
• Regras claras para substituição de dados, exclusões técnicas, tratamento de dados faltantes (missing data), pré-processamento e contingências analíticas;
• Um plano de análise completo, incluindo todas as análises planejadas, todas as covariáveis ou regressores e qualquer correção para comparações múltiplas;
• Quando o teste de hipóteses for utilizado, um plano de amostragem justificado por análise de poder (power analysis) ou outra justificativa prospectiva apropriada, indicando com clareza o limiar de evidência adotado;
• Quando aplicável, verificações neutras em relação aos resultados (outcome-neutral checks) demonstrando que o estudo será capaz de responder à(s) questão(ões) de pesquisa declarada(s), como controles positivos, verificações de manipulação, verificações de efeito teto/piso (ceiling/floor effects), verificações de fidelidade ou outros critérios de qualidade de dados pré-especificados;
• Um cronograma aproximado para a conclusão do estudo e a ressubmissão.

Dados piloto ou preliminares podem ser incluídos para estabelecer a viabilidade do estudo, gerar hipóteses ou estimar tamanhos de efeito, mas devem ser claramente identificados como distintos do estudo pré-registrado e não devem servir como a única base para as conclusões finais.

Critérios de Avaliação da Etapa 1

Protocolos submetidos como Relatos Registrados são avaliados principalmente com base nos seguintes aspectos:

1. Validade científica da(s) questão(ões) de pesquisa e clareza dos objetivos do estudo;
2. Lógica e plausibilidade das hipóteses propostas, quando houver hipóteses;
3. Qualidade e viabilidade da metodologia e do fluxo de análise, incluindo o plano de amostragem, quando aplicável;
4. Clareza e grau de detalhamento metodológico, suficientes tanto para replicação rigorosa quanto para evitar flexibilidade oculta nos procedimentos e análises;
5. Uso de critérios neutros em relação aos resultados pré-especificados, quando aplicável, para demonstrar que os dados obtidos serão capazes de testar as hipóteses ou responder à(s) questão(ões) de pesquisa.

Por essas exigências, os protocolos da Etapa 1 frequentemente precisam ser mais detalhados do que os artigos de pesquisa convencionais.

Quadro-Resumo do Desenho do Estudo (Study Design Template)

Dependendo da natureza da pesquisa, a Cad_Lin encoraja ou exige a inclusão de um quadro-resumo do desenho do estudo na Etapa 1, de modo a tornar explícita a ligação entre a questão de pesquisa, as hipóteses (quando aplicável), o plano amostral, o plano de análise e a interpretação prospectiva de diferentes desfechos.

Para manuscritos completos da Etapa 1 em pesquisa quantitativa com teste de hipóteses, a inclusão desse quadro é obrigatória. Para outros tipos de pesquisa, sua inclusão é fortemente encorajada.

Estudos Envolvendo Dados Existentes e Controle de Viés

Cad_Lin aceita submissões da Etapa 1 baseadas em conjuntos de dados existentes, desde que os autores deixem claro que as análises planejadas permanecem prospectivas e descrevam explicitamente o nível de acesso prévio aos dados.

Para submissões envolvendo dados existentes, os autores devem informar até que ponto os dados ou as variáveis-chave já foram acessados ou observados e, quando apropriado, indicar o nível de controle de viés aplicável à submissão, conforme a tipologia adotada pelo PCI RR:

• Nível 6: os dados ainda não existem antes do IPA;
• Nível 5: os dados já existem, mas são inacessíveis aos autores antes do IPA;
• Nível 4: os dados existem e são acessíveis em princípio, mas os autores certificam que ainda não os acessaram;
• Nível 3: os dados foram acessados, mas os autores certificam que ainda não observaram nenhuma parte dos dados relevante para as análises planejadas;
• Nível 2: os dados foram acessados e parcialmente observados, mas os autores certificam que ainda não observaram suficientemente as variáveis-chave necessárias para responder à questão de pesquisa; salvaguardas adicionais contra viés são exigidas;
• Nível 1: os autores observaram as variáveis-chave, mas certificam que ainda não realizaram as análises propostas; salvaguardas rigorosas contra viés são exigidas.

Nos Níveis 1 e 2, normalmente se espera a adoção de contramedidas mais estritas contra viés e sobreajuste analítico, como analista cego, limiares inferenciais mais conservadores, análises multiverso, curvas de especificação ou outros procedimentos pré-especificados.

Submissões em que os autores já conhecem os resultados das análises confirmatórias propostas não são elegíveis como Relatos Registrados da Etapa 1.

Pré-registro do Protocolo

Para Relatos Registrados geridos diretamente pela Cad_Lin, uma vez que o Protocolo da Etapa 1 receba a aceitação em princípio, os autores devem registrar o Protocolo aprovado no Open Science Framework (OSF) ou em outro repositório reconhecido.

Para submissões conduzidas por meio do PCI Registered Reports, o manuscrito aprovado da Etapa 1 é pré-registrado pelo PCI RR no OSF após o IPA, de acordo com os procedimentos da comunidade.

Desvios do Protocolo e Alterações Após o IPA

Qualquer desvio do Protocolo aprovado deve ser relatado e justificado.

Se circunstâncias imprevistas exigirem alterações após a aceitação em princípio (IPA), mas antes da conclusão do estudo, os autores devem entrar em contato com a equipe editorial o mais rápido possível. Pequenas alterações que não modifiquem o núcleo científico da proposta e não aumentem substancialmente o risco de viés podem ser aceitas se devidamente justificadas e integralmente relatadas no manuscrito da Etapa 2.

Se os autores desejarem fazer alterações substanciais na questão de pesquisa, no desenho ou no plano de análise após o IPA e ainda assim quiserem publicar o trabalho como um Relato Registrado, o Protocolo da Etapa 1 poderá precisar ser retirado e ressubmetido.

Relatos Registrados – Submissão do Manuscrito Final (Etapa 2)

Após a conclusão do estudo, os autores devem preparar o Relato Registrado da Etapa 2 seguindo a estrutura exigida para artigos submetidos à Cad_Lin.

Exceto por pequenas correções estilísticas e pela mudança do tempo verbal do futuro para o passado, a Introdução deve permanecer essencialmente a mesma do Protocolo aprovado. As hipóteses não podem ser alteradas nem expandidas. A literatura publicada após o IPA deve ser abordada na Discussão, e não por meio da reescrita da justificativa original.

Todas as análises pré-registradas devem ser relatadas, a menos que se demonstre posteriormente que uma análise aprovada é logicamente falha ou metodologicamente imprópria. Nesses casos, o problema deve ser discutido com o editor e os pareceristas, e a análise omitida ainda deve ser reconhecida e justificada no manuscrito.

Análises adicionais que não foram pré-registradas podem ser relatadas, desde que sejam claramente identificadas, justificadas e apresentadas em uma subseção separada, intitulada “Análises Exploratórias”. As conclusões não devem se apoiar exclusivamente nessas análises não registradas.

Exceto por estudos piloto pré-registrados e explicitamente aprovados, nenhum dado coletado antes da data da aceitação em princípio (IPA) pode ser incluído no relatório confirmatório da Etapa 2.

Avaliação da Etapa 2

Sempre que possível, os manuscritos da Etapa 2 serão avaliados pelos mesmos revisores que avaliaram o Protocolo da Etapa 1.

Os revisores considerarão:

1. Se os dados atendem a quaisquer critérios neutros aprovados e são capazes de responder à(s) questão(ões) de pesquisa declarada(s);
2. Se a introdução, a justificativa e as hipóteses correspondem ao Protocolo da Etapa 1 aprovado;
3. Se os autores seguiram os procedimentos e análises aprovados, ou relataram e justificaram integralmente quaisquer desvios;
4. Se quaisquer análises exploratórias estão claramente identificadas, justificadas e metodologicamente bem descritas;
5. Se as conclusões são respaldadas pelas evidências.

As decisões editoriais na Etapa 2 não dependem da direção, do ineditismo ou da importância percebida dos resultados.

Transparência de Dados, Materiais e Análises

Os autores devem fornecer aos revisores acesso aos dados brutos necessários para a avaliação da submissão da Etapa 2.

Os autores são fortemente encorajados a disponibilizar os dados brutos anonimizados, os materiais do estudo e os scripts de análise publicamente em um repositório com link persistente ou DOI, sempre que as condições legais, éticas e de consentimento dos participantes permitirem. Quaisquer restrições de compartilhamento devem ser claramente explicadas. Os dados brutos devem ser acompanhados de documentação suficiente para permitir compreensão e reutilização.

Lista de Verificação (Checklist) para Autores

Antes de submeter seu manuscrito, certifique-se de que atendeu aos seguintes requisitos:

Checklist da Etapa 1 (Protocolo)

• O manuscrito está redigido no tempo futuro;
• A(s) questão(ões) de pesquisa e, quando aplicável, as hipóteses, estão claramente declaradas e derivam de modo explícito da literatura e da justificativa apresentada;
• A metodologia é detalhada o suficiente para replicação exata, incluindo regras claras para inclusão, exclusão e substituição de dados;
• Um plano de análise abrangente está incluído, detalhando todas as análises planejadas, os critérios de decisão e, quando aplicável, o limiar de evidência adotado;
• Quando houver pesquisa quantitativa com teste de hipóteses, o study design template foi incluído;
• Em caso de uso de dados existentes, o nível de acesso prévio aos dados (nível de controle de viés) é explicitamente declarado e as salvaguardas correspondentes são descritas;
• Um cronograma aproximado para a conclusão do estudo é fornecido.

Checklist da Etapa 2 (Manuscrito Final)

• O resumo do manuscrito da Etapa 2 inclui uma URL direta para o protocolo pré-registrado da Etapa 1 e informa a data da aceitação em princípio (IPA) / pré-registro;
• A Introdução, a justificativa e as hipóteses permanecem essencialmente idênticas ao protocolo aprovado da Etapa 1, com modificações limitadas a mudanças no tempo verbal e correções tipográficas, gramaticais ou factuais claras. Quaisquer alterações metodológicas foram integralmente relatadas e justificadas;
• Uma versão do manuscrito com controle de alterações ativado foi fornecida para mostrar claramente quaisquer mudanças textuais nas seções aprovadas na Etapa 1;
• Todos os procedimentos e análises pré-registrados foram seguidos. Quaisquer desvios estão integralmente relatados e justificados;
• Quaisquer análises novas e não registradas estão claramente separadas e identificadas sob o título “Análises Exploratórias”;
• Dados brutos anonimizados, materiais digitais e scripts de análise foram disponibilizados aos revisores e, quando eticamente possível, depositados em repositório público.

Para informações adicionais sobre o formato, os autores podem consultar o Guide for Authors do PCI Registered Reports e a seção de full policies, especialmente no que diz respeito aos níveis de viés e ao controle de viés.