Como ler um artigo científico: o método das três leituras de S. Keshav (“How to Read a Paper”)

A maioria de nós lê um artigo científico do jeito que lê um livro: da primeira linha à última. É lento, e é o jeito mais fácil de perder a ideia principal. O método que funciona é ler o artigo três vezes, cada leitura com um objetivo diferente. A primeira leva de cinco a dez minutos e diz se você deve continuar; a segunda leva até uma hora e dá o conteúdo; a terceira leva horas e é só para os artigos que você precisa conhecer a fundo. Ele vem de uma nota de duas páginas, “How to Read a Paper” (2007), de S. Keshav, cientista da computação então na Universidade de Waterloo, e é a coisa mais útil que um doutorando novo pode aprender sobre leitura.

Aqui está ele em três minutos, mostrado em um tablet (o vídeo está em inglês). O texto abaixo traz os detalhes.

▶Assistir no YouTube · 2:42

As três leituras em uma tabela

Leitura 1: a visão geral

A primeira leitura é uma passada rápida para ter uma noção do artigo, e deve levar de cinco a dez minutos. Os passos de Keshav:

1. Leia com atenção o título, o resumo e a introdução.
2. Leia os títulos das seções e subseções, e ignore todo o resto.
3. Leia as conclusões.
4. Dê uma olhada nas referências, marcando as que você já leu.

No fim da primeira leitura, você deve conseguir responder aos cinco Cs:

• Category (categoria). Que tipo de artigo é este? Um artigo de medições, uma análise de um sistema existente, a descrição de um protótipo de pesquisa?
• Context (contexto). A que outros artigos ele se relaciona? Que bases teóricas foram usadas para analisar o problema?
• Correctness (correção). As premissas parecem válidas?
• Contributions (contribuições). Quais são as principais contribuições do artigo?
• Clarity (clareza). O artigo é bem escrito?

Então decida. Você pode optar por não ler mais, porque o artigo não interessa, ou você não sabe o suficiente sobre a área para entendê-lo, ou os autores partem de premissas inválidas. A maioria dos artigos que você pega deve terminar aqui; esse é o propósito da leitura, não uma falha dela. Keshav acrescenta uma lição para quem escreve: a maioria dos revisores e leitores vai fazer exatamente uma leitura, então escolha títulos de seção que façam sentido sozinhos e escreva um resumo que se sustente por si só.

Leitura 2: o conteúdo

Na segunda leitura, leia o artigo com mais cuidado, mas ignore detalhes como demonstrações. Anote os pontos-chave, ou faça comentários nas margens, enquanto lê. Duas coisas recebem atenção específica:

• As figuras, diagramas e outras ilustrações. Preste atenção especial aos gráficos. Os eixos estão rotulados corretamente? Os resultados aparecem com barras de erro, de modo que as conclusões sejam estatisticamente significativas? As evidências de um artigo estão sobretudo nas figuras, e elas raramente ficam ao lado do texto que as discute, então é aqui que o tempo vai.
• As referências. Marque as referências relevantes que você ainda não leu, para ler depois. É assim que você aprende mais sobre o pano de fundo do artigo, e isso alimenta a revisão de literatura abaixo.

Essa leitura leva até uma hora para um leitor experiente. No fim dela, você deve conseguir captar o conteúdo do artigo e resumir sua ideia central, com as evidências que a sustentam, para outra pessoa. Esse é o nível certo de compreensão para um artigo que interessa a você mas que não é da sua própria especialidade.

Às vezes você não vai entender um artigo no fim da segunda leitura. O assunto pode ser novo para você, os autores podem usar uma demonstração ou uma técnica experimental que você não conhece, ou o artigo pode ser mal escrito. Keshav dá três saídas: deixar o artigo de lado, torcendo para não precisar dele; voltar a ele mais tarde, depois de ler o material de base; ou perseverar e seguir para a terceira leitura.

Leitura 3: reimplementar virtualmente o artigo

A terceira leitura é para um artigo que você precisa entender por completo, como o mais próximo da sua tese ou um que você está revisando. A chave é tentar reimplementá-lo virtualmente: partir das mesmas premissas dos autores e recriar o trabalho. Ao comparar sua recriação com o artigo real, você encontra não só as inovações dele, mas também suas falhas e premissas escondidas. Essa leitura pede muita atenção aos detalhes: questione cada premissa de cada afirmação, e pense em como você mesmo apresentaria cada ideia. É dessa comparação que também vêm as ideias para trabalhos futuros, então anote-as pelo caminho.

Um iniciante leva quatro ou cinco horas, e um leitor experiente cerca de uma hora. No fim, você deve conseguir reconstruir de memória toda a estrutura do artigo, identificar seus pontos fortes e fracos, e apontar premissas implícitas, citações ausentes e problemas potenciais nas técnicas.

Usando as três leituras para uma revisão de literatura

A habilidade de ler artigos é posta à prova em uma revisão de literatura, em que você lê dezenas de artigos, muitas vezes em um campo novo para você. Keshav usa as leituras para escolhê-los:

1. Use um buscador acadêmico e algumas palavras-chave bem escolhidas para encontrar de três a cinco artigos recentes da área. Faça uma leitura de cada um, depois leia as seções de trabalhos relacionados. Com sorte, um deles é um artigo de revisão, e você terminou; se não, continue.
2. Encontre as citações que esses artigos têm em comum e os nomes de autores que se repetem. São os artigos-chave e os pesquisadores-chave da área. Baixe os artigos-chave e deixe-os de lado, depois veja os trabalhos recentes dos pesquisadores-chave nos sites deles.
3. Descubra onde a área publica: vá aos sites das principais conferências ou revistas, veja os anais recentes e selecione os trabalhos relacionados de alta qualidade.

Esses artigos, junto com os que você deixou de lado, são a primeira versão da sua revisão. Faça duas leituras deles, e quando um apontar para um artigo-chave que você não encontrou, pegue-o e repita.

Onde um leitor feito para artigos ajuda

O método funciona com uma impressão e um lápis. Em um tablet, algumas coisas o tornam mais rápido, e são elas que o vídeo mostra:

• A leitura 1 é uma passada pelos títulos e pelo resumo, o que é lento em uma página de duas colunas que você precisa arrastar de um lado para o outro. O modo de leitura refaz o artigo em uma só coluna, de modo que os títulos ficam alinhados e o resumo se lê de relance.
• A leitura 2 vive nas figuras e nas margens. Fixe a figura ao lado do texto e continue lendo; toque em uma citação para ver a referência sem perder o lugar; e seus destaques e notas voltam para a sua biblioteca do Zotero ou do Mendeley em vez de ficarem em um único dispositivo.
• A leitura 3 é escrita: circule o passo de que você duvida e escreva a pergunta ao lado, à mão. Quando tiver escrito seu próprio resumo, compare-o com uma ficha do artigo, que lista a pergunta de pesquisa, o método, os dados, os achados e as limitações declaradas, com uma página em cada frase, e onde você discordar, abra a página.

Perguntas frequentes

Quanto tempo leva cada leitura?

De cinco a dez minutos para a primeira leitura, até uma hora para a segunda, e quatro ou cinco horas para a terceira quando o método é novo para você, caindo para cerca de uma hora com experiência. Os números são de Keshav.

Preciso ler todo artigo três vezes?

Não. O propósito da primeira leitura é decidir, e para a maioria dos artigos a decisão é parar. Uma segunda leitura é para os artigos que interessam a você; uma terceira, só para os que você precisa conhecer a fundo, como os mais próximos da sua própria tese ou um artigo que você está revisando.

O que são os cinco Cs?

As cinco perguntas que você deve conseguir responder depois da primeira leitura: Category (que tipo de artigo é este?), Context (sobre quais artigos e bases teóricas ele se apoia?), Correctness (as premissas parecem válidas?), Contributions (quais são suas principais contribuições?) e Clarity (é bem escrito?).

O método das três leituras é só para ciência da computação?

Keshav o escreveu para ciência da computação e redes, onde ele é passado a novos pós-graduandos há quase vinte anos, mas nada nele é específico da área. A estrutura de um artigo científico é a mesma em outros campos: resumo, introdução, método, resultados, discussão, referências. Só muda a questão do que conta como “reimplementar”.

O que devo anotar na segunda leitura?

Os pontos-chave, conforme aparecem, e comentários nas margens: uma afirmação de que você duvida, uma figura cujos eixos ou barras de erro não sustentam o resultado principal, uma referência que você quer ler. Mantenha as notas junto do artigo, e não em um arquivo separado, para que estejam lá na terceira leitura e na hora de escrever.

E se eu ainda não entender o artigo depois da segunda leitura?

Keshav dá três escolhas: deixá-lo de lado e torcer para não precisar dele; voltar a ele depois de ler o material de base em que ele se apoia; ou perseverar até a terceira leitura. Qual é a certa depende de quão próximo o artigo está do seu próprio trabalho.

Onde está o original?

S. Keshav, "How to Read a Paper," ACM SIGCOMM Computer Communication Review, vol. 37, no. 3, July 2007, pp. 83–84, doi:10.1145/1273445.1273458. Há uma cópia gratuita em web.stanford.edu, como material de um curso. São duas páginas, e valem os dez minutos.

Um app feito para seus primeiros artigos

Se você está lendo seus primeiros artigos — para um TCC ou dissertação, um seminário ou um laboratório em que acabou de entrar —, agora existe um app feito exatamente para isso: Rectoly: How to Read Papers. Ele guia você por um artigo em três leituras, faz cinco perguntas cujas respostas você encontra destacando o texto, e deixa você resumir o artigo com suas próprias palavras, nos PDFs que você já tem. Ele está chegando à App Store para iPad e iPhone; deixe seu e-mail na página dele e avisaremos quando estiver disponível.