Jak czytać artykuły naukowe: metoda trzech przebiegów S. Keshava („How to Read a Paper”)

Większość z nas czyta artykuł naukowy tak, jak czyta się książkę: od pierwszej linijki do ostatniej. To powolne i to najłatwiejszy sposób, żeby zgubić główną myśl. Metoda, która działa, to przeczytanie artykułu trzy razy, za każdym razem z innym celem. Pierwszy przebieg zajmuje pięć do dziesięciu minut i mówi ci, czy czytać dalej; drugi zajmuje do godziny i daje ci treść; trzeci zajmuje godziny i jest tylko dla artykułów, które musisz znać dogłębnie. Pochodzi z dwustronicowej notatki „How to Read a Paper” (2007) autorstwa S. Keshava, informatyka wówczas z University of Waterloo, i jest najbardziej użyteczną rzeczą o czytaniu, jakiej może nauczyć się nowy doktorant.

Oto ona w trzy minuty, pokazana na tablecie (film jest po angielsku). Szczegóły są w tekście poniżej.

▶Obejrzyj na YouTube · 2:42

Trzy przebiegi w jednej tabeli

Przebieg 1: ogląd

Pierwszy przebieg to szybkie przejrzenie, żeby zorientować się w artykule, i powinien zająć pięć do dziesięciu minut. Kroki Keshava:

1. Przeczytaj uważnie tytuł, abstrakt i wstęp.
2. Przeczytaj nagłówki sekcji i podsekcji, a całą resztę zignoruj.
3. Przeczytaj wnioski.
4. Przejrzyj bibliografię, odhaczając pozycje, które już czytałeś.

Pod koniec pierwszego przebiegu powinieneś umieć odpowiedzieć na pięć C:

• Category (kategoria). Jakiego typu to artykuł? Artykuł pomiarowy, analiza istniejącego systemu, opis prototypu badawczego?
• Context (kontekst). Z jakimi innymi artykułami jest powiązany? Jakich podstaw teoretycznych użyto do analizy problemu?
• Correctness (poprawność). Czy założenia wydają się trafne?
• Contributions (wkład). Jaki jest główny wkład artykułu?
• Clarity (jasność). Czy artykuł jest dobrze napisany?

Potem zdecyduj. Możesz nie czytać dalej, bo artykuł cię nie interesuje, bo nie znasz dziedziny na tyle, żeby go zrozumieć, albo bo autorzy przyjmują błędne założenia. Większość artykułów, po które sięgasz, powinna skończyć się tutaj; to jest cel tego przebiegu, a nie jego porażka. Keshav dodaje lekcję dla piszących: większość recenzentów i czytelników zrobi dokładnie jeden przebieg, więc dobieraj tytuły sekcji, które mają sens same w sobie, i pisz abstrakt, który broni się samodzielnie.

Przebieg 2: treść

W drugim przebiegu czytaj artykuł uważniej, ale pomijaj szczegóły takie jak dowody. Zapisuj kluczowe punkty albo rób uwagi na marginesach w trakcie czytania. Dwie rzeczy wymagają szczególnej uwagi:

• Rysunki, diagramy i inne ilustracje. Zwróć szczególną uwagę na wykresy. Czy osie są poprawnie opisane? Czy wyniki pokazano ze słupkami błędów, tak że wnioski są statystycznie istotne? Dowody w artykule tkwią głównie w rysunkach, a te rzadko sąsiadują z tekstem, który je omawia, więc tu idzie czas.
• Bibliografia. Zaznacz istotne nieprzeczytane pozycje do dalszej lektury. W ten sposób poznajesz tło artykułu, a to zasila przegląd literatury opisany niżej.

Ten przebieg zajmuje doświadczonemu czytelnikowi do godziny. Pod jego koniec powinieneś umieć uchwycić treść artykułu i streścić komuś innemu jego główną tezę wraz z dowodami. To właściwy poziom zrozumienia dla artykułu, który cię interesuje, ale nie należy do twojej własnej specjalności badawczej.

Czasem pod koniec drugiego przebiegu nie zrozumiesz artykułu. Temat może być dla ciebie nowy, autorzy mogą używać dowodu lub techniki eksperymentalnej, której nie znasz, albo artykuł może być źle napisany. Keshav daje trzy wyjścia: odłożyć artykuł w nadziei, że nie będzie potrzebny; wrócić do niego później, po przeczytaniu materiałów wprowadzających; albo wytrwać i przejść do trzeciego przebiegu.

Przebieg 3: wirtualnie zaimplementuj artykuł na nowo

Trzeci przebieg jest dla artykułu, który musisz zrozumieć w pełni, na przykład najbliższego twojej rozprawie albo takiego, który recenzujesz. Kluczem jest próba wirtualnego zaimplementowania go na nowo: przyjąć te same założenia co autorzy i odtworzyć pracę. Porównując swoje odtworzenie z rzeczywistym artykułem, znajdujesz nie tylko jego innowacje, ale i ukryte wady oraz założenia. Ten przebieg wymaga wielkiej dbałości o szczegóły: kwestionuj każde założenie w każdym stwierdzeniu i zastanów się, jak sam przedstawiłbyś każdy pomysł. Z tego porównania biorą się też pomysły na przyszłe prace, więc zapisuj je na bieżąco.

Początkującemu zajmuje to cztery lub pięć godzin, doświadczonemu czytelnikowi około godziny. Na końcu powinieneś umieć odtworzyć z pamięci całą strukturę artykułu, wskazać jego mocne i słabe strony oraz pokazać niejawne założenia, brakujące cytowania i potencjalne problemy z użytymi technikami.

Użycie trzech przebiegów do przeglądu literatury

Umiejętność czytania artykułów zostaje wystawiona na próbę przy przeglądzie literatury, kiedy czytasz dziesiątki artykułów, często w dziedzinie dla ciebie nowej. Keshav używa przebiegów, żeby je wybrać:

1. Użyj wyszukiwarki naukowej i kilku dobrze dobranych słów kluczowych, żeby znaleźć trzy do pięciu niedawnych artykułów z danej dziedziny. Zrób po jednym przebiegu na każdym, a potem przeczytaj ich sekcje o pracach pokrewnych. Jeśli masz szczęście, jeden z nich jest artykułem przeglądowym i gotowe; jeśli nie, idź dalej.
2. Znajdź cytowania wspólne dla tych artykułów i powtarzające się nazwiska autorów. To kluczowe artykuły i kluczowi badacze tej dziedziny. Pobierz kluczowe artykuły i odłóż je na bok, a potem obejrzyj najnowsze prace kluczowych badaczy na ich stronach.
3. Ustal, gdzie dziedzina publikuje: wejdź na strony najważniejszych konferencji lub czasopism, przejrzyj niedawne materiały i wybierz prace pokrewne wysokiej jakości.

Te artykuły, razem z odłożonymi, są pierwszą wersją twojego przeglądu. Zrób na nich dwa przebiegi, a gdy któryś wskaże kluczowy artykuł, którego nie znalazłeś, zdobądź go i powtórz.

Gdzie pomaga czytnik zbudowany do artykułów

Metoda działa z wydrukiem i ołówkiem. Na tablecie kilka rzeczy ją przyspiesza i właśnie je pokazuje film:

• Przebieg 1 to przejrzenie nagłówków i abstraktu, co jest powolne na dwukolumnowej stronie, którą trzeba przesuwać na boki. Tryb czytania składa artykuł na nowo w jedną kolumnę, więc nagłówki ustawiają się w jednej linii, a abstrakt czyta się jednym rzutem oka.
• Przebieg 2 żyje w rysunkach i na marginesach. Przypnij rysunek obok tekstu i czytaj dalej; stuknij cytowanie, żeby zobaczyć pozycję bibliografii bez gubienia miejsca; a twoje zakreślenia i notatki wracają do twojej biblioteki Zotero lub Mendeley, zamiast zostać na jednym urządzeniu.
• Przebieg 3 to pisanie: otocz kółkiem krok, w który wątpisz, i zapisz obok pytanie, odręcznie. Kiedy napiszesz własne streszczenie, porównaj je z kartą artykułu, która wymienia pytanie badawcze, metodę, dane, wyniki i deklarowane ograniczenia, ze stroną przy każdym zdaniu, a tam, gdzie się nie zgadzasz, otwórz stronę.

Najczęstsze pytania

Ile czasu zajmuje każdy przebieg?

Pięć do dziesięciu minut na pierwszy przebieg, do godziny na drugi i cztery lub pięć godzin na trzeci, gdy metoda jest dla ciebie nowa, z czasem spadające do około godziny. Liczby są Keshava.

Czy muszę czytać każdy artykuł trzy razy?

Nie. Celem pierwszego przebiegu jest decyzja, a dla większości artykułów decyzją jest zatrzymanie się. Drugi przebieg jest dla artykułów, które cię interesują; trzeci tylko dla tych, które musisz znać dogłębnie, na przykład najbliższych twojej własnej rozprawie albo artykułu, który recenzujesz.

Czym jest pięć C?

Pięć pytań, na które powinieneś umieć odpowiedzieć po pierwszym przebiegu: Category (jakiego typu to artykuł?), Context (na jakich artykułach i podstawach teoretycznych się opiera?), Correctness (czy założenia wydają się trafne?), Contributions (jaki jest jego główny wkład?) i Clarity (czy jest dobrze napisany?).

Czy metoda trzech przebiegów jest tylko dla informatyki?

Keshav napisał ją dla informatyki i sieci komputerowych, gdzie od prawie dwudziestu lat przekazuje się ją nowym doktorantom, ale nic w niej nie jest specyficzne dla tej dziedziny. Struktura artykułu naukowego jest gdzie indziej taka sama: abstrakt, wstęp, metoda, wyniki, dyskusja, bibliografia. Zmienia się tylko pytanie, co liczy się jako „ponowna implementacja”.

Co zapisywać w drugim przebiegu?

Kluczowe punkty, w miarę jak się pojawiają, i uwagi na marginesach: twierdzenie, w które wątpisz, rysunek, którego osie lub słupki błędów nie potwierdzają głównego wyniku, pozycję bibliografii, którą chcesz przeczytać. Trzymaj notatki przy artykule, a nie w osobnym pliku, żeby były pod ręką w trzecim przebiegu i przy pisaniu.

Co, jeśli po drugim przebiegu nadal nie rozumiem artykułu?

Keshav daje trzy możliwości: odłożyć go w nadziei, że nie będzie potrzebny; wrócić do niego po przeczytaniu materiałów wprowadzających, na których się opiera; albo wytrwać aż do trzeciego przebiegu. Która jest właściwa, zależy od tego, jak blisko artykuł jest twojej własnej pracy.

Gdzie jest oryginał?

S. Keshav, "How to Read a Paper," ACM SIGCOMM Computer Communication Review, vol. 37, no. 3, July 2007, pp. 83–84, doi:10.1145/1273445.1273458. Bezpłatna kopia jest na web.stanford.edu, jako materiał do zajęć. To dwie strony i są warte tych dziesięciu minut.

Aplikacja stworzona dla twoich pierwszych artykułów

Jeśli czytasz swoje pierwsze artykuły — do pracy dyplomowej, na seminarium albo w laboratorium, do którego właśnie dołączyłeś — jest teraz aplikacja stworzona dokładnie do tego: Rectoly: How to Read Papers. Prowadzi cię przez artykuł w trzech przebiegach, zadaje pięć pytań, na które odpowiedzi znajdujesz, zakreślając, i pozwala ci podsumować artykuł własnymi słowami, na plikach PDF, które już masz. Wkrótce pojawi się w App Store na iPada i iPhone’a; zostaw swój e-mail na jej stronie, a damy ci znać, kiedy będzie dostępna.