https://dl.acm.org/doi/abs/10.1145/1273445.1273458
« Three-Pass Approach »
Chaque passe accomplit des buts précis et s’appuie sur la précédente : la première te donne une idée générale de l’article. La deuxième te fait saisir le contenu, pas les détails. La troisième t’aide à le comprendre en profondeur.
La première passe
La première passe est un scan rapide pour avoir une vue d’oiseau. Tu peux aussi décider s’il faut d’autres passes. Ça devrait prendre cinq à dix minutes :
- Lire avec soin le titre, l’abstract et l’introduction
- Lire les titres de sections et sous-sections, ignorer le reste
- Lire les conclusions
- Parcourir les références, cocher mentalement celles déjà lues
À la fin de la première passe, tu devrais pouvoir répondre aux five Cs :
- Category : quel type d’article ? Une paper de mesures ? Une analyse d’un système existant ? La description d’un prototype de recherche ?
- Context : à quels autres articles est-il lié ? Quelles bases théoriques ont servi à analyser le problème ?
- Correctness : les hypothèses ont l’air valides ?
- Contributions : quelles sont les contributions principales ?
- Clarity : l’article est-il bien écrit ?
Avec ça, tu peux choisir de ne pas aller plus loin. Parce que ça ne t’intéresse pas, ou tu ne connais pas assez le domaine pour comprendre, ou les auteurs font des hypothèses invalides. Pour des articles hors de ton domaine de recherche, mais qui un jour pourraient s’avérer pertinents, la première passe suffit.
Au passage, quand tu écris un article, tu peux t’attendre à ce que la plupart des reviewers (et lecteurs) ne fassent qu’une passe. Choisis des titres de sections cohérents, et écris des abstracts concis et complets. Si un reviewer ne capte pas le gist après une passe, l’article sera probablement rejeté ; si un lecteur ne capte pas les points forts en cinq minutes, l’article ne sera probablement jamais lu.
La deuxième passe
À la deuxième passe, lis plus soigneusement, mais ignore les détails comme les preuves. Ça aide de noter les points clés, ou de commenter dans les marges.
- Regarde bien les figures, diagrammes et autres illustrations. Attention particulière aux graphes. Les axes sont-ils bien labellisés ? Les résultats ont-ils des barres d’erreur, pour que les conclusions soient statistiquement significatives ? Ce genre d’erreurs courantes sépare le travail bâclé du vraiment excellent.
- Pense à marquer les références non lues pertinentes pour plus tard (un bon moyen d’apprendre le background de l’article).
La deuxième passe peut prendre jusqu’à une heure. Après, tu devrais saisir le contenu. Tu devrais pouvoir résumer à quelqu’un le thrust principal, avec des preuves. Ce niveau de détail convient à un article qui t’intéresse, mais qui n’est pas ta spécialité.
Parfois tu ne comprends toujours pas à la fin de la deuxième passe. Le sujet est nouveau, avec des termes et acronymes inconnus. Ou les auteurs utilisent une preuve ou une technique expérimentale que tu ne comprends pas, et le gros de l’article est illisible. L’article est mal écrit, assertions sans fond, trop de forward references. Ou c’est juste tard et tu es fatigué. Tu peux alors : (a) poser l’article, en espérant ne pas avoir besoin de ce matériau pour réussir ta carrière, (b) y revenir plus tard, après du background, ou (c) persévérer et passer à la troisième.
La troisième passe
Pour vraiment comprendre un article, surtout si tu es reviewer, il faut une troisième passe. La clé : tenter de réimplémenter virtuellement l’article — mêmes hypothèses que les auteurs, recréer le travail. En comparant cette recréation à l’article réel, tu identifies facilement les innovations, et aussi les défauts cachés et les hypothèses.
Cette passe demande une grande attention au détail. Identifie et challenge chaque hypothèse dans chaque énoncé. Et demande-toi comment toi tu présenterais telle idée. Cette comparaison du réel et du virtuel donne une vue aiguë sur les techniques de preuve et de présentation, et tu pourras très probablement l’ajouter à ta boîte à outils. Pendant cette passe, note aussi des idées pour du travail futur.
Ça peut prendre quatre ou cinq heures pour un débutant, environ une heure pour un lecteur expérimenté. À la fin, tu devrais pouvoir reconstruire de mémoire toute la structure, et pointer forces et faiblesses. En particulier, les hypothèses implicites, les citations manquantes vers du travail pertinent, et les problèmes potentiels des techniques expérimentales ou analytiques.
FAIRE UNE LITERATURE SURVEY
Les skills de lecture d’articles sont mises à l’épreuve dans une literature survey. Il faudra lire des dizaines d’articles, parfois dans un champ inconnu. Lesquels lire ? Voici comment la three-pass approach aide.
D’abord, un moteur académique comme Google Scholar ou CiteSeer, et quelques mots-clés bien choisis, pour trouver trois à cinq articles récents du domaine. Une passe sur chacun pour sentir le travail, puis lire leurs related work. Tu auras un résumé miniature du travail récent, et avec de la chance un pointeur vers un survey récent. Si tu trouves ce survey, tu as fini. Lis-le, félicite-toi.
Sinon, deuxième étape : dans la bibliographie, trouve les citations partagées et les noms d’auteurs répétés. Ce sont les papiers et chercheurs clés du domaine. Télécharge les papiers clés, mets-les de côté. Puis va sur les sites des chercheurs clés, vois où ils ont publié récemment.
Ça t’aide à identifier les top conférences du champ, parce que les meilleurs chercheurs publient en général dans les top conférences.
Troisième étape : va sur le site de ces top conférences, parcours les proceedings récents. Un scan rapide identifie en général du related work récent de qualité. Ces articles, plus ceux mis de côté plus tôt, forment la première version de ta survey. Fais deux passes. S’ils citent tous un papier clé que tu n’avais pas, récupère-le et lis-le, itère si besoin.
Expérience
Depuis 15 ans, j’utilise cette méthode pour lire des proceedings, écrire des reviews, faire du background, et relire vite un article avant une discussion. Cette rigueur m’empêche de me noyer dans les détails avant d’avoir la vue d’oiseau. Elle me laisse estimer le temps pour reviewer un lot. Et je peux ajuster la profondeur selon mes besoins et mon temps.