Cet article analyse l’approche de l’évaluation de la compréhension de l’écrit dans le programme PISA mis en œuvre depuis les années 2000 par l’OCDE. En nous appuyant notamment sur une unité du test portant sur la compréhension d’une métaphore littéraire, nous nous attachons à discuter les principes affichés par le PISA d’une évaluation de la littératie bâtie en fonction des exigences de la vie réelle des élèves. Notre démarche conduit notamment à questionner le fait que cette évaluation présentée par l’OCDE comme élaborée au plus près de la variété des contextes culturels et sociaux effectifs, repose néanmoins sur un instrument unique et standardisé à l’échelle internationale. Au-delà d’un éclairage de ce paradoxe, cet article interroge les enjeux de cette approche universaliste de la comparaison pour les recherches comparatives en éducation.