Pillsbury avait une particularité fascinante. Il possédait une mémoire phénoménale. Les Anglais organiserent plusieurs séances pour tester cette faculté de mémorisation. On lui montrait une cinquantaine de petits papiers sur chacun desquels un mot, pris au hasard, était inscrit. Ensuite Pillsbury commençait une simultanée à l’aveugle, en général contre vingt joueurs . Tout en répondant aux coups annoncés sur les différents échiquiers, Pillsbury jouait au whist. Quelques heures plus tard, à la fin de sa simultanée, on tirait les petits papiers d’une boîte, et Pillsbury énonçait les cinquante mots.