Der Legende nach soll der Namen Castrozza von Castrum stammen, ehemaliger römischer Vorposten, an einer, die eingesetzten Heere unterstützenden Nebenstrasse gelegen, um die Alpenregionen zu erobern. Folglich wurde von einer religiösen Gemeinde spontan ein Hospiz errichtet, das vordergründig benediktinisch war.
Mitte des 19. Jahrhunderts begann eine neue Epoche für San Martino di Castrozza: Englische Reisende, animiert von romantischer und dekadenter Inspiration, erforschten in langen, abenteuerlichen Bergtouren die unberührten Dolomiten, und “entdeckten” die San Martino “Schaufeln” (Pale).