Het huis De Dolphijn kreeg zijn naam als eerbetoon aan de eerste eigenaar, H.L. Spieghel, de Nederlandse grammaticus die een tekst schreef over dolfijnen. Dit huis, met twee trapgevels, werd rond 1600 gebouwd door Hendrick de Keyser, tevens de architect van de Munttoren en de Zuiderkerk.