Even buiten de stad liggen de ruïnes van Kasteel Duurstede met de slotgracht. De vierkante donjon en de ronde toren uit de 15e eeuw zijn bewaard gebleven. Het kasteel wordt nog gebruikt voor feesten. Het kasteelpark staat op de monumentenlijst.