Die Willibaldsburg deren Grundsteinlegung am 14.5.1609 erfolgte, wurde nach einem Plane des berühmten Baumeister Elias Holl erbaut und war bis zum Bau der Residenz 1730 Wohnsitz des Bischofs