Eines der schönsten Gebäuden der Burg ist das von Jakab Fellner geplante Erzbischofspalast, der an der Stelle des ehemaligen Palastes der Königin und des Schlosses des Bischofs, wie auch an der Stelle des Anfang des 18. Jahrhunderts gebauten Acsádi Palast steht. Das imposante Barockgebäude wurde 1776 fertig, aber der Zahn der Zeit verwahrloste so sehr den Palast, dass Ende des 19. Jahrhunderts eine Restaurierung des Gebäudes und der Fresken notwendig war. Die letzte Erneuerung wurde 1996 anlässlich des Milleniums beendet. An der prachtvollen Fassade des Gebäudes prangt das Wappen des Bischofs Koller daran erinnerd, dass der Palast nach Bestellung vom Bischof Ignác Koller verfertigt wurde. Das imposante Schloss bietet sowohl von der Ostseite der Burg, wie auch vom Tal ein unvergessliches Erlebnis, von da aus die innere Terasse und auch der Spaziergarten zu sehen sind.