Obytný císařský palác stojí v nejnižší poloze vnitřního hradu na okraji J skalní terasy v místě, kde je ostroh rozšířen příčným hřbetem ve směru V - Z. Trojpatrová podsklepená budova protáhlého obdélného půdorysu s půlválcovou věží na V, k níž se připojuje směrem k S krátké příčné křídlo, později zvané dům kanovníků, dodatečně postavené na V hradební zeď. Severní křídlo bylo původně propojeno s palácem dřevěnými nádvorními pavlačemi, nahrazenými koncem 15. stol. pozdně gotickou přístavbou vnějšího čtyřramenného schodiště. Obě křídla jsou zastřešena polovalbovými střechami krytými břidlicí, nad nárožní věží je vysoká kuželová střecha se stejnou krytinou. V Z části byla kolna na vozy, otevřená do dvora arkádami. Při S straně paláce je velmi úzký dvůr, který vznikl odlámáním prudce stoupajícího skalního hřebene. Dvůr je uzavřen na S téměř kolmou 8 - 10 m vysokou skalní stěnou, která odděluje dolní palácovou terasu od střední terasy vnitřního hradu.