Třípodlažní palác na zhruba čtvercovém půdorysu s vnitřním nádvořím a válcovou věží na jihovýchodním nároží paláce tvoří jádro Pernštejnského hradu. Přízemí jižního křídla včetně arkády je sklenuto sklípkovými klenbami (Rytířská síň na střední sloup), ostatní podlaží jsou plochostropá. Věž ve všech podlažích zaklenuta též sklípkovými klenbami. Severní křídlo dochováno se zřícenými stropy a částečně zřícenými stěnami.