Budova zámku je postavena na hraně terasy spadající na východě k řece Chrudimce. Zámek je čtyřkřídlá budova neuzavřeného půdorysu. Tři křídla (východní, jižní a západní) obklopují k severu otevřené nádvoří, čtvrté - severní křídlo se půdorysně zalamuje západním směrem. K severozápadnímu nároží východního křídla je připojena schodišťová věž, ke které je připojen ozdobný litinový plot s bránou uzavírající přístup na nádvoří. Na severní křídlo navazuje krytá spojovací chodba do kostela sv. Martina.