Bývalá tvrz čp. 74 stojí v západní části vsi ve svahu v těsné blízkosti kostela sv. Petra a Pavla. Jedná se o mohutnou patrovou kamennou stavbu na obdélném půdorysu. Budova je zastřešena valbovou střechou. Budova byla přestavěna na sýpku. Při východní straně budovy je ve skalním podloží vytesán menší sklep se třemi slepými lochy, přístupný z prostoru dvora. U tvrze je na východní straně dvora hospodářské zázemí, které není součástí nemovité kulturní památky. Památková ochrana se vztahuje pouze na tvrz a sklep bez pozemku. Z fortifikačního systému tvrze se do současnosti nic nedochovalo a totéž platí o přístavbě na jihozápadní straně, jenž nakoso vyplňovala prostor mezi budovou tvrze a obvodovou zdí hřbitova při kostele. Podle Jiřího Úlovce pochází tato dnes zcela zaniklá přístavba z doby krátkého znovunabytí Záboří samostatnosti po r. 1633.