Mezi autobusovým nádražím a Starým zámkem se při cestě na Telč nachází první panské obydlí Krajířů. Sídlo vznikalo od konce 15. století jako hospodářský dvůr s tvrzí. Na baštu zřejmě navazovala hradební a ohradní zeď. Sídlo přestalo postupně pánům vyhovovat a jeho funkci později převzal tzv. Starý zámek.