À Sully-Montchanin existait jadis un château ou une maison seigneuriale non datée et peut-être remaniée. Sully-Montchanin, autrefois "Soilly" était une terre en toute justice, mouvante du Duché de Bourgogne et de la baronnie de Villarnoult et dont la plus grande partie se trouvait sur Beauvilliers. Cependant, d'après Baudiau, le château, son pourpris et son moulin banal se trouvaient sur St-Brancher. Nous ignorons la date de construction de la maison forte (et des remaniements) mais elle serait antérieure au XVIe siècle. Selon l'abbé Henri (1876), "[elle] était l'une des plus remarquable de la contrée". Elle était assise sur une montagne contournée par le Trinquelin. Elle consistait en un long corps de logis, d'une grande élévation, entourée de fossés. Aux angles, il y avait quatre grosses tours avec meurtrières. Une tour détachée servait de colombier. À l'époque de Baudiau, ce manoir et la chapelle (interdite en 1698), ont disparu. Il restait une tour découronnée et la ferme. Le manoir et ses dépendances furent vendus en 1793 et le manoir fut démoli dans les années 1820 et les décombres servirent à remplir les fossés. Il n'est pas indiqué sur la carte de Cassini (XVIIIe).
Actuellement, il reste quelques traces de plate-forme dans un pré dominant la vallée.