A 2 km dans la foret au sud du bourg s'élevait un château féodale du XIIIe siècle, proche de la métairie Bussière. La carte Cassini (v1750) indique Bussière et un sigle indéchiffrable, Baudiau cite le manoir seigneurial et la carte IGN note le château de Bussière-Aval. Il était dans la mouvance de la baronnie de Thil. En 1344, Eudes de Bussière, chevalier, donna dénombrement aux descendants de J-B Bernard. Puis après une longue succession de propriétaires, il appartint, en dernier, à la famille Bernard, seigneur de Chanteau. Observé et étudié par le CeCaB, la motte ou château, sur un éperon rocheux, s'élevait sur une plate forme de 48mx70m. Entouré d'un fossé de 15 m env. il a été identifié quatre bâtiments. Des vestiges de murs et fondations sont encore visibles. Il est intéressant de citer aussi que, selon le CeCaB, "le château de Bussière-Aval est au centre d'une zone d'exploitation de minerais, dont les caractéristiques sont similaires à ceux de Crepy (La Roche en brenil), datés de 1220 au C14. De même les chercheurs du CeCaB sont étonnés "qu'une construction si importante et si tardive n'ait laissé aucune trace d'archives, ce qui laisserait à penser qu'elle échappa à la vigilance des Ducs, dont le château de Saulieu n'était pourtant qu'à 6 km."A noter que La métairie comporte une ouverture singulière en façade . De même, de l'autre coté de la rivière le Soutain sur la commune de Juillenay, la carte Cassini mentionne un site Le Fourneau qui aujourd'hui doit correspondre à la ferme située dans l'écart appelé Rente du Fourneau .