Au nord du village et au bord de la Baigne, s'élève le château moderne de Goix, autrefois maison forte médiévale. La terre de Villargoix appartenait en 1252 au chevalier Hugues de Mimeure mais une archive du CeCaB cite Petrus de Goix vers 1173. Plusieurs propriétaires se succédèrent, dont, à partir du XVIIe, la famille de Balathier. Il est nettement indiqué sur la carte Cassini (v 1750).Dans le jardin, sur le coté nord -ouest du château subsiste les ruines d'une tour ronde. Est-ce les vestiges d'un château du XIIe siècle ? Les chercheurs n'ont pas encore tranché cette question. La maison forte, dont de nombreux vestiges sont visibles, daterait du XVe, remaniée à une époque non connue. Le CeCaB observe "une maison forte transformée en château moderne" dont les élément les plus anciens restent le corps de logis ouest flanqué d'une tourelle d'escalier avec bretèche et archères, l'emplacement des flèches du pont levis dans la tour-porche, des archères canonnières dans les tours.. Aujourd'hui, Il est composé de trois corps de logis à deux étages, flanqué de trois tours carrées (dont l'une servait de chapelle). Une tourelle (du XIIe siècle selon la propriétaire) renferme un escalier. Au centre se trouve la cour d'honneur où l'on accede par une tour-porche fortifiée, autrefois précédée d'un pont-levis aujourd'hui pont dormant. Le CeCaB pense que le quatrième corps de logis qui fermait cette cour a été remplacé par un muret et de même la basse cour est devenue une ferme, toujours entourée d'une muraille. Les douves sont conservées sauf au nord. Les bâtiments sont couverts en tuiles plates de Bourgogne. Le château comporte aussi un pigeonnier carré, un oratoire, des dépendances, un parc et jardin... On a observé une pierre à huile d'un moulin non identifié et un bénitier en granit à six faces.L'ensemble en bon état reste un très beau château ayant conservé des aspects médiévaux non défiguré par son remaniement.