Ce château d’origine du XIe siècle, remanié plusieurs fois, fut construit sur un promontoire rocheux dominant la Cure. Le site était traversé par une voie romaine. Il est dans la propriété de la famille de Chastellux depuis 1000 ans. Il a été agrandi et remanié à différentes époques.Le château présente encore des éléments défensifs: murailles, tour à canon, échauguette… La cour du château est triangulaire, resserrée par des constructions irrégulières auxquelles se rattachent six tours. La tour Saint-Jean (XI), classée, est détachée du château et fut construite pour le protéger. On peut remarquer de nombreux et importants communs, dépendances, écuries, logement des soldats, fermes, bois..., un grand parc, jardin et bassin, une glacière et l'église paroissiale, avec son cimetière, le presbytère et un couvent.... La chapelle du château de Chastellux se situe au premier étage d'une tour construite par Claude de Beauvoir en 1414 et restaurée en 1824. De nombreux éléments du château sont inscrits ou classés. Depuis 2008 le château, toujours propriété de la famille de Chastelllux, est ouvert à la visite. C'est un des plus beaux et historiques châteaux du Morvan