Au bas de l’église, au nord, se trouve un manoir fortifié, d’origine imprécise, appelé « rendez-vous de chasse », dont une tour a gardé des meurtrières. Nous n’avons que peu d’informations sur ce bel ensemble.
Sa construction remonterait au XVIe siècle, et aurait subi des remaniements aux XVIIIe et XIXe. Son bâtisseur est inconnu bien que la tradition locale, depuis 1900, le nomme manoir Choslin, du nom d’une famille originaire de Bazoches (notaire).
Le manoir fut transformé en ferme. Le cadastre de 1819 le montre dans son plan actuel. Entourant une cour pavée, on observe un corps de logis, une dépendance type grange-écurie, deux tours et deux murs. La tour ronde percée de meurtrières renferme un escalier en colimaçon. La tour carrée est un pigeonnier. Le logis, bâtiment le plus ancien, comporte quatre salles voutées et, à l’étage, trois grandes pièces distribuées par un couloir, côté cour. L’ensemble est couvert en tuiles de Bourgogne. Les sources situées à proximité justifient probablement l’absence de caves. Une des sources appelée Cholin, alimente en partie Vézelay.
Des fouilles ont fait apparaître des vestiges gallo-romains autour de la source : vraisemblablement des citernes ou piscines.