À Champlois se trouvait jadis une maison seigneuriale ou maison forte du XVI e, remaniée, et peut être bâtie sur une ancienne maison forte ou château féodal non daté et non confirmé. Le château, appelé parfois le Grand-Pavillon, fut démoli définitivement au XIXe siècle. Champlois était un fief en toute justice dans la mouvance du roi de France, appartenant en 1310 à Huguenin d’Estaules, chevalier, puis de nombreux propriétaire se succédèrent. L’abbé Henri parle d'un premier château fort médiéval (après un fortin romain) "entouré de fossés et de remparts" reconstruit aux XVII et XVIIIe. Il cite une ancienne tour en moellons et terre avec des murs d'1,33m d'épaisseur "à 100 pas au nord, démolie en 1846". Il décrit aussi le manoir démoli en 1858 : de 12m sur 9, et "deux étages dont le second avait été abattu au XVIIe". des profondes caves, des vestiges de fossés, des prisons, un pavillon carré prés de la porte du château, une cour carrée de 50 pas de côté sont également évoqués.
Aujourd'hui, la mémoire locale situe bien l'emplacement du manoir détruit. Des vestiges de caves , fenêtres, pierres gravées subsistent sur et àproximité du site.
Cet élément serait à mieux étudier et son origine reste à confirmer ou infirmer.