Le chateau de Pouy passe des Le Bascle d'Argenteuil à Charles Joseph Fortuné d'Herbouville lors de son mariage avec Marie Louise Victoire Le Bascle d'Argenteuil.
N'y résidant pas, il confie la gestion de sa terre à Louis Hemard, receveur des droits d'enregistrement à Villeneuve-l'Archevêque ; puis vend ces terres en 1805 à Monsieur Fortier, de Troyes.