À partir de 1767, il transforme son pavillon de Valognes en hôtel particulier avec l'aide de l'architecte Raphaël de Lozon.