Grand amateur de peinture, il était l'ami de Gustave Doré, de Jean-François Millet, Jean-Baptiste Corot et de Théodore Rousseau.
Il était aussi un proche de Camille Saint-Saens, dont il était l'ami (Dans son testament, il avait prévu que Saint-Saens écrirait un Requiem) et dont il partageait la passion pour l'Extrême-Orient.