Abîmé par les guerres de religion, le château est démantelé en 1616 et ses ruines laissées à l'abandon.