Le palais fut construit en 1759, à l'emplacement du palais médiéval, à la demande de l'évêque Jean de Bonneguise. Vendu comme bien national, il devient hôtel préfectoral en 1800. Après les deux guerres mondiales, l'hôtel de la préfecture a été reconstruit puis agrandi. Les travaux de restauration datent de 1995.