Cet édifice fut, avant la Révolution, l’hôtel du Marquis de Chevrier d’Igé. Il a été construit en 1716 par l’abbé de Chevrier de Saint-Mauris, trésorier de l’église collégiale de Saint-Pierre, sur des terrains encombrés par les ruines de l’ancien couvent des Jacobins (détruit en 1567 par les protestants) et de l’église que Louis IX leur avait fait bâtir en 1255.