Ce grand et bel hôtel renaissance est l'édifice le plus remarquable de l'architecture civile régionale. Il fut probablement construit pendant le règne de François 1er vers 1540 par Jean II de Calvimont, seigneur de Labenche, garde du sceau et greffier du roi pour le Bas Limousin.

L'implantation est faite à l'intérieur de l'enceinte sur un plan de retour en équerre. Des fenêtres à meneaux, encadrées de nervures sont surmontées de fausses baies formant des médaillons d'où se détachent à mi-corps des personnages de la famille de Calvimont.
On accède dans l'édifice par une porte encadrée de colonnes corinthiennes et surmontée d'un fronton rectangulaire posé sur un entablement décoré de lucarnes et de rosaces.

Ce bâtiment remarquable est aujourd'hui le siège du Musée Labenche.