Nul visiteur ne peut traverser Luxeuil-les-Bains sans avoir le regard attiré par la belle demeure qui fait face à la tour des Échevins, toutes deux fièrement campées au point culminant de la ville médiévale, de part et d'autre de la "Grande-Rue".
En dépit de divers remaniements réalisés dès le XVIe siècle, la façade principale, entièrement en pierres de taille, a conservé le cachet d'une grande maison gothique du début du XVe siècle, à laquelle la Renaissance a ajouté un élégant prolongement. Elle compte deux étages au-dessus du rez-de-chaussée, de hauteur sensiblement égale.
Mais le principal ornement de cette façade reste incontestablement son grand balcon de pierre : chaque panneau de l'élégante balustrade à été orné d'un motif flamboyant plus ou moins étiré.
Cette demeure aurait été construite par Claude Jouffroy comme l'indiquent les initiales CI sculptées sous la fenêtre droite de l'oriel qui sont un indice précieux mais insuffisant... Perrin Jouffroy, "marchand bourgeois de Luxeuil et citoyen de Besançon" anobli en 1445 par le duc de bourgogne Philippe le Bon, parait avoir été suffisamment fortuné pour assumer cette réalisation et Jean, son deuxième fils, y aurait vu le jour vers 1412 avant de recevoir en 1461 le chapeau de cardinal. C'est du moins ce qu'affirme une tradition constante depuis le XVIIIe siècle.