Derrière l’immeuble sur rue, se cache, entre une cour et un jardin, un petit hôtel bâti entre 1776 et 1781 pour madame de Ligniville, comtesse de la Baume-Montrevel. Il a été réalisé par Claude-Antoine Colombot, l’un des plus grands architectes bisontins de l’époque, tandis que le logis sur rue avait été construit en 1753 par son père, Jean-Charles Colombot.

Les façades de l’hôtel, à un seul étage, comportent des décors néoclassiques dits aussi « à la grecque », comme par exemple des frises continues de postes, en forme de petites vagues, et des guirlandes retenues par des clous. Ses décors intérieurs de même style, conçus aussi par Colombot avec une cohorte d’artisans, subsistent toujours, notamment l’escalier d’honneur en maçonnerie avec une rampe en ferronnerie couvert d’une coupole.