L’hôtel Alviset, qui porte le nom de la famille qui l’occupait à partir du début du XIXe siècle, possède une longue façade sur la rue des Martelots datable de la fin du XVIe ou du début du XVIIe siècle. Les fenêtres du rez-de-chaussée sont protégées par de superbes grilles ventrues en fer forgé (comme au n° 5 rue Péclet). Elles ont été sans doute réalisées par un serrurier local avec du fer produit dans la province. La Franche-Comté a été en effet, entre le XVe et le XIXe siècle, une grande région métallurgique. En témoignent aussi les nombreux balcons, grilles et rampes d’escaliers que l’on peut aussi observer ailleurs en ville. Cet hôtel complet, puisqu’il possède encore dans la cour, des communs, des écuries et des remises, détient également l’un des plus grands jardins de la ville.