Enrichis par le commerce international des canevas, les négociants vitréens construisent, à l'abri de l'enceinte mais aussi dans le faubourg Saint-Martin et au Rachapt, d'élégants hôtels particuliers. Ces demeures témoignent en effet du rang social de leurs constructeurs par la qualité des matériaux et la délicatesse du décor. Dans le style gothique, figures humaines, animaux familiers ou exotiques, feuillages, fleurs et fruits rivalisent avec les plus délicats motifs issus de la Renaissance, comme les coquilles, les putti ou les candélabres ornant la façade de l'hôtel Ringues de la Troussannais.
Hormis le Château-Marie, construit par les La Trémouïlle vers 1650, l'Hôtel des Nétumières, bâti vers 1750 par une famille de parlementaires rennais et le Château de la Baratière, édifié vers 1770 par les Le Gonidec de Traissan, la situation de repli économique que la ville connaît aux XVIIe et XVIIIe siècles est mieux révélée par l'élégante simplicité des rares maisons édifiées durant cette période.