Le palais a été construit sur commande de la famille Razzi à la fin de 1500 mais, pour des raisons économiques, la famille Torriani a pris possession du bâtiment. Cette famille, originaire de Milan, acheva vers 1650 les travaux de construction du majestueux palais où elle réside encore aujourd’hui.
L’élégant blason de Torriani est placé sur la grande porte d’entrée , en grès et représentant une tour et deux lions. Les intérieurs du bâtiment conservent à l’intérieur les précieuses décorations de style Liberty de Galileo Chini datant du début du XXe siècle et une œuvre picturale de Silvestro Lega . Malgré l’usure et les vicissitudes liées à la Seconde Guerre mondiale, le Palazzo Torriani a retrouvé son ancienne gloire aujourd’hui grâce aux travaux de restauration qui ont transformé le bâtiment en une élégante résidence d’époque.