Das Gebäude umfasst einen antiken Turm, der vermutlich mit einem Eigentum der Consortia degli Importuni identifiziert werden kann, die in dieser Gegend ihre eigenen Häuser hatte.
Im 1260 wurde von den Ghibellinen zerstört und später wiederaufgebaut: ein Teil des Freskos, das das Brautgemach schmückte, ist aus dieser Zeit erhalten und zeigt Vögel und das Motiv des Vaio, das an die Fresken des Palazzo Davanzati erinnert.Im Jahr 1515 wurde das Gebäude von den Augustinern erworben, die sich in diesen Jahren in der nahe gelegenen Kirche Santo Stefano al Ponte niedergelassen hatten und das Anwesen bis 1783 verwalteten. Im 19. Jahrhundert wurde das Gebäude von der Pension Quisisana bewohnt, die von Intellektuellen und Künstler insbesondere Angelsachsen beliebt war.
Auch im zwanzigsten Jahrhundert blieb die Pension fast im Charakter des vorigen Jahrhunderts fast unverändert, so dass sie 1985 von Regisseur James Ivory ausgewählt wurde, um einige Szenen der Verfilmung von Edward Morgan Forsters Roman "A Room with view" zu vertonen (Zimmer mit Aussicht). Derzeit wird das Gebäude - nach den notwendigen Restaurierungsarbeiten und einer radikalen Umstrukturierung nach dem Angriff der Georgofili im Jahr 1993 - vom Hotel degli Orafi bewohnt.
Von außen überblickt das Gebäude den Lungarno degli Archibusieri mit einer breiten Front, die sich über fünf Achsen auf fünf Etagen erstreckt und sich über dem Bogen fortsetzt, der die Via de 'Georgofili über weitere zwei Achsen auf drei Etagen überblickt.
An der ehemaligen Haupteingangstür befindet sich noch ein Schild mit einer Variante des Wappens der Familie Fabbroni.