La casa toma su nombre de uno de sus propietarios: Jean-François Ignace d'Espagne (1690-1742). Médico y abogado, consejero en el Parlamento de Toulouse, era alcalde de Castelsarrasin cuando adquirió esta propiedad en 1739.
Erigió un magnífico torreón de esquina cuadrado, volado, sobre arcos troncocónicos bajo la esquina gemela sobre pilares. Está rematada por una cúpula de cuatro lados, coronada por una linterna y soportando un frontón. Sobre el portal había un escudo de piedra con las armas de la familia española. En 1956, la torre, que se encontraba en muy mal estado, fue demolida por motivos de seguridad. Fue reconstruida en 2000.
El nombre de "Maison d'Espagne" puede resultar confuso... sobre todo porque, durante décadas, esta residencia también fue conocida como la "Casa Italiana" por el estilo de su arquitectura.
Este edificio alberga el museo Firmin Bouisset, creador de los famosos carteles publicitarios de Petit Lu, de la niña de Chocolat Meunier...
