Coge el nombre del escribano Fermín José Aizpuru que la mandó construir entre 1770 y 1780. Más conocida pos la Casa de Don Luís, por el cura que la habitó durante cuarenta años y murió en 1950. LA compró el ayuntamiento muy deteriorada en 1980 y la hizo Casa de la Cultura. En su piso bajo se encuentra el Museo Urrelur, de minerales y fósiles
