La maison occupe une parcelle en lanière de la place du 8-Mai-1945, qui semble procéder du lotissement médiéval du bourg de Lassay.

En 1642, elle est occupée par Françoise le Tixier, veuve de Jullien Landry. La maison était alors composée de "deux salles, caves dessous, chambres et greniers dessus, une petite boutique au devant d'icelle sur la grande rue de cette ville, près les halles". La maison était bordée d'une ruelle, donnant accès à la cour arrière, bordée d'une écurie, d'une galerie ainsi que d'un autre corps de logis en pavillon, composé de salle, cave, chambres, greniers et d'un four, situé contre son mur-pignon. Cette deuxième maison se dresse encore au-dessus du Lassay. Entre le pavillon et la rivière du Lassay se trouvait un jardin contenant un petit "réservoir à poissons". En 1762, la maison appartient à Guillaume Landry, écuyer. Julien le Bastard la rachète à ce dernier deux plus tard.

Jean-Baptiste Perrier, marchand, en fait l'acquisition avant 1780. Il entreprend une campagne de rénovation, qui ne semble modifier ni la disposition des différents bâtiments de la parcelle, ni leurs dimensions, mais confère à la maison principale davantage de prestige. Un escalier à jour central est ajouté entre la salle avant et la salle arrière. L'ensemble est également rehaussé d'un étage. La façade principale est redressée en pierre de taille et concentre le décor. Le pierrier, soit un petit canon principalement utilisé sur les navires, qui surgit à la droite du mur, fait allusion au nom du commanditaire.

L'écurie et galerie, qui bordaient vraisemblablement le côté oriental de la cour, sont remplacées au cours du 4e quart du XIXe siècle par une troisième maison.