Le four banal seigneurial, propriété de l'évêque de Maillezais-La Rochelle, se trouvait ici jusqu'à la Révolution. Il est encore mentionné sur le plan cadastral de 1835, dans le prolongement nord des bâtiments actuels. Le plan montre aussi que le site était reliée, à l'ouest, à la Jeune Autise par une chaussée (actuelle rue de Millé) longée par un cours d'eau qui, élargi sans doute au XIXe siècle, a constitué jusqu'au milieu du XXe un port appelé le port du Four.

Dépendance de la seigneurie de Maillé, le four banal fait par exemple partie des dépendances seigneuriales affermées le 20 novembre 1784 par l'évêque de La Rochelle à Venant Gaudicheau, marchand à Fontenay-le-Comte, et son épouse Françoise Denfer. Saisi comme bien national à la Révolution, le four banal est vendu aux enchères le 16 avril 1792. Il touche alors, au sud, au port "de l'Egage", à l'est à Louis Babin, "un sentier entre deux", et, au nord, au pré du sieur Jean Quoy qui s'en porte acquéreur pour 800 livres.

Jean Quoy (1758-1817), chirurgien à Maillé, demeure probablement près de là (10 rue du Four), dans la maison qui a dû appartenir à ses parents, Dominique Quoy et Anne Guérin. Il est le père du chirurgien de marine et scientifique Jean René Constant Quoy. Le "ci-devant four banal" fait toutefois partie des biens mentionnés en 1820 dans le testament de la sœur de Jean Quoy, Jeanne Anne Quoy, veuve de Joseph Constantin, bourgeoise à Fontenay-le-Comte. Parmi ses biens (dont la maison paternelle ou encore la Pichonnière), elle lègue l'ancien four banal à sa fille Hélène Perside Constantin, épouse de Philippe Audigé, ancien notaire à Niort, demeurant désormais à Maillé.

Les 25 mars 1834 et 23 avril 1835, Hélène Perside Constantin et ses fils, Philippe Audigé fils, alors étudiant en médecine à Montpellier, et Jules, sans profession, demeurant à Maillé, font le partage de biens restés indivis entre eux depuis le testament de leur mère et grand-mère. L'ancien four banal est alors attribué à Philippe Audigé fils qui deviendra médecin à Ardin, près de Niort. Le bâtiment confronte alors, au sud, à la rue et au port du Four et, au nord, au pré des Egageries, également compris dans la succession Quoy-Constantin et qui, lui-même, touche, au nord, au marais communal de Saint-Nicolas. Le plan cadastral de 1835 montre l'ancien four banal, prolongeant au nord un bâtiment de ferme. Le tout appartient à Philippe Audigé. La ferme passe ensuite au fils de ce dernier, Marie Jacques Emilien Audigé, notaire, demeurant à Poitiers puis à Ardin, époux de Henriette Régnault, qui la fait reconstruite en 1879. Elle prend alors probablement l'essentiel de son aspect actuel, l'ancien four banal disparaissant définitivement. Toujours appelée, toutefois, "la propriété du four banal", elle est vendue en 1899 par les héritiers Audigé à Xavier Mounier, cultivateur, et son épouse Alexandrine Gousseau.