Le prieuré aurait été fondé en 1162 par l'abbaye Saint-Vincent du Mans (tout comme le prieuré de Saint-Vincent-du-Lorouër), sous l'invocation de Notre-Dame -qui est celle de l'église paroissiale. Le plan cadastral de 1818 ne représente pas les bâtiments du prieuré (pavillon et maison) ; il n'indique que la grange-étable qui se trouve de l'autre côté de la route. Pourtant l'examen du bâti confirme qu'une partie au moins du pavillon et la pièce ouest de la maison (moulure du linteau de la cheminée autour de 1600) sont antérieurs. Au pavillon, la différence de niveau à l'étage et une déformation visible au niveau de la charpente permettent d'envisager l'hypothèse d'un agrandissement au XVIIIe siècle (avec l'aménagement de la chambre à cheminée Louis XVI). La pièce ouest de la maison est beaucoup plus ancienne que les deux suivantes. Elle a été régularisée extérieurement lors de leur construction, au XIXe siècle (1837 ? 1840 ? comme l'indique le registre des augmentations). Une augmentation de construction est également mentionnée en parcelle C 516 en 1873 : peut-être s'agit-il du bâtiment adossé au pavillon. Le toit à porcs a été construit au XIXe siècle.