En 1427 (nouveau style), "deux maisons […] avecque le jardrin, court et aultres appartenances et deppendances" furent acquises par Jean Binel dit l'Aîné et son fils Olivier, de l'abbé et couvent de Saint-Serge. La famille Binel, seigneur de Lézé ou Lécé, d'où la première appellation de ces maisons, était déjà au début du XVe siècle une famille importante d'Angers, gravitant dans le monde juridique. Si nous ne connaissons pas l'activité de ce premier Jean, son père Yvonnet était au service du duc en tant qu'enquêteur d'Anjou. Avec la génération d'Olivier Binel, se précise l'ascension de cette famille : celui-ci, mort en 1459, était greffier des Eaux et Forêts d'Anjou, et son frère, un deuxième Jean, sieur de Malvoisine, fut successivement substitut du procureur d'Anjou, puis procureur. L'édifice est reconstruit vers 1437-1141d d'après une dendrochronologie de la charpente du corps principal en fond de cour, mais il conserve des éléments antérieurs dont on ne peut mesurer l'importance à défaut d'une archéologie du bâti. Assurément, le mur-pignon du logis principal orienté à l'est, vers les logis de la Cour des Caves, ancienne demeure intra-muros de l'abbaye Saint-Serge, remonte au XIIIe siècle et conserve les traces d'une originale disposition de trois baies, faite d'une rosace centrale accostée de deux lancettes, aujourd'hui masquée à moitié par une maison du XVIIIe siècle voisine, mais bien reconstituable. L'ampleur de cette composition (8 m de large) inscrite dans un bâti moins élevé que le pignon actuel selon un pignon fossile encore discernable, ne peut correspondre à un simple oratoire de logis : plutôt à un chevet plat d'une chapelle (l'orientation est justement à l'est), qui serait celle relevant alors du fond ecclésiastique de Saint-Serge. L'absence inhabituelle de sous-sol pour cette partie de l'hôtel se justifierait d'autant. Par ailleurs, la base de la tour d'escalier en vis hors-œuvre qui flanque la façade semble procéder d'une phase antérieure aux Binel, d'après le départ, primitivement plus bas de la vis, son entrée tournée vers la Cour des Caves, et non comme aujourd'hui vers la cour de l'hôtel (le niveau de sol actuel a été remonté au vu de la base moulurée de la vis de l'escalier aujourd'hui enfouie, probablement d'une trentaine de centimètres, d'où le perron extérieur). Un usage plus tardif d'habitation est donc certain dès les premières années du XVe siècle selon le dessin à moulures prismatiques de la base de cette vis d'escalier. On peut de ce fait y reconnaître l'une des deux maisons de l'achat de 1427. Un petit corps annexe prolonge par l'arrière, en équerre, le logis principal (mais mal relié par les niveaux, de même époque ?). La seconde "maison" mentionnée en 1427 pourrait être le corps d'entrée sur rue (actuels 34-36, rue Pocquet-de-Livonnières), entrée initiale de l'hôtel – la rue de l'Aubrière actuelle n'existe que depuis le XIXe siècle. Très retouché vers 1900, ce logis sur rue pourrait effectivement remonter au début du XVe siècle, d'après les éléments en place, base d'escalier en vis à moulurations prismatiques à l'instar de la vis du logis principal, pan de bois sur la façade postérieure à grandes croix de Saint-André, la mise en œuvre la plus ancienne de colombage.

Un second logis fut construit en 1480d, selon la dendrochronologie de la charpente. Le maître d'œuvre en est un troisième Jean Binel, fils cadet d'Olivier Binel. C'est le membre le plus connu de la famille, un des personnages les plus notables d'Angers, qui eut même et surtout une carrière nationale au service de la royauté. Né vers 1430 et mort en 1491, il occupa les plus hautes fonctions à l'université qu'il contribua largement à créer et à la municipalité dont il fut maire en 1486-1487 avant d'être échevin perpétuel. Nommé juge ordinaire d'Anjou, par le roi René dont il était un familier, il participait au conseil ducal dès la fin des années 1450. Mais c'est surtout comme serviteur des rois de France, Louis XI puis Charles VIII qu'il acquit une stature exceptionnelle, missions diplomatiques en Italie, rôle de témoin dans la dévolution des différents duchés et comtés de René d'Anjou à la couronne, participation aux états généraux de Tours de 1483 où se décida la régence de Charles VIII. Proche de ce dernier, il le reçut par deux fois dans son hôtel d'Angers lors des noces en 1487 de Jean II de Bourbon, chambellan et connétable de France, avec sa cousine Jeanne de Bourbon-Vendôme, et en 1490 à l'occasion d'un passage du roi par Angers pour gagner la Bretagne. Au regard de ce parcours inhabituel pour un bourgeois d'Angers, le logis de ses parents était insuffisant : Jean Binel l'augmenta en conséquence d'un nouveau corps de logis en 1480, entièrement dévolu à la représentation : celui-ci consistait en trois vastes salles superposées exclusivement destinée à la réception, occupant tout le corps de bâtiment et bénéficiant d'une entrée et d'un escalier spécifiques sur une allée latérale menant au rempart de ville, indépendante de la cour d'entrée du corps de logis d'habitation de l'hôtel et accessible depuis la rue par un passage couvert aménagé en extrémité du corps sur rue.

Au milieu du XVIe siècle, entre 1535 et 1559, le logis d'entrée sur rue fut détaché et vendu par le petit fils du grand Jean Binel, Charles Binel, sieur de la Bouchardière, à Louis de Breil. L'entrée de l'hôtel se fit alors uniquement par l'allée latérale. L'hôtel proprement dit fait l'objet de ventes par différents héritiers de la famille Binel qui le morcellent, notamment en 1559 et en 1561. Ainsi, par la vente de 1559, Gabrielle Binel, sœur de Charles Binel, vendit sa part à Jean de Boysguérin, juge au présidial, quand René Binel, sieur de Réchaussé, deux ans plus tard, fait de même en faveur de l'avocat Pierre Delespinière. En 1617, par trois contrats, François Lefebvre de l'Aubrière réunit à nouveau les différentes parties de l'hôtel, hors le corps sur rue qui ne fut depuis lors jamais récupéré, passant par différentes familles, Saillant, de Landévy, Hiron, Dupas, Richomme, Goureau, Daburon, Guérin, Genneteau... Ce logis fut diminué sur sa partie gauche au XVIIe siècle, une nouvelle maison s'y implantant (l'actuel n° 38, rue Pocquet-de-Livonnières.). Amputé de la partie antérieure de la propriété, l'hôtel s'ouvrit désormais sur la ruelle de l'Aubrière par un nouveau portail, à l'emplacement actuel. La famille de l'Aubrière posséda pendant plus d'un siècle et demi l'hôtel proprement dit, durée qui fit communément appeler désormais la demeure hôtel de l'Aubrière, dont Jérôme Lefebvre de l'Aubrière, milieu XVIIe siècle, chanoine de la Sainte-Chapelle de Paris et conseiller en la grand chambre du parlement de Paris, François, fin XVIIe siècle, conseiller au parlement de Bretagne, Charles-François, début XVIIIe siècle, conseiller au même parlement puis évêque de Soissons, Jérôme, milieu XVIIIe siècle, docteur en Sorbonne, doyen premier dignitaire de l'église de Nantes, abbé commendataire de l'abbaye de Villeneuve, près de Nantes. L'architecture de l'hôtel n'évolue pas fondamentalement sous les Aubrière : dans le courant du XVIIe siècle, un petit corps de logis sur la cour d'entrée est plaqué contre le pignon du corps de logis latéral de 1480, deux lucarnes sont refaites sur la façade antérieure du corps principal. La distribution intérieure garde encore les grandes pièces de réception de l'aile de 1480.

Au début des années 1770, la propriété passa à un avocat René-Joseph-François Couraudin, avocat, puis au début du XIXe siècle à son gendre, François-René Delaunay de la Briderie, auditeur à la chambre des comptes de Nantes. Au début du Second Empire, la propriété est pour l'essentiel au baron de Wolbock, petit-fils et héritier de F.-R. Delaunay, quand la partie postérieure de l'édifice et le jardin sont au presbytère de la paroisse Notre-Dame. Dans ce milieu du XIXe siècle, l'édifice avait fait l'objet à nouveau de subdivisions qui avaient fortement entamé son intégrité, notamment la moitié arrière du corps de logis de 1480, entraînant la division des vastes salles créées pour Jean Binel, qui étaient encore intactes au vu des descriptions de la fin du XVIIIe/début du XIXe siècle. De même, la distribution du corps de logis principal était aussi largement reprise. La pièce principale du rez-de-chaussée du logis principal présente un plafond néo-gothique à voûtes d'ogives plates dans des caissons. En 1864, le baron de Wolbock proposa de vendre sa partie à la ville qui y trouva l'opportunité d'augmenter le presbytère trop petit au lieu d'avoir à le reconstruire, acquisition concrétisée en 1865. Suite à l'affectation complète de l'hôtel au presbytère, de nouveaux travaux eurent lieu : dans le cadre de la régularisation de la rue de l'Aubrière qui depuis peu était maintenant reliée à la rue Chevreul, la tour d'escalier en vis semi-hors-œuvre du corps de logis de 1480, qui avançait sur la voie fut supprimée, de nouvelles fenêtres percées et tous les encadrements de baies refaits. Quelques fenêtres du XVe siècle subsistent, deux sur le pignon antérieur du corps de 1580, dont une avec colonnettes, accolade et un petit masque, visibles dans le comble du petit corps rajouté au XVIIe siècle ; d'autres, petites, simplement chanfreinées, sur le petit corps en arrière du logis principal. Le jardin qui allait initialement jusqu'à l'enceinte urbaine est amputé de son extrémité orientale tandis que des constructions adventices modernes ont été implantées au contact direct des parties arrières de l'hôtel. Vers 1900, le corps de logis sur rue fit l'objet d'un rhabillage de façade en tuffeau et les charpentes refaites. Une restauration générale eut lieu au tournant des années 2020, le presbytère n'occupant plus qu'une partie des lieux, une autre partie désormais réservée à de l'habitation.