La demeure actuelle a été construite pour le docteur Prosper Choyau et son épouse Adelina, de 1895 à 1898, à l'emplacement de l'hôtel de Beaurepaire. Une photographie prise en 1895, non reproduite ici, montre les travaux en cours ; le monogramme AC (Adelina Choyau) est visible sur la façade est ; le monogramme PC (Prosper Choyau) et la date 1898 sont visibles sur la façade ouest. Outre l'orangerie, il subsiste en sous-sol la cour et le puits de la demeure précédente ; quant à la cheminée Louis XVI et aux trumeaux de cheminées des années 1830, ils peuvent être un remploi de l'hôtel de Beaurepaire ou avoir une provenance étrangère. En raison de sa qualité architecturale, il serait intéressant de connaître l'architecte de la demeure. La comparaison avec la maison voisine, 12 rue Millandy, construite en 1875 par Léon Ballereau père, plaiderait pour une attribution à Léon Ballereau fils, par ailleurs auteur d'un projet de cheminée pour la grande salle en 1926 ; toutefois, cette hypothèse doit être étayée. La demeure précédente - maison ou hôtel de Beaurepaire - appartenait à la famille Froment, du moins dès avant 1701 où le doyen du chapitre Antonin Froment y fait allusion dans son testament. Antérieurement, elle appartenait à la famille Orceau, qui la mit à la disposition des capucins de 1619 à 1648. Cette maison a été vendue en deux lots séparés par Gabriel Joseph de Froment, la partie nord au notaire Mariteau en 1786, la partie la plus importante (correspondant au fonds de la maison Choyau) au sénéchal Pierre Coutouly de la Vergne, en 1787. Sous l'Ancien Régime, la demeure ressortissait du fief de l'évêque. Enfin, il est intéressant de noter que sur le plan de Luçon de 1704, le jardin de Beaurepaire possède un parterre en hémicycle du côté ouest ; ce terrain, acquis avec la maison en 1787, fut vendu en 1788 par Pierre Coutouly de la Vergne à Joachim Bougy pour y édifier une maison. La datation de l'hôtel de Beaurepaire est difficile à établir, faute d'indications d'ordre stylistique dans les actes notariés, pourtant détaillés. Son plan figure sur les cadastres de 1816 et 1845 : des bâtiments en U, édifiés entre une cour donnant sur la rue et un jardin, une orangerie au nord du jardin. Quant à cette dernière, non évoquée dans les actes de la fin du XVIIIe siècle, elle a sans doute été construite par Pierre Coutouly de la Vergne peu après 1787.