D'après la légende, saint Malo, premier évêque d'Aleth, mort vers 627, aurait fait une halte à cet endroit en se rendant de Bretagne en Saintonge. En souvenir, une croix y avait été élevée de longue date et figure sur le cadastre de 1827. Le site était notamment connu des mères qui y amenaient leurs enfants pour faire leurs premiers pas.

On doit à Marie Boursier et à Marie Levêque, deux jeunes habitantes de Beausse, la construction, dans le 3e quart du XIXe siècle, d'un oratoire "en planches" avec autel en bois dédié à la Vierge, à l'emplacement de la vieille croix. En 1880, les dons octroyés par les habitants de Beausse permettent de bâtir une nouvelle chapelle en pierre bénite par le curé de Beausse, le lundi de la Pentecôte 1880. Deux croix en fonte sont installées de part et d'autre pour rappeler le souvenir de la Croix-Malo. La chapelle est restaurée entre 1967 et 1968.