La tradition qui relate l'arrivée d'une statue miraculeuse de la Vierge sur le rivage boulonnais en l'an 639 donna l'impulsion à un important culte marial qui trouva tout son développement au Moyen Age. Un premier sanctuaire fut construit à l'époque en haute ville, remplacé vers 1100 par une abbaye construite par Ide de Lorraine, épouse du comte de Boulogne Eustache II et mère de Godefroy de Bouillon. Boulogne devint un grand centre de pèlerinage au rayonnement si étendu qu'il accueillit jusqu'aux rois de France et d'Angleterre, venant vénérer Notre-Dame de Boulogne.