Het werd gebouwd op de plaats van de oude hermitage van Hulsberg, waarvan de plaats sinds 1680 toebehoorde aan Nicolaas Poislevache, deken van het kapittel van Borgloon.
Deze laatste had meerdere pelgrimstochten gemaakt naar Loreto (Ancona, Italië) en wilde zijn eigen Heilige Huis bouwen in Borgloon.
Er is veel meubilair uit de oude kerk, waarvan vele dateren uit de 19e eeuw, zoals het schilderij van Saint-Lambert, patroonheilige van de kerk, zijn standbeeld, een processie Maagd en stenen doopvonten.
Er zijn ook grafstenen van notabelen uit de 17de eeuw op de buitenmuur.