Le lieu est mentionné pour la première fois en 1339 et faisait alors office d'oratoire ou de lieu de culte druidique.
Selon la légende, la Vierge Marie fit jaillir une source au Val du Pâtre (Schaefertal en alsacien) et sauva ainsi les bergers et les troupeaux de la sécheresse. Une petite chapelle y est alors érigée et devient un lieu de pèlerinage. Devenue trop petite, elle est agrandie en 1511 vers l'Ouest par des éléments d'inspiration gothique, puis de 1594 à 1596, pour connaître sa dimension actuelle en 1726. Fermée lors de la Révolution française, la chapelle est vendue à un particulier en 1797, avant d'être rendue au culte en 1803.
Le pèlerinage du Schaefertal a été intégré en 2011 au réseau des "Lieux mythiques dans le Rhin supérieur".
Il s'agit de la septième étape alsacienne de la route des lieux mythiques qui compte actuellement 24 lieux retenus et classés, reliés du Südbaden à la Suisse du nord-ouest en passant par l'Alsace.
Y ALLER : à Soultzmatt, prendre la direction de Wintzfelden. Au carrefour après les Sources de Soultzmatt, prendre à gauche en direction de Schweighouse et de Buhl. Après le stade de football et le cimetière militaire roumain, prendre à gauche en direction du "Val du Pâtre".