Den Brand eines Bauernhofes im Jahr 1619 hat eine nahe Holzkapelle bei Ortenburg unbeschadet überstanden. Um diese Kapelle herum hat der Baumeister Isaak Bader 1631 die heute noch existierende Barockkirche Sammarei erbaut, die in den folgenden Jahren zum Wallfahrtsort wurde.
Heute ist Sammarei eine der größten Marien-Wallfahrtsorte in Bayern.