La cappella, nella sua forma attuale, fu costruita nel 1681 da un membro della famiglia Prack zu Asch presso il castello di Angerburg. Secondo un'antica leggenda, il signore del castello conduceva una vita dissoluta e, come punizione, gli nacque un figlio con il corpo di un cane e il volto umano. Egli promise alla Madonna di far costruire una cappella se il bambino fosse morto. Questa leggenda è ricordata ancora oggi da un affresco raffigurante il cane con il volto umano.
In origine, la cappella custodiva una scultura lignea della Madonna con il Bambino, risalente alla fine del XV secolo e ispirata allo stile di Michael Pacher. In passato, inoltre, la festa della Visitazione di Maria, celebrata il 2 luglio, veniva solennemente festeggiata con il tradizionale «Stöcklkirchtag».
