Kościół św. Michała, Na Skałce