Antônio de Caminha aceitou o legado de Aires de Lucena. Vestiu a esclavina do finado ermitão, e tomou conta da gruta onde aquele vivera tantos anos.
Viera àquele sítio como em santa romaria para obter perdão do agravo que fizera à imagem de Nossa Senhora da Glória, e chegara justamente quando expirava o ermitão que a servia.
Resolveu pois consagrar o resto de sua vida a expiar nessa devoção a sua culpa; e todos os anos no dia da Assunção, levantava uma capela volante, onde celebrava-se a glória da Virgem Puríssima.
Toda a gente de São Sebastião e muita de fora ia em romagem ao outeiro levar as suas promessas e esmolas, com as quais pôde Antônio de Caminha