"...Os Frades Descalços fundaram Convento em Faro, em 1546. Daí sairam  por ordem do Rei D. João III,  deixando-o aos Padres Observantes da Província de Portugal que, assim, abandonaram o Convento de Villa-Nova. (hoje, Portimão)

Nuno Rodrigues Barreto, fidalgo Padroeiro dos Frades Descalços, ficou muito desgostoso com a troca realizada e não podendo suportar muito tempo a ausência dos religiosos pela singular devoção e amor que lhes tinha, quatro anos depois de estes haverem deixado o Convento de Faro, fez súplica ao Sumo Pontífice, expondo como tendo ele feito edificar com despesas próprias na Cidade de Faro numa propriedade que fora de seu pai, um Mosteiro aos Frades da Província da Piedade, chamados popularmente os "Descalços", da vida e exemplo dos quais ele e sua mulher Dona Leonor de Milão e mais família se gozava muito em o Senhor com obra e consolação espiritual, o Ministro Geral da Ordem retirára os Frades Descalços do dito Convento e contra vontade dele Padroeiro, colocára ali outros Frades da Observância. Pelo que vendo-se ele e sua família em falta,  frustrados do seu intento e da espiritual consolação, desejavam o acrescentamento do culto e honra Divina edificar aos ditos Frades da Piedade, numa herdade de seu Morgado chamada Quarteira, ou noutro lugar que fosse julgado melhor, junto à Villa de Loulé, um Heremitério ou Oratório à maneira de Convento no qual pudessem viver, quatro ou cinco religiosos, da maneira que em outras casas costumam, as quais queria dar os ornamentos e cousas necessárias para o culto Divino e sustentá-los da sua própria fazenda de tudo o que houvessem necessidade, conforme seu costume e Regra."