Dibangun dari batu pasir, Kastil Paderne terletak di sebuah tanjung yang menghadap ke Sungai Quarteira sekitar 10 kilometer dari Albufeira. Awalnya digunakan oleh orang Romawi pada abad ke-2, namun kastil yang kita lihat sekarang ini dibangun oleh orang Berber pada abad ke-12, dan itu mengalami serangkaian perubahan antara para pembangunnya, Muslim dan penakluk Kristen selama abad-abad berikutnya, dan di dalam temboknya saat ini terdapat reruntuhan sebuah gereja kecil dari abad keempat belas.