Cami, Rodos seferine borizenbaşı olarak iştirak edip, daha sonra adada kalan Borizen Ali Baba’nın adıyla anılmaktadır. Eskiden Alaca Tekke olarak bilinen bu yapının ismi, Borazani Ali Baba’nın burada ikâmet etmesiyle değişmiştir. Avlusunda Borazani Baba’nın Türbesi de bulunmaktadır. Kapısı üzerinde yer alan kitabesinden, Müşir Ahmed Paşa tarafından 1287(1870-71)’de tamir ettirildiği anlaşılmaktadır.

Günümüzde, Aziz Kiriyaki Kilisesi olarak faaliyet göstermektedir.

Kitabesi;
Borizan Baba ikametgâhı olmuştu harâp
Yeniden yaptı anı Hazreti Ahmet Paşa
Sarfı nakdi himem ile bu harâp âbâdın
Etti imârına ikdam O Müşiri dâna
Hayre sarf eyledi nakdi himemin o âsaf
Kıldı bu mâbedi vâlâyı müceddet ihyâ
Bunda Tevhit çekildikçe kılındıkça namaz
Sahibi hayre Hüdâ eder savabın itâ
Tam tarihini Feyzi dedi itmamında
Oldu tamir ile bu mescid rânâ bâlâ
1287

✶ Medya