Sultan 2. Abdülhamit’in yakını olan Giritli Rum tüccar olan Marko Paşa’nın konağı (Portakaloğlu Aleksia), ailenin Balkan Savaşları sonrasında Yunanistan’a göçmesi ile 1922’de boşaltılıyor. Bir süre boş kalan bina daha sonra Polonya Konsolosluğu olarak kullanılıyor. Cumhuriyet’in kurulmasının ardından 1927’de Hazine’ye devredilip Vali Konağı olarak tahsis ediliyor. Bulunduğu cadde ise bugün Vali Konağı Caddesi olarak isimlendirilmiştir.