Han Camii’nin batı duvarında hâlâ görülebilen sur kalıntılar, MS 4. yüzyıl sonlarına tarihlenen erken dönem şehir surlarının günümüze ulaşan izlerindendir. Bu surların, Doğu Roma İmparatoru Arcadius’un (MS 395–408) hüküm sürdüğü dönemde, ovaya inen ilk savunma hatlarının bir parçası olduğu düşünülmektedir.
MS 395’te Roma İmparatorluğu’nun bölünmesinden hemen sonra doğudan gelen istilâların etkisiyle, Doğu Roma İmparatorluğu’nun sınırları Dicle’den Fırat’a ve nihayetinde Toros Dağları’na kadar daralmış; bu nedenle Kayseri’nin bir surla çevrilmesi bir zorunluluk hâline gelmiştir. İmparator Arcadius tüm şehirlere sur inşa etmeleri yönünde emir vermiş, ardından gelen İmparator Anastasius (MS 491–518) ise şehirlerin savunmalarını daha da güçlendirmelerini istemiştir.
Bu çabalar neticesinde, Battalaltı’ndan başlayarak Caferbey ve Gülük Mahallesi, Düvenönü, Cumhuriyet Meydanı, Yoğunburç ve Kartal Kavşağı üzerinden tekrar Battalaltı’na ulaşan, yaklaşık 6 kilometre uzunluğunda ve 240 hektarlık bir alanı çevreleyen büyük bir sur hattı inşa edilmiştir.
Bugünkü Gülük Camii çevresi, Ahî Evran Zaviyesi’nin alt bölümleri ve özellikle Han Camii’nin batı duvarında bu sur hattına ait izler günümüzde hâlâ görülebilmektedir. Ayrıca bölgede inşaat yapan bazı müteahhitlerin temel kazıları sırasında sur temellerine rastladıkları, ancak inşaatın durdurulmasından endişe ettikleri için bu kalıntıların hemen betonla kapatıldığı da bilinmektedir.