Selçuklular zamanında Elbistan’da bir kale olduğu bilinmektedir. Bu kale şehir merkezinde ki Ulu Cami’nin arkasındadır. Günümüzde de bu bölge hala kale(kala) diye anılmaktadır. Bu kalede Selçuklu sarayının izlerine rastlanmıştır, birde yine bu kalenin içinde Selçuk hamamının kalıntıları mevcuttur. Selçuklu melikleri ve valileri burada oturmaktaydılar.