İlçe merkezinin 15 km. güneydoğusunda Kabakaya Köyü’nde bulunan Antak Kalesi’nin ne zaman ve kimin tarafından kurulduğu kesinlik kazanamamıştır. Bununla beraber kalenin Roma döneminden kaldığı ve 532 yılında Bizans imparatoru I.Iustinianus tarafından onarıldığı sanılmaktadır.
   Ebu Abdullah Muhammed bin Ömerü’l Vakadi’nin yazmış olduğu kitapta bu kalenin hicretin 17.yılında, VII.yüzyılda Diyarbakır bölgesini ele geçirmek isteyen Iyaz bin Ganem ve Halid bin Velid tarafından Diyarbakır’ın fethinden hemen sonra Arapların eline geçtiğini yazmaktadır