مازال زمن بناء هذا البرج مجهولاً حتى الآن، كما لا توجد مصادر مكتوبة توضح وظيفته الأساسية. إذ يعتقد بعض المؤرخون أنه بني بين القرنين الرابع والسادس، بينما يرجح آخرون إلى أنه أنشئ في القرن الحادي عشر. توجد نقوشات على ارتفاع 14 متراً لجدار البرج الجنوبي بخط مسعود بن داود باللغة العربية القديمة، والتي تشير غالباً إلى اسم المعماري الذي قام بتأسيس هذا البرج.