İstanbul’un Haliç tarafında gemiler kapısının yanında bulunan kuledeki zindan. Burada her hangi bir suçtan dolayı idamına karar verilen yeniçeriler ile borçlarını ödemeyenler bulunurdu. Harun Reşid zamanında elçi olarak gönderilen İmam-ı Hüseyin soyundan Seyyid Cafer’in Bizans İmparatoru tarafından burada şehid edildiği rivayet edilmektedir. Bu sebeple bu kuleye Baba Cafer adı verilmiştir. 1826 yılına kadar böylece adlandırılan Baba Cafer, Yeniçeri Ocağının kaldırılmasından sonra hükumet tarafından Bab-ı Cafer olarak değiştirilmiştir.

Bizanslılar zamanında da hapishane olarak kullanıldığı bilinen bu yer, 1831 yılına kadar aynı hizmeti gördü. Sultan İkinci Mahmud Han hapishaneyi Sultanahmed’de kurulan karakola kaldırtınca buranın fonksiyonu zamanla kayboldu.