Sikandar Lodi fut le premier sultan de Delhi à vivre dans le fort. Son fils y construisit quelques palais et une mosquée. Le fort pris, puis perdu, dans une série de plusieurs batailles entre les Moghols et les souverains Rajput avait une grande importance stratégique. A cette époque, il était en briques.