Foi construído pelo vice-rei Bernardo de Gálvez y Madrid sobre o cerro de Chapulín (Chapultepec é uma palavra de origem nahuatl; "Chapulli" significa gafanhoto e "tepe"(tl) significa colina, pelo que "Chapultepetl" quer dizer "colina do gafanhoto" ou "colina do chapulín". Construído na época do Vice-Reino da Nova Espanha como casa de verão para o vice-rei, foram-lhe dados diversos usos, desde armazém de pólvora até academia militar, em 1841.