În 1821, a fost aprobată construirea Azilului de nebuni din Carolina de Sud și a școlii pentru surdo-muți, Carolina de Sud devenind astfel al doilea stat care a alocat bani pentru tratarea celor cu boli mintale. Robert Mills a fost ales să proiecteze noul azil, iar în 1822 a început construcția clădirii Mills Building. În 1828, Azilul de nebuni din Carolina de Sud și-a admis primul pacient, dar clădirea Babcock nu a fost construită decât aproape treizeci de ani mai târziu, din cauza creșterii populației.

Proiectul inițial al campaniei de construcție a fost realizat de George E. Walker, dar a inclus doar o parte din aripa sudică. Gustavus T. Berg a fost arhitectul pentru aripa nordică, iar Samuel Sloan a fost arhitectul clădirii centrale, care făcea legătura între cele două aripi. Procesul de construcție a fost amânat de mai multe ori, ceea ce a dus la un proces de construcție în patru faze care a durat aproape treizeci de ani pentru a fi finalizat. În 1885, clădirea și-a acceptat primii pacienți.
Clădirea Babcock conținea o structură centrală cu patru etaje, completată cu o cupolă, și o aripă nordică flancată pentru bărbați și o aripă sudică pentru femei. Clădirea a urmat stilul renascentist renascentist italian și a fost împodobită cu podele și ornamente din lemn. Structura centrală conținea săli de operație la etajul al doilea, locuințe pentru supraveghetor și unii medici la etajele al treilea și al patrulea și săli de mese pentru pacienți. Fiecare etaj al fiecărei secții conținea camere individuale pentru pacienți până în 1915, când a început renovarea. La acea vreme, era doar al treilea azil construit în Statele Unite, dar nu a fost prima dovadă de tratament pentru bolnavii mintal din stat.

Clădirea a fost inclusă în Registrul Național al Locurilor Istorice în 1981 și a fost evacuată în anii 1990.

.