hamlet av Anderson ble oppkalt etter John Anderson, direktør for den Sør-Vestlige Jernbanen i 1853 da den ble utvidet fra Atlanta til Americus. Det var kjent som Anderson Stasjon til OSS postkontor ble etablert i November 1855. Regjeringen har endret navnet på stasjonen fra «Anderson» til «Andersonville» for å unngå forvirring med postkontor i Anderson, South Carolina.
Under borgerkrigen, den Konfødererte hæren etablert Leir Sumter i Andersonville til huset innkommende Union krigsfanger., Det overfylte Andersonville-Fengselet var beryktet for sin dårlige forhold, og nesten rundt 13 000 fanger døde der. Etter krigen, Henry Wirz ble dømt for krigsforbrytelser i slekt å kommando av leiren. Rettssaken ble senere ansett som urettferdig av flere grupper, og et monument i hans ære som har vært reist i Andersonville av United Døtre av Konføderasjonen.
Monument i Andersonville dedikert til Henry Wirz
byen er også serveres som en supply depot under krigen., Det følger med et postkontor, et depot, en smeden butikken og stabil, et par butikker generelt, to salonger, en skole, en Metodist-kirken, og rundt et dusin hus. (Ben Diker, som eide grunnen der fengselet ble bygget, var både depot agent og postmaster.)
Til etablering av fengsel, og området var helt avhengig av jordbruk, støttet av mørk rødlig brun sand loams senere kartlagt som Greenville og Red Bay jord-serien., Etter utgangen av fengsel og slutten av krigen, byen fortsatt økonomisk avhengig av landbruk, først og fremst dyrking av bomull som en vare avling.
Det var ikke før i 1968, da storskala gruvedrift av kaolin, bauxitic kaolin, og bauksitt ble påbegynt av Mulcoa, Mullite Company of America, at byen ble dramatisk endret. Denne operasjonen utnyttet på 2000 dekar (8.1 km2) av scrub eik villmarken til en massiv industri og raffinering drift. Selskapet leveres nå mer enn 2000 tonn raffinert malm fra Andersonville hver uke.,
I 1974, lang tid mayor Lewis Easterlin og en gruppe av berørte innbyggere bestemte seg for å fremme turismen i byen, redeveloping Main Street til å se mye som det gjorde under den Amerikanske borgerkrigen. Byen Andersonville og Andersonville National Historic Site, plassering av fangeleir, er nå turistattraksjonene.