Madison County, w północno-wschodniej Georgii, zostało utworzone 5 grudnia 1811 roku aktem legislatury stanowej.
pierwotnie zamieszkana przez Indian Creek i Cherokee, ziemia została stopniowo przekazana w okresie kolonialnym gubernatorowi Georgii Jamesowi Wright i została podzielona na dwa hrabstwa-Wilkes i Franklin. Ostatecznie ziemie te zostały podzielone na mniejsze hrabstwa, a Hrabstwo Madison zostało utworzone z części hrabstw Clarke, Elbert, Franklin, Jackson i Oglethorpe. Trzydzieste ósme Hrabstwo Georgia zostało nazwane na cześć Jamesa Madisona, który był prezydentem Stanów Zjednoczonych w momencie jego utworzenia.
według spisu z 2010 roku populacja Hrabstwa Madison wynosiła 28 120, co oznacza wzrost z 2000 roku o 25 730. Miasta wchodzące w skład hrabstwa to Carlton, Colbert, Comer, Danielsville, Hull i Ila.
Danielsville, siedziba hrabstwa, została nazwana na cześć generała Allena Daniela, prawodawcy stanowego, który odegrał ważną rolę w tworzeniu nowego hrabstwa. Jest również znany z zlecenia budowy fortu Daniel, w dzisiejszym hrabstwie Gwinnett, podczas wojny w 1812 roku (1812-15). Osadnikami w okolicy byli przede wszystkim weterani Wojny Rewolucyjnej, którzy nabyli ziemię poprzez dotacje na grunty. Madison przez większość swojej historii było przede wszystkim hrabstwem rolnym. W XIX wieku rolnicy uprawiali kukurydzę, fasolę, dynie, a później bawełnę i owies. W drugiej połowie XIX wieku rozpoczęto hodowlę wołowiny i mleczarni. W 1930 roku nadmierna uprawa bawełny uszkodziła glebę w dużej części hrabstwa, czyniąc ją bezużyteczną dla rolnictwa. Od 2003 roku w lokalnej gospodarce dominuje Agrobiznes, w szczególności produkcja drobiu.
najsłynniejszym rodakiem Hrabstwa Madison jest Crawford Long. Urodzony w Danielsville w 1815 roku, Long był pierwszym lekarzem, który użył eteru siarkowego jako znieczulenia podczas operacji. Jako młody lekarz w Jefferson (w sąsiednim hrabstwie Jackson) użył gazu w 1842, gdy usunął guza z szyi Jamesa Venable ’ a za dwa dolary.
poza tym, że jest miejscem narodzin Long, Madison County jest domem dla kilku innych zabytków. New Hope Presbyterian Church, założony w 1788 roku, jest trzecim najstarszym kościołem w Gruzji. Hrabstwo jest również miejscem najdłuższego krytego mostu w stanie. Most, który znajduje się w National Register of Historic Places, znajduje się w Watson Mill Bridge State Park, który jest współdzielony przez Hrabstwa Madison i Oglethorpe. Został zbudowany w 1885 roku przez Washingtona Kinga, syna wolnomularza, kosztem 3000 dolarów. Chociaż most został odnowiony na początku lat 70., pierwotny system kratownic nadal go obsługuje. Most rozciąga się na 228,6 stóp nad południowym rozwidleniem rzeki Broad i jest nazwany na cześć Gabriela Watsona, który kiedyś obsługiwał tartak kilkaset stóp w dół rzeki od mostu.
najbardziej rozpoznawalnym miejscem w hrabstwie Madison jest Stary Gmach sądu. Ukończona w 1901 roku za 18 314 dolarów, ceglana konstrukcja stoi w centrum Danielsville town square. Znajduje się na liście National Register of Historic Places, jest jednym z najbardziej ozdobnych dworków w Gruzji. W latach 1901-1996 funkcjonowała nieprzerwanie jako siedziba sądu i Urzędu Powiatowego, kiedy to urzędnicy przenieśli się do bardziej przestronnego kompleksu Powiatowego.
Hrabstwo Madison jest również domem dla Jubilee Partners, chrześcijańskiej społeczności usług położonej w pobliżu Comer.