Po odejściu z urzędu Carter nie spoczął na laurach dodatkowo poświęcił się dalszej działalności publicznej. Wygłasza odczyty, działa w środku charakterze działacza pokojowego oraz na temat praw człowieka (dzięki jego mediacjom m.in. nie doszło do większego rozlewu krwi do wnętrza czasie kryzysu na Haiti). W 1994 r. podjął się negocjacjom z Kim Ir Senem do wnętrza sprawie załagodzenia północnokoreańskiego kryzysu nuklearnego. Pisze książki. Z końcem 2006 roku opublikował książkę "Palestyna: Pokój nie Aparthaid".
W 2003 wydał powieść historyczną pt. The Hornet's Nest która jest pierwszym dziełem beletrystycznym napisanym na wskroś prezydenta USA.
Jego imieniem nazwano nowomodny jądrowy okręt podwodny klasy Seawolf US Navy – USS Jimmy Carter.