На президентских выборах 1980 г. Картер попытался добиться переизбрания. Он конкурировал с известным республиканцем, бывшим губернатором Калифорнии Рональдом Рейганом, который уже участвовал в президентских выборах 1976 г., но тогда номинирован был не он, а Дж. Форд. Теперь же Рейган в ходе кампании легко обыгрывал Картера. Рейгану было особенно приятно, когда ему удавалось уязвить Картера, который, в свою очередь, не жалел красок, чтобы представить своего соперника исчадием ада. Не приводя никаких доказательств, Картер обвинял Рейгана, что тот является поджигателем войны (это выражение охотно подхватывала пресса СССР, впрочем обвиняя самого Картера в том же). В вопросах внутренней политики основной огонь был направлен на предложения Рейгана сократить госбюджет, уменьшить налоги и расширить права штатов. Картер бил тревогу, утверждая, что это приведет к тяжелейшему экономическому кризису. При этом проводилось различие между понятиями «рецессия», под которой подразумевался застой или незначительное падение производства, и «депрессия», то есть катастрофическое падение производства и связанных с ним областей общественной жизни (невозможность расчетов по долгам, крах банковской системы, массовая безработица, социальные волнения и др.). На подобные обвинения Рейган обычно отвечал не по существу, а используя броские выражения. 1 сентября он, например, выступил на праздновании Дня труда в городе Джерси-Сити, недалеко от Нью-Йорка. В центре внимания прессы осталось только одно выражение, причем принадлежавшее президенту Трумэну, которое Рейган лишь дополнил. Трумэн в свое время иронически говорил: «Рецессия происходит тогда, когда ваш сосед теряет работу. Депрессия происходит, когда работу теряете вы». К этому Рейган добавил весьма оптимистичные для себя слова: «Восстановление происходит тогда, когда работу теряет Джимми Картер».
Позиции Картера резко ослаблял продолжавшийся международный кризис, связанный с захватом мусульманскими экстремистами посольства США в Тегеране. «Посольский кризис» продолжался 14,5 месяца. Во всем мире он рассматривался как свидетельство резкого ослабления влияния США, неспособности американского руководства и лично Картера спасти жизни своих соотечественников.
Посольство было захвачено студентами-экстремистами 4 ноября 1979 г. Они выдвигали ряд требований, из которых главным была выдача иранским властям бывшего шаха, находившегося на лечении в Нью-Йорке. Одновременно была развернута пропагандистская кампания, утверждавшая, что захват посольства осуществлен, чтобы сорвать заговор американского империализма и международного сионизма против Исламской революции. В заложники были взяты 66 человек, из которых были освобождены 13 (афроамериканцы и женщины), а позже еще один человек в связи с болезнью. Власти Ирана вначале отмалчивались, но вскоре заявили о поддержке экстремистов. В ответ Картер объявил о замораживании иранских счетов в банках США, а затем разорвал дипломатические отношения с Ираном и ввел полное экономическое эмбарго.
В руководстве американской администрации шли споры, как следует действовать далее. Госсекретарь Вэнс настаивал на отказе от военного вмешательства, полагая, что ему удастся решить проблему путем переговоров. Видимо, основной расчет Вэнса был связан с тем, что бывшему шаху, по прогнозам врачей, оставалось жить недолго, что после его смерти дело разрешится без особых трудностей. Шах, однако, не умирал. В результате Картер согласился на проведение операции по захвату посольства.
Операция по освобождению заложников провалилась, так и не начавшись. По плану предполагалось осуществить высадку в пустыне и одновременно захватить расположенный неподалеку от Тегерана небольшой аэродром. Но ни то ни другое осуществить не удалось. У части вертолетов, приземлившихся на территории Ирана 24 апреля 1980 г., обнаружились дефекты, в результате которых их пришлось бросить, один из вертолетов столкнулся с самолетом-заправщиком, возник пожар, несколько военнослужащих погибли. В результате операция была отменена, а участвовавшие в ней американцы с огромным трудом покинули Иран.
Смерть шаха 27 июля, а затем начавшаяся война между Ираном и Ираком несколько облегчили переговоры об освобождении заложников, посредниками в которых выступали дипломаты Великобритании и Алжира. Переговоры шли крайне медленно, с перерывами, и влияли на избирательную кампанию, подрывая позиции Картера и его администрации, которых обвиняли в полной государственной импотенции, о чем с немалой обидой писал Картер в своем дневнике.