В результате всего через месяц Конгресс собрался на сессию, которая получила название "панической". Через 6 месяцев после перевода правительственных средств со счетов центрального банка Джексон был подвергнут процедуре импичмента с раскладом голосов 26 : 20. Это был первый подобный случай в истории Конгресса США. Джексон в свою очередь, набросился на банк: "Вы ядовитые змеи внутри государства! Я собирался вас высечь и я сделаю это!" Судьба Америки держалась на волоске. Если бы Конгресс собрало достаточно голосов для преодоления президентского вето, то банку бы была предоставлена еще одна 20-летняя монополия на распоряжение национальной валютой. Срок, достаточный для дальнейшего укрепления и без того немалой власти банка! Но произошло чудо - в поддержку Джексона с серьезной критикой центрального банка выступил губернатор Пенсильвании. Сверх того, Бидл был уличен в принародном хвастовстве о том, как банк собирается обрушить экономику. Это сразу же изменило политический расклад сил. 4 апреля 1834 года Палата Представителей проголосовала 134 : 82 против продления лицензии банка. Еще более убедительный перевес голосов был достигнут при голосовании о создании специальной Сенатской комиссии по расследованию степени вины банка в экономическом кризисе. Когда члены специальной комиссии прибыли в здание банка в Филадельфии, Бидл отказался им предоставить бухгалтерские книги. Также он не позволил провести инспекцию счетов, связанных с кредитами и авансами, выданными конгрессменам. Кроме того, он отказался выступить с показаниями перед Комиссией в Вашингтоне.
8 января 1835 года Джексон погасил последнюю часть национального долга. Это стало возможным благодаря разрешению банкам выпускать валюту на сумму выкупленных правительственных облигаций, а не просто за счет выпуска казначейских обязательств, не обеспеченных долгом. Через несколько недель, 30 января 1835 года, убийца по имени Ричард Лоуренс стрелял в Президента Джексона из двух пистолетов, но, слава Богу, оба раза промахнулся. Позже суд признал его невиновность по причине умственной невменяемости. Однако после своего освобождения он хвастался, что некие могущественные европейцы заказали ему убийство и обещали в случае поимки защитить.
В следующем году, по истечении срока действия лицензии, Второй Банк США прекратил свое существование. Бидл бы арестован и отдан под суд по обвинению в мошенничестве. Его судили и вскоре оправдали. Однако он продолжал находиться под следствием по подозрению в совершении более мелких прегрешений.
После истечения своего второго президентского срока президент Джексон вышел в отставку и прожил остаток жизни в своем поместье недалеко от Нэшвилла. Его здесь до сих пор помнят за решимость в борьбе с центральным банком. Действительно, ему удалось так хорошо "ликвидировать" частный центральный банк, что менялам понадобилось целых 77 лет, чтобы "зализать раны". Когда Джексону задавали вопрос, что он считает самым важным достижением в своей жизни, он отвечал: "Я ликвидировал банк".