但如此一来，那彦成便也遭到了弹劾，很多官员素来不相信那彦成所谓平灭浩罕之言，这次浩罕唆使玉素甫东侵，又有那彦成驱逐商旅的名义，是以诸多官员也将那彦成驱逐商人之举视为公然挑衅，认为是他办事无方，才导致玉素甫之役。道光与乾隆对边境的认知也全然不同，原本就不认同那彦成用兵之念，眼看他驱逐商旅和这场战争多有关连，便即认定了那彦成误国肇衅之罪，再次削去那彦成一切官职。而那彦成经过这次罢官，也自知年事已高，再任要职已是全然无望，在家闲居不过两年便即染病，到了阮元见他之时，已是无力起身，性命只在数日之间。
而这时看到阮元，那彦成也不禁回想起自己一生往事，少年时立志报国，中年时几经起落，到了临终之际，竟是一世功名，尽赴流水。也向阮元苦笑道：“伯元，这几日我回想当年旧事，想着咱们考中进士那个时候，是何等的意气风发，后来和珅就擒，朝政一新，那时候我还想着，能够立功报国的机会终于到了。可是……不想三十四年，我竟是四起四落啊？到了如今这临终之时，还落得如此下场，哈哈，我名叫那彦成，可到了这定论之际，却是一事无成啊？伯元，我每次回想起来，都是惭愧不已啊，我……我九泉之下，可如何去见玛法他们呢？”
“东甫兄，其实这三十多年，你所立功勋，也一点都不少啊？或许外人不知，可我都记得呢。”阮元眼看那彦成失落如此，也只好开导他道：“东甫兄，你川楚战场和滑县之役，俱有大功，这军功可是你舍身奋战换来的啊？在广州，你也招抚了不少海盗，在甘肃，最起码那年大灾，百姓都得到了放赈啊？这些年你平了青海野番，新疆定立章程，伯克补任再无冗滥之状，这不也是一大功吗？只是……或许东甫兄遇到的事，要比我遇到的困难得多，剩下的，也都是天数了。就算我平日回想旧时所办之事，尚不能尽善尽美，东甫兄又何必如此计较呢？”
“是吗，我……其实我清楚，论抚境安民，理财治吏之能，我远不如伯元啊？伯元，你做督抚的才干，在我看来，乃是首屈一指，只可惜……可惜当年万柳堂之会，你我、煦斋，还有那几位督抚，咱们立誓再兴盛世，共扶朝政，可如今呢？当年的六个人，亡故者二人，命不久长者二人，煦斋他也……如此说来，也就剩下你……你一个人了啊？”那彦成无力地感叹道，阮元自知他所言确是事实，十四年前的万柳堂总督之会，其中蒋攸铦和黎世序已经去世，那彦成和孙玉庭寿数无多，英和虽听闻也要开释回京，但宝华峪之事一起，英和便彻
…。。