把柄自然不少，很快便被锦衣卫查实‘泄禁中语’，‘廷试读卷不公’等罪名，贬为广西布政使司参议。旋即又为李至刚所构陷，改贬交趾布政使司……

从广西被贬到越南，解缙从天上掉到了地狱，苦捱了三年后，朱棣终于想起他来，下诏命他进京面圣。接到旨意，解缙涕零万状，赶紧奔赴京城，无奈交趾距离京师太远，等他跑到京城时，皇帝已经北伐了。

解缙只好在南京等待旨意，百官以为他定要起复，自然争相拜访，竞相延邀，解缙很快找回了文坛领袖、百官之师的感觉，又一次春风得意起来。结果一得意就忘形，他竟私下谒见太子。孰料汉王早就盯着他了，马上向在漠北的皇帝告密说，解缙私觐东宫，必有隐谋。

皇帝出征在外，最忌讳的就是这个，闻之非常生气，命锦衣卫以‘无人臣礼’罪，将其下狱，至今已经整一年了。解缙的人缘并不好，但朝中官员仍竭力营救，除了他是赣党党魁之外，还因为他是册立太子的头号功臣。

当今永乐皇帝有三个儿子，都是徐皇后所生。三个儿子里，长子朱高炽是个大胖子、脚还跛，需要两个宫人搀扶，才能行走，这让强悍矫健的朱棣很是不喜。朱棣则一直偏爱次子赵王高煦，赵王性格颇似朱棣，武勇英俊，在靖难中立过大功、救过朱棣的命，而且朱棣也曾亲口许愿将来夺取天下，立他为太子。

但朱高炽是太祖为朱棣选择的燕世子，而且性格仁爱儒雅，得到文臣们的全力支持。解缙当时身为文官之首，替太子说了太多好话。几次关键时刻，都是解缙起了决定作用，最终才让皇长子被立为太子。

百官为解缙喊冤，其实就是在保护太子。摊上今上那样强势多疑、残暴不仁的爹，又有个如狼似虎、虎视眈眈的兄弟在侧，太子风雨飘摇、朝不保夕，百官又不敢公开替他说话，就通过为解缙喊冤的方式，间接表达对‘无人臣礼’的另一方，太子朱高炽的支持。