乐大典》、太祖实录的主编在朱棣的眼中变成了一个多余的人，他做的每一件事都得不到朱棣的赞许，取而代之的是不断的斥责和批评。
朱棣讨厌他，不希望再看到这个人，只想让他走远一点，越远越好。但他并没有急于动手，因为他还需要解缙为他做一件大事。
这件大事就是《永乐大典》的编纂工作，如果此时把解缙赶走，大典的完成必然会受到影响，想到这里，朱棣把一口恶气暂时压在了肚子里。
可叹的是，解缙对此一无所知，他还沉浸在天子第一宠臣的美梦中，仍旧我行我素。朱棣终于无法继续忍耐了，解缙实在过于嚣张、不知进退了，于是，在永乐五年（1407）二月，忍无可忍的朱棣终于把还在编书的解缙赶出了朝廷，远远地打发到了广西当参议。
这对于解缙来说是一个晴天霹雳，好端端的书不能编了，翰林学士、内阁成员也干不成了，居然要打起背包去落后地区搞扶贫（当时广西比较荒凉），第一大臣的美梦只做了四年多，就要破灭了吗？
解缙并没有抗旨（也不敢），老老实实地去了广西，此时的解缙心中充满了茫然和失落，但他没有绝望，因为类似的情况他之前已经遇到过一次，他相信机会还会来临的，上天是不会抛弃他的。
毕竟自己还只有三十八岁，朝廷还会起用我的。
然而他等了四年，等到的只是到化州督饷的工作，督饷就督饷吧，平平安安过日子不就得了，可解缙偏偏就要搞出点事来，这一搞就把自己给搞到牢里去了。
事情是这样的，永乐九年（1411），解缙获得了一个难得的机会，进京汇报督饷情况，一个偏远地区的官员能够捞到这么个进城的机会是很不容易的，按说四处逛逛、买点土特产，回去后吹吹牛也就是了，能闹出什么事情呢？
可是大家不要忘了，解缙同志不一样，他是从城里出来的，见过大场面，此刻重新见识京城的繁华，引起了他的无限遐思，就开始忘乎所以了。偏巧朱棣此刻正带着五十万人在蒙古出差未归（远征鞑靼），解缙没事干，加上他还存有东山再起的幻想，便在没有请示的情况下，私自去见了太子朱高炽。
真是糊涂啊，朱高炽家是什么地方？能够随便去的吗？
解缙的荒唐行为还不止于此，他私自拜见太子之后，居然不等朱棣回来，也不报告，就这么走了！解缙真是晕了头啊。
果然，等到朱棣回来后，朱高煦立刻向朱棣报告了此事，朱棣大为震惊，认定解缙有结交太子，图谋不轨的形迹，便下令逮捕解缙，就这样，一代大才子解缙偷鸡不着蚀把米，官也做不成了，变成了监狱里的一名囚犯。
至此，解缙终于断绝了所有希望，皇帝不信任他，太子帮不了他，这下是彻底完了。
回望自己的一生，少年得志，意气风发，虽经历坎坷，却能够转危为安，更上一层楼，百官推崇，万人敬仰。那是何等的风光，何等的得意！
可是现在呢，除了整日不见光的黑牢、脚上