这事儿得从唐高宗李治那时候说起，时间呢，是显庆四年（659年）。当时啊，这唐朝宫廷里就跟开锅的水似的，热闹得很，为啥呢？就因为立后的事儿闹得不可开交。
唐高宗李治啊，喜欢上了武则天，这武则天可不是一般人呐，那是个厉害角色。李治就琢磨着要把王皇后给废了，立武则天当皇后。可这事儿哪有那么简单啊？这皇后的废立那可是大事儿，关乎着朝廷里各方势力的利益呢！
长孙无忌在这事儿里可就站在了风口浪尖上。他是谁呀？那可是唐朝响当当的人物，凌烟阁二十四功臣之首啊！他既是朝廷的重臣，又是皇亲国戚，身份那是尊贵得很。而且啊，他一直深受唐太宗的信任，唐太宗临死的时候，那可是把朝廷的事儿都托付给了他，让他好好辅佐李治呢！
长孙无忌心里可明白着呢，他觉得这王皇后出身名门，那是正儿八经的皇后人选，而且先帝在的时候，对这门婚事那是认可的。再说了，这王皇后也没犯啥大错啊，就因为失宠就要被废，这算怎么回事儿呢？他是坚决反对立武则天为后的。
这李治啊，也知道长孙无忌在朝廷里的分量，就想办法拉拢他。有一回啊，李治偷偷地派了个使者，给长孙无忌送去了好多好东西。好家伙，金银宝器各一车，绫罗绵帛加起来得有十车，那场面，就跟小山似的。李治就想着，我都给你送这么多好东西了，你就别反对我立武后了呗。可长孙无忌那是个有原则的人啊，他根本就不吃这一套，还是坚决不同意废后。
这武则天可就恨上长孙无忌了，她心里想：“好你个长孙无忌，竟敢坏我的好事儿，看我以后怎么收拾你！”这女人呐，一旦恨上一个人，那可不得了，尤其是像武则天这样有心机有手段的。
就在这时候，出了一档子事儿，就像一颗石子扔进了平静的湖面，掀起了轩然大波。洛阳有个叫李奉节的人，他向唐高宗告发，说太子洗马韦季方和监察御史李巢这俩人勾结在一起，结成朋党啦！唐高宗一听，这还得了，马上就下令让许敬宗和辛茂将去审讯这俩人。
这许敬宗啊，那也是个机灵鬼儿，不过他是站在武则天这边儿的。他接到这个命令后，那是干劲十足，审讯得可紧了。这韦季方哪受得了这个啊，感觉压力太大，就想自杀。不过呢，自杀未遂，还留了一口气儿。
许敬宗可算是抓住这个机会了，他眼珠一转，就想出了一个坏主意。他向唐高宗上奏，说这事儿可没那么简单，这韦季方和李巢结成朋党是假，他们真正的目的是和长孙无忌一起干坏事儿呢！他们打算诬陷朝廷里的忠臣，还有皇帝您的近亲，然后把政权都揽到长孙无忌手里，等时机成熟了，就谋反啊！陛下，您看看，这韦季方为啥自杀啊？那是因为事情要败露了，他害怕了呀！
唐高宗一听，心里“咯噔”一下。他虽然不太相信长孙无忌会谋反，但是许敬宗说得有鼻子有眼儿的，他也有点儿动摇了。许敬宗呢，一看唐高宗有点儿犹豫，就赶紧趁热打铁。
他跑到唐高宗跟前儿，一脸神秘兮兮地说：“陛下啊，您可不知道，这长孙无忌可不是一般人呐！想当年，他和先帝一起谋取天下，那智谋，让天下人都佩服得五体投地。他当了三十年的宰相，那威望，朝廷里的人都怕他。要是他哪天突然谋反了，咱们可就都完啦！陛下您想想，到时候谁能挡得住他呀？”
唐高宗皱着眉头，还是有点儿不信，说：“长孙无忌是朕的舅舅，他会谋反？”许敬宗一看唐高宗还不信，就又说了：“陛下，您可别忘了，汉文帝多英明啊，那还不是把谋反的舅父薄昭给杀了。这事儿可不能心软呐，得赶紧决断啊！”
唐高宗这下可就纠结了，一方面是自己敬重的舅舅，一方面是许敬宗说得这么吓人。他想来想去，最后还是听信了许敬宗的话，下了诏书。这诏书一下，可就不得了啦！长孙无忌的太尉职务被削除了，封邑也没了，直接就被贬为扬州都督，还被安置到了黔州那个偏远的地方。而且啊，唐高宗还让沿途的州府都派兵护送，这哪是护送啊，分明就是押送嘛！
长孙无忌接到这个消息的时候，那真是晴天霹雳啊！他怎么也没想到，自己忠心耿耿一辈子，最后会落得这么个下场。他看着那些来押送他的士兵，心里那叫一个苦啊。可他又没办法，只能收拾东西，跟着士兵上路。