在李世民举办的宴会上，尉迟敬德看到有人的席位在自己之上，瞬间心里的火气就飚到了最大值，指着那人问“你有什么功劳，能在我之上？”还没等那人说话，排在尉迟敬德之后的任城王李道宗就出来打圆场。然而尉迟敬德不仅不给李道宗面子，而且拳头直接就招呼到了李道宗的脸上，差点废了一只眼睛。李世民知道后实在无法再继续纵容尉迟敬德。
实际上尉迟敬德居功自傲已经很久了。四姑娘最近看了几集《唐砖》，有一个很有意思的场景就是在早朝的时候，文臣和武将分列而站，然后在为一件事“对骂”，而李世民也忍不住对长孙皇后抱怨文臣和武将之间的争斗越来越厉害。
真实的历史上未必会表现得这么明显，但争斗确实有的，彼此看不上也是有的。李世民登基之初大封功臣，李世民的堂叔李神通就对房玄龄、杜如晦等人的功劳排在自己之上而不服，说什么房玄龄、杜如晦等人只是“刀笔之人”，能有什么功劳？李世民是这么说的：“玄龄等有筹谋帷幄定社稷功，所以汉之萧何，虽无汗马，指纵推毂，故功居第一。”
李神通这样的只是在义旗开始就跟着李渊打天下但没有什么战功的人都看不起那些文臣，更不用说尉迟敬德这样立下赫赫战功的人了，况且尉迟敬德可是玄武门之变的最大功臣，这就让他更有资本看不起文臣们了，每次见到长孙无忌、房玄龄和杜如晦等人，就出言讥讽，甚至在朝堂上也能吵起来，让李世民很是为难，但是尉迟敬德并不知道收敛，李世民只得让尉迟敬德做了地方官，最先做的是襄州都督，后来又做了同州刺史。
632年，李世民大摆筵席，同州刺史尉迟敬德也回京参加，就出现了李道宗挨打的那一幕。李道宗是李世民的堂弟，虽然出生于602年，年纪比较小，但是立下的战功却一点也不少，在唐初打天下的过程中就立下了不小的战功，后来又在灵州不断抗击突厥，成为帝国的边疆护卫者。但是李道宗这个人比较谦逊，并不以自己皇亲的身份就觉得高人一等。所以即便是挨了尉迟敬德的打，李道宗也没有还手。倒是李世民火大了，心想尉迟敬德实在是太不知好歹了。
李世民就单独召见了尉迟敬德，说：“朕在看汉书的时候常常痛心于汉高祖诛杀功臣，所以朕继位以来一直保全功臣，让他们享受荣华富贵，子孙绕膝，今天才知道韩信等人被诛杀不是没有道理的。”并表示国家大事就应该赏罚分明，过分的赏赐一次两次也就行了，多了没有任何好处。最后让尉迟敬德“勉自修饬，无贻后悔也。”意思就是你自己有点数，不要做出让自己后悔的事。
尉迟敬德自然是磕头谢恩，然后开始审视自己的行为，尽量约束自己，但到底习惯了，还是有刹不住闸的时候，接下来的几年时间里，李世民又敲打了几次，一次是对尉迟敬德说有人告他谋反，还有一次是想把自己的女儿嫁给年龄比李世民还要大上十几岁的尉迟敬德。尉迟敬德当时都完美的应付了过去，当然也终于知道了李世民对他的敲打。于是在643年，59岁的尉迟敬德请求致仕，李世民准他五天一上朝。
645年，尉迟敬德劝李世民不要御驾亲征高句丽，反而被李世民拉着去了战场。这次之后尉迟敬德真正开始闭门不出，658年去世。
