李泌对广平王李淑说道：“不能兑现陛下与回纥人的约定。”李淑到回纥首领叶护可汗马上请求说：“如果刚刚收复长安，就将子女、财物全都交给你们，那么洛阳百姓一定会与叛贼一心守城，抵抗我们的进攻的。”叶护可汗答应李淑不对长安进行抢劫。

收复长安之后，唐肃宗派人到蜀地请唐玄宗恢复皇帝之位，李泌知道后，对唐肃宗说道：“太上皇一定不会回来。”

唐肃宗问道：“我该怎么办呢？”

李泌说道：“向太上皇说明您被臣子逼迫登基的情况，请太上皇原谅。”

事情果然就如同李泌预料的那样，李隆基只识趣地同意，以太上皇的名义回京，不答应复位，哪里听说过儿子将皇位让给父亲的先例的？演戏也不能太假了，何况还有诸多为自己拼命的大臣该如何应对呢！

恢复了帝京之后，李泌请求唐肃宗兑现诺言，答应自己回到山中，做一个逍遥之人。唐肃宗问为什么，李泌答道：“我有五个不可留下的理由，请陛下让我活下来。”

唐肃宗问道：“是什么？”

李泌答道：“我受到陛下知遇之恩太早；陛下重用我太重；对我宠爱太深；我的功劳太大；我的行迹太过诡异。”

唐肃宗说道：“睡觉吧，明天再说。”

李泌说道：“请陛下让我活下去，不让我走，等于杀我。”

唐肃宗说道：“你把我当成勾践了。”

李泌说道：“陛下不杀臣，臣才能说出这个要求。杀臣的不是陛下，而是五个必杀的理由。天下已经安定，我已经没有什么可以进谏的了。”

唐肃宗问道：“你是不是还在为我不北伐范阳之事计较。”

李泌答道：“不是，我在建宁王李琰被杀一事上，不敢进谏。”

唐肃宗说道：“李琰很能干，他被小人教唆，想杀害哥哥广平王。”

李泌答道：“广平王每次说道弟弟，都哭泣，李琰没有杀死哥哥李淑的意图，现在我要离开了，才会对陛下说这些话。”

唐肃宗说道：“李琰确实受到小人教唆陷害哥哥。”

李泌说道：“这些都是进谗言的人说的，当初我反对李琰任元帅，加入李琰想担任元帅，他怎么可能亲近我呢？”

唐肃宗哭着说：“先生是对的，事情已经过去，不要说了。”

李泌说道：“臣之所以提起这件事，是因为未来。当年则天皇帝杀死太子李弘，是因为李弘聪明，又杀死太子李贤，是因为李贤贤能。李贤临死前写到，种了一颗瓜，结了不少瓜，摘了一个瓜，还有不少瓜，再摘一个瓜，瓜就很稀了，不敢再摘了，再摘就只能抱着瓜秧回家了。”

唐肃宗吃惊地说：“有这种事？我把这件事记在衣带上。”

李泌说道：”记在心中即可。何必表现在外面。”

当时，皇后张良娣、太监李辅国记恨广平王李淑有大功劳，散步留言陷害李淑（唐代宗），李泌是在提醒唐肃宗保护李淑。

李泌走了，过上了功成身退的逍遥生活，像他这样的智者，世间能够有几个？多少人为了权力、地位名声、美色，搭上了生命，甚至家族，只有李泌，来去自如，真是仙人。