现在李密成了新老大，翟让的部众便担心遭到对方的欺辱。
经过部属不断地撺掇，翟让对于让位之事也有些后悔。这时其兄长翟弘更是不断地跟翟让说李密的坏话，翟让考虑数日，最终决定离开李密。
翟让便找到李密，对其说道：“我本一庸人，起兵造反，不过是为了侥幸活命，并无什么大志。今资粮粗足，我打算返回瓦岗。”
李密听了，大吃一惊，翟让这一走，不闪了他的摊子。
于是李密便有心留下翟让。
但这时房彦藻等人劝道：“翟让手中兵力并不多，留在军中，魏公反而难处置，不如任期离开，自生自灭。他若是被官军剿灭，反而省了魏公的麻烦。”
翟让刚让位给李密，若是这时候对付他，确实不合适。
至于说他的离开，会不会引得旁人跟随，则无需担心。天下熙熙，皆为利来；天下攘攘，皆为利往。李密能给他们的远比翟让能给的多，他么又凭何会离开李密跟随翟让呢。
李密想了想倒也觉得在理，遂允了此事。
这时翟让召集旧部，商议离开洛口，返回瓦岗山之事。他本以为众人皆会跟随，但谁料到，单雄信、徐世积等大将都有心跟着李密建功立业，谁愿意再回瓦岗寨那种地方当个土匪。
众人都有心尴尬地不作声，翟让弄了一个没脸。
翟让这时才明白，自从他让位之后，便再回不到过去了。但事已至此，也不能作罢，他只得带本部人马离开。
李密很快将翟让的离开抛之脑后，他现在有更重要的事情。
李密刚刚登位，便谋划着对东都洛阳的袭击，此举既震慑东都小朝廷，也震慑一众归附的群盗。
而且更重要的是，他要制造洛阳的粮荒。
