张耳一听，顿时羞得面红耳赤，就不知怎样回答了。停了片刻，他就气呼呼地问：“张黡和陈泽二位将军在什么地方？”陈余道：“他们二人劝我去跟秦军拼命，我没有答应，他们非要与秦军决战，我只好拨给五千军士，结果全军覆没，二位将军也都阵亡了。”张耳听罢，就不相信地道：“恐怕不是这样吧？是不是他们想拼死救我，你不同意，反而把他们给杀了？”陈余听了这话，脸色突变，道：“丞相，这是什么话？我和他们无怨无仇，还不至于那样吧！况且他二人领兵出战，见到的人不是我一个，我怎会拿假话来骗您？您不信就问问您的公子张敖吧！他与我形影不离，难道您不相信他吗？”张耳听了这话就不再说什么了。陈余也随后十分不快地回到了营里。
第二天，陈余非常郁闷。忽然有人进来报告说：“丞相派人调查张黡和陈泽的下落。”陈余一听就火了，对部众道：“大王尚且能原谅我，丞相为什么偏偏不信任我啊？还妄谈什么莫逆之交？”就立即带上印绶径直进城来见张耳道：“我与丞相，情深意重，称得上是患难之交。自从相识到现在，还没有什么不愉快的事情，世人都知道我俩的关系。可是现在丞相居然不顾我们之间的情意而妄加猜疑，蛮横指责我，也使别人议论纷纷，这是什么道理？”张耳还像一个小孩子似的说：“我就是想调查清楚你为什么不来救我的原因，是不是等大王和我死了，你另有想法？”陈余听了，勃然大怒道：“你为什么怨恨我到了这个地步？我听说伍子胥当年为了保住有用之身，就是为了给父兄报仇，后世都称颂他的贤能。你如果没完没了地指责我不够朋友，还怀疑我有二心，我情愿交出印绶！”说着就把将军印放在桌案上，然后走了出去。张耳深为震惊，他万万没有想到陈余会如此。
就在陈余出去的当儿，张耳的一位门客突然发话了，他说：“丞相，我听说‘天赐不受，反受其咎’。”张耳问什么意思。门客回答：“权柄者，国之利器也。现在陈将军把它交给了您，这是上天赐给您的机会，请丞相不要违了天意啊！”张耳听了门客的话，心里犹豫不决。门客又道：“赵国虽然解围了，可城中兵马不足一万，而陈将军掌管着数万兵马，您如果得到了，赵国自然就大定，您还犹豫什么呢？”张耳一听这话，果然动心，就拿起大印把玩了一番，然后挂在自己的腰间。这时陈余正好从外面走了进来，他发现张耳把将军印挂在身上，十分恼火，就头也不回地走出了丞相府。
陈余来到军营，把事情向部众说了。将领们见陈余没了将军印，顿时散去一大半。只有夏说、张同等亲信跟随。陈余就带上他们几个离开了军营。从此张耳和陈余恩断义绝，彻底走上了决裂。
有人把这事报告了项羽。项羽就和范增商议。范增道：“陈余负气出走，必定对赵国不利。不如派人追回来让他暂时住在楚营，然后再调解他们之间的矛盾。”项羽就派钟离昧去追。钟离昧出了营门，将马抽了几鞭，一会儿就追上了陈余。陈余道：“我忠心事赵，仗义灭秦，可丞相对我横加指责，猜疑我也太过分了。大丈夫应当自取功名，岂能受他人之气？”钟离昧道：“陈将军息怒，您如此走了，一来对赵国会造成损失，二来恐为诸侯非议。现在先回去，鲁公有话要对你说。”陈余伤感道：“鲁公和亚父虽然看得起我，可我是赵将，在楚军中能有什么作为啊？”钟离昧道：“鲁公十分爱才，一定不会埋没将军。可你要是离去，何时才能建功啊？”陈余面带愧色，又想起了张耳经常教导他的一些话，什么“小不忍则乱大谋”的谆谆告诫，就跟着钟离昧来到了楚营。项羽和范增就用好话将陈余安慰了一番。
次日，项羽在楚营里和各国的将领们正在商议事情。忽然军探来报，说秦国派赵亥总守三川郡，又派杨熊前来接应章邯，大军已经到了东郡。张耳就担心项羽如果不