繇前面被袁术紧紧相逼，后方被孙策搞得乌烟瘴气。不禁为之焦头烂额。
未几，樊能、张英为纪灵所破，大军十不存一。两将收拢残兵，还归曲阿，往见刘繇，拜道：“末将无能，败阵而归。今袁术已渡江矣，还请主公早作筹划。”
刘繇细细一想，扬州哪里还有他的立足之地。于是长叹道：“天亡我也。”
旁边宾客许劭听了，劝道：“使君，何出此言哉。今虽败，然豫章仍在。不如弃曲阿，走豫章。到时收拢士卒，再与袁术战之。”
许劭，字子将，名士许靖之从弟，汝南人，曾在洛阳和兄弟们搞月旦评的就是他。说曹操是清平之奸贼，乱世之英雄的也是他。他们一家都有做大官的习惯，到了许劭这里，因为天下大乱，于是他辟举不就征，跑到广陵郡好朋友这里来避难。结果广陵太守赵昱被杀，他只好又跑过江，来到刘繇这里。因见刘繇势窘，是以出言劝之。
刘繇从其言，在樊能、张英的护送下，带了家小、宾客，弃曲阿，一路往豫章而去。方行到富春，忽然一彪军出现，于前方拦路。亲兵来报，是孙策旗号。
刘繇面带悲色，道：“今死此矣。”左右皆泣。