麟请移似道邻州，不从。不久，有人要求“下诏切责”贾似道。于是，贾似道想回绍兴，可守城者不给他开城门。后来朝廷“徙似道婺州”，婺州人到处张贴布告，把贾似道撵了出去。不久，监察御史孙嵘叟等，以为对贾似道的惩罚太轻，朝廷又把贾似道“徙建宁府”。可是翁合又说，建宁是朱熹故里，不能让贾似道侮辱圣地，应该把他流放到更加偏远的地方。接下来陈景行、徐直方等等纷纷上书，谢太后只好把贾似道谪为高州团练使、循州安置”，没收其家产。
有意思 的是在这个过程中一直都在和贾似道在明面上争斗的江万里一党却一直都没有说一句话，这一点也让很多人都不由感叹，看出了这也是一位高风亮节的高人。
按照宋朝法律，将大臣安置远州时，必须有监押官一路看守，就象押送犯人一样。那么究竟该派谁去押送贾似道呢？这也成了朝廷的下一个议题。
而此时一直都和贾似道关系相当差的福王，终于在此时站了出来。说起来福王赵与芮的儿子就是宋度宗，可是当他的儿子做了皇帝之后，赵与芮只不过被封为福王，没有得到太多好处。与此同时贾似道却变得一手遮天，被尊为“周公”，地位远在皇帝他爹之上。难道宋度宗就不想给老爸尝点儿甜头吗？