这时脱离永历朝廷返回清政府统治下的故乡以遗民自居。..
相对这些脱离明廷的，身在广西的大学士唐諴、户部侍郎张尚、大理寺丞吴德操、广西巡抚余心度、督粮参议魏元冀等均先后向孔有德降清；而那些在广东的高官显宦们，如黄士俊、何吾驺、杨邦翰、李贞何、吴以连等同样是投诚恐后，其中黄士俊年已八十二矣，有嘲之者云：“君王若问臣年纪，为道今年方剃头！”
除了这些人之外，素来以风节自命，曾降于清廷，也曾跟随李成栋反正的“虎头”袁彭年和“虎尾”丁时魁，一个在广东向尚可喜投降，另一个则在广西向孔有德摇尾乞怜，并且有志一同的自称当年在广州反正是受到了李成栋的逼迫所致。
广州、桂林，两处失陷，大军败溃、星散，更有如陈邦傅者转而降清的，而忠贞营在此事也已经无法于两广立足，只得北上夔东与其他大顺军残部汇合。
明廷在两广的统治大有树倒猢狲散的势头，永历朝廷哪怕是逃亡南宁也同样是朝不保夕。广西清军步步南下，永历朝廷下诏令郑成功率部勤王，奈何中左所遭到突袭，郑成功不得不原道返回；自请督师夔东的辅大臣文安之在路上遭到了孙可望的扣留；至此，永历朝廷也只得再度向孙可望让步，