一有风吹草动便“起驾”逃难。他从梧州窜往南宁时，根本没有作留守地方的任何部署，像普通百姓一样只知逃命要紧。“移跸”后，梧州竟然“空城三月”，次年正月孔有德遣左翼前锋马骥接管梧州，二月命总兵马蛟麟镇守该地。跟随永历帝逃难的只是内阁大学士严起恒、锦衣卫马吉翔、太监庞天寿等少数官僚。由于撤退时的漫无组织，乱兵乘机劫掠，一些有心追随朝廷的官员也裹足不前。原先聚集于两广的朝廷和地方官员大有树倒猢狲散之势。除了镇西将军朱旻如在昭平县同清军格斗而死，被革职的朝臣汪皞投水自尽以外，其他未随驾的官员有的降清，有的窜入深山，有的剃发为僧。
皇帝和朝廷如此，再加上旧主之子被杀，“东勋”李成栋旧部便相继降清，但罗成耀却没有投降，但他实对永历朝廷失望透顶，所以领着残部千余人逃至肇庆西北和广西交界的开建一带坚持抗清，对于永历朝廷委任的广东总督和四府巡抚之命也是不理会。(。)