守官，却对蒙古军队的进攻，没有进行认真的抵抗，放弃了西京，败军折将。
在逃回中都的路上，他见身后的兵马太少，便灵机一动，路过蔚州时，竟强令蔚州守将赤剌提送给他兵马二千人；又用酒把赤剌提灌醉以后，领人私自进入蔚州官库，擅自取出白银五千两，以及大量的衣物等。
经过紫荆关时，又强迫守关将领贯雷交出战马二百匹，遭到贯雷拒绝，胡沙虎居然下令，把贯雷活活用棍打死。
胡沙虎在逃回中都的路上，胡作非为，有人向皇帝报告了，卫绍王永济认为他是两朝旧臣，不但不加罪，反而予以重用，居然提升胡沙虎为副元帅，权尚书左丞。于是胡沙虎更加肆无忌惮，在军队中利用女真人出身的将领，压制契丹、汉族的将领。
有一次，女真将领赤列金辱骂汉族将领罗杰，二人厮打起来，胡沙虎只是叱骂罗杰，激起契丹与汉族将领一起反抗，请求面见皇上。
左谏议大夫张行信上书皇帝，他说道：“胡沙虎在军中偏私狭隘，不循公道，蔑视外族将士，造成军心不服，将士解体，长此下去，外族将领必将生变。”
参知政事梁王堂、丞相徒丹益等，一齐向皇帝上书，揭露胡沙虎的无法无天行为，卫绍王永济才对他处治，让