一起下围棋，并下了赌注：“谢玄的一幢房子。”
谢安平时不是谢玄对手，但是这一天，谢玄心事重重，眼前的黑白棋子如同前秦的军队搅得他心烦意乱。两人下了一半旗鼓相当，到了最后，谢玄投子认输。谢安回头对外甥羊昙说：“这幢房子就送给你了。”说完，又带着亲友登山游玩，一直到夜晚才兴尽而归。
在上游的桓冲听到这个讯息后心急如焚，刀都要搁到脖子上了，还在玩什么风雅。他上疏朝廷：“建康危急，我愿意派三千荆州精锐部东下支持。”
谢安很快回了一封信说：“朝廷不缺兵，你们还是回去加强西面的防守吧。”桓冲急得直跳，预言谢安要失败。
东晋第一次接触战失利，在谢玄的头脑中一片空白，正茫然失去方向的时候，前线发来加急情报，秦军进攻寿阳。谢玄立即派将军胡彬率领五千水军增援，胡彬走到一半，听说寿阳失守，胡彬知道自己这一点兵力，简直是飞蛾扑火，于是退守硖石，等待与谢石、谢玄的大军会合。
以寿阳为中心，北面是东西向的淮水，隔着淮水相望就是硖石。寿阳的东边是淝水，淝水的东面是洛涧，这两条河流都是向北流向淮河。
在苻融的眼里，胡彬这五千人的部队是到了口的肥肉