6月3日，种师道回军往雄州，结果消息为辽军所知，辽军派轻骑追击，在雄州城下，宋军大败亏输，望风而逃。
屡战屡败，唯一值得庆幸的就是辽国因为担心其北边的金国前来，不敢扩大事态，追到雄州就不再追击，宋军这才免遭了全军覆没的命运。
这消息吓坏了宋徽宗，徽宗“闻兵败惧甚，遂诏班师。”
出兵才两个月就全军溃败而归，这消息吓坏了宋徽宗，徽宗真是闻兵败惧甚，遂诏班师。
身为主帅，这已经是童贯的第二次大败了，所以为了逃脱责罚，他这次选择了种师道作为替罪羊。
因为种师道建议采纳辽国意见停战求和，所以童贯诬告他的罪名就是消极观望，至此大宋的第一次北伐宣告失败了。