而杨昌鹏以经率领宋军到达银州，全力防守。宋军本来就善于守城，而且银州也是西夏的边境重镇，城墙也十分坚固，宋军又准备了大量守城工具，杨昌鹏又指挥有方，同时由于金军准备时间不足，没有塔车，只能靠蹬云梯攻城，因此蒲察贞义率领着金军的先锋人马连攻了十余天，折兵八千余人，但仍然沒有攻下银州。
这时金军中路大军的大队人马以经到了银州城下。完颜允恭一见十余天都攻不下银州，也不由大怒，当时就要将蒲察贞义斩。幸好仆散忠义和纥石列志守再三相劝，完颜允恭这才饶了蒲察贞义一命，但还是气不过，依然打了他四十军棍，贬为一名百夫长。
第二天，完颜允恭立刻亲自率领金军攻城。这一次金军出动了十辆塔车，但宋军在杨昌鹏指挥下，众志诚城，死守城池，金军一连又攻了三天，伤死了无数士卒，虽然几乎杀上了城墙，仍然被宋军击退，依积但还是无法攻下银州。不过宋军也好不到那里去，连日的苦战，使宋军也损失了近四千士卒，另有一千重伤，也无法再参加战斗。而且银州城也有多住受损。
不过完颜允恭觉得脸上也有些挂不住了，不禁大雷霆之怒，下令明天一定要攻下银州，否则将参加攻城的士兵全都斩示众。
结果到了次日，金军本想拼死一战，那知到了银州城下之后才现城上偃旗息鼓，没有一个宋兵守卫。等金军爬上城墙之后，也是空无一人。于是打开城门，放金军的大军进城。
原来就在昨天夜里，杨昌鹏接到了杨炎的命令，让他放弃银州，立刻撤军。因为驻守银州本来就只有十五天的期限，杨昌鹏一到银州，就准备好了许多车辆，随时都可以撤退。因此在接令之后，杨昌鹏立刻组织人马，将伤员和其他物资装车，连夜撤走。并且将府库中难以搬走的东西侧放一把火，全部烧尽。等金军进城之后，大火还没有熄灭。
金军的大军进城之后，扑灭了城里的大火，不过物资并没有抢出多少来。但不管怎么说，也是攻下了银州城，完颜允恭也十分高兴，看来手下的这帮士兵还是要逼啊，不然可是都不会尽力。
城中果然以经没有一个宋兵的影子，完颜允恭的住处就安排州衙，这也是银州城中最好的地方。完颜允允恭出征之时，还带了六名最宠爱的妃子，每名妃子身边又都带了不少待女内侍，这还不说，完颜允恭还带了一队歌舞班子，以便随时寻欢取乐。因为这些人可都是不能怠慢后，万一有那一点不周到的地方，在皇帝耳边给你来几句，那可是吃不了兜着走的，因此安排起来，却是费了老事。
花了好半天的功夫，总算是把这帮人都安排好了，仆散忠义和纥石列志宁这才算是松了一口气，只觉得待候皇帝比打仗辛苦多了。就在这时，有人捧着一个锦盒过来，道：“两位大人，我们在正堂的公案上现了这个东西，两位看怎么办？”
两人一看，锦盒盖上写着：大宋利州东西路兵马都总管,兼临洮路招抚使，领平夏诸路招抚使杨炎付大金皇帝亲拆。打开一看，里面是一封信。两人可不敢私自拆信，商议了一下，捧着锦盒去见完颜允恭。
这时完颜允恭心情很好，正在州衙中欣赏歌舞。见仆散忠义和纥石列志宁捧锦盒进来，也有些意外，撕开信封，抽出信笺一看，只是上面写道：退退，可保全岁，进军进军，社稷将倾。
完颜允恭看完之后，又火了，当时就将信笺撕得粉碎，道：“杨炎这匹夫，竟敢小视朕，看朕率军打到兴庆府，将这匹夫生擒到朕面前，看他还有何话说。传令下去，立刻起兵，继续进军。”
仆散忠义和纥石列志宁吓了一跳，仆散忠义慌忙劝道：“陛下乃我大金之主，何必与一个小小的杨炎见识呢？不要中了杨炎的诱敌之计啊！”
纥石列志宁也道：“是啊！陛下，我们刚刚攻下银州，人马疲惫，而且今天以晚，还是休兵几天再进军吧！”
完颜允恭这才免强压住心中的怒火，道：“好，那就休息一天，明天再出，不得推托。”