赵构直到驾崩都没能找到解决这个不定时炸弹的方法他并不主张用暴力方法解决此事在他看来如果这样做的话南宋对外将全无信用可言这是他父亲犯过的错误他绝不会再犯。按照赵构的思路赵昚暂时对那些蕃客们采取了拉拢的方式将其中部分影响力较大的富豪任命为管理商业交易的官员以保证他们的利益不受侵犯。可是赵抗这一搅和就连那些“官商”都没几个敢留在南宋了。
无奈之下赵昚只得暂时管制“蕃客”们的自由以防止他们恐慌性地出逃。但是事与愿违这样一来“蕃客”们更加惊慌而他们经营多年赵昚又是新登基不久管制根本没挥多大的效力结果没过几个月有能力逃走的全逃走了
而赵昚不但什么都没得到反而得处理因“蕃客”们大举出逃所产生的社会和经济问题。而这一事件的罪魁祸赵抗则很“慷慨”地借给南宋朝廷一千万贯以应急年息五成真可谓“前门驱虎、后门进狼”
在这个过程中“神罚”进一步扩大了自己的势力将近九成的“蕃客”都通过直接或者间接的方式加入了“神罚”这种后果是赵抗没有料到的。毕竟他对那些外国人缺乏了解没想到他们的警觉心如此之高。至于“蕃客”们为什么都前往金国主要是因为其他几个国家都太小了市场狭小商人逐利而行自然只能去金国了。而且金国目前财政困难急需钱粮可以说是一拍即合。而“神罚”作为他们的代表在派人与完颜亮进行了数天的磋商后正式结成了联盟。
有了“神罚”的财力与情报网的支持金军气势大涨连续多次对海州动了进攻不过虞允文防守严密并没给他们机会。但是不利的消息还是不断传来布萨忠义再一次证明了他卓越的军事才能仅仅一个月的时间北方数十万（虚数）抗金义军几乎全被剿灭只剩下不足五万（还是虚数）的零散武装还在负隅顽抗。等到他的十万大军与完颜亮的金军主力会合后海州城将面临更大的压力而一度轰轰烈烈的北伐则大有中途夭折的风险。
正所谓“屋漏偏逢连夜雨”虞允文正在忙着布置防务时一份密报令一向冷静的他原地伫立了许久。一向不服输的他今天算是深刻体会了“谋事在人成事在天”这句话的含义。
“贼老天真是贼老天为什么总要和我们汉人过不去！”虞允文几乎就要怒喝了出来他心里明白这次北伐已经不得不中止了。从密件上虞允文得知淡水一带生了强烈的地震虽然碍于篇幅不能准确描述但光看“山崩地陷”这四个字就知道问题的严重性了。而赵抗得知此事后立即中止学习启程回国更是说明了这一点。
后方出了这么大的灾难如今即使是想保住海州这一城之地都已经是奢望。甚至光是将城内的数十万军民平安带回赵国都并不是一件容易的事如果被金军尾随其后一路追杀那将是一场更大的灾难。按常规的做法这种情况下应该用一支战斗力强的军队断后以掩护主力撤退但那样做的话那支断后的军队必无幸理。赵国现在野战军数量有限可舍不得拿几万精兵去当弃子。
不过好在有海军上千艘舰船在至少百姓撤离是比较容易的。但是军队一旦开始上船城防力量必然大减金军如果乘势攻城的话那大部分没来得及上船的官兵一定死无葬身之地。居鹏当初所用的办法太残酷虞允文只是将其作为备用方案他仍在苦思希望能找出一种更好的办法来。
三天后虞允文向海军布了战斗任务他命令海州港内没有运送百姓任务的舰船立即出港对在金国近海航行的所有船只起攻击。能俘获的就俘获不能俘获的全部击沉。另外虞允文又命令时俊部经海路对金军的侧后方起间歇性的突袭取得了一定的战果。但是金国如今人力、财力、物力都非常充足根本不在乎这么点损失。而江晨星等赵军将领却迷糊了不是要撤退吗？怎么突然变得这么积极主动起来了？难道虞允文打算冒险和金军决战现在就是在做相应的准备？
赵军都不明白金军那边就更不明白了尤其虞允文还派人动了几次小规模的夜袭。这几次夜袭赵军大量使用了火箭虽然杀伤人数不多但金军营帐被焚毁不少而且金兵们的休息受到了很大的影响。完颜亮对此非常恼火他现在已经不怕与赵军正面决战但是这种小规模的骚扰令他极度抓狂。无奈之下他只能下令增加了岗哨数量以防止赵军故技重施。根据经验赵军每次动大规模攻势之前都是以这种骚扰为开端的。想到这里完颜亮倒是有些高兴了他命令金军做好决战的准备。说实在的这一个多月赵军死守不出倒真是令金军很头痛。数十万大军每驻扎一天就是多少钱粮啊！纥石烈志宁虽然觉得还有些疑点但毕竟没有多少依据就没有对完颜亮说。
而就当赵军将士纷纷自做好战斗准备时虞允文却突然秘密召集了所有营级以上将领宣布了撤军的命令。众将这才恍然大悟原来他玩的是“欲退先攻”这一出啊！不过考虑到金军中也有能人未必就不能识破自己的计策所以虞允文便选择了夜间上船。但一夜不可能撤走全部军队虞允文便让断后的部队在天明后擂鼓做出集合军队准备进攻的架势以进一步迷惑金军。结果等到金军现问题时赵军已经全部撤走了。对于没有大型海船的金军来说只能望洋兴叹
说是全部撤走但其实赵军还是有几个人留了下来。虞允文在宣布撤军时特别询问了目前仍留在军中的石贵等独立师将领的意见。石贵强烈反对目前撤军这意味着此次北伐前功尽弃实在是太可惜了。
但是虞允文也没办法他将国内生的可怕灾难透露给石贵知道石贵脸上悚然变色。但他脸色凝重地沉思了一会之后还是坚定地表示“撤军看来是不可避免了但是北方必须留下种子请让末将的独立师留下来吧！”