如梦一般的“春风十里扬州路”灰飞烟灭，再一次成为荒芜之城。
完颜宗翰亲自率领的前锋骑兵人数甚少，不过三五千人，而留在江淮一带的大宋官兵却有十数万之多，更有不可计数的义兵出没在金兵后方。完颜宗翰不敢久留，仅一日便退出扬州，回师济南。
吕颐浩闻报，立即遣大将陈彦领兵渡江，“收复”扬州，并向杭州报捷。
赵构听说金兵已退，这才稍觉安心，连发了五道圣旨——
一、杭州不设州治，直接以临安府知府统辖，临安府知府的官阶，相当于汴京开封府知府的官阶。
二、遣大臣张俊民持书使金，向金国求和。
三、下诏罪己，开言路，赦死罪，放还流配边州的臣下，独不许李纲放还，以免触怒金人。
四、痛斥黄潜善、汪伯彦二人专权误国，实为奸邪之臣，罢去二人的宰相之位，命黄潜善出知江宁府，汪伯彦出知洪州，永远不许回到朝廷。
圣旨传达下来，内外臣下俱觉不安。
赵构提升杭州的地位，显然有苟安江南之意，不愿北上抗击金虏，回还旧都，此举必致士气大伤。
正当敌兵南侵之时，却遣使求和，必为敌军所轻。
下诏罪己，放还流配之臣，本为善策，却又偏偏不放李纲，不免使人怀疑皇帝的诚意。
驱逐黄、汪二人出朝，固是大快人心，但仍以黄、汪二人为一方主官，处置未免太轻。
以朱胜非为宰相，虽是出乎众臣下的意料，却也差强人意，众臣下勉强可以接受，然而以王渊主掌军机大事，却是十分不妥——王渊向来是黄、汪二人的亲信，身为御营司都统制时丝毫不恤御营司中的官兵，只知奉承黄、汪二人，甚至扣减营中官兵的钱粮，强令营中官兵为黄、汪二人私运家财。
御营司中的官兵，对王渊恨之入骨，曾密谋杀死王渊，因事泄未能得手。
赵构任命王渊为仅次于宰相的高官，无疑会激起御营司官兵的愤怒，生出乱子来。
内外臣下忧心忡忡，或上奏表，或欲入行宫面见皇帝。
但上奏的表章，皇帝并未看到。欲入行宫的臣下，也无法见到皇帝。杭州最著名的景物有两处，一为西湖，一为钱塘江。
赵构以大宋皇帝之尊“巡幸”杭州，又怎能放过钱塘江大潮这等美景？
在每月十五，喇叭形的钱塘江入海口便会涌起大潮，尤以八月十五为最佳。
赵构来到杭州，正逢二月十五，自然不会等到八月。
对于皇帝观潮的盛举，康履、蓝珪等内侍太监和王渊等人极力赞颂，早早便派禁卫军来到钱塘江沿岸，并趁机强占居房，搜括财物，还挤占道路，搭起了豪奢的五彩帐幕。
此时大批御营司将官士卒亦退至杭州城中，既找不到营房安身，又领不到应得的钱粮，俱是怨气冲天。
赵构对内外臣下的忧心和御营司官兵的怨气浑然不觉，兴冲冲地携着宠爱的潘氏、吴氏等后宫妃嫔，来到钱塘江岸上一处最大的五彩帐幕内。
一轮明月从江海相会处缓缓升起。但见万里清碧，水天一色，使人恍若身临玉宇，飘飘然欲飞入高天之上。
赵构坐在帐幕正中的御座上，神情潇洒地望着天上的明月。
在赵构的左边，坐着潘氏，怀抱着一个两三岁的清秀男孩，正是赵构唯一的皇子赵旉。
吴氏坐在赵构的右边，脸上浮满媚笑。
众多太监和歌舞乐女环立在帐幕两侧，犹如众星拱月一般。
“如此美景，真乃人间少有也。”赵构感慨道。
“可惜汪大人不能与皇上同乐，不免少了许多趣儿。”潘氏遗憾地说道。
“汪大人是个忠臣，皇上不该赶走他的。”潘氏毫不示弱地说道。
“胡说！黄、汪二人此次险些害了朕的性命，哪有半点忠心？”赵构怒道。
“这都是朝廷养的兵将无用，见了金兵就跑，怎么怪汪大人呢？”潘氏不服地说道。自从生下了皇子，潘氏在宫中的地位一跃成为众妃嫔之首，已在实际上被尊为皇后，而汪伯彦、黄潜善等人对潘氏的“孝敬”，也比平日多了许多，就连吴氏的所得，亦是比平日稍多了一些。
赵构将黄潜善、汪伯彦二人赶出朝廷，使潘氏大受损失，不觉十分心痛。
“朕将朝廷一切军政大事，全都交给黄、汪二人，言无不从，计无不听。实指望黄、汪二人能够外和强虏，内平贼乱，使朕安享太平天子之福。不想黄、汪二人只知贪财，将朝廷大事竟扔在了脑后，致使强虏突袭，已兵临城下尚恍然不知。若非天佑大宋，使朕及早逃脱。此时此刻，朕只恐亦和上皇、渊圣一样，也‘北狩’去了。”赵构怒气冲冲地说着。
潘氏无言可说，羞怒之下，悄悄在小皇子的屁股上使劲一捏。