有人推测，赵构之所以不支持、不赞成、不响应北伐，是担心北伐成功，二圣归来，自己就当不成皇帝了。说这种话，实在是抬举赵构了。

金人的数次入侵，赵构早被吓得患上了严重的“恐金症”。在他的心中，金国永远是那样的坚不可摧，北伐根本不可能成功、金国也根本不可能失败。

而宋徽宗赵佶早在五年前被金人虐待致死，所谓的“迎回二圣”就只剩下宋钦宗赵恒了。赵恒与赵构是同辈，按礼数，赵构并没有让位的义务，又怎么会担心自己当不成皇帝呢？

再者说了，赵恒是在宣和七年（1125年）十月登基的，靖康二年（1127年）二月就落入金人的魔爪，在位期间既无建树，对金策略又一错再错，整个皇族被人家一锅端。到了金国，又受尽凌辱，尊严尽丧，假使能回国，又有何面目与弟争登帝位？况且，现在南宋朝廷的文武大臣全是赵构在长达十四年的执政期间一手提拔起来的，根基稳固，他赵恒在位时间不过短短一年，手下的大臣被掳到金国，死伤殆尽，自己形单影只，又拿什么资本来跟弟弟争？

对此，宋史专家王曾瑜先生就认为：“中国历史上唐玄宗和肃宗，明正统和景泰的事例证明，即使宋钦宗回来，也未必会威胁到宋高宗的宝座。”玄宗和正统回朝的时候，他们在朝中还有一股潜在的政治势力可以倚仗，然而在新君面前，他们只能接受既定事实，俯首称臣——至于正统帝后来发起的“夺门之变”，其实是景泰帝没有儿子，帝位自动传回来的。