却说徽宗有天梦见吴越主钱镠，以手挽徽宗御衣道：“我孙来朝你家，便留住我孙；但终须还我山河社稷。”显仁皇后亦梦见金甲神人，自称钱武肃王。及寤，而生皇子，即赵构，其始生之时，宫中红光满室。后建都杭州，为高宗。
赵构是徽宗第九个儿子。赵构天性聪颖，博学强记，读书每天背诵千余言，挽弓可达一石五斗。宣和三年进封康王。
赵构的母亲是韦贤妃，这个封号直到赵构19岁的时候才得到。宋徽宗是书画皇帝、风流天子，嫔妃非常多。其中大刘妃和小刘妃艳压群芳，郑贵妃和乔贵妃也貌美如花，婉转多情，琴棋书画无一不精。而韦贤妃是宫女出身，地位卑微不说，姿色也很一般，没什么才艺，真要找出点过人之处，大概就比较温柔、善解人意。但是跟皇帝在一起的嫔妃，没有不温柔、不善解人意的。所以在徽宗眼里这也算不上什么长项。
韦贤妃能生下赵构，也是一件机缘巧合的事。韦贤妃跟乔贵妃关系非常好，当年都在宫里做宫女，俩人情同姐妹。没有发达的时候，俩人约定“苟富贵母相忘”，有点像义结金兰的意思。乔贵妃很快就被皇上看中了，于是她便推举韦贤妃，说皇上是不是也宠幸一下她啊。徽宗看了看韦贤妃，没有什么兴趣，但是拗不过乔贵妃，所以就临幸了她。结果韦贤妃肚皮很争气，一下子就诞育龙种，也就是赵构。
赵构很小的时候，有一幅画面定格在他的脑海当中：每到夕阳西下掌灯时分，母亲总是站在宫殿的庭院里赏花，目光看似盯着花，实际上是在望着宫墙的那一边，面容忧伤，神色忧郁，直到红颜老去，愁眉也未曾舒展过。长大之后赵构逐渐明白了，母亲一年一年地等着父皇，可是始终也没有等来。
宋徽宗后宫美女如云，皇子公主有几十个，所以韦贤妃虽然生下了赵构，但并没有得到宋徽宗的宠爱。在宫中的嫔妃中，赵构的母亲地位是很低的。母亲的失宠和地位的卑微，给童年的赵构带来了严重的影响。
赵构6岁那年，韦妃过生日，因为不受宠 ，所以包括韦妃自己在内，没人想到要庆贺一下，也没做什么准备，宫里像往常一样冷冷清清。没想到那天徽宗皇帝突然驾临，这使得宫里上下乱作一团 ，大家手忙脚乱不知所措。当徽宗走进来的时候，韦贤妃不是去接驾，而是怔在当场目瞪口呆。还是皇上开了句玩笑，说韦娘子，你不认得朕了吗？韦妃这才如梦初醒，赶紧命令宫人接驾备宴。大家特别高兴，宫里一改往日的沉闷，洋溢着喜庆气氛。赵构也非常高兴，母亲每天站那儿赏花，终于把“结果”赏来了。
没想到酒席摆上之后，徽宗的一句话让赵构母子的心情从沸点降到冰点。他说要不是乔娘子提醒，自己都忘了今天是韦妃的生日。母子俩默默吃饭相顾无言。吃到一半的时候，宫人来报，说王贵妃临产。徽宗一听站起来就走。赵构上前抓住父皇的龙袍，说今天是母亲的生日，您就不能多陪母亲一会儿吗？这时徽宗一只脚已经跨出门槛，他回头摸了一下赵构的脑袋，说我去去就来，你们娘儿俩等着我。那天王贵妃生的是一个公主，并不是皇子，可徽宗一去就没再回来。
赵构在这样的环境中长大，对他日后的人生肯定有影响。最起码他对他的父皇和皇兄，从感情上应该是比较疏远的。
靖康元年春正月，金人派遣使臣进人京城，邀请亲王、宰臣到金军营中议和。宋钦宗派宗泽当和议使。 宗泽跟人说：“我这次出使，不打算活着回来。如果金人肯退兵就好；要不然，我就跟他们争到底。宁肯丢脑袋，也不让国家蒙受耻辱。”
宋钦宗一听宗泽口气那么硬，怕他妨碍和谈，就撤了他的和议使的职务，改派他到磁州去当地方官。
宋钦宗又派赵构、张邦昌前去，两人十天后才回来。
这年冬天，金兵再次南侵，钦宗每日忧虑不出。及边关报急，羽书交驰，钦宗始出与众臣议曰：“虏寇势獗，中国屡困，今领大兵南下，边庭受围，百姓惊窜，又遣使复请议和。此事尔众臣有何高论？”王云道：“贼势浩大，彼强我弱，往年因亲王诣金营立盟誓，却又反复用兵之故，使天下苍生不获宁居。今元帅斡离不遣使议和，陛下莫惜一行，斯能杜绝后虑。”钦宗默然。王云道：“陛下此行，亦为社稷也。”康王听说议和是为了社稷苍生，又主动请行。钦宗依其议，下命王云为副，次日与康王迳离汴京，几十个官员随从出城。
行至磁州，知州宗泽闻讯赶来，在城外的一个小庙门口拜见康王。宗泽说：“往日萧王为奸臣所误，大王岂可复误，此行必无还理，不如暂留审视国势，以图恢复。”赵构陷入沉思。
就在赵构沉吟不语的时候，很多百姓围了上来，听说他们想去金国议和，老百姓早就憋了一肚子怨气。纷纷大骂王云。一边骂一边将王云拽下马就打。宗泽在旁边看着不说话，一会儿王云就被百姓活活打死了。
王云的死深深地刺激了赵构。先不说王云该不该死，他是堂堂的刑部尚书，就算该死也不该这么个死法。朝廷自有法度，老百姓怎么能一顿拳脚把他打死呢？
宗泽又力谏康王不可北去，康王遂从宗泽之请，果不使北。
不想当皇帝的皇子才能当皇帝，作为风流老爸赵佶的九皇子，母亲韦氏出身寒微，大哥赵桓根正苗红母亲是皇后，立为太子后低调谨慎明哲保身。还有一个三哥赵楷才华横溢最像赵佶，最得盛宠还是个学霸，化名参加科举考试一不小心竟然高中状元，妙手丹青更是深得赵佶真传，赵佶甚至动了改立太子的念头。可是人算不如天算，赵佶连同匆忙替他背锅的赵桓、后宫女卷包括赵构的生母韦氏都被金人押往北国。只有赵构被宗泽留下免遭俘虏。后人有诗叹曰：
宋室顷危势渐离，
康王奚忍弃邦基？
临岐不是忠贞谏，
预失中原未可知。
宗泽幼年贫苦，但有“耕读传家”的传统，宗泽农忙时随父兄参加劳动，农闲时则在父、祖的教导下读书识字。天资聪慧的宗泽勤奋好学，从小就打下了良好的文化基础。
元右六年，宗泽在殿试时不顾字数限制，洋洋洒洒写了万余言力陈时弊，主考官给以“赐同进士出身”。宗泽开始步入仕途。
靖康元年初，钦宗把宗泽派往磁州任知府。受命当日他就骑马上路，当时只有十几名老弱士卒随从。