北宋灭亡的当年，宋徽宗的第九个儿子康王赵构即皇帝位，改元建炎，这标志着南宋的开始。赵构就是宋高宗。提起宋高宗，可能大家脑海中浮现出的形象是自私懦弱，忠奸不辨，宠信奸臣，杀害岳飞，不念父兄在北国受苦，偏安于半壁江山，不思恢复中原。他为什么会这样？他难道不知道父兄在北国受苦，不知道恢复中原祖宗的基业是他作为一个君王应尽的职责吗？追根溯源，这些都跟他的经历有关。
赵构的母亲是韦贤妃，这个封号也是直到赵构19岁的时候才得到的宋徽宗是书画皇帝、风流天子，嫔妃非常多。其中大刘妃和小刘妃艳压群芳，郑贵妃和乔贵妃也貌美如花，婉转多情，琴棋书画无一不精。而韦贤妃是宫女出身，地位卑微不说，姿色也很一般，没什么才艺，真要找出点过人之处，大概就比较温柔、善解人意。但是，跟皇帝在一起的嫔妃，没有敢不温柔、不善解人意的。所以在徽宗眼里，这也并不算什么长项。
韦贤妃能够生下赵构，也纯粹是一件机缘巧合的事。韦贤妃跟乔贵妃关系非常好，当年都在宫里做宫女，俩人情同姐妹。没有发达的时候，俩人约定“先贵毋相忘”，谁发达了都别忘了提携一下对方，有点像义结金兰的意思。乔贵妃很快就被皇上看中了，于是她便推举韦贤妃，说皇上是不是也可以宠幸一下她啊。皇上看了看韦贤妃，没有什么兴趣，但是拗不过乔贵妃，所以就临幸了她。结果韦贤妃，用老百姓的话讲，肚皮很争气，一下子就诞育龙种，而且还是男孩，也就是赵构。
在赵构很小的时候，有一幅画面便定格在了他的脑海当中：每到夕阳西下掌灯时分，母亲总是站在宫殿的庭院里赏花，目光看似盯着花，实际上是在望着宫墙的那一边，面容忧伤，神色忧郁，直到红颜老去，愁眉也未曾舒展过。长大之后赵构逐渐明白了，母亲一年一年地等着父皇，可是始终也没有等来。
有一件事对幼年的赵构刺激非常大，在他幼小的心灵里留下了很深的阴影。赵构6岁那年，韦贤妃过生日，因为不受宠，所以包括韦贤妃自己在内，没人想到要庆贺一下，也就没做什么准备，宫里像往常一样冷冷清清的。没想到那天徽宗皇帝突然驾临，这使宫里上上下下乱作一团，大家手忙脚乱，不知所措。当皇帝走进来的时候，韦贤妃不是去接驾，而是怔在当场，目瞪口呆。还是皇上开了句玩笑，说韦娘子，你不认得朕了吗？韦贤妃这才如梦初醒，赶紧命令宫人接驾备宴。大家都特别高兴，宫里一改往日的沉闷，洋溢着喜庆气氛。赵构也非常高兴，母亲每天站那儿赏花，终于把“结果”赏来了。
没想到，酒席宴摆上之后，宋徽宗的一句话让赵构母子的心从沸点降到了冰点。他说要不是乔娘子提醒，我都忘了今天是你的生日了。母子俩相顾无言，没了笑语，只是默默地吃饭。吃到一半的时候，宫人来报，说王贵妃临产。徽宗一听，站起来就要走。赵构上前抓住父皇的龙袍，说今天是母亲的生日，难道父皇不能多陪母亲一会儿吗？这时徽宗一只脚已经跨出门槛了，他回头摸了一下赵构的脑袋，说我去去就来，你们娘俩儿等着我。那天王贵妃生的是一个公主，并不是皇子，可徽宗却一去就没再回来。
赵构母子俩在宫里地位很低，在皇室中也没有什么影响。赵构从小在这样的环境中长大，对他日后的人生经历肯定有影响。最起码我们可以分析出来，他对他的父皇和皇兄，从感情上应该是比较疏远的。
根据《宋史》记载，赵构“资性朗悟，博学强记，读书日诵千余言，挽弓至一石五斗”。意思是说赵构不仅学问很大，还能拉开一石五斗的强弓，两只胳膊各能举起110斤重的东西，这可是宋朝选拔禁卫军军官的最高标准。由此可以看出来，赵构天生神力，按照今天的评价标准，他是运动健将级的水平。作为一个老百姓口中的少爷羔子式的人物，生长在皇宫之中，受教于妇人之手，居然能够练成超强的武艺，实属不易。赵构的书法也是相当精湛的，尤其擅长行书。因为他有一个以艺术家自居的父亲，想要讨得父亲的喜欢，引起父亲的注意，就也得擅长这个。赵构可以说是文武双全，不像评书或者野史讲的那样，除了懦弱、逃跑，其他的一无所能。15岁那年，赵构被晋封为康王，但他仍然坚持苦练武功，勤习书画，等待着出人头地的机会。