众所周知，南宋宋高宗赵构无后（宋高宗亲生儿子只有一个，名字叫赵辏盖资钦怨乖诳低醺狈趟木扇伺讼湾u曜魑怨沟谝桓龆樱彩俏ㄒ坏囊桓龆樱琶狭懊嬗形甯鼋憬悖颐峭耆梢韵胂笳飧龊19映錾氖焙颍怨褂卸嗝吹母咝恕u怨菇浞馕蔡樱端滴慕庾帧分屑牵骸霸撸浦ひ玻蚀右弧！避玻庵该篮茫端滴慕庾帧罚骸白枚酪病4右迹禹n！保犊滴踝值洹肥鸵饷赖隆9獯印霸病绷礁鲎郑涂梢钥闯稣怨苟宰约赫飧龆拥拿篮米t敢约耙笄械钠谂危还上y氖窃蔡幼钪罩换盍巳辏阍缲捕觥k盖椎淖8s肫笈危19挥薪飧龊19恿粼谌耸馈w源酥螅蔡雍罄幢蛔纷鹞渭蜃凇17驳邸w源艘院螅怨乖傥拮铀每梢约坛兴幕饰弧＃

所以，他必须从宗族子弟中选取继承人来继承他的皇位。

据史书记载，当时大臣李回进谏说：“太祖不把皇位传给自己的儿子，而是传给了弟弟太宗，是因为兄弟二人手足情深，陛下如今要立嗣，不妨效法太祖。”

还有的大臣直接指出，太祖赵匡胤的后代如今默默无闻，如同凡夫俗子一样，于情于理都是说不过去的，为了大宋江山的千秋大业，应该从太祖一支中选嗣。

高宗赵构见没有别的办法，同时为了博得一个好的名声，便接受了群臣的建议，与宋太宗的后代不同，当时宋太祖的后代有上千人之多，宋高宗想在这一千多人之中选出合适的人选亦并非易事，经过一番仔细的搜寻，在太祖赵匡胤的后裔中选嗣，于是就按着辈分的大小，在“伯”字辈的皇族中挑选了七岁以下的男童十人，再经仔细查看后，最后留下了一胖一瘦两个小孩，胖的是伯玖，瘦的是伯琮。

刚开始，宋高宗对赵s并没有太大的好感，而是中意胖点的小孩，按理说赵s继承皇位的机会应当也就到此画上了句号，但是也许冥冥之中自有天意，正在他放弃做皇帝的梦想之时，发生了一件微小的事情，进而使整个局面发生了巨大的变动。

事情的经过是这样的：有一次，宋高宗将赵s和胖小孩叫到一起，恰巧此时闯进了一只猫，赵s正全神贯注地听宋高宗讲话，猫闯进来后连眼睛都没有眨一下;而胖小孩却不同，猫闯进来后他显得很惊慌，再也无心听宋高宗讲话，连忙伸脚去踢猫，动作极其粗鲁，胖小孩这一粗鲁的举动彻底葬送了高宗原本对他仅存的一丝好感，赵构看了很不高兴，说：“如此轻狂，怎能担当社稷重任!”

于是便留下了伯琮，将他以候选人的身份养育在宫中。

伯琮于建炎元年(1127年)生于秀州(今浙江嘉兴)，他的大世祖是太祖赵匡胤的第四个儿子八贤王赵德芳，伯琮入宫后，天资聪颖，博闻强记，异于常人，很受赵构的喜欢，受到后宫的重点培养，高宗派人以行宫新建书院为资善堂，作为伯琮读书的地方，并派学士富才赡作为赞读，伯琮也很争气，尊师重教，勤奋好学，随着年龄的增长，很快便成长起来。