刘秀是中国历史上为数不多的用情比较专一的帝王之一，他是一个值得女人终身托付的好男人，他一生最重要的两个女人是阴丽华和郭圣通。但刘秀并不是把心分成两半，一半给阴丽华，一半给郭圣通。无论是白衣飘飘的少年，还是绿林好汉山大王，还是九五之尊的光武大帝，刘秀对阴丽华的爱始终如一。而与郭圣通的结合则是历史强加给他的一场政治婚姻，在爱情上，郭圣通是个可怜的女人，但是她又是中国被废的后妃群中最幸运的一个，她是唯一一个没有被打入冷宫的废后，不但如此，刘秀对她的家人也都善待，而她本人也过着自由、富足、安稳的生活。
无忧无虑的少年郎
少年时的刘秀，谁也看不出他将来会是一个皇帝，包括那些自称十拿九稳的算命先生。算命先生说，刘秀最多只不过是个侯爵，而他的哥哥却有着帝王相，但事实却恰恰相反。
这也不能全怪算命先生，少年时的刘秀确实胸无大志，是一个喜欢在田间戏耍的顽童，而他的哥哥刘却喜欢读儒家经典，研习兵书，还广交朋友，常常口出狂言，与少年刘秀形成鲜明的对比。
虽然有着尊贵的皇室血统，刘秀是汉高祖刘邦的九世孙，但到了他这一代，已经和普通老百姓没啥区别，他的父亲刘钦只是个南顿令而已。这使得我们的刘秀从小就没有什么架子，是一个温柔、善良、很有亲和力的少年郎，常常和他的奴仆打成一片，不分彼此。这或许为刘秀日后能够获得群众的拥护打下了基础。
没有任何一点迹象可以看出刘秀有皇帝命，除了他的出生略带传奇色彩之外。据说，他的父亲刘钦和母亲樊娴都于公元前6年生下了他，那一年，方圆百里任何一家的收成都比不上刘家，刘家的田地还出现了一茎九穗的现象。
刘钦对这个时候出生的刘秀非常疼爱，兴奋地为他取名为“秀”，意思就是庄稼出好穗。
虽然刘家已经不再是什么宗室成员，但刘秀的家境在当地还是数一数二的。父亲好歹是一个县令，母亲呢，还是当地巨富的女儿，父亲和母亲的感情也非常好，所以少年时的刘秀不愁吃不愁穿，过年还有新衣服和压岁钱。
刘秀生活在一个大家庭里，刘秀有两个哥哥，刘、刘仲，还有两个姐姐，刘黄、刘元和一个妹妹刘伯姬。
大家庭和睦、团结、热闹，生活在这样的大家庭里，刘秀的童年是快乐幸福的。
与哥哥姐姐们不同的是，哥哥姐姐们骨子里仍脱不了贵族的傲气，总以宗室成员自居，看不起下人。而少年刘秀常常忽略自己是主人的身份，与奴仆们一起在田间里劳作，从不轻视他们。哥哥笑话他没有出息，以后一辈子是个庄稼汉。
少年时的刘秀心地非常好，有一件小事可以说明。一个过路的乞丐向刘家讨口水喝。当时父母不在家，兄弟姐妹几个在院子里玩耍。乞丐走到哥哥身边，哥哥向乞丐唾了一口，叫他滚开。乞丐走到姐姐身边，姐姐虽然没有向乞丐吐口水，但却捂着鼻子跑开了，边跑边说，脏死了，臭死了。
乞丐最后走到刘秀身边，刘秀拍拍手上的泥土，跑到屋里，舀了满满一瓢水给乞丐。
乞丐喝完了，刚要走，刘秀说，等等。
乞丐纳闷，还会有什么事情呢？
一会儿，刘秀出来了，手里多了两个香喷喷的烧饼，而这两个烧饼是他的午餐。
乞丐感激涕零，接过烧饼的手直哆嗦，他还从来没有遇到这么懂事这么好心肠的孩童。乞丐送给刘秀最后一句话是，他将来一定大富大贵。
乞丐走后，哥哥姐姐都说刘秀傻帽，把烧饼给了乞丐，你自己吃什么？
刘秀只是笑笑，并不作答。他的笑，是那么天真。
很快，刘秀长大了，长成了一个翩翩少年。
公元8年，天下发生了一件大事，这件大事让刘家上下痛心疾首兼义愤填膺：王莽建立了自己的新王朝。
从大的方面来说，这是刘氏家族的奇耻大辱；从小的方面来说，刘氏子孙失去了富贵的特权，很快沦为普通老百姓。刘秀一家也跟着遭了殃，这时候，刘秀的父亲已经去世，他跟他的两个哥哥寄居在叔叔刘良家里。
这时候刘秀十四岁。十四岁，放到现在，还是一个孩子，祖国的花朵，但在古代已经是一个小大人了。
十四岁的刘秀陷入窘迫的生活当中。但他的心态非常好，这是他长年累月与下人待在一起的结果，对于改朝换代的变故，他并不觉得有多大的失落。而他的哥哥刘却不同了，对王莽的篡汉表现出极大的愤慨和鄙夷，常常在家抱怨，并扬言要匡复汉室。
此时的刘秀虽然还没有远大的政治抱负，但在环境的影响下，在哥哥的熏陶下，他的心境开始慢慢转变，他明白必须为自己的将来做打算了，不能再是以前那个无忧无虑、醉心于田园的“庄稼汉”了。
于是在刘秀二十岁那年，他选择了去长安读书。在长安的太学他用心攻读，同时不忘结交豪侠。几年后，刘秀的思想发生了巨大的变化，匡复汉室虽然还不是他的远大目标，但是要成就一番事业已经成了他的心愿。只是这番事业具体是什么，他还没有详细目标。但后来与他一起打天下的好友就是这时候结交的。