因为在宫里耽搁了三年，再回到老家时他母亲已经错过了最好的年龄，不好嫁人了。
而且他母亲是进宫做过秀女的，一些好人家哪里肯要她做媳妇儿？
毕竟……万一她被皇上宠幸过，身子不干净，人家岂不是明媒正娶娶了个残花败柳回去？
所以大家虽然嘴上说着相信他母亲冰清玉洁，可他母亲回家整整半年也没有人上门提亲，他外祖父母无奈之下只好让他母亲嫁给了一个镖局里的镖师。
那镖师也就是楚凌风的父亲。
那镖师一开始对他母亲很好，可日子久了镖师就变心了，嫌弃他母亲太过循规蹈矩，没有半点江湖儿女的洒脱豪气，夫妻俩三天两头的吵架。
在楚凌风没满两岁的时候，那镖师就非要跟他母亲和离，娶一个洒脱的江湖女子为妻。
他母亲见那镖师一颗心都放在了那江湖女子身上，不仅对她打骂不休，甚至都开始动手揍儿子了，没办法，答应了和离。
和离回家之后，楚凌风和他娘在外祖父家里过着寄人篱下的生活，整日受舅舅舅妈的刁难羞辱，日子过得很艰难。
楚凌风五岁那年，他娘终于熬垮了身子，就这么去了。
临终之前，他娘瞪着那瘦得凹陷的眼睛死死盯着京城的方向，跟他说，她这辈子最悲哀的就是在待嫁的年龄遇到了皇帝选秀，若是没有皇帝选秀，她早就在小县城里嫁得如意郎君，这辈子生活得幸福美满，作为她的儿子，他也一定不会如此可怜……
她说，她最恨的就是皇帝。
皇帝害得她错失了大好良缘，把她选进宫后却又不宠幸她，如果他能宠幸她哪怕那么一次，她也就能够留在皇宫做妃嫔做主子，不用回到江南老家遭人白眼。
她说，如果当年她被宠幸了，那么作为她的儿子，他也就不会是个任人欺负的小可怜，他会是高高在上的皇子，会被册封王爷，会成为人人殷勤讨好的大人物，欺负他的舅舅舅妈看到了他一定会跪在他脚下三呼千岁。