后梁贞明六年九月二十四日，邢州隆尧县的破落地主柴守礼家，随着一阵婴儿的哇哇啼哭声，柴守礼的妻子给丈夫生了一个大胖儿子。柴守礼高兴得合不拢嘴，为儿子取名柴荣。
柴荣的祖上可是有名的人物，唐太宗的妹夫柴绍是他的远祖。可是不知道什么原因，到他父亲这一代时，家道渐渐衰落下来。
古人结婚早，柴荣的结发妻子姓刘，也是将门之女，幼时就许配给柴荣，她一连为柴荣生了三个儿子。后汉末年，隐帝刘承佑因猜忌郭威，将他在京的亲属全部诛杀，柴荣的元配刘氏以及三子也被杀。后周建国之后，郭威追封刘氏为彭城郡夫人。柴荣继位后，又追册其为贞惠皇后。这是后话。
因为孩子多家庭条件又不好，柴荣不得不外出卖伞为生，昔人有古风一篇，单道为商的苦处：
人生最苦为行商，
抛妻弃子离家乡。
餐风宿水多劳役，
披星戴月时奔忙。
水路风波殊未稳，
陆程鸡犬惊安寝。
平生豪气顿消磨，
歌不发声酒不饮。
少资利薄多资累，
匹夫怀璧将为罪。
偶然小恙卧床帏，
乡关万里书谁寄？
一年三载不回程，
梦魂颠倒妻孥惊。
灯花忽报行人至，
阖门相庆如更生。