1873年9月23日，无锡荣巷的荣熙泰家，第一个儿子荣宗敬出世了；时隔两年，1875年8月4日，第二个儿子荣德生也来到了人问。

荣巷位于无锡西郊惠山南麓，是荣氏家族聚居的地方。荣家祖上曾经做过大官，可是到了荣熙泰这一代，家境已经很差。荣熙泰小小年纪，就不得不进铁匠铺当学徒；甚至连母亲去世后的安葬费用都没有，只好变卖家产。后来荣熙泰便长年在外给商家当账房先生，给官僚当师爷，勉强养家糊口。

荣熙泰再也没有想到，就是他的这两个儿子，后来会成为中国著名的面粉大王和棉纱大王，而且荣德生的儿子荣毅仁，还担任了中华人民共和国国家副主席。

荣宗敬和荣德生，虽是同胞兄弟，但是性格气质却完全不同。哥哥荣宗敬长着一张长方脸，心胸开朗，雄心勃勃，思路灵活，有一种使人不能不服从的魅力。他喜欢野外活动，夏天整日泡在水边，捕鱼捉虾，钓鳝抓蟹，样样都是好手；冬天下了大雪，他领着孩子们一起堆雪人，打雪仗，更爱滚雪球……

弟弟荣德生一点也不像哥哥．他是国字脸，浓眉毛，厚嘴唇，一副憨厚模样。他直到4岁还不开口说话，父母都担心他会不会是个哑巴；5岁上他总算终于说话了，但一直少言少语，老实本分。因为他排行老二，邻居们都戏称他为'二木头'。小德生很少出门，像女孩子一样，常常闷在家里，帮母亲纺纱、养蚕。夏天，母亲忙得满头大汗，小德生总是一声不响地陪在母亲身边，一会为母亲扇扇子，一会递毛巾给母亲擦汗，十分懂事。

虽然家境贫寒，但荣熙泰深知，只有让孩子好好读书，将来才有重振家业的希望，所以很重视两个儿子的学习。荣宗敬7岁进私塾，立刻显示出他过人的聪明，只要老帅稍加指点，他就能够领悟，作文也总是写得很出色。荣德生7岁时，父亲却有些犹豫，怕他跟不上学业，所以便用硬纸板剪了300个字块，自己在家里教他，每天学10个生字。没料到荣德生学得很快，后来学算术，背'九九表'，'二木头'也毫不吃力。父亲这才发现，这个不声不响的孩子有着非凡的记忆力！第二年，荣德生也进了私塾。他对学习的兴趣十足，上学读，回家读，还把古诗词写成小纸条贴在墙上、蚊帐上随时复习。许多经典著作他都能一字不漏地背下来，使老师赞叹不已。

1886年，荣宗敬14岁，就不得不离开学堂，帮助父亲支撑这个家。经父亲的朋友介绍，小小年纪的荣宗敬，独自扛着铺盖卷闯进了大上海，在南市区一家铁锚厂当学徒。荣宗敬是个有志气的孩子，一心想干出点名堂来。可是他毕竟太小了，工作又累，又不会照顾自己，不久就染上了伤寒，只得回家治病调养。可是荣宗敬明白家中的艰难，所以身体刚好些，就又返回了上海。这一回，他进了永安街豫源钱庄当学徒。

这时，荣德生还在读书。他的私塾老师还是个有名的医生，所以常常被人请去看病。老师经常让荣德生代他为小学生上课。荣德生因此得到了许多的锻炼机会。休息的时候，荣德生喜欢用纸板和麦秆编织工艺品，用旧纸折叠新鲜的小玩艺，显示出他的创造精神。父亲对荣德生抱有很大希望，认为他将来一定能够考科举当大官。可是懂事的荣德生，心里却羡慕哥哥已经在为家庭分忧。在1888年，他就背着父母给哥哥写了一封信，请哥哥代他也找一个职业。

上海的职业并不好找，直到第二年，通顺钱庄开业，荣宗敬才通过朋友，为弟弟也谋得了一个学徒的机会。15岁的荣德生，也乘着小木船摇进了大上海。

学徒的工作繁重而且单调，按规矩，连扫地、擦桌等琐碎的家务事，也是由学徒承担的；相反真正的钱庄业务，反而轮不到他沾边。还是个孩子的荣德生，几乎闷出病来。有一天休息，他就一直玩到天黑上灯了才回店。店主很不高兴。一位姓窦的账房先生叹息说：'学徒3年，转眼就过去了。学到本领的人，将来能当先生；学不到本事的，将来还会怪先生没本领！'荣德生猛然惊悟，第二天就主动去向窦先生请教。窦先生很欣赏他的悟性，悄悄地把平生学问都传授给荣德生。荣德生学得很快，没过多久，记账、结算、看钱、兑银等钱庄业务的基本功，就都难不住荣德生了。除此以外，他还练出了一手好书法。每逢过年，左邻右舍都争着来请他写春联。