李羡和惠娴是表兄妹。
李羡的母亲杨氏，惠娴叫姑姑。两家住的又极近，李家杨家都是扶风郡的豪门大族，因为这个关系，惠娴和李羡自幼亲近。李益则跟惠娴没有关系，李益的母亲出身低贱，是冀州教坊中一名官妓。
低贱归低贱，然而相貌美丽，才艺高超，能诗善画。这样的女人，正适合做王公贵族，达官贵人们酒席客场上的红颜知己。十多岁的少女，四十多岁发福半老的中年男人，一个有美貌，一个有身份有地位，不搞到一起去好像都说不过去。于是有了李二。这出身听着有些凄凉，但李益其实命很好，他母亲没资格入府，他却被亲生父亲带回了府中，得了李家姓氏，贵族身份。
虽说是私生，但都是自家骨肉，他父亲嫡母自然待他不差的。尤其是他的嫡母，这女人很奇怪，可能是真的爱儿子，她对李益和亲生儿子一般疼爱，比对女儿更厚。李益和李羡从小一起长大，吃的穿的什么都一样。兄弟一起读书，受一样的教育，年过十五，携手一同去拜访贤达。别人见了，说，这是李大，那是李二，都是李慕的儿子。听者听到李慕的名字，便露出欣赏的神色来，而后表誉夸赞。兄弟俩整日除了苦读就是拜访已经成名的官贵名士，借父亲名士的声望，替自己扬名，积攒名气和未来步入仕途的资本。这在贵族当中是非常寻常的，贵族们要出仕做官，需要的就是名声，有名声就能得到当权者的赏识和重用。而名声是靠名士们互相谈论品评得来的，李家兄弟五六岁就开始受品评，十五六岁后开始