在《乐章集》中，他提到了许多美丽女人的名字，英英、秀香、虫虫、瑶卿，其中，他最中意的女人，当属虫虫，两人已经到了谈婚论嫁的地步，但最终这段恋情悄然终止，柳永不肯说出其中的原因，推想可知，一个品级不高的朝廷命官，怎愿意和一个低贱的妓女共谐连理？就算柳永不是看不起她们，与妓女发生关系的朝廷命官按纪也要丢官罢职，以后就要忍饥挨饿了。从宋人笔记上，看不到柳永有妻有子的记载，他很可能终身未婚，那么现在的福布斯上榜富翁柳传志自称是柳永直系后裔的事情就难以成立了，河东柳氏在唐朝是高门士族，经过五代十国的血腥屠杀，柳氏无可避免地衰落了，后人拉上柳永的招牌，未免显得不厚道，有拉虎皮作大旗的味道。
柳永生前潦倒，死后却非常香艳。传说他死的时候身无分文，官府也找不到他的后人和亲眷，是当地的妓女出钱将他下葬。以后，每到清明时节，妓女们都要到他的墓前祭奠，然后才到乐游原上踏青，当时，人们把这一习俗称为“吊柳会”，这一习俗一直持续了百余年。“乐游原上妓如云，尽上风流柳七坟。可笑纷纷缙绅辈，怜才不及众红裙”，只有人文大宋，才有如此温馨的文化气息，才有如此温厚长情的风尘女子，即使历时千年，也让后人泪盈于睫。
