卫灵公与弥子瑕之间产生了著名的“分桃”典故,事情的原委是君臣二人共游果园,弥子食桃而甘,未尽,遂以其半遗君。灵公食而甘之,曰“爱我哉!忘其口味以啖寡人。”后来弥子色衰爱弛,灵公便拿此说事,责怪道“是曾啖我以余桃!”孔子和他们同时,曾经出仕于卫,受到了卫灵公的礼遇,他的学生子路和弥子瑕是连襟关系。
卫灵公还喜欢宋国公子朝。宋朝相貌俊美,他既受灵公宠幸,又与灵公夫人南子有私。奸情路人皆知,一次卫太子过宋,宋人歌之曰“既定尔娄猪,盍归吾艾豭?”意思是说你們求子的母猪已经得到了滿足,为什么还不归还我们那漂亮的公猪?于是后世出现了“娄猪艾豭”的说法,艾豭指靠着与家主的同性恋关系而私通家主妻妾的人。