余文乐除前女友卢巧音外，还先后和Ｔｗｉｎｓ中的钟欣桐、台湾女星杨丞琳等传过绯闻，他提前在接受网络节目访问时，表示现在不敢和合作的女艺人聊天，因为不想别人误会自己不务正业，更怕女艺人误会他有追求之意。

　　余文乐日前接受网络节目访问时，自称经常被人指责，尤其是圈中前辈。不过他认为，会说自己不好的，才是真正对自己好。阿乐说：“说你是因为关心你，好多前辈都会说我，比如谭生（谭咏麟）、克勤、华哥（刘德华）、秋生等。”

　　阿乐入行后绯闻不绝，除前女友卢巧音外，还跟钟欣桐、台湾女星杨丞琳等传过绯闻。他透露如今他不敢和女艺人多交谈，阿乐说：“以前我觉得不是严重，但现在觉得是，和我传绯闻的都是和我合作过的女演员，如今我和女演员合作，打完招呼，就不知道该不该再讲话了，因为不知道别人会不会以为我不务正业。”就是因为曾有人误以为阿乐想追求她，所以弄得他“一朝被蛇咬，十年怕井绳”。

　　作为人气偶像，余文乐的公司有没有不让他拍拖呢？他说：“只要在工作上表现稳定，拍拖当然没问题！但拍拖当然会有影响，因为谈恋爱始终是件大事，如果给我选择，我会挑一个圈外人，但是这个女孩子可能会很惨，最重要的是信任。和圈内人拍拖，对我来说有安全感。”（任晴）