迁中书监。为纳顺皇后妹为妃,而不见礼答。愉在徐州纳妾李氏本姓杨东郡人夜闻其歌悦之遂被宠嬖罢州还京欲进贵之托右中郎将赵郡李恃显为之养父就之礼迎产子宝月顺皇后召李入宫,毁击之。强令为尼于内,以子付妃养之。岁余,后父于劲以后久无所诞,乃表劝广嫔御。因令后归李于愉,旧爱更甚。
愉好文章,颇著诗赋。时引才人宋世景、李神俊、祖莹、邢晏、王遵业、张始均等,共申宴喜。招四方儒学宾客严怀真等数十人,馆而礼之。所得谷帛,率多散施。又崇信佛道,用度常至不接。与弟广平王怀,颇相夸尚,竞慕奢丽,贪纵不法。于是宣武摄愉禁中推案,杖愉五十,出为冀州刺史。