吕守曾之子吕公溥，主持荆山书院多年，著有《寸田诗草》，袁枚为之序，称其为"诗中雄伯"。吕公溥还是剧作家，有《弥勒笑》剧本传世。

吕耀曾之子吕肃高，曾主持修《长沙府志》，著有《南村诗草》等。吕耀曾之孙吕燕昭，工诗，与袁枚交厚，袁枚《随园诗话》多录其诗，著有《福堂诗文集》。