后来乐恢在本郡当小吏。太守犯法被诛杀,太守的故人害怕被牵连,没有敢前往的,只有乐恢独自穿着丧服奔丧,被连坐、抵罪。回来后,再次担任小吏。
同郡的杨政数次当众诋毁乐恢,但是乐恢不计旧恶,推荐杨政的儿子为孝廉,因此乡里归心于乐恢。乐恢被招去担任司空的职务,不肯上任,推荐了有德之士杜安,自己退下了。
(《后汉书卷四十三朱乐何列传第三十三》)