唐德宗时，翰林学士潘炎受到皇上特别的恩宠，他的夫人刘氏，就是宰相刘晏的女儿。京师的大臣有事来拜访他，等候了好多天，都没有遇上，于是就送守门的人三百匹缣。他的夫人感叹的说：“哪有当臣子的人，京师大臣要见他一面，还得先送仆役三百匹缣的呢？处境危险可以想见了。”因此，就劝潘公辞官。