唐京兆万年（今陕西西安）人，字会微。及进士第，授相王府参军。天宝五载（746），为江西、山南、黔中、岭南道黜陟使，纠正吏治，颇有威望。迁吏部侍郎。十三载，杨国忠以其易制，举为宰相。十四载，谏玄宗勿准安禄山以蕃将三十二人代汉将，玄宗不听。后禄山果反，他随玄宗逃蜀。奉命与房官、崔涣送传国玺及册命给肃宗。肃宗知其素附杨国忠，礼遇独薄。后拜尚书右仆射，罢知政事。改太子太保。