南宋湖州（治今浙江湖州）人。与弟潘丙同为太学生。宝庆元年（1225），因不满史弥远擅自废济王赵、拥立理宗，遂与李全约期起兵，全失约不至，他与丙率渔民、巡尉兵卒数十人夜入赵王邸，拥立为帝。事败，丙被杀。他脱逃至楚州，被捕，杀于临安。