肃亲王府位于东城区正义路东侧，肃亲王豪格是清太宗皇太极的第一个皇子，从乾隆十五年绘制的《乾隆京城全图》上来看，当时肃亲王府还称为“显亲王府”。在王府中轴线上，由南向北依次是府门、银安殿、东西翼楼、神殿、后罩楼等。西面是花园，北面还有家庙。乾隆四十三年（1778）恢复肃亲王世袭封号，从此就一直称呼为“肃王府”。

   因为肃王府环境优美，富丽堂皇，在第二次鸦片战争后，法国曾要求将肃王府作为使馆。但肃王府系“铁帽子”王府，当时负责谈判的恭亲王不敢轻易许诺，后几经交涉，法国才勉强同意将使馆建造在纯公府，肃王府暂时逃过一劫。但肃王府还是没有逃过八国联军那次浩劫，义和团运动后，肃王府被划为日本使馆，今为北京市政府所在地。

   1900年6月24日，肃亲王善耆携家人趁混乱逃离肃王府后,与慈禧皇太后逃往西安，1901年随慈禧皇太后回到北京，但因为老府已经毁于战火，不得不在东城北新桥船板胡同重新建造新王府。新王府虽有房屋200多间，但已不是按照王府规制建造。王府建造有寝室、书房和花园，在花园的最北侧还建有一座二层小楼，楼内装修完全按照法式风格布置，楼内建有发电机，屋内摆放有西洋定做的钢琴、洋床，连吊灯都是完全从欧洲进口的。北新桥船板胡同内的新肃王府，也于1947年被善耆十九子宪容和善耆长子宪章，一起出面卖给了法国天主教作为神学院使用。1949年被政府没收，现原王府部分为北京袜厂使用，东部为居民住宅。

   1941年，肃亲王善耆为取得日本军国主义的支持信任，帮助他实现复辟清室的梦想，将自己的第十四女金璧辉过继给曾担任过乃木希典翻译官的川岛浪速作义女并改名为川岛芳子。