过去，老北京人谈起旧时北京的王府，常说：“礼王府的墙，豫王府的房，肃王府的银子用斗量。”
清初肃亲王豪格统兵追杀张献忠，夺下他无数财宝，又立下大功，他得到的财富也多于一般的王公。
肃亲王府银子多，肃王府的藏银方法很奇特，是用整张刚剥下的鲜牛皮将银子包好，再用牛筋缝严，待牛皮风千后坚固无比，若想取出银子，必须用刀割破牛皮。这不但使窃贼无法偷窃，即使府内人等也休想打它的主意。这种方法非常有效，历代肃亲王都使用它。
话说每年肃王府都要晒银子，怕银子发霉。而肃亲王则悠闲地在屋子里喝茶，有时他会派管家查晾晒的银子有没有少。管家出去清点后回来回报，如果说银子没少，肃亲王就会说接着晒。后来，管家领悟到其中的奥妙，便和几个管事的一起拿走了一些银子，然后禀报肃亲王说银子少了。这时，肃王才下令将银子收起来。
肃亲王是清朝八大“铁帽子王”之一，在第一代肃亲王豪格之后,一共承袭了9次，其中第一、二、三次袭称显亲王，乾隆年间恢复原称。
肃亲王府位于东城区正义路东侧，在第二次鸦片战争以后，法国曾经要求将肃亲王府作为自己的使馆。但因为肃亲王府是铁帽子王府，当时负责谈判的恭亲王不敢轻易答应，后来几经交涉，法国人才勉强同意将使馆建造在纯公府，肃王府暂时逃过一劫。
1900年的庚子事件，一批曾支持过义和团的亲王的王府被八国联军抢掠烧毁，其中就包括末代肃亲王善耆的府邸。光绪二十七年（1901)，王府沦为日本使馆，只存墙垣。其地现为北京市政府。
