杜聿明故居位于美术馆东街路西，南依五四大街。该院原为一组带花园的住宅，1958年建中国美术馆时，拆除该院西部的花园部分，仅存东半部的住宅部分。此宅院约建于清代后期，原为慈禧太后侄女的私宅。民国初年卖给一德国商人，抗战后被买办吴信才购得，不久作为敌产没收，后为国民党将领杜聿明之宅。现为单位宿舍。该院坐北朝南，焘有四进。现存建筑为，大门一间，倒座房九间，均为硬山顶合瓦清水脊屋面。一进院落宽敞，仅有多株树木。北面过厅九间,前后廊，带雀替，硬山顶合瓦清水脊屋面，过厅门前一对上马石。过厅北面二进院，为一小庭院，仅有东西配房两座，甬路可通三进院。三进院门为二柱牌楼式垂花门，柱下一对滚墩石，门旁一对石狮。门内另有一对滚墩石，似另处移来。
院内正房三间，前后出廊，前有月台及垂带踏步，两侧耳房各三间；东西厢房各三间。南带耳房各二间；抄手游廊连接院内各房，屋面均为硬山顶合瓦清水脊。正房明间有硬木雕梅竹纹饰落地罩。第四进院落有后罩房五间，前带廊，左右耳房各二间，均为硬山合瓦清水脊屋面，院内游廊环绕。该宅院西侧有一穿南北的廊子连接前后几进院落。廊子西侧跨院现存一北房五间，前后廊，为勾连搭过垄脊硬山房，东带勾连搭耳房一间。该院格局较高，是京城中型四合院中的典型。
