卢宅房屋数千间，现存自明景泰至民国初的建筑20余座。建筑群三面环水，南对笔架山。雅溪环绕，一条卵石小街贯穿东西，肃雍堂为主轴线，左右与之平行的有世德堂、大夫第、世进七第、五台堂、柱史第、五云堂、冰玉堂等组建筑群。还有卢氏祠堂、善庆堂、嘉会堂、宪臣堂、树德堂、惇叙堂等建筑。