柔远楼是内城的西门城楼，与东门光化楼相对，建筑结构和城高与光化楼相同。柔远有对外实行怀柔政策之意。紧挨柔远楼的西面是西瓮城，然后是嘉峪关关楼，它们建在一条直线上。