胡文光牌坊西侧的“走马楼”，又称“凌云阁”，始建于清代道光年间，相传当年西递首富胡贯三家族为迎接歙县的亲家、当朝宰相曹振镛的到来而突击营造的。现今的走马楼是依据当年的布局重新修复的，并与相邻的七哲祠遗迹共成一个景点。走马楼分上下两层，粉墙墨瓦，飞檐翘角。现走马楼内表演黄梅戏、抛彩球、茶道等节目。楼下有单孔石拱桥，名为梧赓古桥。西溪流水潺绕走马楼，穿桥而过，在这里可领略到“西递八景”之一的“梧桥夜月”美景。