孤山寺在历史上曾经是一座名刹，虽说孤山实际上就是个小山丘，丘上建寺，目前除了少量石雕、碑刻和寺庙的基座，其他历史痕迹基本已经不复存在，爬上孤山算是当地的制高地了。