军山为海中岛屿时，相传曾为秦王屯兵之地，因形似伏象，又名象山。俯瞰军山，山水相依自然构成一幅八卦图。 山上古迹有：燕真人洞、白云泉、四贤祠、包公祠、董其昌碑刻及中国历史上最早的民办气象台等。