五贤堂是为纪念唐代韦应物、白居易、刘禹锡以及宋代的王禹偁、苏轼五位贤达而建。“天下苍生待雨霖,古来贤守是诗人”。