十二塔庙位于斗象台正对面的一片原野中，有说法是“十二生肖塔”不知道怎么来的，跟生肖一点关系没有，原先是用于囚禁和审判犯人的地方。沿着中心干道左右各六座。这十二座塔就是传说中的“天狱”，在古代分不出到底是谁说真话谁说假话的时候，就把原告、被告各关进其中一座塔，谁先得病或者死亡就代表谁受到了上天的惩罚。