高安的历史大体有4000多年，后来各朝各代都对高安有过不同的叫法，汉代称为建成县，唐代为避讳太子李建成遂改为高安县；古时高安还称作为米州，后来米州改为筠州，宋朝宋理宗赵昀同音，又恰巧高安碧落山上长出了一颗特别罕见的灵芝，被视为祥瑞之兆，筠州就改成了瑞州，元朝成为瑞州路，朱元璋建立明朝洪武二年将瑞州路改为瑞州府，府衙所在地就是高安原市政府所在地，瑞州府衙一直是明清瑞州府治所在地。