儒矶塔建设于光绪七年（1881），由台湾任道台的刘璈(凤翔）带头捐资修建，一则纪念手下阵亡将士，二则张扬家乡人文景观。

塔高三十多米，七层，塔基铺有条石，塔身砌以青砖，塔四面镶嵌有刻石，刻石原有三块，今仅存《塔记》一块，塔体每层饰有檐角，状如牛角，自上而下整饬美观，角上吊有铜钟铃铛，现铜钟已悉数被盗，塔顶有巨松一棵。据说：当年此塔落成之日，刘璈请当时临湘县知县黄庆来为塔作记，黄知县与临湘名士吴獬私交甚好，遂转请作记，吴獬当仁不让，作《临湘塔记》，该记用隶书字体刻于一四尺见方白石上，嵌于塔体第一层东南面。至今犹清晰可读。