文昌塔位於祁陽縣城東，臨湘江岸的“萬卷書崖”上。明萬曆十二年(1584年)邑進士銅守仁、鄧球倡建，旁設文昌書院，故屬文塔。明天啟年間傾毀，清乾隆十年(1745年)仍用原基建塔，乾隆十三年(1748年)告成。

塔坐東南朝西北，正對縣城，頗類似永州回龍塔形制。塔高36.68米，八角七層，底層中心直徑16.77米。塔基為青石鋪砌，塔身磚構，拱形門窗、蓋頂、角簷、出挑、堆花等用砂石砌。角飾龍、鼇、虎等，獸頭口銜銅鈴，?為鑄鐵空心葫蘆。一至六層，每面各開一拱門和左右兩小拱窗，內有中心廳，東西兩面設神龕；二至四層設有平座石欄；七層七面有窗洞。各層夾道、階梯曲折多變，頗具匠心。