文昌阁在县城东南，倚城墙垒台而建。下层朝北，上层朝南，飞檐翘角，黛瓦朱栏。可眺望郊外田畴桑麻、竹篱茅舍和城内学宫、梵宇、市廛人家。阁上供“梓潼文昌帝君”和“魁星”、“朱衣”塑像。下层屏门上刻《文昌阁君阴骘文》。建于明嘉靖三十八年（１５５９），初名“崇德楼”，又名“望江楼”；或称“文昌阁”、“文峰阁”。

      乾隆四十四年（１７７９）在阁下砌围墙，朝北月洞门上有“天梯云栈”４字石刻。又在阁旁建小楼两间，作为左右翼。院内种植竹木。后来僧人在围墙外陆续建成文殊禅院。山门朝北，照壁墙上有“文治光华”４字石刻。墙北是玉莲池，东邻定慧寺。