磺溪書院俗稱文昌廟，位於大肚鄉磺溪村文昌路60號，主神供奉文昌帝君，創建於清光緒十三年（1887），是介於教育與寺廟間之建築，為兩進七開間立面，四合院式的配置，其間除有三川門、拜殿外，軒亭、學堂等佈局，為一般寺廟所罕見。
　　 其創設源起於嘉慶四年（1799），由當時鄉紳楊占鰲（烏日鄉人，道光十九年舉人）等人創立「西雝社」，以為社學創設之伊始。後來，復得例貢生趙順芳（下寮尾座人，即今磺溪村）、黃玉書（彰化人，光緒十五年赴北京會試，成貢士，因丁憂未及殿試）等人將其發揚光大，並徵得大肚下堡（今大肚、龍井、烏日等三鄉）士子文人四五四人為社員，廣募基金設立學田，延師課讀，是為地方文教創立之濫觴。
　　 首先映入眼簾，就是三川門（或稱五門殿）有舖陳廣達七開間的立面，與飛揚的三川燕尾脊，其層層略降的屋頂，而形成第一進頗為壯觀的門面。三川門之結構為九架帶前簷廊，封柱落在二楹下，二瓜上連結四斗，象徵著步步高升，在本省傳統建築中甚為少見。第二進正殿，兼具祭祀和講堂的功能，高聳的棟宇及其簡朴的裝飾，正塑造著大殿莊嚴肅穆的空間氣氛。拜亭（月台）是由孔廟建築中所衍化而來，軒亭作法向為四面檐廊，可提供祭典時的廣敞空間，在這裡有雕鑿細緻的木構架與屋面造型，正是磺溪書院建築特色之一。
　　 磺溪書院的正殿，除供奉有讀書人守護神的文昌帝君神像外，其中以魁星爺造型怪異最令人刮目。殿堂原有「雅歌孝友」、「經天緯地」及狀元初步等匾額多方，只可惜部分不知流落何處。
　　 講究裝飾與雕塑，是傳統建築主要關鍵，磺溪書院的精緻磚雕和花瓶門、海棠門等等，無不意味著象徵意義，其特殊風格，更是早期文教建築中難得一見的佳作。拜亭垂脊上大致是吉祥獸裝飾，但大異其趣是凶悍的鷹隼，卻在此排列受教點化，真是有教無類。
　　 一般而言，磚工的表現，是最受人注意，以砌法平砌為主，斗砌為輔，一丁一順，一丁二順，規格變化多樣。在此八角窗的兩側及下方牆堵及龍虎堵，翼牆上方均有紅白相間，作工精細的磚刻圖案。還有牆基下的馬櫃台，以泉白石雕飾，正面四根白石柱，加上兩隻精雕青斗石獅，在視覺上造成強烈的震撼效果。書院型式是介於孔廟與民宅之間（早期規制、官方建孔廟，民間只能建文昌祠），文昌帝君，又稱梓潼帝君，相傳為四川梓潼人張亞子所化身，專司人間祿籍（科舉功名），因此普受天下學府士子所敬重；每年農曆二月初三，為其祭典日，屆時地方人士，依照古禮隆重祭拜一番。
　　 書院的右側廂房，為紀念當年「西雝社」的創立，以及奉祀後來籌建文昌祠的發起人趙順芳的長生祿位，血食至今，猶為永懷其遺愛人間。其後是藏書室、監院室以及士子讀書的「尚學堂」﹔另外，書院的左側廂房則是山長室以及做為童生學堂和宿舍的「齋堂」，設備極為完善。
　　 磺溪書院歷經一百多年的歲月之後，原本已經殘破不堪，曾經瀕臨全毀，但是在地方政府竭力奔走，並獲得內政部、文建會以及前台灣省政府民政廳等單位的大力支持之下，修復工作終於民國七十五年七月開工，一直到民國七十八年三月完工，而民國八十八年的九二一地震並沒有對磺溪書院造成太大損壞，受損的部分，已經緊急搶修，如今，磺溪書院除保有原來的風貌之外，將來更可完整地重新嶄現眼前。
　　 磺溪書院的創立，對於早期地方文風的發展助益頗大，而書院創始人趙順芳一生熱心公益，至今廟內尚供有其長生祿位，因此趙家的事蹟就在地方上廣為流傳。