民國七十三年（西元1984年）興建五營樓。文德宮另一很大的特色即為五營樓。 
一般寺廟供奉五營神軍，可能以五營旗供奉在神案上或在廟埕邊設一五營營帳，但文德宮蓋了一五層樓高的五營樓，各樓皆供奉一營的神軍將領，非常特殊。五營樓裡面相當駐紮五營的兵力。其功能為類似現代的守衛室在守護文德宮，進入前會先去除人體的煞氣。
五營又有內外之分，內營營頭稱之為「元帥」，外營營頭稱之為「聖者」，所謂「內營」是以宮廟本身內部而言，平日駐守在宮廟內，以傳統的五方五色為概念，將五種顏色製作成五種顏色的小旗子供奉在廟內，中營黃旗李元帥率領三秦軍三萬三千三百三十三兵馬、東營青旗溫元帥率領九夷軍九萬九千九百九十九兵馬、南營紅旗康元帥率領八蠻軍八萬八千八百八十八兵馬、西營白虎白旗馬元帥率領六戎軍六萬六千六百六十六兵馬、北營玄武黑旗趙元帥率領五狄軍五萬五千五百五十五兵馬。
「外營」則是駐守在「境」或者是社區的四周，通常會利用廟宇神明生日慶典的時候，以社區的範圍依東南西北中五個方位，選取五個地點來舉行安外營的儀式。而外營的安置方式有別於內營五色旗的表現方式，而是以青竹削去竹青，在竹身上書寫外營符，以竹符的方式來表現，外中營黃旗李元帥率領三秦軍三萬三千三百三十三兵馬、外東營青旗張公聖者率領九夷軍九萬九千九百九十九兵馬、外南營紅旗蕭公聖者率領八蠻軍八萬八千八百八十八兵馬、外西營白虎白旗劉聖者率領六戎軍六萬六千六百六十六兵馬、外北營玄武黑旗連聖者率領五狄軍五萬五千五百五十五兵馬。
五營神兵本是王爺才有的兵將，受其調派與指揮，不過現在許多的廟宇常常會因為主觀的意識或者是信仰的習慣，早已無此分別，都希望能夠擁有五營兵將來守衛村莊。
參考資料：1. 文德宮廟史民國100年整編、彰化、文德宮管理委員會、2011。