清朝時期，芳苑曾因擔任鹿港的外港而發展成港街，著實繁榮過一陣子，因此，有「一府、二鹿、三艋舺、四寶斗、五芳苑」之說；但是，日據時代以後，因冬季東北季風強烈，導致海岸沙丘移動，芳苑港口(番仔挖港)型態發生改變，終使失去了港口機能，芳苑盛況空前之景象亦隨之沒落，換句話說，芳苑之興盛，始於清代，而其衰頹，則起自日據時代。