七美島早期被稱為寡婦島，這跟望夫石的傳說也是有很密切的關係，相傳七美島有一對很恩愛的夫妻，丈夫每天都會出海捕魚，而妻子在傍晚都會在海邊等著丈夫回來，某一日，妻子按照慣例在海邊等著丈夫歸來，只是這回怎麼等就是不到丈夫的蹤影，妻子不肯死心，一直等，過幾天後島上的居民經過此地發現女子時已經倒地不起了，鄉民們將女子安葬在海邊，過了不知道幾年後，那海邊的石島不知不覺化成一個人形，包括頭髮、身體、雙腳，更神奇的事連小腹都是女子懷孕的小腹，這個淒美又浪漫的愛情故事在整個七美島流傳至今。