相傳在西元一七九五年,也就是清乾隆六十年,農曆三月十日(一則說三月十四日)夜晚,在雲林縣台西鄉五條港外海有座海豐島,是夜在五條港口狀元澳外,驀然有道金光直衝雲霄,聲勢十分的浩大驚人!在附近海域作業的漁民見狀,無不嘖嘖稱奇,!於是大夥趨近一探究竟,只見一竹筏緩緩飄進,竹筏上有著香爐乙鼎,上插著清香三炷,另有香火一座,上刻著──「張李莫千歲」。
漁民見聖蹟顯靈,乃於海豐島上建寮奉祀。日後漁民出海捕魚時,都會前往叩禱,竟也都一一感應!於是島上香火日益鼎盛,聲名也逐漸傳了開來。
到了西元一八O六年(清嘉慶十一年),為不受海潮阻礙方便崇奉,倡議建廟的聲浪不斷高漲,並蒙張千歲親自化身擇地,選定五條港「鳳凰活穴」,由瓦厝公館(現瓦厝段)撥其經營之鹽田地一分四厘一毛,捐做廟址。並透過崙仔頂、瓦厝、五條港等三地信徒,共同建竹架草廟,雕製張李莫千歲神像祭祀其中,台中龍井福陵宮 。
西元一八二一年(清道光元年),在麥寮街的店家──楊長利號,其店主楊裕首倡重建,遂由八股(崙頂股、崙下股、瓦厝股、五港股、什張犁股、街仔股、客厝股、鹽埔股)居民一同建廟,經過了好幾年才完成。
西元一八五O年(清道光三十年)八月十五日,在廟前豎立起高達六丈多的大旗杆乙對。有傳言指出,此乃張李莫千歲化身為一老叟,到福州選購杉木,並書刻「張李莫千歲」於木料上,杉木漂流至海豐島附近,居民拾獲皆感訝異,!更加篤信神蹟靈驗。