明鄭時期，有一商人謝德瑞(乃安公後裔)，奉帶廣惠聖王香火到，因內急將香火掛在林投樹，事畢欲取回香火卻任拔不動，因而在此地築草屋居住，安奉廣惠聖王香火。其後，附近居民聞知聖王神威顯赫，香火日盛。
於康熙10年(1671)將草屋改建為土厝，命名為王公廟。而後謝德明返大陸祖廟將先帝所賜之下馬牌搬運來台安置在土厝廟內並配祀謝府元帥。