據(jù)說，這座祠堂所建的位置，原來是王氏一世祖王默的居室舊址。王默是宋末人，放鴨為生。以往放養(yǎng)鴨子的人，都是將一群孵出不久的雛鴨趕出門，往山野溪澗一路走去，風(fēng)餐露宿，讓鴨子自尋青草、螺螄吃，一直到長(zhǎng)成大鴨才趕回家。王默趕鴨到這里，時(shí)當(dāng)盛夏，雨水特別多，就順便搭了個(gè)草棚子在這里，以避風(fēng)雨。一日，正是端午節(jié)前夕，忽然間風(fēng)起云涌、雷鳴電閃，大雨如同瓢潑一樣。王默趕快將鴨子趕攏在一起，躲進(jìn)了草棚，卻見有一人撐著把破傘，冒著大雨向他的草棚跑來。原來這人是一個(gè)江西的風(fēng)水先生，姓徐，人家稱為“半仙”，近來被鄰近廖姓大戶請(qǐng)來看風(fēng)水、尋墓地。因?yàn)樽厦鄙绞且惶庯L(fēng)水寶地，他每每來此踏勘，所以王默認(rèn)識(shí)他。當(dāng)問到他為何一個(gè)人冒雨來此時(shí)，那徐半仙長(zhǎng)嘆了一口氣，說起自己踏勘日久，本想為主人找一處最好的風(fēng)水地，只因久久還沒定下佳穴，廖家主婦竟心生厭惡，對(duì)他招待不周，口出惡言，所以他憤而出走，想回家去，不想路上遇到大雨。王默見他一個(gè)遠(yuǎn)方人落魄于此，心生憐憫，又敬重他是有學(xué)問的人，便留他在草棚內(nèi)安身，做飯做菜伺候。不想那雨直下到第二天還不停歇，王默還特意到山下沽酒備菜，為徐半仙解愁。直到第三天雨歇天晴，才送他上路。那徐半仙告別后走了幾步又回頭來，對(duì)王默說：你是個(gè)好人，我沒有什么可以報(bào)答你。在紫帽山踏勘了這么久，我早看中你搭草棚的這地方就是一處吉地，叫作“臥牛穴”。此地左近紫帽山，面對(duì)紗帽石，將此地起蓋居室，日后必主人丁興旺、子孫貴盛。后來王默果真居住于此，傳衍下深坑13鄉(xiāng)數(shù)萬(wàn)子孫后裔，并出了不少名人。

明代，深山里的紫星王氏竟然有過“公孫五舉三知州，兄弟一朝兩大夫”的盛舉。弘治年間，王默八世孫王疇以貢生授常寧訓(xùn)導(dǎo)，辭官不仕。他同晉江著名理學(xué)家陳?。ㄌ?hào)紫峰）交情很好，陳琛出仕之前曾在紫帽山結(jié)廬讀書，每與王疇探研學(xué)問。王疇之子王承箕（號(hào)紫南）拜陳琛為師，明嘉靖十九年（1540年）中舉人，授官沅州知州，一任三年。時(shí)人評(píng)價(jià)他“約己裕民，庭無(wú)暮金，性坦直，不陰附上官意”，就是說他做官能約束自己，不多靡費(fèi)而讓好百姓日子過得更好，絕不接受賄賂，性格坦白正直，有話直說，不會(huì)看上司的眼色行事，是一個(gè)好官。

（來源：晉江勝跡）