墓区保存有一块清代嘉庆年间建立的墓碑，是嘉庆二十四年电白知县特克星阿所立的，上有“隋谯国夫人冼氏墓”等字样。传说墓碑建立的那一个月，当地的民众可以隐隐听到有奏乐之音，此墓碑也因此闻名于世，至今这事还锲刻在离冼墓一箭之地的娘娘庙的墙壁上。在一些老人的记忆中，上世纪三四十年代的墓城仍有城墙、城河和城池，城墙高过人，城内似乎还有守墓士兵居住的“兵房”遗址。清光绪《高州府志》载：“电白县，隋谯国夫人冼氏墓在县北十五里山兜娘娘庙后，土名鬼子城。”

冼夫人墓，山兜乡民称为鬼子城，至今，山兜仍流传着冼夫人在鬼子城显圣退倭寇的故事。

明隆庆年间，倭寇攻袭电白县城（今电白县电城镇）。知县蒋晓、指挥官范震等无力抵抗，弃城而逃。倭寇扎兵城内，焚毁官署民房，残杀城中居民，民众惨死者达三千八百多人，其中妇女被奸污而自尽者不计其数。

倭寇还四出劫掠四郊乡村。这夜四更时，大队倭寇来到山兜丁村，准备乘夜劫掠百姓。倭寇经过娘娘庙及冼夫人墓地时，突然狂风大作，大雨倾盆而下，喊杀声四起，仿如千军万马自四面八方杀来。倭寇以为中了埋伏，吓得魂飞魄散，黑夜里乱纷纷冒雨逃遁而去。

当时熟睡中的乡民被震天动地的喊杀声惊醒，一些大胆的乡民奔出户外探看，见到惊慌溃逃的倭寇，才知山兜乡民险遭劫难。令山兜乡民百思不得其解的是，明明听到千军万马伏击倭寇，可是大伙分头在各村落查个遍，却不见一个兵士的影子。乡民们议说纷纷，都说是冼夫人显圣护民，带领神兵吓走了凶残的倭寇。