这里有一个特别悲伤的故事，据说之前有一个人生了三个漂亮的女孩，但是怕这些女儿落到越王的手里，所以在此处将自己的亲生的女儿活葬，每次想到这里都在心里感叹曾经的封建王朝害了多少人，不禁感叹现在生活的美好，后来后人为了纪念这三个可怜的女孩就把这里叫做三女祠。