相传在春秋战国时期，黄河在此转了三个弯，由南向北流向黎阳（现在浚县）以后转向东方，北依金堤滔滔而去。这一代有山有水，植被茂密，人们依山傍水而居，既耕种农田又放养骡马牛羊。更特别的事这里的白马高大肥美，远近闻名。有一天，一匹母马发情，主人为了繁殖更多更好的白马，就在马群中挑选了一匹最好的白马与这匹马交配。不料，这匹白马无论如何也不靠近发情母马。主人这才恍然大悟，原来白马是这匹母马所生。马是非常有灵性的动物。区别于其他动物的一个特点就是马不欺母。
为了达到自己的目的，主人用布遮住白马的眼睛让其交配。结果交配成功，可当人们去掉白马的遮眼布以后，白马发现与它交配的是自己的母亲，只见它咆哮如雷、悲声嘶鸣、挣脱缰绳，一头撞向墙头，顿时鲜血如注，“噗通”倒地而亡。主人见这种情况后悔莫及。全村都被白马这种行为感动，于是就像埋葬自己的亲人一样，把这匹白马埋葬在这面墙边。
马不欺母，白马撞墙的故事一传十十传百，很快就传遍了方圆百里。这座村子从此叫白马墙。村东的山就叫做白马坡。就连黄河边的渡口也叫做白马渡，与黄河北岸的黎阳渡遥遥相望。
从此这个地方的名声越来越大，人口也越聚越多，秦朝统一六国以后这里已近万人，官府就在这里筑起白马城设白马郡。到了三国时期还曾建立白马国，魏国曹操的儿子在这里任国王，这里逐步发展成政治经济文化中心，甚是繁华。
沧海桑田，日月更迭，随着时间的推移，这一代发生了巨大的变化。山被夷为平地，黄河多次泛滥吞噬了无数人的性命。繁华的白马城被深深的埋在了黄沙下面，如今黄河已向东移动了一百余里。昔日的白马渡、黎阳渡也都不复存在，一切都成为历史被人们淡忘。只有这马不欺母，白马撞墙的故事一直流传在百姓的口中，为了纪念这匹白马，人们又在白马城的遗址上建起了村子，依然叫做白马墙村，也就是现在的滑县留固镇白马墙村。