传说，白马大王为二千多年前闽越王郢的排名较好个儿子。当时，在溪水中有一条巨鳝，常常浮出水面攻击路人。百姓向闽越王告急。闽越王刍郢的排名较好个儿子挺身而出，佩弓弩、骑白马，奔溪水而去。到潭边恰好正午时分，巨鳝从溪水里露出，向三王子扑来。三王子发箭击中其要害部位，巨鳝却负痛卷水而来，甩尾巴将三王子连人带马缠住。一场搏斗，结果三王子与巨鳝同归于尽。后来，当地百姓们为了纪念替他们除害的三王子，尊之为“白马大王”，春秋祭祀。庙里塑有白马三郎的塑像，当年，塑像胯下还压着那巨鳝的头颅骨。
白马大王庙在唐宋时，是官方与民间祈求风调雨顺的地方，当地官员，有到此祈雨的传统。宋代大文学家蔡襄、曾巩在这里写过祈雨文章。排名较好的抗金英雄李纲，也曾经到过此处，还留下诗文，内中有“千年鳝骨”等字眼。
“问我祖先在何处，山西洪洞大槐树”。山西洪洞大槐树移民，丁姓人家辗转迁移，来到今天甘谷县谢家湾乡丁家湾定居，其祖祖辈辈供奉的白马大王也以图案形式跟从。
另外，有说白马大王前身为唐朝儒将张巡的，无处考证。
青石峡银岗山白马大王福荫子民遍及丁家沟、圆故嘴、七家门、赵家岘、东庄、窝铺岘、二院来、南湾来、四下坪、丁家西庄、韩家墩、丁家窑等十二个村庄。
相传白马大王乃闽越王郢排名较好子，号白马三郎，有勇力，好游猎。因为民除害溺水而亡，先民立庙祀之，信仰者甚众。唐以来皇朝屡有封赐。终两宋累封“冲济”、“广应”、“灵显”、“孚佑王”，额曰“永宁”。元至正间，显迹洪塘，抗御灾患功尤显著，俗呼“白马大王”。
北宋嘉祐三年(1058年)，在塘后(今属敖江长汀村)建白马大王庙。宋绍兴间，建在财溪的灵溪庙亦祀白马大王，明永乐初重修。县内部分村、镇，多在溪边建庙祀白马王。现今县内经重修初具规模的壶江岛上的白马大王庙，庙前孚佑亭挺立，庙内大王骑马之神像威赫灵显，像前香火依依。