传说寿佛小时候是一个调皮的顽童。从小就受母亲指点做些放牛割草的事。当年周源山建有两座大庵，终年香火不断，木鱼、念经声不绝。寿佛每天出了家门就跑到寺庙来看和尚敲木鱼念经。开始是好奇，后来渐渐地懂得些佛门道理，尔后并精通了经文。和尚见他心向佛门，有立志成佛之意，并教他修炼，告知他修炼五百年即可得道升天。从此，他在周源山石壁下面壁修道，由于他得仙道，几年后就成了仙人。
一天，他母亲把他从庵上叫回来，要他去割草喂鱼，寿佛便利用仙术，把鱼赶到山上各自吃草去了。其母得知后大吃一惊：从来鱼儿离不开水，哪有鱼儿上山吃草的？莫非他成了仙人？从此母亲不再让他喂鱼，而要他去放牛。寿佛自从接了放牛的活，天天把牛赶到周源山后的天鹅颈让它们吃草，他怕牛走远了，就用放牛棍在地上划一圈，把牛划在圈内。牛几天几夜在园内转游，从不离圈外半步。寿佛把牛圈了，就在坡上睡觉。有时候，蚂蚁爬到他身上，咬得他难受难忍，他并将蚂蚁捉住，往对面山上一丢，到对面去，莫打扰我。从此，天鹅颈山场蚂蚁绝迹。据说那一带至今尚未见到过蚂蚁的行踪。
寿佛长期在天鹅颈放牛，人们干脆把天鹅颈改叫牛岭。这牛岭山高坡陡，水源奇缺。有一天，寿佛口渴难忍，便在山沟处用看牛棍在石壁下戳了一棍，顿时一眼清澈山泉汨汨流出，至今源流不断。据说，喝了这泉水后能消灾祛病。若有腹痛者，服后立愈。有趣的是，你若要用嘴直接吸吮泉水，非得按当时寿佛的姿式双膝跪下，双手撑开不可。否则，你只能望泉兴叹！且说寿佛成仙后，很想在当地做点好事。他见七道垄（今宝源煤矿）川流水急，想架一座桥，方便行人。他早出晚归，从洞庭湖边赶来了不少山石。一天，他把架桥的事悄悄告诉母亲，母亲听后既高兴又难过，高兴的是寿佛能为当地做好事，难过的是怕累坏了儿子。动工那天，她要寿佛早点回来，寿佛答应她鸡啼即归。眼看入夜已久，月暗星稀，夜已深了，还不见寿佛回来。母亲亦不晓得他有仙术道法，见他一个人架桥，生怕他累死了，未等鸡啼，并学鸡叫，引得山村顿时鸡鸣四起。寿佛这时才刚建好桥墩，听到鸡啼，立即回归，致使桥未架好，留下桥墩至今可见。若有人从宝源去碑记乘龙桥，即可见到。
寿佛离开周源山后，他到处流浪，每到一处都遭人欺负。尽管他自我介绍是仙人寿佛，却无人收留他。后来他流浪到郴州城，沿着郴州的低矮街铺叫喊了三天三晚：我是仙人寿佛，郴州人留不留我，郴州不留到全州！有人本想收留，一见他是一个衣着褴褛的癞子都不愿留下他。寿佛见无人收留，决定前往广西。临行时，有人问他：你到什么时候再回来？寿佛说：烧完天柴烧地柴，烧完地柴再回来。这天柴指的是柴草树木，这地柴指的是煤炭，他要等到柴草煤炭烧完才回来。
寿佛就这样走了，据说他的身躯至今还在广西全州寺内。