傳說壽佛小時候是一個調皮的頑童。從小就受母親指點做些放牛割草的事。當年周源山建有兩座大庵，終年香火不斷，木魚、念經聲不絕。壽佛每天出了家門就跑到寺廟來看和尚敲木魚念經。開始是好奇，后來漸漸地懂得些佛門道理，爾后并精通了經文。和尚見他心向佛門，有立志成佛之意，并教他修煉，告知他修煉五百年即可得道升天。從此，他在周源山石壁下面壁修道，由于他得仙道，幾年后就成了仙人。

一天，他母親把他從庵上叫回來，要他去割草喂魚，壽佛便利用仙術，把魚趕到山上各自吃草去了。其母得知后大吃一驚：從來魚兒離不開水，哪有魚兒上山吃草的？莫非他成了仙人？從此母親不再讓他喂魚，而要他去放牛。壽佛自從接了放牛的活，天天把牛趕到周源山后的天鵝頸讓它們吃草，他怕牛走遠了，就用放牛棍在地上劃一圈，把牛劃在圈內。牛幾天幾夜在園內轉游，從不離圈外半步。壽佛把牛圈了，就在坡上睡覺。有時候，螞蟻爬到他身上，咬得他難受難忍，他并將螞蟻捉住，往對面山上一丟，到對面去，莫打擾我。從此，天鵝頸山場螞蟻絕跡。據說那一帶至今尚未見到過螞蟻的行蹤。

壽佛長期在天鵝頸放牛，人們干脆把天鵝頸改叫牛嶺。這牛嶺山高坡陡，水源奇缺。有一天，壽佛口渴難忍，便在山溝處用看牛棍在石壁下戳了一棍，頓時一眼清澈山泉汨汨流出，至今源流不斷。據說，喝了這泉水后能消災祛病。若有腹痛者，服后立愈。有趣的是，你若要用嘴直接吸吮泉水，非得按當時壽佛的姿式雙膝跪下，雙手撐開不可。否則，你只能望泉興嘆！且說壽佛成仙后，很想在當地做點好事。他見七道壟（今寶源煤礦）川流水急，想架一座橋，方便行人。他早出晚歸，從洞庭湖邊趕來了不少山石。一天，他把架橋的事悄悄告訴母親，母親聽后既高興又難過，高興的是壽佛能為當地做好事，難過的是怕累壞了兒子。動工那天，她要壽佛早點回來，壽佛答應她雞啼即歸。眼看入夜已久，月暗星稀，夜已深了，還不見壽佛回來。母親亦不曉得他有仙術道法，見他一個人架橋，生怕他累死了，未等雞啼，并學雞叫，引得山村頓時雞鳴四起。壽佛這時才剛建好橋墩，聽到雞啼，立即回歸，致使橋未架好，留下橋墩至今可見。若有人從寶源去碑記乘龍橋，即可見到。

壽佛離開周源山后，他到處流浪，每到一處都遭人欺負。盡管他自我介紹是仙人壽佛，卻無人收留他。后來他流浪到郴州城，沿著郴州的低矮街鋪叫喊了三天三晚：我是仙人壽佛，郴州人留不留我，郴州不留到全州！有人本想收留，一見他是一個衣著襤褸的癩子都不愿留下他。壽佛見無人收留，決定前往廣西。臨行時，有人問他：你到什么時候再回來？壽佛說：燒完天柴燒地柴，燒完地柴再回來。這天柴指的是柴草樹木，這地柴指的是煤炭，他要等到柴草煤炭燒完才回來。

壽佛就這樣走了，據說他的身軀至今還在廣西全州寺內。