位于寿阳西北部的桃子山是一座俊秀的山峰，这里气候湿润，景色宜人，因早年盛产鲜桃而得名。
据老人讲，很久以前，桃子山满山遍野种满了桃树，满山的桃花芬芳四溢，引来无数的蝴蝶翩翩起舞，满枝的鲜桃个大肉厚，香甜美味，引得无数仙人垂涎欲滴。传说这里的桃树三千年一开花，五千年一结果，是专供王母娘娘蟠桃会招待众神仙的。这话有一定可信度，因为出生于寿阳的南极仙翁老寿星，得道成仙之前曾在桃子山上养心修炼，据说还与看管鲜桃的桃花仙子有过一段情缘。
寿星在娘肚子里怀了九九八十一年，出生后已是一个半大不小的小老头，矮小的身材，突出的大脑门，看上去显得有些其貌不扬。但他却有一颗快乐向善的心，而且有着一种事不办成决不罢休的决心。为了完成填堵黄岭壑的愿望，使寿阳的老百姓都过上风调雨顺、丰衣足食的幸福生活，寿星访遍了全国的名山大川，拜师学艺，寻求解决的办法。在潜心修炼的数百年中，他的足迹踏遍了县内的每一个角落，鹿泉山、神蝠山、长寿山、双凤山等处都留下了他的踪迹，而桃子山更是他乐意去的地方。在红绿相映的桃林里，他静静地修习功法，累了就与到访的客人下一盘棋消闲取乐，饿了就摘一个桃子吮吸充饥，而他乐于助人、行善除恶的行为更是得到了看守桃林的桃花仙子的赞赏和爱慕。
这一年，又到了桃子成熟的季节，满枝的鲜桃泛着红光，表面一层薄薄的绒毛，闪射着五彩的金光，山上山下充满了诱人的芳香。鲜桃的香味不仅醉倒了吃到它的仙客，也招来了凶煞般的恶徒。
一天晚上，正值月光朦胧的时刻，桃花仙子在林中巡视，忽见从一棵树上蹿下了四个黑影，她心中一惊，知是遇到了偷桃的贼寇，于是大喊一声就冲了过去。那伙盗贼看到事情败露，不但不跑，反而挥着兵刃迎了上来，一场恶战就展开了。可是孱弱的桃花仙子哪是他们的对手，几个回合下来，就被打得只有招架之功，没有还手之力。眼看这伙贼人就要得逞，说时迟，那时快，只见一道红光闪过，正在林中修炼的寿星闻声赶了过来，手中的木杖四处一点，几个黑影就应声倒地了，随即冒出一股黑烟不见了踪影。寿星细查现场，闻到一股骚臭味，方知是野狐岭的小妖来此作怪，这边的桃花仙子早已软弱无力，在寿星的搀扶下方才回到屋中休息。
从此以后，桃花仙子对寿星更加敬慕，并对他百般照顾，千般温柔。从小孤单一人的寿星得到桃花仙子的细心照顾，感到万般温暖，就与桃花仙子双双坠入了爱河，山上山下都留下了他们亲密无间的俪影。这事被早已暗恋桃花仙子的一个天神发现，他嫉妒心起，就把此事告到了天庭。王母娘娘大怒，她决不允许桃花仙子与凡人私自恋爱。于是，一道御旨把桃花仙子打入了天牢，桃子山也在一夜之间被烧成了灰烬。看着光秃秃的桃子山，寿星悲痛欲绝，他觉得是自己害了桃花仙子，是天庭拆散了他们的爱情，决定去找王母娘娘理论，问她为何要这样绝情？
可登天的路在哪里呢？正当寿星萎靡不振时，路过此地的八仙有意要点化他成仙，何仙姑、铁拐李等人你一言我一语，劝说寿星与他们一道同行，苦修正果，得到点化的寿星于是打消了上天找王母娘娘的念头，潜心在山中修炼。多年以后，寿星在鹿泉山顶修炼成仙，被王母娘娘封为专管人间福寿的南极仙翁，他与桃花仙子的一段佳话也就永远留在了民间。所谓人走“桃花运”的说法也源自于此。
