桃花源村原名冷家壩村，因村設(shè)冷家壩而得名。解放前，此地為農(nóng)村集市，由于人煙稀少，趕集的人渺無幾人，顯得很冷清，只有一個賣小吃的，于是人們稱為冷家壩。2008年11月經(jīng)縣人民政府批準(zhǔn)更名為桃花源村。

村駐地寨安壩，此處地勢低洼，地處小溪旁，但從未被水淹，甚為安全，故名寨安壩。民國1年稱烏羅鄉(xiāng)第二保，1952年為寨安鄉(xiāng)，1958年為寨安大隊，1985年改為村，以所在居民點名稱（寨安壩）得名的群眾自治組織。