桃木能辟邪是来自于传说。详情如下：

　传说一

　在中国古代神话中，相传有一个鬼域的世界，当中有座山，山上有一棵覆盖三千里的大桃树，树梢上有一只金鸡。每当清晨金鸡长鸣的时候，夜晚出去游荡的鬼魂必赶回鬼域。鬼域的大门坐落在桃树的东北，门边站着两个神人，名叫神荼、郁垒，他们各手持桃枝，专司捉妖拿邪。

　如果鬼魂在夜间干了伤天害理的事情，神荼、郁垒就会立即发现并将它捉住，用芒苇做的绳子把它捆起来，送去喂虎。因而天下的鬼都畏惧神荼、郁垒。于是民间就用桃木刻成他们的模样，放在自家门口，以避邪防害。后来，人们干脆在桃木板上刻上神荼、郁垒的名字，认为这样做同样可以镇邪去恶。这种桃木板后来就被叫做“桃符”，也被认为是年画艺术的发端之一。

　传说二

　古书记载，后羿是被桃木棒击杀，死后被封为宗布神，这种神经常在一颗桃树下，牵着一只老虎，每个鬼都要前去检验，宗布神一闻，如果是恶鬼的话，就会被虎吃掉，有一说是和夸父有关，相传夸父追日饥渴而死，临死前，将手中的杖一抛，化为一片邓林，也就是桃林，是为了让后世追日得人能够吃到甘甜可口的桃子，原因是夸父跟太阳有着紧密的联系，所以鬼会害怕桃木。

　出自上古时期，说桃木是五木之精，能压伏邪气，插桃枝于户，童子入不畏，而鬼畏之，所以又叫神仙木、英雄木。