对峙山上有一圣岩寺，建于海拔482米处的一个天然石洞之内，至今已有400多年的历史了。相传当年安期生学道炼丹于此洞之内。据说书中的许多景点均可在桃花岛上找到。
桃花岛岗峦密布，山势起伏，林木葱翠，风光旖旎，有“海岛植物园”之称。树木花卉资源十分丰富，素有"海上植物园"之美名。树木有73种、356个品种，其中属于国家自然保护范围的珍稀树种达数十种，如毛红椿、普陀樟、全绿叶冬青等，还有水仙、杜鹃、黄杨、兰花等名贵花卉。桃花岛上的水仙与兰花，是岛上的"土特产"，尤其是水仙花，名列中国三大水仙之一，远销香港、日本等国家和地区。
全岛由塔湾金沙、安期峰、大佛岩、桃花港、鹁鸪门、乌石砾滩六大景区组成；有龙女峰、东海明珠、白雀寺、圣岩寺、含羞观音、仙人桥、黄药师居室、清音洞等60多处景点。桃花岛还以其石奇而吸引游客。有的巨石如同狮子下山，有的又像海豹顶球，有的还似仙女拜佛。对峙山山顶屹立的“大佛头”奇石群，如巨形雕塑，云雾缭绕，巍峨壮观。尤其在山顶之上，有一块大石块，形如佛头，不论从远至百里，还是从近在咫尺的地方，从任何角度观看，其大小始终如一。传说天上有位神仙下凡巡视，路过东海，为桃花岛的旖旎景色所迷恋，不愿返回天府，化身为石，长住于此。
如世外桃源的桃花岛，与金庸武侠小说《射雕英雄传》中的桃花岛正好吻合，现正在规划兴建“金庸武侠文化村”。金庸先生欣闻题词“碧海金沙桃花岛”。著名导演谢晋拍摄电影《鸦片战争》时，在桃花岛上搭建了外景地定海古城，成为新的旅游景点。
游人若登临远眺,近山远海，诗情画意，尽收眼底，不禁叹为如入仙境。
全国有多个桃花岛：
如：浙江省舟山市普陀区桃花岛、山东省日照市东港区桃花岛、江西省吉水县桃花岛、山东省沂源县桃花岛、辽宁省兴城桃花岛、湖北省襄阳市桃花岛、湖北省荆州市桃花岛、浙江省乐清市乐清湾桃花岛、华中农业大学桃花岛、重庆市永川区卫星湖桃花岛、广西崇左桃花岛、广东省肇庆市仙女湖桃花岛、安徽省临泉县桃花岛。
其中最有名的是舟山市普陀区桃花岛。
地处浙江省舟山群岛东南部，为舟山群岛第七大岛。桃花岛北距舟山市普陀区政府所在地沈家门7.8海里，与“海天佛国”普陀山、“海山雁荡”朱家尖隔港相望，西与宁波市隔海相距12公里，南临桃花港国际深水航道，东濒著名的东海渔场。全岛面积为41.7平方公里，总人口1.15万人。
桃花岛古称“白云山”，秦时安期生抗旨南逃至桃花岛隐居，修道炼丹，一日醉墨洒于山石，成桃花纹，斑斑点点，故石称“桃花石”，山称“桃花山”，岛称“桃花岛”。桃花岛从宋至明洪武十九年属昌国县安期乡，清康熙初年建安期乡桃花庄，光绪年间为定海安期乡，民国时改称桃花乡，后几经建区并乡，撤区并乡，直至今日的桃花镇。
传说金庸先生的名著《射雕英雄传》《神雕侠侣》中的“东邪”黄药师就住在这个岛上。岛上的风景旅游资源丰富多样，门类齐全，品位较高，集海、山、石、礁、岩、洞、寺、庙、庵、花、林、鸟、军事遗迹、历史纪念地、摩崖石刻、神话传说于一体，自然景观与人文景观并于1993年被批准为省级风景名胜区。
