汪直之所以答应胡宗宪，率众归附朝廷，其实有一个重要原因：是他在日本九州站不住脚了。当时日本九州的强藩岛津贵久崛起，开始平定南九州，已经占领大隅、日向两国的大部分土地。汪直根据地不断被岛津贵久蚕食。身为唐人的汪直在九州的生存空间越来越小了。加上连年对抗明朝，兵员和财物的来源日益减少，就连汪直占据的五岛，当地的日本人连年跟随汪直作战，多有死伤，有的甚至全岛没有一个活着回来的，死者家属十分怨恨汪直。
既然大明朝廷对汪直抛出橄榄枝，加上他本人对故土魂牵梦绕。汪直爽快地答应与胡宗宪谈判，并派他的心腹叶宗满、王汝贤和萧显先行回到舟山群岛，着手准备谈判的前期工作。作为一个海商龙头老大，家大业大，回中土来得有个地方落脚。叶宗满、王汝贤他们按汪直的授意，在舟山岑港买下一片地皮，兴建桃源居。
叶宗满、王汝贤他们把岑港一个附从小岛易名为“桃源岛”，在小岛上面兴建桃源居。仿效晋风陶氏之说，号称世外桃源。并在桃源岛大兴土木打造出一个诗情画意的桃源山庄。
这桃源岛方圆十多平方公里，虽然只是一个弹丸之地，汪直先行派遣了八百多个海盗回国，驻扎在岛上，并对这个小岛投入大量金钱进行开发利用。桃源岛作为他经营的少数几个贸易港口之一，汪直下确实了一番心血经营这个贸易基地。桃源岛同时也是汪直沟通中西的远东商业交易中心和货物中转站，欧洲、日本、西洋诸国，甚至是西亚的阿拉伯酋长们都不辞劳苦，万里迢迢，来到这里跟汪直为代表的中土地主豪强洽谈生意，贸易往来。
桃源居依照明朝县城的格局进行修建，经营一载有余，已经略具规模。房屋千余，人口数万。这里日照充足，一年四季阳光普照，是一个理想的观看日出日落风景的旅游胜地。叶宗满、王汝贤他们喜欢这里阳光灿烂，认为这个地方风水极好，可以得到上天的眷顾，故城立之日，又把桃源居易名天眷城。天眷城墙厚楼高，固若金汤。假如明朝官府凋兵遣将来攻打天眷城，难免损兵折将，铩羽而归。
桃源山庄是汪直的商会馆，集合酒楼、旅业、搏彩、陪／侍等多项功能业务，吃住玩一条龙服务。不仅中土海商喜欢在这里停留办事，各国的商人也喜欢到这里寻欢作乐。
汪直自离开舟山烈港到日本九州后，也没忘记跟中土沿海地区的地主豪强做贸易生意。但沿海地区的地主豪强大多数都是老奸巨滑的奸／商，他们好象吃定汪直不敢回国收取货款一样，很多人地主豪强欠下汪直的账，要赖不还。其中松江一个叫姚发的财主欠账最多，欠汪直几十万货款不还。在催促多次无果后，汪直不得不使出的杀手锏，启动“热血天诛团”向奸商们讨债。