一日行到耶溪，因愛溪水澄清，就坐在溪邊石上歇腳。建文忽遠遠望見隔溪沙地上，坐著一個樵夫，用手在淺沙上划來划去，就像寫字一般。因指與他三人道：“你們看隔溪這個樵子的模樣，好似廖平。”三人看了說道：“正是他。”程濟因用手遠招道：“司馬老樵，文大師在此！”
那樵子聽見，慌忙從溪旁小橋上轉了過來，看見大師，便哭拜道：“弟子只道今生不能見師，不料今日這裡相逢。”建文扶他起來，亦大慟道：“我前日避難逃去，常恐遺禍於你。後馮漼來報知汝家無恙，我心才放下，但不知你何為逃遁至此？”廖平道：“知府捉師不著，明知是我放走，奈何我不得，卻暗暗申文，叫撫按起我做官，便好追求。我聞知此信，所以走了。”建文道：“我前過襄陽，打聽得知府已去任，汝今回去，或亦不妨。”廖平道：“弟子行後，家人已報府縣，死於外矣，今歸豈非誑君？”建文道：“汝若不歸，則流離之苦，皆我累你！”廖平道：“弟子之苦，弟子所甘，師不足念。但師東流西離，弟子念及，未免傷心耳！欲留師歸宿，而茅屋毫無供給，奈何奈何！”建文聽了，愈覺慘然，遂相持而行，直送三十里，方痛哭分別而去。建文師弟四人，向蜀中而來。
到了永樂三年，要回雲南，行至重慶府，覺身子有些不爽，要尋個庵院，暫住幾日，養養精神，方好再行。因四下訪問，有人指點道：“此處並無大寺院，惟有向西二里，有一村莊，叫做善慶里。里中有個隱土，姓杜名景賢，最肯在佛事上做工夫。曾蓋一個庵兒，請一位雪庵師父在內居住。你們去投他，定然相留。”建文師弟聽了，就尋善慶里庵里來。
走到庵中，叫聲：“雪庵。”雪庵聽見，因走出來，彼此相見，各各又驚又喜。你道為何？原來這雪庵和尚是建文帝的朝臣，叫做吳成學，自遭建文之難，便棄官削髮為憎，自稱“雪庵”，恐近處有人知覺，遂遁至四川重慶府住下。訪知善慶里杜景賢為人甚有道氣，因往來之。杜景賢一見，知非常人，因下榻相留，朝夕談論，十分相契。遂造一間靜室，與雪庵居住。
當日出來，與建文相見，各各認得，驚喜交集，建文道：“原來雪庵就是你！”雪庵道：“弟子哪裡不訪師，並無消息。誰知今日這裡相逢！”遂以弟子禮拜見了，又與三人見禮，就請師到房中，各訴變後行藏，悲一回，感一回，又嘆息一回。
建文住了幾日，因見庵門無匾額，又見案有觀音經，因寫了“觀音庵”三個大字，懸於觀前。杜景賢聞知庵中又到了高僧，便時時來致殷勤。建艾因住得安妥，便住了一年。直到永樂四年三月，方才別了雪庵，又往雲南。