隋朝大业年间，裴谌、王敬伯、梁芳三人志同道合，约定一起脱离俗世，到白鹿山上修仙得到，认为长身不老、羽化成仙这些只要勤苦修炼就可以达到。好友三人相依为命，互相扶持，苦苦修炼，一晃十几年过去。然而并没有什么成就，这时梁芳去世。王敬伯对裴谌说，我们抛弃下世间丝竹之乐、人间美色、大鱼大肉，不住宫殿偏到这个茅草屋，放下享乐在这里忍受寂寞，不就是为了可以羽化成仙，驾鹤游戏仙界吗，即使成不了仙，能长命百岁也可以啊。但是如今既没有成仙，也无法长生，辛勤在野外耕耘又是何苦呢？
现今我要放下无谓的挣扎，下山去游玩京城，听歌看美女跳舞，过足瘾之后去追求飞黄腾达，在人间立下一番事业功名。既然不能成仙，享受仙界的瑶池水，龙凤相伴，和众仙人游玩仙山，那还不如荣华富贵，一身罗莎，当一个众人敬仰的士大夫呢！，怎么样，兄弟你和我一起走不。裴谌说，我已经是看清红尘，人间疾苦的人了，我不会再次踏入纷乱的世间。裴谌一再挽留，王敬伯还是下山了，时年正是唐贞观年间，以他的旧籍调任左武卫骑曹参军，大将军赵朏将女儿嫁给了他，之后升迁到大理延评，奉旨出使淮南，行船路过高邮。
在途中，遇到江上大风，掌舵不敢行船，这时，看到一艘渔船穿了过去，船上是个老人，戴着斗笠披蓑衣，像风一样疾驰而过，王敬伯十分不开心，我出使此地，威名在外，怎么有人不把我放在眼里，超我的船。便使近一看，原来是山中好友裴谌，随即将他请到船中，握着他的手说，裴兄躲在这深山里，不去立功名成家业，在这无人问津之地，古人叹息夜晚太长要秉烛夜游，况且你还是个年轻人，却连白天的时间都一并荒废了，弟弟我下山数年，现在已经是廷尉评事了，言语之间颇为得意。因为淮南有冤案，所以朝廷派人出使调查，皇帝任命了我，所以便乘船来到这里。虽然说不上飞黄腾达，但是比起山中俗人，自觉比他们强一点。裴兄在这山中吃苦，竟然不觉得日子难过，真是奇怪，你有什么想要的，我一定满足你。
裴谌说道：我乃是一个粗人，心向田野云鹤，不在意这些名利，各有追求，王兄不必向我炫耀。我在青园桥东数里外有一个桃园，园的北边有一个门庭，就是我的宅院。如果王兄有空闲了，可以去找我共叙往事。说罢就走了。
王敬伯在广陵十几天了，突然想到那日裴谌的话，就出门去找他。到了之后果然是有一个庭院，一问是裴宅。管家带他进去，一开始很是荒凉，慢慢的看到花木秀丽、楼阁重复，不像人间景色。花草葱翠，景色醉人，一阵清风袭来，车马劳顿便不复存在，浑身轻松。到了院子里，主人出来相见，王敬伯一看此人衣冠整洁，容貌奇伟。上前行礼方知是裴谌。裴谌宽慰王敬伯说你在世为官，忧愁苦闷，又经常吃些荤腥之物，很容易就会劳累。两人坐在中堂，一众美女响乐跳舞，均是世间绝色。堂中珠宝异珍装饰屏帐窗户，豪华艳丽，美味佳肴均不曾见闻，想必不是人间之物。
裴谌叫来管家说：王评事是我以前的山中修道好友，中途弃道离我而去，下山去当了官，现在已经完全被世俗渗透，只能用歌妓才能取乐他，普通歌妓已经无法满足他了，要士大夫的妻妾歌妓才能博王评事一笑。管家点头而去。
不一会儿，管家引来歌妓参拜，王敬伯抬头一看，竟是自己的娇妻赵氏，两人相视骇然。但是也没有挑明。赵氏便弹奏玳瑁古筝，但是跟不少节拍，裴谌就让其他人按着赵氏的古筝来奏曲。欢奏到了天明，裴谌送走了赵氏并说，是夫人的命里让我们有了这一个相会，以后恐怕没有机会了。裴谌多留了王敬伯一天。裴谌和王敬伯说有空可以来找他共享歌乐，王敬伯回京之前再去裴宅，可是那里哪有什么宅院，只有片荒凉的草地，不见人影，王敬伯十分惆怅的走了回去，心中感慨万千。
