他到了建业，来到延贤寺法意道人那里。法意让他在另一个房子里住着。时间不久，他去延步江，用木杯在江边浮水，有人请求杯渡带上自己，杯渡不肯答应，他自己将两足抱入怀里，顾盼四周，逍遥地唱着小曲，木杯随波逐流，往广陵（扬州）去了。
来到广陵，遇到一位姓李的人家正在办持斋饭，这家和来吃斋的人都不认识杯渡，杯渡直接进入了大堂，坐上了斋席。众人看他行貌简陋，举止不修边幅，都不尊重他。主人见他把芦子放得有些碍事，想把它移到墙边。可是，许多人竟没有移得动。斋饭过后，杯渡却轻飘飘地拿着它，挂上锡仗走了。临走时，杯渡笑着，莫名其目的说：“四天王李家。”当时有一个不更事的孩子，看见他芦子里有四个小孩，身长数寸，面貌端正，衣裳鲜洁。说给众人听了，于是，众人跟在杯渡后面追寻，却追不见了。以后的三天里，却总是朦胧地看见杯渡坐在房子西边的树下。于是，李某向树下跪拜，请杯渡到他家里来，他要永远供养着。于是，杯渡来到李家。
杯渡吃喝，不忌荤腥，与普通百姓没有区别，还常常表现出一些神异行为，在当地影响很大。沛国衮州刺史刘兴伯派人请他，他背着芦子去了。刘兴伯听说他的芦子神奇得很，想看个究竟。可是十多个人都没拿得动。他亲自到芦子跟前视看，却只见是一个破败的芦子，没有任何神奇之处。从刘兴伯处回到李家后的第三十日，吃过早饭时，杯渡对李信士说，请他赶制一件新袈裟。可是，到了中午袈裟仍然没有做成。杯渡便从他家走了出去。到晚了也没回来，这时候李信士的家里和房前屋后，都有异常的香气。李信士觉得奇怪，到处寻找杯渡。一直寻至房后北边一处岩石上，见杯渡睡在一件破旧的袈裟上，头向着前（大约是南方）脚在后（可能是北方）的已经死去了。然而他的身边，都有美丽的莲花围护着。这些莲花鲜丽极香，只一天功夫就枯萎了。于是，李信士和他的邻居便将杯渡殡葬了。可是，没过几天，却有人看见他背着子往彭城（现在的徐州）去了。
既到彭城，遇到一个叫黄欣的普通百姓。黄欣深信佛法，见了杯渡便拜，并且请回家里。黄欣家非常贫穷，只有麦饭可吃，而杯渡怡然高兴地吃着。这样的过了半年以后，杯渡向黄欣说：“你给我准备三十六只芦子，我需要用。”黄欣说：“我这里只有十多个，我家贫穷，无钱去买，可能办不齐。”杯渡说：“你在家里寻一寻，你的家里应该是有的。”于是，黄欣即在家中寻觅，果然得芦子三十六只，只是多是破败的了。他把芦子放在堂前，才一转身，杯渡说：“你再去看看。”黄欣再看时，这些芦子都变成完好的了。于是，杯渡把这些芦子放在一起密封起来，而后叫黄欣开启。黄欣打开一看，盛芦子的器皿里，尽是钱币，足有好几百万之数。知道的人都说这是杯渡用的分身他土的法术，得到了钱财。杯渡把这些钱财全部送给了黄欣，黄欣受了这些钱财后，便用这些钱财为杯渡的佛事做了功德。一年以后，杯渡辞别黄欣出走，黄欣为之备办了粮食，准备给他带着。第二天早上，黄欣见粮食都还全在，而杯渡却不知道上哪里去了。
一个多月后，杯渡再到了京城。当时潮沟有个人叫朱文殊，深信佛教。杯渡常常到他那里去。这一天，朱文殊对杯渡说：“求您度我，让我脱去凡身成为僧侣啊。”杯渡不答。朱文殊大喜，说：“佛法默然，即为允许哎！”
有一天，杯渡出游到了吴郡（苏州），遇到一个钓鱼的人，便向他讨鱼。钓鱼的人拿着一条鱼喂给他吃，意思是看你这和尚究竟怎么吃鱼。杯渡接着鱼，放手中把玩，又把它放进水里。又走了一程，他看见一个用网捕鱼的人。杯渡又向这位捕鱼的人讨鱼。这位捕鱼的人不仅不给，还不干不净地骂他是荤和尚。杯渡便在路上捻起两粒石子扔进水里。一会儿，两头水牛在水中打起架来，把鱼网打了个七开八裂。鱼网碎了后，捕鱼的人再看水中，根本就没有水牛，再看路上，也没了杯渡的影子。
当时有个外国道人名叫佉吒，寄住在京城长干寺里。有一天来了个客僧，名叫僧悟，与佉吒同住一个房间。夜里，僧悟见佉吒拿着寺里的刹棒，便上了云天，一会儿功夫又下来了。僧悟看得清清楚楚，可是不敢做声，然而，对佉吒却敬爱有加。当时有一个叫张奴的人，不知道来自什么地方。他终日不吃什么东西，冬夏四季只穿一件单布衣，却长得肥胖精神。佉吒走在路上看见了他，对他欣然而笑。说道：“我在东方见到了蔡豚，在南方听说了马生，在北方遇到了王年，今天就要会见杯渡，你和我一起见他吧。”张奴指着槐树唱道：“蒙蒙大像内，照耀实显彰。何事迷昏子，纵惑自招殃。乐所人少往，苦道若翻囊。不有松柏操，何用似风霜出昊仓。澄灵无色外，应见有缘乡。岁曜毗汉后，辰丽辅殷王。伊余非二仙，晦迹于九方。亦见流俗子，触烟致酸伤。略谣观有念，宁曰尽衿章。”佉吒说：“以前看先生禅思悠远，似在云雾之中，一个打坐，就是百年，大慈大悲，甚至悲悯枯骨。”亦题词唱颂道：“悠悠世事，或兹损益。使欲尘神，横生悦怿。惟此哲人，渊觉先见。思形浮沫