与大汕交谊不终者，不独屈翁山、潘稼堂，尚有王渔洋。《中华艺林丛论》收不署著者姓名文一篇，题为《大汕和尚与王渔洋》：

王渔洋奉命到广州来祭南海神，到广州后，常与梁药亭、陈独漉游长寿寺。这时长寿寺在大汕的经营下，已成为广州名胜之区，具池泊园林宫室之胜。渔洋在《广州游览小志》里，曾大赞大汕“营造有巧思”，且手写楹联赠大汕，苏文曰：“红楼映海三更日，石涧通江两度朝。”

时适朱竹坨、徐菊庄、潘次耕诸人，先后到粤，渔洋不止一次在长寿寺设宴，为文酒之会。渔洋与大汕的感情，亦于这时候最为亲密。渔洋在游览小志中，也屡次提及大汕，并称之为“能诗善画”，颇致推许。

可是，渔洋离粤北归后，突然对大汕憎恶起来了。他在《香祖笔记》卷九中，再提到大汕时，竟是这样写着：“近吴湖州园次游广州，有僧大汕者，日伺候督抚将军诸监司之门，一日向吴自道酬应杂之苦，吴笑应之曰：‘何不出了家?’座上客皆大噱。”

“吴湖州园次”者吴绮，字次，顺治年间奉诏撰《椒山乐府》，即以杨继盛（椒山）之官官之，由中书擢为兵部武选司员外郎，时人所谓“曲子得官”，为唐宋以来所未有。康熙五年出为湖州府知府，因风雅好事而失官，从此游食四方，殁于康熙三十三年。所著《林蕙堂全集》二十六卷，由大汕出资刊行。渔洋举吴绮的幽默语相调侃，似稍欠忠厚。大汕不以吴绮相戏为忤，于其身后，为刊遗集，则其人亦自有可爱之处，转觉其人品比潘稼堂犹高一筹。邓石如为大汕辩护云：其诗清丽，大均以为剽窃。借诗乞句自昔有之，眼前景物，遣辞命意，暗与古合者，亦常有之。大汕固亦列举大均诗之同于太白者矣。如以偷论，则自非阿罗汉，谁能免于偷乎?惟集中河泽行、地震行、剿“贼”行诸篇，悲愤乃同于儒生何也?《离六堂近稿》一卷刻于壬午，老髦及之，不事别择，精粗