当晚众人替司徒伯雷安葬后，收拾下山。会武功的男子随着韦小宝前赴扬州。老弱妇孺则到保定府择地安居，该处有天地会青木堂的分舵，自有人妥为照应。
韦小宝对张勇等言道，王屋山匪徒眼见大军围住，情知难以脱逃，经一番开导，大家一起归降。他已予以招安，收编为官兵。张勇等齐向他庆贺，说道都统兵不血刃，平定了王屋山的悍匪，立下大功。韦小宝道：“这是四位将军之功，若不是你们团团围住，众匪插翅难飞，他们也决不肯投降。待兄弟申报朝廷，各有升赏。”四将大喜，知兵部尚书明珠对他竭力奉承，只要是韦都统奏报的功劳，兵部一定从优叙议。
韦小宝初时担心曾柔跟随王屋派妇孺，前赴保定府安居，如指定要她同去扬州，可有些说不出口。待见她换上男装，与司徒鹤等同行，心中说不出的欢喜。一路之上，他总想寻个机会，跟她亲热一番。可是曾柔和众位师兄寸步不离，见到了他，只腼腼腆腆地微笑不语。韦小宝想要和她说句亲热话儿，始终不得其便，不由得心痒难搔。倘若他只是清军主帅，早就假公济私，调这小亲兵入营侍候，但身为天地会香主，调戏会中妇女乃是厉禁，众兄弟面上也不好看，只有干咽馋涎，等候机会了。
第三十九回 先生乐事行如栉 小子浮踪寄若萍
沿途官员迎送，贿赂从丰。韦小宝自然来者不拒，迤逦南下，行李日重。跟天地会兄弟们说起，说道我们败坏鞑子的吏治，贿赂收得越多，百姓越是抱怨，各地官员名声不好，将来起兵造反，越易成功，等于是“反清复明”。徐天川等深以为然。
不一日来到扬州。两江总督麻勒吉、江宁巡抚马佑以下，布政使、按察使、学政、淮扬道、粮道、河工道、扬州府知府、江都县知县以及各级武官早已得讯，迎出数里之外。
钦差行辕设在淮扬道道台衙门，韦小宝觉得太过拘束，只住得一晚，便对道台说要另搬地方。他想行辕所在，最妙不过便是在旧居丽春院中，钦赐衣锦荣归，自是以回去故居最为风光。但钦差大臣将行辕设在妓院，毕竟说不过去，寻思当日在扬州之时，所怀抱的雄心大志，除了开几家大妓院之外，便是将禅智寺前芍药圃中的芍药花尽数连根拔起。
扬州芍药，擅名天下，禅智寺前的芍药圃尤其宏伟，名种千百，花大如碗。韦小宝在十岁那一年上，曾和一群顽童前去游玩，见芍药开得茂盛，折了两朵拿在手中玩耍，给庙中和尚见到了，夺下花朵，还打了他两个耳括子。韦小宝又踢又咬，跟那和尚打闹起来，给那胖大和尚推在地下，踢了几脚。众顽童一哄而前，乱拔芍药。那和尚叫嚷起来，寺里拥出一群和尚与火工，手执棍棒，将众顽童赶开。韦小宝因是祸首，身上着实吃了不少棍棒，头上肿起了一个大块，回到丽春院，又给母亲罚一餐没饭吃。虽然他终于到厨房中偷吃了一个饱，但对“禅智寺采花受辱”这一役却引以奇耻。次日来到寺前，隔得远远地破口大骂，从如来佛的妈妈直骂到和尚的女儿，宣称：“终有一日，老子要拔光这庙前的芍药，把你这座臭庙踏为平地，掘成粪坑。”直骂到庙中和尚追将出来、他拔足飞奔为止。
过得数年，这件事早就忘了，这日回到扬州，要觅地作为行辕，这才想起禅智寺来，当下跟淮扬道道台说了，有心去作践一番。
那道台寻思：“禅智寺是佛门胜地，千年古刹。钦差住了进去，只怕搅得一塌糊涂。”说道：“回大人：那禅智寺风景当真极佳，大人高见，卑职钦佩之至。不过在庙里动用荤酒，恐怕不甚方便。”韦小宝道：“有什么不便？把庙里的菩萨搬了出去，也就是了。”那道台听说要搬菩萨，更吓了一跳，心想这可要闯出祸来，扬州城里众百姓如动了公愤，那可难以处理，当下赔笑请了个安，低声道：“回大人：扬州烟花，那是天下有名的。大人一路上劳苦功高，来到敝处，卑职自当尽心服侍，已挑了不少善于弹琴唱曲的美貌妞儿，供大人赏鉴。和尚庙里硬床硬板凳，只怕煞风景得很。”
韦小宝心想倒也有理，笑道：“依你说，那行辕设在何处才是？”
那道台道：“扬州盐商有个姓何的，他家的何园，称为扬州名园第一。他有心巴结钦差大人，早就预备得妥妥帖帖，盼望大人光临。只是他功名太小，不敢出口。大人若不嫌弃，不妨移驾过去瞧瞧。”