黄文娇失踪不见，黄文正又坚信妹妹还活着，日后一定会找回来，韦汉柏想了想，便一面使人暗中留意从京城至江南的水陆路段，看是否有孤苦零落的小女孩，一面由那哑巴女孩顶替黄文娇名份，将外孙、外孙女改名为韦华陶、韦秀云，并请来江南名医为秀云精心诊治哑病。
相处一年半载，乖巧细致的韦秀云在婆子、仆妇们的调教下懂规矩知进退，逐渐有了大户人家小姐的模样儿，小女孩本身又生得秀丽，伶俐讨喜，温婉柔顺，渐渐取得了外公和哥哥的认同，默许她作了自家人。
而秀云开始说话的当儿，黄文正却又找到了亲妹妹，欢欢喜喜带回韦家，韦汉柏也很高兴，不介意多养一个外孙女，便留着韦秀云，另为小乔取名韦越云。
文娇虽为林氏所出，实则从小养在嫡母身边，深受嫡母疼爱，韦氏生前给父亲写家书，其中提及二儿一女，语气心态都是一视同仁，更因对文娇的教养，感念父母当年养育自己的苦心，因而韦汉柏把文娇视为亲生外孙女，立意要把外孙女教导成为她母亲那样的淑女闺秀，延请名师教习礼仪，读书习字，琴棋书画、女红插花茶艺无不涉及，黄文娇虽然体会到外公的苦心，却也苦不堪言，这些东西学着太无聊，有的她根本早就会了，没什么用处，她心里装的想的可是实质性的、最有用的东西——那些白花花的银子啊！
这个心思当然不能让韦汉柏知道，作为世代清白诗礼之家家主，韦汉柏已经有一个令他蒙羞的纨绔不肖子，怎能容忍家里再养出个满脑子铜钱叮当响的小商女？他为小乔订立的目标是成为矜持高雅的书香门庭闺秀，将来嫁入清贵名流高门大户，也算是他对长女的一个交待。朝中时局变动。先皇驾崩，晋王登基，黄继盛在京中升官了。那又如何？他不屑让孩子们与黄家有任何关联，索性当自家远房堂族侄孙养着，不靠黄家。凭着自己致仕朝官、桃李遍布吴中的身份地位，不信不能成为孩子们日后入仕为官、觅得良婿的倚仗。
韦汉柏一生只娶一妻。生有二女一子，长女即是黄继盛正妻，二女嫁在本郡，一子韦令渊，承香火之人，却是最让老头子头痛失望，从小不爱读书不求上进。专爱赌马斗鸡，逛青楼捧戏子，韦汉柏训教不听，为他娶了妻，将家产一分为二，父子分开单过，互不过问。
韦令渊娶妻单过，没有了老父亲的管束责斥，更觉自由爽快，与妻子马氏生下两子两女。又纳了三四个小妾，收了几个通房，生下五六个庶子庶女，正悠哉快活间忽然发现家里缺银子了。正室马氏天天追着他吵闹，妾室们又是撒娇又是哭求跟他要银子买脂粉添新衣买孩子们的小物件，加上外边包着的粉头戏子因没银子供养，改投他人怀抱……韦大爷开始还能典当田产房产支撑，渐渐不支，被妻子马氏一挑唆，夫妻二人便天天上门来找韦汉柏大吵大闹，说他偏心糊涂，自家子孙不养，却供着别人家孩子。
韦汉柏不加理会，再来索性将夫妻俩赌在门外，韦令渊便在门外喊：若非要养别人家孩子也可以，再把这家产分一半来！韦汉柏气得直打哆嗦，打开门把儿子儿媳放进门，怒视着他们道：这院子里的孩子明明姓韦，是我韦家远房堂族侄孙，哪里来的别人家孩子？
韦令渊指着黄文正说：这不是姐夫家的孩子么？繁华京都不住，跑到乡下来，想做什么？抢我韦家资财，办不到！
那时小乔已经做了一年多韦越云，她看见外公苍白着脸，颤颤巍巍指住韦令渊说道：“如果你想死，想受黄家牵累，尽管出去喊叫，说这三个孩子是朝官黄继盛的子女，而不是我们韦家的子孙！”
韦令渊傻傻地道：“难道这还有假？”
韦汉柏呵呵冷笑：“半点不假！只是咱们天朝刚刚又换了天子，这次登临帝位的是原先一直镇守西北边的楚王殿下！新皇亲政，一扫帝阙怨晦之气，清理朝廷叛贼逆党，兵部首当其冲，被斩首示众者无数，黄继盛为兵部左侍郎，被抄家革职，所有家产充公，全家老幼发配北疆最北边充作边民拓荒……他的一双儿女早在三年前就落水溺亡，你如今想要与他攀亲么？大可以去告诉邻居们，韦家养着三个黄姓娃娃！”
“这、这、这是真的？”
韦令渊大惊失色，一张红润的胖脸也变白了：“父亲，君子不立危墙之下，自小您这么教孩儿的，为何您还敢私藏犯官子女？这么冒险的事您也做下，若是让官府查到，不是带累我们一大家子？”
“不但你一大家子，江南整个韦氏家族，都要吃罚！轻重不一而论，你是想将家产没官呢，还是去做几年苦役？”
“孩、孩儿哪样都不想！”