袁紫衣托信给胡斐，送给他和程灵素凤凰一对，并表明从此后会无期。胡到处找袁紫衣，均无踪迹，胡、袁、程三人均非常痛苦。程灵素告诉胡斐，袁紫衣会去北京参加掌门人大会，胡斐认为这是一个再见紫衣的机会。田归农要去参加掌门人大会，却苦于手中拮据，晚上又做噩梦，始终与南兰手中的藏宝图有关。南兰见田青文和和田归农的小徒曹云奇被人在背后议论，找田青文谈，反被田青文讽刺，伤心不已。

苗人凤决定去北京掌门人大会，一是希望碰见胡斐，二是要找到石万嗔，弄清胡一刀之死。胡斐在街上碰见当年商家堡的王英杰和刘元鹤，与他们去酒楼喝酒，又巧碰见汪铁鹗们在玩牌九，胡斐与他们一起玩，汪一直输，最后竟然输给胡斐一座大宅院。胡斐觉得其中必然有阴谋，便将计就计，请各位去宅子喝酒，酒间，众差役为一人求情，原来此人便是凤天南，一路上的所有赠物全是凤天南所为。胡斐不为所动，执意要杀凤天南，却再次被袁紫衣救下。袁紫衣在胡斐的追问下，道出心中苦楚，称自己比胡斐更想也更有理由杀凤天南。原来凤天南竟然是袁紫衣的亲生父亲，袁慢慢回忆了过去的往事。袁紫衣的母亲袁银姑一家靠打渔为生，一天银姑向凤家送鱼，在门口等收钱的时候被凤天南撞见，凤骗银姑进屋并qj了她。银姑回到家中，非常痛苦，因为要照顾父亲，并没有寻死。

不久，银姑父亲见银姑身怀身孕，打骂银姑，银姑含泪说出原委。银父到凤府找凤天南，反被凤天南打成重伤，不久死去。见袁银姑的父亲已死，银姑的叔嫂强行霸占其房屋，将银姑赶了出来。银姑无处可去，去找原来投靠在自己家现在已搬出去的平四，不巧平四回沧州祭奠胡一刀去了。袁银姑只得四处流浪，并在一破庙中生下袁紫衣。银姑带着小孩继续流浪，遇见扫墓归来的平四，与平四住在了一起，并与平四结为夫妇。凤天南听说平四娶了银姑，派人追杀平四，银姑与平四走失，又不敢回佛山，只能带着孩子到处流浪。一日在一饭店碰见一帮无赖，被汤沛救下，并安顿在府中。可汤沛并不是正人君子，他以小孩做要挟占有了银姑。