再碰任何女人了，杨夫人便用这个好男色的把柄跟杨老爷谈了条件。
她也要养男宠，那种能陪她夜夜欢愉的男宠。
一开始杨老爷是不答应的，即便自己不好女色也不表示他能接受自己戴绿帽，但是他还有个不学无术的弟弟，如果自己闹出了丑事让当时还活着的父亲知道，那这杨家的话语权落在谁手里还不好说。
逼不得已的情况下，杨老爷答应了杨夫人的要求。
杨夫人与他人前做戏假装恩爱掩饰他好男风的问题，而他对杨夫人在府里给自己戴绿帽的事情睁只眼闭只眼。
两人约法三章互不干涉，就这么搭伙过完这辈子。
可是谁能想到一个吕柏章突然就逼得他们把事情扯到了外人面前。
吕柏章确确实实跟杨老爷交情不差，他不知道的是杨老爷不是惜才，是看中了他那张脸。
那段时间杨老爷时常借着杨公子成绩进步的由头去吕柏章家中道谢，送东西喝酒都是常事，然而他旁敲侧击好几回吕柏章都是一副没听懂不接受的模样，久而久之他也知道没戏了便不再强求。
可他没想到，转个头的功夫，吕柏章就跟杨夫人睡到一张床上去了。
还因为这事把这十几年来粉饰的太平砸了个稀烂，杨夫人还给他扣上了杀人的帽子。
“贱妇，你打的什么主意别以为我不知道。”，杨老爷狠狠剖了杨夫人一眼，“你以为我死了这偌大的家业只能给儿子，但是儿子年纪还小，你就能挟天子以令诸侯接手我的生意？我告诉你，你这如意算盘要打空了！”