吕惠卿、曾布围绕《市易法》的内讧丢了王安石的脸，唐埛闹殿打击了王安石的威信，“宣德门落马”动摇了王安石的地位，现在安上门吏郑侠递上一张《流民图》，彻底撼动了王安石在朝廷的根基，而神宗皇帝当着王安石的面点出 “三不足”的谣言，等于一柄铁锤，把这块曾经受皇帝庇护而稳如泰山的“安石”砸了个粉碎。
王安石不是傻子，他知道自己眼下该做什么。回到府里就写了一个札子，请求辞去宰相之职。
《三国演义》小说里写出一个“三顾茅庐”的故事，传为美谈，其实这只是帝王们玩厌了的小把戏。自古以来君臣之间“三顾三请”、“三辞三留”的典故多到无数！今天神宗皇帝对王安石已经不假辞色，赶他走的意思十分明白，可王安石久获圣宠，在他罢相之时，君臣间仍然要做一个“三辞三留”的样子给天下人看，所以神宗接了王安石请辞的札子根本没有回复，于是王安石又上一本请求辞职。这次神宗下了诏命：不准！
王安石的札子一递进，整个朝廷都吃了一惊，不管王安石的政敌还是他那些“三司系”亲信大多又惊又喜。对政敌来说，刚愎自用、祸国殃民的王介甫早该滚蛋了！对亲信们来说，被皇帝嫌弃的王安石也早就失去了利用价值，不值得继续追随了。现在王安石要走，这些人正好趁机摆脱这块刚直廉洁、孤倔无趣的“硬石头”，去找一个更容易巴结的新主子。
也在这个时候，秘阁校理王安国、直舍人院王安礼到兄长府上登门拜访来了。
王家石的父亲王益娶了两位夫人，第一位夫人徐氏生子王安仁、王安道，第二位夫人吴氏生了王安石、王安国、王安上、王安世、王安礼五兄弟。这兄弟七人中王安仁、王安道、王安世只做了地方小官，成就也不大。王安石如今是个要倒台的宰相；王安国熙宁元年考中状元，如今做秘阁校理；王安礼仁宗嘉祐六年进士出身，现在担任直舍人院，这两位都是皇帝身边的亲信侍臣，也都对王安石主持的变法持反对态度，为此闹得兄弟失和，多年不相来往。另一个弟弟王安上担任太常寺太祝，掌管朝廷祭祀，平时比较超脱，对朝廷变法之争几乎不发表意见。
今天王安石要辞去宰相之职，王安国、王安礼听说这个消息，不约而同都来拜会兄长。
王安石跟两个弟弟的冲突纯是政见不合，没有别的。早前王安石权势熏天，两个弟弟都和他绝交，现在王安石落魄了，两个弟弟倒来看他，王安石心里难免有些灰溜溜得。把二人请进屋里坐下，王安礼率先发话：“兄长这次是要去了吗？”
自家兄弟，直话直说，没什么得罪不得罪的。王安石淡淡地说：“蝉为夏鸣，秋至则死，这是命数，我没什么可抱怨的。”
王安石嘴里说“没什么可抱怨”，其实话里满是牢骚。
大事当前，王安国没心情听兄长发牢骚，低声问：“陛下对兄长一向器重，如今兄长求退，陛下定会请你举荐继任之人，兄长将向陛下推荐何人？”
对此王安石心中早有主意：“若陛下问我，我当举荐韩绛、吕惠卿接任宰辅之位。”
韩绛和吕惠卿是“三司系”的两个首领，王安石离任之前向皇帝举荐这两个人，是希望这两人支持神宗皇帝把变法大业继续到底的。
王安国早猜到兄长会这么说，忙凑近前来急切地说：“兄长用此二人是给自己招祸！何不举荐王珪、吴充二人？”
王安国所提的两个人都是朝廷中的参知政事。
王珪惯会见风使舵，韩琦掌权的时候他就奉承韩琦，王安石执政，王珪回头巴结王安石，是个出了名的马屁鬼。但王珪早在英宗朝已经做到端明殿学士知制诰，也曾担任参知政事，从资历来看分明是个“旧臣”，与“三司系”无关。
另一位参知政事吴充是王安石的儿女亲家。但吴充对王安石主政后的种种作法很不以为然，两人的关系疏远了。吴充不像王珪那样左右逢源，全无原则，从立场上他是反对王安石的。只是吴充为人恬退，对旧臣同情，却不过分支持；对王安石不满，也不过分反对。
