大军还没回来的时候，他更是发动所有御史文官天天弹劾李靖，文武开始在朝堂上对骂，闹得不可开交。
高士廉杜如晦趁机进言，说萧瑀弹劾李靖包藏祸心。
可是陛下却当作没听见，在风头愈演愈烈的时候，陛下就说了句，弟弟看姐姐有何不可？之后任命萧瑀为太子少傅。
他的御史大夫之职位由杜如晦暂管，等六月年中的大朝会再行商议。
早些时候送裴茹回家，大伯裴宣机也悄悄地告诉颜白，萧瑀在朝堂上说的话已经不管用了，裴宣机说宋国公应该是被陛下罢相了。
萧瑀终于走上了台阶，他摆手拒绝了礼官的搀扶，拄着拐杖走到颜白身前：“政道你真的就看不上么？”
颜白躬身行礼，赶紧回道：“宋国公言重了，小子这样的哪有什么资格看不上别人啊！”
萧瑀深深的看了一眼颜白，叹了口气后离开。
一直跟在萧瑀身后的太常卿萧锐走上前来，看着颜白冷哼一声：“颜县伯真的以为当了县令，在长安就能为所欲为了么？
我家大门被你那弟子捅了一个大洞可是让人笑话了这么多日子，如果你管不好你那弟子，我会替你管教！”
颜白看着跟萧瑀有着七分像的萧锐，直起腰来，笑道：
“这个事儿你国公都没有再提，你觉得你这时候跟我说就能指责我了？”
颜白看着萧锐笑了笑：“庆幸那时候我不在长安，如果我在了，可不是破个洞那么简单了，既然要管教我的弟子，那就来吧，我也趁机管教一下萧守业！”
萧锐看着颜白突然笑了笑：“你不在的时候我不能出手，免得有人说我欺负孤儿寡女的，长辈欺负小辈。
如今你这正主回来了，那就没那个顾虑了，如果一不小心伤筋动骨了，那就莫要说我萧家下手重了！”
颜白很是不解的看着萧锐：“你确定吗？”
萧锐看着一身绯袍，却甘愿和众多绿袍坐在一起的颜白，大笑道：“我萧家历经西梁，前隋，大唐，不是你这住陋巷只会写字的颜家可比的！”
“看来要武斗了？”
颜白眯着眼笑了笑：“要不要咱俩在这儿分个高低，给陛下和各国使臣助助兴？”
“莽夫？”
萧锐背着手轻蔑的看了一眼颜白：“真的以为你拿着火药就能吓住我？真的以为我萧家就没有点压箱底的手段？
孩子，低下头，多想想，我走过的路，吃过的盐，过的桥，比你这十九年的一切加起来都多，说这么多都是为你好！”
“哦！”颜白点了点头：“怪不得你这么闲，七七八八说这么多，谢谢啊！”
萧锐咬咬牙：“好好等着，马上就来了！”
说罢，看了一眼频频朝他拱手的众多绿袍小官，冷哼一声背着手朝着大殿走去。
史仁基听着颜白刚才所说的若有所思，见萧锐离开，他朝着颜白拱拱手：“受教了，此后我也不怕有人倚老卖老，拿着吃盐的事儿说我了！”
李晦点了点头，赶紧问道：“小白啊，如果有人说，我说话比较直，话说得难听了你别见怪，遇到这样的我该怎么回？”
颜白想了想：“我出手比较重，给你打残了你也忍着点！”
“那，娘都是为了你好，这个该怎么回？”
颜白想了想：“这个是孝道问题，主动跪祠堂吧，回不了！”
“唉！”两人齐齐叹了口气。
