他是一个相当精明的人，很早就告老还家了，李唐建立之初，李渊为了收揽世家大族的人心，大封官位爵位，世家大族占据了朝中所有重要职位，是以李唐四平八稳的占据了关中、巴蜀、荆州等地，李渊刚开始或许能够忍受，但随着唐朝疆域逐渐缩小，造成了官多如狗的局面，这些大小京官高达三千余人，这其中职位重复、责任重复的多不胜数，这些人没事也能闹出事来，到了有事的时候就相互推卸责任，不但对我唐朝发展毫无意义，反而存在巨大隐患。此种情形，免去无意义、无价值、无能力、无作为、重复出现的官员以振兴朝纲朝政，乃是势在必行之势，否则，这无效率、且为朝廷造成沉重负担的官场，将会成为李唐大败之因。
识趣一点就自己下去，比如他裴矩，不识趣者，下场估计不会太妙，裴矩可是听说了，李渊打算向亢官亢员开刀了。可是减员之后又会产生诸多问题：减员，如何减、减谁？裁减之后如何又如何安排？这些都是让人头疼问题，处理不好会引发动荡。面对亢官亢员这种现象，便是大一统的王朝都选择了听之任之，以免动摇根本。就是这听之任之的做法，导致亢官亢员到了真正危害国家的时候，已经无从处理。
在裴矩来看，裁员裁官这也是李唐目前最好的求生之道，不然的话，乱轰轰的朝堂还会成为军队失败的病根，但这做法会导致大多数人利益受损，人家会答应吗？尤其是李唐王朝目前的处境相当不妙，这么一搞，李渊必须做好大乱的心里准备。但作为一个开国之君，就应该在权力斗争上，既要心胸开阔、人尽其才、海纳百川，也要冷酷无情的铲除异己，铲除无能之辈，给忠诚的真正人才让路。
这一方面，人家杨广祖孙就做得相当好，比如说杨广把九等爵位削减为三等，淘汰六成无能庸碌之士，就是相当高明且有思路的做法，如果不是他既要开拓、又要治吏，太过急功近利，以大隋当时的鼎盛，便是关陇集团联合造反，也撼动不了大隋国基，又哪来今天的乱世？但作为杨广的重臣，裴矩也明白杨广当时着急之因，杨广子嗣单薄，四个儿子二死、一废、一幼，三个孙子也都年幼，他是怕自己不在了，子孙镇不住关陇集团，隋朝被关陇集团所篡夺，所以他才急着在自己有生之年将军权在手的关陇集团废掉，但也是因为急于求成，且天灾不断，导致天下大乱，各个世家纷纷扶持傀儡，以之为先锋，一步步瓦解大隋王朝威严，最终推出了李渊去收拾残局；可关陇集团料不到，杨氏之中还有如是厉害的子孙，愣是在兵锋四起的时候，挽将倾之大厦，重新将大隋扶正，并将之经营得蒸蒸日上。
裴矩相信经此一役，天下世家都会元气大伤，陷入一个相当疲弱的蛰伏期，如果胜出的是李渊，那么世家还有一线生机，还能在几十年内卷土重来，但如果胜出的是杨侗，那么，世家将被大隋官制死死压制，几十年后即便能够步入朝堂，那也不能恢复之前的鼎盛，只因在大隋的教育之下，寒门将会产生出大量的人才，才华横溢之士或许很少，但架不住寒门庞大的人口基数，你世家就算人人是精英之士，可一万个寒士总有一人的才华与你的一名子弟对等吧？如此一一平摊，失去了朝廷支持、失去了把持朝廷命脉绝招的世家凭什么可以像之前那样，得以延续千年？一个家族只要在一两代内，没有出一个杰出的扛鼎人才，那么，它没落必成定局。
同时，新生的世家也不能延续丢掉，在这种大势面前，没有一个可以强盛三代，竞争实在太大了，你要是不出色，被人取代是正常的事情。那是一个强者为尊的时代，官官相护的现象固然会有，却也不能危害到整个国家的根基，顶多只能为祸一方，可是以大隋那种预备官吏监督地方官员的制度而言，这种靠关系上位者，又能藏得了多久？那些预备官吏恨不得把你搞死，才好上位，你自己一旦有把柄落到他的手上，他不抓紧利用才怪，还给你为祸一方的时间？想都别想。
势是什么？其实就是人的心，如果想左右一个人的心思，很难，哪怕裴矩也不行，而一个人的心，难以影响大局，而势则是大多数人心**有的利益，只要满足大多数人的利益，这些人就会拥护你。
杨侗种种治国、治吏方子不仅符合皇家利益，也符合九成人口的利益，如此一来，皇家利益也成了天下人共同的利益，那受惠的九成百姓又怎么可能反？而那不足一成的人口，你没有那伙与皇室利益相同的人支持，你就反不了、反不起来，这便是大势所趋。
裴矩逐一摸索到了隋朝新制的门路了，他发现此制是人与人之间的较量、人与人之间的竞争，与你的家族无关、与你的关系也无关，甚至彼此之间，还存在着利益间的竞争关系，如果家族有两个人竞争同一职位，失败者心中肯定不甘、不爽，这样又怎么可能与胜利上的人同心同德经营一个家？又怎么可能组建成一个铁桶一般的家族？初时或许能够相互忍让，但以后呢？谁没有属于自己的私心？
如此一一梳理，裴矩发现以往的玩法已经不行了，至少在隋朝是不行的，而即便是隋朝败了，那他所创制的制度也被延续，因为它符合任何一个王朝皇族的利益，所以别看李渊骂杨侗最狠，一旦他统一了天下，依旧会搬来，换一个名目使用。
他倒是看穿了这新的套路，因此致仕之后，努力教导族中子弟，希望他们在未来有竞争的能力、生存的能力，若是子孙后代出一两个像他和裴蕴这样的人，裴氏未必不能辉煌。
这时，鱼竿的浮标一动，是有鱼上钩了。裴矩刚要拉起鱼杆，管家匆匆跑来大喊：“老爷！长公子来了。”
“来了就来了呗，有什么大惊小怪的？”裴矩发现刚刚上钩的鱼儿跑掉了，有些不爽的重新上饵。
“父亲！”不一会儿，长子裴宣机匆匆而来。
“何事慌里慌张的？天塌不下来。”裴矩瞪了长子一眼，这是长子在李唐礼部担任一名郎中，这是裴矩以前的部门，裴宣机经过这么一安排，颇有点子承父业的意思，但对他儿子很失望，尤其是此时，他似乎闻到了长子身上有烧焦的味道，四十几岁的人了还这么毛躁，这样的人何以继承自己的家业？