实际上除了黄明远，也没多少人关系一个已经死了五六年的前太子的儿子的情况。五六年的时间足以让天下大多数人忘了杨勇。
很快，所有人的注意力都转向了另一件事，官制改革。
四月初，杨广下了一份新诏令，百官不能按正常的考核制度升级，必须有德行，并有显著功劳、能力的人才得以提升。
此令一出，百官哗然。本来当官有几个不为升官，而正常的考核制度升级，保障了大部分普通官员的利益，他们可能没有太多的关系疏通门路，也无法直达天庭，也就是靠着一步一步的考核升级，才得以升职。而现在还要考教德行，还要有显著功劳、能力，这不是活活堵死了他们上进的路吗？
这年头有本事刷德行、功劳的还会在下面郡县当官。
黄明远很想看看杨广的脑回路，作为一个到达权利顶峰的天子，真的一定要一步一步把自己玩死吗？官员不按正常的考核制度升级，不是给了官员上下其手的机会。能够得到提拔的，不是那些能力未必强但关系一定硬的人吗？这样的制度，损害最大的不是天子的权利吗？
而杨广却似乎看不出来。
杨广实在太吝惜名位，群臣中有应当升官进爵的，多让其兼职暂代而已。虽然有的职务有空缺，却空着不补上。
四月上旬，杨广下令设置选曹大臣。
杨广终于向吏部下手。
原本牛弘担任吏部尚书，掌管着官员资料以及人事任免权，可以任免四品及以下官员，但此时的牛弘根本不能专行其职。
这一次杨广任命纳言苏威、兵部尚书左武卫大将军黄明远、左翊卫大将军宇文述、给事黄门侍郎裴矩、左卫将军张瑾、內史侍郎虞世基参予掌握选择官吏之事，他们六人和牛弘被合称为“选曹七贵”
七人之中，苏威、牛弘、黄明远、裴矩皆是宰相，宇文述、虞世基是天子心腹，武将之首，至于张瑾则是杨广扔给关陇世家一个打酱油的，以堵住他们的嘴。
张瑾为人性格懦弱，胆子也不大。他是宇文述的下属，曾经在军中说了一些话，宇文述觉得不中意，竟然直接瞪着大眼斥责张瑾。张瑾也是无能，竟然吓得惶惧而走，因此为众人所讥笑。
七人之中，根本没人拿官小位卑的张瑾当回事，他也没有话语权。
虽然这七个人同时在坐，当杨广又借着虞世基插手其中。因而官吏升迁任免的实权，实际由虞世基借着杨广的权利独霸。而虞世基本人也是一个贪官，收受贿赂，行贿多的人就超越等级和不按一般常理去提拔，不行贿的人就只能原地踏步而已。
当然，一切还不仅如此。
大业三年（607）四月，壬辰（十四日）。
杨广下令：
增置殿内省，与尚书省、门下省、内史省、秘书省为五省；增谒者、司隶台，与御史台为三台；分太府寺置少府监，与长秋、国子、将作、都水为五监。
将十二府卫改为十二卫四府。其中改左、右卫为左、右翊卫；左、右备身府为左、右骁卫；左、右武卫仍为旧名；改左、右领军府为左、右屯卫；加置左、右御卫；改左、右武侯府为左、右侯卫；改左、右领左右府为左、右备身府；左、右监门府仍为旧名。其中宇文述仍领左翊卫；杨达领右翊卫；黄明远领左武卫；李景领右武卫；独孤览领左骁卫；来护儿领右骁卫；郭衍领左侯卫；卫玄领右侯卫；张定和领左屯卫；于仲文领右屯卫；而新设置的左、右御卫，并未设置大将军。