相对的，那些没有南渡，依然留在北方的世族虽然是被征服者，却不愿与改为汉姓的胡族相混。他们为区别胡汉，往往在姓氏前冠以当地郡名，称为“郡姓”。
随着北魏政权的分裂，郡姓又分裂成两支：一支为经东魏到北齐，仍然保持汉代重经学儒术的传统，叫做山东郡姓，以崔、卢、王、郑为大姓。
另一支是经西魏到北周，再由隋而唐，在宇文氏的以关中文化为本位政策下，渐趋胡化的士族，就是所谓关中郡姓，以韦、裴、柳、薛为大姓。
宇文泰在西魏，为了与高欢抗衡，在苏绰等人的帮助下，更改西迁关、陇地区的山东士族的籍贯为关内郡望，以府兵制为基础，建立起一个较为胡人化的，兼容鲜卑贵族、汉人豪族的统治集团，也就是著名历史学家陈寅恪提出的关陇集团。
于是乎，除了南渡的江南士族，北方的汉人士族与胡人的军事贵族们渐渐融合同化，最后形成山东世族，随后又再次分裂，成了关陇集团，与太行山以东的山东集团。
而如今陈克复所要面对的，就是山东集团。隋朝一统中原之后，虽然政治上是关陇集团占据了主动与优势。但是山东世族仍保有数百年的重阀阅、讲经学之传统，所以依旧享有优越政治及社会地位。在太行山以东的这广大地区内，虽隋室与关陇集团不断打压削弱山东世族，可是隋朝立国时间太短。
特别是自大业七年以来，河北山东等地动乱最严重，但山东世族受到的冲击并不严重。最倒霉的大都是那些富户和小地主们，世族和豪强们，反而信靠着他们坚固的坞堡，开始趁着战乱大肆兼并土地，侵吞财富，逃避税赋，甚至将大量的百姓逼为奴仆。甚至在背地里，他们还在暗中支持着一些世族偏支出身的乱军。
而在调查司的调查之中，河北山东虽然被隋朝与关陇集团不断打压，势力比关陇集团要弱，甚至比隋朝皇帝杨广刻意提升上来的江南集团，也不占上风。可在这河北之地，特别是原先朝廷势力渐衰之后，他们却再一次的壮大起来。
到他率辽东军入河北，山东世族反而超过了大隋建朝初年，势力达到一个反弹的高峰。
而这其中，又以八姓十二族为最强，八姓是八个大姓，分别是涿郡卢家、渔阳卢家、河间卢家、高阳崔家、清河崔家、上谷崔家、赵郡李家、渤海高家、平原刘家、琅琊王氏、齐郡郑氏、彭城兰陵萧氏。其中卢、崔都是河北最大姓氏，与荥阳郑、陇西李号称天下四大姓。两姓都是宗族无数，各有两个势力庞大的分支。
八个大姓，十二个大族，基本上已经掌控了河北山东的乡村，再加上那些大大小小的地主、豪强们。陈克复虽然收复了河北，夺下了山东，但实际上，城市在朝廷手中，地方乡村却尽在世家豪强手中。
他原计划想通过借粮，来打压一下世族。可却没有想到，他这一个动作，却居然惹得世族们的强力反弹。这段时间，在调查司的监视下，世家豪强们上窜下跳，密谋不轨，使得陈克复不得不改变策略。