作为刘秀起家的地方，南阳郡得天独厚，最高峰时有243万人口，算是少有的大郡，虽然经历了黄巾之乱、瘟疫、张绣西凉军，但依然还有一百三十万人。
可问题是，这一百三十多万人口，七成都在世家大族手中。
原因很简单，南阳郡是刘秀起家的地方，很多跟随刘秀起兵的南阳人后来都做了大官，云台二十八将中有一半都是南阳人，便是由他们开始，形成了门阀世家，比如邓禹，其子孙累世宠贵，凡侯者二十九人，公两人，大将军以下十三人，列校二十二人，州牧郡守四十八人，其余侍中、将、大夫、郎、谒者不可胜数。
跟这些开国世家相比，汝南袁家、弘农杨家还是后来崛起的。