休屠部落却整整休养生息了三百年，势力遍及凉州、陇西、并州各地，并聚拢了很多部落，统称休屠各胡。

南匈奴内附后，休屠各受大汉和南匈奴王庭共同管辖，北匈奴灭亡，一部分内附，很多也归附了休屠各，时至而今，休屠各已经完全能与南匈奴王庭抗衡，成为大汉境内最大的匈奴势力之一。至桓帝时，休屠各第一次叛变，被凉州三明之一的张奂平定，其后就是中平五年，休屠各胡再叛，攻杀并州刺史张懿，并与南匈奴右部醯落攻杀单于羌渠，介入了南匈奴内部事务。於夫罗外逃，王庭实际被休屠各所掌控。

休屠各内部同样复杂，名义上尊休屠金氏为首领，实际上金氏也难以掌控休屠各，其内部落的成分是极为复杂的，有匈奴人，但也有很久以前归附的西域杂货，有黄种人，同样也有白种人。

不过休屠各势力再大，名义上仍是尊南匈奴王庭，南匈奴王庭单于以下有左、右贤王，左、右谷蠡王，左、右大将，左、右大都尉，左、右大当户，左、右骨都侯等官职。

左、右贤王和左、右谷蠡王最尊贵，左、右骨都侯辅佐单于治国，大当户之下还有二十四万骑长，“万骑”是匈奴最大的军事建制，其标准人数自然是一万名骑兵，但实际情况肯定是不同的，有的多于一万，有的少于一万，根据各自的部落各有不同。万骑长之下设千长、百长、什长等军官。

匈奴单于为栾提氏，除却栾提氏，还有呼衍氏、须卜氏、丘林氏、乌洛兰氏、拔列兰氏等大姓，同样也是大部落，为国中名族，常与单于婚姻。其中呼衍氏、乌洛兰氏、拔列兰氏皆为休屠各部，这些部落相互联姻，关系颇是复杂。

云中郡的休屠各胡以乌洛兰、涉狐奴、拔列兰、沮渠等部落为主，其下还有匈奴别部，也就是依附的非匈奴胡人。

云中县城之中，主事的是左大当户乌洛兰呼于，他是匈奴的掌权者之一，兼任本部落万骑