沉重的赋税和劳役。
在各地征战中，汉人世侯还在蒙古游牧贵族的影响下把许多战争中的俘虏和掳掠到的人口用作驱奴。世侯占有的驱奴往往多到几百几千，用以应付蒙古统治者的兵役和差役，平时也用以从事农业劳动。他们的身份地位比一般农民更低，没有任人身自由。但是在役使一段时间以后，世侯也就把他们“遗放为良”，转化为一般的依附人口。
为了在自己的势力范围内有效的进行统制，世侯们纷纷开设幕府，延纳流落在各地的士大夫。在金衰蒙兴的过程中，残留的金源士大夫除少数退隐于穷乡僻壤外，相当多的人陆续投身于世侯幕下，成为世侯幕僚。世侯依靠这些幕僚治理地方，开学养士。他们聚在一起，尊崇和扶植儒学，讲究经史，推明治道。
保存在世侯幕府中的“秀民贤才”后来一个个进入忽必烈的王邸，为忽必烈建立元朝立下了重大的事功。他们所培养的新的儒士，不少人后来也成了元廷的职官。他们协助蒙古人推行汉法，建国立志，当然也依然与从前的恩主保持着密切的关系，在朝廷和地方相互呼应，形成利益集团。
但正所谓盛极而衰，鸟尽弓藏。贺惟贤记的自己尚是懵懂的幼年，家中突然散尽了奴仆，父叔们则如丧考妣从家中析户迁