边州县皆有田地，商铺。入元后科举无望，他便安心在乡中当起了富家翁，教育族中子弟读书。因为其有功名在身，又好交游，常与那些士绅和旧官、遗老在一起吟诗唱和，在周边府郡有些名望。
在朝廷收复湖广之后，因为齐家并没有什么劣迹，也无勾结蒙元的罪行，并没有受到‘镇反’的波及。且经查证齐贤确系通过州试，承认了其功名，不过并没有被征辟入仕。谢枋得与其也曾有交往，参加过其组织的诗会，但并没有什么深交。
这名庄客指认出被俘获中的一人乃是郝家的大管事，此行皆听命于他。王应麟两人不敢怠慢，立刻进行提审，初时其还咬死不认，可在被点出其身份和严刑之下，也不得不交待了此行的目的。而让人意外的是，他们刺杀的目标却不是皇帝，而是谢枋得和自己。再细问之后，才知其中原委，而这更让两人心情极为沉重。
原来静江府被蒙元占据之时，赋税比之大宋要轻的多，且阿里海牙为官也算清正，对于广南前朝士绅并没有为难，甚至还加以保护。因此齐家也没有遭受刁难，而朝廷收复湖广后，齐贤认为朝廷征收的赋税要高于蒙元，因而多有不满。
另外，前岁朝廷开科，齐家子弟也参加科举，其中有两人过了乡试和州试，但是在省