衙统属，而归皇帝直接统领，编制上却与南北衙禁军相同，设大将军、大将军下设左右将军、再往下是中郎将、郎将，但自从设立以来，不知是皇帝有意为之，还是一直没有可心适当的人选，凌云台大将军和左右将军之位一直虚悬，主事者一直是只有中郎将职衔的房遗直，结果造成了凌云台的主事长官权大位卑，极不协调。
由于凌云台办理都是皇帝亲自交办的秘密差事，朝中官员甚至连宰相都不知道也无权力过问凌云台的具体事务，而凌云台办案时又常常在暗中监视朝中大小官员，所以朝中官员人人畏惧凌云台，但多数官员却又瞧不起偷偷摸摸的凌云台。
杜荷对凌云台的人事调整，第一步就是要将主要负责办案的旅帅换成自己的人，如今凌云台几个办案的旅帅都是房遗直一手提拔的，既难以驾驭，又恐他们暗中给自己挖坑下套，所以杜荷上任第一天就想好了，要想干一番事业，一定要有自己的队伍。
“杜平，你今天就把吴旅帅手中的案子和事务接手过来。”第一个就拿吴冬生开刀，据说此人是房遗直的头号亲信，很多重要的案子房遗直都交给此人办，所以此人在所有旅帅中年纪最轻，升迁最快，几年时间就从一个默默无闻的大头兵升到了旅帅。
杜平是杜荷