皇后的父亲三等承恩公崇绮。
崇绮的身世，可以说是颇为坎坷的。
崇绮是蒙古八旗子弟，原隶蒙古正蓝旗，是大学士赛尚阿之子。崇绮最初为廪生，通过捐输军饷，谋得八品笔帖式，不久被任命为玉牒馆誊录，1848年升任工部主事，一年后中举。1851年（咸丰元年），太平天国农民起义爆发。咸丰皇帝任命赛尚阿为钦差大臣，督师广西，进剿太平军。太平军势如破竹，冲破清军围剿，从广西进人湖南，直逼长沙城下。咸丰皇帝大怒。将赛尚阿革职，押回北京，定斩监候，籍没家产。崇绮也受父亲牵连被革去工部主事官衔。
家道中落，崇绮可以说备尝“身居闹市无人理”的世态炎凉。他索性闭门读书，研习书法，练成一笔好字，他还擅长丹青，尤喜画雁。以寄寓其“沧州旧隐无人识，正似寒芦落雁边”的感愤。
1853年，太平天国北伐军逼近天津，威胁京师。咸丰皇帝下令设巡防所，宣布戒严。巡防王大臣调崇绮充任督练旗兵处文案。次年。孤军北上的太平军弹尽粮绝，为清军所败，崇绮因抵御太平军北进有功被授予兵部七品笔帖式，并开复举人。1860年第二次鸦片战争爆发，英法联军攻入北京，咸丰帝仓皇逃奔热河。崇绮以随办巡防名义守