光阴似箭，命运无常。半年后，隋炀帝又开始准备征讨辽东的高句丽，在国内到处征兵，百姓苦不堪言，朝廷也给河间郡下达了征兵三千人的硬指标。
曹正是一位正直爱民的好官，所以他上奏隋炀帝，说今年河间郡发生水灾，加上连年征战，河间郡损伤的元气还没有恢复，田地荒芜，民不聊生，现在需要恢复生产，发展民生，希望皇上体恤民情，暂缓征讨高句丽，或者减少河间郡的征兵指标。他还上奏说，河间郡目前百姓困苦，如果强行征兵，容易酿成动乱。
奏折送上朝廷之后，刚愎自用的隋炀帝看了大怒，加上妒贤嫉能的涿州通守郭绚、清河郡刺史徐贵、漳南县县令郑霜等奸臣煽风点火、谗言蛊惑，他们除过诬陷曹正目无皇帝、不尊圣命，而且还说其他郡县都是匪乱不断，只有曹正管辖的河间郡没有匪盗滋事，所以断定曹正一定和匪盗暗中勾结，欲行不轨，图谋造反。
生性残暴多疑的隋炀帝看到涿州通守郭绚、清河郡刺史徐贵、漳南县县令郑霜等人对曹正的弹劾奏章，信以为真，恼羞成怒，立即颁发一道圣旨罢了曹正的官，并责令涿州通守郭绚押解曹正全家赴京城问罪。
这真是世事无常，祸从天降，曹正一家被涿州通守郭绚派人捉拿并