当夜巡视诸处时候，殷署偷听得各处的士卒私下谈话都说：
士卒皆道：“关羽万人敌也，自前年而来，威震华夏，无人可当，孙权偷袭其后，反被其所败，如今曹彰不知生死，堵阳亦落。我等坐守孤城，是等死而已。”
话音刚落，另一名士兵道：“确实如你所言，只能这殷署既不能破敌，又难守此城，可惜关羽高义，不围北门，放我等走，他却又不走，如此不过送死而已。只是连累我等，不知葬身何处。”话未说话，已然两行泪下，众人闻言，皆泣不成声。
一番哭罢，有一士卒恨声道：“既然如此，我等何不乘机寻个机会，取了殷署首级，再献城门而降，届时不仅能活此命，还能立得功劳，何乐不为？”
其他皆道：“所言有理！不过不可急躁，待寻得良机再下手不迟！”
殷署听后，欲要杀入，身边又无人手，畏惧人多，便记下此处，连忙转他处，想要调兵来灭了这些人。
来到他处，未入其中，又听闻其内话语，虽与之前不同，但意思相近，都是寻得机会献城门或者寻机会杀了自己去投关羽。
殷署听后，心惊胆战，又转多处，多是如此，急忙逃回住处，一路之上见到谁，都觉得自己的头颅会随时被人拿下。
当晚殷署在枕下放一柄利刀，自思今夜一番饱睡之后，明日便突围而去。
但他当晚却是夜不能寐，总是害怕自己睡梦之时被人杀害。
未到四更，迟迟未睡的殷署越想越怕，便点兵趁夜突围而走。
就在出城不远时，四周火光立起。
“贼将休走！”周仓拍马冲杀。
顿时，殷署带出的兵马不知该如何抵抗，兵力的悬殊之下，又被埋伏。
仅仅不到三声鼓的时间，出逃的曹军全军覆没。
殷署亦被生擒。