建安五年（公元200年），曹操与袁绍在官渡展开激战。冬天，为了保证安全，袁绍特派大将淳于琼带领上万军队专门护送军粮，并集中囤积在大营以北的乌巢（今河南延津东南）。淳于琼也留驻在那里保护。曹操得到消息后，亲自率领精锐步兵五千人前来偷袭。张郃对袁绍说：“曹操兵强马壮，淳于琼必败。一旦他失败，将军您的大业也就要完了。您应当立即率兵去救援淳于琼。”郭图不同意张郃的意见，说：“张郃的说法完全是错误的。乘曹营空虚去攻袭它，曹操一定会回兵来救，这样，乌巢之急也就不救自解了。”张郃说：“曹操的大营非常坚固，我军短时间内也无法攻下。如果淳于琼被抓住了，我们就都要成为曹操的俘虏了。”袁绍不肯听从张郃的意见，只派小股轻骑兵来救援淳于琼，而派主力部队去袭击曹军大营，企图一举攻下。由于曹营早有准备，因而袁军没有攻下。这时，曹操大败淳于琼，乌巢粮食全被烧光。消息传来，袁绍军心大乱，溃不成军。郭图深感惭愧，但不愿承认自己的错误，反而变本加厉地诋毁张郃，对袁绍说：“张郃对我军的失败幸灾乐祸，讲话傲慢无礼。”张郃害怕了，便阵前倒戈，投降了曹操。