袁绍回到冀州后，心烦意乱，不理政事，其妻刘氏劝立后嗣。而袁绍所生三子长子袁谭字显思，出守青州，次子袁熙字显奕，出守幽州，三子袁尚字显甫，是刘氏所出，生得形貌俊伟，袁绍至爱之，因此留在身边。
自官渡兵败之后，刘氏劝立袁尚为后嗣，袁绍乃与审配、逢纪、辛评、郭图四人商议、原来审、逢二人辅袁尚；辛、郭二人辅袁谭；这四人各为其主，当下袁绍谓四人道：“今外患未息，内事不可不早定，我将议立后嗣：长子谭，为人性刚好杀；次子熙，为人柔懦难成；三子尚，有英雄之表，礼贤敬士，我欲立之。公等之意若何？”
郭图听了不由皱眉说道：“三子之中，谭为长，今又居外；主公若废长立幼，此自取其乱。今军威稍挫，敌兵压境，岂可复使父子兄弟自相争乱？主公且理会拒敌之策，立嗣之事，毋容多议。”
