蕭景先與王晏向高帝進言說:“我等所看到的皇子與皇孫兩宮的情形,比起荀伯玉的宅邸來,真可謂門可羅雀了。”王晏是王敬弘的侄子。
驍騎將軍陳胤叔,先亦白景真及太子得失,而語太子皆雲“伯玉以聞”。太子由是深怨伯玉。
驍騎將軍陳胤叔,原先也曾稟告過張景真以及太子的過失,但他與太子談話時卻說:“是荀伯玉向皇上報告的。”從此,太子便深深懷恨荀伯玉了。
太祖陰有以豫章王嶷代太子之意;而嶷事太子愈謹,故太子友愛不衰。
高帝暗中本有以豫章王蕭嶷取代太子的想法。但是,蕭嶷事奉太子更加謹慎,所以太子對他的友愛之情並沒有衰減。
豫州刺史垣崇祖不親附太子,會崇祖破魏兵,太祖召還朝,與之密謀。太子疑之,曲加禮待,謂曰:“世間流言,我已豁懷;自今以富貴相付。”崇祖拜謝。會太祖復遣荀伯玉,敕以邊事,受旨夜發,不得辭東宮;太子以為不盡誠,益銜之。
豫州刺史垣崇祖不肯親近阿附太子。趕巧垣崇祖打敗北魏軍隊,高帝召他回朝,與他密商大事。於是,太子對他產生了懷疑,對他違心地以禮相待,還對他說:“對於外界流傳著的誹謗,我已經不放在心上。從今以後,我把榮華富貴就託付給你了。”垣崇祖行禮致謝。適逢高帝派遣荀伯玉前來,命令垣崇祖前去處理邊疆上的事務。垣崇祖接受聖旨,連夜出發,來不及向太子告別。太子認為垣崇祖對自己不能竭盡忠誠,便愈加懷恨在心了。
太祖臨終,指伯玉以屬太子。上即位,崇祖累遷五兵尚書,伯玉累遷散騎常侍。伯玉內懷憂懼,上以伯玉與崇祖善,恐其為變,加意撫之。丁亥,下詔誣崇祖招結江北荒