二王胆敢如此行事，只是除了武惠妃和杨洄之外，李林甫和朝廷中的许多大臣也纷纷上书，指摘太子和二王有谋反之意。李隆基见宫里宫外都说太子等人要谋反，竟然信以为真，勃然大怒，召集宰相及六部尚书等重臣会议，打算废黜太子李瑛。其时宰相张九龄力谏李隆基不可如此操切，声称‘陛下践祚垂三十年，太子诸王不离深宫，日受圣训，天下之人皆庆陛下享国久长，子孙蕃昌。今三子皆已成人，不闻大过，陛下奈何一旦以无根之语，喜怒之际，尽废之乎！且太子为天下根本，不可轻动。昔晋献公听骊姬之谗杀申生，三世大乱；汉武帝信江充之诬罪戾太子，京城流血。晋惠帝用贾后之谮废愍怀太子，中原涂炭。隋文帝纳独孤后之言黜太子勇，立炀帝，遂失天下。由此观之，不可不慎。陛下必欲为此，臣不敢奉诏。’”