À l’une de ces avances, vraies ou fausses, qui lui furent faites, il répondit « qu’il était très incapable du ministère pour toutes sortes de raisons, et qu’il n’était pas même de la dignité de la reine d’y élever un homme encore tout chaud et tout fumant, pour ainsi parler, de la faction ». […] Que de coups d’œil perçants sur le vrai des situations et la misère des partis ! […] Un de ses conseillers et domestiques, brouillé avec lui, Gui Joly, a donné là-dessus, dans ses Mémoires, des détails honteux, qui peuvent être très vrais quant aux faits matériels, mais qui sont faux en ce qu’ils sont uniquement bas et que Retz ne l’était point.