En tête de son Histoire des rois de France (1678), il déclare avoir hésité quelque temps et délibéré s’il mettrait une préface, « dans la crainte que j’ai eue, dit-il, d’avoir été cause en partie de ce qu’on les a blâmées par écrit et de vive voix, sans en excepter aucune ». […] Il nous raconte quelque temps après (dans sa préface des Histoires des anciens comtes d’Anjou, 1681), qu’un ami à qui il avait fait cadeau d’un de ces rares exemplaires de son Athénée ne put se résoudre à lui en faire compliment à cause des vers qu’il y avait entremêlés, et que ce même ami à qui il donna à lire quelques jours après sa version en vers du prophète Daniel s’excusa de lui en dire un seul mot, prétextant que sa vue était très affaiblie.

Ayant vu pour la première fois Paris en 1813, y arrivant avec tout un monde de préventions dans la tête, il les secoue ; il goûte la société et s’y plaît ; comme Mme d’Albany nous en voulait un peu et pour cause, il lui écrit ces paroles qui pourraient si bien s’adresser de tout temps à la plupart de nos ennemis en Europe : « Je sais que jugeant les Parisiens à distance, vous conservez contre eux de la rancune pour les maux qu’ils ont faits et ceux qu’ils ont soufferts. […] C’est toujours un profit que d’aimer, et, s’il faut aimer une nation, je ne vois pas laquelle on préférerait aux Français. » Se retrouvant à Paris en 1815, il prend fait et cause pour l’essai constitutionnel des Cent-Jours, se fait, en pur volontaire, le second de Benjamin Constant, devient un champion officieux du gouvernement dans le Moniteur, et, sur ce point brûlant du libéralisme impérial, se sépare avec éclat de ses autres amis politiques.