Sa disgrâce, en 1707, après vingt-quatre ans de service, lui semble donc complète, et il la déplore avec des accents où la servilité elle-même se déguise sous des airs de sentiment : Mon malheur est sans exemple… Ce qu’il y a de plus épouvantable pour ce qui me regarde, c’est que le roi a toujours paru content de moi et touché de mes soins ; il l’a dit en son particulier même à qui l’a voulu entendre ; j’ai toujours été favorablement traité, même avec privauté et distinction ; un mois même avant ce dernier coup, il me dit tout haut dans son cabinet, devant toute la Cour, que j’avais toujours bien fait ; et cependant en voilà la récompense ! […] D’Antin y insiste ; il ne perd aucune occasion de se représenter dans les vicissitudes de ces années (1712-1715) la misère des espérances mortelles ; la chute de Mme des Ursins lui rafraîchit cette amère leçon : « Je regarde comme une gorge-chaude, dit-il avec plus d’énergie qu’à lui n’appartient, toutes les occasions où je peux me convaincre de la légèreté et de la bizarrerie de la fortune. » Quand le chancelier, M. de Pontchartrain, se retire et va méditer sur une vie meilleure, il y voit un bel exemple et qu’il voudrait avoir le courage d’imiter : « Heureux ces prédestinés, s’écrie-t-il, qui savent se couper dans le vif et mettre une distance raisonnable entre la vie et la mort ! 

Mais Alfred paraît ; c’est à l’Opéra que Léonie l’aperçoit d’abord ; il y est fort occupé auprès d’une élégante, Mme de Rosbel ; ou plutôt, tandis que la foule des adorateurs s’agitait autour de la coquette, qui se mettait en frais pour eux tous, Alfred, plus tranquille, « lui parlait peu, ne la regardait jamais, et l’écoutait avec l’air de ne point approuver ce qu’elle disait, ou d’en rire avec ironie » : Cette espèce de gaieté (c’est Léonie qui raconte) contrastait si bien avec les airs doucereux et flatteurs des courtisans de Mme de Rosbel, que personne ne se serait trompé sur le genre d’intimité qui existait entre elle et M. de Nelfort. […] Il n’ose comprendre, il regarde encore, quand un second signe, toujours dans la langue des sourds-muets, vient lui dire : Je vous aime.