C'est actuellement son état de santé qui préoccupe les Français mais pendant des années, ce sont les rumeurs sur son tempérament de séducteur qui ont beaucoup fait parler. Son ancien ministre de l'Intérieur évoque une scène avec des jeunes femmes seins nus sur une plage de Saint-Tropez qui aurait énervé Bernadette Chirac.