Membre du conseil d’administration de L’Oreal (depuis 2002), du Crédit Agricole (2001-2012), de Schneider (depuis 2011) et du FSI (2009-2011), Xavier a été Président des Chantiers Beneteau, d’Eurest-Wagon Lits et d’Essilor (1991-2010). Xavier a également enseigné la stratégie à HEC (2012-2023). Il est l’auteur de plusieurs livres, notamment  Si on faisait confiance aux entrepreneurs - L'entreprise française et la mondialisation (Les Belles Lettres, 2010) et Pourquoi pas nous ? (Les Belles Lettres, 2014).