OPTIMAL CONVERGENCE RATES FOR NESTEROV ACCELERATION

Abstract : In this paper, we study the behavior of solutions of the ODE associated to Nesterov acceleration. It is well-known since the pioneering work of Nesterov that the rate of convergence O(t 2) is optimal for the class of convex functions. In this work, we show that better convergence rates can be obtained with some additional geometrical conditions, such as Lojasiewicz property. More precisely, we prove the optimal convergence rates that can be obtained depending on the geometry of the function F to minimize. The convergence rates are new, and they shed new light on the behavior of Nesterov acceleration schemes.
Type de document :
Pré-publication, Document de travail
Rapport LAAS n° 18120. 2018
Liste complète des métadonnées

https://hal.archives-ouvertes.fr/hal-01786117
Contributeur : Aude Rondepierre <>
Soumis le : vendredi 7 décembre 2018 - 18:25:30
Dernière modification le : lundi 24 décembre 2018 - 10:16:27
Document(s) archivé(s) le : vendredi 8 mars 2019 - 13:09:54

Fichiers

analysis-ode-fista-v3.pdf
Fichiers produits par l'(les) auteur(s)

Identifiants

  • HAL Id : hal-01786117, version 3
  • ARXIV : 1805.05719

Citation

Jean François Aujol, Charles Dossal, Aude Rondepierre. OPTIMAL CONVERGENCE RATES FOR NESTEROV ACCELERATION. Rapport LAAS n° 18120. 2018. 〈hal-01786117v3〉

Partager

Métriques

Consultations de la notice

93

Téléchargements de fichiers

66