Aller au contenu
Wikipédia l'encyclopédie libre

Comparaison asymptotique

Un article de Wikipédia, l'encyclopédie libre.
(Redirigé depuis Notations de Landau)
Comparaison asymptotique des fonctions utilisées en informatique plus précisément en algorithme. On voit par exemple que la fonction exponentielle ( 2 n {\displaystyle 2^{n}} {\displaystyle 2^{n}}) croit plus vite que la fonction linéaire ( n {\displaystyle n} {\displaystyle n}).

En mathématiques, plus précisément en analyse, la comparaison asymptotique est une méthode permettant d'étudier le comportement d'une fonction.

En présence d'une fonction sans irrégularité particulière on peut par exemple étudier sa vitesse de croissance: ainsi la fonction exponentielle croit plus vite qu'une fonction linéaire.

Lorsque en revanche la fonction étudiée est plus erratique on peut par exemple étudier l'amplitude de ses oscillations: ainsi la fonction de reste du théorème des nombres premiers prend, de façon quantifiable, des valeurs de tailles arbitrairement grandes aussi bien positives que négatives.

La comparaison asymptotique permet d'étudier une fonction quelconque par rapport à une fonction considérée comme plus « simple ». Celle-ci est souvent choisie sur une échelle de référence, contenant en général au moins certaines fonctions dites élémentaires, en particulier les sommes et produits de polynômes, d'exponentielles et de logarithmes [1] . La comparaison s'effectue en l'infini ou alors au voisinage d'un point.

Le concept de comparaison asymptotique est aussi utilisé en informatique, par exemple pour décrire la complexité de certains algorithmes [2] . En effet, la comparaison asymptotique est intéressante en l'infini, car on s'intéresse au comportement d'un algorithme sur des données arbitrairement grandes. Cette méthode de comparaison est également employée en théorie analytique des nombres pour évaluer finement l'erreur commise en remplaçant une fonction irrégulière, comme celle comptant les nombres premiers, par une fonction de l'échelle choisie.

La méthode a été introduite par les travaux de Paul du Bois-Reymond à partir de 1872[1] ; pour faciliter les calculs et la présentation des résultats, diverses notations ont été développées, en particulier par Bachmann (1894), Landau (1909), Hardy (1910), Hardy et Littlewood (1914 et 1916), et Vinogradov (c. 1930).

Exemples de comparaison

[modifier | modifier le code ]

La relation de prépondérance

[modifier | modifier le code ]
Article détaillé: Négligeabilité.

Soit f et g les fonctions réelles définies par les formules f ( x ) = cos ⁡ ( x ) + 2 et g ( x ) = x . {\displaystyle f(x)=\cos(x)+2{\text{ et }}g(x)=x.} {\displaystyle f(x)=\cos(x)+2{\text{ et }}g(x)=x.}

Par une étude des deux fonctions, on sait que g prend des valeurs aussi grandes que l'on veut au voisinage de l'infini, tandis que f ne peut prendre des valeurs qu'entre 1 et 3. Le quotient g divisé par f au voisinage de l'infini ne cesse d'augmenter et n'est pas borné. Dans ce contexte, on peut dire que f est négligeable devant g, ou que g est prépondérante devant f, au voisinage de l'infini, on écrit (notation de Landau[3] ) :

f ( x ) = o ( g ( x ) ) ( x → ∞ ) {\displaystyle f(x)=o(g(x))\ (x\rightarrow \infty )} {\displaystyle f(x)=o(g(x))\ (x\rightarrow \infty )}

ou (notation de Hardy[1] ,[4] , désuète[5] )

f ( x ) ≺ g ( x ) ( x → ∞ ) . {\displaystyle f(x)\prec g(x)\ (x\rightarrow \infty ).} {\displaystyle f(x)\prec g(x)\ (x\rightarrow \infty ).}

La notation de Hardy permet d'enchaîner les relations de prépondérance, par exemple :

cos ⁡ ( x ) ≺ ln ⁡ ( x ) ≺ x ≺ x 2 ≺ exp ⁡ ( x ) ≺ x x ( x → ∞ ) . {\displaystyle \cos(x)\prec \ln(x)\prec x\prec x^{2}\prec \exp(x)\prec x^{x}\ (x\rightarrow \infty ).} {\displaystyle \cos(x)\prec \ln(x)\prec x\prec x^{2}\prec \exp(x)\prec x^{x}\ (x\rightarrow \infty ).}

Définition formelle lorsque la fonction g ne s'annule pas

[modifier | modifier le code ]

Pour définir formellement cette propriété on considère le comportement du quotient f g {\displaystyle {\frac {f}{g}}} {\displaystyle {\frac {f}{g}}}.

Soit a ∈ R ∪ { + ∞ ; − ∞ } . {\displaystyle a\in \mathbb {R} \cup \left\{+\infty;-\infty \right\}.} {\displaystyle a\in \mathbb {R} \cup \left\{+\infty ;-\infty \right\}.}

Soient f et g deux fonctions de la variable réelle x. On suppose que g ne s'annule pas sur un voisinage de a[6] . On dit que f est négligeable devant g, ou que g est prépondérante[7] devant f en a, et on note f ( x ) = o x → a ( g ( x ) ) {\displaystyle f(x)={\underset {\overset {x\rightarrow a}{}}{o}}(g(x))} {\displaystyle f(x)={\underset {\overset {x\rightarrow a}{}}{o}}(g(x))}, lorsque

f ( x ) g ( x ) ⟶ x → a 0. {\displaystyle {\frac {f(x)}{g(x)}}{\underset {\overset {x\rightarrow a}{}}{\longrightarrow }}0.} {\displaystyle {\frac {f(x)}{g(x)}}{\underset {\overset {x\rightarrow a}{}}{\longrightarrow }}0.}

Si le contexte est clair, on ne précise pas le domaine d'étude et on note : f ( x ) = o ( g ( x ) ) {\displaystyle f(x)=o(g(x))} {\displaystyle f(x)=o(g(x))}, voire f = o ( g ) {\displaystyle f=o(g)} {\displaystyle f=o(g)}. Cependant, la notation est toujours associée à un lieu a et au voisinage de ce lieu : être négligeable est un concept local.

Dans cette notation de Landau f ( x ) = o ( g ( x ) ) {\displaystyle f(x)=o(g(x))} {\displaystyle f(x)=o(g(x))} (parfois aussi f ( x ) ∈ o ( g ( x ) ) {\displaystyle f(x)\in o(g(x))} {\displaystyle f(x)\in o(g(x))}), le symbole o {\displaystyle o} {\displaystyle o} se lit petit o. La notation équivalente de Hardy est f ( x ) ≺ g ( x ) {\displaystyle f(x)\prec g(x)} {\displaystyle f(x)\prec g(x)}. On utilise aujourd'hui exclusivement la notation de Landau.

Propriétés

[modifier | modifier le code ]

Par ce qui peut sembler un abus de langage, on effectue des opérations sur les «petits o». En effet, on peut écrire :

  • o ( f ) + o ( f ) = o ( f ) {\displaystyle o(f)+o(f)=o(f)} {\displaystyle o(f)+o(f)=o(f)} ;
  • o ( f ) − o ( f ) = o ( f ) {\displaystyle o(f)-o(f)=o(f)} {\displaystyle o(f)-o(f)=o(f)}.

Dans les côtés gauche de chaque formule les deux symboles o ( f ) {\displaystyle o(f)} {\displaystyle o(f)} représentent des fonctions a priori différentes. La première formule se lit : "la somme de deux fonctions qui sont toutes deux des petits o ( f ) {\displaystyle o(f)} {\displaystyle o(f)} est une fonction qui est également un o ( f ) {\displaystyle o(f)} {\displaystyle o(f)}".

Exemples

[modifier | modifier le code ]
  • x 2 + 10000 = o x → ∞ ( x 3 ) {\displaystyle x^{2}+10000={\underset {\overset {x\rightarrow \infty }{}}{o}}(x^{3})} {\displaystyle x^{2}+10000={\underset {\overset {x\rightarrow \infty }{}}{o}}(x^{3})}
  • x n = o x → + ∞ ( e x ) {\displaystyle x^{n}={\underset {\overset {x\rightarrow +\infty }{}}{o}}(e^{x})} {\displaystyle x^{n}={\underset {\overset {x\rightarrow +\infty }{}}{o}}(e^{x})}
  • Pour toute fonction ε {\displaystyle \varepsilon } {\displaystyle \varepsilon }, telle que ε ( x ) ⟶ x → a 0 {\displaystyle \varepsilon (x){\underset {\overset {x\rightarrow a}{}}{\longrightarrow }}0} {\displaystyle \varepsilon (x){\underset {\overset {x\rightarrow a}{}}{\longrightarrow }}0}, on a : ε ( x ) = o x → a ( 1 ) {\displaystyle \varepsilon (x)={\underset {\overset {x\rightarrow a}{}}{o}}(1)} {\displaystyle \varepsilon (x)={\underset {\overset {x\rightarrow a}{}}{o}}(1)}

Équivalence

[modifier | modifier le code ]
Article détaillé: Équivalent.

Définition formelle

[modifier | modifier le code ]

Soit a ∈ R ∪ { + ∞ ; − ∞ } {\displaystyle a\in \mathbb {R} \cup \left\{+\infty;-\infty \right\}} {\displaystyle a\in \mathbb {R} \cup \left\{+\infty ;-\infty \right\}}.

Soient f et g deux fonctions de la variable réelle x. On suppose que g ne s'annule pas sur un voisinage de a. On dit que f est équivalente à g en a, ou que g équivaut à f en a, et on note

f ( x ) ∼ x → a g ( x ) {\displaystyle f(x){\underset {\overset {x\rightarrow a}{}}{\sim }}g(x)} {\displaystyle f(x){\underset {\overset {x\rightarrow a}{}}{\sim }}g(x)}, lorsque f ( x ) − g ( x ) = o x → a ( g ( x ) ) {\displaystyle f(x)-g(x)={\underset {\overset {x\rightarrow a}{}}{o}}(g(x))} {\displaystyle f(x)-g(x)={\underset {\overset {x\rightarrow a}{}}{o}}(g(x))}.

cos ⁡ x + x 20 + exp ⁡ ( x ) ∼ x → ∞ exp ⁡ ( x ) {\displaystyle \cos x+x^{20}+\exp(x){\underset {\overset {x\rightarrow \infty }{}}{\sim }}\exp(x)} {\displaystyle \cos x+x^{20}+\exp(x){\underset {\overset {x\rightarrow \infty }{}}{\sim }}\exp(x)}

Domination

[modifier | modifier le code ]

La notation grand O de Landau dénote le caractère dominé d'une fonction par rapport à une autre. Généralement, comme Paul Bachmann qui a introduit ce symbole en 1894, on utilise la lettre O majuscule (de l'allemand Ordnung, « ordre »). C'est beaucoup plus tard (1976), par analogie avec le symbole oméga majuscule Ω (voir plus bas), que Donald Knuth a discrètement suggéré de rebaptiser le symbole O du nom de la lettre omicron majuscule[8] (qui n'apparaît que dans le titre de son article), celle-ci étant rarement dessinée de manière clairement différente du O. Dans les deux cas, le symbole utilisé est distinct du symbole 0 (zéro).

Définition formelle

[modifier | modifier le code ]

Soient f et g deux fonctions de la variable réelle x. On dit que f est dominée par g en +∞, ou que g domine f en +∞, et on note (notation de Bachmann, 1894, ou de Landau, 1909)

f ( x ) = O ( g ( x ) ) ( x → ∞ ) , {\displaystyle f(x)=O(g(x))\ (x\rightarrow \infty ),} {\displaystyle f(x)=O(g(x))\ (x\rightarrow \infty ),}

ou (notation de Hardy[1] , 1910, désuète)

f ≼ g , {\displaystyle \ f\preccurlyeq g,} {\displaystyle \ f\preccurlyeq g,}

ou encore (notation de Vinogradov, années 1930)

f ( x ) ≪ g ( x ) ( x → ∞ ) , {\displaystyle f(x)\ll g(x)\ (x\rightarrow \infty ),} {\displaystyle f(x)\ll g(x)\ (x\rightarrow \infty ),}

lorsqu'il existe des constantes N et C telles que

∀ x > N | f ( x ) | ≤ C | g ( x ) | . {\displaystyle \forall x>N\qquad \left|f(x)\right|\leq C\left|g(x)\right|.} N\qquad \left|f(x)\right|\leq C\left|g(x)\right|.}"/>

Intuitivement, cela signifie que f ne croît pas plus vite que g.

De même, si a est un nombre réel, nous écrivons

f ( x ) = O x → a ( g ( x ) ) {\displaystyle f(x)={\underset {x\to a}{O}}(g(x))} {\displaystyle f(x)={\underset {x\to a}{O}}(g(x))}

s’il existe des constantes d> 0 et C telles que

∀ x | x − a | < d ⇒ | f ( x ) | ≤ C | g ( x ) | . {\displaystyle \forall x\qquad \left|x-a\right|<d\Rightarrow \left|f(x)\right|\leq C\left|g(x)\right|.} {\displaystyle \forall x\qquad \left|x-a\right|<d\Rightarrow \left|f(x)\right|\leq C\left|g(x)\right|.}

Ceci est équivalent, lorsque g ne s'annule pas, à lim sup x → a | f ( x ) g ( x ) | < ∞ . {\displaystyle \limsup _{x\to a}\left|{\frac {f(x)}{g(x)}}\right|<\infty .} {\displaystyle \limsup _{x\to a}\left|{\frac {f(x)}{g(x)}}\right|<\infty .}

  • 4 x 3 + 10000 x 2 = O x → ∞ ( x 3 ) . {\displaystyle 4x^{3}+10000x^{2}={\underset {x\to \infty }{O}}(x^{3}).} {\displaystyle 4x^{3}+10000x^{2}={\underset {x\to \infty }{O}}(x^{3}).}
  • x 3 = O x → ∞ ( 4 x 3 + 10000 x 2 ) . {\displaystyle x^{3}={\underset {x\to \infty }{O}}(4x^{3}+10000x^{2}).} {\displaystyle x^{3}={\underset {x\to \infty }{O}}(4x^{3}+10000x^{2}).}
  • En un point a, si f est négligeable devant g ou équivalente à g, alors elle est dominée par g.
  • Une fonction f est bornée sur un voisinage de a si et seulement si f ( x ) = O x → a ( 1 ) {\displaystyle f(x)={\underset {x\to a}{O}}(1)} {\displaystyle f(x)={\underset {x\to a}{O}}(1)}.

Absence de prépondérance et oscillations

[modifier | modifier le code ]

Notation Ω de Hardy et Littlewood (théorie des nombres)

[modifier | modifier le code ]

En 1914, Hardy et Littlewood ont introduit le nouveau symbole Ω[9] défini ainsi :

f ( x ) = Ω ( g ( x ) ) ( x → ∞ ) ⇔ lim sup x → ∞ | f ( x ) g ( x ) | > 0 {\displaystyle f(x)=\Omega (g(x))\ (x\rightarrow \infty )\;\Leftrightarrow \;\limsup _{x\to \infty }\left|{\frac {f(x)}{g(x)}}\right|>0} 0}"/>.

Les fonctions f et g sont supposées définies, et g positive, dans un voisinage de l'infini. Ainsi f ( x ) = Ω ( g ( x ) ) {\displaystyle f(x)=\Omega (g(x))} {\displaystyle f(x)=\Omega (g(x))} est la négation de f ( x ) = o ( g ( x ) ) {\displaystyle f(x)=o(g(x))} {\displaystyle f(x)=o(g(x))}.

En 1916, les mêmes auteurs introduisent les deux nouveaux symboles ΩR et ΩL[10] , définis de la façon suivante :

f ( x ) = Ω R ( g ( x ) ) ( x → ∞ ) ⇔ lim sup x → ∞ f ( x ) g ( x ) > 0 {\displaystyle f(x)=\Omega _{R}(g(x))\ (x\rightarrow \infty )\;\Leftrightarrow \;\limsup _{x\to \infty }{\frac {f(x)}{g(x)}}>0} 0}"/>;
f ( x ) = Ω L ( g ( x ) ) ( x → ∞ ) ⇔ lim inf x → ∞ f ( x ) g ( x ) < 0 {\displaystyle f(x)=\Omega _{L}(g(x))\ (x\rightarrow \infty )\;\Leftrightarrow \;\liminf _{x\to \infty }{\frac {f(x)}{g(x)}}<0} {\displaystyle f(x)=\Omega _{L}(g(x))\ (x\rightarrow \infty )\;\Leftrightarrow \;\liminf _{x\to \infty }{\frac {f(x)}{g(x)}}<0}.

Comme avant, les fonctions f et g sont supposées définies, et g positive, dans un voisinage de l'infini. Ainsi, f ( x ) = Ω R ( g ( x ) ) {\displaystyle f(x)=\Omega _{R}(g(x))} {\displaystyle f(x)=\Omega _{R}(g(x))} est la négation de f ( x ) < o ( g ( x ) ) {\displaystyle f(x)<o(g(x))} {\displaystyle f(x)<o(g(x))}, et f ( x ) = Ω L ( g ( x ) ) {\displaystyle f(x)=\Omega _{L}(g(x))} {\displaystyle f(x)=\Omega _{L}(g(x))} la négation de f ( x ) > o ( g ( x ) ) {\displaystyle f(x)>o(g(x))} o(g(x))}"/>.

Contrairement à ce qu'affirmera plus tard D.E. Knuth [8] , Edmund Landau a également utilisé ces trois symboles en 1924[11] .

Ces notations de Hardy et Littlewood sont des prototypes, qui après Landau semblent n'avoir jamais été utilisés tels quels : ΩR est devenu Ω+, et ΩL est devenu Ω–.

Ces trois symboles, à savoir Ω {\displaystyle \Omega } {\displaystyle \Omega }, Ω + {\displaystyle \Omega _{+}} {\displaystyle \Omega _{+}} et Ω − {\displaystyle \Omega _{-}} {\displaystyle \Omega _{-}}, sont maintenant couramment utilisés en théorie analytique des nombres, de même que f ( x ) = Ω ± ( g ( x ) ) {\displaystyle f(x)=\Omega _{\pm }(g(x))} {\displaystyle f(x)=\Omega _{\pm }(g(x))} pour signifier que les conditions f ( x ) = Ω + ( g ( x ) ) {\displaystyle f(x)=\Omega _{+}(g(x))} {\displaystyle f(x)=\Omega _{+}(g(x))} et f ( x ) = Ω − ( g ( x ) ) {\displaystyle f(x)=\Omega _{-}(g(x))} {\displaystyle f(x)=\Omega _{-}(g(x))} sont toutes deux satisfaites.

Il est clair que dans chacune de ces définitions on peut remplacer ∞ par –∞ ou par un nombre réel.

On a

sin ⁡ x = Ω ( 1 ) ( x → ∞ ) {\displaystyle \sin x=\Omega (1)\ (x\rightarrow \infty )} {\displaystyle \sin x=\Omega (1)\ (x\rightarrow \infty )}

et plus précisément,

sin ⁡ x = Ω ± ( 1 ) ( x → ∞ ) . {\displaystyle \sin x=\Omega _{\pm }(1)\ (x\rightarrow \infty ).} {\displaystyle \sin x=\Omega _{\pm }(1)\ (x\rightarrow \infty ).}

On a

sin ⁡ x + 1 = Ω ( 1 ) ( x → ∞ ) {\displaystyle \sin x+1=\Omega (1)\ (x\rightarrow \infty )} {\displaystyle \sin x+1=\Omega (1)\ (x\rightarrow \infty )}

et plus précisément,

sin ⁡ x + 1 = Ω + ( 1 ) ( x → ∞ ) ; {\displaystyle \sin x+1=\Omega _{+}(1)\ (x\rightarrow \infty )~;} {\displaystyle \sin x+1=\Omega _{+}(1)\ (x\rightarrow \infty )~;}

cependant,

sin ⁡ x + 1 ≠ Ω − ( 1 ) ( x → ∞ ) . {\displaystyle \sin x+1\not =\Omega _{-}(1)\ (x\rightarrow \infty ).} {\displaystyle \sin x+1\not =\Omega _{-}(1)\ (x\rightarrow \infty ).}

Deux définitions incompatibles

[modifier | modifier le code ]

Il est important de souligner le fait que l'écriture

f ( x ) = Ω ( g ( x ) ) ( x → ∞ ) {\displaystyle f(x)=\Omega (g(x))\ (x\rightarrow \infty )} {\displaystyle f(x)=\Omega (g(x))\ (x\rightarrow \infty )}

possède en mathématiques deux définitions incompatibles, toutes les deux très répandues, l'une en théorie analytique des nombres, qu'on vient de présenter, l'autre en théorie de la complexité des algorithmes. Lorsque ces deux disciplines se rencontrent, cette situation est susceptible de créer une grande confusion.

La définition de Knuth

[modifier | modifier le code ]

En 1976, Knuth publie un article[8] dont le but principal est de justifier son utilisation du même symbole Ω pour décrire une autre propriété que celle décrite par Hardy et Littlewood. Il tente de convaincre le lecteur que la définition de Hardy et Littlewood n'est quasiment jamais utilisée (ce qui, même en 1976, est faux depuis en tout cas 25 ans[12] ). Il va jusqu'à prétendre que Landau ne l'a jamais utilisée (ce qui est également faux[11] ). Il ressent impérativement le besoin d'une autre notion («For all the applications I have seen so far in computer science, a stronger requirement [...] is much more appropriate»), et a décidé que l'utilisation du symbole Ω doit être réservé pour la décrire. Il est fortement contrarié par l'ancienne définition («Unfortunately, Hardy and Littlewood didn't define Ω(f(n)) as I wanted to»).

Il prend donc le risque de créer la confusion, et définit

f ( x ) = Ω ( g ( x ) ) ⇔ g ( x ) = O ( f ( x ) ) {\displaystyle f(x)=\Omega (g(x))\Leftrightarrow g(x)=O(f(x))} {\displaystyle f(x)=\Omega (g(x))\Leftrightarrow g(x)=O(f(x))}[13] .

Utilisation des comparaisons

[modifier | modifier le code ]

Développements limités

[modifier | modifier le code ]

En mathématiques, il est souvent important de garder un œil sur le terme d'erreur d'une approximation. Cette notation est particulièrement utilisée dès que l'on a affaire à des développements limités et à des calculs d'équivalents. Par exemple, le développement de la fonction exponentielle à l'ordre 2 peut aussi s'écrire :

e x = 1 + x + 1 2 x 2 + o ( x 2 ) q u a n d x → 0 {\displaystyle e^{x}=1+x+{\frac {1}{2}}x^{2}+o(x^{2})\ {\rm {quand}}\ x\rightarrow 0} {\displaystyle e^{x}=1+x+{\frac {1}{2}}x^{2}+o(x^{2})\ {\rm {quand}}\ x\rightarrow 0}

pour exprimer le fait que l'erreur, la différence e x − ( 1 + x + x 2 2 ) {\displaystyle e^{x}-\left(1+x+{\frac {x^{2}}{2}}\right)} {\displaystyle e^{x}-\left(1+x+{\frac {x^{2}}{2}}\right)}, est négligeable devant x 2 {\displaystyle x^{2}} {\displaystyle x^{2}} quand x {\displaystyle x} {\displaystyle x} tend vers 0.

Il faut préciser que le nombre d'opérandes dans ce genre d'écriture doit être borné par une constante qui ne dépend pas de la variable : par exemple l'assertion o ( x ) + o ( x ) + ⋯ + o ( x ) = o ( x ) {\displaystyle o(x)+o(x)+\dots +o(x)=o(x)} {\displaystyle o(x)+o(x)+\dots +o(x)=o(x)} est évidemment fausse si les points de suspension cachent un nombre de termes qui n'est pas borné lorsque x varie.

Échelle de comparaison

[modifier | modifier le code ]

Voici une liste de catégories de fonctions couramment utilisées en analyse. La variable (notée ici n) tend vers +∞ et c est une constante réelle arbitraire. Lorsque c est une constante supérieure à 1, les fonctions apparaissent dans cette liste par ordre croissant de grandeur.

notation grandeur au plus
O(1) module majoré par une constante
O(log(n)) logarithmique
O((log(n))c) (polylogarithmique si c est entier positif)
O(n) linéaire
O(n log(n)) parfois appelée « linéarithmique »
O(n logc(n)) parfois appelé « quasi linéaire »
O(n2) quadratique
O(nc) (polynomiale si c est entier positif)
O(cn) (exponentielle si c est positif, parfois « géométrique »)
O(n!) factorielle

O(nc) et O(cn) sont très différents. Le dernier autorise une croissance bien plus rapide, et ce pour n'importe quelle constante c> 1. Une fonction qui croît plus rapidement que n'importe quel polynôme est dite superpolynomiale . Une fonction qui croît plus lentement que toute exponentielle est dite sous-exponentielle . Il existe des fonctions à la fois superpolynomiales et sous-exponentielles, comme la fonction nlog(n).

Remarquons aussi que O(log n) est exactement identique à O(log(nc)), puisque ces deux logarithmes sont multiples l'un de l'autre par un facteur constant et que la notation grand O « ignore » les constantes multiplicatives. De manière analogue, les logarithmes dans des bases constantes différentes sont équivalents.

La liste précédente est utile à cause de la propriété suivante : si une fonction f est une somme de fonctions, et si une des fonctions de la somme croît plus vite que les autres, alors elle détermine l'ordre de croissance de f(n).

Exemple :

si f(n) = 10 log(n) + 5 (log(n))3 + 7 n + 3 n2 + 6 n3,
alors f(n) = O(n3).
Article détaillé: Échelle de comparaison.

Fonction à plusieurs variables

[modifier | modifier le code ]

Cette notation peut aussi être utilisée avec des fonctions de plusieurs variables :

L'écriture : f ( n , m ) = n 2 + m 3 + O ( n + m ) {\displaystyle f(n,m)=n^{2}+m^{3}+O(n+m)\;} {\displaystyle f(n,m)=n^{2}+m^{3}+O(n+m)\;} quand m , n → + ∞ {\displaystyle m,n\to +\infty } {\displaystyle m,n\to +\infty }
correspond à la proposition : ∃ C ∃ N ∀ n , m > N | f ( n , m ) − n 2 − m 3 | ≤ C ( n + m ) {\displaystyle \exists C\quad \exists N\quad \forall n,m>N\qquad |f(n,m)-n^{2}-m^{3}|\leq C(n+m)} N\qquad |f(n,m)-n^{2}-m^{3}|\leq C(n+m)}"/>

Pour certains, cette notation abuse du symbole d'égalité, puisqu'elle semble violer l'axiome d'égalité : « des choses égales à la même chose sont égales entre elles » (autrement dit, avec cette notation, l'égalité n'est plus une relation d'équivalence). Mais on peut également considérer que dans l'écriture

f ( n , m ) − n 2 − m 3 = O ( n + m ) , {\displaystyle f(n,m)-n^{2}-m^{3}=O(n+m),} {\displaystyle f(n,m)-n^{2}-m^{3}=O(n+m),}

la notation "=O" désigne un seul opérateur, dans l'écriture duquel le signe "=" n'a pas d'existence propre indépendante (et en particulier ne désigne pas une relation d'équivalence). Il n'y a dans ce cas plus d'abus de notation, mais évidemment toujours un risque de confusion. Il est également possible de définir O(g(x)) comme un ensemble de fonctions, dont les éléments sont toutes les fonctions qui ne grandissent pas plus vite que g, et d'utiliser les notations ensemblistes pour indiquer si une fonction donnée est un élément de l'ensemble ainsi défini. Par exemple :

f ( n , m ) − n 2 − m 3 ∈ O ( n + m ) , {\displaystyle f(n,m)-n^{2}-m^{3}\in O(n+m),} {\displaystyle f(n,m)-n^{2}-m^{3}\in O(n+m),}

Les deux conventions sont couramment utilisées mais la première (et plus ancienne) est jusqu'au début du XXIe siècle la plus souvent rencontrée. Pour éviter ce problème on utilise (tout aussi couramment) la notation de Vinogradov (voir ci-dessous).

f ( n , m ) − n 2 − m 3 ≪ n + m , {\displaystyle f(n,m)-n^{2}-m^{3}\ll n+m,} {\displaystyle f(n,m)-n^{2}-m^{3}\ll n+m,}

Un autre problème est qu'il faut clairement indiquer la variable par rapport à laquelle le comportement asymptotique est examiné. Une affirmation telle que f ( n , m ) = O ( m n ) {\displaystyle f(n,m)=O(m^{n})\;} {\displaystyle f(n,m)=O(m^{n})\;} n'a pas le même sens selon qu'elle est suivie de « quand m , n → + ∞ {\displaystyle m,n\to +\infty } {\displaystyle m,n\to +\infty } » ou, par exemple, de « (pour tout m {\displaystyle m} {\displaystyle m} fixé) quand n → + ∞ {\displaystyle n\to +\infty } {\displaystyle n\to +\infty } ».

La famille de notations de Landau O, o, Ω, ω, Θ, ~

[modifier | modifier le code ]
Notation Nom Description informelle Lorsque n → ∞ {\displaystyle n\to \infty } {\displaystyle n\to \infty }, à partir d'un certain rang... Définition rigoureuse
f ( n ) = O ( g ( n ) ) {\displaystyle f(n)=O(g(n))} {\displaystyle f(n)=O(g(n))}

ou

f ( n ) ∈ O ( g ( n ) ) {\displaystyle f(n)\in O(g(n))} {\displaystyle f(n)\in O(g(n))}

 Grand O
(Grand Omicron[8] )

La fonction |f | est bornée par la fonction |g| asymptotiquement,
à un facteur près

 | f ( n ) | ≤ | g ( n ) | ⋅ k {\displaystyle |f(n)|\leq |g(n)|\cdot k} {\displaystyle |f(n)|\leq |g(n)|\cdot k} pour un k> 0 ∃ k > 0 , ∃ n 0 ∀ n > n 0 | f ( n ) | ≤ | g ( n ) | ⋅ k {\displaystyle \exists k>0,\exists n_{0}\;\forall n>n_{0}\;|f(n)|\leq |g(n)|\cdot k} 0,\exists n_{0}\;\forall n>n_{0}\;|f(n)|\leq |g(n)|\cdot k}"/>
f ( n ) ≍ g ( n ) {\displaystyle f(n)\asymp g(n)} {\displaystyle f(n)\asymp g(n)}

ou

f ( n ) ∈ Θ ( g ( n ) ) {\displaystyle f(n)\in \Theta (g(n))} {\displaystyle f(n)\in \Theta (g(n))}

 de l'ordre de ;
Grand Theta		 Les fonctions f et g sont du même ordre de grandeur asymptotiquement | g ( n ) | ⋅ k 1 ≤ | f ( n ) | ≤ | g ( n ) | ⋅ k 2 {\displaystyle |g(n)|\cdot k_{1}\leq |f(n)|\leq |g(n)|\cdot k_{2}} {\displaystyle |g(n)|\cdot k_{1}\leq |f(n)|\leq |g(n)|\cdot k_{2}}
pour un k1> 0, et un k2> 0 		∃ k 1 , k 2 > 0 , ∃ n 0 ∀ n > n 0 {\displaystyle \exists k_{1},k_{2}>0,\exists n_{0}\;\forall n>n_{0}} 0,\exists n_{0}\;\forall n>n_{0}}"/>
| g ( n ) | ⋅ k 1 < | f ( n ) | < | g ( n ) | ⋅ k 2 {\displaystyle |g(n)|\cdot k_{1}<|f(n)|<|g(n)|\cdot k_{2}} {\displaystyle |g(n)|\cdot k_{1}<|f(n)|<|g(n)|\cdot k_{2}}
f ( n ) = o ( g ( n ) ) {\displaystyle f(n)=o(g(n))} {\displaystyle f(n)=o(g(n))}

ou

f ( n ) ∈ o ( g ( n ) ) {\displaystyle f(n)\in o(g(n))} {\displaystyle f(n)\in o(g(n))}

 Petit o f est négligeable devant g asymptotiquement | f ( n ) | ≤ | g ( n ) | ⋅ ε {\displaystyle |f(n)|\leq |g(n)|\cdot \varepsilon } {\displaystyle |f(n)|\leq |g(n)|\cdot \varepsilon }, quel que soit ε {\displaystyle \varepsilon } {\displaystyle \varepsilon }> 0 (fixé). ∀ ε > 0 ∃ n 0 ∀ n > n 0 | f ( n ) | ≤ | g ( n ) | ⋅ ε {\displaystyle \forall \varepsilon>0\;\exists n_{0}\;\forall n>n_{0}\;|f(n)|\leq |g(n)|\cdot \varepsilon } 0\;\exists n_{0}\;\forall n>n_{0}\;|f(n)|\leq |g(n)|\cdot \varepsilon }"/>
f ( n ) = Ω ( g ( n ) ) {\displaystyle f(n)=\Omega (g(n))} {\displaystyle f(n)=\Omega (g(n))}

et

f ( n ) ∈ Ω ( g ( n ) ) {\displaystyle f(n)\in \Omega (g(n))} {\displaystyle f(n)\in \Omega (g(n))}

 Grand Omega Deux définitions :

En théorie des nombres :
f n'est pas négligeable devant g asymptotiquement

En théorie des nombres :

| f ( n i ) | ≥ | g ( n i ) | ⋅ k {\displaystyle |f(n_{i})|\geq |g(n_{i})|\cdot k} {\displaystyle |f(n_{i})|\geq |g(n_{i})|\cdot k} pour un k> 0
et pour une suite de nombres n i → ∞ {\displaystyle n_{i}\rightarrow \infty } {\displaystyle n_{i}\rightarrow \infty }

En théorie des nombres :

∃ k > 0 , ∀ n 0 ∃ n > n 0 | g ( n ) | ⋅ k ≤ | f ( n ) | {\displaystyle \exists k>0,\forall n_{0}\;\exists n>n_{0}\;|g(n)|\cdot k\leq |f(n)|} 0,\forall n_{0}\;\exists n>n_{0}\;|g(n)|\cdot k\leq |f(n)|}"/>

En théorie des algorithmes :

f est minorée par g (à un facteur près)
(ou f domine g)

 En théorie des algorithmes :

| f ( n ) | ≥ | g ( n ) | ⋅ k {\displaystyle |f(n)|\geq |g(n)|\cdot k} {\displaystyle |f(n)|\geq |g(n)|\cdot k} pour un k> 0

En théorie des algorithmes :

∃ k > 0 , ∃ n 0 ∀ n > n 0 | g ( n ) | ⋅ k ≤ | f ( n ) | {\displaystyle \exists k>0,\exists n_{0}\;\forall n>n_{0}\;|g(n)|\cdot k\leq |f(n)|} 0,\exists n_{0}\;\forall n>n_{0}\;|g(n)|\cdot k\leq |f(n)|}"/>

f ( n ) = Ω + ( g ( n ) ) {\displaystyle f(n)=\Omega _{+}(g(n))} {\displaystyle f(n)=\Omega _{+}(g(n))} Omega plus

f n'est pas bornée supérieurement par un petit o de g

 f ( n i ) ≥ | g ( n i ) | ⋅ k {\displaystyle f(n_{i})\geq |g(n_{i})|\cdot k} {\displaystyle f(n_{i})\geq |g(n_{i})|\cdot k} pour un k> 0
et

pour une suite de nombres n i → ∞ {\displaystyle n_{i}\rightarrow \infty } {\displaystyle n_{i}\rightarrow \infty }

 ∃ k > 0 , ∀ n 0 ∃ n > n 0 | g ( n ) | ⋅ k ≤ f ( n ) {\displaystyle \exists k>0,\forall n_{0}\;\exists n>n_{0}\;|g(n)|\cdot k\leq f(n)} 0,\forall n_{0}\;\exists n>n_{0}\;|g(n)|\cdot k\leq f(n)}"/>
f ( n ) = Ω − ( g ( n ) ) {\displaystyle f(n)=\Omega _{-}(g(n))} {\displaystyle f(n)=\Omega _{-}(g(n))} Omega moins

f n'est pas bornée inférieurement par un petit o de g

 f ( n i ) ≤ − | g ( n i ) | ⋅ k {\displaystyle f(n_{i})\leq -|g(n_{i})|\cdot k} {\displaystyle f(n_{i})\leq -|g(n_{i})|\cdot k} pour un k> 0 et

pour une suite de nombres n i → ∞ {\displaystyle n_{i}\rightarrow \infty } {\displaystyle n_{i}\rightarrow \infty }

 ∃ k > 0 , ∀ n 0 ∃ n > n 0 − | g ( n ) | ⋅ k ≥ f ( n ) {\displaystyle \exists k>0,\forall n_{0}\;\exists n>n_{0}\;-|g(n)|\cdot k\geq f(n)} 0,\forall n_{0}\;\exists n>n_{0}\;-|g(n)|\cdot k\geq f(n)}"/>
f ( n ) = Ω ± ( g ( n ) ) {\displaystyle f(n)=\Omega _{\pm }(g(n))} {\displaystyle f(n)=\Omega _{\pm }(g(n))} Omega plus et moins

f est un Omega plus et un Omega moins de g

 f ( n ) = Ω + ( g ( n ) ) {\displaystyle f(n)=\Omega _{+}(g(n))} {\displaystyle f(n)=\Omega _{+}(g(n))} et f ( n ) = Ω − ( g ( n ) ) {\displaystyle f(n)=\Omega _{-}(g(n))} {\displaystyle f(n)=\Omega _{-}(g(n))}
f ( n ) ∈ ω ( g ( n ) ) {\displaystyle f(n)\in \omega (g(n))} {\displaystyle f(n)\in \omega (g(n))} Petit Omega f domine g asymptotiquement | f ( n ) | ≥ | g ( n ) | ⋅ k {\displaystyle |f(n)|\geq |g(n)|\cdot k} {\displaystyle |f(n)|\geq |g(n)|\cdot k} pour tout k> 0 ∀ k > 0 ∃ n 0 ∀ n > n 0 | g ( n ) | ⋅ k ≤ | f ( n ) | {\displaystyle \forall k>0\;\exists n_{0}\;\forall n>n_{0}\;|g(n)|\cdot k\leq |f(n)|} 0\;\exists n_{0}\;\forall n>n_{0}\;|g(n)|\cdot k\leq |f(n)|}"/>
f ( n ) ∼ g ( n ) {\displaystyle f(n)\sim g(n)\!} {\displaystyle f(n)\sim g(n)\!} équivalent à f est approximativement égale à g asymptotiquement | f ( n ) − g ( n ) | < ε | g ( n ) | {\displaystyle |f(n)-g(n)|<\varepsilon |g(n)|} {\displaystyle |f(n)-g(n)|<\varepsilon |g(n)|}, quel que soit ε {\displaystyle \varepsilon } {\displaystyle \varepsilon }> 0 (fixé). ∀ ε > 0 ∃ n 0 ∀ n > n 0 | f ( n ) − g ( n ) | < ε | g ( n ) | {\displaystyle \forall \varepsilon>0\;\exists n_{0}\;\forall n>n_{0}\;|f(n)-g(n)|<\varepsilon |g(n)|} 0\;\exists n_{0}\;\forall n>n_{0}\;|f(n)-g(n)|<\varepsilon |g(n)|}"/>

Après grand-O, les notations Θ et Ω sont les plus utilisées en informatique ; le petit-o est courant en mathématiques mais plus rare en informatique. Le ω est peu utilisé.

Une autre notation parfois utilisée en informatique est Õ (soft-O en anglais) qui signifie grand-o à un facteur poly-logarithmique près. Autrement dit, f(n) = Õ(g(n)) signifie qu'il existe un entier k tel que f(n) = O(g(n) logk g(n)).

La notation f(x) ≍ {\displaystyle \asymp } {\displaystyle \asymp }g(x), introduite par Hardy en 1910[1] , est couramment utilisée en théorie des nombres[4] ,[14] . Elle a la même signification que f(x) = Θ(g(x)), proposée par Knuth en 1976[8] .

Systèmes de notations

[modifier | modifier le code ]

Notations de Landau

[modifier | modifier le code ]

Les notations de Landau portent le nom du mathématicien allemand spécialisé en théorie des nombres Edmund Landau qui utilisa le symbole O[3] , introduit primitivement par Paul Bachmann [15] , et s'en inspira pour inventer le symbole o. Il n'utilisa le symbole Ω que dans un seul article en 1924[11] , pour signifier ≠ o ; cette notation avait été introduite (avec la même signification) en 1914 par G. H. Hardy et J. E. Littlewood[9] ; depuis, Ω est couramment utilisé en théorie des nombres, mais exclusivement dans ce même sens, et jamais dans le deuxième sens (introduit par Knuth) indiqué dans le tableau ci-dessus. Dans le même article Landau utilise les symboles ΩR et ΩL, également dus à Hardy et Littlewood[10] , (et depuis notés Ω+ et Ω–) pour signifier ≮ o {\displaystyle \not <o} {\displaystyle \not <o}, respectivement ≯ o {\displaystyle \not>o} o}"/>. Il utilise bien sûr également la notation ∼, mais jamais ω ou Θ.

Des notations de Hardy

[modifier | modifier le code ]

Les notations de Hardy ≼ {\displaystyle \preccurlyeq } {\displaystyle \preccurlyeq } et ≺ {\displaystyle \prec } {\displaystyle \prec }, introduites par G. H. Hardy dans son tract de 1910 Orders of Infinity[1] (parmi d'autres notations), jouent le même rôle que celles de Landau pour la comparaison asymptotique des fonctions.

En notation de Landau, on peut les définir comme suit :

f ≼ g ⟺ f = O ( g ) {\displaystyle f\preccurlyeq g\iff f=O(g)} {\displaystyle f\preccurlyeq g\iff f=O(g)}

et

f ≺ g ⟺ f = o ( g ) . {\displaystyle f\prec g\iff f=o(g).} {\displaystyle f\prec g\iff f=o(g).}

Ces notations de Hardy sont désuètes et Hardy lui-même les a rapidement abandonnées ; il utilise les notations de Landau dans tous ses articles (soit près de 400 !) et dans ses livres[16] sauf dans son tract de 1910 et dans 3 articles (1910-1913). On peut noter que si Hardy a introduit dans son tract de 1910 quelques autres symboles pour la comparaison asymptotique des fonctions, il n'a par contre jamais défini ou utilisé la notation ≪ {\displaystyle \ll } {\displaystyle \ll } (ou ≺ ≺ {\displaystyle \prec \!\!\prec } {\displaystyle \prec \!\!\prec }), qu'on doit à Vinogradov.

Notation de Vinogradov

[modifier | modifier le code ]

Le théoricien des nombres russe Ivan Matveyevich Vinogradov introduisit dans les années 1930[17] la notation qui porte son nom,

f ≪ g ⟺ f = O ( g ) {\displaystyle f\ll g\iff f=O(g)} {\displaystyle f\ll g\iff f=O(g)}.

La notation ≪ de Vinogradov est couramment utilisée en théorie des nombres à la place de O ; parfois même les deux notations sont utilisées indifféremment dans le même article.

Notation L

[modifier | modifier le code ]
Article détaillé: Notation L.

En 1982, Carl Pomerance a introduit une nouvelle notation pour abréger les fonctions complexes intervenant dans l'étude asymptotique de la complexité des algorithmes. Ainsi, par exemple, une fonction f appartient à la classe L n [ α , c ] {\displaystyle L_{n}[\alpha ,c]} {\displaystyle L_{n}[\alpha ,c]} si on a f = exp ⁡ ( ( c + o ( 1 ) ) log ⁡ ( n ) α ( log ⁡ log ⁡ n ) 1 − α ) {\displaystyle f=\exp \left((c+o(1))\log(n)^{\alpha }(\log \log n)^{1-\alpha }\right)} {\displaystyle f=\exp \left((c+o(1))\log(n)^{\alpha }(\log \log n)^{1-\alpha }\right)} ; l'exponentielle « écarte » suffisamment les fonctions pour qu'il ne soit pas possible de ramener cette notation à la forme f = O ( g ) {\displaystyle f=O(g)} {\displaystyle f=O(g)} par exemple.

Notes et références

[modifier | modifier le code ]
(en) Cet article est partiellement ou en totalité issu de l’article de Wikipédia en anglais intitulé «Big O notation» (voir la liste des auteurs).
  1. 1 2 3 4 5 6 (en) G. H. Hardy, « The "Infinitärcalcül" of Paul du Bois-Reymond », Cambridge Tracts in Mathematics, 12, 1910, deuxième édition 1924. Lire en ligne [PDF].
  2. ↑ Algorithmique, (lire en ligne)
  3. 1 2 (de) Edmund Landau, Handbuch der Lehre von der Verteilung der Primzahlen, Berlin 1909, p. 883.
  4. 1 2 (en) G. H. Hardy et E. M. Wright, An Introduction to the Theory of Numbers (1re éd. 1938) [détail des éditions ], 4e éd., p. 7.
  5. ↑ Quoique toujours mentionnée dans la 4e édition du Hardy and Wright, p. 7, comme étant occasionnellement utilisée, elle n'est en fait jamais employée dans la suite de l'ouvrage, où les auteurs recourent systématiquement à la notation équivalente o. Hardy lui-même n'a plus jamais utilisé cette notation dans ses travaux publiés après 1913.
  6. ↑ Pour éviter cette condition, on peut remplacer la définition qui suit par "On dit que f ( x ) = o x → a ( g ( x ) ) {\displaystyle f(x)={\underset {\overset {x\rightarrow a}{}}{o}}(g(x))} {\displaystyle f(x)={\underset {\overset {x\rightarrow a}{}}{o}}(g(x))}, s'il existe une fonction ε ( x ) {\displaystyle \epsilon (x)} {\displaystyle \epsilon (x)} telle que f ( x ) = ε ( x ) g ( x ) {\displaystyle f(x)=\epsilon (x)g(x)} {\displaystyle f(x)=\epsilon (x)g(x)} et lim x → a ε ( x ) = 0 {\displaystyle \lim _{x\to a}\epsilon (x)=0} {\displaystyle \lim _{x\to a}\epsilon (x)=0}" ; mais cet élargissement de la définition n'a que peu d'intérêt pratique.
  7. ↑ E. Ramis, C. Deschamp et J. Odoux, Cours de mathématiques spéciales, tome 3, p. 148
  8. 1 2 3 4 5 (en) Donald Knuth, « Big Omicron and big Omega and big Theta », SIGACT News, avril-juin 1976, p. 18-24 [lire en ligne ] [PDF].
  9. 1 2 (en) G. H. Hardy et J. E. Littlewood, « Some problems of Diophantine approximation », Acta Mathematica , vol. 37, 1914, p. 225
  10. 1 2 (en) G. H. Hardy et J. E. Littlewood, « Contribution to the theory of the Riemann zeta-function and the theory of the distribution of primes », Acta Mathematica , vol. 41, 1916.
  11. 1 2 3 (de) E. Landau, « Über die Anzahl der Gitterpunkte in gewissen Bereichen. IV », Nachr. Gesell. Wiss. Gött. Math-phys. Kl., 1924, p. 137-150
  12. ↑ (en) E. C. Titchmarsh, The Theory of the Riemann Zeta-Function, Oxford, Clarendon Press, 1951
  13. ↑ Il se justifie en écrivant : « Although I have changed Hardy and Littlewood's definition of Ω, I feel justified in doing so because their definition is by no mean in wide use, and because there are other ways to say what they want to say in the comparatively rare cases when their definition applies. »
  14. ↑ Gérald Tenenbaum, Introduction à la théorie analytique et probabiliste des nombres, Belin, , « Notations ».
  15. ↑ Zahlentheorie, tome 2, 1894, p. 402.
  16. ↑ Voir par exemple (en) G. H. Hardy et E. M. Wright, An Introduction to the Theory of Numbers (1re éd. 1938) [détail des éditions ].
  17. ↑ Voir par exemple « Une nouvelle estimation pour G(n) dans le problème de Waring » (en russe), Doklady Akademii Nauk SSSR, vol. 5, n° 5-6, 1934, p. 249-253. Traduction en anglais dans : Selected works / Ivan Matveevič Vinogradov ; prepared by the Steklov Mathematical Institute of the Academy of Sciences of the USSR on the occasion of his 90th birthday, Springer-Verlag, 1985.

Voir aussi

[modifier | modifier le code ]

Articles connexes

[modifier | modifier le code ]

Liens externes

[modifier | modifier le code ]

(en) Big-O Cheat Sheet, un site répertoriant une classification des complexités algorithmiques par domaine.

Ce document provient de « https://fr.wikipedia.org/w/index.php?title=Comparaison_asymptotique&oldid=236716534 ».

AltStyle によって変換されたページ (->オリジナル) /