Plus on est de threads, plus on rit

lz4 1.11 permet de paralléliser le traitement des données pour augmenter les performances. La 1.10 le permettait déjà, dans certains cas. Quels gains ? Quelles différences entre les deux versions ? Next vous explique tout, tests et chiffres à l’appui.

Le dépôt GitHub officiel de cet algorithme de compression présente cette mise à jour 1.11 comme « majeure » avec l’intégration de plus de 850 commits. « Sa fonctionnalité principale est la compression multithread, désormais directement intégrée à la bibliothèque. Cette version est également nettement plus rapide sur les petites données, notamment avec des dictionnaires, et inclut un grand nombre de corrections pour certains scénarios ».

lz4 vs liblz4 : les différences, les changements dans la 1.11

Si vous avez un peu suivi lz4, vous avez certainement déjà remarqué que la version 1.10, disponible depuis juillet 2024, prenait déjà en charge les multicœurs pour optimiser les performances. Quoi de neuf alors dans la 1.11 mise en ligne plus de deux ans après la précédente mouture ?

Les développeurs en charge du projet rappellent que, en effet, « la version 1.10.0 a introduit la compression multithread dans la ligne de commande lz4, mais les applications utilisant liblz4 n’en bénéficiaient pas ». Désormais, l’API lz4frame de liblz4 peut aussi profiter du multithreading (via le paramètre LZ4F_preferences_t.nbWorkers), bien qu’en mode expérimental pour le moment. Cette API est notamment utilisée pour des intégrations de lz4 dans des applications.

Des gains réels avec la version 1.11

Afin de voir les différences, de comprendre le fonctionnement et de tester plus largement les optimisations de lz4 1.11, nous avons relancé une série de tests sur notre protocole maison. Il comporte pour rappel 11 catégories de données, allant des images aux fichiers CSV en passant par des MP3, des PDF, du « vrac », etc. Les fichiers sont compressés individuellement avec un traitement depuis un disque virtuel créé en mémoire vive pour ne pas dépendre des performances du stockage.

• [Comparatif Next] 30 algorithmes de compression passés au crible

Avant d’entrer dans les détails, voici les grandes lignes de la conclusion de nos tests. lz4 en version 1.11 avec sa commande de base permet de gagner jusqu’à 15 % de vitesse. Mais c’est évidemment l’API lz4frame (via liblz4) qui profite pleinement de la version 1.11 avec des performances multipliées jusqu’à x9 grâce au multithreading.

Titre certifié conforme à la loi de Betteridge

La question parait certainement saugrenue aux spécialistes, mais elle se pose néanmoins pour le grand public. Réponse courte et directe : non. Par contre, du côté de Microsoft et de Sony, de grandes manœuvres sont certainement en cours pour se préparer à une déferlante de joueurs.

La franchise a des dizaines de millions de fans, qui attendent avec impatience ce sixième volet. Depuis 2013, date de lancement de GTA V, l’éditeur Take-Two a écoulé plus de 225 millions d’exemplaires du jeu sur pas moins de trois générations de consoles. Au total, la franchise s’approche des 500 millions.

Notre scénario : le pire du pire

Grand Theft Auto VI promet d’exploser les compteurs. Vous allez le voir, nous allons souvent prendre le pire scénario (avec des chiffres ronds pour nous simplifier la vie).

L’éditeur ne communique pas sur le nombre de précommandes, mais elles seraient de plus de six ou sept millions selon les estimations. Selon certains experts repris par des confrères, le jeu pourrait atteindre jusqu’à 50 millions d’exemplaires dès sa première semaine d’exploitation, selon un scénario déjà très optimiste (la fourchette est entre 37 et 51 millions précisément).

Quel rapport avec « casser Internet » ? GTA VI promet d’être un mastodonte : il faut libérer pas moins de 212 Go en prévision du préchargement du jeu, qui n’existe qu’en dématérialisé. Rockstar précise que « les versions boîte avec code pour les deux consoles devraient être disponibles au retrait auprès des revendeurs à partir du 12 novembre ». La sortie est programmée pour le 19 novembre.

Disons que le jeu fasse 250 Go et prenons une hypothèse tout de même très (très) optimiste de 50 millions de joueurs « day 1 ». Nous prenons le haut de la fourchette et sur un seul jour, soit le pire scénario possible.

Cela donnerait pas moins de 12 500 000 000 Go à télécharger le 19 novembre, soit 12 500 000 To ou encore 12 500 Po. C’est ce chiffre qui pourrait faire « trembler » Internet. Est-ce vraiment le cas ? Calculons !

Trafic mondial annuel d’Internet en 2025 sur le fixe : 7 300 Eo…