Turbopack, optimisé pour JavaScript et TypeScript, écrit en Rust, est-il vraiment 10x plus rapide que Vite ?

Turbopack, le successeur de Webpack basé sur Rust, conçu pour faciliter le développement d'applications web modernes,
peut prendre 1,8 seconde pour démarrer, tandis que Vite prend 11,4 secondes

Dirigé par le créateur de Webpack, Tobias Koppers, Turbopack, le successeur de Webpack basé sur Rust ne regroupe que le minimum de ressources nécessaires au développement, le temps de démarrage est donc extrêmement rapide. Sur une application comportant 3 000 modules, le démarrage de Turbopack prend 1,8 seconde. Vite prend 11,4 secondes et Webpack 16,5 secondes. Turbopack prend en charge dès le démarrage les composants de serveur, TypeScript, JSX, CSS, etc. De nombreuses fonctionnalités ne sont pas encore prises en charge.

L'architecture de Turbopack tire les leçons d'outils comme Turborepo et Bazel de Google, qui se concentrent tous deux sur l'utilisation de caches pour ne jamais faire deux fois le même travail. Turbopack est construit sur Turbo : un framework open source de mémorisation incrémental pour Rust. Turbo peut mettre en cache le résultat de n'importe quelle fonction du programme. Lorsque le programme est exécuté à nouveau, les fonctions ne seront exécutées que si leurs entrées ont changé. Cette architecture granulaire permet à votre programme de sauter de grandes quantités de travail, au niveau de la fonction.

Pièce jointe 627871

Pour un debut, Turbopack sera utilisé pour le serveur de développement Next.js 13. Il alimentera HMR à la vitesse de l'éclair et prendra en charge les composants de serveur React de manière native, ainsi que TypeScript, JSX, CSS, etc. À terme, Turbopack alimentera également les constructions de Next.js à la fois localement et dans le cloud. Il sera possible de partager le cache de Turbo avec toute votre équipe, grâce à Vercel Remote Caching. Les utilisateurs de Webpack peuvent également s'attendre à une migration incrémentale vers le futur basé sur Rust avec Turbopack.

Turbopack est si rapide parce qu'il est construit sur une bibliothèque réutilisable pour Rust qui permet le calcul incrémental connu sous le nom de moteur Turbo. Voici comment cela fonctionne :

Mise en cache au niveau des fonctions

Dans un programme équipé d'un moteur Turbo, il est possible de marquer certaines fonctions comme étant « à mémoriser ». Lorsque ces fonctions sont appelées, le moteur Turbo se souviendra de l'objet avec lequel elles ont été appelées et de ce qu'elles ont retourné. Il les enregistrera ensuite dans un cache en mémoire. Voici un exemple simplifié de ce à quoi cela peut ressembler dans un bundler :

Pièce jointe 627868

Nous commençons par appeler readFile sur deux fichiers, api.ts et sdk.ts. Nous regroupons ensuite ces fichiers, les concaténons ensemble et obtenons le fullBundle à la fin. Les résultats de tous ces appels de fonction sont enregistrés dans le cache pour plus tard. Imaginons que nous soyons sur un serveur de développement. Vous enregistrez le fichier sdk.ts sur votre machine. Turbopack reçoit l'événement du système de fichiers, et sait qu'il doit recalculer readFile("sdk.ts") :

Puisque le résultat de sdk.ts a changé, nous devons le regrouper à nouveau, qui doit ensuite être concaténé à nouveau. Il est important de noter que le fichier api.ts n'a pas changé. Nous lisons son résultat dans le cache et le passons à concat à la place. Du temps est gagné en évitant de le lire et de le regrouper à nouveau. Imaginez maintenant cette situation dans un vrai bundler, avec des milliers de fichiers à lire et de transformations à exécuter. Le modèle mental est le même. Vous pouvez économiser d'énormes quantités de travail en vous souvenant du résultat des appels de fonction et en évitant de refaire le travail qui a déjà été fait.

Le cache

Le moteur Turbo stocke actuellement son cache en mémoire. Cela signifie que le cache durera aussi longtemps que le processus qui l'exécute - ce qui fonctionne bien pour un serveur de développement. Lorsque vous exécutez next dev --turbo dans Next v13, vous démarrez un cache avec le moteur Turbo. Lorsque vous annulez votre serveur de développement, le cache est effacé.

Pièce jointe 627872

Dans le futur, l’équipe en charge prévoit de faire persister ce cache - soit dans le système de fichiers, soit dans un cache distant comme celui de Turborepo. Cela signifierait que Turbopack pourrait se souvenir du travail effectué à travers les runs et les machines. Cette approche rend Turbopack extrêmement rapide pour calculer les mises à jour incrémentales des applications. Cela optimise Turbopack pour la gestion des mises à jour dans le développement, ce qui signifie que votre serveur de développement répondra toujours rapidement aux changements.

À l'avenir, un cache persistant ouvrira la porte à des constructions de production beaucoup plus rapides. En se souvenant du travail effectué au cours des cycles, les nouvelles constructions de production ne pourront reconstruire que les fichiers modifiés, ce qui pourrait entraîner un gain de temps considérable.

Source : Vercel

Et vous ?

:fleche: Quel est votre avis sur le sujet ?

Voir aussi :

:fleche: Next.js 13 est disponible, elle apporte Turbopack, le nouveau successeur de Webpack basé sur Rust, sur une application comportant 3 000 modules, le démarrage de Turbopack prend 1,8 seconde

:fleche: La version 12 de Next.js, l'outil de développement open source construit autour de Node.js, est disponible, avec un compilateur Rust 17x plus rapide que Babel et une priorité aux modules ES

:fleche: Next.js 11 est disponible, elle améliore le temps de démarrage de 24 % et réduit de 40 % le temps de traitement des modifications

Le concurrence entre Vite et Turbopack peut être bénéfique.
Cependant, il reste à vérifier que Turbopack est vraiment plus rapide que Vite et quels sont leur périmètre technique respectif.
Actuellement, des tests ont commencé à être fait et on est loin des "10x plus rapide que Vite"
https://twitter.com/youyuxi/status/1585887853036195841

Turbopack, optimisé pour JavaScript et TypeScript, écrit en Rust, est-il vraiment 10x plus rapide que Vite ?
Le développeur Evan You oppose un benchmark utilisant le tout nouveau Next 13 et Vite 3.2

Dans un article rédigé le 26 octobre, nous présentions Turbopack, un système de construction et de regroupement incrémental optimisé pour JavaScript et TypeScript, écrit en Rust. Aujourd’hui Vercel affirme que sur les applications à grande échelle, Turbopack se met à jour 10x plus vite que Vite et 700x plus vite que Webpack. Pour les plus grosses applications, la différence est encore plus marquée, avec des mises à jour jusqu'à 20 fois plus rapides que Vite. Afin de voir plus clair et de vérifier les affirmations de Vercel, le développeur Evan You a effectué un benchmark utilisant le tout nouveau Next 13 et Vite 3.2.

Turbopack est actuellement en version alpha. Il n'est pas encore prêt pour une utilisation en production. Mais NextJS permet d'utiliser Turbopack avec next dev --turbo alors le serveur de développement NextJS v13 est maintenant alimenté par Turbopack.

Dirigé par Tobias Koppers, le créateur de Webpack, Turbopack ne regroupe que le minimum de ressources nécessaires au développement, le temps de démarrage est donc extrêmement rapide. Sur une application comportant 3 000 modules, le démarrage de Turbopack prend 1,8 seconde. Vite prend 11,4 secondes et Webpack 16,5 secondes. Turbopack prend en charge dès le démarrage les composants de serveur, TypeScript, JSX, CSS, etc. De nombreuses fonctionnalités ne sont pas encore prises en charge.

Pièce jointe 628823

L'architecture de Turbopack tire les leçons d'outils comme Turborepo et Bazel de Google, qui se concentrent tous deux sur l'utilisation de caches pour ne jamais faire deux fois le même travail. Turbopack est construit sur Turbo : un framework open source de mémorisation incrémental pour Rust. Turbo peut mettre en cache le résultat de n'importe quelle fonction du programme. Lorsque le programme est exécuté à nouveau, les fonctions ne seront exécutées que si leurs entrées ont changé. Cette architecture granulaire permet à votre programme de sauter de grandes quantités de travail, au niveau de la fonction.

Dans divers documents marketing de Vercel, on retrouve la phrase « Turbopack est 10x plus rapide que Vite ». Cette phrase est répétée y compris un tweet, un article de blog et des courriels de marketing envoyés aux utilisateurs de Vercel. Les graphiques de benchmark sont également inclus dans la documentation de Turbopack, montrant à l'origine que Next 13 avec Turbopack est capable d'effectuer un React Hot-Module Replacement (HMR) en 0,01s alors qu’avec Vite, cela prend 0,09s.

Initialement, Vercel n'a pas inclus de liens vers les benchmarks qu'ils ont utilisés pour produire ces chiffres dans les documents marketing ou la documentation. Le développeur Evan You dans sa quête de vérité a décidé de vérifier les affirmations avec un benchmark utilisant le tout nouveau Next 13 et Vite 3.2. L'essentiel de sa méthodologie consiste à comparer les performances de HMR en mesurant le delta entre les deux horodatages suivants :

• le moment où un fichier source est modifié, enregistré via un processus Node.js séparé surveillant les changements de fichiers ;
• l'heure à laquelle le composant React mis à jour est rendu, enregistrée via un appel à Date.now() directement dans la sortie de rendu du composant.

Méthodologie

1. Les deux projets sont créés à partir des commandes suivantes :
   
   npx create-next-app@latest ;
   npm init vite@latest # select React preset
2. genFiles.(m)js est exécuté dans chaque projet pour générer 1000 composants. Tous les composants sont importés dans le composant racine de l'application (dans le cas de Next, le composant racine de la page) et rendus ensemble. Cette étape est déjà réalisée et les fichiers sont déjà archivés, mais le script est inclus pour référence
3. Pour Next, app/page.js possède la directive "use client", ce qui lui permet d'effectuer le rendu en mode client. Cela est nécessaire pour assurer une comparaison correcte, car les composants du serveur entraînent une surcharge HMR non négligeable (4 fois plus lente)
4. Pour Vite, vite-plugin-swc-react-refresh est utilisé pour que la transformation React JSX & HMR utilise swc au lieu de Babel. La raison pour laquelle le plugin React par défaut de Vite utilise Babel est que l'utilisation de swc entraîne 58 Mo de poids d'installation supplémentaire (alors que Vite lui-même fait 19 Mo) pour une amélioration marginale de HMR. Cependant, pour les besoins de l'évaluation comparative, Evan You utilise les mêmes transformations que celles utilisées par turbopack afin que la comparaison soit axée sur les mécanismes HMR des deux outils
5. pour chaque projet, nous exécutons watch.(m)js dans un processus Node séparé pour obtenir l'horodatage exact du changement de fichier. Ceci est utilisé pour marquer le début de HMR
6. Démarrez les projets (vite et next dev --turbo), puis éditez les fichiers suivants pour tester HMR :
   
   • Next: app/page.js (root) and app/comp0.jsx (leaf)
   • Vite: src/App.jsx (root) and src/components/comp0.jsx (leaf)

Les composants édités affichent tous Date.now() dans leur sortie. L'horodatage final rendu dans le DOM est utilisé pour marquer l'achèvement de HMR. Le benchmark mesure également les chiffres dans deux cas différents :

• le cas "root", où le composant importe 1 000 composants enfants différents et les rend également ensemble ;
• le cas "leaf", où le composant est importé par la racine mais n'a pas d'importations ou de composants enfants propres.

Nuances

Avant de passer aux chiffres, il y a quelques nuances supplémentaires qui méritent d'être mentionnées :

• si Next utilise React Server Components (RSC) ;
• si Vite utilise SWC au lieu de Babel pour les transformations React.

React Server Components

Next 13 a introduit un changement architectural majeur dans la mesure où les composants sont désormais des composants serveur par défaut, à moins que l'utilisateur n'opte explicitement pour le mode client avec la directive use client. Non seulement c'est le mode par défaut, mais la documentation de Next recommande également aux utilisateurs de rester en mode serveur autant que possible pour améliorer les performances de l'utilisateur final.

Le benchmark initial d’Evan You a mesuré les performances HMR de Next 13 avec les composants root et leaf en mode serveur. Le résultat a montré que Next 13 était en fait plus lent dans les deux cas, et la différence était significative pour les composants leaf.

Pièce jointe 628824

• Enregistré sur 5 cycles
• Temps en ms
• Testé sur Mackbook Pro M1

En ajoutant la directive use client au composant root de Next pour passer en mode client, Next HMR s'améliore de manière significative, allant 2x plus vite que Vite :

Pièce jointe 628825

Transformations SWC vs. Babel

L’objectif est de faire en sorte que le benchmark se concentre uniquement sur la différence de performance HMR. Les transformations React HMR et JSX ne sont pas des fonctionnalités couplées aux outils de construction. Elles peuvent être effectuées via Babel (basé sur js) ou SWC (basé sur rust). Esbuild peut également transformer JSX, mais ne supporte pas HMR.
SWC est significativement plus rapide que Babel (20x en mono-fil, 70x en multi-cœurs).

La raison pour laquelle Vite utilise actuellement Babel par défaut est un compromis entre la taille de l'installation et l'aspect pratique. La taille de l'installation de SWC est assez lourde (58MB dans node_modules alors que Vite lui-même ne fait que 19MB), et de nombreux utilisateurs s'appuient encore sur Babel pour d'autres transformations, donc un passage à Babel était quelque peu inévitable pour eux. Cependant, cela pourrait changer à l'avenir.

Plus important encore, l'implémentation de Webpack dans le même benchmark utilise également SWC.

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77

use std::{ fs, path::Path, process::{Child, Command, Stdio}, };   use anyhow::{anyhow, Context, Result}; use regex::Regex;   use crate::{ bundlers::Bundler, util::{ npm::{self, NpmPackage}, wait_for_match, }, };   pub struct Webpack; impl Bundler for Webpack { fn get_name(&self) -> &str { "Webpack CSR" }   fn prepare(&self, install_dir: &Path) -> Result<()> { npm::install( install_dir, &[ NpmPackage::new("@pmmmwh/react-refresh-webpack-plugin", "0.5.7"), NpmPackage::new("@swc/core", "1.2.249"), NpmPackage::new("react-refresh", "0.14.0"), NpmPackage::new("swc-loader", "0.2.3"), NpmPackage::new("webpack", "5.74.0"), NpmPackage::new("webpack-cli", "4.10.0"), NpmPackage::new("webpack-dev-server", "4.11.0"), ], ) .context("failed to install from npm")?;   fs::write( install_dir.join("webpack.config.js"), include_bytes!("webpack.config.js"), )?;   Ok(()) }   fn start_server(&self, test_dir: &Path) -> Result<(Child, String)> { let mut proc = Command::new("node") .args([ (test_dir .join("node_modules") .join("webpack-dev-server") .join("bin") .join("webpack-dev-server.js") .to_str() .unwrap()), "--port", "0", ]) .env("NO_COLOR", "1") .current_dir(test_dir) .stdout(Stdio::piped()) .stderr(Stdio::piped()) .spawn() .context("failed to run `webpack-dev-server` command")?;   let addr = wait_for_match( proc.stderr .as_mut() .ok_or_else(|| anyhow!("missing stderr"))?, Regex::new("\\[webpack\\-dev\\-server\\] Loopback:\\s+(.*)")?, ) .ok_or_else(|| anyhow!("failed to find devserver address"))?;   Ok((proc, addr)) } }

---

Le noyau de Vite ne repose pas sur Babel. L'utilisation de SWC au lieu de Babel pour gérer les transformations React ne nécessite aucune modification dans Vite lui-même - il suffit de remplacer le plugin React par défaut par vite-plugin-swc-react-refresh. Après le changement, une amélioration significative pour Vite dans le cas de root a été constaté, rattrapant ainsi Next :

Pièce jointe 628826

Il est intéressant de noter que la courbe de croissance montre que Next/turbo est devenu 4x plus lent dans le cas de la racine par rapport au cas de la feuille, alors que Vite est devenu seulement 2,4x plus lent. Cela implique une courbe où Vite HMR évolue mieux dans des composants encore plus grands.
De plus, le passage au SWC devrait également améliorer les métriques de démarrage à froid de Vite dans les benchmarks de Vercel.

Performances sur différents matériels

Comme il s'agit d'un benchmark mixte qui implique à la fois Node.js et des parties natives de Rust, il y aura une variance non-triviale sur différents matériels. Les chiffres affichés par Evan You ont été recueillis sur un MacBook Pro M1. D'autres utilisateurs ont exécuté le même benchmark sur différents matériels et ont rapporté des résultats différents. Dans certains cas, Vite est plus rapide avec root, alors que dans d'autres, Vite est significativement plus rapide dans les deux cas.

Après la publication du benchmark d’Evan You, Vercel a publié un billet de blog clarifiant leurs méthodologies de benchmark, et a rendu leur benchmark disponible pour une vérification publique. « Turbopack et Next.js 13.0.1 sont sortis, corrigeant une régression qui s'est glissée avant la sortie publique et après que les premiers benchmarks aient été effectués. Nous avons également corrigé un bug d'arrondi incorrect sur notre site Web (0,01s → 15ms). Nous apprécions le travail d'Evan You qui nous a permis d'identifier et de corriger ce problème », écrit Vercel.

You Yuxi, le créateur de Vue.js, estime que la concurrence pour les logiciels libres doit être fondée sur une communication ouverte, une comparaison équitable et un respect mutuel. Il a donc été déçu et inquiet lorsqu'il a vu que Vercel utilisait des données soigneusement sélectionnées, non évaluées par des pairs et trompeuses pour son marketing, un scénario qui ne se produit généralement que dans le cadre d'une compétition commerciale.

Sources : Evan YOU, Turbo

Et vous ?

:fleche: Quel est votre avis sur le sujet ?

:fleche: Trouvez-vous pertinent le benchmark réalisé par Evan YOU ?

Voir aussi :

:fleche: Turbopack, le successeur de Webpack basé sur Rust, conçu pour faciliter le développement d'applications web modernes, peut prendre 1,8 seconde pour démarrer, tandis que Vite prend 11,4 secondes

:fleche: Next.js 13 est disponible, elle apporte Turbopack, le nouveau successeur de Webpack basé sur Rust, sur une application comportant 3 000 modules, le démarrage de Turbopack prend 1,8 seconde

Un benchmark sur un seul type de machine, est-ce encore vraiment un benchmark ?

Citation:

---

Turbopack est actuellement en version alpha. Il n'est pas encore prêt pour une utilisation en production.

---

Tout est dit.

Qui plus est, on parle de performances en démarrage.
Hors en production, on ne s'amuse pas à régénérer les caches toutes les secondes, ça ne change pas visiblement les performances du JS.

d'autant plus que le mode production de turbopack n'est pas encore disponible. cela dit de mon coté sur des vrais projet j'ai remarqué des sacrés gains de perfs en dev par rapport à webpack 5 , mais c'est pas encore au niveau pour créer des benchs représentatifs, je serais convaincu lorsque la config des loaders sera pleinement géré ( d'ici la ils vont sortir webpack 6 malgré que les devs webpack soit un peu inactifs en ce moment)

J'aurai toujours plus confiance dans un programme compilé avec rustc qu'avec du Javascript ou meme du Typescript meme si c'est toujours un peu mieux. Mais j'aime trop Rust pour etre de bonne foi.