StableDiffusion peut générer une image sur les Mac Apple Silicon en moins de 18 secondes, grâce aux nouvelles optimisations de macOS 13.1

StableDiffusion peut générer une image sur les Mac Apple Silicon en moins de 18 secondes, grâce aux nouvelles optimisations de macOS 13.1

Sur son blog d’apprentissage automatique, Apple a annoncé un support retentissant au projet StableDiffusion. Cela inclut les mises à jour de macOS 13.1 beta 4 et iOS 16.2 beta 4 qui viennent de sortir pour améliorer les performances de ces modèles sur les puces Apple Silicon.

Apple a également publié un document complet et un exemple de code pour montrer comment convertir les modèles source StableDiffusion en un format Core ML natif.

Cette annonce est la plus grande approbation officielle d’Apple à l’émergence récente des générateurs d’images AI.

En résumé, les techniques de génération d’images basées sur l’apprentissage automatique ont pris de l’importance grâce aux résultats surprenants du modèle DALL-E. Ces générateurs d’images AI acceptent une chaîne de texte comme invite et tentent de créer une image de ce que vous avez demandé.

Une variante appelée StableDiffusion a été lancée en août 2022 et a déjà vu beaucoup d’investissements communautaires.

Grâce aux nouvelles optimisations matérielles dans les versions du système d’exploitation Apple, les modèles Core ML StableDiffusion tirent pleinement parti des architectures Neural Engine et Apple GPU présentes dans les puces de la série M.

Cela conduit à des générateurs incroyablement rapides. Apple affirme qu’un MacBook Air M2 de base peut générer une image à l’aide d’un modèle StableDiffusion à 50 itérations en moins de 18 secondes. Même un iPad Pro M1 pourrait effectuer la même tâche en moins de 30 secondes.

Apple espère que ce travail encouragera les développeurs à intégrer StableDiffusion dans leurs applications pour qu’elles s’exécutent sur le client, plutôt que de dépendre des services cloud backend. Contrairement aux implémentations cloud, l’exécution sur l’appareil est « gratuite » et préserve la confidentialité.


Découvrez cette vidéo ci-dessous (en anglais) pour plus d’actualités Apple :