Le nouveau modèle d'IA d'Apple édite les photos en fonction des invites textuelles des utilisateurs
L’entreprise fait également l’actualité pour avoir acquis le plus grand nombre de startups d’IA parmi d’autres géants de la technologie en 2023.
Une photo d'une démo MGIE sur Hugging Face.
Apple vient de présenter un modèle d'IA open source qui exécute des commandes d'édition d'images basées sur du texte. Le modèle, nommé MLLM-Guided Image Editing (MGIE), a été développé en collaboration avec l'Université de Californie à Santa Barbara.
MGIE peut effectuer diverses tâches d'édition d'images, comme le recadrage, le redimensionnement et la rotation ; ainsi que des ajustements de la luminosité, de la balance des couleurs et du contraste, le tout en suivant les invites textuelles des utilisateurs. Les tenants et les aboutissants des capacités et des performances de MGIE ont été décrits dans un document de conférence publié cette semaine.
Le rapport explique comment MGIE montre des améliorations significatives dans les performances d'édition d'images selon différentes mesures et maintient une efficacité d'inférence compétitive. La technologie a été utilisée pour effectuer des modifications de style Photoshop, l’optimisation des photos et l’édition locale.
Le document explique que MGIE a démontré sa supériorité sur les techniques existantes, suggérant une direction prometteuse pour les futurs outils d'édition d'images qui seraient plus accessibles et intuitifs à utiliser. MGIE n'est pas largement accessible au public en tant que développement officiel d'Apple, mais les utilisateurs peuvent y accéder via GitHub pour une exploration technique ou essayer sa démo Web sur Hugging Face.
Une capture d'écran d'une autre démo MGIE sur Hugging Face.
Le développement de MGIE pourrait être un effort pour rattraper ce que Microsoft, Google et Meta ont fait au cours des deux dernières années. Bien que ces autres géants de la technologie aient lancé des chatbots raffinés alimentés par l'IA et même certains générateurs d'images, l'absence d'Apple sur le marché de l'IA générative a été intrigante.
L'entreprise semble s'efforcer de rattraper son retard : rien qu'en 2023, Apple a acquis jusqu'à 32 startups d'IA, bien plus que les 21 acquisitions de Google, les 18 de Meta et les 17 de Microsoft. Apple garde secrètes ces acquisitions et les avancées de l'IA générative, nous laissant pour pouvoir seulement spéculer sur le moment où l'entreprise les publiera publiquement et dans quels appareils et plates-formes ils seront inclus.
Apple est connu pour acquérir de petites entreprises afin de reprendre leur technologie et leurs talents, et Tim Cook, PDG d'Apple, a déclaré en 2021 que la société acquérait une startup toutes les trois à quatre semaines, selon la BBC, mais qu'elle aurait ralenti son rythme en 2022. et n'a acquis que deux sociétés cette année-là.