Apple vient de présenter un modèle d’IA open source qui exécute des commandes d’édition d’images basées sur du texte. Le modèle, nommé MLLM-Guided Image Editing (MGIE), a été développé en collaboration avec l’Université de Californie à Santa Barbara.
MGIE peut effectuer diverses tâches d’édition d’images, telles que le recadrage, le redimensionnement et la rotation ; ainsi que des ajustements de la luminosité, de la balance des couleurs et du contraste, le tout en suivant les invites textuelles des utilisateurs. Les tenants et aboutissants des capacités et des performances de MGIE ont été exposés dans un papier de conférence publié cette semaine.
Le rapport explique comment MGIE montre des améliorations significatives dans les performances d’édition d’images selon différentes mesures et maintient une efficacité d’inférence compétitive. La technologie a été utilisée pour effectuer des modifications de style Photoshop, l’optimisation des photos et l’édition locale.
Le document explique que MGIE a démontré sa supériorité sur les techniques existantes, suggérant une direction prometteuse pour les futurs outils d’édition d’images qui seraient plus accessibles et intuitifs à utiliser. MGIE n’est pas largement accessible au public en tant que développement officiel d’Apple, mais les utilisateurs peuvent y accéder via GitHub pour une exploration technique ou essayez sa démo Web sur Visage câlin.
Le développement de MGIE pourrait être un effort pour rattraper ce que Microsoft, Google et Meta ont fait au cours des deux dernières années. Bien que ces autres géants de la technologie aient publié des Chatbots alimentés par l’IA et même certains générateurs d’imagesl’absence d’Apple dans le IA générative le marché a été intrigant.
Aussi: 3 fonctionnalités d’IA dont iOS 18 doit rattraper Android
L’entreprise semble s’efforcer de rattraper son retard : rien qu’en 2023, Apple a acquis jusqu’à 32 startups d’IA, bien plus que les 21 acquisitions de Google, les 18 de Meta et les 17 de Microsoft. Apple garde secrètes ces acquisitions et les avancées de l’IA générative, nous laissant pour pouvoir seulement spéculer sur le moment où l’entreprise les publiera publiquement et dans quels appareils et plates-formes ils seront inclus.
Apple est connu pour acquérir de petites entreprises pour reprendre leur technologie et leurs talents, et Tim Cook, PDG d’Apple, a déclaré en 2021 que la société acquérait une startup toutes les trois à quatre semaines, selon le BBCmais ça aurait a ralenti son rythme en 2022 et n’a acquis que deux sociétés cette année-là.