Même le PDG de Nvidia est obsédé par l'outil d'IA NotebookLM de Google
Luma AI affirme que son créateur d'images Photon est plus rapide que n'importe quel modèle comparable actuellement disponible.
La liste des modèles d’images génératifs d’IA ne cesse de s’allonger.
Lundi, la société d'IA Luma a publié Photon, son nouveau modèle de conversion texte-image. Destiné aux designers et aux créatifs, le modèle s'appuie sur le générateur vidéo Dream Machine de Luma, qui permet aux utilisateurs de créer de courts clips vidéo à partir des images qu'ils téléchargent.
Comme Dream Machine, Photon est conçu pour tout le monde et destiné à ceux qui « construisent le monde qui nous entoure, des designers, cinéastes, penseurs visuels aux petites entreprises et éducateurs », explique le communiqué. Cela inclut des cas d'utilisation pour tout, de la mode à l'architecture.
Doté d'une sortie multi-images et d'un rendu de texte net, Photon est construit sur l'architecture Universal Transformer sur mesure de Luma, qui, selon la société, le rend « 800 % plus rapide et moins cher que d'autres modèles comparables ». Comme pour les générateurs similaires, les utilisateurs peuvent modifier leurs invites au fur et à mesure et modifier et personnaliser les images résultantes.
Luma a également annoncé une API Photon, qui pourrait être publiée avant la fin de 2024. L'API évolutive permettra aux développeurs de créer du contenu texte-image et image-image.
"La vraie magie de Luma AI est de devenir le foyer de l'ADN créatif unique de chaque créateur - ses références, son style, son histoire - tandis que Dream Machine apprend et évolue avec le parcours créatif de chaque utilisateur", Anjney Midha, associée générale chez a16z. et membre du conseil d'administration de Luma AI, a déclaré dans le communiqué.
Luma souhaite que les utilisateurs considèrent Dream Machine et Photon comme de véritables collaborateurs créatifs capables de comprendre les contextes et les besoins uniques des utilisateurs. Une fonctionnalité permet aux utilisateurs de télécharger une photo d'une personne et de créer un « personnage » réutilisable que Photon peut représenter dans plusieurs scénarios d'image unique - un outil idéal pour les campagnes de brainstorming. Les utilisateurs peuvent télécharger le portrait de la personne et inclure « @character » dans leur invite pour activer la fonctionnalité.
Cependant, lors d'une démo pour ZDNET, Photon a semblé avoir quelques problèmes pour rendre des expressions d'apparence naturelle pour les personnages dans certaines positions, ce qui rappelle immédiatement des inquiétudes concernant les deepfakes et d'autres utilisations abusives potentielles.
Les directives d'utilisation de Luma incluent une note sur la modération du contenu qui indique que l'entreprise supprimera certaines images générées.
Notamment, Luma déclare que les données d'entrée et de sortie de Photon ne sont pas utilisées pour entraîner les modèles de l'entreprise. Interrogé sur l'ensemble de données de formation de Luma lors de la démonstration, le PDG Amit Jain a déclaré qu'il ne pouvait pas divulguer ce qu'il incluait et s'il contenait du matériel récupéré sur Internet ou du contenu sous licence.
En termes de problèmes de droits d'auteur, les directives sont un peu plus vagues. La société demande aux utilisateurs de "ne pas demander ni de générer de contenu portant atteinte à des éléments protégés par des droits d'auteur ou des marques déposées" et de "toujours respecter les droits de propriété intellectuelle".
Enfin, la société a également lancé une nouvelle interface pour Dream Machine, désormais disponible sur le Web et iOS. Selon l’entreprise, il peut être utilisé avec le langage naturel : pas besoin d’apprendre à devenir un meilleur ingénieur prompt.
La nouvelle interface est facile à utiliser et rappelle d'autres générateurs qui identifient les descripteurs clés dans votre invite et proposent un menu déroulant d'alternatives similaires au cas où vous souhaiteriez modifier votre idée ou explorer différentes variantes. Le service s'adresse à tout utilisateur souhaitant explorer un concept de design, itérer sur une idée de produit, réfléchir et collaborer avec les membres de l'équipe via l'infrastructure pratique de moodboard de Luma.
Le « service d'IA visuelle » propose également des fonctionnalités de personnalisation des images et des vidéos, ainsi que des niveaux d'abonnement payants à partir de 10 $par mois.