Apple MGIE lançado como ferramenta de edição de imagens com IA de código aberto

A IA pode ser usada para edição de imagens, bem como para geraçãono entanto, essa aplicação de aprendizado de máquina pode ter dificuldades para combinar as instruções humanas, que podem estar sujeitas a variações cosméticas técnicas, intencionais ou idealizadas, com o objetivo real e o resultado correspondente. No entanto, Apple's o novo modelo MGIE já é considerado capaz de "revolucionar" essa tecnologia.

Atribui-se a ele a "interpretação" aprimorada das instruções, com contexto completo, como "perceber" que uma solicitação como "altere o plano de fundo e adicione um plano de fundo Star Wars " poderia implicar a adição de "um sabre de luz ou uma nave espacial", graças à integração de MLLMse, dessa forma, fornecer resultados potencialmente superiores na análise qualitativa e na avaliação humana em comparação com seu rival InsPix2Pix ou seu antecessor LLM-Guided Image Editing (LGIE).

Ele também pode aproveitar seu MLLM para "raciocinar" que uma chamada para tornar uma imagem de alimento "mais saudável" poderia envolver o aumento de alguns vegetais. O MGIE está classificado para fazer isso em um nível de"Photoshop" e também para realizar a "otimização de fotos" pontual ou geral com precisão e exatidão em nível de pixel.

Essa última incursão do Apple na pesquisa de IA foi apresentada na International Conference on Learning Representations 2024 (ICLR 2024) em colaboração com uma equipe da University of California Santa Barbara (UCSB), que também publicou um artigo baseado no mesmo trabalho atualmente disponível no arXiv.

Compre um Apple MacBook Air M2 como um modelo Premium renovado em Starlight na Amazon