Apple утверждает, что ее новый ИИ превосходит GPT-4 в некоторых задачах благодаря учету экранного контента и фонового контекста

Исследователи из команды искусственного интеллекта Apple заявили, что их система искусственного интеллекта, Reference Resolution As Language Modeling (ReALM), способна превзойти GPT-4 по некоторым видам запросов.

За последние пару лет LLM, такие как GPT-4, стали доминировать в компьютерной индустрии, поскольку компании стремились улучшить свои продукты и привлечь больше пользователей. Однако Apple отстаёт в этой области, и её цифровой помощник Siri не демонстрирует значительного прогресса в развитии искусственного интеллекта.

Новая работа команды Apple представляет ReALM не просто как попытку догнать конкурентов, но как продукт, превосходящий все существующие LLM по определённым типам запросов.

В своей статье команда Apple объясняет, что их LLM даёт более точные ответы на вопросы пользователей, поскольку способен использовать неоднозначные экранные ссылки и получать доступ как к разговорной, так и к фоновой информации. Это значит, что в процессе поиска он может анализировать экран пользователя, ища подсказки о том, что пользователь делал до того, как задал запрос.

Кроме того, система может анализировать другие процессы, запущенные на устройстве в момент запроса, что помогает понять ход мыслей, приведший к запросу. Команда утверждает, что, добавив эту информацию к традиционным методам обработки LLM, они сделали свою систему значительно более эффективной для предоставления пользователю необходимой информации.

Команда утверждает, что протестировала свою систему в сравнении с несколькими LLM, включая GPT-4, и утверждает, что в некоторых типах задач она показала лучшие результаты, чем все они. Также было отмечено, что Apple планирует внедрить ReALM между своими устройствами и Siri, что позволит Siri давать гораздо более качественные ответы, чем сейчас. Однако эта функция, скорее всего, будет доступна только пользователям, обновившим iOS 18, когда она выйдет этим летом.

https://arxiv.org/abs/2403.20329