Siri устарела, но может появиться улучшенная версия

Siri уже много лет находится в застое, но, наконец, могут произойти большие изменения.

<п>

Siri is outdated, but a better version might be coming

Ключевые выводы

<ул>

  • Apple активно работает над разработкой LLM, который можно будет запускать локально на вашем iPhone для повышения конфиденциальности.
  • Siri может стать гораздо точнее понимать команды пользователя через контекст и возможность ссылаться на текст на экране.
  • Будущее Siri может включать в себя такие функции, как расширенное распознавание изображений, активацию без триггера и улучшенные возможности удержания разговора.

    <п>Некоторые продукты Apple не оправдывают ажиотажа (Apple Newton, кто угодно?), и, пожалуй, самым большим разочарованием из всех стала Siri. Когда появилась Siri, это ознаменовало новый рассвет в том, как мы будем взаимодействовать с нашими интеллектуальными устройствами.

    Тем не менее, с 2011 года, когда Siri впервые появилась на iPhone 4S, виртуальный помощник изменился очень мало, став функцией, которая часто остается неиспользованной многими владельцами iPhone. Распространение LLM, таких как ChatGPT, также показало, что Siri ужасно устарела.

    < source media="(min-width: 481px)" data-srcset="https://static1.pocketlintimages.com/wordpress/wp-content/uploads/2024/04/tesla-model-s.jpg?q =49&fit=crop&w=800&h=520&dpr=2" srcset="https://static1.pocketlintimages.com/wordpress/wp-content/uploads/2024/04/tesla-model-s.jpg?q=49&fit=crop&w=800&h=520&dpr=2" />< p>

    Siri is outdated, but a better version might be coming

    Однако не все потеряно. Apple, наконец, демонстрирует некоторые признаки того, что присоединилась к движению искусственного интеллекта, и весьма вероятно, что в не столь отдаленном будущем мы сможем увидеть значительно улучшенную версию Siri (Super-Siri?). Несколько общедоступных исследовательских работ Apple намекают на некоторые области, на которых Apple сосредоточила свое внимание. Вот что может стать частью гораздо лучшей версии Siri.

    Siri на базе искусственного интеллекта, работающая на вашем устройстве

    Использовать Super-Siri конфиденциально

    Siri is outdated, but a better version might be coming

    <п>LLM, такие как ChatGPT, доступны в виде приложений на вашем телефоне, но вся магия происходит в другом месте. Ваши запросы отправляются на серверы ChatGPT, которые обрабатывают их, используя большие вычислительные мощности и модели, содержащие миллиарды параметров, которые занимают много места для хранения. Затем ответ отправляется обратно на ваш телефон.

    Apple активно работает над созданием LLM, который можно будет запускать локально на вашем iPhone.

    <п>Apple активно работает над созданием LLM, который можно будет запускать локально на вашем iPhone. Это серьезная проблема, поскольку вычислительная мощность и объем памяти смартфона ограничены. Тем не менее, Apple опубликовала исследовательскую работу о своих попытках создать эффективный LLM с ограниченной памятью и добилась впечатляющих результатов. Это означает, что мы можем увидеть значительно улучшенную версию Siri, которая может работать полностью в автономном режиме, обеспечивая повышенную конфиденциальность, что действительно очень характерно для Apple.

    Siri, которая понимает вас лучше

    Больше не надо 'звонить Хизер' когда вы спрашиваете погоду

    Siri is outdated, but a better version might be coming

    Все голосовые помощники могут неправильно интерпретировать ваши команды. У всех нас были ситуации, когда мы просили голосового помощника об одном, но он нас неправильно расслышал и дал нам что-то совершенно другое. Вы говорите Siri: «Разбуди меня в три». и получите ответ — сыграйте в Wake Me Up от Avicii'.

    Siri is outdated, but a better version might be coming

    Хорошей новостью является то, что еще одно исследование Apple посвящено ранжированию намерений команд голосового помощника. В этой статье обсуждается метод выбора из множества потенциальных намерений путем рассмотрения контекстной информации для уменьшения двусмысленности. В другой статье обсуждается использование LLM для выбора нескольких вероятных намерений, а не только одного, и использование этих нескольких намерений для предоставления ответа, который, вероятно, будет более полезным. В результате Siri может стать гораздо точнее понимать, что вы имеете в виду.

    Siri, которая понимает, на что вы смотрите

    Попросите Siri использовать контент на вашем экране

    Siri is outdated, but a better version might be coming

    <стр> Одна из проблем, с которой всегда сталкивалась Сири, заключалась в том, что она не могла видеть то, что видите вы. И хотя спросить Siri, возможно, пока еще невозможно, что это за птица на дереве вон там?' возможно, вскоре появится возможность обращаться к содержимому на экране.

    <п>В другом исследовательском документе Apple предлагается модель, которая может ссылаться на текст на экране при работе с подсказками пользователя. Например, если вы находитесь на странице контактов веб-сайта, вы можете сказать: «Siri, отправь этот номер Алану». и Siri поймет, что вы имеете в виду номер телефона, извлечет этот номер и отправит его Алану. В документе упоминается возможность ссылки на различные типы текста, такие как адреса электронной почты, URL-адреса и даты. Другими словами, Сири вскоре сможет читать вместе с тем, на что она уже способна.

    Выделение частей изображения

    Вы можете сказать Siri, куда смотреть

    < source media="(min-width: 481px)" data-srcset="https://static1.pocketlintimages.com/wordpress/wp-content/uploads/wm/2024/04/best-iphone-camera-apps-3233 .jpg?q=49&fit=crop&w=767&amp;dpr=2" srcset="https://static1.pocketlintimages.com/wordpress/wp-content/uploads/wm/2024/04/best-iphone-camera-apps-3233.jpg?q=49&fit=crop&w=767&dpr=2" />< p>

    Siri is outdated, but a better version might be coming

    Доступ к тексту осуществляется нормально, но Siri по-прежнему не видит изображение, на которое вы смотрите. Или может ? Apple разработала Ferret, мультимодальную модель большого языка (MLLM), которая может понимать пространственные привязки. Это значительно расширит количество вопросов, которые вы можете задать Siri, и позволит вам, например, нарисовать круг вокруг части изображения и спросить 'Siri, какая это марка машины?&# 39; или 'Siri, где я могу купить эти туфли?' <п>

    Siri is outdated, but a better version might be coming

    Ferret также предлагает возможности заземления. Здесь модель будет идентифицировать области изображения на основе подсказки, например 'Siri, где все обезьяны на этом изображении?' Возможности Ferret означают, что Siri сможет идентифицировать объекты, которые вы рисуете пальцем, или даже решить, где Уолдо. Это имеет потенциально огромные последствия; Siri наконец-то сможет выполнить первоначальное обещание и изменить способ взаимодействия с нашими телефонами.

    Siri без слова пробуждения?

    Попрощайтесь с функцией «Привет, Siri»

    Siri is outdated, but a better version might be coming

    <стр> Если у вас есть устройство Amazon Echo и вы живете с человеком, которого зовут Алекса, жизнь должна быть трудной. Можно изменить слово пробуждения, но для всех основных голосовых помощников требуется либо слово пробуждения (например, «Привет, Siri» или просто Siri), либо жест (например, поднятие запястья с помощью Apple Watch), чтобы вызвать голосового помощника. чтобы начать слушать.

    3:16< source media="(min-width: 481px)" data-srcset="https://static1.pocketlintimages.com/wordpress/wp-content/uploads/wm/2023/09/echobluetooth-thumb.jpg?q =70&fit=crop&w=800&h=520&dpr=1" srcset="https://static1.pocketlintimages.com/wordpress/wp-content/uploads/wm/2023/09/echobluetooth-thumb.jpg?q=70&fit=crop&w=800&h=520&dpr=1" />< p>

    Siri is outdated, but a better version might be coming

    <п>В одном исследовательском документе Apple указывается, что, возможно, скоро появится голосовой помощник без триггера. В нем исследуется использование мультимодальной системы для определения того, когда кто-то разговаривает с виртуальным помощником, включая анализ слов, произнесенных с помощью LLM, а также формы звуковых сигналов (например, команды могут быть громче, чем фоновая речь). Исследование показало, что можно точно определить, когда произносится голосовая команда. Это может означать, что вам никогда не придется говорить 'Siri' еще когда-либо.

    Или, может быть, все-таки слово для пробуждения?

    Привет, Siri, но лучше

    Siri is outdated, but a better version might be coming

    Или, может быть, ты мог бы. В другом исследовательском документе Apple был использован другой подход и основное внимание уделялось не удалению слова пробуждения, а повышению точности ответа на слово пробуждения. В документе предполагается, что многоканальная акустическая модель может быть более точной при распознавании слова пробуждения, чем одноканальная модель, и это оказалось так: многоканальная модель работает лучше как в тихих, так и в шумных условиях.

    Если 'Привет, Siri' сохраняется, оно может стать гораздо более точным, чем сейчас.

    Больше не повторяйтесь

    Siri может знать, когда появится новый вопрос

    Siri is outdated, but a better version might be coming

    Супер-Сири могла бы сделать это намного лучше, чем сейчас, но задача состоит в том, чтобы узнать, когда вопрос относится к текущему разговору, а когда это совершенно новая линия ответа. расследование. <стр> Сири ужасно умеет разговаривать. Если вы попытаетесь сослаться на что-то из предыдущего ответа, есть вероятность, что Siri не поймет, о чем вы говорите. Чат-боты LLM справляются с этим гораздо лучше и могут поддерживать разговор, ссылаясь на предыдущие вопросы и ответы.

    Супер-Сири могла бы сделать это намного лучше, чем сейчас, но задача состоит в том, чтобы узнать, когда вопрос относится к текущему разговору, а когда это совершенно новая линия ответа. расследование. В другом исследовательском документе указывается, что Apple работает над чем-то под названием STEER, который представляет собой модель обнаружения рулевого управления, которая предсказывает, является ли последующее действие попыткой усовершенствовать (или управлять) предыдущей командой или совершенно новой командой. Это должно сделать многоэтапные разговоры с Siri намного более эффективными.

    Siri как инструмент редактирования

    Расскажите Siri, как редактировать изображения

    < source media="(min-width: 768px)" data-srcset="https://static1.pocketlintimages.com/wordpress/wp-content/uploads/wm/2024/04/best-iphone-camera-apps-3252 .jpg?q=49&fit=crop&w=943&amp;dpr=2" srcset="https://static1.pocketlintimages.com/wordpress/wp-content/uploads/wm/2024/04/best-iphone-camera-apps-3252.jpg?q=49&amp;fit=crop&w=943&dpr=2" />< source media="(min-width: 0px)" data-srcset="https://static1.pocketlintimages.com/wordpress/wp-content/uploads/wm/2024/04/best-iphone-camera-apps-3252 .jpg?q=49&fit=crop&w=480&dpr=2" srcset="https://static1.pocketlintimages.com/wordpress/wp-content/uploads/wm/2024/04/best-iphone-camera-apps-3252.jpg?q=49&fit=crop&w=480&dpr=2" />

    Siri is outdated, but a better version might be coming

    ИИ может многое предложить, когда дело доходит до редактирования изображений. В Google Pixel 8 Pro основное внимание уделялось возможностям редактирования с помощью искусственного интеллекта, включая возможность исправлять групповые фотографии, выбирая лучший снимок из нескольких изображений для лица каждого человека, или удалять объекты из изображений.

    <п>Apple работает над тем, что она называет редактированием изображений на основе инструкций. Это позволит вам редактировать фотографию, просто спросив Siri. Например, вы можете сказать 'Siri, удали человека на заднем плане' или 'Siri, добавьте больше контраста' и соответствующие изменения будут применены. Благодаря этому редактировать изображения будет так же просто, как сказать то, что вы хотите.

    <п>

    Siri is outdated, but a better version might be coming

    Редактирование анимации с помощью Siri

    Используйте подсказки и редактирование вместе

    Siri is outdated, but a better version might be coming

    Apple не ограничивается только редактированием изображений с помощью инструкций. В документе, представляющем инструмент анимации на базе LLM под названием Keyframer, объясняется, как можно использовать комбинацию подсказок и ручного редактирования для редактирования анимации на основе статических изображений.

    Например, вы можете повторить анимацию дискотеки 70-х, попросив 'сделать ее еще более диско' а затем вручную удалите 38-й диско-шар, потому что его слишком много. Существует потенциальная возможность создавать индивидуальные анимации с помощью Siri, которые выходят далеко за рамки Animoji от Apple.

  • Оцените статью