Резюме
- Copilot расширяет возможности продуктов Microsoft новой функцией «Действия» для онлайн-задач.
- Vision распространяется на Windows и мобильные приложения для визуального анализа в реальном времени.
- Copilot Search преобразует результаты поиска Bing с помощью сводок и источников, созданных искусственным интеллектом.
Copilot изначально задумывался как компонент ИИ для Bing, но с тех пор он превратился в комплексный ИИ, который сейчас присутствует практически в каждом продукте Microsoft. И теперь он получает ряд улучшений, которые немного приблизят его к ChatGPT и Gemini от Google, а также приведут Bing в соответствие с Google по этому вопросу.
Microsoft анонсировала значительное расширение возможностей Copilot. Возможно, самой большой особенностью здесь является введение новой функции под названием Actions. Эта функция позволяет помощнику на основе искусственного интеллекта выполнять определенные онлайн-задачи на основе пользовательских инструкций, предоставленных в чате. По словам Microsoft, эти задачи могут включать бронирование столиков в ресторане, покупку билетов на мероприятия или заказ товаров для доставки. Система разработана для обработки этих операций в фоновом режиме, пока пользователи занимаются другими делами.
Это что-то вроде оператора ChatGPT, доступного на самом дорогом уровне чат-бота за 200 долларов, за исключением того, что он работает только с ограниченным списком курируемых веб-сайтов. Это, вероятно, лучший подход для таких функций на данный момент — агентский оператор, анонсированный Amazon сегодня для «покупки вещей для вас», также работает с курируемым списком магазинов. Проще обучить ИИ ориентироваться в определенном списке веб-сайтов, чем доверять ему делать все из коробки.
Первоначальными партнерами Copilot Actions являются туристические и сервисы бронирования, такие как Booking.com, Expedia, Kayak, Tripadvisor, Skyscanner, Viater, Vrbo и Priceline. Бронирование столиков в ресторане через Open Table и заказы цветов через 1-800-Flowers.com также поддерживаются на старте. Microsoft указывает, что эта функция в конечном итоге должна работать с широким спектром веб-сайтов, и предполагает, что она может обрабатывать бронирование транспорта, потенциально интегрируясь с сервисами совместных поездок. Но на данный момент она доступна только для определенного списка курируемых партнеров. Хотя Copilot, вероятно, хорошо протестирован для работы на этих конкретных веб-сайтах, вам все равно следует следить за тем, как он вводит ваши данные, на всякий случай, если он действительно ошибется. Это всегда возможно — вы будете удивлены, как часто ИИ ошибается, даже с учетом того, насколько продвинутыми стали модели.
Microsoft также расширяет возможности «Copilot Vision», функции визуального анализа. Ранее она была доступна только в браузере Edge, но теперь Vision интегрируется в операционную систему Windows и мобильные приложения Copilot (iOS и Android). На мобильных устройствах Copilot Vision может анализировать видео в реальном времени с камеры устройства, что позволяет ему предлагать контекстную помощь, например советы по уходу за растениями или советы по декорированию дома. Для пользователей Windows вы можете просто поделиться своим экраном с Vision и позволить ИИ проанализировать то, что на экране. Это позволяет реализовать такие сценарии, как получение справки по определенным приложениям или помощь в анализе просмотренных фотографий и веб-страниц. Реализация Vision для Windows сначала выйдет для участников программы Windows Insider, а затем последует более широкое развертывание.
Microsoft также добавляет свой собственный взгляд на режим ИИ Google, запуская «Copilot Search» в Bing. Это по сути заменит результаты поиска на результаты только ИИ, как и режим ИИ Google для поиска. Когда пользователь выполняет поиск, Copilot Search может генерировать сводки ключевой информации, предоставлять прямые ответы или представлять информацию в структурированных макетах, в зависимости от запроса. Microsoft подчеркивает, что эти сгенерированные ИИ ответы будут явно ссылаться на свои источники, включая встроенные ссылки в тексте и списки используемых URL-адресов, что позволит пользователям проверять информацию и легко переходить к владельцам исходного контента.
Все эти функции вскоре должны стать доступны всем, за исключением Vision для Windows, выпуск которой для пользователей Windows может занять некоторое время.
Источник: Microsoft через The Verge
