iOS 18.1 и более поздние версии: функции Apple Intelligence от Siri

28 Ноя 2024 By apple-service.by

С помощью Apple Intelligence компания Apple стремится сделать Siri умнее, чем когда-либо прежде. Персональный помощник сможет узнать о вас больше, сделать больше в приложениях и передать бразды правления более умному виртуальному помощнику, когда это необходимо.

Некоторые новые функции Siri доступны уже сейчас, а некоторые появятся только в 2025 году. В этом руководстве рассказывается обо всех новых возможностях Siri, реализованных благодаря Apple Intelligence.

Обновленный дизайн Siri

‌Siri‌ имеет обновленный дизайн на устройствах, поддерживающих ‌Apple Intelligence‌. Вместо небольшой длины волны, которая раньше отображалась при активации ‌Siri‌, теперь есть розовое/фиолетовое/синее/оранжевое пестрое свечение, которое окутывает весь iPhone , причем цвета меняются, когда ‌Siri‌ слушает команду.

Лучшее понимание языка

Siri лучше понимает разговорную речь и запросы, поэтому, если вы запнетесь или передумаете на середине предложения, Siri все равно сможет понять, что вы говорите.

‌Siri‌ также может сохранять контекст между запросами, так что вы можете сослаться на что-то в предыдущем запросе, и ‌Siri‌ поймет, о чем вы говорите. Так что если вы используете ‌Siri‌ для создания события в календаре, вы можете просто спросить «Какая там будет погода?» и ‌Siri‌ поймет, где «там».

Улучшенный голос

У Siri новый, более естественный голос.

Введите текст для Siri

Есть встроенная функция Type to ‌Siri‌, поэтому вам не нужно говорить с ‌Siri‌, чтобы взаимодействовать с персональным помощником. Чтобы использовать ее, дважды нажмите на нижнюю часть ‌iPhone‌ или iPad, чтобы открыть текстовую панель, а затем оттуда просто введите свой запрос.

Печатать для Siri можно так же, как и говорить с Siri, и Siri может предоставлять информацию, не произнося ее вслух. Это полезная функция для публичных ситуаций, когда вы не можете говорить и не хотите, чтобы Siri отвечала вам.

iOS 18.1: как печатать для Siri

С появлением Apple Intelligence в iOS 18.1 общение с Siri стало более гибким, поскольку вы можете легко вводить свои запросы, а не говорить их. Это тонкое, но мощное изменение, которое идеально подходит для тех моментов, когда вам нужно быть тихим или незаметным.

Включение функции Type to Siri простое. Перейдите в Настройки -> Apple Intelligence & Siri , нажмите Talk & Type to Siri и убедитесь, что переключатель Type to Siri включен. После включения вы можете вызвать интерфейс набора текста быстрым двойным нажатием на нижний край дисплея вашего iPhone.

Интерфейс набора текста включает в себя предлагаемые запросы, которые помогут вам начать, и вы можете набрать практически все, что вы обычно говорите Siri. Просто введите свой запрос и нажмите стрелку вверх, чтобы отправить. Siri ответит так же, как на голосовую команду, сохраняя контекст между сообщениями для естественного общения.

Это текстовое взаимодействие особенно полезно во время встреч или в тихих местах, когда вы находитесь в шумной обстановке, где Siri может быть трудно вас услышать, или если вы предпочитаете печатать, а не говорить для более точных запросов. Это также может помочь, когда вы хотите сохранить конфиденциальность в общественных местах.

Функция легко интегрируется с расширенной базой знаний Siri в iOS 18.1, включая поддержку продуктов Apple и навигацию по настройкам. Вы даже можете использовать естественный язык для поиска настроек, если не уверены в их точных названиях.

Независимо от того, являетесь ли вы давним пользователем Siri, ищущим больше гибкости, или тем, кто не решается использовать голосовые команды в общественных местах, Type to Siri предлагает удобную альтернативу для взаимодействия с виртуальным помощником Apple.

Siri на Mac

Хотя это руководство посвящено ‌iPhone‌ и ‌iPad‌, новая, более умная ‌Siri‌ также доступна на Mac. Функцию «Ввод текста для ‌Siri‌» можно включить в приложении «Настройки», и ее можно назначить на сочетание клавиш, например, дважды нажать кнопку Command

Знание продукции Apple

Apple обучила Siri всем своим продуктам, поэтому, если вы хотите узнать, как использовать функцию или как выполнить задачу, вы можете попросить Siri о помощи. Siri может предоставить пошаговые инструкции по использованию функций iPhone, iPad и Mac.

Интеграция ChatGPT (iOS 18.2)

В iOS 18.2 интеграция ChatGPT доступна с ‌Siri‌. Если пользователь спрашивает что-то, что ‌Siri‌ не может обработать, ChatGPT может предоставить ответ вместо него, если пользователь даст разрешение.

Siri может подключаться к ChatGPT, а затем передавать ответ ChatGPT без необходимости переключать приложения или использовать другие инструменты.

Интеграцию Siri ChatGPT можно использовать для любых действий, которые можно выполнять с помощью приложения ChatGPT или ChatGPT в Интернете. Это просто более простой способ доступа к ChatGPT.                       

Идентификация объекта

Для чего угодно на экране, например, изображения, вы можете задать ‌Siri‌ вопрос об этом. Если у вас есть фотография растения, например, вопрос «Что это?» побудит ‌Siri‌ отправить снимок экрана в ChatGPT, и ChatGPT попытается предоставить контекст.

Это работает с изображениями в Интернете, вашими фотографиями, тем, что вы просматриваете через приложение «Камера», текстом и многим другим.

ChatGPT можно использовать для описания сцены, что полезно для людей, у которых могут быть проблемы со зрением. Откройте приложение «Камера», активируйте ‌Siri‌ и спросите «Что это?», и вы получите подробное описание того, что находится перед вами.

Возможность отправки изображений из снимков экрана в ChatGPT отличается от функции экранного оповещения Siri, которую Apple планирует реализовать в будущем.

Информация из документов

Для писем, документов, PDF-файлов и многого другого ChatGPT может предоставить сводку. Когда вы спрашиваете «Можете ли вы это пересказать?», ‌Siri‌ отправит снимок экрана или весь документ, включая полные PDF-файлы. Это полезная функция для быстрого обзора содержимого длинного документа.

Для длинных PDF-файлов или документов вам нужно будет нажать на стрелки, чтобы убедиться, что в ChatGPT отправлен весь документ, а не только снимок экрана.

Вместо того, чтобы спрашивать сводку, вы можете задать конкретный вопрос о документе. Если вы смотрите на страховой полис, вы можете спросить «Каковы ограничения этого полиса?» или «Каковы исключения?», чтобы получить более индивидуальную информацию.

Проверка орфографии и грамматики

Если вы написали электронное письмо, вместо того, чтобы выбирать его и использовать Writing Tools для проверки на наличие орфографических и грамматических ошибок, вы можете попросить ‌Siri‌ взглянуть, и ‌Siri‌ отправит снимок экрана в ChatGPT. «Можешь просмотреть это на наличие ошибок?» работает как команда для этой функции.

ChatGPT также можно использовать для переписывания и улучшения написанного вами текста, но учтите, что это не то же самое, что и собственные инструменты Apple Writing Tools.

Генерация текста и изображений

ChatGPT может генерировать текст с нуля на основе предоставленных ему подсказок. Например, вы можете попросить ‌Siri‌ попросить ChatGPT написать стихотворение или составить вежливое письмо другу, и ChatGPT создаст что-то с нуля.

Некоторые примеры запросов, которые вы можете использовать:

  • Напиши мне стихотворение об Apple
  • Создайте песню о Google
  • Помогите мне написать письмо моему другу
  • Напишите три абзаца о рыжих кошках.
  • Напишите мне пост в социальных сетях о Дне благодарения
  • Перепишите это, чтобы было более кратко
  • Придумайте сказку на ночь о драконе

Если ChatGPT что-то написал для вас, вы можете нажать на значок копирования, чтобы скопировать текст в буфер обмена и вставить его в заметки, сообщения, документ или электронное письмо.

Вы также можете создавать изображения. Используя движок Dall-E 3, ChatGPT может создавать реалистичные изображения, сгенерированные ИИ, чего нельзя сделать с помощью ‌Apple Intelligence‌. Для запросов изображений проще всего сказать ‌Siri‌ «Скажи ChatGPT сделать изображение [вещи, изображение которой вы хотите]», потому что если вы просто попросите ‌Siri‌ сделать изображение или сгенерировать изображение, она часто будет показывать веб-изображения.

Отвечая на вопросы

Один из лучших вариантов использования ChatGPT через ‌Siri‌ — это получение ответов на запросы, которые немного сложны для ‌Siri‌. Вопросы, с которыми ‌Siri‌ не может справиться, будут переданы ChatGPT с вашего разрешения, но вы также можете заставить ‌Siri‌ использовать ChatGPT вместо внутреннего движка ‌Siri‌, изменив вопросы с помощью «Спросить ChatGPT».

Например, вопрос о том, какую батарею использует контроллер Xbox, будет отправлен на Википедию, а не на ChatGPT, но если говорить конкретно: «Спросите ChatGPT, какую батарею использует контроллер Xbox», то Siri передаст вопрос ChatGPT.

Ответы ChatGPT иногда могут быть более информативными. Спросив ‌Siri‌, чем заменить яйца в рецепте, вы просто получите альтернативы, но ответ ChatGPT на тот же вопрос предоставит вам количество ингредиента, которое вы, возможно, захотите добавить, чтобы приравнять его к яйцу.

Вот несколько примеров запросов, по которым Siri будет автоматически обращаться к ChatGPT:

  • Какие пять видов съедобных грибов произрастают в Северной Каролине?
  • Что взять с собой на пляж зимой?
  • Какие места обязательно нужно посетить в Париже?
  • Что мне делать на этих выходных?
  • Мне нужен рецепт бананового хлеба.
  • Дайте мне инструкцию по нарезке манго.
  • Когда сезон авокадо?
  • Посоветуйте хорошие песни для тихого пятничного вечера
  • Чем можно заняться дома, когда идет дождь?

Другие вещи, которые вы можете попросить сделать ChatGPT

  • Написать код
  • Отладочный код
  • Получите помощь с домашним заданием
  • Выполняйте вычисления, переводы, преобразования и многое другое
  • Генерация идей подарков
  • Придумайте названия для предприятий, домашних животных, персонажей и многого другого.
  • Создавайте вопросы и загадки
  • Планируйте поездки
  • Создавайте планы питания
  • Получите рецепты для ингредиентов, которые у вас есть
  • Генерировать шутки
  • Предлагать фильмы, телепередачи и книги на основе определенных параметров
  • Кратко опишите телепередачи и фильмы
  • Генерация подсказок для рисования/письма

Хотя ‌Siri‌ может делать все эти вещи с помощью ChatGPT, отсутствие преемственности в версии ‌Siri‌ ChatGPT затрудняет выполнение задач, которые не являются одноразовыми запросами. Например, создание плана питания лучше работает с реальным интерфейсом ChatGPT, потому что вы можете вести более содержательную беседу, а не полагаться на один запрос.

Настройки и конфиденциальность ChatGPT

Интеграция ChatGPT должна быть включена, и после этого каждый запрос требует разрешения пользователя. Существует возможность отключить дополнительное разрешение, выключив опцию «Подтвердить запросы ChatGPT».

Переключатель можно включить, открыв приложение «Настройки», выбрав «Apple Intelligence», а затем нажав на ChatGPT. Если эта функция отключена, «Siri» не будет спрашивать каждый раз перед отправкой информации в ChatGPT.

Однако Siri всегда будет спрашивать разрешение перед отправкой файла в ChatGPT, даже если функция запросов на подтверждение отключена.

Что касается конфиденциальности, для использования ChatGPT не требуется вход в систему, и ни Apple, ни OpenAI не регистрируют ваши запросы. Но если вы войдете в систему с платной учетной записью, ChatGPT может сохранять копии запросов.

ChatGPT — бесплатный или платный

Интеграция ChatGPT включает ограниченное количество запросов, которые используют ChatGPT-4o, последнюю версию ChatGPT, бесплатно. После того, как они будут исчерпаны, интеграция ChatGPT использует 4o Mini, который менее продвинут и потребляет меньше ресурсов.

Подписчики ChatGPT Plus получают больше запросов ChatGPT-4o. ChatGPT Plus стоит 20 долларов в месяц, и пользователи ‌iPhone‌, у которых еще нет ChatGPT Plus, могут зарегистрироваться прямо из раздела ‌Apple Intelligence‌ приложения Настройки.

Пользователи Apple по сути имеют доступ к базовому плану ChatGPT, поэтому запросы, использующие расширенные возможности, сбрасываются каждые 24 часа. С этим планом можно генерировать два изображения в день.

ChatGPT против Apple Intelligence

Возможности ‌Apple Intelligence‌ и возможности интеграции ChatGPT частично совпадают, но есть и некоторые различия. ‌Apple Intelligence‌ имеет Writing Tools для переписывания и редактирования того, что вы уже написали, но ChatGPT может писать контент с нуля.

Image Playground , Image Wand и Genmoji позволяют вам генерировать изображения, но ‌Apple Intelligence‌ не будет генерировать реалистично выглядящие изображения. Вместо этого стили ограничены теми, которые выглядят анимированными или набросанными. ChatGPT, однако, будет генерировать реалистичные изображения.

‌Apple Intelligence‌ можно использовать для резюмирования документов, но только если вы выделите текст и выберите опцию «Резюмировать» в «Инструментах письма». ‌Apple Intelligence‌ не может ответить на более конкретные вопросы о PDF-файлах и документах, поэтому ChatGPT имеет преимущество для такого рода запросов.

Ограничения ChatGPT

Когда вы задаете ChatGPT вопрос через ‌Siri‌, вам нужно обязательно прочитать ответ сразу, потому что он не остается на экране долго. Apple также не ведет его учет.

Если вы вошли в ChatGPT, в вашей учетной записи OpenAI есть история, но если вы не вошли в систему, сохранить информацию, полученную от ChatGPT, невозможно, и журнал не ведется.

Другие чат-боты

На данный момент Apple добавила только интеграцию ChatGPT, но в будущем планируется поддержка Google Gemini.

Функции интеллекта Siri от Apple появятся в следующем году

Несколько функций Siri все еще находятся в разработке, и Apple планирует добавить эти возможности в Siri в следующем году. Точные сроки пока не определены, но, по слухам, мы увидим их в iOS 18.4 весной.

Личный контекст

Siri сможет отслеживать ваши электронные письма, сообщения, файлы, фотографии и многое другое, узнавая о вас больше, чтобы помочь вам выполнять задачи и отслеживать отправленные вам данные.

  • Покажите мне файлы, которые Эрик прислал мне на прошлой неделе.
  • Найдите электронное письмо, в котором Эрик упомянул катание на коньках.
  • Найдите книги, которые мне порекомендовал Эрик.
  • Где рецепт, который мне прислал Эрик?
  • Какой у меня номер паспорта?

Осведомленность на экране

‌Siri‌ сможет определить, что находится на вашем экране, и выполнить действия, связанные с тем, на что вы смотрите. Например, если кто-то пришлет вам адрес, вы можете попросить ‌Siri‌ добавить его в свою карточку контактов. Или если вы смотрите на фотографию и хотите отправить ее кому-то, вы можете попросить ‌Siri‌ сделать это за вас.

Более глубокая интеграция приложений

‌Siri‌ сможет делать больше в приложениях и между ними, выполняя действия и завершая задачи, которые сейчас просто невозможны с персональным помощником. У нас нет полной картины того, на что будет способна ‌Siri‌, но Apple предоставила несколько примеров того, чего можно ожидать.

  • Перемещение файлов из одного приложения в другое.
  • Редактирование фотографии и последующая отправка ее кому-либо.
  • Получите маршрут домой и сообщите Эрику расчетное время прибытия.
  • Отправьте Эрику написанное мной электронное письмо.

Следующая фаза Siri

После того, как все функции ‌Siri‌ ‌Apple Intelligence‌ будут реализованы в iOS 18 , Apple планирует представить следующее поколение ‌Siri‌, которое будет опираться на большие языковые модели. LLM-версия ‌Siri‌ уже находится в разработке , и она сможет лучше конкурировать с чат-ботами, такими как ChatGPT.

LLM ‌Siri‌ сможет поддерживать непрерывные разговоры, и это будет больше похоже на разговор с человеком. Большая интеграция языковой модели позволит ‌Siri‌ выполнять более сложные задачи, и в будущем ‌Siri‌, вероятно, не придется полагаться на ChatGPT.

Обновленная версия ‌Siri‌ в будущем заменит текущую версию ‌Siri‌. Ожидается, что Apple объявит LLM ‌Siri‌ в 2025 году вместе с выпуском iOS 19 , но обновление, скорее всего, не выйдет до весны 2026 года.

Конфиденциальность Apple Intelligence

‌Apple Intelligence‌ был разработан с учетом конфиденциальности, и многие запросы обрабатываются на устройстве. Например, все персональное контекстное обучение выполняется с помощью интеллекта на устройстве, и ничто не покидает ваш ‌iPhone‌ или ‌iPad‌.

Для запросов, которым требуется вычислительная мощность облачного сервера, Apple использует Private Cloud Compute на кремниевых машинах Apple для обработки сложных задач, сохраняя конфиденциальность пользователей. Apple обещает, что данные не хранятся и используются только для пользовательских запросов.

Устройства, совместимые с Apple Intelligence

‌Apple Intelligence‌ доступен на iPhone 15 Pro, ‌iPhone 15‌ Pro Max, всех моделях iPhone 16 , iPad mini с чипом A17 Pro, всех iPad с чипом Apple Silicon и всех компьютерах Mac с чипом Apple Silicon.