Обновленная Siri, персональное кино и бесплатный ChatGPT. Что умеет ИИ от Apple

Что такое Apple Intelligence

Компания Apple не могла остаться в стороне от бума нейросетей и искусственного интеллекта и объявила о разработке собственного набора ИИ-инструментов под названием Apple Intelligence.

Apple обещает сделать свой ИИ мощным, интуитивно понятным, интегрированным в устройства и подстраивающимся под персональные запросы. Apple сделала акцент на конфиденциальности, подчеркнув, что ни одна другая компания, занимающаяся разработкой искусственного интеллекта, не говорит о защите персональных данных пользователей, а у Apple значительная часть личной информации и персональных данных будет обрабатываться на самом устройстве.

При этом AI сможет читать личные сообщения, отслеживать события в календаре, определять местоположение, записывать телефонные звонки, просматривать фотографии и многое другое. Если для какой-то задачи не будет хватать мощностей, то для ее реализации подключатся высокозащищенные «частные облака».

Apple Intelligence появится практически на каждой платформе и большинстве новых устройств Apple. Проверка правописания, создание изображений, улучшенный помощник Siri — это лишь малая часть функций, которым обучен «яблочный» ИИ.

Что умеет Apple Intelligence

Интеллектуальные инструменты для написания текстов

Теперь пользователи могут переписывать, корректировать и сокращать текст за считанные секунды. Эти функции будут доступны как в стандартных приложениях Apple, так и в сторонних программах, где пользователь набирает текст.

Rewrite

Функция Rewrite создаст несколько альтернативных версий того, что написал пользователь. Из этих вариантов можно выбрать тот, который лучше соответствует нужному стилю письма. О пассивной агрессии в письмах теперь можно не беспокоиться. Текст можно сделать более «дружелюбным», «профессиональным», «кратким» — да хоть стихотворным!

Proofread and Summarize

Инструмент Proofread проверит орфографию и пунктуацию и исправит ошибки.

Также пользователям будут доступны функции Summarize и Transform. Summarize работает в папке входящих сообщений в почте Apple, где вы можете увидеть краткое содержание длинных электронных писем. А Transform перескажет большой текст несколькими абзацами.

Функция Summarize будет полезна и в рабочих делах. Просто нажмите «Запись» в приложениях «Заметки» или «Телефон», а Apple Intelligence создаст краткую расшифровку вашего разговора (например, рабочего совещания), чтобы вы могли быстро просмотреть самую важную информацию.

Smart Reply

Функция «Умный ответ» — не новинка; она уже есть в iPhone. Но Apple Intelligence привнесет в Smart Reply обновления, которые сделают ответы точнее.

Для активации интеллектуальных текстовых инструментов потребуется выделить нужный текст и выбрать соответствующую опцию в меню.

Приоритетные сообщения и уведомления

Apple Intelligence научится понимать приоритеты. Так, приоритетные сообщения в почте будут располагаться в самом верху папки «Входящие». Например, приглашения на встречи, которые должны состояться сегодня, или напоминания о регистрации на рейс, которым вы вылетаете завтра утром.

Приоритетные уведомления будут отображаться на экране девайса отдельным слоем с пушами.

А новейшая функция Focus распознает содержание ваших уведомлений и покажет только те из них, которые могут потребовать немедленного реагирования.

Создание изображений

Apple Intelligence открывает способы визуального самовыражения. Пользователи могут создавать забавные оригинальные изображения и совершенно новые персонализированные эмодзи Genmoji. Грубый набросок легко превратится в креативное, качественное изображение, которое дополнит заметки с помощью Image Wand. Также пользователи могут создать собственный фильм-воспоминание на основе предоставленного описания.

Image Playground

С помощью Image Playground интересные изображения создаются за считанные секунды. Функцией можно воспользоваться непосредственно в приложениях, например в заметках или слайдах Keynote. А сторонние разработчики смогут легко интегрировать Image Playground в собственные проекты с помощью API.

Работает Image Playground примерно так же, как и другие нейронки с функцией генерации изображения. Достаточно просто взять фото из личной галереи или составить текстовый запрос. Получившееся изображение можно редактировать: сменить стиль или добавить нужные детали.

Image Wand

Image Wand поможет преобразовать грубый набросок в полноценную иллюстрацию в «Заметках». Для этого нужно нарисовать круг вокруг наброска. Image Wand проанализирует содержимое внутри него, чтобы создать визуальный образ. Можно даже обвести пустое пространство — Image Wand будет использовать окружающий контекст для создания изображения.

В компании отметили, что контент, созданный нейросетью, будет помечаться в метаданных.

Работа с фотографиями

Если на фотографии присутствует лишний элемент (например, попавшие в кадр люди на заднем плане), то с помощью специального инструмента «Очистка» вы можете легко удалить его одним касанием. Потребуется только обвести ненужный объект, а Apple Intelligence сотрет его с фотографии.

Apple Intelligence также умеет находить нужные фото и видео в галерее по описанию. AI даже способен найти определенный момент в видео, который соответствует поисковому описанию, и перенаправить прямо к нему.

Также пользователи смогут создать уникальный видеоряд. Достаточно просто описать Apple Intelligence, какие фотографии и видео необходимо включить в фильм. Например: «Создай фильм из фото и видео, на которых я вместе с семьей отдыхаю в Сочи летом 2024 года». AI сгенерирует настоящий фильм-воспоминание с продуманным сюжетом.

Genmoji

AI поможет создать персональные эмодзи, которые подойдут к контексту разговора. Достаточно ввести описание и отредактировать получившийся эмодзи на предварительном просмотре. Эмодзи можно будет создавать даже на основе личных фотографий из галереи. Можно ли будет использовать Genmoji в сторонних приложениях (например, в Telegram) — пока неизвестно.

Новая эра для Siri

Нынешнюю Siri нельзя назвать идеальным голосовым помощником. Пока Алиса от «Яндекса» развивалась и осваивала новые функции, Siri не особенно часто получала обновления. Да и если они случались, то ничего выдающегося в них не было. И вот дождались: вместе с презентацией Apple Intelligence Siri получает долгожданный апдейт. Apple обещает представить совершенно нового, обученного, персонализированного голосового помощника, оснащенного умопомрачительными функциями, о которых раньше можно было только мечтать.

Дизайн

Siri сменит облик. Вместо круглой иконки внизу экрана после активации ассистента появится элегантная светящаяся подсветка, которая огибает край экрана.

C Siri не обязательно разговаривать вслух: с помощью двойного тапа по нижней части экрана iPhone или iPad вы можете отправить команду Siri.

Подсказки о взаимодействии с устройством

Siri расскажет о функциях и настройках личного устройства. Если пользователь не знает, как создать новый Apple ID или где в настройках включить точку доступа, голосовой помощник подскажет с помощью пошаговых инструкций на экране.

Умение понимать и поддерживать контекст

В календаре есть напоминание о предстоящей командировке в другой город, а пользователь хочет узнать там погоду? Достаточно просто сказать: «Siri, какая там будет погода?» На почту пришло сообщение от друга с указанием его нового адреса? Голосовая команда поможет добавить информацию в карточку контакта: «Siri, добавь этот адрес в его карточку контактов». Поддержка сложной функции понимания контекста облегчит использование голосового помощника.

Быстрый и удобный поиск по личным файлам

Siri научится анализировать и запоминать файлы из приложений. Под ее присмотром окажутся заметки, сообщения, личная почта, фотографии и многое другое.

Взаимодействие между приложениями

Можно попросить Siri улучшить фотографию голосовой командой: «Сделай это фото ярким», — а после поместить полученное фото в заметку.

Интеграция с ChatGPT

В версию iOS 18 будет встроен ChatGPT 4o. Эта модель будет использоваться в качестве вспомогательного инструмента. Если, например, пользователь обратится к Apple Intelligence с запросом придумать пять кличек для рыжего котенка или написать несколько рецептов для романтического ужина, то AI может подключить ChatGPT как стороннего помощника. Перед этим AI попросит разрешение пользователя для подключения к беседе ChatGPT.

Доступ к ChatGPT на данный момент платный, но пользователи Apple получат его совершенно бесплатно. При этом дополнительно никаких учетных записей создавать не нужно.

Когда выйдет Apple Intelligence и на каких устройствах

Бета-версия Apple Intelligence выйдет осенью 2024 года. О точных датах информации пока нет. Известно, что Apple Intelligence будет функционировать на устройствах Apple с iOS 18, iPadOS 18 и macOS Sequoia.

Поддерживать функцию Apple Intelligence будут мощные iPhone, iPad и Mac:

• iPhone 15 Pro и iPhone 15 Pro Max;
• iPad с процессором М1 и более поздними версиями;
• Mac с процессором М1 и более поздними версиями;
• Mac Studio с процессором M1 Max и более поздними версиями;
• Mac Pro с процессором M2 Ultra.

Для поддержки Apple Intelligence требуется мощный процессор. Для iPhone — это А17 Pro и выше. Сейчас в линейке Apple таких iPhone всего два, но, скорее всего, требуемый процессор появится в линейке iPhone 16.

А вот HomePod и HomePod mini не получат поддержки Apple Intelligence — пишет инсайдер Марк Гурман. Умные колонки оснащены всего лишь 1 ГБ оперативной памяти. Такой цифры явно маловато для поддержки искусственного интеллекта. На iPhone, например, для поддержки Apple Intelligence потребуется минимум 8 ГБ оперативной памяти.

Также Марк Гурман пишет, что в данный момент Apple разрабатывает новейшее устройство с дисплеем, которое будет работать на базе Apple Intelligence. Возможно, нас ждет нечто вроде Станции Дуо Макс от «Яндекса». Слухи о разработке Apple девайса с экраном ходят уже давно, так что ждем осеннего анонса.

Apple Intelligence в России

На официальном сайте Apple нет никакой информации о возможных ограничениях Apple Intelligence в каких-либо регионах. Поэтому можно предположить, что функции Apple Intelligence будут доступны юзерам из всех стран, в том числе из России.

Однако большинство функций Apple Intelligence будут доступны в бета-релизе только тем пользователям, которые используют английский язык системы на устройстве. Разговаривать голосовой помощник Siri изначально тоже будет на английском. Поддержка других языков запланирована на 2025 год. Информации о поддержке русского языка пока нет.

Однозначно сказать, какие функции будут доступны пользователям из России сразу после осенней бета-версии, после релиза, а также после второй волны обновлений, пока нельзя.

Заключение

Apple Intelligence представляет собой значительный шаг вперед в развитии технологий искусственного интеллекта, интегрированных в систему Apple. Инновационный AI предлагает мощные инструменты для создания и редактирования текстов и изображений. Siri наконец получит долгожданный апдейт, что в свою очередь выведет взаимодействие с голосовым помощником на новый уровень. Особое внимание Apple уделяет конфиденциальности данных, выделяя Apple Intelligence среди конкурентов, предлагая пользователям высокий уровень безопасности и защиты личной информации. Ждем осенней бета-версии Apple Intelligence, чтобы среди первых протестировать новые функции.