Apple Intelligence: вот все, что мы знаем на данный момент

Apple Intelligence: вот все, что мы знаем на данный момент

Как давний пользователь Apple и энтузиаст конфиденциальности, я в восторге от последних разработок Apple. Акцент на конфиденциальности в их новой системе искусственного интеллекта Apple Intelligence действительно заслуживает похвалы. Вычисления в частном облаке (PCC) и возможности обработки данных на устройстве меняют правила игры для тех, кто ценит безопасность своих данных.


Инициатива Apple в области искусственного интеллекта, получившая название Apple Intelligence, направлена ​​на революцию в нашем взаимодействии с технологиями. Путем плавной интеграции сложных технологий машинного обучения и искусственного интеллекта в обычные гаджеты компания стремится изменить то, как мы используем технологии в нашей повседневной жизни.

Система искусственного интеллекта Apple призвана сделать разговоры более похожими на беседы с другом для Siri, предложить корректуру и обобщение в реальном времени в различных приложениях, а также обеспечить быстрое создание изображений — все это предназначено для улучшения взаимодействия с пользователем и упрощения задач во всем ассортименте продуктов. Вот обзор революционных достижений Apple в области искусственного интеллекта.

Дата выпуска Apple Intelligence и совместимость

Первоначально запланированный к публичному запуску в сентябре вместе с iOS 18, iPadOS 18 и macOS Sequoia, технология искусственного интеллекта Apple — Apple Intelligence — как сообщается, была отложена Марком Гурманом из Bloomberg. Согласно отчету Гурмана, хотя на данный момент он доступен разработчикам, маловероятно, что широкая публика получит в свои руки Apple Intelligence до запланированного в октябре обновления 18.1.

Долгожданная функция Apple Intelligence была отложена, и теперь ожидается, что она появится в iOS 18.1 и iPadOS 18.1 в октябре, а не в первоначальном выпуске в сентябре. Однако бета-версия для разработчиков станет доступна начиная с этой недели.

— Марк Гурман (@markgurman) 28 июля 2024 г.

Как аналитик, я понял, что наши возможности искусственного интеллекта дебютируют исключительно на iPhone 15 Pro и 15 Pro Max, а также на моделях iPad и Mac с процессорами M1 или более поздних версий (разумно предположить, что это распространится и на серию iPhone 16). учитывая, что все они будут работать на iOS 18). Также важно отметить, что эти функции будут доступны только при запуске, если в качестве языка пользователя установлен английский.

Как исследователь, я размышляю над обоснованием такого ограничения. Похоже, что Apple подчеркивает сложность процедур, заявляя, что они требуют надежных возможностей, предлагаемых сложными нейронными механизмами, графическими и центральными процессорами, имеющимися в их последних наборах микросхем. Эти продвинутые компоненты просто превосходят возможности старого оборудования.

Лицам, использующим iPhone 15 Pro и iPhone 15 Pro Max в рамках программы Apple для разработчиков, был предоставлен ранний доступ к функции «Интеллект» в июле после выпуска бета-версии iOS 18.1. Проще говоря, участники программы Apple Developer, использующие iPhone 15 Pro или 15 Pro Max, получили возможность ознакомиться с функцией Intelligence в июле, когда была выпущена бета-версия iOS 18.1.

Новые возможности ИИ

Независимо от того, для какого устройства вы используете Apple AI, его основные области сосредоточения будут сосредоточены на трех ключевых аспектах: помощь в написании задач, создание и изменение изображений и улучшение интеллектуальных способностей Siri.

Интеллектуальная система Apple призвана охватить весь спектр предлагаемых продуктов. Следовательно, большинство функций, доступных в macOS для Apple Intelligence, также будут присутствовать в версиях iOS и iPadOS. Сюда входят инструменты для письма, площадка для изображений, улучшения памяти в фотографиях и улучшения возможностей Siri.

Помимо этого, iPadOS в сочетании с Apple Pencil предоставляет доступ к дополнительным возможностям. Например, в приложении «Заметки» функция Smart Script мгновенно выпрямляет и сглаживает рукописный текст. Более того, новый калькулятор Math Notes легко решит написанные вами математические уравнения, написанные вами от руки, и создаст интерактивные графики, полученные на основе этих уравнений, одним касанием.

В Digital Trends мы впервые познакомились с Apple Intelligence в бета-версии MacOS Sierra, но наши первоначальные впечатления были далеко не блестящими. К сожалению, цифровому помощнику, похоже, не хватает функциональности, и в бета-версии доступна лишь небольшая часть его инструментов искусственного интеллекта. Доступные инструменты, такие как помощник по письму Siri и аудиотранскрипция, содержали множество ошибок и проблем, что делало их ненадежными в использовании. Имейте в виду, что это прототипы и, вероятно, будут улучшены перед публичным выпуском. Однако, учитывая наш текущий опыт, прогнозируемый октябрьский выпуск Apple Intelligence может оказаться слишком оптимистичным.

Инструменты для письма

Apple Intelligence: вот все, что мы знаем на данный момент

Инновационная функция «Инструменты для письма» будет легко добавлена ​​в iOS 18, iPadOS 18 и macOS Sequoia после их выпуска. Эта функция может проверять текст пользователя на наличие ошибок, редактировать разделы, нуждающиеся в улучшении, и даже уплотнять текст в приложениях Apple, таких как Почта, Заметки и Страницы. Кроме того, сторонние разработчики получат возможность использовать инструменты письма в своих приложениях путем интеграции соответствующих вызовов API.

В приложении «Почта» интеллектуальные функции Apple предлагают пользователям краткий обзор входящих сообщений вместо отображения первых нескольких строк каждого электронного письма. Интеллектуальная система ответов Smart Reply сгенерирует подходящие ответы на основе содержания сообщения и обеспечит ответы на все вопросы, заданные в исходном электронном письме. Кроме того, это приложение упорядочивает более срочные и релевантные сообщения, размещая их в верхней части папки «Входящие» с помощью функции «Приоритетное сообщение».

Улучшения ждут и приложение Notes! Благодаря Apple Intelligence вы сможете использовать в приложении расширенные функции, такие как транскрипция аудио и обобщение. Кроме того, встроенный калькулятор Math Notes позволит вам решать математические уравнения прямо в заметках, вводя их в саму заметку.

Изображение игровой площадки

Apple Intelligence: вот все, что мы знаем на данный момент

Новое приложение Image Playground призвано упростить пользователям создание и изменение изображений, предлагая возможность быстро создавать изображения всего за несколько секунд. В этом приложении реализованы три уникальных художественных стиля: анимация, иллюстрация и эскиз. Кроме того, Image Playground работает независимо, но легко интегрируется с другими приложениями Apple, такими как «Сообщения», еще больше расширяя свои возможности.

Проще говоря, интеллектуальная функция Apple теперь улучшит функцию «Воспоминания» вашей фотопленки в приложении «Фотографии». Ранее этот инструмент был разработан для автоматического выбора важных людей, мест и домашних животных в жизни пользователя, а также организации этих изображений в гармоничную коллекцию, сопровождаемую музыкой. Благодаря Apple Intelligence функция «Воспоминания» будет улучшаться и дальше.

Система искусственного интеллекта выберет фотографии и видео, соответствующие запросу пользователя (например, «Путешествие лучших друзей в Лос-Анджелес в 2024 году»). Затем он создаст повествование, разделив его на главы на основе тем, обнаруженных в выбранных изображениях, и скомпилирует все в короткий фильм. Кроме того, после того, как Apple Intelligence завершит публичное бета-тестирование, пользователи получат доступ к инструменту, похожему на Magic Eraser от Google, для очистки фотографий, а также к расширенным функциям поиска.

Сири

Apple Intelligence: вот все, что мы знаем на данный момент

Вполне вероятно, что Siri, виртуальный помощник Apple, получит значительную выгоду от новых функций Apple Intelligence. Это усовершенствование может привести к более тесной интеграции Siri в операционную систему, что приведет к более интерактивному общению и более глубокому пониманию естественного языка.

Кроме того, память Siri станет более долговечной, что позволит помощнику запоминать информацию из прошлых обсуждений. Это означает, что пользователи могут легко переключаться между устными и письменными командами, не прерываясь.

Конфиденциальность Apple Intelligence

Apple Intelligence: вот все, что мы знаем на данный момент

Как энтузиаст технологий, я слежу за последними достижениями, и когда дело доходит до Apple, они действительно подняли конфиденциальность на новую высоту. Вместо того, чтобы просто говорить об этом, они поставили это в основу своего опыта работы с Apple Intelligence. Они даже приложили дополнительные усилия, создав собственное, безопасное и частное вычислительное облако ИИ — Private Cloud Compute (PCC) — чтобы гарантировать обработку сложных пользовательских запросов с максимальной конфиденциальностью, помогая им избежать дорогостоящих и неудобных данных. утечки, с которыми недавно столкнулись некоторые конкуренты.

На Всемирной конференции разработчиков (WWDC) 2024 года Крейг Федериги, старший вице-президент Apple по разработке программного обеспечения, объявил, что многие повседневные задачи Apple Intelligence будут выполняться непосредственно на устройствах с использованием новейших процессоров A17 и M-серии. Он также подчеркнул, что система будет настроена на ваши личные данные, не собирая от вас никакой личной информации.

«Когда вы что-то запрашиваете, интеллектуальная система Apple проверяет, можно ли это обработать непосредственно на вашем устройстве. Если требуется больше энергии, для выполнения задачи она подключается к частному облаку. В Apple отправляются только важные данные, связанные с вашей работой. серверы для обработки, что должно значительно минимизировать риск компрометации, потери или перехвата личных пользовательских данных во время передачи между устройством и облаком.

Он пояснил, что Apple не хранит ваши данные и не предоставляет к ним доступ. Вместо этого он используется исключительно для удовлетворения вашего запроса. Как и в случае с вашим iPhone, сторонние специалисты могут проверить программное обеспечение, работающее на этих серверах, чтобы убедиться, что обязательство Apple по обеспечению конфиденциальности соблюдается.

Партнерство Apple Intelligence с ChatGPT

Apple Intelligence: вот все, что мы знаем на данный момент

Этой осенью не только технология Apple Intelligence будет представлять собой передовой генеративный искусственный интеллект в ваших устройствах Apple; Во время WWDC руководители Apple и OpenAI объявили о партнерстве, которое предоставит возможности ChatGPT (на базе GPT-4o) для Siri и инструментов для письма. Подобно Apple Intelligence, ChatGPT вмешается, если встроенных возможностей Siri недостаточно для запроса пользователя; однако вместо того, чтобы полагаться на облако персональных вычислений (PCC), он отправит запрос в общедоступное вычислительное облако OpenAI.

Пользователи могут использовать функции ChatGPT непосредственно из интерфейса Siri, поскольку Siri предоставит ответ независимо от того, откуда поступил запрос. Чтобы сохранить базовый уровень конфиденциальности, устройство запрашивает согласие пользователя перед отправкой запроса, включая любые сопутствующие файлы или изображения.

Apple Intelligence прошла обучение на тензорных процессорах Google

Apple Intelligence: вот все, что мы знаем на данный момент

Исследование, проведенное Apple и опубликованное в июле, показало, что технологический гигант выбрал тензорные процессоры Google (TPU) вместо популярных систем графических процессоров Nvidia для обучения ключевым элементам своей модели Apple Intelligence. Исследовательская группа заявила, что использование ТПУ предоставило им достаточную вычислительную мощность для обучения крупномасштабной модели изучения языка (LLM), и они смогли добиться этого более эффективно, чем если бы они использовали одну систему.

Этот шаг представляет собой существенный отход от обычной практики доминирования на рынке чипов искусственного интеллекта. Тот факт, что Apple, которая в настоящее время занимает от 70% до 95% рынка ИИ-чипов (в первую очередь Nvidia), предпочла вместо этого использовать продукт своего прямого конкурента, является весьма необычным. Это может быть предвестником грядущих событий, поскольку предполагает, что доминирование Nvidia на рынке, возможно, не будет длиться вечно. Сегодняшние технологические гиганты все больше инвестируют в собственное производство чипов: Google продолжает разработку TPU, Amazon недавно раскрыла планы по созданию линейки чипов, которая, как ожидается, превзойдет Nvidia на 50%, потребляя при этом лишь половину мощности, а Microsoft объявляет о своем намерении использовать искусственный интеллект AMD чипсы.

Смотрите также

2024-09-19 00:28