Apple переопределяет искусственный интеллект: Apple Intelligence

Автор: Сухой, Годы света

После многомесячного ожидания момент, на который ждали фанаты Apple, наконец настал.

В 1 час по местному времени 11 июня компания Apple стартовала всемирную конференцию для разработчиков (WWDC) 2024 года, в этой неделе в Apple Park в Калифорнии будут представлены “невероятные технологии и креатив”.

С самого первого WWDC в 1983 году это всегда была ключевая платформа Apple для демонстрации крупных обновлений продуктов и взаимодействия с разработчиками. Основным акцентом этого мероприятия является «генеративный искусственный интеллект», искусственный интеллект занимает большую часть времени в основном докладе.

Бинго-доска WWDC2024, созданная разработчиком программного обеспечения Диланом, источник: X

На конференции Apple официально представила новую систему искусственного интеллекта под названием “Apple Intelligence”, которая будет интегрирована в iOS, iPadOS, macOS и т. д., а в будущем также расширится на watchOS, tvOS и visionOS. В то же время Apple подтвердила сотрудничество с OpenAI, и эта система также включает технологии OpenAI для совместной обработки на устройстве и в облаке, при этом уделяется особое внимание защите конфиденциальности пользователей.

Практически все встроенные приложения в системе Apple, такие как камера, календарь, браузер и электронная почта, будут улучшены с помощью искусственного интеллекта.

Apple является едва ли не последним технологическим гигантом, вышедшим в сферу искусственного интеллекта.

В мае прошлого года генеральный директор Apple Тим Кук отметил, что хотя технологии искусственного интеллекта имеют огромные перспективы, они все еще сталкиваются с множеством проблем. В течение последнего года уличные инвесторы постоянно критиковали Apple за отсутствие ярких моментов в области искусственного интеллекта. На телефонной конференции по финансовым результатам в мае этого года практически каждый аналитик задал вопрос о ИИ, но Кук не раскрыл слишком много информации о будущих планах.

Кук заявил, что он не хочет раскрывать слишком много перед официальным объявлением, но подтверждает, что Apple видит возможности в области генеративного искусственного интеллекта и уже вложила в него 100 миллиардов долларов. Apple начала развиваться в области ИИ сравнительно поздно, но благодаря огромной базе пользователей и развитой экосистеме продуктов у нее все еще есть преимущество. OpenAI также хочет воспользоваться преимуществом Apple и найти больше возможностей для роста.

В течение последних нескольких лет обновления iOS, выпущенные на WWDC, часто критиковались за то, что они ничего революционного не предлагают, и каждый год WWDC называли “самым скучным в истории”. Но в 2024 году, как опоздавший гость, Apple наконец-то привнесла в свои продукты эпическое обновление в виде искусственного интеллекта.

Если сказать, что iPhone заставил пользователей мобильных телефонов начать отказываться от физической клавиатуры и полностью перейти к большим сенсорным экранам, то, возможно, обновление, выпущенное Apple на этот раз, окончательно поведет 4 миллиарда пользователей смартфонов по всему миру в следующий этап изменений. AI-телефоны получили новое определение.

Однако амбиции Apple, возможно, не ограничиваются этим. С точки зрения способа именования, оно скорее хочет полностью перестроить искусственный интеллект.

Превратите искусственный интеллект в Apple Intelligence.

Эпическое обновление Apple

iOS 18 - интеллектуальный прорыв

iOS 18 является несомненным фокусом этого мероприятия.

Это обновление не только сделало значительные улучшения в области искусственного интеллекта, но также полностью оптимизировало пользовательский опыт. Особенно благодаря интеграции крупных языковых моделей (LLMs) функциональность Siri заметно улучшилась, став более интеллектуальной и заботливой. Пользователи могут редактировать фотографии, создавать персонализированные плейлисты музыки только голосовыми командами, а также даже создавать и редактировать документы через Siri, что существенно повысило удобство и полезность Siri.

В то же время iOS 18 внедряет службу богатых коммуникаций (RCS), улучшая плавность и интерактивность общения между iPhone и устройствами Android. Пользователи могут наслаждаться функциями, такими как уведомления о прочтении, индикация ввода в реальном времени и реакции смайликов при межплатформенном общении.

В плане оптимизации интерфейса iOS 18 радикально обновил центр управления, представив настраиваемый макет, позволяющий пользователям свободно располагать значки и инструменты в соответствии с их потребностями. Это не только повышает эффективность работы, но и улучшает персонализированный опыт. Оптимизация интерфейса настроек делает поиск и настройку необходимых функций более удобными, а улучшенная функция поиска делает операции более интуитивными и удобными.

В отношении функции контроля за здоровьем iOS 18 также расширился, добавив больше функций контроля, чтобы помочь пользователям лучше управлять своим здоровьем. При этом новые инструменты для настройки главного экрана и опция приложения в темной теме дополнительно улучшают персонализированный опыт и визуальный комфорт пользователей.

По вопросам конфиденциальности, о которых так много говорят, Apple усовершенствовала функцию защиты конфиденциальных данных в своем последнем обновлении операционной системы, позволяя пользователям блокировать отдельные приложения, чтобы даже в случае доступа к телефону эти приложения требовали отдельной разблокировки для использования. Кроме того, Apple предоставляет отдельную заблокированную папку для скрытых приложений, что еще дополнительно обеспечивает безопасность данных пользователей.

Vision Pro официально объявила о выходе на китайский рынок

Недавно выпущенная операционная система visionOS 2 от Apple также принесла множество обновлений для гарнитуры Vision Pro.

В этом обновлении функция реального времени может отображать реальном времени субтитры диалогов в поле зрения пользователя, что делает общение более удобным. В то же время, макет и сортировка приложений на главном экране также были оптимизированы, что делает операции более интуитивными.

В плане приложений приложение Photos добавило функцию SharePlay, которая позволяет пользователям обмениваться фотографиями между различными устройствами, и даже преобразовывать 2D-изображения в 3D-пространственные фотографии.

Разрешение и ширина виртуального монитора Mac увеличились, что обеспечивает пользователям более широкий и высококачественный визуальный опыт. Операционная система также упростила управление жестами, позволяя пользователям легко пролистывать фотографии, например, раздвигая пальцы, чтобы перейти на главный экран, или поворачивая запястье для просмотра времени и заряда батареи.

visionOS 2 особенно оптимизирована для инструментов разработчика, путем внедрения новых фреймворков и API, таких как Tabletopkit и volumetric API, что позволяет разработчикам легче создавать пространственные приложения. Apple также сотрудничает с Blackmagic Design, используя его технологию камеры для улучшения иммерсивного видеоконтента и дальнейшего усиления возможностей Vision Pro в создании пространственного контента.

Кроме того, новый режим путешествия добавляет поддержку поездов, что делает использование Vision Pro более удобным для пользователей в поездах. В то же время Apple объявила, что Vision Pro появится на трех азиатских рынках - Китае, Японии и Сингапуре, с 28 июня по цене от 29999 юаней за единицу, с лимитом покупки 2 единицы на человека.

В iPad есть калькулятор

Релиз iPadOS 18 наконец-то привел приложение калькулятора на iPad, которое существует на iPhone уже 17 лет, но долго не появлялось на iPad.

В iPadOS 18 введена новая функция доступности, вдохновленная Vision Pro, которая позволяет управлять iPad с помощью технологии отслеживания глаз, что является революционной функцией без использования рук. Apple также улучшила возможности многозадачности на iPad, особенно улучшив функциональность Stage Manager, над которой компания работала в течение нескольких лет.

Ранее некоторые ожидали уникальных функций M4 iPad Pro или надеялись на прямой запуск macOS с iPad, но в этом году таких прорывов не произошло. Тем не менее, iPadOS 18 во многом выиграл от iOS 18, добавив множество полезных функций.

В этом обновлении iPadOS 18 появились заметные новые дизайн и функции, такие как новое сочетание Apple Pencil и функции математических заметок, которое позволяет пользователям писать математические выражения и формулы прямо на экране и автоматически преобразовывать их в числовой результат. Эта функция не только поддерживает распознавание рукописного графики, но и может проводить вычисления на основе чертежей пользователя, что является огромной радостью для любителей математики.

Первый чип Apple M4, который впервые установлен на iPad, является чипом, изготовленным с использованием передовой 3-нанометровой технологии, обладающим мощными вычислительными и графическими возможностями, что существенно повышает возможности отображения и обработки искусственного интеллекта на iPad Pro.

iPadOS 18 также представляет новые способы взаимодействия, такие как функция совместного использования экрана и плавающая панель вкладок.

macOS Sequoia

macOS 15 продолжает именоваться по символичным объектам Калифорнии, на этот раз это «Секвойя» (Sequoia). Эта версия значительно улучшает пользовательский опыт и эффективность работы, вводит множество функций искусственного интеллекта iOS 18, включая интеллектуальные системные приложения и переработанный интерфейс настроек системы.

Как самая долгосрочная и зрелая программная платформа в истории Apple, macOS обычно добавляет немного новых функций ежегодно. Однако в этом году ситуация, кажется, отличается, особенно в области искусственного интеллекта. Он оснащен новыми Mac, оснащенными чипом M3, которые полностью используют нейронный двигатель Apple и предлагают ряд инновационных функций искусственного интеллекта. Помимо искусственного интеллекта, Apple также обновила приложения настроек системы Mac в ответ на отзывы пользователей.

macOS 15 теперь позволяет уведомления от iPhone непосредственно отображаться на Mac, обеспечивая эффективную обработку информации между устройствами. Кроме того, в этой версии также добавлено специальное приложение для управления паролями, которое не только можно использовать на Mac, но также синхронизировать и управлять паролями на устройствах с Windows через iCloud for Windows, что значительно повышает уровень безопасности и удобства.

macOS 15 также улучшила плавность обработки многозадачности, например, автоматическое изменение размера окна для максимального использования экранного пространства. Эти улучшения обеспечивают высокую согласованность с iOS 18, что позволяет пользователям наслаждаться единым и плавным пользовательским опытом как на iPhone, так и на Mac.

В целом большинство улучшений macOS 15, вероятно, направлены только на то, чтобы соответствовать функциям iOS 18 на iPhone, таким как обновления системных приложений и новая версия Siri.

Другие обновленные платформы

Компания Apple недавно провела всестороннее обновление нескольких платформ, включая iOS, macOS, watchOS 11, tvOS 18 и HomePod Software 18. Хотя подробная информация еще не была полностью обнародована, ожидается, что эти обновления усилат интеграцию функций искусственного интеллекта, что повысит уровень умности устройств и пользовательский опыт.

Apple поощряет студентов со всего мира демонстрировать свои программистские навыки через Swift Student Challenge. В этом году 50 выдающихся студентов получат возможность посетить штаб-квартиру Apple и стать членом программы разработчиков Apple на один год. Это не только признание их умений, но и способ мотивировать их продолжать двигаться по пути технологических инноваций.

Разработчики на континенте Китая теперь могут зарегистрироваться и приобрести членство в программе разработчиков Apple Developer более удобным способом, используя местные способы оплаты через приложение Apple Developer. Это позволит большему числу разработчиков легко присоединиться к экосистеме разработки Apple.

Глубокая интеграция с AI

На сегодняшнем собрании Apple наконец-то раскрыла долгожданную новую функцию: глубокую интеграцию искусственного интеллекта в свои различные приложения. Эта совершенно новая платформа AI была названа «Apple Intelligence».

Это важное достижение Apple в области интеллектуальных устройств, которое полностью изменит способ взаимодействия пользователей с устройствами.

“Apple Intelligence” будет использоваться в операционных системах iPhone, iPad и Mac компании Apple для предоставления ряда передовых инструментов, таких как генерация текста и изображений, поиск и анализ информации и т. д. Эти функции будут работать в различных приложениях, значительно повышая удобство и персонализированный опыт пользователей.

Глава Apple, Тим Кук, назвал это «новым путешествием» и подчеркнул: «Это захватывающий старт, Apple Intelligence изменит способ обслуживания пользователей наших продуктов».

Он включает контекст-ориентированные уведомления, которые могут распознавать и приоритезировать самую важную информацию для пользователя. Кроме того, “Apple Intelligence” поддерживает естественно-языковое понимание, анализирует ваши содержимое и инструкции в различных приложениях, автоматически поправляет электронные письма и подводит итоги заметок, а также может создавать генеративные изображения, поддерживает функцию текста в картинку, предоставляет множество стилей, таких как эскизы, иллюстрации и анимации.

В области защиты конфиденциальности Apple по-прежнему не жалеет усилий. Большинство операций по обработке данных происходят локально на устройстве, что обеспечивает безопасность и конфиденциальность пользовательских данных. Для функций, требующих облачных вычислений, Apple использует специальные серверы на базе Apple Silicon, и весь трафик данных осуществляется в зашифрованном виде, обеспечивая безопасность информации.

Новым и интересным является то, что Apple также выпустила инструмент для создания персонализированных эмодзи под названием “genmoji”, который позволяет пользователям создавать уникальные эмодзи в соответствии со своими потребностями, демонстрируя способность персонализированных услуг Apple Intelligence.

Высокопоставленный вице-президент по инженерному программному обеспечению Грейг Федериги на мероприятии сказал: «Мы усердно трудились над этим вопросом в течение длительного времени».

Сотрудничество с OpenAI позволит пользователям Apple использовать ChatGPT только через Siri, без дополнительной оплаты. Федериги сказал, что пользователи смогут использовать эту функцию и провести бета-тестирование позже в этом году, и некоторые функции будут доступны только к 2025 году.

CEO OpenAI Сэм Альтман (Sam Altman) принял участие в этом мероприятии и опубликовал сообщение на X, где он выразил свою ‘огромную радость’ от сотрудничества с Apple.

Скриншоты социальных медиа Сэма Олтмана

Еще 26 мая журналист агентства Bloomberg, который долгое время следит за Apple, Марк Гурман (Mark Gurman), раскрыл, что после двухмесячных переговоров Apple достигла соглашения с OpenAI о интеграции их чат-бота ChatGPT в iOS 18. Официальное объявление о партнерском соглашении ожидается на международной конференции разработчиков Apple (WWDC24) в июне.

Но некоторые также высказывают недовольство по поводу “подло” действий Apple: локальная функция ИИ требует как минимум 8 ГБ оперативной памяти.

На данный момент Apple еще не ясно указала, когда полностью заработает новая версия Siri со всеми функциями, но уже подтверждено, что новый интеллектуальный помощник будет поддерживать устройства iPhone, iPad и Mac. Это важный шаг Apple в области «личного интеллекта». Кук описывает это как «следующий шаг» компании, что означает новый прогресс в области предоставления более интеллектуальных личных помощников.

Этот вид инноваций может привести к дальнейшему обсуждению и исследованиям в области технологий и искусственного интеллекта, особенно в том, как более эффективно удовлетворять потребности пользователей при объединении аппаратных средств и интеллектуальных услуг.

От производства автомобилей к искусственному интеллекту

В феврале этого года Apple тихо приняла решение отказаться от проекта автомобиля “загадочного” и полностью переключиться на искусственный интеллект.

В 2014 году не прекращалось говорить о “автомобилях Apple”. Через десять лет, на заседании совета директоров в январе 2024 года, Apple снизила цель автономного вождения с уровня L4 до уровня L2, а также отложила срок выпуска автомобиля с 2026 года до 2028 года.

В настоящее время в Силиконовой долине происходит большая корректировка, многие крупные компании увольняют сотрудников и одновременно направляют ресурсы на развитие генеративного искусственного интеллекта.

Apple также реорганизовала свои команды в рамках этой волны изменений, интегрировав некоторые команды по программному обеспечению и облачным вычислениям автомобильного проекта в отдел программного обеспечения, чтобы сосредоточиться на разработке операционной системы, в то время как команды по автономному вождению и связанному с ним аппаратному обеспечению сталкиваются с корректировками или сокращением штата. В то же время команда Apple по искусственному интеллекту переходит на более лонг проекты в области машинного обучения и генеративного ИИ, а часть персонала была переведена в команду Vision Pro.

Аналитик Wedbush Дэн Айвс в своем отчете пишет: “Стратегия искусственного интеллекта - это недостающий кусочек пазла в росте Apple”. Разработчиков конференция обычно не привлекает инвесторов, но в этом году все по-другому. Айвс считает, что эта конференция будет особенно интересна инвесторам и, возможно, станет одной из самых важных за последние десять лет для Apple.

Фактически, еще в 1985 году Джобс предвидел потенциал развития AI на основе генерации, эта прозорливая мысль опережала свое время.

С развитием технологий вычисления ИИ, инициированных изначально графическими процессорами и облачным вычислением, происходит быстрый переход к конечным устройствам. В отличие от Microsoft, Google и Amazon, у Apple нет бизнеса в области облачных вычислений, но у Apple есть самая мощная платформа вычислений для конечных устройств. Благодаря своей огромной базе пользователей и сети разработчиков Apple способна создавать уникальный персональный опыт использования устройств ИИ, что открывает перед ней огромные рыночные возможности.

На финансовом отчете за май, Кук подчеркнул перед инвесторами силу искусственного интеллекта и преимущества Apple в эту новую эпоху. Он отметил, что интегрированная стратегия Apple, включающая безшовную интеграцию аппаратного, программного обеспечения и услуг, а также ведущие отраслевые технологии Apple-чипов и акцент на конфиденциальность, делают компанию уникальной в создании мощной вычислительной платформы на местном уровне. Внедрение функции нейронных сетей с помощью чипов серии M и A позволяет Apple создавать гибридную вычислительную архитектуру от устройства до облака.

В конце концов, Qualcomm, Samsung и другие усиливают свои позиции на рынке, улучшая функции искусственного интеллекта терминалов, и Apple вынуждена сохранять темпы инноваций.

Искусственный интеллект, основанный на генеративной модели, по-прежнему сталкивается с проблемами регулирования и конфиденциальности, и действия Apple в этой области немного замедлены. Однако это дает Apple больше времени для поиска решений и благодаря своим интегрированным преимуществам в области чипов, операционных систем, приложений и дизайна продуктов, Apple все еще может оставаться лидером в инновационном опыте продуктов.

Дальнейшая степень принятия пользователей станет первым большим испытанием для Apple AI.