Apple анонсирует новые специальные возможности на базе искусственного интеллекта, которые появятся в iOS 18
Apple представит новые специальные возможности на базе искусственного интеллекта для iPhone, iPad, Mac, CarPlay и Vision Pro с iOS 18 и другими обновлениями, которые выйдут этой осенью.
iOS 18 и iPadOS 18 принесут более дюжины новых специальных возможностей, включая отслеживание движений глаз, музыкальную тактильность, сигналы движения автомобиля, ввод текста при наведении и многое другое, которые появятся на iPhone, iPad, Mac, CarPlay и Vision Pro этой осенью.
Многие, похоже, используют искусственный интеллект (ИИ), который должен стать основной темой iOS 18 и других обновлений ОС Apple, которые появятся этой осенью. Одна интересная функция направлена на предотвращение укачивания при использовании iPhone в движущемся транспортном средстве.
Новые специальные возможности Apple появятся этой осенью
Apple анонсировала несколько новых функций специальных возможностей в преддверии Всемирного дня осведомленности о доступности. Объявление в Отдел новостей Apple подтверждает, что многие из этих функций основаны на искусственном интеллекте и машинном обучении, что дает вам представление о том, что, по слухам, будет с возможностями искусственного интеллекта в iOS 18.
Управляйте iPhone или iPad глазами, в стиле Vision Pro
Это позволит вам управлять iPhone или iPad одними глазами. Используя опыт гарнитуры Vision Pro, Apple позволит вам перемещаться по пользовательскому интерфейсу и приложениям iOS исключительно с помощью глаз. Отслеживание взгляда использует преимущества фронтальной камеры и машинного обучения на устройстве.
Почувствуйте музыку с тактильной обратной связью
Music Haptics будет использовать Taptic Engine, специальный вибромотор iPhone, для создания изысканных вибраций, таких как постукивания и текстуры, чтобы люди с плохим слухом могли чувствовать музыку. Apple заявляет, что Music Haptics работает «с миллионами песен» в каталоге Apple Music. Более того, компания предоставит разработчикам API, чтобы «сделать музыку более доступной в своих приложениях».
Виртуальный трекпад с изменяемым размером
AssistiveTouch оснащен виртуальным трекпадом для навигации по вашему iPhone или iPad, перемещая палец по небольшой области экрана. Размер этого виртуального трекпада можно изменить.
Пользовательские фразы Siri для быстрого запуска ярлыков
Vocal Shortcuts — еще одна потенциально перспективная новая функция. Он позволяет создавать собственные фразы для Siri, чтобы запускать ярлыки для выполнения сложных задач.
Вы выберете действие и трижды запишите произносимую фразу, чтобы ваш iPhone научился ее распознавать. Это позволит вам активировать ярлыки и выполнять сложные задачи, произнося соответствующую фразу.
Hover Typing увеличивает шрифт в текстовых полях
Разве вы не ненавидите, когда на веб-странице или в приложении используется крошечный шрифт для текстового поля, который заставляет вас щуриться? Благодаря наведению текста iPhone будет определять, когда вы взаимодействуете с текстовым полем, и отображать над ним более крупный текст при вводе. Это будет работать везде, где вы можете вводить текст в поля, включая чат в «Сообщениях».
Предотвратите укачивание при использовании iPhone в движущемся транспортном средстве
Укачивание возникает, когда ваш мозг получает противоречивые сенсорные сигналы, когда ваши глаза чувствуют одно, а тело — другое, например, при использовании iPhone (глядя на статический контент) во время вождения в автомобиле (ощущение движения).
Программа Vehicle Motion Cues призвана смягчить этот сенсорный конфликт, анимируя точки по краям экрана в соответствии с изменениями в движении автомобиля. Эта функция использует встроенные датчики и может быть настроена на автоматическое включение в действие, когда обнаруживает, что вы находитесь в движущемся транспортном средстве, но вы также сможете переключать ее в Центре управления.
CarPlay получит голосовое управление, цветовые фильтры и распознавание звука
Голосовое управление для CarPlay позволит вам использовать свой голос для навигации по интерфейсу CarPlay и приложениям с помощью голоса. Эта функция будет поддерживать пользовательские словари и сложные слова. CarPlay также перенимает две существующие функции доступности от iPhone: цветные фильтры и распознавание звука.
Цветовые фильтры используют более жирный шрифт и более крупный размер шрифта, чтобы сделать интерфейс CarPlay визуально более удобным в использовании. Распознавание звука уведомит пользователя о значительных звуках дорожного движения, таких как автомобильные гудки и сирены.
VoiceOver: пользовательские сочетания клавиш и многое другое
Пользователи Mac смогут настраивать сочетания клавиш VoiceOver. Кроме того, VoiceOver получит новые голоса, поддержку гибкого голосового ротора и настраиваемую регулировку громкости.
Режим чтения и другие интересные моменты лупы
В Magnifier появится новая функция под названием «Режим чтения», но Apple не сообщила, для чего она нужна. Это похоже на режим чтения в Safari. Возможно, это позволит представить распознанный текст из вашего окружения (например, меню ресторана, вывески и т. д.) в необработанной текстовой форме. Пользователи iPhone 15 и iPhone 15 Pro смогут быстро открыть режим обнаружения лупы нажатием кнопки «Действие».
4 новые специальные возможности для Vision Pro
Apple не забыла о VisionOS. Осенью в VisionOS 2 появятся четыре улучшения, связанные с специальными возможностями. Существующая функция Live Captions будет доступна во всей системе, а не только в FaceTime.
«Apple Vision Pro добавит возможность перемещать субтитры с помощью панели окна во время Apple Immersive Video, а также поддержку дополнительных слуховых устройств Made for iPhone и кохлеарных слуховых процессоров», — сообщает Apple.
Кроме того, Vision Pro получит функции «Уменьшение прозрачности», «Умное инвертирование» и «Диммирование мигающих огней», которые были доступны на других устройствах Apple, но не вошли в первоначальную версию VisionOS.
Интересные факты: улучшения персонального голоса, прослушивание нетипичной речи
Пользователи Брайля получат новый способ запуска и продолжения работы с экраном Брайля для более быстрого управления и редактирования текста. Кстати говоря, поддержка японского языка появится в системе ввода с экрана Брайля, а многострочный шрифт Брайля — в Dot Pad. Также будет возможность выбрать разные таблицы ввода и вывода.
Персональный голос будет доступен на китайском языке. FApple изменила настройку Personal Voice, чтобы использовать сокращенные фразы для людей, которым трудно произносить или читать полные предложения. Live Speech будет включать категории и «одновременную совместимость с Live Captions».
Voice Control будет поддерживать настраиваемые словари и сложные слова, а Switch Control будет использовать камеру iPhone для распознавания жестов касания пальцем в качестве переключателей.
Наконец, функция «Слушать нетипичную речь» улучшит распознавание речи, используя машинное обучение на устройстве для распознавания ваших речевых шаблонов. Apple заявляет, что эта функция улучшает распознавание речи «для более широкого диапазона речи».
Конечно же, благодаря искусственному интеллекту!
Мне показалось интересным, что многие из вышеперечисленных функций активно используют искусственный интеллект и машинное обучение. Я подсчитал: в объявлении Apple Newsroom по три раза упоминаются «искусственный интеллект» и «машинное обучение».
Это лишь краткий обзор других функций на базе искусственного интеллекта, которые, как ожидается, появятся в iOS 18 и других программных платформах Apple осенью, особенно улучшения Siri. на основе встроенных в устройство больших языковых моделей и генеративные возможности ИИ .