17 функций iPhone, использующих машинное обучение и искусственный интеллект
В этом руководстве мы рассмотрим несколько существующих функций iOS, которые используют искусственный интеллект (ИИ) и машинное обучение (ML), чтобы предоставить новые мощные возможности вашему iPhone и iPad.
Apple Интеллект (термин Apple для собственного искусственного интеллекта) был объявлен одновременно iOS 18 но еще не выпущен. Предполагается, что он предоставит несколько функций, таких как корректура вашего письма, изменение структуры предложений, обобщение длинных текстов, размещение самых срочных писем и уведомлений вверху, преобразование вашего эскиза в изображения, очистка ненужных объектов с фона фотографии и многое другое.
Хотя Apple Intelligence, безусловно, собирается вывести функции искусственного интеллекта для пользователей iPhone на новый уровень, некоторые существующие аспекты iOS и iPadOS уже сильно зависят от искусственного интеллекта и машинного обучения. Ниже мы рассмотрим важные из них.
Прежде чем приступить к этому, вы должны знать, что искусственный интеллект и машинное обучение тесно связаны, но если вы хотите понять различия между ними, Google Облако и Амазон АВС есть отличные статьи, которые действительно стоят вашего времени.
1. Создайте свой личный голос
Благодаря машинному обучению Apple люди, рискующие потерять речь, могут создать искусственный голос, похожий на их .
Эту синтезированную копию голоса можно использовать с Функция живой речи во время FaceTime, телефонных звонков, приложений и личного общения. Пользователь может просто ввести то, что он хочет сказать, и его iPhone произнесет написанные слова его голосом!
2. Управляйте своим iPhone глазами
Ты можешь пройдите быстрый процесс настройки отслеживания движений глаз , а затем встроенная в устройство технология машинного обучения Apple сможет определить движения ваших глаз, чтобы выделить элементы и выполнить касание, просто взглянув на них. Это полезно для людей, которые не могут использовать сенсорный экран из-за физических недостатков.
3. Живые субтитры и транскрипция на устройстве.
Ваш iPhone может понимать звук и отображать его на экране в текстовой форме. Это может, например, дать возможность глухому человеку используйте живые субтитры во время звонков FaceTime или во время просмотра видео. Это также полезно в расшифровка голосовых записей в голосовых заметках и Примечания Программы.
Вся обработка выполняется локально на устройстве без подключения к Интернету, чтобы обеспечить максимальную конфиденциальность.
4. Найдите изображения по ключевому слову
Приложение «Фото» позволяет вам найди подходящее изображение, описав его . Например, вы можете ввести « Пицца », и он покажет все ваши фотографии с пиццей.
Apple может анализировать, индексировать и понимать ваш фотоконтент с помощью передового интеллекта и машинного обучения.
Предстоящая версия Apple Intelligence пойдет дальше, позволяя вам находить нужное изображение, используя длинные и сложные термины, такие как « Себастьен в синей рубашке и черном галстуке. ' или ' Пэм с наклейками на лице ».
5. Уберите главный объект снимка
Ваш iPhone и iPad смогут отличить основной объект от остальной части изображения. В результате вы можете удалить свою собаку с фотографии и использовать его как наклейку . Или вы можете вытащить свое лицо из изображения и вставить его в другие приложения, чтобы делать такие вещи, как создание фотографии для заявления на паспорт .
6. Копируйте текст с изображений и видео.
Если у вас есть текст на картинке или видео, вы можете просто коснитесь его и скопируйте в буфер обмена . Ваш iPhone достаточно умен, чтобы распознавать текст на изображении и выполнять с ним действия, как если бы это был текст в документе Word.
7. Узнавайте людей и домашних животных.
Приложение «Фото» может узнавать людей и домашних животных на своих фотографиях и поместите все фотографии конкретного человека в одно место, доступ к которому вы сможете получить в Люди раздел приложения «Фото».
8. Расскажите больше о еде, цветах, растениях, произведениях искусства и многом другом.
При открытии определенных изображений в приложении «Фото» вы можете увидеть специальные значки, например кнопку информации ⓘ с двумя звездами или лист со звездами. Коснитесь этого значка или проведите пальцем вверх, чтобы используйте интеллектуальную опцию визуального поиска .
Эта интеллектуальная функция удобна для получения дополнительной информации об этом объекте, но имейте в виду, что она часто ошибается. Поэтому всегда перепроверяйте.
Ваш iPhone может даже расшифровать символы стирки на бирках одежды и предоставим вам дополнительную информацию о них!
9. Автоматическое кинопроизводство для вас
Помимо распознавания людей и домашних животных, ваш iPhone имеет возможность создавайте воспоминания и короткие видеоролики на основе события, даты, поездки и других параметров. Вы можете найти эти специально подобранные средства массовой информации в Воспоминания и Путешествия разделы вашего приложения «Фото».
10. Помогает делать более качественные снимки.
Фотографические стили , Макрофотография , Ночной режим , Портретные снимки с размытием фона и некоторые другие аспекты приложения «Камера iPhone» в значительной степени зависят от передовых вычислений и алгоритмов.
Например, когда вы нажимаете кнопку спуска затвора, ваш iPhone может мгновенно сделать несколько фотографий, а затем использовать алгоритмы машинного обучения для объединения лучших аспектов всех изображений, в результате чего получается одно изображение, которое выглядит великолепно со всеми деталями, цветами, бликами, и яркость.
11. Предлагает рекомендации по ведению дневника.
Приложение «Журнал» на iPhone учитывает ваше местоположение, время, фотографии, недавние действия, музыкальные вкусы и другие факторы, чтобы предлагать персонализированные предложения. Это поможет вам быстро создать запись в дневнике, чтобы вспомнить тот день в будущем. Вся обработка предложений по ведению журнала происходит конфиденциально на устройстве благодаря усовершенствованной технологии машинного обучения Apple.
12. Распознавание в режиме реального времени
Благодаря встроенному в устройство интеллекту функции Live Recognition и VoiceOver на вашем iPhone могут обнаруживать людей, двери, текст, мебель и другие объекты вокруг вас и описывать, что они из себя представляют. Например, когда я указываю ему на свой рабочий стол, он справедливо говорит: « белая клавиатура на деревянной поверхности ».
Он даже может объяснить, как открыть определенные двери!
Ты можешь используйте режим обнаружения в реальном времени в приложении 'Лупа' на вашем iPhone.
13. Соответствующие предложения приложений.
Будь то библиотека приложений, Виджет предложений Siri , Spotlight или блокировки экрана, iOS использует машинное обучение, чтобы понять ваши шаблоны использования и предлагать подходящие приложения и действия в нужном месте и в нужное время.
14. Отказ ладони при использовании Apple Pencil
Очевидно, что ваша ладонь будет лежать на экране, когда вы пишете или рисуете Apple Pencil. iPadOS использует машинное обучение, чтобы определить разницу между касанием пальца, упором для рук и вводом карандашом. Итак, когда вы рисуете карандашом, программное обеспечение достаточно умно, чтобы игнорировать прикосновения вашей ладони.
Сходным образом, Рисовать Apple Pencil и преобразование рукописного текста в печатный текст или копируя их также используйте передовые алгоритмы обучения, чтобы это произошло.
15. Оптимизируйте зарядку аккумулятора и продлите срок его службы.
Даже такая простая вещь, как зарядка устройства, не лишена машинного обучения. Когда вы используете свое устройство, ваш iPhone распознает ваши схемы зарядки и использования и может вносить изменения в продлить срок его службы .
Например, если вы подключаете свой iPhone для зарядки каждый день перед сном, ваш iPhone будет приостановить зарядку после достижения 80% . Он возобновит зарядку в нужное время, и когда вы проснетесь, ваш телефон будет заряжен на 100%. Это гарантирует, что аккумулятор вашего iPhone не будет полностью заряжен на 100% в течение долгих часов в ночное время, что поможет продлить его здоровье.
16. Распознавание звука
Ваш iPhone может использовать интеллектуальные возможности устройства, чтобы прослушивать различные звуки, такие как пожарная сигнализация, стук в дверь, разбитие стекла, звуки бытовой техники и т. д., и уведомлять вас о них. Человек, который не слышит, может используйте распознавание звука например, чтобы узнать, звонит ли кто-то в дверь.
17. Распознавание лиц
Face ID уже использует сложную систему для распознавания черт вашего лица для аутентификации.
Кроме того, возможности распознавания людей в приложении «Фотографии» могут быть используется с камерами HomeKit отметить свою семью и друзей и узнать, кто стоит за дверью.
Помимо упомянутых выше функций, есть еще несколько вещей, таких как подсказки клавиатуры , предложения смайлов , Эффект глубины обоев на экране блокировки , предложены обои с цветным фоном, оффлайн Сири и многое другое также зависят от машинного обучения.
К настоящему моменту вы, возможно, думаете, что почти все в современном iPhone связано с машинным обучением и искусственным интеллектом, и вы не ошибетесь.
старший вице-президент Apple по искусственному интеллекту и машинному обучению, Джон Джаннандреа , сказал несколько лет назад, что « Машинное обучение изменит каждую часть опыта Apple в ближайшие годы », и видно, что его слова сбываются.
По соответствующей заметке: Системные требования для Apple Intelligence