Создавая режим «Киноэффект» для iPhone, мы тщательно изучали, как профессиональные кинооператоры используют перевод фокуса, чтобы добавить сюжету интриги и сделать фильм более зрелищным.

На съёмках в Голливуде над этим работает целая команда специалистов. Кинооператор решает, что будет в фокусе и в какой момент его нужно перевести. А ассистент по фокусу следит, чтобы это было сделано плавно, в нужный момент и с точной фокусировкой на нужном объекте. Мы поставили себе большую задачу: научить iPhone переводить фокус автоматически.

Для начала требовалось сгенерировать данные глубины резкости в высоком качестве: нужно было научить режим «Киноэффект» точно измерять расстояние до объекта в кадре, будь то человек, животное или предмет. А поскольку речь идёт о видео, эти данные должны были поступать непрерывно: с частотой 30 кадров в секунду.

Работу целой команды кинооператоров мы поручили системе Neural Engine. Именно она автоматически принимает решение о том, что должно быть в фокусе в данный момент, и в нужное время обеспечивает его плавный перевод на другой объект. Но если вы хотите управлять процессом вручную, фокус можно переводить самостоятельно - как во время съёмки, так и при редактировании.

И для таких серьёзных вычислительных мощностей нам был нужен процессор, который мог справиться с этой работой. Такой, как A15 Bionic.

Сложно даже представить объёмы вычислительной мощности, необходимые для работы алгоритмов машинного обучения, рендеринга смены автофокусировки, поддержки ручного изменения фокуса и перевода каждого кадра в формат Dolby Vision - и всё это в режиме реального времени.

Теперь целый Голливуд у вас в кармане.

Работа дисплея, который обновляется 120 раз в секунду, - очень энергозатратный процесс. Но такая частота обновления нужна не всегда.

На съёмках в Голливуде над этим работает целая команда специалистов. Кинооператор решает, что будет в фокусе и в какой момент его нужно перевести. А ассистент по фокусу следит, чтобы это было сделано плавно, в нужный момент и с точной фокусировкой на нужном объекте. Мы поставили себе большую задачу: научить iPhone переводить фокус автоматически. Поэтому хороший способ повысить энергоэффективность - задать стандартную частоту обновления для различных типов контента. Например, 10 кадров в секунду для чтения книг и 120 кадров в секунду для игр. Основная сложность такого подхода в том, что частота кадров всё время меняется. Если частота обновления для экрана меню в игре составляет 30 кадров в секунду, но дисплей при этом настроен на обновление с частотой 120 кадров в секунду, драгоценный заряд аккумулятора будет расходоваться впустую, а вы никак не сможете оценить высокую частоту обновления.

Мы решили, что незачем тратить заряд аккумулятора на пустые кадры и разработали более сложную технологию работы дисплея. Такую, которая постоянно адаптируется под постоянно меняющуюся частоту обновления контента.

Никаких настроек. Частота обновления напрямую зависит от того, что происходит на экране. Если во время игры частота обновления снижается до 30 кадров в секунду, то же делает и технология ProMotion. Если вы смотрите видео, снятое с частотой 24 кадра в секунду, именно с этой частотой оно и воспроизводится на дисплее. И всё это значительно экономит энергию.

С технологией ProMotion вы словно ныряете через дисплей прямо в приложение.

Мы учли даже то, как замедляется и ускоряется палец при прокрутке контента и смахивании по экрану. А скорость движения пальца определяет скорость каждого жеста. В iOS 15 вам часто будет казаться, что при частоте 120 Гц контент буквально следует за пальцем. С невероятной скоростью. При этом технология ProMotion использует частоту 120 кадров в секунду только в те моменты, когда она вам действительно нужна.

Конечно, было бы проще просто встроить в iPhone постоянную частоту обновления 120 Гц и не думать о расходе аккумулятора. Но в Apple другой подход. Нам было важно убедиться, что дисплей работает с высокой частотой обновления именно тогда, когда эта частота нужна. И что в другие моменты заряд аккумулятора не расходуется напрасно.

Год за годом чип iPhone менял представления о пределах возможного для смартфона. В основе всего лежит наш уникальный подход к разработке: долгий путь к созданию каждого продукта и по‑настоящему слаженная работа всех наших команд.

Такая тесная интеграция наших команд позволяет развивать функции, которые были бы невозможны при другом подходе.

Именно так мы создаём новые технологии, например ProMotion, начиная планировать их заранее - за несколько лет. Команда, создававшая чип A15 Bionic, отлично знала, что именно требуется для функционирования аппаратного и программного обеспечения дисплея, и учитывала это в своих процессах.

Например, мы оптимизировали модуль дисплея, чтобы он поддерживал различную частоту кадров, и создали систему, при которой технология ProMotion может обеспечивать потрясающую графическую производительность и использовать потенциал нового энергоэффективного 5‑ядерного графического процессора.

Тем временем команды, разрабатывающие программное обеспечение для дисплея и систему iOS, выяснили, для каких задач такая высокая частота обновления подходит лучше всего и в каких случаях можно оптимизировать частоту кадров для экономии заряда аккумулятора. Мы начали не просто с идеи создания быстрого чипа, на базе которого строились бы различные функции. Вместо этого мы подумали о том, каким должно быть идеальное устройство, которое мы были бы рады предложить пользователям. И затем объединили наши усилия для его создания.