Большинство видеозвонков FaceTime совершаются через мобильный интернет, не отличающийся высокой скоростью передачи данных. Как результат, по ту сторону экрана собеседник часто видит задержанную, размытую, низкокачественную картинку. В Купертино хотят бороться с этим из необычного места – на стороне серверов FaceTime – и с помощью не менее необычного метода: автоматического редактирования видео, улучшающего и восстанавливающего детализацию объектов фона и фрагментов лица. А заодно и увеличивающего «плавность» ролика.
Недавно опубликованный патент Apple касается актуальной темы – низкого качества видео при совершении видеозвонков между двумя мобильными устройствами. Чаще всего с этим сталкиваются при звонках с «медленного» интернета. Чтобы улучшить картинку, инженеры предлагают интересную идею: использовать содержимое передаваемых кадров видео, чтобы улучшать и в буквальном смысле «дорисовывать» последующие кадры.
По одному из методов, каждый кадр передаваемого видео анализируется в поисках постоянных параметров: черт лица человека, ориентации и положении элементов на экране, а также их размера. Если звонок осуществляется при хорошей связи, эти статистические данные отправляются в общую базу данных на серверах Apple. В случае ухудшения качества связи на любой из сторон и постоянства содержимого в видео, система может отправить звонящим не настоящие кадры, а их «среднее арифметическое», собранное из миллионов параметров других звонков пользователей техники Apple.
Другой метод решает проблему «потерянных кадров» и «тормозного» видео с помощью создания усреднённого искусственного кадра между двумя настоящими. Эти кадры вставляются в входящий видеопоток получателя, создавая иллюзию плавности происходящего в видеоролике. Наконец, ещё одна технология описывает улучшение качества отображения лица звонящего за счет ухудшения детализации объектов, находящихся на заднем плане видеокадров. Сэкономленные килобайты позволят сделать картинку более качественной именно в тех частях кадра, которые имеют значение.
Патент датирован 13 июля 2012 года. Как всегда, есть вероятность, что эти технологии в той или иной мере будут показаны нам уже в этом году на презентации новой модели iPhone. [ap & uspto]
это давно реализовано в большинстве кодеков. Apple патентует велосипед
@iBolobay, а вы конечно тот самый изобретатель велосипеда? А в эппл сидят бездельники и сами себе раздувают бюджет на рнд?
@iBolobay, первый метод вообще нигде не реализован, даже близко.