Войди и оставь комментарий

Или войди с помощью

Протестировал новую технологию NoLACE в мессенджере MAX для улучшения голосовых вызовов

Артём Баусов avatar |
Протестировал новую технологию NoLACE в мессенджере MAX для улучшения голосовых вызовов

Вы наверняка это проходили: звонок — и вместо собеседника в трубке слышен то водопад из шипения, то эхо из подземелья. Но что, если есть решение, которое делает звонки чёткими даже при слабом интернете.

Мы протестировали NoLACE — технологию нелинейного адаптивного улучшения кодирования, встроенную в мессенджер MAX от VK. Она обещает чёткий звук и живое общение, даже если интернет подводит.

Давайте проверим, как работает новинка и почему это действительно интересно.

КРАТКО

  • Что такое NoLACE и как она работает
    Методика тестирования
    Итоги тестов
    Общие итоги
  • Что такое NoLACE и как она работает

    Разработка NoLACE (Nonlinear Adaptive Coding Enhancer), которую интегрировали в мессенджер MAX, чтобы улучшить качество голосовых звонков, появилась в 2024 году.

    Работает она просто: когда соединение плохое, передача аудиоданных может прерываться, а голос при этом искажается или вовсе обрывается. NoLACE устраняет эту проблему, анализируя звук в реальном времени и восстанавливая недостающие фрагменты речи.

    В основе технологии лежит сочетание нейросетей и цифровой обработки сигналов (DSP).

    В NoLACE два главных компонента

    Кодировщик признаков, который собирает данные о звуке (спектр, высота тона, автокорреляция и так далее). Всё это превращается в компактный вектор признаков, который помогает алгоритму понимать, что именно человек говорит

    Модуль обработки сигналов, который включает адаптивные фильтры и модуль адаптивного временного формирования (AdaShape). Он с высокой точностью корректирует сигнал, регулируя громкость каждого отдельного семпла звука

    Ключевая фишка как раз заключается в AdaShape, работающей с временной огибающей сигнала. Эти значения переводятся в логарифмическую шкалу, а затем двухслойная свёрточная нейросеть рассчитывает, как именно усилить каждый звук. В результате даже при паузах до секунды речь восстанавливается естественно.


    График, показывающий, что итоговый звук при NoLACE получается лучше

    Представьте: вы говорите «буду через…», и в этот момент сеть рвётся. А собеседник всё равно слышит «час» — будто и не было обрыва.

    Модель обучалась на 165 часах чистой речи на 34 языках, чтобы различать акценты, интонации и другие нюансы. Так что проблем со звучанием тут нет.

    NoLACE работает в реальном времени, обрабатывая аудио в 20-миллисекундных фреймах, не внося задержек. При этом ей нужно всего 620 MFLOPS мощности, то есть подходит даже для обычных смартфонов.

    Что это даёт?

    ► Чистый звук и без шумов
    ► Пропущенные фрагменты до 1 секунды восстанавливаются
    ► Голос звучит натурально

    NoLACE особенно полезна там, где интернет нестабилен. Например, в метро, ТЦ, жилых районах с плотной застройкой.

    Методика тестирования


    МЦД Петровско-Разумовская

    Чтобы проверить NoLACE в реальных условиях, мы отправились туда, где мобильный интернет обычно оставляет желать лучшего.

    Скажу честно: найти точки с плохим сигналом было нелегко. Почти везде более или менее хорошо работает мобильный интернет (а вы всё ругаете операторов).

    Два торговых центра на окраине Москвы. В ТЦ часто слабый сигнал из-за толпы людей и толстых стен

    Станция МЦК. Классика нестабильной связи, особенно в длинных перегонах

    Станция МЦД. Здесь сигнал часто скачет из-за движения поезда и нагрузки на сеть

    Жилой комплекс с плотной застройкой. Многоэтажки и толстые стены дают о себе знать

    Для тестов использовались два смартфона: iPhone 16 Pro и массовый Android-смартфон (пиарить не будем). Оба с последней версией мессенджера MAX.

    Качество звука оценивали по следующим критериям: степень отчетливости звучания, задержки и справляется ли система с восстановлением речи при кратковременных обрывах.

    Итоги тестов


    Снято в ТЦ Гавань

    Мы проверили качество звука и передачи голоса с NoLACE в пяти локациях с нестабильным интернетом:

    • ТЦ Гавань на Водном стадионе (-1 этаж)
    • ЖК Водный во дворах
    • МЦК Стрешнево
    • ТЦ Discovery в Ховрино (1-й этаж)
    • платформа МЦД «Петровско-Разумовская»

    Связь была слабой. В среднем, 2 «палочки» из 4. На МЦК Стрешнево уровень сигнала иногда падал до одной (но скорость лично меня удивила, учитывая уровень сигнала).


    МЦК Стрешнево

    В каждой локации NoLACE работала стабильно. Даже при слабом сигнале голос оставался разборчивым, без раздражающих обрывов или «бульканья». На МЦК Стрешнево, где сигнал местами был особенно неуверенным, технология восстанавливала пропущенные фрагменты речи, делая разговор плавным.

    Да, на МЦК собеседника порой было слышно хуже, но всё равно можно было понять, что он говорит. Слова не исчезали, просто звучали чуть приглушённо.

    В ТЦ Гавань на -1 этаже, где скорость интернета была 32 Мбит/с, NoLACE эффективно подавляла фоновый шум от толпы и эха, делая мой голос для нашего главреда Никиты Горяинова чётким. Это реально удивительно, я выключил всевозможные шумодавы в настройках айфонах и AirPods. То есть он меня слышал просто отлично, и всё тут.


    ЖК Водный

    Аналогично в ЖК Водный (50 Мбит/с) технология справилась с помехами от плотной застройки, сохранив разборчивость даже в шумном дворе.

    В ТЦ Discovery и на МЦД, где скорости были минимальными (9,39 Мбит/с и 5,41 Мбит/с соответственно), NoLACE всё равно обеспечивала нормальное качество, хотя в редких случаях заметна была лёгкая компрессия. Я не могу сказать, что был какой-то отвратительный кровоточащий звук — даже наоборот всё супер.


    ТЦ Discovery

    Плюсы:

    1. Устойчивая связь даже при 5–9 Мбит/с. Голос слышно хорошо, речь восстанавливается

    2. Эффективное подавление шума. В ТЦ, метро и на платформах звук остаётся чистым

    3. Естественное звучание. Голос не становится «роботом»

    4. Технология работает даже на недорогих смартфонах, не перегружая их

    Минусы:

    1. При очень низкой скорости может быть лёгкая компрессия, но она не мешает разговору

    Итоги замеров скоростей интернета в разных местах:

    wp-image-1321244wp-image-1321245wp-image-1321246wp-image-1321247wp-image-1321248

    Кстати, мы ещё и видеосвязь затестили

    Мессенджер MAX поддерживает не только аудио-, но и видеозвонки, поэтому мы решили проверить иих.

    Звонил из дома, где стабильно горит всего одна полоска сигнала.

    Картинка иногда подтормаживала, пикселилась, но не «зависала». Главное, что звук оставался идеальным.

    Да, видео было не суперчётким, но собеседника видно, а слышно отлично.

    Общие итоги

    NoLACE доказывает, что разговаривать можно комфортно даже там, где раньше хотелось бросить трубку. В будущем было бы здорово увидеть такие решения и в обычных сотовых звонках. Но пока такого нет, и MAX с NoLACE — отличная альтернатива.

    Представьте, что голос по мобильной сети всегда чистый и разборчивый, без «бульков» и эха.

    Приложение бесплатное, доступно для iOS и Android. Достаточно просто скачать или обновить его в App Store или Google Play — и, возможно, ваши звонки уже не будут прежними.

    Что-то пошло не так
    undefined
    iPhones.ru
    Вы наверняка это проходили: звонок — и вместо собеседника в трубке слышен то водопад из шипения, то эхо из подземелья. Но что, если есть решение, которое делает звонки чёткими даже при слабом интернете. Мы протестировали NoLACE — технологию нелинейного адаптивного улучшения кодирования, встроенную в мессенджер MAX от VK. Она обещает чёткий звук и живое общение,...

    Войди и оставь комментарий

    Или войди с помощью

    <- Назад Забыли пароль? Войти

    31 комментариев

    Форум →
    1. T
      Tony
      17 июня в 11:03
      12

      Хорошая попытка 🤝

      Войди на сайт, чтобы ответить
      Ответить
    2. И
      Иван Станкевич
      17 июня в 11:05
      0

      Замечательно, а вк когда перестанет тормозить или и так сойдёт? Лучше на гос заказ упасть и ноги свесить?

      Войди на сайт, чтобы ответить
      Ответить
    3. L
      Leon Helianthus
      17 июня в 11:18
      6

      Стандартная сотовая связь использует 9кбит 😆

      Войди на сайт, чтобы ответить
      Ответить
    4. V
      Vladimir Tatarinov
      17 июня в 11:30
      5

      Пошёл прогрев)

      Войди на сайт, чтобы ответить
      Ответить
    5. contrastlife avatar
      contrastlife 17 июня в 11:32
      10

      Пошел первый заказ ,айфонс конечно же прогнулся

      Войди на сайт, чтобы ответить
      Ответить
    6. e
      error_404
      17 июня в 11:34
      4

      Изоляция голоса в айфоне – не, не слышал

      Войди на сайт, чтобы ответить
      Ответить
    7. S
      Sergei Zosim
      17 июня в 11:38
      8

      Пошла рекламка на наши налоги😄

      Войди на сайт, чтобы ответить
      Ответить
    8. P
      P Y
      17 июня в 11:46
      4

      ГУАНО. Мессенджер доступен только в РФ и РБ.

      Войди на сайт, чтобы ответить
      Ответить
    9. Partyzaan avatar
      Partyzaan 17 июня в 12:00
      8

      Гы! Прекрасный мессенджер с полным копированием товарищу майору :) Заведи на себя дело сам :) Молодцы, айфонсру!

      appletoy avatar
      appletoy17 июня в 13:15
      0

      используй голубиную почту. А все месенджеры сливают данные. Только майоры разные из разных стран.

      Partyzaan avatar
      Partyzaan17 июня в 14:13
      3

      Данные данным рознь. Есть страны, (да-да!), где мессенджеры сначала попросят предъявить судебное решение перед тем, как отправить данные. Есть страны, силовики которых даже судятся с мессенджерами, которые по первому требованию отказываются отправлять такие данные майорам. А есть такие страны и мессенджеры, где майоры просто нажимают кнопочку и все переписки и все пользователи как на ладони.

      Timyr avatar
      Timyr18 июня в 2:06
      0

      Блажен кто верует. Это вам так показывают, что кто то кому-то отказывает в доступе или предоставлении информации НУ-НУ. 

      Войди на сайт, чтобы ответить
      Ответить
    10. AppleDominator avatar
      AppleDominator 17 июня в 12:02
      2

      > Устойчивая связь даже при 5–9 Мбит/с

      Этого достаточно с запасом и для видео 1080p 30fps. Для аудио нужны какие-то крохи реально

      KaerLaeda avatar
      KaerLaeda17 июня в 13:22
      1

      Это же импортозамещение…

      Войди на сайт, чтобы ответить
      Ответить
    11. Rüyası avatar
      Rüyası 17 июня в 12:07
      5

      Я правильно понимаю, что этой шляпой хотят убить вацап и тележку? 

      Войди на сайт, чтобы ответить
      Ответить
    12. I
      Ilya
      17 июня в 12:48
      3

      Ребят, хотите сами пользуйтесь этой фигней. Главное не заставляйте пользоваться тех, кто не хочет

      Войди на сайт, чтобы ответить
      Ответить
    13. R
      Ruslan
      17 июня в 12:56
      0

      Кто знает почему кнопки не активны?

      Войди на сайт, чтобы ответить
      Ответить
    14. Andrey-lights avatar
      Andrey-lights 17 июня в 13:41
      2

      Перемотал сразу до комментариев что бы поугарать

      Войди на сайт, чтобы ответить
      Ответить
    15. ­
      ­I
      17 июня в 13:43
      2

      Не, спасибо. Мессенджером от товарища майора пользоваться не планирую.
      Айфонс, вы когда такие статейки клепаете, противоречий внутренних не ощущаете, понимаю конечно что деньги не пахнут, но всеже.

      Timyr avatar
      Timyr18 июня в 2:10
      1

      А в чем проблема, вы что шпионы или теневые воротилы, или наркодилер, а может вы торгуете оружием, что из этого ваше?! Так в этом случае вас никакой мессенджер не защитит. 

      NeroFix avatar
      NeroFix18 июня в 11:04
      1

      Тимур, засунь себе сразу камеру с микрофоном в задницу и повесь в каждой комнате в доме. Ну а что? Ты же не шпион, и не теневой воротила, чего тебе скрывать-то? 

      Войди на сайт, чтобы ответить
      Ответить
    16. aequo avatar
      aequo 17 июня в 13:46
      2

      VKGB embedded =)

      Войди на сайт, чтобы ответить
      Ответить
    17. А
      Александр
      17 июня в 14:21
      1

      Кто выдумывает название этих “технологий”? Они изобрели приоритет трафика?

      Войди на сайт, чтобы ответить
      Ответить
    18. B
      BeeChip
      17 июня в 14:59
      2

      дерьМАКС

      Войди на сайт, чтобы ответить
      Ответить
    19. A
      Aleksandr Vladimirovich
      17 июня в 16:42
      0

      Пусть сначала эти vk шники 100 г украденные с облака вернут . Редиски …

      Войди на сайт, чтобы ответить
      Ответить
    20. zubovvic avatar
      zubovvic 17 июня в 17:46
      2

      Спасибо, но нет)

      Войди на сайт, чтобы ответить
      Ответить
    21. М
      МэттьюМаКонаги
      17 июня в 18:23
      1

      Столько негатива…
      Но всё равно скоро все там будете 😏

      Войди на сайт, чтобы ответить
      Ответить
    22. Йода avatar
      Йода 17 июня в 21:10
      0

      Голосовой канал без сжатия умещается в 5 кбит/с. Ваши 9 Мбит/с должны обеспечивать минимум 1500 голосовых потоков, а не один. Со очисткой от шумов, исключением частот вне голосового диапазона и сжатием необходимый канал уменьшается в разы. Не морочьте людям голову с вашими дилетантскими “тестами”.

      Войди на сайт, чтобы ответить
      Ответить
    23. 🅰
      🅰🅻🅴🆇 (“”);
      18 июня в 0:11
      1

      Отличная попытка. :) Герман Клименко раз логин тестит зайдите под своим аккаунтом :)

      Войди на сайт, чтобы ответить
      Ответить
    24. Феодосий Иванов avatar
      Феодосий Иванов 18 июня в 12:31
      1

      Я перейду на это днище ТОЛЬКО если они прям ВСЁ заблокируют. И то, только ЕСЛИ можно будет модифицировать лаунчер. 

      Войди на сайт, чтобы ответить
      Ответить
    25. Doxtor Freeman avatar
      Doxtor Freeman 18 июня в 18:08
      0

      Действительно? Ну вот и замечательно, пользуйтесь на здоровье.💁

      Войди на сайт, чтобы ответить
      Ответить
    Помни о правилах — если начал оффтопить, то не удивляйся потом.

    Нашли орфографическую ошибку в новости?

    Выделите ее мышью и нажмите Ctrl+Enter.