Сегодня у одного из наших авторов случился большой и долгожданный публичный запуск.
Давайте поулыбаемся и помашем.

https://yandex.ru/company/news/02-07-08-2024

Компания Яндекс

Телемост запустил новые возможности для всех пользователей: демонстрация экрана в 4К и встречи на 500 участников

Яндекс 360 перезапустил Телемост — сервис видеовстреч и видеоконференций. Качество видео стало ещё выше, появились новые функции, а количество участников встреч выросло более чем в 10 раз. Это стало возможным благодаря переходу сервиса с внешнего решения…

Хотим посоветовать вам папку с подборкой каналов, в создании которых участвуют сотрудники Яндекса. Мы тоже попали в эту подборку. Внутри каналы про разработку, дизайн и менеджмент.
Подписаться на папку можно тут.

Telegram

Пашем-пишем

Sasha invites you to add the folder “Пашем-пишем”, which includes 72 chats.

Новое поле битвы стримингов: спортивные трансляции

Автор: Ольга Попова, видеоразработчик, соавтор @video_engineer_pains, специально для @contentreview

Для победы в стриминговой гонке онлайн-кинотеатрам важен не только контент, но и высокая эффективность его доставки до зрителя. В The Verge вышла довольно большая статья, посвященная «ставке Netflix на продвинутое кодирование видео». Но в ней нет ничего сверх того, что Netflix уже рассказывал в своем техническом блоге, научных статьях или докладах.

В последние годы начинает казаться, что Netflix выигрывает в этой гонке. Они и правда достигли небывалых высот в сжатии видео с сохранением наилучшего качества. Например, они одними из первых стали использовать per-title кодирование, когда настройки кодеков подбирались алгоритмами для каждого фильма отдельно. А в 2018 году начали делать то, что до сих пор трудно повторить остальным: per-shot кодирование, когда настройки алгоритмов сжатия подбираются не под фильм, а под отдельно взятую сцену фильма. Надо признать, что на данный момент в эффективности сжатия VOD-контента Netflix нет равных.

Но стриминговые войны продолжаются. Новым полем битвы были выбраны спортивные трансляции, собирающие миллионы зрителей. Cтриминги пытаются поделить американский рынок, борются главным образом за NFL (Национальная футбольная лига), NBA (Национальная баскетбольная лига) и MLB (Главная лига бейсбола). Трансляции матчей американского футбола всегда были прерогативой телеканалов. Но они постепенно теряют аудиторию, а стриминги ищут новые способы удерживать подписчиков. И вот уже некоторые из них купили права на крупные спортивные трансляции: YouTube (NFL Sunday Ticket), Amazon Prime Video (несколько игр NFL, NBA), Apple TV+ (Friday Night Baseball). А Disney, WBD и Fox, уже обладающие своими спортивными телеканалами и правами на трансляции, объединились и создали отдельный сервис venu.com.

Netflix включился в игру одним из последних, поскольку, как они сами говорили, их не интересовал «одноразовый контент». И технического преимущества у них пока нет. У инфраструктуры Netflix, заточенной под раздачу VOD-контента, есть две проблемы с трансляциями:

- Жёсткое ограничение по времени на сжатие. Если фильм или сериал можно заранее загрузить в систему и кодировать несколько суток, то в спортивных трансляциях надо успевать за секунды.

- Существующие алгоритмы per-shot кодирования не работают, так как сложно предсказать, какая сцена будет дальше.

Девять месяцев назад Netflix искала для прямых трансляций специалиста по алгоритмам ABR (adaptive bitrate streaming). Это динамический подбор качества видео в процессе воспроизведения, который в реальном времени адаптируется к пропускной способности сети и производительности устройства пользователя. Сейчас они ищут человека, который поможет разработать систему мониторинга состояния трансляций в реальном времени. Это означает, что Netflix, в первую очередь, делает упор на отказоустойчивость прямых трансляций.

У Netflix серьезные соперники с опытом в прямых трансляциях, например, YouTube. Amazon, владеющий Twitch, возможно, переиспользует свой опыт для спорта в Prime Video. Apple как держатели стандарта HLS (HTTP Live Streaming) занимаются трансляциями и низкими задержками в них. В любом случае, сначала все крупные компании научатся выдерживать миллионные аудитории в режиме реального времени, после чего начнется соревнование за минимальные задержки и высокое качество изображения.

MLow — новый аудио-кодек в сервисах Meta

В Meta разработали новый аудио-кодек для передачи голоса с очень низкими битрейтами — Meta Low Bitrate (MLow). MLow позволяет передавать запись разговора в очень хорошем качестве на экстремально низких битрейтах (~6kbps), и при этом не требует много вычислительных ресурсов (работает на смартфоне 10-ти летней давности). Кодек уже используется в проде в WhatsApp и других запрещенных экстремистских продуктах.

Похоже, что выход MLow в open-source пока не планируется — в Meta, видимо, считают эту разработку важным конкурентным преимуществом.

WWDC: Обновления в HLS

На WWDC были новости и для видеоинженеров:

• AVPlayer теперь поддерживает стандарт CMCD (Common Media Client Data). CMCD позволяет связывать события с клиента и с CDN для мониторинга и оптимизации доставки контента. AVPlayer поддерживает только один вариант передачи данных — через HTTP-заголовки. Можно включить отправку CMCD, установив urlAsset.resourceLoader.sendsCommonMediaClientDataAsHTTPHeaders = true.

• Добавили AVMetrics API — новый AVFoundation API, который позволяет слушать события производительности и воспроизведения. Подробнее.

• Появилась поддержка AV1 для Dolby Vision 10.x и возможность указать в плейлисте, что у вас есть дорожка с HDR10+.

Почему YouTube бесплатный?

На Hacker News обсуждается очень интересный тред: "Видеостриминг дорогой, YouTube делает его бесплатно. Как?". Прочитав его целиком, можно пойти устраиваться архитектором стриминговых платформ. Если читать все комментарии вам лень, но архитектором быть все-таки хочется, мы подготовили для вас его краткое содержание.

YouTube тратит деньги на следующие направления:
- хранение видео
- его обработка (транскодирование)
- раздача видео пользователям
- ну и операционные расходы (команда, сервера, офисы и т.д.)
А зарабатывает — на рекламе.

Так за счет чего же для пользователей это все еще бесплатно (в отличие от всяких нетфликсов с платной подпиской)?

YouTube — огромный: около эксабайта залитого видео (если собрать башенку из жестких дисков в 1ТБ, получится башня высотой 25 км), и около 18% трафика всего интернета. Эти объемы дают возможность Google делать вещи, не доступные другим сервисам (и сильно экономить расходы):
1) Собственное кастомное железо для транскодирования (ASIC). Такие штуки дорого разрабатывать и производить, но на масштабах YouTube это получается выгодно. Менее крупные сервисы используют видеокарты или вообще CPU, а это работает медленнее и стоит дороже в пересчете на одну единицу контента.
2) Дешевые тарифы раздачи трафика (оптом дешевле, да и провайдеры заинтересованы в том, чтобы YouTube хорошо работал у пользователей)
3) Огромная сеть кеширующих серверов (CDN), которая удешевляет стоимость раздачи видео конечному пользователю. Сеть состоит из трех уровней: дата-центры, "точки присутствия" — места подключения сети Google в интернет, и конечные узлы — кеширующие сервера по всему миру (Google Global Cache). У них даже есть публичная карта с расположением узлов этой сети. Кстати, если вы замечали, что после 2022 года ютубчик у вас в РФ стал работать хуже, то это произошло как раз потому, что Google отключил часть серверов Google Global Cache в России.
Другие сервисы же часто либо не имеют такой сети вовсе, либо пользуются более дорогими внешними провайдерами.
4) Экономия на хранилище — база контента YouTube настолько большая, что существенную часть непопулярных видео можно переложить на "холодное" хранение (медленные дешевые жесткие диски с уменьшенной отказоустойчивостью). Если контента у вас мало, выделить непопулярную его часть будет сложнее.

При этом, YouTube зарабатывает огромные деньги на рекламе. Чистую прибыль Google не публикует, но выручка сервиса за 2023 год составила 31,5 миллиарда долларов. Сходится ли дебет с кредитом? Бывшие сотрудники Google в треде пишут, что ~10 лет назад YouTube был сильно убыточен. Некоторые аналитики считают, что это верно и на сегодняшний день — исходя из логики, что Netflix (который только-только недавно стал профитным) раздает примерно такие же объемы трафика, но имеет сильно менее объемную базу контента, что позволяет им больше экономить на транскодировании и кешировании.

Так что, возможно, YouTube бесплатен для пользователей, но не для Google!

На этой неделе, 20 марта, пройдет бесплатное online событие RTC@Scale - событие для всех кто строит свои решения для RTC видео и аудио комуникаций. Это одно из основных событий по темам WebRTC, кодеков для него и качеству сигнала на онлайн мероприятиях.

В целом, событие в этом году посвещено работе со сложными сетевыми условиями (такими как: плохая сеть, звонки на большие дистанции) и немного AV1.

Особого внимания, на мой взгляд, в этом году достойны вытупления Sean Dubois, создателя PION и доклад разработчиков из одной социальной сети про AI BWE
Ну и отдельно стоит посмотреть выступление Tsahi Levent-Levi, так как он всегда весьма неплохо суммаризирует состояние и направление развития индустрии.

Регистрация бесплатная. Увидимся с вами онлайн.

OpenAI показали превью AI-модели генерации видео Sora.

Качество отобранных для лендинга генеративных видео просто поражает. У модели пока есть проблемы с "физикой" мира в генерируемых видео (например, человек, бегущий по беговой дорожке в обратную сторону, или не задувающиеся свечи на торте), но, похоже, нас ждет новая эра видео-фейков.

OpenAI еще не открыли модель для публичного доступа – в первую очередь планируется выпустить детектор, который будет определять, было ли видео сгенерировано Sora.