Материалы по тегу: netflix

19.02.2020 [23:06], Алексей Степин

Периферийные вычисления и 5G помогут Netflix в кинопроизводстве

Компания Netflix проявляет самый пристальный интерес к развитию таких отраслей ИТ-индустрии, как пограничные или периферийные (edge) вычисления и беспроводные сети нового поколения.

Как полагают в Netflix, данные технологии могут оказать серьезную помощь в процессе производства фильмов и сериалов.

Знаменитая 24-метровая видеостена в штаб-квартире Netflix

Знаменитая 24-метровая видеостена в штаб-квартире Netflix

Вице-президент сетевого подразделения Netflix, Дэйв Темкин (Dave Temkin) отметил, что в кинопроизводстве серьезную трудность представляют ситуации, когда съемочная группа находится в одном месте, к примеру, в Мумбаи в то время, как продюсерский состав остаётся в Лондоне.

При этом последнему очень важна возможность просмотра отснятого материала как можно быстрее. Однако до сих пор это было связано с необходимостью записи материала на картриджи LTO с последующей их транспортировкой авиалиниями, что, естественно, приводило к достаточно серьёзным задержкам.

Ленточные картриджи LTO активно используются для перевозок больших объёмов кино-и видеоматериалов

Ленточные картриджи LTO активно используются для перевозок больших объёмов кино-и видеоматериалов

Компания полагает, что сочетание пограничных вычислений и беспроводных сетей нового поколения позволит избавиться от этих задержек. Если к 5G вопросов не возникает — быстрые сети естественным образом подойдут для передачи больших объёмов данных, то в случае пограничных вычислений следует сделать пояснение.

Даже новое поколение сетей вряд ли справится с передачей несжатых видеоматериалов — и вот тут-то производительные пограничные серверы и придут на помощь, позволяя на лету сжимать и конвертировать видео в удобный для сетевой передачи формат с минимальной задержкой. В этом Netflix поможет инициатива AWS Local Zones и AWS Outposts — малая и сверхмалая распределённая облачная инфраструктура.

Базовая стойка AWS Outpost

Базовая стойка AWS Outpost

В настоящее время Netflix практикует съёмку в разрешении 8K, и даже при сжатии минута такого видео занимает 12,5 Гбайт. Это слишком серьёзная нагрузка даже для 5G, отмечает Темкин. Однако возможность транскодирования видео «на месте» для последующей передачи и вещания позволит съёмочным группам действовать более оперативно в тех случаях, когда руководству съемок не требуется видео максимального качества.

Постоянный URL: http://servernews.ru/1004080
05.11.2019 [14:57], Константин Ходаковский

Netflix изучает возможности AMD EPYC

Netflix, ведущая потоковая видеослужба, изучает возможности обновления серверной инфраструктуры. Netflix уже сейчас имеет серверы, которые могут достаточно легко отдавать TLS-поток со скоростью 100 Гбит/с, но компания хочет добиться показателя в 200 Гбит/с.

Дрю Галлатин (Drew Gallatin) на EuroBSDCon рассказал о проделанных оптимизациях во FreeBSD и о тестировании новых платформ  Intel и AMD, которые могут стать основой для следующего поколения серверов Netflix. 

Текущая конфигурация серверов Netflix использует один процессор Intel Xeon, и, учитывая необходимость удвоить пропускную способность, компания может либо перейти на конфигурации с двумя Xeon, либо использовать один чип EPYC. Поскольку выбранные конфигурации AMD и Intel имеют одинаковый показатель совокупной стоимости владения, речь, по сути, идёт о технической оценке двух систем.

В настоящее время Netflix использует в своих серверах чипы Xeon на базе архитектур Broadwell, Skylake и Cascade Lake — они способны обеспечить 100 Гбит/с. Чипы на базе Broadwell имеют пропускную способность памяти на уровне 60 Гбайт/с и 40 линий PCIe 3.0 (32 Гбайт/с пропускной способности ввода-вывода), в то время как Intel Skylake и Cascade Lake обеспечивают пропускную способность памяти в 90 Гбайт/с и 48 линий PCIe Gen3 (38 Гбайт/с пропускной способности ввода-вывода).

В отношении нового оборудования, нацеленного на 200 Гбит/с, компания выбрала две конфигурации. Это двухпроцессорная система с чипами Intel Xeon Silver 4116/4216, которая обеспечивает общую пропускную способность памяти в 180 Гбайт/с и 96 линий PCIe Gen3 (в общей сложности пропускная способность ввода-вывода составляет 75 Гбайт/с). Xeon будут соединены двумя линиями UPI.

С другой стороны, Netflix присматривается к AMD EPYC (Naples или Rome) 7551 или 7502P (более вероятно). Infinity Fabric связывает четыре чиплета внутри упаковки EPYC, а пропускная способность памяти составляет 120–150 Гбит/с. Эта система AMD будет иметь доступ к 128 линиям PCIe Gen3, а в случае с 7502P — Gen4 (пропускная способность ввода-вывода — соответственно 100 и 200 Гбайт/с).

Впрочем, «голые» характеристики не слишком показательны. Для оптимизации потоков данных Netflix разделяет ядра на отдельные NUMA-домены так, чтобы трафик СХД ↔ CPU ↔ NIC по возможности оставался в рамках домена, а общение между доменами по UPI или Infinity Fabric сводилось к минимуму.

В результате проделанной работы удалось получить такие результаты — решение на основе Xeon может достигать максимальной пропускной способности 191 Гбит/с, в то время как конфигурация EPYC может достигать максимальной пропускной способности 194 Гбит/с. При этом в случае с Intel нагрузку на шину UPI удалось снизить втрое, а вот с оценкой Infinity Fabric вышла загвозда — AMD не предоставляет никаких инструментов для работы с ней. 

Учитывая, что обе выбранные конфигурации имеют одинаковую совокупную стоимость владения, Netflix вполне может склониться в сторону AMD благодаря небольшому преимущество в производительности у этого варианта. Однако стоит учитывать затраты на переход с экосистемы Intel на экосистему AMD. Само собой, Intel постарается не упустить столь крупного клиента. 

Постоянный URL: http://servernews.ru/996952
12.02.2016 [17:37], Сергей Юртайкин

Онлайн-кинотеатр Netflix закрыл дата-центры и перешёл на облако Amazon

Онлайн-кинотеатр Netflix, начавший в этом году оказывать услуги российским пользователям, объявил о завершении перевода всех своих IT-систем на облачную платформу Amazon. Американской компании потребовалось на это семь лет, сообщается на её сайте.

Netflix решила отказаться от использования баз данных в своих дата-центрах в пользу облачных решений в августе 2008 года, когда в результате крупного сбоя сервис не мог в течение трёх дней отправлять DVD-диски своим подписчикам. Партнёром в этой миграции была выбрана Amazon Web Services (AWS).

bloomberg.com

bloomberg.com

К 2015 году большинство систем Netflix (платёжная инфраструктура, службы видеотрансляции, системы управления данными клиентов и сотрудников и т.п.) были перенесены с локальных серверов компании на облачные AWS. В начале января 2016 года процесс перевода был завершён, и Netflix закрыла последний свой дата-центр. Таким образом, Netflix стала одной из самых крупных компаний, полностью работающих в публичном облаке, отмечает The Wall Street Journal.

По словам вице-президента по разработке облачных решений и платформ Netflix Юрия Израилевски (Yury Izrailevsky), поддерживать новые ресурсоёмкие функции и постоянный рост данных (с 2008 года количество подписчиков сервиса выросло в 8 раз) из собственных дата-центров было бы крайне сложно.

bloomberg.com

bloomberg.com

«Мы просто не смогли бы наращивать серверы так же быстро», — сообщил Израилевски, отметив, что эластичность облачных вычислений позволила компании добавить тысячи виртуальных серверов и петабайты дискового пространства всего за несколько минут.

Постоянный URL: http://servernews.ru/928349
03.07.2012 [03:23], Георгий Орлов

Ураган ударил по облаку Amazon, "уронив" сайты Netflix и Instagram

Сильный ураган, оставивший без электричества более двух миллионов человек по всей восточной части Соединенных Штатов в конце июня, привёл к выходу из строя дата-центра Elastic Compute Cloud (EC2) компании Amazon в северной Вирджинии, что привело к недоступности Netflix, Pinterest, Instagram и ряда других популярных сервисов. Сразу после возникновения неполадок, кураторы Amazon Web Services (AWS) заявили о "расследовании проблем с подключением по ряду случаев" в Восточном регионе, чуть позже - что "продолжают работу по восстановлению". Спустя сутки Netflix и Pinterest возобновили работу, однако сайт Instagram был по-прежнему недоступен.

amazon

Невезение AWS может дорого обойтись проекту, учитывая недавний анонс компанией Google услуги Compute Engine, которая будет непосредственно конкурировать со службами Amazon и Microsoft на рынке Infrastructure-as-a-Service (IaaS). По данным сайта Data Center Knowledge, отключение электроэнергии на ЦОД Amazon в г. Эшбурн, штат Вирджиния, продолжалось примерно 30 минут, но последствия отключения были более продолжительными, вследствие затрат времени на восстановление экземпляров виртуальных машин. По какой причине не сработали генераторы аварийного электроснабжения, пока неизвестно.

Это уже второй случай за последний месяц, когда данный ЦОД Amazon испытывает проблемы с электропитанием. 15 июня было зафиксировано несколько инцидентов, один из которых был вызван неполадками вентилятора охлаждения генератора.

Материалы по теме:

Источник:

Постоянный URL: http://servernews.ru/596190
23.12.2010 [10:46], Георгий Орлов

Netflix поделилась опытом перехода на облачную модель

Многие компании с растущими IT-запросами оказались перед выбором: должны ли они расширять свои дата-центры, или им стоит переместить свои операции в облачные инфраструктуры? Американская компания Netflix, специализирующаяся на видеопрокате, стала одной из компаний, выбравших облачные сервисы. Джон Чианкутти (John Ciancutti), вице-президент Netflix по технологиям персонализации, написал в своем блоге о перестройке IT-инфраструктуры компании при переходе к облачному сервису Amazon (Amazon Web Services, AWS). «Год назад все наши знания в области облачных сервисов сводились к тому, что мы могли почерпнуть из опыта других компаний, — пишет Чианкутти. — Сегодня Netflix имеет одну из самых мощных в мире облачных инфраструктур».

 

Netflix

 

Чианкутти описывает причины, по которым компания Netflix выбрала облачную модель. По его словам, это не было простым выбором, т.к. потребовались «геркулесовы усилия» по переконфигурации программного обеспечения компании и по разработке новой архитектуры всех сервисов. Ключевым фактором стали трудности в предсказании темпов роста бизнеса и всей инфраструктуры Netflix. Компании, например, пришлось пересмотреть свои прогнозы по количеству подписчиков на конец 2010 года три раза в течение этого года. Аналогичные вопросы возникают при запуске каждого нового сервиса (сколько человек воспользуется им сразу, а сколько через месяц?), при вводе в эксплуатацию каждого устройства и при развертывании каждого нового приложения. «Облачная модель идеальна для архитектур с горизонтальным масштабированием, — пишет Чианкутти. — Нам не нужно загадывать на месяцы вперед, какие аппаратные мощности, объемы памяти и сетевые ресурсы нам понадобятся. Мы можем программным образом получить большинство из этих мощностей в общем пуле AWS почти мгновенно». 

Источник:

Постоянный URL: http://servernews.ru/593996
Система Orphus