ИСПОЛЬЗОВАНИЕ ОБЛАЧНЫХ ТЕХНОЛОГИЙ ПРИМЕР NETFLIX

Облачные технологии — это предоставление вычислительных услуг, включая сервера, хранилища, базы данных, сеть, программное обеспечение и аналитические инструменты через Интернет. Обычно оплата производится только за используемые облачные сервисы, что помогает снизить операционные расходы, более эффективно управлять инфраструктурой и масштабироваться по мере изменения потребностей бизнеса. Облачные технология — это большой шаг вперед от традиционного подхода бизнеса к ИТ-ресурсам. Можно выделить пять причин, вследствие которых организации обращаются к услугам облачных технологий:

Стоимость. Облачные технологии устраняют капитальные затраты на покупку аппаратного и программного обеспечения, а также на настройку и эксплуатацию центров обработки данных (закуп серверов, круглосуточное электроснабжение и специалисты для управления инфраструктурой);

Глобальное присутствие. Преимущества услуг облачных технологий включают возможность масштабирования, что означает предоставление нужного объема ресурсов в виде большей или меньшей вычислительной мощности и пропускной способности;

Безопасность. Многие поставщики облачных услуг предлагают широкий набор политик, технологий и средств управления, которые повышают уровень безопасности, помогая защитить данные от потенциальных угроз;

Производительность сотрудников. Локальные дата-центры требуют большого пространства, настройки оборудования, поддержки программного обеспечения и других трудоемких задач. Облачные технологии устраняют необходимость во многих из перечисленных компонентов, поэтому ИТ-команды могут использовать рабочее время более эффективно для достижения приоритетных бизнес-целей;

Надежность. Облачные технологии упрощают резервное копирование данных, аварийное восстановление и обеспечение непрерывного функционирования бизнеса, поскольку данные могут быть зеркально отражены на нескольких резервных регионах.

Благодаря тому, что в облаке работает все больше критически важных сервисов, ожидания в отношении надежности облака выше, чем когда-либо. В данной статье определим некоторые общие принципы проектирования и передовые методы эксплуатации, которые успешно применяются для повышения надежность облачных сервисов и опишем их на примере компании Netflix.

Облачные вычисления предлагают значительные преимущества с точки зрения масштабируемости и производительности. Гибкость облака дает инженерам возможность быстро развертывать огромные объемы вычислительных ресурсов. Глобальная сеть облачных регионов обеспечивает низкую задержку и интерактивный доступ к облачным сервисам для клиентов по всему миру. В то же время огромное количество периферийных местоположений делает контент еще ближе благодаря своим сетям доставки.

За свои долгие 20 лет развития Netflix превратился из прокатчика DVD в популярнейший потоковый сервис с 214+ млн. подписчиков, задав новые стандарты качества видеотрансляций. Январь 2016 года стал знаменательным для компании, когда генеральный директор Рид Хастингс объявил о запуске Netflix более чем в 130 странах. Какие же технологические перемены позволили компании представить свой сервис миллионам новых клиентов по всему миру?

Netflix понадобилось 7 лет, чтобы постепенно перенести все свои системы в облако. Предпосылки к миграции появились в 2008 году, когда Netflix еще обслуживал свою инфраструктуру в собственных центрах обработки данных (ЦОД). Тогда, из-за сбоя в ЦОД, пришлось приостановить поставки DVD-дисков на три дня. Владельцы компании оказались перед сложным технологическим и стратегическим выбором: продолжать развивать, открывать и поддерживать новые ЦОД или же перенести инфраструктуру к облачному провайдеру. Netflix рос большими темпами: тысячи видеороликов и миллионы клиентов генерировали огромное количество трафика и данных. Именно тогда было вынесено решение: по мере роста компании, окажется достаточно сложно и дорого поддерживать свои собственные ЦОД и обслуживать их в попытке справиться с постоянно растущими объемами, а облако позволит горизонтально масштабироваться, добавляя тысячи виртуальных серверов и петабайты хранилища за считанные минуты.

Сервис AWS в то время только набирал обороты - Netflix стал одним из первых клиентов. Преимущества миграции в облако стали очевидны, когда пожар в ЦОД интернет-провайдера в Бразилии уничтожил весь кластер серверов, принадлежащих Netflix. Клиенты не почувствовали неполадок: благодаря связности систем и регионов AWS, их устройства автоматически и практически бесшовно переключились на резервный источник трафика.

В 2016 году Netflix закрыл последние собственные ЦОДы. Помимо прочего, инженеры компании отмечали преимущества «Pay as you go» модели, предоставляемой AWS: вы платите за то, что используете. Это позволило инженерам проводить множество экспериментов, осуществлять нагрузочное тестирование и выходить за рамки физически доступного железа, существовавших ранее. Теперь совершенно не представляло сложности запустить кластер из тысячи машин, проверить новый функционал, выключить их и заплатить только за использованные ресурсы. Такой подход дал большую свободу и позволил команде сосредоточиться на бизнес-задачах. Помимо этого, разработчики внедрили понятие «хаос-инжиниринга», призванного помочь с поиском проблем в производственных средах. «Хаос-инжиниринг» используется для гарантии того, что Netflix сможет пережить сбой в одном из трех регионов AWS. Каждый месяц команда отключает один из регионов и проверяет, смогли ли все клиенты «переместиться» в другой в течение нескольких минут.

Любая технология имеет свои плюсы и минусы, которые необходимо учитывать при переходе на нее.

При миграции в облако компания доверяет личные данные стороннему провайдеру. Эта проблема может быть решена шифрованием, но такой подход неудобен по ряду причин (скорость работы сервисов с обязательной дешифрацией, удобство разработки), поэтому подавляющий объем данных останется незашифрованным. Крупные облачные провайдеры предоставляют гарантии сохранности данных, но важно понимать, что по судебному решению персональная информация клиента будет раскрыта уполномоченному органу страны, на территории которой сервера находятся физически;

У облачных провайдеров тоже бывают аварии, в связи с чем компании должны позаботиться о резервном копировании, что является отдельной статьей расходов. Тем не менее, важно закладывать бюджет и на резервное копирование, так как в случае нештатной ситуации материальный и репутационный ущербы может превысить затраты в сотни раз;

Регион физического присутствия облачного провайдера должен совпадать с регионом подавляющего количества клиента. В противном случае, клиенты будут испытывать значительные задержки при взаимодействии с ресурсами компании и могут потерять лояльность. Не все провайдеры имеют ЦОДы в требуемом регионе;

Затраты на облака не всегда можно рассчитать заранее с высокой степенью точности. Большинство услуг предоставляется по «Pay as you go» модели, поэтому неожиданный всплеск активности приведет к незапланированным расходам. Для предотвращения подобных ситуаций следует очень тщательно настраивать механизмы автоматического масштабирования.

Следует помнить, что переезд с собственных мощностей к облачному провайдеру — это не решение всех проблем. Преждевременная миграция может навредить бизнесу. Однако, если компания испытывает сложности с дальнейшей поддержкой и масштабированием собственных серверов и готова инвестировать в новый тип инфраструктуры, то облачный подход может стать дополнительным фактором роста компании.

Список литературы:

1. Completing the Netflix cloud migration: Netflix media center. URL: https://media.netflix.com/en/company-blog/completingthe-netflix-cloud-migration (дата обращения: 15.01.2022)
2. Ten years on: How Netflix completed a historic cloud migration with AWS. URL: https://www.channelasia.tech/article/646530/ten-years-how-netflix-completed-historic-cloud-migration-aws/ (дата обращения 10.01.2021)