IaaS, VPS, VDS, Частное и публичное облако, SSL
252,50
рейтинг
24 июня 2015 в 18:20

Разработка → Инфраструктура: Что стоит за картинками в интернете перевод



/ фото Robert CC

В нашем блоге мы неоднократно затрагивали вопросы дата-центров и инфраструктуры различных облачных сервисов (в частности, рассказывали о развитии собственного облачного проекта 1cloud). Сегодня мы поговорим о разработках команды фотохостинга imgix и их новом дата-центре.

По словам членов команды imgix, целью проекта является увеличение ценности каждого изображения в Интернете. Это достигается за счет быстрой доставки контента, гистограммной обработки изображений, регулирования цвета, более эффективного процесса сжатия, совместимости с определенными устройствами и браузерами и многого другого.

В связи с расширением возможностей интернета – начиная с рабочего стола персонального компьютера и заканчивая планшетами, мобильными телефонами, «умными» часами и многими другими электронными приспособлениями, которые только можно себе представить – заранее предугадать, как должно быть представлено изображение, сейчас практически невозможно. Изображениям приходится меняться в зависимости от текущей ситуации, чтобы выполнять свои функции во все более разнородной среде современной сети интернет.

Компания imgix была создана специально для того, чтобы решить эту задачу. Сервис позволяет динамически обрабатывать любые изображения в Интернете и адаптировать их к текущим условиям в режиме реального времени. Конечно, для решения данной задачи требуется огромный запас мощности и ресурсов.

Эксперты перечисляют сразу несколько причин, повлиявших на то, как сегодня работают и управляются дата-центры. Стремление компаний добиться более гибкого и эффективного использования ресурсов фактически ведет к появлению новой профессии «архитекторов» — эти люди управляют инфраструктурой так, чтобы добиваться ее наибольшей эффективности. При проектировании и управлении ЦОД используются новые подходы: от DevOps до DCIM.

Сегодня все чаще внедряют технологии, которые могут обеспечивать большую удельную мощность при сокращении занимаемых дата-центром площадей. Так, инфраструктура imgix построена на основе принципов быстрого развертывания на стадии проектирования. Под быстрым развертыванием следует понимать внедрение базовой инфраструктуры до ее фактического применения, с обеспечением достаточной гибкости при осуществлении изменений в будущем.

У такого подхода к проектированию дата-центра имеются свои сложности: первоначальные расходы могут оказаться слишком высокими, небольшая ошибка может повлечь за собой негативные последствия. Инженеры imgix рекомендуют продумывать свою инфраструктуру заранее, потому что [в «боевых» условиях] на адаптацию к изменениям трафика постоянно не хватает времени. Кабельная инфраструктура фотохостинга построена на этом принципе. Каждый кабель был проложен заранее, а объемы «темного» оптоволокна превышают текущие потребности в три раза.

Компании, управляющие дата-центрами, пытаются повысить удельную мощность (power density), создавая более компактную инфраструктуру с меньшим количеством стоек, которые вмещают больше серверов. Это позволяет не только сэкономить место и ресурсы, которые требовались на его отопление и охлаждение, но и избавиться от лишней инфраструктуры (провода, фальшпол, вентиляция и т.п.)

Вместо классического шинопровода инженеры обеспечили возможность использования одного и того же варианта подключения цепи питания для каждого серверного шкафа, что позволило устанавливать любой шкаф в любое место и в любое время (лишь с незначительными ограничениями). Заранее создав инфраструктуру электропитания, команда проекта снизила риски при работе с включенным оборудованием и свела обеспечение питания новых шкафов к работе автоматического выключателя.

Кроме этого, важную роль в быстром и мобильном размещении серверных шкафов играет система опорных конструкций. Инженеры установили специально изготовленные муфты для крепления болтов в напольной плитке, которые позволяют надежно прикрепить шкаф к полу.



/ фото Atomic Taco CC

Все решения по быстрому развертыванию позволяют imgix при необходимости установить дополнительные серверы и разобраться со всем, что интересует клиентов сервиса. Операционная система Apple предлагает множество преимуществ над другими платформами, если говорить об обработке изображений, и по тем же причинам ее предпочитают многие дизайнеры. Некоторые задачи лучше решаются с помощью систем Linux, работающих на традиционном серверном оборудовании.

Сетевая инфраструктура дата-центра является логически и физически разнородной и имеет высокую степень надежности. Как и в случае с серверным оборудованием, была выбрана технику, готовая к повторному использованию, для того чтобы минимизировать операционные расходы, которые несет небольшая по численности команда проекта во время эксплуатации оборудования.

Развитие технологий виртуализации привело к активному распространению «облаков» — по данным Gartner, в 2016 году на облачные ресурсы придется значительная часть трат всех ИТ-бюджетов. А по данным Cisco, уже к 2018 году до 78% всех рабочих нагрузок будут обрабатываться облачными дата-центрами. Goldman Sachs прогнозирует, что рынок облачной инфраструктуры до 2018 года вырастет более чем на 19,5% с 2015 года, достигнув $43 млрд. к указанному сроку.

P.S. Мы стараемся делиться не только собственным опытом работы над сервисом по предоставлению виртуальной инфраструктуры 1cloud, но и рассказывать о смежных областях знаний в нашем блоге на Хабре. Не забывайте подписываться на обновления, друзья!
Автор: @1cloud imgix
1cloud.ru
рейтинг 252,50
IaaS, VPS, VDS, Частное и публичное облако, SSL

Комментарии (14)

  • 0
    Сколько железка :) Неверно это мой рай!
    • +2
      Пара работ с вечера до утра машинном зале, и это навеки превратится из рая в ад :) Шумно, сухо, где-то жарко, где-то холодно, где-то сдувает, вон в том ряду мобильник никогда не видит сеть…

      ASR9010 с парой RSP440-SE… Что же этот красавец такой пустой стоит? Прямо жалко.
  • +1
    Поражена масштабами и качеством подхода!
  • 0
    >Инфраструктура: Что стоит за картинками в интернете
    Больше вкусных картинок!
  • 0
    >imgix использует систему из медных кабелей для поддержания работы сети управления и формат последовательного соединения сетевых устройств – это запасной вариант на случай непредвиденных ситуаций, которые могут помешать использованию привычных каналов управления.

    «формат последовательного соединения сетевых устройств» — имеется в виду «последовательный порт» aka COM-порт? =\
    • 0
      А я подумал, что это шинная топология дублирующей сети
  • 0
    А я бы почитал поподробнее про использование OS X. Неужели действительно Mac mini стоят? Но там же никакой отказоустойчивости вообще…
  • +3
    Что такого в OS X, что она лучше обрабатывает изображения?
    • 0
      Может то, что её больше любят дизайнеры?
    • 0
      Могу предположить, что оптимизация ПО для конкретного железа?
      Не уверен, но мне так рассказывали.
  • +1
    Про OS X улыбнуло, как она интересно «лучше» обрабатывает изображения?
    • 0
      Также, как и «лучше» обрабатывает звук – при помощи Core-технологий. Их всего 3 CoreAudio, CoreVideo, CoreGraphics (Quartz), для каждой из них, конечно же, есть аналоги под другие ОС, но тот же ASIO никогда и близко не подтянется к CoreAudio по сотне параметров (из личного опыта). Про графику, думаю, кто-то тоже сможет авторитетно рассказать.
  • +5
    Да, фоточки очень красивые. А от статьи осталось ощущение маркетингового bullshit-а: никаких технических деталей, «у нас всё надёжно», «у нас всё продумано», «у нас всё гибко» и т.д.
    Как и в случае с серверным оборудованием, была выбрана технику, готовая к повторному использованию
    — в противовес одноразовым коммутаторам и маршрутизаторам?
    У дата-центра есть возможность обмена трафиком с другими сетями
    — просто пушка. Написали бы ещё, что дата-центр работает от электричества.
    • 0
      У дата-центра есть возможность обмена трафиком с другими сетями
      — просто пушка. Написали бы ещё, что дата-центр работает от электричества.
      Да, забавно вышло =). В оригинале всё чуть менее размыто — показанный на картинках ЦОД подключен к крупному обменнику Интернет-трафика (IX) и является важным звеном в перспективной (планируемой) сети этого сервиса.

Только зарегистрированные пользователи могут оставлять комментарии. Войдите, пожалуйста.

Самое читаемое Разработка