До сих пор центры обработки данных оставались достаточно консервативным сегментом, и ЦОД, построенные год и десять лет назад, выглядели примерно одинаково, однако не исключено, что новые подходы смогут изменить состояние дел в этой области. Во всем мире разработчики и проектировщики пытаются решить проблемы дефицита площадей, снижения энергопотребления, повышения эффективности охлаждения и нехватки квалифицированного персонала. По данным Gartner, большинство заказчиков считают энергопотребление и охлаждение главными вопросами эксплуатации ЦОД.
Для преодоления этих затруднений производители создают энергоэффективные модели процессоров, серверов и систем хранения, сетевого оборудования, совершенствуют методы проектирования ЦОД и построения инженерной инфраструктуры, предлагают новые способы борьбы с энергодефицитом. Консолидация ресурсов, виртуализация и динамическое перемещение виртуальных машин помогают в полной мере загружать имеющиеся мощности. В Gartner говорят о высокой вероятности перемен на мировом рынке ЦОД, в частности, о создании крупномасштабных ЦОД, отвечающих новым требованиям к инфраструктуре ИТ. В результате, такая распространенная услуга, как сервис корпоративной электронной почты, может стать почти вдвое дешевле.
Как отмечает Николай Паршин, директор центра эксплуатации ЦОД IBS DataFort, в России к ЦОД предъявляются те же требования, что и в других странах. Это резервирование каналов связи и инженерной инфраструктуры, бесперебойное электропитание, гарантированное обеспечение параметров среды для серверного оборудования, надежная защита помещений и вычислительных ресурсов от несанкционированного доступа, наличие системы пожаротушения, пыле- и влагозащищенность помещений, круглосуточное техническое обслуживание/поддержка и др. Андрей Полежаев, руководитель отдела проектов компании «ТБС-Айтэл», среди технологических тенденций ЦОД выделяет увеличение производительности вычислительных ресурсов и объемов хранимой информации, повышение необходимых скоростей каналов передачи данных, рост энергопотребления, ужесточение требований к соблюдению климатических условий и к эксплуатационным характеристикам ЦОД. Наиболее актуальными задачами становятся обеспечение круглосуточной работы, снижение операционных затрат, простота и удобство эксплуатации, масштабируемость и безопасность.
ЗАРУБЕЖНОЕ «ОЗЕЛЕНЕНИЕ» И РОССИЙСКИЙ ДЕФИЦИТ
В последние годы наблюдается рост удельной стоимости инженерных систем и потребляемой ими мощности. В мире затраты на энергоснабжение и охлаждение составляют уже 25-50% ежегодных расходов на ЦОД. Не удивительно, что за рубежом резко возрос интерес к так называемым «зеленым», энергосберегающим, технологиям.
Между тем в России намного более актуальными остаются проблемы выделения требуемых мощностей и обеспечения работы ЦОД при отключении электропитания. Учитывая пока еще относительно невысокую стоимость электроэнергии, выгода от внедрения энергосберегающих технологий не очень значительна, поэтому эффективность энергопотребления отходит на второй план. Положение изменится, когда ЦОД будут потреблять мегаватты мощности, а тарифы на элек-троэнергию приблизятся к ситуации в развитых странах. Впрочем, это время уже не за горами. В соответствии с недавним предложением МЭРТ РФ, в 2009 г. рост тарифов на элек-троэнергию составит 26%, в 2010 г. —22%, а в 2011 г. — 18%. Кроме того, по оценкам МЭРТ, к 2010 г. дефицит энергомощностей превратится в одно из основных препятствий для развития бизнеса в России. Уже сейчас он обуславливает увеличение тарифов и повышение стоимости подключения к электросетям. Темпы же роста производства электроэнергии заметно отстают от развития экономики.
По мнению Алексея Трояновского, директора департамента инженерных систем «Черус», наличие необходимой площади и электроснабжение —наиболее актуальные требования при проектировании и строительстве российских ЦОД. Андрей Павлов, генеральный директор компании «Датадом», отмечает «чудовищный дефицит доступных энергомощностей» в Московском регионе: стоимость подключения 1 кВт электроэнергии за два года выросла с 1000 до 3000-4000 долларов в зависимости от района Москвы, что значительно сдерживает строительство новых коммерческих и корпоративных ЦОД.
Если за рубежом ЦОД, как правило, выносится за пределы города и размещается в специально построенном отдельном одно- или двухэтажном здании, то в России обычно подбирается готовое помещение в городской черте. Как подтверждают заказчики из банковской сферы, при организации ЦОД на окраинах Москвы даже при рассмотрении трех десятков более или менее подходящих объектов не удается найти пригодный с точки зрения энергоснабжения, а получение 500 кВт мощности для резервного ЦОД не всегда по карману даже крупному банку. С серьезными сложностями обеспечения энергетическими ресурсами новых ЦОД сталкиваются и телекоммуникационные операторы. В «Квазар-Микро» отмечают, что те, кто планирует строительство достаточно мощного ЦОД, все пристальней изучают альтернативные источники электроэнергии или возможность размещения ЦОД в экономически комфортных регионах, где плата за подключение к энергетическим сетям в несколько раз ниже, чем в Москве.
По прогнозам специалистов компании «Датадом», строительство ряда крупных центров данных в Московской и прилегающих областях сможет улучшить ситуацию на рынке ЦОД. Однако поначалу, из-за худшей транспортной доступности, такие ЦОД, вероятно, не будут пользоваться столь же высоким спросом, как московские. Как указал Андрей Павлов, чтобы их возведение и коммерческое использование было финансово успешным, необходимо значительно расширить перечень таких услуг, как удаленное администрирование всех уровней, вплоть до уровня приложений, а не пытаться продать «стойкоместа». Кроме того, потенциальных клиентов следует готовить к бизнес-модели аутсорсинга и развивать рынок резервных ЦОД.
В последнюю пару лет вопросами размещения оборудования в специализированных ЦОД заинтересовался средний бизнес и государственные корпорации, отмечают в IBS DataFort. К числу актуальных тенденций специалисты относят и повышение требований российских заказчиков в отношении надежности ЦОД. Цена простоя в таких областях, как финансы, телекоммуникации, промышленность, очень высока, поэтому, как подчеркивают сотрудники «Энвижн Груп», одной из современных тенденций стало построение в ЦОД отказоустойчивых систем с применением территориально распределенных решений. В отличие от простого резервного центра, они не простаивают в горячем резерве, а способны разделять нагрузку между узлами.
В настоящее время при проектировании ЦОД наблюдается тенденция перераспределения бюджета в пользу инженерного оборудования. Системы инженерного обеспечения являются такими же потребителями электроэнергии, как оборудование ИТ, причем на них приходится уже до половины общего потребления. От адекватного выбора инженерной инфраструктуры во многом зависит окупаемость ЦОД. IBS DataFort советует повышать его энергоэффективность за счет гибкого управления инфраструктурой, использования эффективных блоков питания (обычно их КПД составляет около 80%), применения ИБП с высоким КПД (у новейших компактных ИБП он достигает 97%), изменения методов охлаждения оборудования. Иногда для оптимизации вычислительных ресурсов стоит произвести переоценку основных бизнес-процессов компании, что позволит эффективнее задействовать имеющиеся мощности.
Андрей Полежаев считает, что система бесперебойного питания должна обладать модульной конструкцией. Установив модульную систему ИБП с уровнем наполнения 15-20%, владелец ЦОД исключает постоянные затраты на подзарядку 80-85% батарей, работающих в холостом режиме, как в случае решений других типов. Систему охлаждения, по его мнению, также следует строить по модульному принципу.
Порой даже относительно простые и недорогие решения способны дать заметный эффект. По статистике, до 60% охлаждающей мощности ЦОД теряется из-за того, что потоки воздуха проходят мимо оборудования. Это не только повышает расходы на электроэнергию, но и увеличивает капитальные затраты на приобретение дополнительного охлаждающего оборудования. Для решения этой проблемы предназначено, в частности, новое воздухонепроницаемое уплотнение COOL BOOT производства Panduit (см. Рисунок 1), которое обеспечивает герметизацию вырезов для разводки кабелей под фальшполом.
Тепло, выделяемое ЦОД, можно использовать, например, для воздушного отопления прилегающих офисов. По словам Алексея Трояновского, такая технология весьма эффективна, но применяется достаточно редко. Кроме того, даже в средней полосе России можно выгодно задействовать системы естественного охлаждения ЦОД (Free Cooling). К сожалению, подобные энергосберегающие технологии требуют больших начальных затрат: например, кондиционер с системой Free Cooling стоит вдвое дороже обычного. При этом в системе больше элементов, что снижает надежность, а для всеобъемлющего контроля нужна система автоматизации высокого уровня, проектирование и установка которой по силам лишь высококвалифицированным специалистам, поэтому отечественным интеграторам придется конкурировать с компаниями, специализирующимися на АСУТП.
Пока бизнес в России развивается экстенсивным путем, а расходы, связанные с энергоснабжением ИТ, относительно невелики, заказчики не станут обращать внимание на появление новейших и весьма дорогих технологий энергосбережения. Как подчеркнул Николай Паршин, если они не поймут свою выгоду, вложение денег в «зеленые» технологии для них не будет иметь смысла. Между тем, дефицит электроэнергии в крупных городах и несовершенство системы энергообеспечения в целом заставят предприятия заняться вопросами энергосбережения, полагают в компании «Антрел-Интегро», входящей в ГК «Антрел-Автоматизация». Сей-час стоимость внедрения технологий энергосбережения не соответствует сроку их окупаемости, но ситуация может измениться. По мнению Андрея Полежаева, наряду со значительными начальными вложениями, внедрению препятствует небольшой опыт реализации таких решений в России.
«Сегодня заказчики рассматривают целесообразность применения энергосберегающих технологий, исходя из стоимости реализации тех или иных решений, — утверждает Валерий Ти-мошин, менеджер отдела маркетинга решений «Энвижн Груп». — Именно экономическая эффективность — ос-новной движущий фактор выбора энергосберегающих технологий в каждой конкретной ситуации, но сейчас их внедрение вызывает дефицит электроэнергии, а не ее стоимость. Проблема высокой стоимости помещения с возможностью подачи необходимой электрической мощности от двух разных подстанций более серьезна».
По словам Андрея Павлова, на фоне сильнейшего дефицита услуг ЦОД мало кто уделяет должное внимание экономии электроэнергии в действующих ЦОД, однако во вновь создаваемых центрах данных все явственнее становится тенденция к «выжиманию» из имеющихся энергомощностей максимальной полезной составляющей. Компания, располагающая, например, 1 МВт электроэнергии, старается использовать его как можно эффективнее, в частности, минимизируя энергопотребление инженерных систем. Поскольку львиная доля приходится на систему холодоснабжения, активнее начинает использоваться технология Free Cooling, за счет которой в зимний период можно сэкономить до 70% электроэнергии, потребляемой системой холодоснабжения, и технология TURBOCOR, экономящая до 30% электроэнергии по сравнению с аналогичными по производительности стандартными чиллерами, и др. Для их внедрения нужны дополнительные затраты, но, по подсчетам «Датадом», срок окупаемости составляет около года, а в дальнейшем ежегодно экономится до 20-25% бюджета ИТ. Это можно назвать тенденцией перехода к «зеленым» ЦОД, хотя обусловлена она экономической потребностью.
Уже сейчас, отмечает Константин Спиров, директор по продажам компании HTS, заказчики запрашивают модуль Free Cooling для обеспечения работы оборудования при естественном охлаждении без включения компрессора, благодаря чему потребление электроэнергии удается снизить до 40%, но, к сожалению, пока очень редко покупают данную технологию. Он относит к главным проблемам внедрения энергосберегающих технологий желание «сэкономить» на инвестициях и отсутствие конкуренции между ЦОД, когда дороговизна эксплуатации компенсируется стоимостью аренды места, тем более что при дефиците ЦОД класса «А» цена аренды «стойкоместа» может быть очень высокой. Как только появится реальная конкуренция, владельцы ЦОД будут вынуждены снижать затраты на эксплуатацию.
Для зарубежных ЦОД сочетание энергоэффективного оборудования ИТ с энергосберегающей инфраструктурой электропитания и охлаждения дает до 1,5 млн долларов экономии на тысячу стандартных серверов 1U. По мнению Алексея Трояновского, один из способов решения проблемы отвода тепла и одновременно экономии электроэнергии, представляющей основную сложность при строительстве ЦОД, — более тесная интеграция серверной части с инженерной инфраструктурой, например, перераспределение вычислительных задач в ЦОД за счет виртуализации.
СТРОИТЕЛЬНЫЙ БУМ
По статистике «Датадом», за последний год ситуация на рынке услуг ЦОД значительно усугубилась. Планируемые сроки продажи стоечного места сократились с 6-12 до 2-3 месяцев. При этом клиенты готовы платить полную аренд-ную плату за пустую стойку, которую они планируют заполнить лишь через три-четыре месяца. Цены за размещение одной стойки выросли более чем в 1,5 раза: с 1300 до 2000 и более долларов в месяц при растущем спросе. Наконец, как отмечают специалисты компании, ежемесячно в ЦОД поступают запросы на размещение оборудования, мощность которого составляет до 30% от предельной для ЦОД.
Хотя на рынке есть ряд компаний, выполнивших несколько проектов по строительству и запуску ЦОД, расширение масштабов рынка свидетельствует о том, что их сил явно недостаточно и спрос на подобные услуги превышает количество тех, кто реально может справиться с проектами подобного рода, утверждает Константин Спиров. Сейчас в стадии реализации находится несколько действительно больших проектов, аналогов которых на нашем рынке не было. Однако строительство ЦОД — процесс небыстрый. По мнению Андрея Павлова, с момента заявления о планах строительства до сдачи в эксплуатацию зачастую проходит два-три года. Всплеск интереса к ЦОД перерастет в конкретные дейст-вия лишь через полтора-два года.
В России уже начался лавинообразный рост строительства ЦОД, стимулируемый острым дефицитом центров обработки данных. «ЦОД стали нужны всем!» — отмечает Валерий Тимошин. Средний бизнес понял, что централизованная модель вычислений более эффективна, и активно занялся процессом консолидации ресурсов ИТ. Это породило спрос на относительно небольшие, но быстро внедряемые решения. Вместе с тем, крупные компании активно используют распределенные решения для всесторонней защиты бизнеса.
Большинство российских системных интеграторов заявляют о своем потенциале в области строительства ЦОД, однако, как считают некоторые эксперты, качественная реализация инженерной и строительной составляющей таких проектов им пока не под силу. Не хватает опыта, знаний, квалифицированного персонала, навыков управления проектами с привлечением большого числа подрядчиков.
Создание ЦОД — многоуровневая комплексная задача, результат которой зависит от успешной интеграции всех подсистем. Роль генподрядчика в данных проектах чрезвычайно велика, считают в «Энвижн Груп», поскольку в России пока нет единых стандартов управления подобными проектами, так что процессы согласования действий особенно сложны. Стыковка подсистем не всегда проходит гладко, и по традиции субподрядчики перекладывают вину друг на друга. Однако крупный системный интегратор, где отдел управления проектами работает точно и слаженно, способен полностью охватить весь процесс создания ЦОД — от постановки задач и проектирования до комплексного сервисного обслуживания.
По мнению Николая Паршина, российские интеграторы в состоянии справиться с ростом потребностей в мощностях ЦОД, а дальнейшее развитие рынка может привлечь и зарубежных игроков. В «Антрел-Интегро» также убеждены, что в России уже достаточно компаний, способных удовлетворить возросшие аппетиты. Однако, по наблюдениям Александра Мартынюка, генерального директора консалтинговой компании «Ди Си квадрат», нацеленность отечественных компаний на строительство крупных, высоконагруженных ЦОД не всегда оправдана, поскольку мало кто на отечественном рынке может разработать грамотные технические решения для отвода тепла без применения локальных систем охлаждения.
В России, как уверяет Валерий Тимошин, есть компании, способные выполнять большие комплексные проекты по созданию всей инфраструктуры ЦОД, пусть их и не так много. Прежде всего, это крупнейшие системные интеграторы, которые обладают экспертизой во многих областях ИТ. Небольшие компании специализируются обычно на отдельных подсистемах, например, на монтаже источников бесперебойного питания большой мощности и ДГУ для резерв-ного питания.
В российских проектах разной сложности и масштабности, отмечают в «Да-тадом», принимают участие до 15-20 под-рядчиков: от экспедиторских и такелажных компаний до тех, кто занимается согласованиями ЦОД в надзорных органах. Средний типовой ЦОД требует участия пяти-восьми подрядчиков и одной управляющей компании. Если ТЗ отражает потребности клиента, задача проектировщикам поставлена правильно, а в штате есть главный инженер, владеющий спецификой ЦОД, то проект будет соответствовать пожеланиям заказчика. Однако со строительством все не так просто. Как полагает Андрей Павлов, избежать несоблюдения сроков, превышения бюджета и множества других проблем можно за счет выполнения простых правил: четкого планирования на этапе заключения договоров с подрядчиками, ужесточения штрафных санкций в договорах, подготовки ТЗ и выполнения проекта строительства, согласованного со всеми заинтересованными сторонами. Необходим тщательный подбор подрядчиков, особенно для ответственных этапов проекта, создание рабочей группы и осуществление технического надзора со стороны заказчика на ключевых этапах, подготовка полной исполнительной документации и программы-методики испытаний с последующей ее реализацией приемочной комиссией.
Если для ЦОД предполагается использовать существующее здание, то одна из главных трудностей — найти наиболее подходящее, поскольку к таким объектам предъявляется ряд жестких требований, касающихся места расположения, этажности, подъездных путей, территории, качества и несущей способности перекрытий, наличия энерговвода нужной мощности (желательно с резервом на случай расширения). Кроме того, нередко постановка задач заказчиками существенно расходится с возможностями их реализации в инфраструктуре ИТ. При выборе оборудования они часто руководствуются исключительно ценой, а спектр предложений вендоров и системных интеграторов обычно ограничен. Если бюджеты принимаются без учета специфики ИТ, результатом может стать избыточная, неоптимальная инфраструктура. По мнению экспертов, для успеха проекта ЦОД надо строить с расчетом на кон-кретные результаты от автоматизации, виртуализации, экономии на охлаждении и электричестве. Таким образом, важные факторы успеха — четкие цели и технические требования, опытный исполнитель и его сотрудничество с заказчиком.
Как считает Александр Любушкин, руководитель отдела систем электроснабжения компании «Поликом Про», все компоненты инженерной инфраструктуры ЦОД следует оценивать в совокупности, начиная от строительных нюансов и заканчивая обслуживанием, т.е. подходить ко всему проекту комплексно. От этого зависит стоимость проекта и эксплуатации, уровень надежности и качества. Ответственный за его выполнение должен быть один — генеральный подрядчик или компания, выполняющая все работы. Не стоит разделять проект на части, поручая каждую одному исполнителю.
За рубежом, где культура строительства ЦОД развивается уже несколько десятилетий, эта задача успешно решается за счет привлечения независимых консалтинговых компаний, управляющих взаимоотношениями всех участников проекта от начала и до конца. Некоторые специалисты считают, что в России их опыт не может быть задействован в полной мере. Однако Андрей Павлов не видит тому прин-ципиальных препятствий, хотя многим компаниям придется либо смириться с российской спецификой ЦОД, либо убедить заказчиков пересмотреть некоторые принципиальные моменты, касающиеся физической защиты и ряда нетипичных для российского рынка функций ЦОД, реализация которых значительно увеличивает стоимость строительства. Еще одним «рынком сбыта» таких услуг, несомненно, будут работающие у нас иностранные предприятия.
Приглашение зарубежных подрядчиков, обладающих подобным опытом, было бы полезно для всего рынка. По мнению Константина Спирова, это установило бы новую «планку» для остальных участников процесса, но, скорее всего, желание заказчиков сэкономить заставит их обращаться к российским интеграторам. Как подчеркивает Александр Любушкин, хотя на отечественном рынке есть несколько западных компаний, готовых взять на себя заботы о строительстве крупных ЦОД, все равно привлекаются российские субподрядчики, а для среднего и мелкого проекта исполнителей такого калибра попросту не найти. В силу особенностей нашего бизнеса маловероятно, что зарубежные компании, которые захотят работать здесь в среднем сегменте рынка, окажутся конкурентоспособными. Его займут российские компании, и системных интеграторов для этого достаточно.
В России около 30-40 компаний заявляет о своей компетенции в области управления проектами строительства ЦОД. Некоторые из них — серьезные профессионалы, другие перепродают услуги третьих компаний, однако лишь немногие имеют узкую специализацию в данном сегменте, считают в «Датадом». Компании-интеграторы в большинстве случаев не рассматривают это направление в качестве приоритетного. Для увеличения маржинальности проекта применяется не самое качественное оборудование и не самые технологичные и функциональные решения. Нередко управляющая компания ориентирована на одного или двух производителей инженерного оборудования. Ее специалисты сертифицированы именно этим вендором, и поэтому в качестве решения будет предложена именно его продукция. Подобный подход сводит к минимуму количество ошибок, но заказчик не получит решения, оптимального по цене или технологиям.
К тому же большинство интеграторов реализует такие проекты от случая к случаю. Зачастую происходит ротация персонала, и компания совершает одни и те же ошибки при строительстве каждого следующего объекта. Иногда генподрядчиком становится строительная компания, однако ЦОД — специфическая область, где требуются знания, как из инженерной области, так и из ИТ. Поэтому строители, взявшиеся за управление проектом создания ЦОД, рискуют получить не целостный взаимосвязанный комплекс, а разрозненный набор оборудования, не выполняющего своей основной функции — обеспечение работы инфраструктуры ИТ предприятия и непрерывности бизнеса.
СЕТИ ЦОД
Хотя за редким исключением по своим масштабам и качеству отечественные ЦОД почти всегда существенно уступают зарубежным, в нашей стране уже реализуется несколько крупных программ строительства не только отдельных ЦОД, но и их сетей. Один из зачинателей этого движения —Stack Group, с 2004 г. она развивает сеть коммерческих ЦОД Stack Data Network (SDN) (см. Рисунок 2). Как утверждается, компания применила лучшие международные практики строительства и эксплуатации ЦОД разного масштаба и уровня надежности, а кроме того, ей удалось стать крупным поставщиком услуг аутсорсинга отказоустойчивой инфраструктуры ЦОД. Суммарная проектная емкость действующих узлов SDN — 800 стоек, их общая площадь превышает 4000 м2. В конце мая, с вводом в эксплуатацию первого этапа третьей очереди основного ЦОД Stack.M1, площадь ЦОД этой сети увеличилась еще на 1500 м2. Они оснащены инженерными системами с уровнем надежности Tier III+. По словам Сергея Лысакова, генерального директора Stack Group, компания намерена развивать SDN и дальше — масштабы сети предполагается существенно увеличить, а пакет услуг значительно расширить.
В прошлом году российская компания Integrated Services Group (ISG) начала реализацию программы строительства сети из восьми ЦОД, обслуживанием которых будет заниматься ее дочерняя структура. Инвестиции в программу составят более 2 млрд рублей в течение пяти лет. По словам Сергея Шуршалина, заместителя генерального директора ISG по интеграции, в Москве вслед за открытым осенью прошлого года ЦОД (см. Рисунок 3)начато строительство второго ЦОД, состоящего из двух технологических помещений общей площадью 1000 м2. Кроме того, компания планирует ввести в строй центры данных в Дубне, Санкт-Петербурге, Новосибирске, Самаре и Нижнем Новгороде. Сеть ЦОД планируется объединить в кольцо с помощью федерального оператора связи. В ISG отмечают, что в России спрос на услуги ЦОД в 1,5-2 раза превышает предложение, и этот сегмент будет расти быстрее рынка ИТ.
В Дубне компания приступила к созданию крупнейшего в Европе ЦОД общей площадью 20 тыс. м2 и энерговооруженностью 25 МВт. Его строительством займется российская компания «Датадом», уже имеющая опыт создания московского ЦОД ISG и реализации других масштабных проектов. ЦОД разместится на площади 4,3 га, а модульный принцип позволит вводить мощности поэтапно: планируемые четыре типовых двухэтажных здания-модуля будут вводиться в эксплуатацию поочередно. Строительство первого модуля начнется в III кв. 2008 г., а завершить проект стоимостью 1 млрд рублей планируется к 2013 г. Как пояснили в «Датадом», «модульный» подход выбран из-за ограниченной площади под строительство, оптимизации размера модуля при использовании типовой архитектуры ЦОД (с точки зрения холодоснабжения), минимизации капитальных вложений и возможности рефинансирования последующего строительства за счет собственных средств, а также сокращения затрат на проектирование.
Как объясняет Андрей Павлов, уникальность проекта состоит в том, что это первый ЦОД, вынесенный за пределы Москвы, но ориентированный на московского клиента. На нем будет опробована услуга Remote Hands: клиент сдает свое оборудование в московском офисе, а установка и настройка осуществляется в ЦОД без его участия. ЦОД будет предоставлять сервисы самого высокого уровня, вплоть до администрирования приложений клиента. Его размещение в особой экономической зоне позволит существенно снизить расходы по закупке оборудования и строительству площадки, значительно сократить срок окупаемости и предложить конкурентоспособные цены на услуги. Расположение в технопарке поможет решить кадровый вопрос.
В сентябре прошлого года телекоммуникационная компания «Синтерра» объявила программу создания национальной сети из 40 центров обработки, хранения и распространения информации. Проект получил название «40х40», так как в нем представлены 40 крупных городов всех семи федеральных округов России, а пропускная способность каналов связи каждого ЦОД, подключаемого сразу к двум волоконно-оптическим кольцам сети DWDM «Синтерра», составляет 40 Гбит/c (4х10 Гбит/с). Центры будут строиться в соответствии с модульным принципом и расширяться по мере необходимости.
Типовой проект площадью 500-1000 м2 на 200-300 стоек предусматривает подвод мощности 1,5-2 МВт, два независимых энерговвода от подстанций, наличие резервного электропитания (ДГУ) и уровень доступности 99,985%. Решить проблемы дороговизны площадей и подвода мощности предполагается, в частности, путем размещения ЦОД в промзонах. К концу 2008 г. будут введены в строй 16 площадок, а в течение следующего —еще 24. Параметры работы ЦОД будут отслеживаться как локально, так и дистанционно из центра управления сетью «Синтерра».
Среди заявленных услуг ЦОД «Синтерра» — предоставление в аренду инженерной инфраструктуры для размещения оборудования заказчиков, организация резервных площадок, услуги контакт-центров, телекоммуникационные сервисы. Введенные в эксплуатацию ЦОД ISG предоставляют клиентам услуги размещения оборудования, хранения и резервного копирования данных, аренды волоконно-оптических линий связи до московских коммутационных центров ММТС 9 и ММТС 10 (1 или 10 Гбит/c), офисных помещений для размещения персонала.
По словам Антона Мякишева, на-чальника отдела непрерывности бизнеса и хостинга IBM Global Technology Services, в настоящее время российский рынок услуг хостинга информационных систем в определенной степени сформирован: за последний год произошел качественный рост интереса заказчиков к подобным услугам, и IBM ожидает дальнейшего увеличения спроса. Крупные российские предприятия и организации переходят от простого выноса собственного оборудования во внешний ЦОД к полномасштабному аутсорсингу инфраструктур информационных систем корпоративного класса (например, ERP), что позволяет им оперативно внедрять такие системы. Хотя подобный вариант не всегда приемлем, он может оказаться экономически привлекательным благодаря отсутствию капитальных инвестиций, затрат на поиски места для развертывания ЦОД, подбор, обучение и удержание квалифицированного персонала.
Николай Паршин, напротив, утверждает, что рынок аутсорсинга только зарождается. Бизнес пока не понимает, какие выгоды несет аутсорсинг, он лишь «пробует его на зуб». На текущий момент больше всего востребованы услуги предоставления инженерной инфраструктуры и телекоммуникационные сервисы. По мнению специалистов «Антрел-Интегро», основным направлением развития ЦОД должно быть повышение доступности сервисов для более широкого круга потребителей, тогда даже небольшая компания из 10-15 сотрудников получит возможность обойтись без собственного персонала ИТ, заключив соглашение о предоставлении услуг. Интерес к аутсорсингу в России есть, но лавинообразного спроса пока не наблюдается, констатируют и в «Энвижн Груп». Ряд проблем еще только предстоит решить, одна из них — доверие корпоративных данных третьему лицу.
Специалисты Lampertz среди тенденций в области ЦОД выделяют увеличение площадей и рост значения центров данных в структуре компании — как вследствие повышения важности информации, так и за счет роста стоимости активного оборудования, и прогнозируют более широкое использование аутсорсинговых решений, поскольку это позволяет свести капиталовложения к минимуму. Дальнейшие тенденции будут диктовать производители оборудования.
ТРИ ПОДХОДА И ИХ СОСТАВНЫЕ ЧАСТИ
В компании «Квазар-Микро» выделяют три основных подхода к по-строению ЦОД: классический ЦОД (сложное инженерное сооружение для централизованного размещения и обслуживания компьютерного и телекоммуникационного оборудования, оснащенное системами кондиционирования, бесперебойного питания, пожаротушения, СКС), стационарный модульный ЦОД, собираемый из готовых элементов, и мобильный ЦОД в виде одного или нескольких перевозимых контейнеров, где находится все необходимое для его работы. «Квазар-Микро» применяет все три, включая их комбинации: например, классический ЦОД в качестве основного и мобильный в роли резервного.
Алексей Кривошеев, ведущий менеджер «Квазар-Микро» по корпоративной инфраструктуре ИТ, отмечает, что преимущество классических ЦОД — отработанные решения и известные подходы (например, организация горячих и холодных коридоров), однако для них характерна слабая защищенность от физических факторов, таких как затопление или пожар вне помещения ЦОД, а также значительные сроки реализации. Под модульным ЦОД в компании понимают концепцию построения стационарных ЦОД, когда внутри неподготовленного помещения устанавливаются модули, обеспечивающие работу вычислительных средств, необходимые климатические условия, бесперебойное электропитание и т. д. Модульный ЦОД — это «помещение в помещении», и, в отличие от классического подхода, здание для его размещения не должно отвечать особым требованиям, связанным с размещением высокотехнологичного оборудования.
Александр Мартынюк, ссылаясь на международный стандарт TIA 942, выделяет несколько требований к по-мещениям для ЦОД, существенно отличающихся от тех, что предъявляются к бизнес-центрам. Это несущая способность перекрытий ЦОД, которая для серверного зала установлена в размере 1200-1500 кг/м2, а в технических помещениях — 2500 кг/м2, высота перекрытий (до четырех, а желатель-но — до пяти метров), высота фальшпола (не менее 400 мм) и отсутствие пыли в подпольном пространстве, стены с усилением из кирпича и армированием, потолки из материалов, не образующих пыли.
Кроме того, ЦОД необходимо электропитание по первой категории для ключевых потребителей (до 15-20 кВт на стойку), два независимых энерговвода, бесперебойное охлаждение, не менее двух вводов каналов связи в здание и независимые трассы по зданию до оптического кросса. При развертывании модульных ЦОД помещение, как минимум, должно удовлетворять требованиям в отношении несущей способности перекрытий и высоты помещений, электропитания и каналов связи. По наблюдениям Александра Мартынюка, лишь немногие владельцы ЦОД считают для себя обязательным полное соблюдение этих требований. В итоге редкие ЦОД, заявленные как высококачественные и отказоустойчивые, реально соответствуют данному статусу.
«Квазар-Микро» предлагает создавать модульные ЦОД на основе защищенных помещений Lampertz (см. Рисунок 4). Такой подход предполагает создание ЦОД «под ключ» на основе модульных комнат безопасности различных типов. Комната собирается, как конструктор, и может расширяться (насколько позволяет внешнее помещение). Это катастрофоустойчивое решение защищает оборудование от пожаров, наводнений, взломов, причем каждая комната может иметь различную катастрофоустойчивость. Как поясняет Станислав Заржецкий, региональный менеджер компании Lampertz в России, стандартно компания предлагает использовать в данном решении инфраструктурные продукты Rittal (RimatriХ5), поскольку Lampertz и Rittal входят в одну группу компаний, однако заказчик может выбрать любого поставщика систем жизнеобеспечения ЦОД. Это сказывается только на этапе проектирования при согласовании компоновки и количества кабельных вводов.
Требование к перекрытию для помещений Lampertz — 450 кг на м2, высота — не менее 2,8 м. Элементы полностью разборной модульной конструкции могут быть доставлены к месту монтажа даже при отсутствии грузового лифта, а для масштабирования на этапе проектирования достаточно предусмотреть, куда и как будет расширяться помещение. По мере необходимости, докупая новые модули решения, его размеры можно увеличивать. Срок строительства ЦОД значительно сокращается, дорогостоящая и длительная строительная подготовка помещений не требуется. Как подчеркивают в «Квазар-Микро», при использовании решений от Lampertz требования к помещениям снижаются, а заказчик получает высокий уровень защиты ЦОД от физических воздействий (пожара, затопления, ЭМИ, взлома и др.). Конечно, капитальные затраты увеличиваются.
По данным «Квазар-Микро», для крупных проектов (несколько тысяч кв. м) удельная стоимость решения значительно снижается, однако речь идет, прежде всего, о физической защите, а не о строительной отделке. Вместе с тем, никакое строительное решение не защитит от физического воздействия, например, при пожаре, отмечает Станислав Заржецкий. Применение таких решений наиболее целесообразно при площади ЦОД от 50 м2. В мире самое большое помещение Lampertz имеет площадь 2000 м2, в России — 150 м2 (в самых крупных проектах обычно около 70 м2). Однако в настоящее время реализуются проекты в 300, 700 и 1200 м2. Lampertz заметный рост интереса российских заказчиков к ее решениям связывает с растущей зависимостью бизнеса от инфраструктуры ИТ, тем более, что стоимость оборудования ИТ может в несколько раз превышать стоимость решения для его защиты.
Впрочем, модульный подход этим не ограничивается и находит в ЦОД достаточно широкое применение — от использования заранее интегрированных комплексных решений уровня APC InfraStruXure Liebert X-treme от Emerson Network Power или Rittal RimatriX5 до разделения площадей ЦОД на несколько гермозон-модулей, где размещаются стойки с оборудованием.
В «ТБС-Айтэл» модульный подход рассматривают как интеграцию отдельных модульных решений для создания единого законченного решения ЦОД. Андрей Полежаев считает, что этот принцип уже доказал свою жизнеспособность, а модульность и надежность ЦОД — почти синонимы. Любая модульная конструкция с избыточностью N+1, где применяется высокотехнологичное и качественное оборудование, значительно повышает надежность системы в целом. Затраты на обеспечение избыточности сокращаются, поскольку в качестве резерва выделяется один модуль из системы, а не система целиком, к тому же не требуется нести расходов по обслуживанию полностью дублированной системы. Замену и профилактику отдельных узлов можно осуществлять в «горячем» режиме, не мешая работе других модулей системы. Модульный вариант построения ЦОД в «ТБС-Айтэл» рекомендуют использовать, если планируется последующее наращивание вычислительных мощностей. ЦОД, построенный по модульному принципу, легко адаптировать к новым условиям функционирования. В «Антрел-Интегро» под модульностью понимают использование готовых «шаблонов» при проектировании. Большинство серьезных вендоров уже предлагают целые методологии и богатый инструментарий для облегчения задач проектировщиков.
«Модульный подход упрощает задачу подбора и адаптации помещения, — считает Николай Паршин. —Всегда можно сформировать оптимальную структуру и вписать ее в уже имеющуюся площадь. Однако он не упрощает интеграцию информационных систем и не позволяет снизить требования к квалификации персонала, которые по мере усложнения систем в ЦОД будут только расти». Вместе с тем, модульный принцип дает возможность вводить мощности ЦОД поэтапно и, таким образом, оптимизировать капитальные инвестиции и затраты на эксплуатацию ЦОД (прежде всего, кондиционирование). Поэтому такой подход рекомендуется применять, когда у заказчика нет четкого понимания, каким оборудованием и в какие сроки он наполнит сотни стоек ЦОД, и нужно предусмотреть возможности гибкого наращивания мощностей. Модульная концепция позволяет превратить в ЦОД практически любое помещение, что обычно выгоднее с точки зрения стоимости, чем строительство новых зданий.
Унифицированные модульные системы — это оправданный эволюционный путь развития инфраструктуры ЦОД. Подобные продукты хорошо известны и пользуются успехом, если нужно добиться максимальной плотности оборудования, подтверждает Валерий Тимошин. В «Энвижн Груп» под «модулями» понимают подсистемы и их компоненты, из которых складывается комплексное решение. Каждый такой модуль — законченное решение, например, кластерная система для ответственных приложений или система прецизионного кондиционирования. Отдельная группа инженеров разрабатывает свою подсистему, для которой существует стандартизированные и отработанные подходы к проектированию, созданию и внедрению. Использование проверенных технологий, аппаратных и программных компонентов позволяет сократить время разработки, а главное — обойти «подводные камни». По оценкам АРС, применение модульной архитектуры электропитания и охлаждения дает экономию в 10-30%.
По мнению Александра Любуш-кина, собирать решение из готовых компонентов значительно эффективнее — увеличивается надежность и сокращается стоимость работ. В целом можно назвать этот подход современным. Отказываются от данного принципа лишь тогда, когда нет альтернатив. Геннадий Дмитриев, менеджер проектов «Тринити Солюшнс», считает, что интегрированные комплексные решения весьма востребованы в современных ЦОД. Их стоимость невелика, они легко собираются. Основная проблема — грамотно подготовить персонал для установки и написать техническое задание. Тем временем, в последние годы на рынке появились более дорогие решения, комплексные и законченные, где интеграция осуществляется на еще более высоком уровне —«ЦОД в контейнере». Подробнее о них читайте во второй части нашего обзора, в следующем номере журнала.
Сергей Орлов — обозреватель «Журнала сетевых решений/LAN». С ним можно связаться по адресу: sorlov@lanmag.ru .