-
1 four-handed
adj1) чотирирукий (про мавпу)2) муз. чотириручний; для чотирьох виконавців (про гру)3) що виконується в чотири руки (на роялі)* * *a1) чотирирукий ( про мавпу)2) для чотирьох чоловік ( про гру)3) гра у чотири руки ( на роялі) -
2 two-handed
adj1) дворукий; що має дві руки (ручки)2) для двох (про гру)3) для обох рук4) який вільно володіє двома руками; спритний5) величезний; сильний* * *atwo-handed saw — дворучна пила; для двох ( про гру)
2) для обох рук; дворучний ( про меч)3) що володіє вільно двома руками; спритний4) величезний; сильний -
3 straight
1. n (the straight)1) прямизна2) пряма лінія4) чесність5) карти, що йдуть підряд відповідно до їх достоїнства6) амер. правда, істина; правильне твердження2. adj1) прямий, незігнутийstraight back — пряма (незгорблена) спина
2) що не відхиляється від курсу; що не сходить з дороги; безперервний3) некучерявий (про волосся)4) авт. з циліндрами в ряд (про двигун)5) правильний, рівний, у порядку6) розм. чесний, щирий, відвертийstraight goods — амер., розм. надійна (чесна) людина
7) розм. вірний, надійний8) амер. відданий своїй партії9) амер. нерозведений (водою)10) амер., розм. поштучний11) театр. що належить до визначних п'єс12) карт. розташований по порядкуstraight man — амер., театр. партнер коміка
3. adv1) прямо, по прямій лініїto stand straight — не горбитися, стояти прямо
2) безпосередньо, прямо3) правильно, точно, влучно4) чесно, відверто, прямоto tell smb. straight — сказати комусь чесно
5) негайно, відразуstraight away — розм. відразу, негайно, зараз же
straight off — не вагаючись, не подумавши, відразу
straight out — навпростець, прямо
4. v1) випрямляти, розпрямляти2) одягати небіжчика* * *I [streit] n1) тк.; sing ( the straight) прямизна; пряма лінія2) cпopт. фінішна пряма3) чесність4) кapт. карти, підібрані підряд по достоїнству, "порядок", "стріт" ( у покері)5) нормальна людина (не гомосексуаліст, не наркоман); несхв. "добропорядна" людина, обиватель, міщанинII [streit] a1) прямий, невигнутий; який не відхиляється від курсу, який не сходить зі шляху; безперервнийstraight run — безпосадковий політ; некучерявий; aвт. з циліндрами в ряд ( про двигун)
2) правильний, рівний; який знаходиться в порядкуstraight blow — прямий удар ( бокс)
3) чесний, прямий, щирий4) вірний, надійний5) cл. який неухильно підтримує рішення своєї партії; відданий своїй партії6) cл. нерозбавлений7) cл.; кoм. фіксований, прейскурантний ( про ціну); без знижки за велику кількість купленого8) лiт., театр. чистий за жанром; природний, органічний ( про гру актора); звичайний, рядовий (про лiт. твір)9) який іде по порядку; кapт. розташований один по одномуstraight flush — карти однієї масті по порядку; флеш-рояль ( у покері)
10) cпeц. об'єктивний ( про газетні повідомлення)11) звичайний, традиційний; нормальний; здоровий ( про психіку)12) єдиний ( про спосіб винагороди); прямий ( про відрядність)13) прямий, безпосередній (про спостереження, розрахунок)III [streit] adv1) по прямій лінії, прямо2) прямо, безпосередньо3) правильно, точно, влучно4) правильно, упорядковано5) чесно, відкрито, прямо7) ясно, чітко, тверезоstraight away — негайно, відразу
straight off — відразу, не вагаючись; не обміркувавши
straight out — прямо, відверто
-
4 straight
I [streit] n1) тк.; sing ( the straight) прямизна; пряма лінія2) cпopт. фінішна пряма3) чесність4) кapт. карти, підібрані підряд по достоїнству, "порядок", "стріт" ( у покері)5) нормальна людина (не гомосексуаліст, не наркоман); несхв. "добропорядна" людина, обиватель, міщанинII [streit] a1) прямий, невигнутий; який не відхиляється від курсу, який не сходить зі шляху; безперервнийstraight run — безпосадковий політ; некучерявий; aвт. з циліндрами в ряд ( про двигун)
2) правильний, рівний; який знаходиться в порядкуstraight blow — прямий удар ( бокс)
3) чесний, прямий, щирий4) вірний, надійний5) cл. який неухильно підтримує рішення своєї партії; відданий своїй партії6) cл. нерозбавлений7) cл.; кoм. фіксований, прейскурантний ( про ціну); без знижки за велику кількість купленого8) лiт., театр. чистий за жанром; природний, органічний ( про гру актора); звичайний, рядовий (про лiт. твір)9) який іде по порядку; кapт. розташований один по одномуstraight flush — карти однієї масті по порядку; флеш-рояль ( у покері)
10) cпeц. об'єктивний ( про газетні повідомлення)11) звичайний, традиційний; нормальний; здоровий ( про психіку)12) єдиний ( про спосіб винагороди); прямий ( про відрядність)13) прямий, безпосередній (про спостереження, розрахунок)III [streit] adv1) по прямій лінії, прямо2) прямо, безпосередньо3) правильно, точно, влучно4) правильно, упорядковано5) чесно, відкрито, прямо7) ясно, чітко, тверезоstraight away — негайно, відразу
straight off — відразу, не вагаючись; не обміркувавши
straight out — прямо, відверто
-
5 away
1. adj pred.1) відсутнійto be away — бути відсутнім, поїхати
2) віддалений; що знаходиться на віддалі (відстані)3) спорт. що проводиться не на своєму полі (про гру)2. adv1) означає віддалення від когось, чогось: далеко, віддалік, здаляfar away — далеко-далеко; дуже далеко
away off — амер. далеко
2) означає рух, віддалення: далеко, гетьto run away — побігти, утекти
to fall away from smb. — покинути, зрадити когось
away with you! — забирайся геть!, геть звідси!
3) означає віддаленість у часі: давно4) означає зменшення, зникнення, зруйнуванняto pine away, to waste away — чахнути
to make away with smb., smth. — знищити (убити) когось, зруйнувати щось
to give away smth. to smb. — подарувати (віддати) щось комусь
far and away — незрівнянно; безперечно
out and away — набагато, значно, далеко
right away, straight away — негайно, відразу
* * *I a1) predic відсутній, за відсутності; віддалений, який знаходиться на відстані2) cпopт. проведений не на своєму полі ( про гру)II advfar away — далеко; віддаленість у часі давно
2) виражає зменшення, зникненняto pass away — померти
to make away with smb — знищити /убити/ кого-небудь
to make away with smth — зруйнувати що-небудь; передачу в користування іншій особі to give away smth
to smb — дати /подарувати/ що-небудь кому-небудь
3) right away відразу ж, негайно -
6 four-handed
-
7 two-handed
atwo-handed saw — дворучна пила; для двох ( про гру)
2) для обох рук; дворучний ( про меч)3) що володіє вільно двома руками; спритний4) величезний; сильний -
8 two-handed
-
9 pontoon
1. n1) понтон; понтонний міст2) поплавець (гідролітака)3) розм. двадцять одно (про гру в карти)2. vпереправляти (ся) на понтонах* * *I n1) понтон2) мop. плашкоут3) кесон4) поплавець ( гідролітака)II vпереправляти на понтонах; переправлятися на понтонахIII n; карт.двадцять одне, "очко" -
10 unscored
adj1) незарублений, без позначок2) незарахований (про гру)* * *[en`skoːd]a1) без карбів, без відміток -
11 away
I a1) predic відсутній, за відсутності; віддалений, який знаходиться на відстані2) cпopт. проведений не на своєму полі ( про гру)II advfar away — далеко; віддаленість у часі давно
2) виражає зменшення, зникненняto pass away — померти
to make away with smb — знищити /убити/ кого-небудь
to make away with smth — зруйнувати що-небудь; передачу в користування іншій особі to give away smth
to smb — дати /подарувати/ що-небудь кому-небудь
3) right away відразу ж, негайно -
12 Mondbodenprobe
про́ба гру́нта с пове́рхности Луны́ -
13 Mondprobe
про́ба лу́нного гру́нта -
14 система охлаждения ЦОДа
система охлаждения ЦОДа
-
[Интент]т
Система охлаждения для небольшого ЦОДаВымышленная компания (далее Заказчик) попросила предложить систему охлаждения для строящегося коммерческого ЦОДа. В основном зале планируется установить:
- 60 стоек с энергопотреблением по 5 кВт (всего 300 кВт) — все элементы, необходимые для обеспечения требуемой температуры и влажности, должны быть установлены сразу;
- 16 стоек с энергопотреблением по 20 кВт (всего 320 кВт) — это оборудование будет устанавливаться постепенно (по мере необходимости), и средства охлаждения планируется развертывать и задействовать по мере подключения и загрузки стоек.
Заказчик заявил, что предпочтение будет отдано энергоэффективным решениям, поэтому желательно задействовать «зеленые» технологии, в первую очередь фрикулинг (естественное охлаждение наружным воздухом — free cooling), и предоставить расчет окупаемости соответствующей опции (с учетом того, что объект находится в Московской области). Планируемый уровень резервирования — N+1, но возможны и другие варианты — при наличии должного обоснования. Кроме того, Заказчик попросил изначально предусмотреть средства мониторинга энергопотребления с целью оптимизации расхода электроэнергии.
ЧТО ПРОГЛЯДЕЛ ЗАКАЗЧИК
В сформулированной в столь общем виде задаче не учтен ряд существенных деталей, на которые не преминули указать эксперты. Так, Дмитрий Чагаров, руководитель направления вентиляции и кондиционирования компании «Утилекс», заметил, что в задании ничего не сказано о характере нагрузки. Он, как и остальные проектировщики, исходил из предположения, что воздушный поток направлен с фронтальной части стоек назад, но, как известно, некоторые коммутаторы спроектированы для охлаждения сбоку — для них придется использовать специальные боковые блоки распределения воздушного потока.
В задании сказано о размещении всех стоек (5 и 20 кВт) в основном зале, однако некоторые эксперты настоятельно рекомендуют выделить отдельную зону для высоконагруженных стоек. По словам Александра Мартынюка, генерального директора консалтинговой компании «Ди Си квадрат», «это будет правильнее и с точки зрения проектирования, и с позиций удобства эксплуатации». Такое выделение (изоляция осуществляется при помощи выгородок) предусмотрено, например, в проекте компании «Комплит»: Владислав Яковенко, начальник отдела инфраструктурных проектов, уверен, что подобное решение, во-первых, облегчит обслуживание оборудования, а во-вторых, позволит использовать различные технологии холодоснабжения в разных зонах. Впрочем, большинство проектировщиков не испытали особых проблем при решении задачи по отводу тепла от стоек 5 и 20 кВт, установленных в одном помещении.
Один из первых вопросов, с которым Заказчик обратился к будущему партнеру, был связан с фальшполом: «Необходим ли он вообще, и если нужен, то какой высоты?». Александр Мартынюк указал, что грамотный расчет высоты фальшпола возможен только при условии предоставления дополнительной информации: о типе стоек (как в них будет организована подача охлаждающего воздуха?); об организации кабельной проводки (под полом или потолком? сколько кабелей? какого диаметра?); об особенностях помещения (высота потолков, соотношение длин стен, наличие выступов и опорных колонн) и т. д. Он советует выполнить температурно-климатическое моделирование помещения с учетом вышеперечисленных параметров и, если потребуется, уточняющих данных. В результате можно будет подготовить рекомендации в отношении оптимальной высоты фальшпола, а также дать оценку целесообразности размещения в одном зале стоек с разной энергонагруженностью.
Что ж, мы действительно не предоставили всей информации, необходимой для подобного моделирования, и проектировщикам пришлось довольствоваться скудными исходными данными. И все же, надеемся, представленные решения окажутся интересными и полезными широкому кругу заказчиков. Им останется только «подогнать» решения «под себя».
«КЛАССИКА» ОХЛАЖДЕНИЯ
Для снятия тепла со стоек при нагрузке 5 кВт большинство проектировщиков предложили самый распространенный на сегодня вариант — установку шкафных прецизионных кондиционеров, подающих холодный воздух в пространство под фальшполом. Подвод воздуха к оборудованию осуществляется в зоне холодных коридоров через перфорированные плиты или воздухораспределительные решетки фальшпола, а отвод воздуха от кондиционеров — из зоны горячих коридоров через верхнюю часть зала или пространство навесного потолка (см. Рисунок 1). Такая схема может быть реализована только при наличии фальшпола достаточной высоты
В вопросе выбора места для установки шкафных кондиционеров единство мнений отсутствует, многие указали на возможность их размещения как в серверном зале, так и в соседнем помещении. Алексей Карпинский, директор департамента инженерных систем компании «Астерос», уверен, что для низконагруженных стоек лучшим решением будет вынос «тяжелой инженерии» за пределы серверного зала (см. Рисунок 2) — тогда для обслуживания кондиционеров внутрь зала входить не придется. «Это повышает надежность работы оборудования, ведь, как известно, наиболее часто оно выходит из строя вследствие человеческого фактора, — объясняет он. — Причем помещение с кондиционерами может быть совершенно не связанным с машинным залом и располагаться, например, через коридор или на другом этаже».
Если стойки мощностью 5 и 20 кВт устанавливаются в одном помещении, Александр Ласый, заместитель директора департамента интеллектуальных зданий компании «Крок», рекомендует организовать физическое разделение горячих и холодных коридоров. В ситуации, когда для высоконагруженных стоек выделяется отдельное помещение, подобного разделения для стоек на 5 кВт не требуется.
ФРЕОН ИЛИ ВОДА
Шкафные кондиционеры на рынке представлены как во фреоновом исполнении, так и в вариантах с водяным охлаждением. При использовании фреоновых кондиционеров на крыше или прилегающей территории необходимо предусмотреть место для установки конденсаторных блоков, а при водяном охлаждении потребуется место под насосную и водоохлаждающие машины (чиллеры).
Специалисты компании «АМДтехнологии» представили Заказчику сравнение различных вариантов фреоновых и водяных систем кондиционирования. Наиболее бюджетный вариант предусматривает установку обычных шкафных фреоновых кондиционеров HPM M50 UA с подачей холодного воздуха под фальшпол. Примерно на четверть дороже обойдутся модели кондиционеров с цифровым спиральным компрессором и электронным терморасширительным вентилем (HPM D50 UA, Digital). Мощность кондиционеров регулируется в зависимости от температуры в помещении, это позволяет добиться 12-процентной экономии электроэнергии, а также уменьшить количество пусков и останова компрессора, что повышает срок службы системы. В случае отсутствия на объекте фальшпола (или его недостаточной высоты) предложен более дорогой по начальным вложениям, но экономичный в эксплуатации вариант с внутрирядными фреоновыми кондиционерами.
Как показывает представленный анализ, фреоновые кондиционеры менее эффективны по сравнению с системой водяного охлаждения. При этом, о чем напоминает Виктор Гаврилов, технический директор «АМДтехнологий», фреоновая система имеет ограничение по длине трубопровода и перепаду высот между внутренними и наружными блоками (эквивалентная общая длина трассы фреонопровода не должна превышать 50 м, а рекомендуемый перепад по высоте — 30 м); у водяной системы таких ограничений нет, поэтому ее можно приспособить к любым особенностям здания и прилегающей территории. Важно также помнить, что при применении фреоновой системы перспективы развития (увеличение плотности энергопотребления) существенно ограничены, тогда как при закладке необходимой инфраструктуры подачи холодной воды к стойкам (трубопроводы, насосы, арматура) нагрузку на стойку можно впоследствии увеличивать до 30 кВт и выше, не прибегая к капитальной реконструкции серверного помещения.
К факторам, которые могут определить выбор в пользу фреоновых кондиционеров, можно отнести отсутствие места на улице (например из-за невозможности обеспечить пожарный проезд) или на кровле (вследствие особенностей конструкции или ее недостаточной несущей способности) для монтажа моноблочных чиллеров наружной установки. При этом большинство экспертов единодушно высказывают мнение, что при указанных мощностях решение на воде экономически целесообразнее и проще в реализации. Кроме того, при использовании воды и/или этиленгликолевой смеси в качестве холодоносителя можно задействовать типовые функции фрикулинга в чиллерах.
Впрочем, функции фрикулинга возможно задействовать и во фреоновых кондиционерах. Такие варианты указаны в предложениях компаний RC Group и «Инженерное бюро ’’Хоссер‘‘», где используются фреоновые кондиционеры со встроенными конденсаторами водяного охлаждения и внешними теплообменниками с функцией фрикулинга (сухие градирни). Специалисты RC Group сразу отказались от варианта с установкой кондиционеров с выносными конденсаторами воздушного охлаждения, поскольку он не соответствует требованию Заказчика задействовать режим фрикулинга. Помимо уже названного они предложили решение на основе кондиционеров, работающих на охлажденной воде. Интересно отметить, что и проектировшики «Инженерного бюро ’’Хоссер‘‘» разработали второй вариант на воде.
Если компания «АМДтехнологии» предложила для стоек на 5 кВт решение на базе внутрирядных кондиционеров только как один из возможных вариантов, то APC by Schneider Electric (см. Рисунок 3), а также один из партнеров этого производителя, компания «Утилекс», отдают предпочтение кондиционерам, устанавливаемым в ряды стоек. В обоих решениях предложено изолировать горячий коридор с помощью системы HACS (см. Рисунок 4). «Для эффективного охлаждения необходимо снизить потери при транспортировке холодного воздуха, поэтому системы кондиционирования лучше установить рядом с нагрузкой. Размещение кондиционеров в отдельном помещении — такая модель применялась в советских вычислительных центрах — в данном случае менее эффективно», — считает Дмитрий Чагаров. В случае использования внутрирядных кондиционеров фальшпол уже не является необходимостью, хотя в проекте «Утилекса» он предусмотрен — для прокладки трасс холодоснабжения, электропитания и СКС.
Михаил Балкаров, системный инженер компании APC by Schneider Electric, отмечает, что при отсутствии фальшпола трубы можно проложить либо в штробах, либо сверху, предусмотрев дополнительный уровень защиты в виде лотков или коробов для контролируемого слива возможных протечек. Если же фальшпол предусматривается, то его рекомендуемая высота составляет не менее 40 см — из соображений удобства прокладки труб.
ЧИЛЛЕР И ЕГО «ОБВЯЗКА»
В большинстве проектов предусматривается установка внешнего чиллера и организация двухконтурной системы холодоснабжения. Во внешнем контуре, связывающем чиллеры и промежуточные теплообменники, холодоносителем служит водный раствор этиленгликоля, а во внутреннем — между теплообменниками и кондиционерами (шкафными и/или внутрирядными) — циркулирует уже чистая вода. Необходимость использования этиленгликоля во внешнем контуре легко объяснима — это вещество зимой не замерзает. У Заказчика возник резонный вопрос: зачем нужен второй контур, и почему нельзя организовать всего один — ведь в этом случае КПД будет выше?
По словам Владислава Яковенко, двухконтурная схема позволяет снизить объем дорогого холодоносителя (этиленгликоля) и является более экологичной. Этиленгликоль — ядовитое, химически активное вещество, и если протечка случится внутри помещения ЦОД, ликвидация последствий такой аварии станет серьезной проблемой для службы эксплуатации. Следует также учитывать, что при содержании гликоля в растворе холодоносителя на уровне 40% потребуются более мощные насосы (из-за высокой вязкости раствора), поэтому потребление энергии и, соответственно, эксплуатационные расходы увеличатся. Наконец, требование к монтажу системы без гликоля гораздо ниже, а эксплуатировать ее проще.
При использовании чиллеров функцию «бесперебойного охлаждения» реализовать довольно просто: при возникновении перебоев с подачей электроэнергии система способна обеспечить охлаждение серверной до запуска дизеля или корректного выключения серверов за счет холодной воды, запасенной в баках-аккумуляторах. Как отмечает Виктор Гаврилов, реализация подобной схемы позволяет удержать изменение градиента температуры в допустимых пределах (ведущие производители серверов требуют, чтобы скорость изменения температуры составляла не более 50С/час, а увеличение этой скорости может привести к поломке серверного оборудования, что особенно часто происходит при возобновлении охлаждения в результате резкого снижения температуры). При пропадании электропитания для поддержания работы чиллерной системы кондиционирования необходимо только обеспечить функционирование перекачивающих насосов и вентиляторов кондиционеров — потребление от ИБП сводится к минимуму. Для классических фреоновых систем необходимо обеспечить питанием весь комплекс целиком (при этом все компрессоры должны быть оснащены функцией «мягкого запуска»), поэтому требуются кондиционеры и ИБП более дорогой комплектации.
КОГДА РАСТЕТ ПЛОТНОСТЬ
Большинство предложенных Заказчику решений для охлаждения высоконагруженных стоек (20 кВт) предусматривает использование внутрирядных кондиционеров. Как полагает Александр Ласый, основная сложность при отводе от стойки 20 кВт тепла с помощью классической схемы охлаждения, базирующейся на шкафных кондиционерах, связана с подачей охлажденного воздуха из-под фальшпольного пространства и доставкой его до тепловыделяющего оборудования. «Значительные перепады давления на перфорированных решетках фальшпола и высокие скорости движения воздуха создают неравномерный воздушный поток в зоне перед стойками даже при разделении горячих и холодных коридоров, — отмечает он. — Это приводит к неравномерному охлаждению стоек и их перегреву. В случае переменной загрузки стоек возникает необходимость перенастраивать систему воздухораспределения через фальшпол, что довольно затруднительно».
Впрочем, некоторые компании «рискнули» предложить для стоек на 20 кВт систему, основанную на тех же принципах, что применяются для стоек на 5кВт, — подачей холодного воздуха под фальшпол. По словам Сергея Бондарева, руководителя отдела продаж «Вайсс Климатехник», его опыт показывает, что установка дополнительных решеток вокруг стойки для увеличения площади сечения, через которое поступает холодный воздух (а значит и его объема), позволяет снимать тепловую нагрузку в 20 кВт. Решение этой компании отличается от других проектов реализацией фрикулинга: конструкция кондиционеров Deltaclima FC производства Weiss Klimatechnik позволяет подводить к ним холодный воздух прямо с улицы.
Интересное решение предложила компания «ЮниКонд», партнер итальянской Uniflair: классическая система охлаждения через фальшпол дополняется оборудованными вентиляторами модулями «активного пола», которые устанавливаются вместо обычных плиток фальшпола. По утверждению специалистов «ЮниКонд», такие модули позволяют существенно увеличить объемы регулируемых потоков воздуха: до 4500 м3/час вместо 800–1000 м3/час от обычной решетки 600х600 мм. Они также отмечают, что просто установить вентилятор в подпольном пространстве недостаточно для обеспечения гарантированного охлаждения серверных стоек. Важно правильно организовать воздушный поток как по давлению, так и по направлению воздуха, чтобы обеспечить подачу воздуха не только в верхнюю часть стойки, но и, в случае необходимости, в ее нижнюю часть. Для этого панель «активного пола» помимо вентилятора комплектуется процессором, датчиками температуры и поворотными ламелями (см. Рисунок 5). Применение модулей «активного пола» без дополнительной изоляции потоков воздуха позволяет увеличить мощность стойки до 15 кВт, а при герметизации холодного коридора (в «ЮниКонд» это решение называют «холодным бассейном») — до 25 кВт.
Как уже говорилось, большинство проектировщиков рекомендовали для стоек на 20 кВт системы с внутрирядным охлаждением и изоляцию потоков горячего и холодного воздуха. Как отмечает Александр Ласый, использование высоконагруженных стоек в сочетании с внутрирядными кондиционерами позволяет увеличить плотность размещения серверного оборудования и сократить пространство (коридоры, проходы) для его обслуживания. Взаимное расположение серверных стоек и кондиционеров в этом случае сводит к минимуму неравномерность распределения холода в аварийной ситуации.
Выбор различных вариантов закрытой архитектуры циркуляции воздуха предложила компания «Астерос»: от изоляции холодного (решение от Knuеrr и Emerson) или горячего коридора (APC) до изоляции воздушных потоков на уровне стойки (Rittal, APC, Emerson, Knuеrr). Причем, как отмечается в проекте, 16 высоконагруженных стоек можно разместить и в отдельном помещении, и в общем зале. В качестве вариантов кондиционерного оборудования специалисты «Астерос» рассмотрели возможность установки внутрирядных кондиционеров APC InRowRP/RD (с изоляцией горячего коридора), Emerson CR040RC и закрытых решений на базе оборудования Knuеrr CoolLoop — во всех этих случаях обеспечивается резервирование на уровне ряда по схеме N+1. Еще один вариант — рядные кондиционеры LCP компании Rittal, состоящие из трех охлаждающих модулей, каждый из которых можно заменить в «горячем» режиме. В полной мере доказав свою «вендоронезависимость», интеграторы «Астерос» все же отметили, что при использовании монобрендового решения, например на базе продуктов Emerson, все элементы могут быть объединены в единую локальную сеть, что позволит оптимизировать работу системы и снизить расход энергии.
Как полагают в «Астерос», размещать трубопроводы в подпотолочной зоне нежелательно, поскольку при наличии подвесного потолка обнаружить и предотвратить протечку и образование конденсата очень сложно. Поэтому они рекомендуют обустроить фальшпол высотой до 300 мм — этого достаточно для прокладки кабельной продукции и трубопроводов холодоснабжения. Так же как и в основном полу, здесь необходимо предусмотреть средства для сбора жидкости при возникновении аварийных ситуаций (гидроизоляция, приямки, разуклонка и т. д.).
Как и шкафные кондиционеры, внутрирядные доводчики выпускаются не только в водяном, но и во фреоновом исполнении. Например, новинка компании RC Group — внутрирядные системы охлаждения Coolside — поставляется в следующих вариантах: с фреоновыми внутренними блоками, с внутренними блоками на охлажденной воде, с одним наружным и одним внутренним фреоновым блоком, а также с одним наружным и несколькими внутренними фреоновыми блоками. Учитывая пожелание Заказчика относительно энергосбережения, для данного проекта выбраны системы Coolside, работающие на охлажденной воде, получаемой от чиллера. Число чиллеров, установленных на первом этапе проекта, придется вдвое увеличить.
Для высокоплотных стоек компания «АМДтехнологии» разработала несколько вариантов решений — в зависимости от концепции, принятой для стоек на 5 кВт. Если Заказчик выберет бюджетный вариант (фреоновые кондиционеры), то в стойках на 20 кВт предлагается установить рядные кондиционеры-доводчики XDH, а в качестве холодильной машины — чиллер внутренней установки с выносными конденсаторами XDC, обеспечивающий циркуляцию холодоносителя для доводчиков XDH. Если же Заказчик с самого начала ориентируется на чиллеры, то рекомендуется добавить еще один чиллер SBH 030 и также использовать кондиционеры-доводчики XDH. Чтобы «развязать» чиллерную воду и фреон 134, используемый кондиционерами XDH, применяются специальные гидравлические модули XDP (см. Рисунок 6).
Специалисты самого производителя — компании Emerson Network — предусмотрели только один вариант, основанный на развитии чиллерной системы, предложенной для стоек на 5 кВт. Они отмечают, что использование в системе Liebert XD фреона R134 исключает ввод воды в помещение ЦОД. В основу работы этой системы положено свойство жидкостей поглощать тепло при испарении. Жидкий холодоноситель, нагнетаемый насосом, испаряется в теплообменниках блоков охлаждения XDH, а затем поступает в модуль XDP, где вновь превращается в жидкость в результате процесса конденсации. Таким образом, компрессионный цикл, присутствующий в традиционных системах, исключается. Даже если случится утечка жидкости, экологически безвредный холодоноситель просто испарится, не причинив никакого вреда оборудованию.
Данная схема предполагает возможность поэтапного ввода оборудования: по мере увеличения мощности нагрузки устанавливаются дополнительные доводчики, которые подсоединяются к существующей системе трубопроводов при помощи гибких подводок и быстроразъемных соединений, что не требует остановки системы кондиционирования.
СПЕЦШКАФЫ
Как считает Александр Шапиро, начальник отдела инженерных систем «Корпорации ЮНИ», тепловыделение 18–20 кВт на шкаф — это примерно та граница, когда тепло можно отвести за разумную цену традиционными методами (с применением внутрирядных и/или подпотолочных доводчиков, выгораживания рядов и т. п.). При более высокой плотности энергопотребления выгоднее использовать закрытые серверные шкафы с локальными системами водяного охлаждения. Желание применить для отвода тепла от второй группы шкафов традиционные методы объяснимо, но, как предупреждает специалист «Корпорации ЮНИ», появление в зале новых энергоемких шкафов потребует монтажа дополнительных холодильных машин, изменения конфигурации выгородок, контроля за изменившейся «тепловой картиной». Проведение таких («грязных») работ в действующем ЦОДе не целесообразно. Поэтому в качестве энергоемких шкафов специалисты «Корпорации ЮНИ» предложили использовать закрытые серверные шкафы CoolLoop с отводом тепла водой производства Knuеrr в варианте с тремя модулями охлаждения (10 кВт каждый, N+1). Подобный вариант предусмотрели и некоторые другие проектировщики.
Минусы такого решения связаны с повышением стоимости проекта (CAPEX) и необходимостью заведения воды в серверный зал. Главный плюс — в отличной масштабируемости: установка новых шкафов не добавляет тепловой нагрузки в зале и не приводит к перераспределению тепла, а подключение шкафа к системе холодоснабжения Заказчик может выполнять своими силами. Кроме того, он имеет возможность путем добавления вентиляционного модуля отвести от шкафа еще 10 кВт тепла (всего 30 кВт при сохранении резервирования N+1) — фактически это резерв для роста. Наконец, как утверждает Александр Шапиро, с точки зрения энергосбережения (OPEX) данное решение является наиболее эффективным.
В проекте «Корпорации ЮНИ» шкафы CoolLoop предполагается установить в общем серверном зале с учетом принципа чередования горячих и холодного коридоров, чем гарантируется работоспособность шкафов при аварийном или технологическом открывании дверей. Причем общее кондиционирование воздуха в зоне энергоемких шкафов обеспечивается аналогично основной зоне серверного зала за одним исключением — запас холода составляет 20–30 кВт. Кондиционеры рекомендовано установить в отдельном помещении, смежном с серверным залом и залом размещения ИБП (см. Рисунок 7). Такая компоновка имеет ряд преимуществ: во-первых, тем самым разграничиваются зоны ответственности службы кондиционирования и ИТ-служб (сотрудникам службы кондиционирования нет необходимости заходить в серверный зал); во-вторых, из зоны размещения кондиционеров обеспечивается подача/забор воздуха как в серверный зал, так и в зал ИБП; в-третьих, сокращается число резервных кондиционеров (резерв общий).
ФРИКУЛИНГ И ЭНЕРГОЭФФЕКТИВНОСТЬ
Как и просил Заказчик, все проектировщики включили функцию фрикулинга в свои решения, но мало кто рассчитал энергетическую эффективность ее использования. Такой расчет провел Михаил Балкаров из APC by Schneider Electric. Выделив три режима работы системы охлаждения — с температурой гликолевого контура 22, 20 и 7°С (режим фрикулинга), — для каждого он указал ее потребление (в процентах от полезной нагрузки) и коэффициент энергетической эффективности (Energy Efficiency Ratio, EER), который определяется как отношение холодопроизводительности кондиционера к потребляемой им мощности. Для нагрузки в 600 кВт среднегодовое потребление предложенной АРС системы охлаждения оказалось равным 66 кВт с функцией фрикулинга и 116 кВт без таковой. Разница 50 кВт в год дает экономию 438 тыс. кВт*ч.
Объясняя высокую энергоэффективность предложенного решения, Михаил Балкаров отмечает, что в первую очередь эти показатели обусловлены выбором чиллеров с высоким EER и применением эффективных внутренних блоков — по его данным, внутрирядные модели кондиционеров в сочетании с изоляцией горячего коридора обеспечивают примерно двукратную экономию по сравнению с наилучшими фальшпольными вариантами и полуторакратную экономию по сравнению с решениями, где используется контейнеризация холодного коридора. Вклад же собственно фрикулинга вторичен — именно поэтому рабочая температура воды выбрана не самой высокой (всего 12°С).
По расчетам специалистов «Комплит», в условиях Московской области предложенное ими решение с функцией фрикулинга за год позволяет снизить расход электроэнергии примерно на 50%. Данная функция (в проекте «Комплит») активизируется при температуре около +7°С, при понижении температуры наружного воздуха вклад фрикулинга в холодопроизводительность будет возрастать. Полностью система выходит на режим экономии при температуре ниже -5°С.
Специалисты «Инженерного бюро ’’Хоссер‘‘» предложили расчет экономии, которую дает применение кондиционеров с функцией фрикулинга (модель ALD-702-GE) по сравнению с использованием устройств, не оснащенных такой функцией (модель ASD-802-A). Как и просил Заказчик, расчет привязан к Московскому региону (см. Рисунок 8).
Как отмечает Виктор Гаврилов, энергопотребление в летний период (при максимальной загрузке) у фреоновой системы ниже, чем у чиллерной, но при температуре менее 14°С, энергопотребление последней снижается, что обусловлено работой фрикулинга. Эта функция позволяет существенно повысить срок эксплуатации и надежность системы, так как в зимний период компрессоры практически не работают — в связи с этим ресурс работы чиллерных систем, как минимум, в полтора раза больше чем у фреоновых.
К преимуществам предложенных Заказчику чиллеров Emerson Виктор Гаврилов относит возможность их объединения в единую сеть управления и использования функции каскадной работы холодильных машин в режиме фрикулинга. Более того, разработанная компанией Emerson система Supersaver позволяет управлять температурой холодоносителя в соответствии с изменениями тепловой нагрузки, что увеличивает период времени, в течение которого возможно функционирование системы в этом режиме. По данным Emerson, при установке чиллеров на 330 кВт режим фрикулинга позволяет сэкономить 45% электроэнергии, каскадное включение — 5%, технология Supersaver — еще 16%, итого — 66%.
Но не все столь оптимистичны в отношении фрикулинга. Александр Шапиро напоминает, что в нашу страну культура использования фрикулинга в значительной мере принесена с Запада, между тем как потребительская стоимость этой опции во многом зависит от стоимости электроэнергии, а на сегодняшний день в России и Западной Европе цены серьезно различаются. «Опция фрикулинга ощутимо дорога, в России же достаточно часто ИТ-проекты планируются с дефицитом бюджета. Поэтому Заказчик вынужден выбирать: либо обеспечить планируемые технические показатели ЦОД путем простого решения (не думая о проблеме увеличения OPEX), либо «ломать копья» в попытке доказать целесообразность фрикулинга, соглашаясь на снижение параметров ЦОД. В большинстве случаев выбор делается в пользу первого варианта», — заключает он.
Среди предложенных Заказчику более полутора десятков решений одинаковых нет — даже те, что построены на аналогичных компонентах одного производителя, имеют свои особенности. Это говорит о том, что задачи, связанные с охлаждением, относятся к числу наиболее сложных, и типовые отработанные решения по сути отсутствуют. Тем не менее, среди представленных вариантов Заказчик наверняка сможет выбрать наиболее подходящий с учетом предпочтений в части CAPEX/OPEX и планов по дальнейшему развитию ЦОД.
Александр Барсков — ведущий редактор «Журнала сетевых решений/LAN»
[ http://www.osp.ru/lan/2010/05/13002554/]
Тематики
EN
Русско-английский словарь нормативно-технической терминологии > система охлаждения ЦОДа
-
15 data center cooling system
система охлаждения ЦОДа
-
[Интент]т
Система охлаждения для небольшого ЦОДаВымышленная компания (далее Заказчик) попросила предложить систему охлаждения для строящегося коммерческого ЦОДа. В основном зале планируется установить:
- 60 стоек с энергопотреблением по 5 кВт (всего 300 кВт) — все элементы, необходимые для обеспечения требуемой температуры и влажности, должны быть установлены сразу;
- 16 стоек с энергопотреблением по 20 кВт (всего 320 кВт) — это оборудование будет устанавливаться постепенно (по мере необходимости), и средства охлаждения планируется развертывать и задействовать по мере подключения и загрузки стоек.
Заказчик заявил, что предпочтение будет отдано энергоэффективным решениям, поэтому желательно задействовать «зеленые» технологии, в первую очередь фрикулинг (естественное охлаждение наружным воздухом — free cooling), и предоставить расчет окупаемости соответствующей опции (с учетом того, что объект находится в Московской области). Планируемый уровень резервирования — N+1, но возможны и другие варианты — при наличии должного обоснования. Кроме того, Заказчик попросил изначально предусмотреть средства мониторинга энергопотребления с целью оптимизации расхода электроэнергии.
ЧТО ПРОГЛЯДЕЛ ЗАКАЗЧИК
В сформулированной в столь общем виде задаче не учтен ряд существенных деталей, на которые не преминули указать эксперты. Так, Дмитрий Чагаров, руководитель направления вентиляции и кондиционирования компании «Утилекс», заметил, что в задании ничего не сказано о характере нагрузки. Он, как и остальные проектировщики, исходил из предположения, что воздушный поток направлен с фронтальной части стоек назад, но, как известно, некоторые коммутаторы спроектированы для охлаждения сбоку — для них придется использовать специальные боковые блоки распределения воздушного потока.
В задании сказано о размещении всех стоек (5 и 20 кВт) в основном зале, однако некоторые эксперты настоятельно рекомендуют выделить отдельную зону для высоконагруженных стоек. По словам Александра Мартынюка, генерального директора консалтинговой компании «Ди Си квадрат», «это будет правильнее и с точки зрения проектирования, и с позиций удобства эксплуатации». Такое выделение (изоляция осуществляется при помощи выгородок) предусмотрено, например, в проекте компании «Комплит»: Владислав Яковенко, начальник отдела инфраструктурных проектов, уверен, что подобное решение, во-первых, облегчит обслуживание оборудования, а во-вторых, позволит использовать различные технологии холодоснабжения в разных зонах. Впрочем, большинство проектировщиков не испытали особых проблем при решении задачи по отводу тепла от стоек 5 и 20 кВт, установленных в одном помещении.
Один из первых вопросов, с которым Заказчик обратился к будущему партнеру, был связан с фальшполом: «Необходим ли он вообще, и если нужен, то какой высоты?». Александр Мартынюк указал, что грамотный расчет высоты фальшпола возможен только при условии предоставления дополнительной информации: о типе стоек (как в них будет организована подача охлаждающего воздуха?); об организации кабельной проводки (под полом или потолком? сколько кабелей? какого диаметра?); об особенностях помещения (высота потолков, соотношение длин стен, наличие выступов и опорных колонн) и т. д. Он советует выполнить температурно-климатическое моделирование помещения с учетом вышеперечисленных параметров и, если потребуется, уточняющих данных. В результате можно будет подготовить рекомендации в отношении оптимальной высоты фальшпола, а также дать оценку целесообразности размещения в одном зале стоек с разной энергонагруженностью.
Что ж, мы действительно не предоставили всей информации, необходимой для подобного моделирования, и проектировщикам пришлось довольствоваться скудными исходными данными. И все же, надеемся, представленные решения окажутся интересными и полезными широкому кругу заказчиков. Им останется только «подогнать» решения «под себя».
«КЛАССИКА» ОХЛАЖДЕНИЯ
Для снятия тепла со стоек при нагрузке 5 кВт большинство проектировщиков предложили самый распространенный на сегодня вариант — установку шкафных прецизионных кондиционеров, подающих холодный воздух в пространство под фальшполом. Подвод воздуха к оборудованию осуществляется в зоне холодных коридоров через перфорированные плиты или воздухораспределительные решетки фальшпола, а отвод воздуха от кондиционеров — из зоны горячих коридоров через верхнюю часть зала или пространство навесного потолка (см. Рисунок 1). Такая схема может быть реализована только при наличии фальшпола достаточной высоты
В вопросе выбора места для установки шкафных кондиционеров единство мнений отсутствует, многие указали на возможность их размещения как в серверном зале, так и в соседнем помещении. Алексей Карпинский, директор департамента инженерных систем компании «Астерос», уверен, что для низконагруженных стоек лучшим решением будет вынос «тяжелой инженерии» за пределы серверного зала (см. Рисунок 2) — тогда для обслуживания кондиционеров внутрь зала входить не придется. «Это повышает надежность работы оборудования, ведь, как известно, наиболее часто оно выходит из строя вследствие человеческого фактора, — объясняет он. — Причем помещение с кондиционерами может быть совершенно не связанным с машинным залом и располагаться, например, через коридор или на другом этаже».
Если стойки мощностью 5 и 20 кВт устанавливаются в одном помещении, Александр Ласый, заместитель директора департамента интеллектуальных зданий компании «Крок», рекомендует организовать физическое разделение горячих и холодных коридоров. В ситуации, когда для высоконагруженных стоек выделяется отдельное помещение, подобного разделения для стоек на 5 кВт не требуется.
ФРЕОН ИЛИ ВОДА
Шкафные кондиционеры на рынке представлены как во фреоновом исполнении, так и в вариантах с водяным охлаждением. При использовании фреоновых кондиционеров на крыше или прилегающей территории необходимо предусмотреть место для установки конденсаторных блоков, а при водяном охлаждении потребуется место под насосную и водоохлаждающие машины (чиллеры).
Специалисты компании «АМДтехнологии» представили Заказчику сравнение различных вариантов фреоновых и водяных систем кондиционирования. Наиболее бюджетный вариант предусматривает установку обычных шкафных фреоновых кондиционеров HPM M50 UA с подачей холодного воздуха под фальшпол. Примерно на четверть дороже обойдутся модели кондиционеров с цифровым спиральным компрессором и электронным терморасширительным вентилем (HPM D50 UA, Digital). Мощность кондиционеров регулируется в зависимости от температуры в помещении, это позволяет добиться 12-процентной экономии электроэнергии, а также уменьшить количество пусков и останова компрессора, что повышает срок службы системы. В случае отсутствия на объекте фальшпола (или его недостаточной высоты) предложен более дорогой по начальным вложениям, но экономичный в эксплуатации вариант с внутрирядными фреоновыми кондиционерами.
Как показывает представленный анализ, фреоновые кондиционеры менее эффективны по сравнению с системой водяного охлаждения. При этом, о чем напоминает Виктор Гаврилов, технический директор «АМДтехнологий», фреоновая система имеет ограничение по длине трубопровода и перепаду высот между внутренними и наружными блоками (эквивалентная общая длина трассы фреонопровода не должна превышать 50 м, а рекомендуемый перепад по высоте — 30 м); у водяной системы таких ограничений нет, поэтому ее можно приспособить к любым особенностям здания и прилегающей территории. Важно также помнить, что при применении фреоновой системы перспективы развития (увеличение плотности энергопотребления) существенно ограничены, тогда как при закладке необходимой инфраструктуры подачи холодной воды к стойкам (трубопроводы, насосы, арматура) нагрузку на стойку можно впоследствии увеличивать до 30 кВт и выше, не прибегая к капитальной реконструкции серверного помещения.
К факторам, которые могут определить выбор в пользу фреоновых кондиционеров, можно отнести отсутствие места на улице (например из-за невозможности обеспечить пожарный проезд) или на кровле (вследствие особенностей конструкции или ее недостаточной несущей способности) для монтажа моноблочных чиллеров наружной установки. При этом большинство экспертов единодушно высказывают мнение, что при указанных мощностях решение на воде экономически целесообразнее и проще в реализации. Кроме того, при использовании воды и/или этиленгликолевой смеси в качестве холодоносителя можно задействовать типовые функции фрикулинга в чиллерах.
Впрочем, функции фрикулинга возможно задействовать и во фреоновых кондиционерах. Такие варианты указаны в предложениях компаний RC Group и «Инженерное бюро ’’Хоссер‘‘», где используются фреоновые кондиционеры со встроенными конденсаторами водяного охлаждения и внешними теплообменниками с функцией фрикулинга (сухие градирни). Специалисты RC Group сразу отказались от варианта с установкой кондиционеров с выносными конденсаторами воздушного охлаждения, поскольку он не соответствует требованию Заказчика задействовать режим фрикулинга. Помимо уже названного они предложили решение на основе кондиционеров, работающих на охлажденной воде. Интересно отметить, что и проектировшики «Инженерного бюро ’’Хоссер‘‘» разработали второй вариант на воде.
Если компания «АМДтехнологии» предложила для стоек на 5 кВт решение на базе внутрирядных кондиционеров только как один из возможных вариантов, то APC by Schneider Electric (см. Рисунок 3), а также один из партнеров этого производителя, компания «Утилекс», отдают предпочтение кондиционерам, устанавливаемым в ряды стоек. В обоих решениях предложено изолировать горячий коридор с помощью системы HACS (см. Рисунок 4). «Для эффективного охлаждения необходимо снизить потери при транспортировке холодного воздуха, поэтому системы кондиционирования лучше установить рядом с нагрузкой. Размещение кондиционеров в отдельном помещении — такая модель применялась в советских вычислительных центрах — в данном случае менее эффективно», — считает Дмитрий Чагаров. В случае использования внутрирядных кондиционеров фальшпол уже не является необходимостью, хотя в проекте «Утилекса» он предусмотрен — для прокладки трасс холодоснабжения, электропитания и СКС.
Михаил Балкаров, системный инженер компании APC by Schneider Electric, отмечает, что при отсутствии фальшпола трубы можно проложить либо в штробах, либо сверху, предусмотрев дополнительный уровень защиты в виде лотков или коробов для контролируемого слива возможных протечек. Если же фальшпол предусматривается, то его рекомендуемая высота составляет не менее 40 см — из соображений удобства прокладки труб.
ЧИЛЛЕР И ЕГО «ОБВЯЗКА»
В большинстве проектов предусматривается установка внешнего чиллера и организация двухконтурной системы холодоснабжения. Во внешнем контуре, связывающем чиллеры и промежуточные теплообменники, холодоносителем служит водный раствор этиленгликоля, а во внутреннем — между теплообменниками и кондиционерами (шкафными и/или внутрирядными) — циркулирует уже чистая вода. Необходимость использования этиленгликоля во внешнем контуре легко объяснима — это вещество зимой не замерзает. У Заказчика возник резонный вопрос: зачем нужен второй контур, и почему нельзя организовать всего один — ведь в этом случае КПД будет выше?
По словам Владислава Яковенко, двухконтурная схема позволяет снизить объем дорогого холодоносителя (этиленгликоля) и является более экологичной. Этиленгликоль — ядовитое, химически активное вещество, и если протечка случится внутри помещения ЦОД, ликвидация последствий такой аварии станет серьезной проблемой для службы эксплуатации. Следует также учитывать, что при содержании гликоля в растворе холодоносителя на уровне 40% потребуются более мощные насосы (из-за высокой вязкости раствора), поэтому потребление энергии и, соответственно, эксплуатационные расходы увеличатся. Наконец, требование к монтажу системы без гликоля гораздо ниже, а эксплуатировать ее проще.
При использовании чиллеров функцию «бесперебойного охлаждения» реализовать довольно просто: при возникновении перебоев с подачей электроэнергии система способна обеспечить охлаждение серверной до запуска дизеля или корректного выключения серверов за счет холодной воды, запасенной в баках-аккумуляторах. Как отмечает Виктор Гаврилов, реализация подобной схемы позволяет удержать изменение градиента температуры в допустимых пределах (ведущие производители серверов требуют, чтобы скорость изменения температуры составляла не более 50С/час, а увеличение этой скорости может привести к поломке серверного оборудования, что особенно часто происходит при возобновлении охлаждения в результате резкого снижения температуры). При пропадании электропитания для поддержания работы чиллерной системы кондиционирования необходимо только обеспечить функционирование перекачивающих насосов и вентиляторов кондиционеров — потребление от ИБП сводится к минимуму. Для классических фреоновых систем необходимо обеспечить питанием весь комплекс целиком (при этом все компрессоры должны быть оснащены функцией «мягкого запуска»), поэтому требуются кондиционеры и ИБП более дорогой комплектации.
КОГДА РАСТЕТ ПЛОТНОСТЬ
Большинство предложенных Заказчику решений для охлаждения высоконагруженных стоек (20 кВт) предусматривает использование внутрирядных кондиционеров. Как полагает Александр Ласый, основная сложность при отводе от стойки 20 кВт тепла с помощью классической схемы охлаждения, базирующейся на шкафных кондиционерах, связана с подачей охлажденного воздуха из-под фальшпольного пространства и доставкой его до тепловыделяющего оборудования. «Значительные перепады давления на перфорированных решетках фальшпола и высокие скорости движения воздуха создают неравномерный воздушный поток в зоне перед стойками даже при разделении горячих и холодных коридоров, — отмечает он. — Это приводит к неравномерному охлаждению стоек и их перегреву. В случае переменной загрузки стоек возникает необходимость перенастраивать систему воздухораспределения через фальшпол, что довольно затруднительно».
Впрочем, некоторые компании «рискнули» предложить для стоек на 20 кВт систему, основанную на тех же принципах, что применяются для стоек на 5кВт, — подачей холодного воздуха под фальшпол. По словам Сергея Бондарева, руководителя отдела продаж «Вайсс Климатехник», его опыт показывает, что установка дополнительных решеток вокруг стойки для увеличения площади сечения, через которое поступает холодный воздух (а значит и его объема), позволяет снимать тепловую нагрузку в 20 кВт. Решение этой компании отличается от других проектов реализацией фрикулинга: конструкция кондиционеров Deltaclima FC производства Weiss Klimatechnik позволяет подводить к ним холодный воздух прямо с улицы.
Интересное решение предложила компания «ЮниКонд», партнер итальянской Uniflair: классическая система охлаждения через фальшпол дополняется оборудованными вентиляторами модулями «активного пола», которые устанавливаются вместо обычных плиток фальшпола. По утверждению специалистов «ЮниКонд», такие модули позволяют существенно увеличить объемы регулируемых потоков воздуха: до 4500 м3/час вместо 800–1000 м3/час от обычной решетки 600х600 мм. Они также отмечают, что просто установить вентилятор в подпольном пространстве недостаточно для обеспечения гарантированного охлаждения серверных стоек. Важно правильно организовать воздушный поток как по давлению, так и по направлению воздуха, чтобы обеспечить подачу воздуха не только в верхнюю часть стойки, но и, в случае необходимости, в ее нижнюю часть. Для этого панель «активного пола» помимо вентилятора комплектуется процессором, датчиками температуры и поворотными ламелями (см. Рисунок 5). Применение модулей «активного пола» без дополнительной изоляции потоков воздуха позволяет увеличить мощность стойки до 15 кВт, а при герметизации холодного коридора (в «ЮниКонд» это решение называют «холодным бассейном») — до 25 кВт.
Как уже говорилось, большинство проектировщиков рекомендовали для стоек на 20 кВт системы с внутрирядным охлаждением и изоляцию потоков горячего и холодного воздуха. Как отмечает Александр Ласый, использование высоконагруженных стоек в сочетании с внутрирядными кондиционерами позволяет увеличить плотность размещения серверного оборудования и сократить пространство (коридоры, проходы) для его обслуживания. Взаимное расположение серверных стоек и кондиционеров в этом случае сводит к минимуму неравномерность распределения холода в аварийной ситуации.
Выбор различных вариантов закрытой архитектуры циркуляции воздуха предложила компания «Астерос»: от изоляции холодного (решение от Knuеrr и Emerson) или горячего коридора (APC) до изоляции воздушных потоков на уровне стойки (Rittal, APC, Emerson, Knuеrr). Причем, как отмечается в проекте, 16 высоконагруженных стоек можно разместить и в отдельном помещении, и в общем зале. В качестве вариантов кондиционерного оборудования специалисты «Астерос» рассмотрели возможность установки внутрирядных кондиционеров APC InRowRP/RD (с изоляцией горячего коридора), Emerson CR040RC и закрытых решений на базе оборудования Knuеrr CoolLoop — во всех этих случаях обеспечивается резервирование на уровне ряда по схеме N+1. Еще один вариант — рядные кондиционеры LCP компании Rittal, состоящие из трех охлаждающих модулей, каждый из которых можно заменить в «горячем» режиме. В полной мере доказав свою «вендоронезависимость», интеграторы «Астерос» все же отметили, что при использовании монобрендового решения, например на базе продуктов Emerson, все элементы могут быть объединены в единую локальную сеть, что позволит оптимизировать работу системы и снизить расход энергии.
Как полагают в «Астерос», размещать трубопроводы в подпотолочной зоне нежелательно, поскольку при наличии подвесного потолка обнаружить и предотвратить протечку и образование конденсата очень сложно. Поэтому они рекомендуют обустроить фальшпол высотой до 300 мм — этого достаточно для прокладки кабельной продукции и трубопроводов холодоснабжения. Так же как и в основном полу, здесь необходимо предусмотреть средства для сбора жидкости при возникновении аварийных ситуаций (гидроизоляция, приямки, разуклонка и т. д.).
Как и шкафные кондиционеры, внутрирядные доводчики выпускаются не только в водяном, но и во фреоновом исполнении. Например, новинка компании RC Group — внутрирядные системы охлаждения Coolside — поставляется в следующих вариантах: с фреоновыми внутренними блоками, с внутренними блоками на охлажденной воде, с одним наружным и одним внутренним фреоновым блоком, а также с одним наружным и несколькими внутренними фреоновыми блоками. Учитывая пожелание Заказчика относительно энергосбережения, для данного проекта выбраны системы Coolside, работающие на охлажденной воде, получаемой от чиллера. Число чиллеров, установленных на первом этапе проекта, придется вдвое увеличить.
Для высокоплотных стоек компания «АМДтехнологии» разработала несколько вариантов решений — в зависимости от концепции, принятой для стоек на 5 кВт. Если Заказчик выберет бюджетный вариант (фреоновые кондиционеры), то в стойках на 20 кВт предлагается установить рядные кондиционеры-доводчики XDH, а в качестве холодильной машины — чиллер внутренней установки с выносными конденсаторами XDC, обеспечивающий циркуляцию холодоносителя для доводчиков XDH. Если же Заказчик с самого начала ориентируется на чиллеры, то рекомендуется добавить еще один чиллер SBH 030 и также использовать кондиционеры-доводчики XDH. Чтобы «развязать» чиллерную воду и фреон 134, используемый кондиционерами XDH, применяются специальные гидравлические модули XDP (см. Рисунок 6).
Специалисты самого производителя — компании Emerson Network — предусмотрели только один вариант, основанный на развитии чиллерной системы, предложенной для стоек на 5 кВт. Они отмечают, что использование в системе Liebert XD фреона R134 исключает ввод воды в помещение ЦОД. В основу работы этой системы положено свойство жидкостей поглощать тепло при испарении. Жидкий холодоноситель, нагнетаемый насосом, испаряется в теплообменниках блоков охлаждения XDH, а затем поступает в модуль XDP, где вновь превращается в жидкость в результате процесса конденсации. Таким образом, компрессионный цикл, присутствующий в традиционных системах, исключается. Даже если случится утечка жидкости, экологически безвредный холодоноситель просто испарится, не причинив никакого вреда оборудованию.
Данная схема предполагает возможность поэтапного ввода оборудования: по мере увеличения мощности нагрузки устанавливаются дополнительные доводчики, которые подсоединяются к существующей системе трубопроводов при помощи гибких подводок и быстроразъемных соединений, что не требует остановки системы кондиционирования.
СПЕЦШКАФЫ
Как считает Александр Шапиро, начальник отдела инженерных систем «Корпорации ЮНИ», тепловыделение 18–20 кВт на шкаф — это примерно та граница, когда тепло можно отвести за разумную цену традиционными методами (с применением внутрирядных и/или подпотолочных доводчиков, выгораживания рядов и т. п.). При более высокой плотности энергопотребления выгоднее использовать закрытые серверные шкафы с локальными системами водяного охлаждения. Желание применить для отвода тепла от второй группы шкафов традиционные методы объяснимо, но, как предупреждает специалист «Корпорации ЮНИ», появление в зале новых энергоемких шкафов потребует монтажа дополнительных холодильных машин, изменения конфигурации выгородок, контроля за изменившейся «тепловой картиной». Проведение таких («грязных») работ в действующем ЦОДе не целесообразно. Поэтому в качестве энергоемких шкафов специалисты «Корпорации ЮНИ» предложили использовать закрытые серверные шкафы CoolLoop с отводом тепла водой производства Knuеrr в варианте с тремя модулями охлаждения (10 кВт каждый, N+1). Подобный вариант предусмотрели и некоторые другие проектировщики.
Минусы такого решения связаны с повышением стоимости проекта (CAPEX) и необходимостью заведения воды в серверный зал. Главный плюс — в отличной масштабируемости: установка новых шкафов не добавляет тепловой нагрузки в зале и не приводит к перераспределению тепла, а подключение шкафа к системе холодоснабжения Заказчик может выполнять своими силами. Кроме того, он имеет возможность путем добавления вентиляционного модуля отвести от шкафа еще 10 кВт тепла (всего 30 кВт при сохранении резервирования N+1) — фактически это резерв для роста. Наконец, как утверждает Александр Шапиро, с точки зрения энергосбережения (OPEX) данное решение является наиболее эффективным.
В проекте «Корпорации ЮНИ» шкафы CoolLoop предполагается установить в общем серверном зале с учетом принципа чередования горячих и холодного коридоров, чем гарантируется работоспособность шкафов при аварийном или технологическом открывании дверей. Причем общее кондиционирование воздуха в зоне энергоемких шкафов обеспечивается аналогично основной зоне серверного зала за одним исключением — запас холода составляет 20–30 кВт. Кондиционеры рекомендовано установить в отдельном помещении, смежном с серверным залом и залом размещения ИБП (см. Рисунок 7). Такая компоновка имеет ряд преимуществ: во-первых, тем самым разграничиваются зоны ответственности службы кондиционирования и ИТ-служб (сотрудникам службы кондиционирования нет необходимости заходить в серверный зал); во-вторых, из зоны размещения кондиционеров обеспечивается подача/забор воздуха как в серверный зал, так и в зал ИБП; в-третьих, сокращается число резервных кондиционеров (резерв общий).
ФРИКУЛИНГ И ЭНЕРГОЭФФЕКТИВНОСТЬ
Как и просил Заказчик, все проектировщики включили функцию фрикулинга в свои решения, но мало кто рассчитал энергетическую эффективность ее использования. Такой расчет провел Михаил Балкаров из APC by Schneider Electric. Выделив три режима работы системы охлаждения — с температурой гликолевого контура 22, 20 и 7°С (режим фрикулинга), — для каждого он указал ее потребление (в процентах от полезной нагрузки) и коэффициент энергетической эффективности (Energy Efficiency Ratio, EER), который определяется как отношение холодопроизводительности кондиционера к потребляемой им мощности. Для нагрузки в 600 кВт среднегодовое потребление предложенной АРС системы охлаждения оказалось равным 66 кВт с функцией фрикулинга и 116 кВт без таковой. Разница 50 кВт в год дает экономию 438 тыс. кВт*ч.
Объясняя высокую энергоэффективность предложенного решения, Михаил Балкаров отмечает, что в первую очередь эти показатели обусловлены выбором чиллеров с высоким EER и применением эффективных внутренних блоков — по его данным, внутрирядные модели кондиционеров в сочетании с изоляцией горячего коридора обеспечивают примерно двукратную экономию по сравнению с наилучшими фальшпольными вариантами и полуторакратную экономию по сравнению с решениями, где используется контейнеризация холодного коридора. Вклад же собственно фрикулинга вторичен — именно поэтому рабочая температура воды выбрана не самой высокой (всего 12°С).
По расчетам специалистов «Комплит», в условиях Московской области предложенное ими решение с функцией фрикулинга за год позволяет снизить расход электроэнергии примерно на 50%. Данная функция (в проекте «Комплит») активизируется при температуре около +7°С, при понижении температуры наружного воздуха вклад фрикулинга в холодопроизводительность будет возрастать. Полностью система выходит на режим экономии при температуре ниже -5°С.
Специалисты «Инженерного бюро ’’Хоссер‘‘» предложили расчет экономии, которую дает применение кондиционеров с функцией фрикулинга (модель ALD-702-GE) по сравнению с использованием устройств, не оснащенных такой функцией (модель ASD-802-A). Как и просил Заказчик, расчет привязан к Московскому региону (см. Рисунок 8).
Как отмечает Виктор Гаврилов, энергопотребление в летний период (при максимальной загрузке) у фреоновой системы ниже, чем у чиллерной, но при температуре менее 14°С, энергопотребление последней снижается, что обусловлено работой фрикулинга. Эта функция позволяет существенно повысить срок эксплуатации и надежность системы, так как в зимний период компрессоры практически не работают — в связи с этим ресурс работы чиллерных систем, как минимум, в полтора раза больше чем у фреоновых.
К преимуществам предложенных Заказчику чиллеров Emerson Виктор Гаврилов относит возможность их объединения в единую сеть управления и использования функции каскадной работы холодильных машин в режиме фрикулинга. Более того, разработанная компанией Emerson система Supersaver позволяет управлять температурой холодоносителя в соответствии с изменениями тепловой нагрузки, что увеличивает период времени, в течение которого возможно функционирование системы в этом режиме. По данным Emerson, при установке чиллеров на 330 кВт режим фрикулинга позволяет сэкономить 45% электроэнергии, каскадное включение — 5%, технология Supersaver — еще 16%, итого — 66%.
Но не все столь оптимистичны в отношении фрикулинга. Александр Шапиро напоминает, что в нашу страну культура использования фрикулинга в значительной мере принесена с Запада, между тем как потребительская стоимость этой опции во многом зависит от стоимости электроэнергии, а на сегодняшний день в России и Западной Европе цены серьезно различаются. «Опция фрикулинга ощутимо дорога, в России же достаточно часто ИТ-проекты планируются с дефицитом бюджета. Поэтому Заказчик вынужден выбирать: либо обеспечить планируемые технические показатели ЦОД путем простого решения (не думая о проблеме увеличения OPEX), либо «ломать копья» в попытке доказать целесообразность фрикулинга, соглашаясь на снижение параметров ЦОД. В большинстве случаев выбор делается в пользу первого варианта», — заключает он.
Среди предложенных Заказчику более полутора десятков решений одинаковых нет — даже те, что построены на аналогичных компонентах одного производителя, имеют свои особенности. Это говорит о том, что задачи, связанные с охлаждением, относятся к числу наиболее сложных, и типовые отработанные решения по сути отсутствуют. Тем не менее, среди представленных вариантов Заказчик наверняка сможет выбрать наиболее подходящий с учетом предпочтений в части CAPEX/OPEX и планов по дальнейшему развитию ЦОД.
Александр Барсков — ведущий редактор «Журнала сетевых решений/LAN»
[ http://www.osp.ru/lan/2010/05/13002554/]
Тематики
EN
Англо-русский словарь нормативно-технической терминологии > data center cooling system
-
16 gross
[grəus] 1. adj1) вели́кий, містки́й, об'є́мистий2) кру́пний, гру́бий ( про помел)3) товсти́й, огря́днийgross habit of body — огря́дність
4) бу́йний ( про рослинність)5) гру́бий, вульга́рний; брудни́й; непристо́йнийgross story — непристо́йний анекдо́т
6) гру́бий, про́сти́й ( про їжу)gross feeder — ненаже́ра
7) щі́льний, густи́й, згу́щений (про повітря, атмосферу)8) приту́плений; гру́бий ( про слух)9) гру́бий, очеви́днийgross blunder — гру́ба по́ми́лка
10) валови́й, бру́ттоgross receipt — валови́й дохі́д
gross weight — вага́ бру́тто
11) макроскопі́чний2. n1) ма́саby [in] the gross — о́птом, гурто́м
2) грос (12 дюжин, тж. small gross)great gross — 12 гро́сів
-
17 rough
[rʌf] 1. adj1) гру́бий2) нері́вний; шерша́вий; вибо́їстий ( про дорогу)3) неоте́саний; невві́чливий; неделіка́тнийrough usage — брута́льне пово́дження
a rough customer — гру́ба люди́на
4) патла́тий, кудла́тий5) різки́й, пори́вчастий ( про вітер)6) бурхли́вий, бу́йний ( про море)7) шумли́вий8) важки́й, тяжки́йrough labour — важка́ фізи́чна пра́ця
9) суво́рий, важки́й ( про життя)rough luck розм. — гірка́ до́ля; невда́ча, невезі́ння
it is rough on him — він не заслужи́в тако́ї гірко́ї до́лі
to have a rough time — терпі́ти зли́дні (пога́не ста́влення)
10) терпки́й11) необро́блений, неопрацьо́ваний; чорнови́йrough copy — черне́тка
rough draft — ескі́з, на́черк
12) прибли́знийrough estimate — прибли́зна оці́нка
••2. advto take over a rough road амер. — 1) (по)ста́вити в скрутне́ стано́вище 2) дава́ти прочуха́на
брута́льно, гру́бо тощо3. nto treat rough — суво́ро (брута́льно) пово́дитися ( з кимсь)
1) нері́вність ( місцевості)2) ( the rough) незакі́нченість, неопрацьо́ваністьin the rough — 1) у незакі́нченому ви́гляді 2) прибли́зно
3) чорнови́й на́черк4) ( the rough) неприє́мний бік; складни́й пері́од5) бешке́тник; грубія́н; хуліга́н6) спорт. нері́вне по́ле ( в гольфі)4. v1) роби́ти гру́бим (шерша́вим)2) підко́вувати на го́стрі шипи́3) об'їжджа́ти ( коня)4) припуска́тися гру́бості (особл. у футболі)5) куйо́вдити ( волосся)•- rough up••to rough it — обхо́дитися без звича́йних виго́д, терпі́ти неста́тки
-
18 play
1. n1) гра; розвага; забава; манера гри2) спорт. комбінація; боротьба, бій3) азартна гра4) жарт5) п'єса, вистава, спектакль6) володіння, уміння користуватися (зброєю тощо)7) рух8) свобода, воля, простір9) дія, діяльністьto bring into play — приводити в дію, надавати руху
11) тех. зазор; люфт; вільний хід13) діал. страйк; припинення роботи14) діал. канікули; вільний від занять час15) плескітfair play — гра за правилами; чесна гра; справедливість
foul play — нечесна гра; шахрайство, злочин
grandstand play — виступ, розрахований на ефект
play of words — базікання, фразерство
to make play — розм. діяти
2. v1) грати (ся), розважатися, пустувати; веселитися2) грати в азартні ігри3) жартувати4) фліртувати5) розм. розігрувати6) брати участь у грі; грати в щосьto play smb. for championship — грати з кимсь на звання чемпіона
7) робити хід (кидок)8) відбивати м'яч; подавати м'яч9) прикидатися, придурюватися10) робити, діятиto play false — зрадити, покинути в біді
11) грати на перегонах; бути гравцем13) ставити п'єсу; демонструвати фільм14) іти на екрані15) пурхати, гасати; танцювати16) бити (про струмінь)17) спрямовувати18) обстрілювати (on, upon)19) приводити в дію, запускати20) тех. мати люфт21) діал. страйкувати22) переливатися, мигтіти, грати23) приймати в гру24) підходити для гриplay around — розм. заводити любовну інтрижку; фліртувати
play away — програти, розтринькати
play down — применшувати, лестити; зафавати
play out — втрачати силу; дофати до кінця; закінчити; розмотувати; видихатися
play over — спорт. переграти
play up — підтримувати; старатися грати якомога краще
to play a trick on smb. — ошукати когось
to play ball — амер. співробітничати
to play fast and loose — діяти безвідповідально, бути ненадійним
to play hard — амер. поводитися нечесно (жорстоко)
to play it cool — амер. не виявляти емоцій
to play the devil (havoc, hell, the mischief) — сіяти паніку; спустошувати
* * *I [plei] n1) гра; забава; cпopт. манера, стиль гри, граfoul play — гра з порушенням правил; cпopт. комбінація; cпopт. боротьба; бій
2) азартна гра3) жартout of mere play — жартома; каламбур
4) п'єса, драма; вистава, спектакль5) володіння, уміння поводитися (зі зброєю, інструментом)6) рух7) переливи, гра (нaпp., кольорів)8) свобода, воля, простір (нaпp., почуттям)9) дія, діяльністьin full play — у розпалі; дії, поведінка ( у якій-небудь ситуації); гра
fair play — гра за правилами;; чесна гра; чесність; справедливість
foul play — нечесна гра; підла поведінка; обман; шахрайство
10) тк.; sing хід, черга, подача ( у грі)11) дiaл. страйк; канікули, вільний від занять час12) залицяння; весільний танець ( у самців)13) програвання (диску, платівки)14) "преса", висвітлення в пресі15) тex. зазор; гра, люфт, вільний хід; хитання (частини механізму, приладу)16) aвт. бовтанкаII [plei] v1) грати, гратися, бавитися; зіграти жарт; розіграти; ( with) жартувати; дуріти; каламбурити, обігравати значення слова; поводитися легковажно; ( with) фліртувати; залицятися, заводити любовну інтрижку; aвcтpaл. розігрувати2) грати ( у що-небудь), брати участь у грі3) робити хід, кидок; ходити (картою, шашкою); cпopт. відбивати, подавати м'яч; використовувати у грі, виставляти, заявляти ( гравця); вводити у гру ( гравця)4) прикидатися; чинити, діяти ( яким-небудь чином); нацьковувати один на одного; розглядати6) грати в азартні ігри; бути гравцем; грати на тоталізаторі або на перегонах ( to play horses); робити ставки, ставити; грати ( на біржі)7) виконувати ( музичний твір); грати; виконувати, грати роль (тж. to play a; part); зніматися ( у фільмі); брати участь, грати ( у виставі)8) грати ( на музичному інструменті); грати ( про музику або музичний інструмент); супроводжувати музикою9) давати виставу; виконувати п'єсу10) cл. гастролювати; refl, pass виконуватися; демонструвати ( фільм); іти (на екрані, у театрі); грати, працювати (про радіо, магнітофон)11) грати ( чим-небудь); вертіти ( що-небудь у руках)12) (on, upon) грати ( на чому-небудь), скористатися ( чим-небудь)13) порхати, носитися, танцювати; переливатися, грати; миготіти; тремтіти, тріпотіти14) бити ( про струмінь)15) (on, upon, over) направляти; стріляти16) приводити в дію, пускати ( play off)17) тex. мати люфт; хитатися18) дiaл. страйкувати; бути на канікулах20) cл. опікувати, захищати; співробітничати21) cпeц. поміщати, розміщати (статтю, фотографію) на певному місці (у газеті, журналі) -
19 гади
1. прил.1) просто́й, обыкнове́нный, ниче́м не примеча́тельныйгади күлмәк — просто́е пла́тье
гади генә авыл өе — са́мый обыкнове́нный дереве́нский дом
2) обы́чный, обы́денный; привы́чныйкөндәлек гади эш — каждодне́вная привы́чная рабо́та
гади күренеш — обы́чное (обы́денное) явле́ние
3) просто́й ( односоставный или несоставной); несло́жный, элемента́рный ( по составу)гади матдәләр — просты́е вещества́
4) просто́й, элемента́рный, несло́жный; нетру́дный ( для понимания или выполнения)гади эш — проста́я рабо́та
гади генә нәрсәләрне дә аңламый — не понима́ет элемента́рных веще́й
иң гади икътисади мөнәсәбәтләр — са́мые элемента́рные экономи́ческие отноше́ния
5) несло́жный ( по устройству), незамыслова́тый, незате́йливый; примити́вныйгади механизм — несло́жный ( примитивный) механи́зм
гади ысул — примити́вный спо́соб
6) просто́й; гру́бый ( по качеству)гади күн — проста́я ко́жа
гади сукно — гру́бое сукно́
гади (җеп) оек — просты́е чулки́
гади бәйләү — проста́я (чуло́чная) вя́зка
7) просто́й, и́скренний, бесхи́тростныйгади күз карашы — и́скренний взгляд
гади мөнәсәбәт — просто́е (и́скреннее) отноше́ние
8)а) просто́й ( не принадлежащий к привилегированным классам)гади халык — просто́й наро́д; простонаро́дье
гади крестьян кызы — дочь просто́го крестья́нина; проста́я крестья́нка
б) просто́й ( не относящийся к специалистам)гади укучы — просто́й чита́тель
гади тамашачы — просто́й зри́тель
9) обы́чный, рядово́й ( не из руководящих)оешманың гади әгъзасы — рядово́й член организа́ции
бригаданың гади эшчесе — рядово́й рабо́тник брига́ды
10) обыкнове́нный, зауря́дный; ордина́рный (челове́к)гади шагыйрьләр арасында — среди́ обыкнове́нных поэ́тов
2. нареч.гади район врачы — зауря́дный райо́нный врач
1) про́сто, есте́ственно; и́скреннеүзен гади тоту — вести́ себя́ про́сто (есте́ственно)
гади киенү — одева́ться про́сто
2) гру́богади эшләнгән — гру́бо срабо́танный
•- гади генә итеп
- гади генә
- гади җөмлә
- гади сан
- гади сөйләм
- гади хәбәр
- гади күз белән карау -
20 rude
[ruːd]adj1) гру́бий, брута́льний; обра́зливийto be rude to smb. — обра́зити кого́сь; говори́ти гру́бощі кому́сь
2) приміти́вний3) невві́чливий, неви́хований4) суво́рий, жорсто́кий; лю́тий5) гру́бо зро́блений6) про́сти́й, необро́блений, сири́й7) рапто́вий, різки́й ( про звук)8) міцни́й ( про здоров'я)
См. также в других словарях:
груздь — E и F сущ см. Приложение II гру/здя и груздя/ гру/здю и груздю/ груздь гру/здем и … Словарь ударений русского языка
безкозирний — а, е. Без козиря (про гру в карти) … Український тлумачний словник
піцикато — 1) присл. Щипком, торкаючи струни пальцями (про гру на смичкових музичних інструментах). 2) у знач. ім., невідм., с. Музика смичкових інструментів, коли струн торкаються щипком … Український тлумачний словник
піццикато — 1 прислівник щипком, доторкуючись до струн пальцями про гру на смичкових музичних інструментах незмінювана словникова одиниця піццикато 2 іменник середнього роду фрагмент музичного твору, під час виконання якого струн торкаються щипком … Орфографічний словник української мови
система охлаждения ЦОДа — [Интент]т Система охлаждения для небольшого ЦОДа Александр Барсков Вымышленная компания (далее Заказчик) попросила предложить систему охлаждения для… … Справочник технического переводчика
_Приложение II — Читатели, познакомившиеся с содержанием Приложения I, могут задуматься над таким вопросом: а существуют ли у слов русского языка какие либо приметы, по которым можно было бы определять их принадлежность к тому или иному типу ударения (акцентному… … Словарь ударений русского языка
Грузинский коллаборационизм во Второй мировой войне — Грузинский легионер Грузинский коллаборационизм во Второй мировой войне военное, экономическое и политическое сотрудничество грузин (как граждан СССР так и некоторых эмигрантов) с немецкими властями в ходе Второй мировой войны. Содержание 1 … Википедия
Медведев, Дмитрий Анатольевич — Запрос «Медведев, Дмитрий» перенаправляется сюда; см. также другие значения. В Википедии есть статьи о других людях с такой фамилией, см. Медведев. Дмитрий Анатольевич Медведев … Википедия
Президентство Дмитрия Медведева — Дмитрий Анатольевич Медведев Президент Российской Федерации и Верховный Главнокомандующий Вооружёнными Силами Российской Федерации (2008 2012). 2 марта 2008 года победил на Президентских выборах 2008 года с результатом 70,28 % голосов … Википедия
Д. Медведев — Запрос «Дмитрий Медведев» перенаправляется сюда. Cм. также другие значения. Дмитрий Анатольевич Медведев … Википедия
Д. А. Медведев — Запрос «Дмитрий Медведев» перенаправляется сюда. Cм. также другие значения. Дмитрий Анатольевич Медведев … Википедия