кроме+того

present company excepted - за исключением присутствующих, о присутствующих не говорят

nobody excepted - все без исключения

he was excepted from the general pardon - он не подпал под всеобщую амнистию

those who passed the first test were excepted from the second - прошедшие первый тур освобождались от участия во втором

I except against his statement - я возражаю против его заявления

every day except Sunday - ежедневно кроме воскресенья

everyone is ready except me - уже все готовы, кроме меня

I take no orders except from my commander - я не принимаю приказов ни от кого, кроме своего командира

except as - кроме (тех) случаев (когда); за исключением (того)

except as may be agreed... - за исключением случаев, которые могут быть согласованы...

except as provided for in Article 12 - за исключением предусмотренного в статье 12

it shall remain in force except as amended by this Protocol - это остаётся в силе с учётом поправок, внесённых настоящим протоколом

except that - кроме того, что; за исключением того, что; если не считать того, что

the suit is good except that the sleeves are a little too long - костюм хорош, только /если не считать того, что/ рукава длинноваты

nowhere else except here - только здесь и больше нигде

he does nothing except laugh - он только и делает, что смеётся

except you repent - если не покаетесь

except the Lord build the house, they labour in vain that build it - если господь не созиждет дома, напрасно трудятся строящие его

It's too late to go, besides it starts raining. — Идти уже поздно, к тому же начинается дождь.

What do you know besides that? — Что вы знаете кроме этого?

The price is too high and moreover the house is not in a suitable position. — Цена слишком высока, и, кроме этого, дом неудобно расположен.

Local people would like a new road, moreover, there are good economic reasons for building one. — Местные жители хотели бы иметь дорогу, и, кроме того, для ее строительства были и экономические причины.

USAGE and CHOICE OF WORDS:

many more besides - ещё многие

nothing besides - только это и ничего больше

he is ignorant of politics, whatever he may know besides - сколь ни глубоки его знания, в политике он профан

it is too late. Besides, I am tired - слишком поздно, и, кроме того, я устал

I want nothing besides this - я ничего не хочу, кроме этого

besides the fact that... - не считая того, что...

others came to the picnic besides us - на пикник пришли не только мы, но и другие

трехфазный ИБП
-
[Интент]

Глава 7. Трехфазные ИБП

... ИБП большой мощности (начиная примерно с 10 кВА) как правило предназначены для подключения к трехфазной электрической сети. Диапазон мощностей 8-25 кВА – переходный. Для такой мощности делают чисто однофазные ИБП, чисто трехфазные ИБП и ИБП с трехфазным входом и однофазным выходом. Все ИБП, начиная примерно с 30 кВА имеют трехфазный вход и трехфазный выход. Трехфазные ИБП имеют и другое преимущество перед однофазными ИБП. Они эффективно разгружают нейтральный провод от гармоник тока и способствуют более безопасной и надежной работе больших компьютерных систем. Эти вопросы рассмотрены в разделе "Особенности трехфазных источников бесперебойного питания" главы 8. Трехфазные ИБП строятся обычно по схеме с двойным преобразованием энергии. Поэтому в этой главе мы будем рассматривать только эту схему, несмотря на то, что имеются трехфазные ИБП, построенные по схеме, похожей на ИБП, взаимодействующий с сетью.

Схема трехфазного ИБП с двойным преобразованием энергии приведена на рисунке 18.

Рис.18. Трехфазный ИБП с двойным преобразованием энергии

Как видно, этот ИБП не имеет почти никаких отличий на уровне блок-схемы, за исключением наличия трех фаз. Для того, чтобы увидеть отличия от однофазного ИБП с двойным преобразованием, нам придется (почти впервые в этой книге) несколько подробнее рассмотреть элементы ИБП. Мы будем проводить это рассмотрение, ориентируясь на традиционную технологию. В некоторых случаях будут отмечаться схемные особенности, позволяющие улучшить характеристики.

Выпрямитель

Слева на рис 18. – входная электрическая сеть. Она включает пять проводов: три фазных, нейтраль и землю. Между сетью и ИБП – предохранители (плавкие или автоматические). Они позволяют защитить сеть от аварии ИБП. Выпрямитель в этой схеме – регулируемый тиристорный. Управляющая им схема изменяет время (долю периода синусоиды), в течение которого тиристоры открыты, т.е. выпрямляют сетевое напряжение. Чем большая мощность нужна для работы ИБП, тем дольше открыты тиристоры. Если батарея ИБП заряжена, на выходе выпрямителя поддерживается стабилизированное напряжение постоянного тока, независимо от нвеличины напряжения в сети и мощности нагрузки. Если батарея требует зарядки, то выпрямитель регулирует напряжение так, чтобы в батарею тек ток заданной величины.

Такой выпрямитель называется шести-импульсным, потому, что за полный цикл трехфазной электрической сети он выпрямляет 6 полупериодов сингусоиды (по два в каждой из фаз). Поэтому в цепи постоянного тока возникает 6 импульсов тока (и напряжения) за каждый цикл трехфазной сети. Кроме того, во входной электрической сети также возникают 6 импульсов тока, которые могут вызвать гармонические искажения сетевого напряжения. Конденсатор в цепи постоянного тока служит для уменьшения пульсаций напряжения на аккумуляторах. Это нужно для полной зарядки батареи без протекания через аккумуляторы вредных импульсных токов. Иногда к конденсатору добавляется еще и дроссель, образующий совместно с конденсатором L-C фильтр.

Коммутационный дроссель ДР уменьшает импульсные токи, возникающие при открытии тиристоров и служит для уменьшения искажений, вносимых выпрямителем в электрическую сеть. Для еще большего снижения искажений, вносимых в сеть, особенно для ИБП большой мощности (более 80-150 кВА) часто применяют 12-импульсные выпрямители. Т.е. за каждый цикл трехфазной сети на входе и выходе выпрямителя возникают 12 импульсов тока. За счет удвоения числа импульсов тока, удается примерно вдвое уменьшить их амплитуду. Это полезно и для аккумуляторов и для электрической сети.

Двенадцати-импульсный выпрямитель фактически состоит из двух 6-импульсных выпрямителей. На вход второго выпрямителя (он изображен ниже на рис. 18) подается трехфазное напряжение, прошедшее через трансформатор, сдвигающий фазу на 30 градусов.

В настоящее время применяются также и другие схемы выпрямителей трехфазных ИБП. Например схема с пассивным (диодным) выпрямителем и преобразователем напряжения постоянного тока, применение которого позволяет приблизить потребляемый ток к синусоидальному.

Наиболее современным считается транзисторный выпрямитель, регулируемый высокочастотной схемой широтно-импульсной модуляции (ШИМ). Применение такого выпрямителя позволяет сделать ток потребления ИБП синусоидальным и совершенно отказаться от 12-импульсных выпрямителей с трансформатором.

Батарея

Для формирования батареи трехфазных ИБП (как и в однофазных ИБП) применяются герметичные свинцовые аккумуляторы. Обычно это самые распространенные модели аккумуляторов с расчетным сроком службы 5 лет. Иногда используются и более дорогие аккумуляторы с большими сроками службы. В некоторых трехфазных ИБП пользователю предлагается фиксированный набор батарей или батарейных шкафов, рассчитанных на различное время работы на автономном режиме. Покупая ИБП других фирм, пользователь может более или менее свободно выбирать батарею своего ИБП (включая ее емкость, тип и количество элементов). В некоторых случаях батарея устанавливается в корпус ИБП, но в большинстве случаев, особенно при большой мощности ИБП, она устанавливается в отдельном корпусе, а иногда и в отдельном помещении.

Инвертор

Как и в ИБП малой мощности, в трехфазных ИБП применяются транзисторные инверторы, управляемые схемой широтно-импульсной модуляции (ШИМ). Некоторые ИБП с трехфазным выходом имеют два инвертора. Их выходы подключены к трансформаторам, сдвигающим фазу выходных напряжений. Даже в случае применения относительно низкочастоной ШИМ, такая схема совместно с применением фильтра переменного тока, построенного на трансформаторе и конденсаторах, позволяет обеспечить очень малый коэффициент гармонических искажений на выходе ИБП (до 3% на линейной нагрузке). Применение двух инверторов увеличивает надежность ИБП, поскольку даже при выходе из строя силовых транзисторов одного из инверторов, другой инвертор обеспечит работу нагрузки, пусть даже при большем коэффициенте гармонических искажений.

В последнее время, по мере развития технологии силовых полупроводников, начали применяться более высокочастотные транзисторы. Частота ШИМ может составлять 4 и более кГц. Это позволяет уменьшить гармонические искажения выходного напряжения и отказаться от применения второго инвертора. В хороших ИБП существуют несколько уровней защиты инвертора от перегрузки. При небольших перегрузках инвертор может уменьшать выходное напряжение (пытаясь снизить ток, проходящий через силовые полупроводники). Если перегрузка очень велика (например нагрузка составляет более 125% номинальной), ИБП начинает отсчет времени работы в условиях перегрузки и через некоторое время (зависящее от степени перегрузки – от долей секунды до минут) переключается на работу через статический байпас. В случае большой перегрузки или короткого замыкания, переключение на статический байпас происходит сразу.

Некоторые современные высококлассные ИБП (с высокочакстотной ШИМ) имеют две цепи регулирования выходного напряжения. Первая из них осуществляет регулирование среднеквадратичного (действующего) значения напряжения, независимо для каждой из фаз. Вторая цепь измеряет мгновенные значения выходного напряжения и сравнивает их с хранящейся в памяти блока управления ИБП идеальной синусоидой. Если мгновенное значение напряжения отклонилось от соотвествующего "идеального" значения, то вырабатывается корректирующий импульс и форма синусоиды выходного напряжения исправляется. Наличие второй цепи обратной связи позволяет обеспечить малые искажения формы выходного напряжения даже при нелинейных нагрузках.

Статический байпас

Блок статического байпаса состоит из двух трехфазных (при трехфазном выходе) тиристорных переключателей: статического выключателя инвертора (на схеме – СВИ) и статического выключателя байпаса (СВБ). При нормальной работе ИБП (от сети или от батареи) статический выключатель инвертора замкнут, а статический выключатель байпаса разомкнут. Во время значительных перегрузок или выхода из строя инвертора замкнут статический переключатель байпаса, переключатель инвертора разомкнут. В момент переключения оба статических переключателя на очень короткое время замкнуты. Это позволяет обеспечить безразрывное питание нагрузки.

Каждая модель ИБП имеет свою логику управления и, соответственно, свой набор условий срабатывания статических переключателей. При покупке ИБП бывает полезно узнать эту логику и понять, насколько она соответствует вашей технологии работы. В частности хорошие ИБП сконструированы так, чтобы даже если байпас недоступен (т.е. отсутствует синхронизация инвертора и байпаса – см. главу 6) в любом случае постараться обеспечить электроснабжение нагрузки, пусть даже за счет уменьшения напряжения на выходе инвертора.

Статический байпас ИБП с трехфазным входом и однофазным выходом имеет особенность. Нагрузка, распределенная на входе ИБП по трем фазным проводам, на выходе имеет только два провода: один фазный и нейтральный. Статический байпас тоже конечно однофазный, и синхронизация напряжения инвертора производится относительно одной из фаз трехфазной сети (любой, по выбору пользователя). Вся цепь, подводящая напряжение к входу статического байпаса должна выдерживать втрое больший ток, чем входной кабель выпрямителя ИБП. В ряде случаев это может вызвать трудности с проводкой.

Сервисный байпас

Трехфазные ИБП имеют большую мощность и обычно устанавливаются в местах действительно критичных к электропитанию. Поэтому в случае выхода из строя какого-либо элемента ИБП или необходимости проведения регламентных работ (например замены батареи), в большинстве случае нельзя просто выключить ИБП или поставить на его место другой. Нужно в любой ситуации обеспечить электропитание нагрузки. Для этих ситуаций у всех трехфазных ИБП имеется сервисный байпас. Он представляет собой ручной переключатель (иногда как-то заблокированный, чтобы его нельзя было включить по ошибке), позволяющий переключить нагрузку на питание непосредственно от сети. У большинства ИБП для переключения на сервисный байпас существует специальная процедура (определенная последовательность действий), которая позволяет обеспечит непрерывность питания при переключениях.

Режимы работы трехфазного ИБП с двойным преобразованием

Трехфазный ИБП может работать на четырех режимах работы.

• При нормальной работе нагрузка питается по цепи выпрямитель-инвертор стабилизированным напряжением, отфильтрованным от импульсов и шумов за счет двойного преобразования энергии.
• Работа от батареи. На это режим ИБП переходит в случае, если напряжение на выходе ИБП становится таким маленьким, что выпрямитель оказывается не в состоянии питать инвертор требуемым током, или выпрямитель не может питать инвертор по другой причине, например из-за поломки. Продолжительность работы ИБП от батареи зависит от емкости и заряда батареи, а также от нагрузки ИБП.
• Когда какой-нибудь инвертор выходит из строя или испытывает перегрузку, ИБП безразрывно переходит на режим работы через статический байпас. Нагрузка питается просто от сети через вход статического байпаса, который может совпадать или не совпадать со входом выпрямителя ИБП.
• Если требуется обслуживание ИБП, например для замены батареи, то ИБП переключают на сервисный байпас. Нагрузка питается от сети, а все цепи ИБП, кроме входного выключателя сервисного байпаса и выходных выключателей отделены от сети и от нагрузки. Режим работы на сервисном байпасе не является обязательным для небольших однофазных ИБП с двойным преобразованием. Трехфазный ИБП без сервисного байпаса немыслим.

Надежность

Трехфазные ИБП обычно предназначаются для непрерывной круглосуточной работы. Работа нагрузки должна обеспечиваться практически при любых сбоях питания. Поэтому к надежности трехфазных ИБП предъявляются очень высокие требования. Вот некоторые приемы, с помощью которых производители трехфазных ИБП могут увеличивать надежность своей продукции. Применение разделительных трансформаторов на входе и/или выходе ИБП увеличивает устойчивость ИБП к скачкам напряжения и нагрузки. Входной дроссель не только обеспечивает "мягкий запуск", но и защищает ИБП (и, в конечном счете, нагрузку) от очень быстрых изменений (скачков) напряжения.

Обычно фирма выпускает целый ряд ИБП разной мощности. В двух или трех "соседних по мощности" ИБП этого ряда часто используются одни и те же полупроводники. Если это так, то менее мощный из этих двух или трех ИБП имеет запас по предельному току, и поэтому несколько более надежен. Некоторые трехфазные ИБП имеют повышенную надежность за счет резервирования каких-либо своих цепей. Так, например, могут резервироваться: схема управления (микропроцессор + платы "жесткой логики"), цепи управления силовыми полупроводниками и сами силовые полупроводники. Батарея, как часть ИБП тоже вносит свой вклад в надежность прибора. Если у ИБП имеется возможность гибкого выбора батареи, то можно выбрать более надежный вариант (батарея более известного производителя, с меньшим числом соединений).

Преобразователи частоты

Частота напряжения переменного тока в электрических сетях разных стран не обязательно одинакова. В большинстве стран (в том числе и в России) распространена частота 50 Гц. В некоторых странах (например в США) частота переменного напряжения равна 60 Гц. Если вы купили оборудование, рассчитанное на работу в американской электрической сети (110 В, 60 Гц), то вы должны каким-то образом приспособить к нему нашу электрическую сеть. Преобразование напряжения не является проблемой, для этого есть трансформаторы. Если оборудование оснащено импульсным блоком питания, то оно не чувствительно к частоте и его можно использовать в сети с частотой 50 Гц. Если же в состав оборудования входят синхронные электродвигатели или иное чувствительное к частоте оборудование, вам нужен преобразователь частоты. ИБП с двойным преобразованием энергии представляет собой почти готовый преобразователь частоты.

В самом деле, ведь выпрямитель этого ИБП может в принципе работать на одной частоте, а инвертор выдавать на своем выходе другую. Есть только одно принципиальное ограничение: невозможность синхронизации инвертора с линией статического байпаса из-за разных частот на входе и выходе. Это делает преобразователь частоты несколько менее надежным, чем сам по себе ИБП с двойным преобразованием. Другая особенность: преобразователь частоты должен иметь мощность, соответствующую максимальному возможному току нагрузки, включая все стартовые и аварийные забросы, ведь у преобразователя частоты нет статического байпаса, на который система могла бы переключиться при перегрузке.

Для изготовления преобразователя частоты из трехфазного ИБП нужно разорвать цепь синхронизации, убрать статический байпас (или, вернее, не заказывать его при поставке) и настроить инвертор ИБП на работу на частоте 60 Гц. Для большинства трехфазных ИБП это не представляет проблемы, и преобразователь частоты может быть заказан просто при поставке.

ИБП с горячим резервированием

В некоторых случаях надежности даже самых лучших ИБП недостаточно. Так бывает, когда сбои питания просто недопустимы из-за необратимых последствий или очень больших потерь. Обычно в таких случаях в технике применяют дублирование или многократное резервирование блоков, от которых зависит надежность системы. Есть такая возможность и для трехфазных источников бесперебойного питания. Даже если в конструкцию ИБП стандартно не заложено резервирование узлов, большинство трехфазных ИБП допускают резервирование на более высоком уровне. Резервируется целиком ИБП. Простейшим случаем резервирования ИБП является использование двух обычных серийных ИБП в схеме, в которой один ИБП подключен к входу байпаса другого ИБП.

Рис. 19а. Последовательное соединение двух трехфазных ИБП

На рисунке 19а приведена схема двух последовательно соединенным трехфазных ИБП. Для упрощения на рисунке приведена, так называемая, однолинейная схема, на которой трем проводам трехфазной системы переменного тока соответствует одна линия. Однолинейные схемы часто применяются в случаях, когда особенности трехфазной сети не накладывают отпечаток на свойства рассматриваемого прибора. Оба ИБП постоянно работают. Основной ИБП питает нагрузку, а вспомогательный ИБП работает на холостом ходу. В случае выхода из строя основного ИБП, нагрузка питается не от статического байпаса, как в обычном ИБП, а от вспомогательного ИБП. Только при выходе из строя второго ИБП, нагрузка переключается на работу от статического байпаса.

Система из двух последовательно соединенных ИБП может работать на шести основных режимах.

А. Нормальная работа. Выпрямители 1 и 2 питают инверторы 1 и 2 и, при необходимости заряжают батареи 1 и 2. Инвертор 1 подключен к нагрузке (статический выключатель инвертора 1 замкнут) и питает ее стабилизированным и защищенным от сбоев напряжением. Инвертор 2 работает на холостом ходу и готов "подхватить" нагрузку, если инвертор 1 выйдет из строя. Оба статических выключателя байпаса разомкнуты.

Для обычного ИБП с двойным преобразованием на режиме работы от сети допустим (при сохранении гарантированного питания) только один сбой в системе. Этим сбоем может быть либо выход из строя элемента ИБП (например инвертора) или сбой электрической сети.

Для двух последовательно соединенных ИБП с на этом режиме работы допустимы два сбоя в системе: выход из строя какого-либо элемента основного ИБП и сбой электрической сети. Даже при последовательном или одновременном возникновении двух сбоев питание нагрузки будет продолжаться от источника гарантированного питания.

Б. Работа от батареи 1. Выпрямитель 1 не может питать инвертор и батарею. Чаще всего это происходит из-за отключения напряжения в электрической сети, но причиной может быть и выход из строя выпрямителя. Состояние инвертора 2 в этом случае зависит от работы выпрямителя 2. Если выпрямитель 2 работает (например он подключен к другой электрической сети или он исправен, в отличие от выпрямителя 1), то инвертор 2 также может работать, но работать на холостом ходу, т.к. он "не знает", что с первым ИБП системы что-то случилось. После исчерпания заряда батареи 1, инвертор 1 отключится и система постарается найти другой источник электроснабжения нагрузки. Им, вероятно, окажется инвертор2. Тогда система перейдет к другому режиму работы.

Если в основном ИБП возникает еще одна неисправность, или батарея 1 полностью разряжается, то система переключается на работу от вспомогательного ИБП.

Таким образом даже при двух сбоях: неисправности основного ИБП и сбое сети нагрузка продолжает питаться от источника гарантированного питания.

В. Работа от инвертора 2. В этом случае инвертор 1 не работает (из-за выхода из строя или полного разряда батареи1). СВИ1 разомкнут, СВБ1 замкнут, СВИ2 замкнут и инвертор 2 питает нагрузку. Выпрямитель 2, если в сети есть напряжение, а сам выпрямитель исправен, питает инвертор и батарею.

На этом режиме работы допустим один сбой в системе: сбой электрической сети. При возникновении второго сбоя в системе (выходе из строя какого-либо элемента вспомогательного ИБП) электропитание нагрузки не прерывается, но нагрузка питается уже не от источника гарантированного питания, а через статический байпас, т.е. попросту от сети.

Г. Работа от батареи 2. Наиболее часто такая ситуация может возникнуть после отключения напряжения в сети и полного разряда батареи 1. Можно придумать и более экзотическую последовательность событий. Но в любом случае, инвертор 2 питает нагругку, питаясь, в свою очередь, от батареи. Инвертор 1 в этом случае отключен. Выпрямитель 1, скорее всего, тоже не работает (хотя он может работать, если он исправен и в сети есть напряжение).

После разряда батареи 2 система переключится на работу от статического байпаса (если в сети есть нормальное напряжение) или обесточит нагрузку.

Д. Работа через статический байпас. В случае выхода из строя обоих инверторов, статические переключатели СВИ1 и СВИ2 размыкаются, а статические переключатели СВБ1 и СВБ2 замыкаются. Нагрузка начинает питаться от электрической сети.

Переход системы к работе через статический байпас происходит при перегрузке системы, полном разряде всех батарей или в случае выхода из строя двух инверторов.

На этом режиме работы выпрямители, если они исправны, подзаряжают батареи. Инверторы не работают. Нагрузка питается через статический байпас.

Переключение системы на работу через статический байпас происходит без прерывания питания нагрузки: при необходимости переключения сначала замыкается тиристорный переключатель статического байпаса, и только затем размыкается тиристорный переключатель на выходе того инвертора, от которого нагрузка питалась перед переключением.

Е. Ручной (сервисный) байпас. Если ИБП вышел из строя, а ответственную нагрузку нельзя обесточить, то оба ИБП системы с соблюдением специальной процедуры (которая обеспечивает безразрыное переключение) переключают на ручной байпас. после этого можно производить ремонт ИБП.

Преимуществом рассмотренной системы с последовательным соединением двух ИБП является простота. Не нужны никакие дополнительные элементы, каждый из ИБП работает в своем штатном режиме. С точки зрения надежности, эта схема совсем не плоха:- в ней нет никакой лишней, (связанной с резервированием) электроники, соответственно и меньше узлов, которые могут выйти из строя.

Однако у такого соединения ИБП есть и недостатки. Вот некоторые из них.
 

1. Покупая такую систему, вы покупаете второй байпас (на нашей схеме – он первый – СВБ1), который, вообще говоря, не нужен – ведь все необходимые переключения могут быть произведены и без него.
2. Весь второй ИБП выполняет только одну функцию – резервирование. Он потребляет электроэнергию, работая на холостом ходу и вообще не делает ничего полезного (разумеется за исключением того времени, когда первый ИБП отказывается питать нагрузку). Некоторые производители предлагают "готовые" системы ИБП с горячим резервированием. Это значит, что вы покупаете систему, специально (еще на заводе) испытанную в режиме с горячим резервированием. Схема такой системы приведена на рис. 19б.

Рис.19б. Трехфазный ИБП с горячим резервированием

Принципиальных отличий от схемы с последовательным соединением ИБП немного.

1. У второго ИБП отсутствует байпас.
2. Для синхронизации между инвертором 2 и байпасом появляется специальный информационный кабель между ИБП (на рисунке не показан). Поэтому такой ИБП с горячим резервированием может работать на тех же шести режимах работы, что и система с последовательным подключением двух ИБП. Преимущество "готового" ИБП с резервированием, пожалуй только одно – он испытан на заводе-производителе в той же комплектации, в которой будет эксплуатироваться.

Для расмотренных схем с резервированием иногда применяют одно важное упрощение системы. Ведь можно отказаться от резервирования аккумуляторной батареи, сохранив резервирование всей силовой электроники. В этом случае оба ИБП будут работать от одной батареи (оба выпрямителя будут ее заряжать, а оба инвертора питаться от нее в случае сбоя электрической сети). Применение схемы с общей бетареей позволяет сэкономить значительную сумму – стоимость батареи.

Недостатков у схемы с общей батареей много:

1. Не все ИБП могут работать с общей батареей.
2. Батарея, как и другие элементы ИБП обладает конечной надежностью. Выход из строя одного аккумулятора или потеря контакта в одном соединении могут сделать всю системы ИБП с горячим резервирование бесполезной.
3. В случае выхода из строя одного выпрямителя, общая батарея может быть выведена из строя. Этот последний недостаток, на мой взгляд, является решающим для общей рекомендации – не применять схемы с общей батареей.

Параллельная работа нескольких ИБП

Как вы могли заметить, в случае горячего резервирования, ИБП резервируется не целиком. Байпас остается общим для обоих ИБП. Существует другая возможность резервирования на уровне ИБП – параллельная работа нескольких ИБП. Входы и выходы нескольких ИБП подключаются к общим входным и выходным шинам. Каждый ИБП сохраняет все свои элементы (иногда кроме сервисного байпаса). Поэтому выход из строя статического байпаса для такой системы просто мелкая неприятность.

На рисунке 20 приведена схема параллельной работы нескольких ИБП.

Рис.20. Параллельная работа ИБП

На рисунке приведена схема параллельной системы с раздельными сервисными байпасами. Схема система с общим байпасом вполне ясна и без чертежа. Ее особенностью является то, что для переключения системы в целом на сервисный байпас нужно управлять одним переключателем вместо нескольких. На рисунке предполагается, что между ИБП 1 и ИБП N Могут располагаться другие ИБП. Разные производителю (и для разных моделей) устанавливают свои максимальные количества параллеьно работающих ИБП. Насколько мне известно, эта величина изменяется от 2 до 8. Все ИБП параллельной системы работают на общую нагрузку. Суммарная мощность параллельной системы равна произведению мощности одного ИБП на количество ИБП в системе. Таким образом параллельная работа нескольких ИБП может применяться (и в основном применяется) не столько для увеличения надежности системы бесперебойного питания, но для увеличения ее мощности.

Рассмотрим режимы работы параллельной системы

Нормальная работа (работа от сети). Надежность

Когда в сети есть напряжение, достаточное для нормальной работы, выпрямители всех ИБП преобразуют переменное напряжение сети в постоянное, заряжая батареи и питая инверторы.

Инверторы, в свою очередь, преобразуют постоянное напряжение в переменное и питают нагрузку. Специальная управляющая электроника параллельной системы следит за равномерным распределением нагрузки между ИБП. В некоторых ИБП распределение нагрузки между ИБП производится без использования специальной параллельной электроники. Такие приборы выпускаются "готовыми к параллельной работе", и для использования их в параллельной системе достаточно установить плату синхронизации. Есть и ИБП, работающие параллельго без специальной электроники. В таком случае количество параллельно работающих ИБП – не более двух. В рассматриваемом режиме работы в системе допустимо несколько сбоев. Их количество зависит от числа ИБП в системе и действующей нагрузки.

Пусть в системе 3 ИБП мощностью по 100 кВА, а нагрузка равна 90 кВА. При таком соотношении числа ИБП и их мощностей в системе допустимы следующие сбои.

Сбой питания (исчезновение напряжения в сети)

Выход из строя любого из инверторов, скажем для определенности, инвертора 1. Нагрузка распределяется между двумя другими ИБП. Если в сети есть напряжение, все выпрямители системы работают.

Выход из строя инвертора 2. Нагрузка питается от инвертора 3, поскольку мощность, потребляемая нагрузкой меньше мощности одного ИБП. Если в сети есть напряжение, все выпрямители системы продолжают работать.

Выход из строя инвертора 3. Система переключается на работу через статический байпас. Нагрузка питается напрямую от сети. При наличии в сети нормального напряжения, все выпрямители работают и продолжают заряжать батареи. При любом последующем сбое (поломке статического байпаса или сбое сети) питание нагрузки прекращается. Для того, чтобы параллельная система допускала большое число сбоев, система должна быть сильно недогружена и должна включать большое число ИБП. Например, если нагрузка в приведенном выше примере будет составлять 250 кВА, то система допускает только один сбой: сбой сети или поломку инвертора. В отношении количества допустимых сбоев такая система эквивалентна одиночному ИБП. Это, кстати, не значит, что надежность такой параллельной системы будет такая же, как у одиночного ИБП. Она будет ниже, поскольку параллельная система намного сложнее одиночного ИБП и (при почти предельной нагрузке) не имеет дополнительного резервирования, компенсирующего эту сложность.

Вопрос надежности параллельной системы ИБП не может быть решен однозначно. Надежность зависит от большого числа параметров: количества ИБП в системе (причем увеличение количества ИБП до бесконечности снижает надежность – система становится слишком сложной и сложно управляемой – впрочем максимальное количество параллельно работающих модулей для известных мне ИБП не превышает 8), нагрузки системы (т.е. соотношения номинальной суммарной мощности системы и действующей нагрузки), примененной схемы параллельной работы (т.е. есть ли в системе специальная электроника для обеспечения распределения нагрузки по ИБП), технологии работы предприятия. Таким образом, если единственной целью является увеличение надежности системы, то следует серьезно рассмотреть возможность использование ИБП с горячим резервированием – его надежность не зависит от обстоятельств и в силу относительной простоты схемы практически всегда выше надежности параллельной системы.

Недогруженная система из нескольких параллельно работающих ИБП, которая способна реализвать описанную выше логику управления, часто также называется параллельной системой с резервированием.

Работа с частичной нагрузкой

Если нагрузка параллельной системы такова, что с ней может справиться меньшее, чем есть в системе количество ИБП, то инверторы "лишних" ИБП могут быть отключены. В некоторых ИБП такая логика управления подразумевается по умолчанию, а другие модели вообще лишены возможности работы в таком режиме. Инверторы, оставшиеся включенными, питают нагрузку. Коэффициент полезного действия системы при этом несколько возрастает. Обычно в этом режиме работы предусматривается некоторая избыточность, т.е. количестов работающих инверторов больше, чем необходимо для питания нагрузки. Тем самым обеспечивается резервирование. Все выпрямители системы продолжают работать, включая выпрямители тех ИБП, инверторы которых отключены.

Работа от батареи

В случае исчезновения напряжения в электрической сети, параллельная система переходит на работу от батареи. Все выпрямители системы не работают, инверторы питают нагрузку, получая энергию от батареи. В этом режиме работы (естественно) отсутствует напряжение в электрической сети, которое при нормальной работе было для ИБП не только источником энергии, но и источником сигнала синхронизации выходного напряжения. Поэтому функцию синхронизации берет на себя специальная параллельная электроника или выходная цепь ИБП, специально ориентированная на поддержание выходной частоты и фазы в соответствии с частотой и фазой выходного напряжения параллельно работающего ИБП.

Выход из строя выпрямителя

Это режим, при котором вышли из строя один или несколько выпрямителей. ИБП, выпрямители которых вышли из строя, продолжают питать нагрузку, расходуя заряд своей батареи. Они выдает сигнал "неисправность выпрямителя". Остальные ИБП продолжают работать нормально. После того, как заряд разряжающихся батарей будет полностью исчерпан, все зависит от соотношения мощности нагрузки и суммарной мощности ИБП с исправными выпрямителями. Если нагрузка не превышает перегрузочной способности этих ИБП, то питание нагрузки продолжится (если у системы остался значительный запас мощности, то в этом режиме работы допустимо еще несколько сбоев системы). В случае, если нагрузка ИБП превышает перегрузочную способность оставшихся ИБП, то система переходит к режиму работы через статический байпас.

Выход из строя инвертора

Если оставшиеся в работоспособном состоянии инверторы могут питать нагрузку, то нагрузка продолжает работать, питаясь от них. Если мощности работоспособных инверторов недостаточно, система переходит в режим работы от статического байпаса. Выпрямители всех ИБП могут заряжать батареи, или ИБП с неисправными инверторами могут быть полностью отключены для выполнения ремонта.

Работа от статического байпаса

Если суммарной мощности всех исправных инверторов параллельной системы не достаточно для поддержания работы нагрузки, система переходит к работе через статический байпас. Статические переключатели всех инверторов разомкнуты (исправные инверторы могут продолжать работать). Если нагрузка уменьшается, например в результате отключения части оборудования, параллельная система автоматически переключается на нормальный режим работы.

В случае одиночного ИБП с двойным преобразованием работа через статический байпас является практически последней возможностью поддержания работы нагрузки. В самом деле, ведь достаточно выхода из строя статического переключателя, и нагрузка будет обесточена. При работе параллельной системы через статический байпас допустимо некоторое количество сбоев системы. Статический байпас способен выдерживать намного больший ток, чем инвертор. Поэтому даже в случае выхода из строя одного или нескольких статических переключателей, нагрузка возможно не будет обесточена, если суммарный допустимый ток оставшихся работоспособными статических переключателей окажется достаточен для работы. Конкретное количество допустимых сбоев системы в этом режиме работы зависит от числа ИБП в системе, допустимого тока статического переключателя и величины нагрузки.

Сервисный байпас

Если нужно провести с параллельной системой ремонтные или регламентные работы, то система может быть отключена от нагрузки с помощью ручного переключателя сервисного байпаса. Нагрузка питается от сети, все элементы параллельной системы ИБП, кроме батарей, обесточены. Как и в случае системы с горячим резервированием, возможен вариант одного общего внешнего сервисного байпаса или нескольких сервисных байпасов, встроенных в отдельные ИБП. В последнем случае при использовании сервисного байпаса нужно иметь в виду соотношение номинального тока сервисного байпаса и действующей мощности нагрузки. Другими словами, нужно включить столько сервисных байпасов, чтобы нагрузка не превышала их суммарный номинальных ток.
[ http://www.ask-r.ru/info/library/ups_without_secret_7.htm]

Тематики

• источники и системы электропитания

EN

• three-phase UPS

технология коммутации
-
[Интент]

Современные технологии коммутации
[ http://www.xnets.ru/plugins/content/content.php?content.84]

Статья подготовлена на основании материалов опубликованных в журналах "LAN", "Сети и системы связи", в книге В.Олифер и Н.Олифер "Новые технологии и оборудование IP-сетей", на сайтах www.citforum.ru и опубликована в журнале "Компьютерные решения" NN4-6 за 2000 год.

• Введение
• Коммутация первого уровня.
• Коммутация второго уровня.
• Коммутация третьего уровня.
• Коммутация четвертого уровня.
• Критерии выбора оборудования, физическая и логическая структура сети
• Качество обслуживания (QoS) и принципы задания приоритетов
• Заключение

Введение

На сегодня практически все организации, имеющие локальные сети, остановили свой выбор на сетях типа Ethernet. Данный выбор оправдан тем, что начало внедрения такой сети сопряжено с низкой стоимостью и простотой реализации, а развитие - с хорошей масштабируемостью и экономичностью.

Бросив взгляд назад - увидим, что развитие активного оборудования сетей шло в соответствии с требованиями к полосе пропускания и надежности. Требования, предъявляемые к большей надежности, привели к отказу от применения в качестве среды передачи коаксиального кабеля и перевода сетей на витую пару. В результате такого перехода отказ работы соединения между одной из рабочих станций и концентратором перестал сказываться на работе других рабочих станций сети. Но увеличения производительности данный переход не принес, так как концентраторы используют разделяемую (на всех пользователей в сегменте) полосу пропускания. По сути, изменилась только физическая топология сети - с общей шины на звезду, а логическая топология по-прежнему осталась - общей шиной.

Дальнейшее развитие сетей шло по нескольким путям:

• увеличение скорости,
• внедрение сегментирования на основе коммутации,
• объединение сетей при помощи маршрутизации.

Увеличение скорости при прежней логической топологии - общая шина, привело к незначительному росту производительности в случае большого числа портов.

Большую эффективность в работе сети принесло сегментирование сетей с использованием технология коммутации пакетов. Коммутация наиболее действенна в следующих вариантах:

Вариант 1, именуемый связью "многие со многими" – это одноранговые сети, когда одновременно существуют потоки данных между парами рабочих станций. При этом предпочтительнее иметь коммутатор, у которого все порты имеют одинаковую скорость, (см. Рисунок 1).

Вариант 2, именуемый связью "один со многими" – это сети клиент-сервер, когда все рабочие станции работают с файлами или базой данных сервера. В данном случае предпочтительнее иметь коммутатор, у которого порты для подключения рабочих станций имеют одинаковую небольшую скорость, а порт, к которому подключается сервер, имеет большую скорость,(см. Рисунок 2).

Когда компании начали связывать разрозненные системы друг с другом, маршрутизация обеспечивала максимально возможную целостность и надежность передачи трафика из одной сети в другую. Но с ростом размера и сложности сети, а также в связи со все более широким применением коммутаторов в локальных сетях, базовые маршрутизаторы (зачастую они получали все данные, посылаемые коммутаторами) стали с трудом справляться со своими задачами.

Проблемы с трафиком, связанные с маршрутизацией, проявляются наиболее остро в средних и крупных компаниях, а также в деятельности операторов Internet, так как они вынуждены иметь дело с большими объемами IP-трафика, причем этот трафик должен передаваться своевременно и эффективно.

С подключением настольных систем непосредственно к коммутаторам на 10/100 Мбит/с между ними и магистралью оказывается все меньше промежуточных устройств. Чем выше скорость подключения настольных систем, тем более скоростной должна быть магистраль. Кроме того, на каждом уровне устройства должны справляться с приходящим трафиком, иначе возникновения заторов не избежать.

Рассмотрению технологий коммутации и посвящена данная статья.

Коммутация первого уровня

Термин "коммутация первого уровня" в современной технической литературе практически не описывается. Для начала дадим определение, с какими характеристиками имеет дело физический или первый уровень модели OSI:

физический уровень определяет электротехнические, механические, процедурные и функциональные характеристики активации, поддержания и дезактивации физического канала между конечными системами. Спецификации физического уровня определяют такие характеристики, как уровни напряжений, синхронизацию изменения напряжений, скорость передачи физической информации, максимальные расстояния передачи информации, физические соединители и другие аналогичные характеристики.

Смысл коммутации на первом уровне модели OSI означает физическое (по названию уровня) соединение. Из примеров коммутации первого уровня можно привести релейные коммутаторы некоторых старых телефонных и селекторных систем. В более новых телефонных системах коммутация первого уровня применяется совместно с различными способами сигнализации вызовов и усиления сигналов. В сетях передачи данных данная технология применяется в полностью оптических коммутаторах.

Коммутация второго уровня

Рассматривая свойства второго уровня модели OSI и его классическое определение, увидим, что данному уровню принадлежит основная доля коммутирующих свойств.

Определение. Канальный уровень (формально называемый информационно-канальным уровнем) обеспечивает надежный транзит данных через физический канал. Канальный уровень решает вопросы физической адресации (в противоположность сетевой или логической адресации), топологии сети, линейной дисциплины (каким образом конечной системе использовать сетевой канал), уведомления о неисправностях, упорядоченной доставки блоков данных и управления потоком информации.

На самом деле, определяемая канальным уровнем модели OSI функциональность служит платформой для некоторых из сегодняшних наиболее эффективных технологий. Большое значение функциональности второго уровня подчеркивает тот факт, что производители оборудования продолжают вкладывать значительные средства в разработку устройств с такими функциями.

С технологической точки зрения, коммутатор локальных сетей представляет собой устройство, основное назначение которого - максимальное ускорение передачи данных за счет параллельно существующих потоков между узлами сети. В этом - его главное отличие от других традиционных устройств локальных сетей – концентраторов (Hub), предоставляющих всем потокам данных сети всего один канал передачи данных.

Коммутатор позволяет передавать параллельно несколько потоков данных c максимально возможной для каждого потока скоростью. Эта скорость ограничена физической спецификацией протокола, которую также часто называют "скоростью провода". Это возможно благодаря наличию в коммутаторе большого числа центров обработки и продвижения кадров и шин передачи данных.

Коммутаторы локальных сетей в своем основном варианте, ставшем классическим уже с начала 90-х годов, работают на втором уровне модели OSI, применяя свою высокопроизводительную параллельную архитектуру для продвижения кадров канальных протоколов. Другими словами, ими выполняются алгоритмы работы моста, описанные в стандартах IEEE 802.1D и 802.1H. Также они имеют и много других дополнительных функций, часть которых вошла в новую редакцию стандарта 802.1D-1998, а часть остается пока не стандартизованной.

Коммутаторы ЛВС отличаются большим разнообразием возможностей и, следовательно, цен - стоимость 1 порта колеблется в диапазоне от 50 до 1000 долларов. Одной из причин столь больших различий является то, что они предназначены для решения различных классов задач. Коммутаторы высокого класса должны обеспечивать высокую производительность и плотность портов, а также поддерживать широкий спектр функций управления. Простые и дешевые коммутаторы имеют обычно небольшое число портов и не способны поддерживать функции управления. Одним из основных различий является используемая в коммутаторе архитектура. Поскольку большинство современных коммутаторов работают на основе патентованных контроллеров ASIC, устройство этих микросхем и их интеграция с остальными модулями коммутатора (включая буферы ввода-вывода) играет важнейшую роль. Контроллеры ASIC для коммутаторов ЛВС делятся на 2 класса - большие ASIC, способные обслуживать множество коммутируемых портов (один контроллер на устройство) и небольшие ASIC, обслуживающие по несколько портов и объединяемые в матрицы коммутации.

Существует 3 варианта архитектуры коммутаторов:
 

• переключение (cross-bar) с буферизацией на входе,
• самомаршрутизация (self-route) с разделяемой памятью
• высокоскоростная шина.

На рисунке 3 показана блок-схема коммутатора с архитектурой, используемой для поочередного соединения пар портов. В любой момент такой коммутатор может обеспечить организацию только одного соединения (пара портов). При невысоком уровне трафика не требуется хранение данных в памяти перед отправкой в порт назначения - такой вариант называется коммутацией на лету cut-through. Однако, коммутаторы cross-bar требуют буферизации на входе от каждого порта, поскольку в случае использования единственно возможного соединения коммутатор блокируется (рисунок 4). Несмотря на малую стоимость и высокую скорость продвижения на рынок, коммутаторы класса cross-bar слишком примитивны для эффективной трансляции между низкоскоростными интерфейсами Ethernet или token ring и высокоскоростными портами ATM и FDDI.

Коммутаторы с разделяемой памятью имеют общий входной буфер для всех портов, используемый как внутренняя магистраль устройства (backplane). Буферизагия данных перед их рассылкой (store-and-forward - сохранить и переслать) приводит к возникновению задержки. Однако, коммутаторы с разделяемой памятью, как показано на рисунке 5 не требуют организации специальной внутренней магистрали для передачи данных между портами, что обеспечивает им более низкую цену по сравнению с коммутаторами на базе высокоскоростной внутренней шины.

На рисунке 6 показана блок-схема коммутатора с высокоскоростной шиной, связывающей контроллеры ASIC. После того, как данные преобразуются в приемлемый для передачи по шине формат, они помещаются на шину и далее передаются в порт назначения. Поскольку шина может обеспечивать одновременную (паралельную) передачу потока данных от всех портов, такие коммутаторы часто называют "неблокируемыми" (non-blocking) - они не создают пробок на пути передачи данных.

Применение аналогичной параллельной архитектуры для продвижения пакетов сетевых протоколов привело к появлению коммутаторов третьего уровня модели OSI.

Коммутация третьего уровня

В продолжении темы о технологиях коммутации рассмотренных в предыдущем номера повторим, что применение параллельной архитектуры для продвижения пакетов сетевых протоколов привело к появлению коммутаторов третьего уровня. Это позволило существенно, в 10-100 раз повысить скорость маршрутизации по сравнению с традиционными маршрутизаторами, в которых один центральный универсальный процессор выполняет программное обеспечение маршрутизации.

По определению Сетевой уровень (третий) - это комплексный уровень, который обеспечивает возможность соединения и выбор маршрута между двумя конечными системами, подключенными к разным "подсетям", которые могут находиться в разных географических пунктах. В данном случае "подсеть" это, по сути, независимый сетевой кабель (иногда называемый сегментом).

Коммутация на третьем уровне - это аппаратная маршрутизация. Традиционные маршрутизаторы реализуют свои функции с помощью программно-управляемых процессоров, что будем называть программной маршрутизацией. Традиционные маршрутизаторы обычно продвигают пакеты со скоростью около 500000 пакетов в секунду. Коммутаторы третьего уровня сегодня работают со скоростью до 50 миллионов пакетов в секунду. Возможно и дальнейшее ее повышение, так как каждый интерфейсный модуль, как и в коммутаторе второго уровня, оснащен собственным процессором продвижения пакетов на основе ASIC. Так что наращивание количества модулей ведет к наращиванию производительности маршрутизации. Использование высокоскоростной технологии больших заказных интегральных схем (ASIC) является главной характеристикой, отличающей коммутаторы третьего уровня от традиционных маршрутизаторов. Коммутаторы 3-го уровня делятся на две категории: пакетные (Packet-by-Packet Layer 3 Switches, PPL3) и сквозные (Cut-Through Layer 3 Switches, CTL3). PPL3 - означает просто быструю маршрутизацию (Рисунок_7). CTL3 – маршрутизацию первого пакета и коммутацию всех остальных (Рисунок 8).

У коммутатора третьего уровня, кроме реализации функций маршрутизации в специализированных интегральных схемах, имеется несколько особенностей, отличающих их от традиционных маршрутизаторов. Эти особенности отражают ориентацию коммутаторов 3-го уровня на работу, в основном, в локальных сетях, а также последствия совмещения в одном устройстве коммутации на 2-м и 3-м уровнях:
 

• поддержка интерфейсов и протоколов, применяемых в локальных сетях,
• усеченные функции маршрутизации,
• обязательная поддержка механизма виртуальных сетей,
• тесная интеграция функций коммутации и маршрутизации, наличие удобных для администратора операций по заданию маршрутизации между виртуальными сетями.

Наиболее "коммутаторная" версия высокоскоростной маршрутизации выглядит следующим образом (рисунок 9). Пусть коммутатор третьего уровня построен так, что в нем имеется информация о соответствии сетевых адресов (например, IP-адресов) адресам физического уровня (например, MAC-адресам) Все эти МАС-адреса обычным образом отображены в коммутационной таблице, независимо от того, принадлежат ли они данной сети или другим сетям.

Первый коммутатор, на который поступает пакет, частично выполняет функции маршрутизатора, а именно, функции фильтрации, обеспечивающие безопасность. Он решает, пропускать или нет данный пакет в другую сеть Если пакет пропускать нужно, то коммутатор по IP-адресу назначения определяет МАС-адрес узла назначения и формирует новый заголовок второго уровня с найденным МАС-адресом. Затем выполняется обычная процедура коммутации по данному МАС-адресу с просмотром адресной таблицы коммутатора. Все последующие коммутаторы, построенные по этому же принципу, обрабатывают данный кадр как обычные коммутаторы второго уровня, не привлекая функций маршрутизации, что значительно ускоряет его обработку. Однако функции маршрутизации не являются для них избыточными, поскольку и на эти коммутаторы могут поступать первичные пакеты (непосредственно от рабочих станций), для которых необходимо выполнять фильтрацию и подстановку МАС-адресов.

Это описание носит схематический характер и не раскрывает способов решения возникающих при этом многочисленных проблем, например, проблемы построения таблицы соответствия IP-адресов и МАС-адресов

Примерами коммутаторов третьего уровня, работающих по этой схеме, являются коммутаторы SmartSwitch компании Cabletron. Компания Cabletron реализовала в них свой протокол ускоренной маршрутизации SecureFast Virtual Network, SFVN.

Для организации непосредственного взаимодействия рабочих станций без промежуточного маршрутизатора необходимо сконфигурировать каждую из них так, чтобы она считала собственный интерфейс маршрутизатором по умолчанию. При такой конфигурации станция пытается самостоятельно отправить любой пакет конечному узлу, даже если этот узел находится в другой сети. Так как в общем случае (см. рисунок 10) станции неизвестен МАС-адрес узла назначения, то она генерирует соответствующий ARP-запрос, который перехватывает коммутатор, поддерживающий протокол SFVN. В сети предполагается наличие сервера SFVN Server, являющегося полноценным маршрутизатором и поддерживающего общую ARP-таблицу всех узлов SFVN-сети. Сервер возвращает коммутатору МАС-адрес узла назначения, а коммутатор, в свою очередь, передает его исходной станции. Одновременно сервер SFVN передает коммутаторам сети инструкции о разрешении прохождения пакета с МАС-адресом узла назначения через границы виртуальных сетей. Затем исходная станция передает пакет в кадре, содержащем МАС-адрес узла назначения. Этот кадр проходит через коммутаторы, не вызывая обращения к их блокам маршрутизации. Отличие протокола SFVN компании Cabletron от - описанной выше общей схемы в том, что для нахождения МАС-адреса по IP-адресу в сети используется выделенный сервер.

Протокол Fast IP компании 3Com является еще одним примером реализации подхода с отображением IP-адреса на МАС-адрес. В этом протоколе основными действующими лицами являются сетевые адаптеры (что не удивительно, так как компания 3Com является признанным лидером в производстве сетевых адаптеров Ethernet) С одной стороны, такой подход требует изменения программного обеспечения драйверов сетевых адаптеров, и это минус Но зато не требуется изменять все остальное сетевое оборудование.

При необходимости передать пакет узлу назначения другой сети, исходный узел в соответствии с технологией Fast IP должен передать запрос по протоколу NHRP (Next Hop Routing Protocol) маршрутизатору сети. Маршрутизатор переправляет этот запрос узлу назначения, как обычный пакет Узел назначения, который также поддерживает Fast IP и NHRP, получив запрос, отвечает кадром, отсылаемым уже не маршрутизатору, а непосредственно узлу-источнику (по его МАС-адресу, содержащемуся в NHRP-запросе). После этого обмен идет на канальном уровне на основе известных МАС-адресов. Таким образом, снова маршрутизировался только первый пакет потока (как на рисунке 9 кратковременный поток), а все остальные коммутировались (как на рисунке 9 долговременный поток).

Еще один тип коммутаторов третьего уровня — это коммутаторы, работающие с протоколами локальных сетей типа Ethernet и FDDI. Эти коммутаторы выполняют функции маршрутизации не так, как классические маршрутизаторы. Они маршрутизируют не отдельные пакеты, а потоки пакетов.

Поток — это последовательность пакетов, имеющих некоторые общие свойства. По меньшей мере, у них должны совпадать адрес отправителя и адрес получателя, и тогда их можно отправлять по одному и тому же маршруту. Если классический способ маршрутизации использовать только для первого пакета потока, а все остальные обрабатывать на основании опыта первого (или нескольких первых) пакетов, то можно значительно ускорить маршрутизацию всего потока.

Рассмотрим этот подход на примере технологии NetFlow компании Cisco, реализованной в ее маршрутизаторах и коммутаторах. Для каждого пакета, поступающего на порт маршрутизатора, вычисляется хэш-функция от IP-адресов источника, назначения, портов UDP или TCP и поля TOS, характеризующего требуемое качество обслуживания. Во всех маршрутизаторах, поддерживающих данную технологию, через которые проходит данный пакет, в кэш-памяти портов запоминается соответствие значения хэш-функции и адресной информации, необходимой для быстрой передачи пакета следующему маршрутизатору. Таким образом, образуется квазивиртуальный канал (см. Рисунок 11), который позволяет быстро передавать по сети маршрутизаторов все последующие пакеты этого потока. При этом ускорение достигается за счет упрощения процедуры обработки пакета маршрутизатором - не просматриваются таблицы маршрутизации, не выполняются ARP-запросы.

Этот прием может использоваться в маршрутизаторах, вообще не поддерживающих коммутацию, а может быть перенесен в коммутаторы. В этом случае такие коммутаторы тоже называют коммутаторами третьего уровня. Примеров маршрутизаторов, использующих данный подход, являются маршрутизаторы Cisco 7500, а коммутаторов третьего уровня — коммутаторы Catalyst 5000 и 5500. Коммутаторы Catalyst выполняют усеченные функции описанной схемы, они не могут обрабатывать первые пакеты потоков и создавать новые записи о хэш-функциях и адресной информации потоков. Они просто получают данную информацию от маршрутизаторов 7500 и обрабатывают пакеты уже распознанных маршрутизаторами потоков.

Выше был рассмотрен способ ускоренной маршрутизации, основанный на концепции потока. Его сущность заключается в создании квазивиртуальных каналов в сетях, которые не поддерживают виртуальные каналы в обычном понимании этого термина, то есть сетях Ethernet, FDDI, Token Ring и т п. Следует отличать этот способ от способа ускоренной работы маршрутизаторов в сетях, поддерживающих технологию виртуальных каналов — АТМ, frame relay, X 25. В таких сетях создание виртуального канала является штатным режимом работы сетевых устройств. Виртуальные каналы создаются между двумя конечными точками, причем для потоков данных, требующих разного качества обслуживания (например, для данных разных приложений) может создаваться отдельный виртуальный канал. Хотя время создания виртуального канала существенно превышает время маршрутизации одного пакета, выигрыш достигается за счет последующей быстрой передачи потока данных по виртуальному каналу. Но в таких сетях возникает другая проблема — неэффективная передача коротких потоков, то есть потоков, состоящих из небольшого количества пакетов (классический пример — пакеты протокола DNS).

Накладные расходы, связанные с созданием виртуального канала, приходящиеся на один пакет, снижаются при передаче объемных потоков данных. Однако они становятся неприемлемо высокими при передаче коротких потоков. Для того чтобы эффективно передавать короткие потоки, предлагается следующий вариант, при передаче нескольких первых пакетов выполняется обычная маршрутизация. Затем, после того как распознается устойчивый поток, для него строится виртуальный канал, и дальнейшая передача данных происходит с высокой скоростью по этому виртуальному каналу. Таким образом, для коротких потоков виртуальный канал вообще не создается, что и повышает эффективность передачи.

По такой схеме работает ставшая уже классической технология IP Switching компании Ipsilon. Для того чтобы сети коммутаторов АТМ передавали бы пакеты коротких потоков без установления виртуального канала, компания Ipsilon предложила встроить во все коммутаторы АТМ блоки IP-маршрутизации (рисунок 12), строящие обычные таблицы маршрутизации по обычным протоколам RIP и OSPF.

Компания Cisco Systems выдвинула в качестве альтернативы технологии IP Switching свою собственную технологию Tag Switching, но она не стала стандартной. В настоящее время IETF работает над стандартным протоколом обмена метками MPLS (Multi-Protocol Label Switching), который обобщает предложение компаний Ipsilon и Cisco, а также вносит некоторые новые детали и механизмы. Этот протокол ориентирован на поддержку качества обслуживания для виртуальных каналов, образованных метками.

Коммутация четвертого уровня

Свойства четвертого или транспортного уровня модели OSI следующие: транспортный уровень обеспечивает услуги по транспортировке данных. В частности, заботой транспортного уровня является решение таких вопросов, как выполнение надежной транспортировки данных через объединенную сеть. Предоставляя надежные услуги, транспортный уровень обеспечивает механизмы для установки, поддержания и упорядоченного завершения действия виртуальных каналов, систем обнаружения и устранения неисправностей транспортировки и управления информационным потоком (с целью предотвращения переполнения данными из другой системы).

Некоторые производители заявляют, что их системы могут работать на втором, третьем и даже четвертом уровнях. Однако рассмотрение описания стека TCP/IP (рисунок 1), а также структуры пакетов IP и TCP (рисунки 2, 3), показывает, что коммутация четвертого уровня является фикцией, так как все относящиеся к коммутации функции осуществляются на уровне не выше третьего. А именно, термин коммутация четвертого уровня с точки зрения описания стека TCP/IP противоречий не имеет, за исключением того, что при коммутации должны указываться адреса компьютера (маршрутизатора) источника и компьютера (маршрутизатора) получателя. Пакеты TCP имеют поля локальный порт отправителя и локальный порт получателя (рисунок 3), несущие смысл точек входа в приложение (в программу), например Telnet с одной стороны, и точки входа (в данном контексте инкапсуляции) в уровень IP. Кроме того, в стеке TCP/IP именно уровень TCP занимается формированием пакетов из потока данных идущих от приложения. Пакеты IP (рисунок 2) имеют поля адреса компьютера (маршрутизатора) источника и компьютера (маршрутизатора) получателя и следовательно могут наряду с MAC адресами использоваться для коммутации. Тем не менее, название прижилось, к тому же практика показывает, что способность системы анализировать информацию прикладного уровня может оказаться полезной — в частности для управления трафиком. Таким образом, термин "зависимый от приложения" более точно отражает функции так называемых коммутаторов четвертого уровня.

Тематики

• сети вычислительные

EN

• switching technology

стандарт на телекоммуникационную инфраструктуру центров обработки данных (ЦОД)
-
[Интент]

Стандарт TIA/EIA-942

Ассоциация TIA завершает разработку стандарта на телекоммуникационную инфраструктуру ЦОД—TIA/EIA-942 (Telecommunications Infrustructure Standard for Data Centers), который, по всей вероятности, будет опубликован в начале 2005 г. Основная цель данного стандарта — предоставить разработчикам исчерпывающую информацию о проектировании инфраструктуры ЦОД, в том числе сведения о планировке его помещений и структуре кабельной системы. Он призван способствовать взаимодействию архитекторов, инженеров-строителей и телекоммуникационных инженеров.

Помимо рекомендаций по проектированию, в стандарте содержатся приложения с информацией по широкому кругу тем, связанных с организацией ЦОД. Вот некоторые из них: выбор места для развертывания ЦОД; администрирование его кабельной системы; архитектурные вопросы; обеспечение безопасности и защита от огня; электрические, заземляющие и механические системы; взаимодействие с операторами сетей общего пользования.

Кроме того, в спецификациях стандарта отражены принятые в отрасли уровни надежности ЦОД. Уровень 1 обозначает отсутствие резервирования подсистем, а значит, низкую степень отказоустойчивости, а уровень 4 — высочайшую степень отказоустойчивости.

Помещения и участки ЦОД

Стандарт TIA/EIA-942 определяет ЦОД как здание или его часть, предназначенные для организации компьютерного зала и необходимых для функционирования последнего вспомогательных служб. Компьютерный зал — это часть ЦОД, основным предназначением которой является размещение оборудования обработки данных.

В стандарте обозначены требования к компьютерному залу и комнатам для ввода кабелей (от сетей общего пользования). Так, для этих помещений определены: высота потолка (2,6 м); покрытие полов и стен; характеристики освещения; нагрузка на полы (минимальная — 732 кг/м2, рекомендуемая — 1220 кг/м2); параметры систем нагревания, вентиляции и кондиционирования воздуха; температура воздуха (20—25 °С), относительная влажность (40—55%); характеристики систем электропитания, заземления и противопожарной защиты.

В число телекоммуникационных помещений и участков ЦОД входят:

• Комната для ввода кабелей.

• Главный распределительный пункт (Main Distribution Area — MDA).

• Распределительный пункт горизонтальной подсистемы кабельной системы ЦОД (Horizontal Distribution Area — HDA).

• Распределительный пункт зоны (Zone Distribution Area — ZDA).

• Распределительный пункт оборудования (Equipment Distribution Area — EDA).

Комната для ввода кабелей — это помещение, в котором кабельная система ЦОД соединяется с кабельными системами кампуса и операторов сетей общего пользования. Она может находиться как снаружи, так и внутри компьютерного зала. При организации соединения названных кабельных систем внутри компьютерного зала соответствующие средства можно оборудовать в MDA.

С целью резервирования элементов инфраструктуры ЦОД или соблюдения ограничений на максимальную длину каналов связи в ЦОД можно организовать несколько комнат для ввода кабелей. Например, максимальная длина канала T-1, как правило, не должна превышать 200 м, тогда как типичное ограничение на длину канала T-3 составляет 137 м. Однако использование тех или иных типов кабеля и промежуточных коммутационных панелей в ряде случаев суще-ственно уменьшает максимально допустимую длину линии. В стандарте TIA/EIA-942 имеются рекомендации по максимальной длине кабельных каналов в ЦОД.

MDA содержит главный кросс, являющийся центром коммутации каналов кабельной системы ЦОД. В помещении MDA могут находиться и горизонтальные кроссы, предназначенные для коммутации горизонтальных кабелей, идущих к оборудованию, которое напрямую взаимодействует с оборудованием MDA. Кроме того, в помещении MDA обычно устанавливают маршрутизаторы и магистральные коммутаторы локальной сети и сети SAN ЦОД. Согласно стандарту, ЦОД должен иметь по крайней мере один MDA, а в целях резервирования допускается организация второго MDA.

Помещение HDA предназначено для установки горизонтального кросса, с помощью которого осуществляется коммутация горизонтальных кабелей, идущих к оборудованию EDA, а также переключателей KVM и коммутаторов ЛВС и SAN, взаимодействующих с оборудованием HDA.

ZDA — факультативный элемент горизонтальной подсистемы, располагающийся между HDA и EDA. Он призван обеспечить гибкость реконфигурации этой подсистемы. В ZDA горизонтальные кабели терминируются в зоновых розетках или точках консолидации. Подключение оборудования к зоновым розеткам осуществляется посредством соединительных кабелей. Стандарт не рекомендует размещать в ZDA коммутационную панель или активное оборудование, за исключением устройств подачи электропитания по горизонтальным кабелям.

EDA — это участок ЦОД, выделенный для размещения оконечного оборудования, в том числе компьютеров и телекоммуникационных устройств. В EDA горизонтальные кабели терминируются на розетках, которые обычно располагают на коммутационных панелях, устанавливаемых в монтажных стойках или шкафах. Стандартом допускается и соединение устройств EDA напрямую друг с другом (например, blade-серверы могут напрямую подключаться к коммутаторам, а обычные серверы — к периферийным устройствам).

В составе ЦОД вне пределов компьютерного зала можно оборудовать телекоммуникационную комнату, предназначенную для поддержки горизонтальных кабелей, проложенных к офисам обслуживающего персонала, центру управления, помещениям с механическим и электрическим оборудованием и другим помещениям или участкам ЦОД, расположенным вне стен компьютерного зала. Типичный ЦОД имеет одну или две комнаты для ввода кабелей, одну или несколько телекоммуникационных комнат, один MDA и несколько HDA.

Кабельная система ЦОД состоит из следующих элементов:

• горизонтальная подсистема;

• магистральная подсистема;

• входной кросс, находящийся в комнате для ввода кабелей или в помещении MDA (если комната ввода кабелей объединена с MDA);

• главный кросс, установленный в MDA;

• горизонтальный кросс, размещенный в HDA, MDA или в телекоммуникационной комнате;

• зоновая розетка или точка консолидации, смонтированная в ZDA;

• розетка, установленная в EDA.

Горизонтальная подсистема — это часть кабельной системы ЦОД, проходящая между розеткой в EDA (или зоновой розеткой в ZDA) и горизонтальным кроссом, который находится в HDA или MDA. В состав горизонтальной подсистемы может входить факультативная точка консолидации. Магистральная подсистема связывает MDA с HDA, телекоммуникационными комнатами и комнатами для ввода кабелей.

Топология кабельной системы

Горизонтальная и магистральная подсистемы кабельной системы ЦОД имеют топологию типа “звезда”. Горизонтальные кабели подключаются к горизонтальному кроссу в HDA или MDA. С целью резервирования путей передачи данных разные розетки в EDA или ZDA можно соединять (горизонтальными кабелями) с разными горизонтальными кроссами.

В звездообразной топологии магистральной подсистемы каждый горизонтальный кросс, расположенный в HDA, подключен напрямую к главному кроссу в MDA. Промежуточных кроссов в кабельной инфраструктуре ЦОД не предусмотрено.

Чтобы повысить надежность работы инфраструктуры, как уже отмечалось, допускается резервирование HDA. В этом случае все горизонтальные кроссы должны быть связаны с основным и резервным HDA.

Стоит также отметить, что для резервирования элементов инфраструктуры и поддержки приложений, которые не могут функционировать из-за того, что длина путей передачи данных в рамках звездообразной топологии превышает максимальную дальность связи с использованием этих приложений, допускается организация прямых кабельных соединений между HDA. Кроме того, для соблюдения ограничений на максимальную длину кабельных каналов разрешено организовывать прямые соединения между второй комнатой для ввода кабелей и помещениями HDA.

Типы кабелей

Для поддержки разнообразных приложений стандарт TIA/EIA-942 допускает установку самых разных типов кабелей, но при этом в новых инсталляциях рекомендует использовать кабели с максимально широкой полосой пропускания. Это весьма значительно увеличивает возможный срок службы кабельной инфраструктуры ЦОД.

К разрешенным стандартом типам кабелей относятся:

• 100-Ом кабель из витых пар, соответствующий стандарту ANSI/TIA/EIA-568-B.2; рекомендуется использовать кабель категории 6, специфицированный в приложении ANSI/TIA/EIA-568-B.2-1.

• Кабель с 62,5/125-мкм или 50/125-мкм многомодовым волокном, соответствующий стандарту ANSI/TIA/EIA-568-B.3; рекомендуется использовать 50/125-мкм многомодовое волокно, оптимизированное для работы с 850-нм лазером и специфицированное в документе ANSI/TIA-568-B.3-1.

• Одномодовый оптоволоконный кабель стандарта ANSI/TIA/EIA-568-B.3.

• 75-Ом коаксиальный кабель (типа 734 или 735), соответствующий документу GR-139-CORE фирмы Telcordia Technologies, и коаксиальные разъемы стандарта ANSI T1.404. Эти кабели и разъемы рекомендованы для организации каналов T-3, E-1 и E-3.

Прокладка кабелей и размещение оборудования

Для прокладки кабелей в ЦОД стандарт TIA/EIA-942 разрешает использовать самые разные полости и конструкции, включая пространство под фальшполом и верхние кабельные лотки, уже получившие широкое распространение в ЦОД. Стандарт рекомендует реализовывать фальшполы в тех ЦОД, где предполагается высокая концентрация оборудования с большим энергопотреблением, или устанавливать большую компьютерную систему, сконструированную для подвода кабелей снизу. Под фальшполом телекоммуникационные кабели следует размещать в кабельных лотках, причем они не должны мешать потоку воздуха и иметь острых краев.

Верхние кабельные лотки стандарт рекомендует подвешивать к потолку, а не прикреплять их к верхним частям монтажных стоек или шкафов. Это обеспечивает большую гибкость применения монтажного оборудования разной высоты. И еще. Размещать осветительные приборы и водораспыляющие головки нужно в проходах между рядами стоек или шкафов с оборудованием, а не прямо над ними.

Согласно стандарту, для организации так называемых холодных и горячих проходов между рядами стоек или шкафов с оборудованием их следует устанавливать таким образом, чтобы стойки или шкафы соседних рядов были обращены либо передними, либо задними сторонами друг к другу. Холодные проходы образуются впереди стоек или шкафов — в этих проходах плиты фальшпола имеют отверстия, через которые в помещение ЦОД поступает холодный воздух. Силовые кабели обычно прокладывают под холодными проходами. Соседние с ними проходы называются горячими — в ту сторону обращены задние части шкафов или стоек. Лотки с телекоммуникационными кабелями, как правило, располагают под горячими проходами.

В стойках или шкафах оборудование должно быть смонтировано так, чтобы его вентиляционные отверстия, через которые всасывается холодный воздух, находились в передней части шкафа или стойки, а выход горячего воздуха осуществлялся в задней части. В противном случае система охлаждения оборудования, основанная на концепции холодных и горячих проходов, не будет работать. Данная концепция ориентирована на устройства, в которых охлаждающий воздух перемещается от передней панели к задней.

Чтобы обеспечивать надлежащее охлаждение установленного оборудования, монтажные шкафы должны иметь средства воздухообмена. Если шкафы не оснащены вентиляторами, способствующими более эффективному функционированию горячих и холодных проходов, то в дверях шкафов должно быть большое число вентиляционных отверстий или прорезей, общая площадь которых составляла бы не менее половины площади двери.

Для удобства монтажа оборудования и прокладки кабелей проходы между рядами шкафов или стоек не должны быть слишком узкими. Рекомендуемое расстояние между передними сторонами стоек или шкафов (соседних рядов) — 1,2 м, а минимальное — 0,9 м. Расстояние между задними сторонами стоек или шкафов (опять же соседних рядов) должно составлять 0,9 м, а минимальное — 0,6 м.

Размещать ряды стоек или шкафов нужно так, чтобы можно было снимать плиты фальшпола спереди и сзади ряда. Таким образом, все шкафы следует выравнивать вдоль краев плит фальшпола. Чтобы резьбовые стержни, которыми монтажные стойки крепятся к межэтажным перекрытиям, не попадали на крепежные элементы плит фальшпола, стойки устанавливаются ближе к центру этих плит.

Размеры прорезей в плитах фальшпола, находящихся под стойками или шкафами, должны быть не больше, чем это необходимо, чтобы свести к минимуму снижение давления воздуха под фальшполом. Кроме того, для минимизации продольной электромагнитной связи между силовыми и телекоммуникационными кабелями из витых пар в стандарте TIA/EIA-942 оговорены требования к расстоянию между ними.

Стандарт TIA/EIA-942 разрабатывается с целью удовлетворения потребности ИТ-отрасли в рекомендациях по проектированию инфраструктуры для любого ЦОД независимо от его размеров (небольшой, средний или крупный) и характера использования (корпоративный ЦОД или ЦОД, в котором базируются Интернет-серверы разных компаний).

[ http://www.ccc.ru/magazine/depot/04_13/read.html?1102.htm]

Тематики

• ЦОДы (центры обработки данных)

EN

• telecommunications infrustructure standard for data centers