Fibre Channel или iSCSI: сравнение способов подключения СХД

Для подключения серверов к СХД используют Fibre Channel и iSCSI. Оба способа позволяют работать с данными на внешнем хранилище, но предъявляют разные требования к сети и оборудованию. При выборе важно учитывать характер нагрузки, требования к доступности данных и возможности существующей инфраструктуры.

Сравним оба способа подключения по производительности, отказоустойчивости и затратам на внедрение. Выясним, для каких задач подходит каждый вариант и что необходимо проверить перед закупкой.

Как работают Fibre Channel и iSCSI

При работе с внешней СХД сервер получает доступ к выделенному логическому тому. Это область дискового пространства, которую операционная система распознает как отдельное блочное устройство. Сервер может записывать туда данные и считывать их по запросу приложений.

Для обмена командами чтения и записи используют SCSI — набор команд для работы с устройствами хранения. Fibre Channel и iSCSI позволяют передавать эти команды между сервером и СХД, но используют разные способы связи.

При этом сами понятия различаются. Fibre Channel представляет собой сетевую технологию, а iSCSI — протокол передачи команд SCSI через TCP/IP. На практике оба варианта рассматривают при выборе подключения к внешнему хранилищу.

Fibre Channel: передача данных через специализированную сеть

Fibre Channel (FC) используют для связи серверов и систем хранения в специализированной сети. Для передачи команд SCSI применяется протокол FCP (Fibre Channel Protocol). Он обеспечивает обмен запросами и ответами между устройствами.

Когда операционная система обращается к логическому тому, сервер формирует команду чтения или записи. FCP передает ее по сети Fibre Channel. СХД выполняет операцию и отправляет ответ обратно.

В типовой схеме серверы и хранилища соединяют через коммутаторы FC. Они обеспечивают передачу данных между подключенными устройствами. Некоторые системы также поддерживают прямое соединение без коммутатора, если производитель предусмотрел такую возможность.

Fibre Channel использует собственные механизмы передачи данных. Для обмена командами SCSI через FCP не требуется TCP/IP.

iSCSI: блочный доступ через Ethernet

iSCSI передает команды SCSI через TCP/IP — набор сетевых протоколов, который используется для обмена данными в IP-сетях. В серверной инфраструктуре для такого подключения обычно применяют Ethernet.

На сервере работает инициатор iSCSI. Это программный или аппаратный компонент, который устанавливает соединение с системой хранения и отправляет ей команды. На стороне СХД запросы принимает целевой узел iSCSI.

После установления соединения сервер получает доступ к разрешенным логическим томам. Операционная система видит их как блочные устройства и может выполнять операции чтения и записи.

Например, приложение запрашивает данные с тома, расположенного на внешней СХД. Сервер передает соответствующую команду через установленное соединение TCP/IP. Система хранения обрабатывает запрос и возвращает результат тем же способом.

Для iSCSI подходит сеть Ethernet с необходимыми характеристиками. При этом сам протокол не определяет, должна ли передача данных идти по отдельной физической сети или через общую инфраструктуру. Организация соединений зависит от требований конкретной системы.

Что влияет на производительность подключения СХД

Одинаковая скорость сетевых портов еще не означает, что сервер получит одинаковую производительность при работе через Fibre Channel и iSCSI. На результат влияют объем передаваемых данных, количество операций чтения и записи, а также время ответа хранилища. Каждый показатель помогает оценить отдельную сторону работы системы.

Пропускная способность и скорость передачи данных

Пропускная способность показывает, какой объем информации соединение может передать за единицу времени. Скорость порта обычно указывают в гигабитах в секунду (Гбит/с), а фактический обмен данными измеряют в мегабайтах или гигабайтах в секунду (МБ/с, ГБ/с).

Заявленная скорость порта обозначает возможности соединения. Однако часть пропускной способности занимают служебные данные сетевых протоколов. На итоговый результат также влияют загруженность каналов и скорость обработки запросов самой СХД.

Например, несколько серверов могут одновременно обращаться к одному хранилищу. Если их соединения используют общий канал с ограниченной пропускной способностью, доступная скорость распределяется между потоками данных. Это возможно как в сетях Fibre Channel, так и при использовании iSCSI.

Для iSCSI дополнительное значение имеет организация сети Ethernet. Если обмен с хранилищем проходит через соединения, которые обслуживают другие приложения, их активность может создавать дополнительную нагрузку.

Ограничение иногда находится внутри самой СХД. Контроллеры и накопители должны успевать обрабатывать поступающие запросы. Если их возможностей недостаточно, увеличение скорости сетевого порта не устранит причину медленной работы.

Таким образом, при оценке пропускной способности нужно различать заявленную скорость соединения и фактический объем данных, который система способна передавать и обрабатывать.

Задержки при чтении и записи

Задержка показывает, сколько времени проходит от отправки запроса до получения ответа. Обычно ее измеряют в миллисекундах (мс), а при очень коротких операциях — в микросекундах (мкс).

Когда сервер запрашивает данные, команда проходит через сеть к системе хранения. Контроллер СХД обрабатывает запрос, обращается к нужным данным и отправляет результат обратно. Каждый этап занимает определенное время.

На задержку могут влиять загруженность сетевых соединений, работа контроллеров и скорость накопителей. Если поступающих операций слишком много, часть запросов ожидает своей очереди.

Различия между Fibre Channel и iSCSI тоже могут сказываться на времени передачи и обработки команд. Однако сравнение только по используемой технологии не дает точного результата. Необходимо учитывать возможности оборудования и условия измерения.

Особенно важно смотреть на задержки при высокой нагрузке. 

Например, приложение может получать быстрые ответы при небольшом числе обращений к данным. Когда количество запросов увеличивается, системе приходится обрабатывать больше операций одновременно. Если ресурсов недостаточно, время ожидания растет.

Среднее значение задержки не всегда отражает подобные изменения. Полезно также оценивать, насколько сильно увеличивается время выполнения отдельных операций в периоды высокой активности.

При измерениях нужно учитывать, где именно рассчитывается показатель. СХД может отображать собственное время обработки запросов, а сервер — время, которое включает дополнительные этапы передачи и ожидания. Эти значения нельзя напрямую сравнивать без понимания методики измерения.

Количество операций ввода-вывода и характер нагрузки

IOPS (Input/Output Operations Per Second) показывает, сколько операций чтения и записи система выполняет за секунду. Показатель помогает оценить работу с данными, особенно когда приложения часто обращаются к небольшим участкам хранилища.

Однако одинаковое количество IOPS может соответствовать разному объему переданной информации. Все зависит от размера операций.

Например, при одинаковом числе запросов в секунду передача крупных блоков данных потребует большей пропускной способности, чем работа с небольшими блоками. Приблизительный объем передачи можно рассчитать, умножив IOPS на средний размер операции. Расчет предполагает, что система действительно способна поддерживать указанную частоту запросов.

На результат также влияет способ обращения к данным.

1. Последовательный доступ. Сервер читает или записывает соседние участки данных. При работе с крупными блоками особое значение приобретает пропускная способность соединения.
2. Случайный доступ. Сервер обращается к разным участкам хранилища. Здесь приходится учитывать количество отдельных операций и время их выполнения. Даже сравнительно небольшой объем информации может потребовать множества обращений к СХД.
3. Соотношение чтения и записи. Одни приложения чаще считывают данные, другие регулярно изменяют их. Скорость выполнения этих операций может различаться из-за особенностей накопителей, контроллеров и способов обработки записи.

Еще один важный параметр — глубина очереди запросов. Она определяет, сколько операций сервер может отправить на обработку, не дожидаясь ответа на каждую предыдущую команду.

Когда сервер передает несколько запросов одновременно, СХД получает возможность обрабатывать их параллельно в пределах своих ресурсов. Это может увеличить число выполненных операций в секунду. Но слишком большая очередь способна повысить задержку: новые запросы будут дольше ожидать выполнения.

При сравнении производительности Fibre Channel и iSCSI необходимо учитывать все перечисленные особенности. Результаты будут сопоставимы, если размер операций, соотношение чтения и записи, характер доступа и количество одновременных запросов совпадают.

Пропускная способность, IOPS и задержка дополняют друг друга. Оценка всех трех показателей помогает понять, какие ограничения возникают при работе с СХД и насколько выбранное соединение соответствует требованиям нагрузки.

Fibre Channel или iSCSI для разных рабочих нагрузок

Требования к подключению зависят от задач, которые выполняет сервер. Базы данных чувствительны к задержкам отдельных операций, виртуализация создает переменную нагрузку на хранилище, а резервное копирование часто связано с передачей больших объемов информации. Рассмотрим, как эти особенности влияют на выбор Fibre Channel и iSCSI.

Для серверов баз данных

Системы управления базами данных постоянно читают и изменяют информацию. Характер обращений зависит от приложения.

Например, корпоративная учетная система может выполнять множество небольших транзакций, а аналитическая база — считывать большие массивы данных для формирования отчетов.

Особенно важна скорость записи журналов транзакций. В них система фиксирует изменения, которые необходимы для восстановления согласованного состояния базы. В некоторых режимах приложение должно дождаться подтверждения записи журнала, прежде чем завершить транзакцию. При увеличении задержек пользователи могут заметить замедление работы.

Fibre Channel стоит рассматривать, когда компания уже использует выделенную сеть хранения для баз данных и других критичных приложений. Отдельная инфраструктура позволяет исключить влияние обычной сети Ethernet на передачу данных между серверами и СХД. При этом нагрузка на порты и внутренние ресурсы хранилища по-прежнему имеет значение.

iSCSI тоже подходит для баз данных, включая Microsoft SQL Server. Протокол позволяет использовать блочное хранилище через Ethernet. При достаточной пропускной способности и правильно организованной сети такое подключение может удовлетворять требованиям транзакционных приложений.

Здесь важно учитывать особенности конкретной базы. Система с частыми небольшими записями предъявляет одни требования, а хранилище для аналитических запросов с последовательным чтением — другие.

Для сравнения полезно оценить время выполнения операций с файлами данных и журналами транзакций при реальной нагрузке. Это позволит понять, насколько существующее подключение влияет на работу приложения и есть ли основания менять технологию.

Для виртуализации и кластеров

Виртуализация позволяет запускать несколько виртуальных машин на одном физическом сервере. Каждая машина работает со своими данными, но все они могут обращаться к общей СХД. Характер нагрузки зависит от приложений и меняется в течение дня.

Например, сотрудники одновременно запускают корпоративные программы, база данных обрабатывает запросы, а система обновления выполняет запись файлов. Хранилище должно обслуживать эти операции без существенного увеличения времени ответа.

В кластерах из нескольких физических серверов внешняя СХД может предоставлять общее дисковое пространство для виртуальных машин. Это позволяет использовать функции управления и переноса машин между узлами, если программная платформа поддерживает соответствующую схему.

VMware vSphere и Microsoft Hyper-V поддерживают работу с блочными хранилищами через Fibre Channel и iSCSI. Возможность применения конкретной конфигурации зависит от версии программного обеспечения, совместимости оборудования и требований производителя.

Fibre Channel имеет смысл использовать, если серверы виртуализации уже подключены к специализированной сети хранения. При добавлении новых узлов необходимо проверить, хватит ли ее ресурсов для обслуживания дополнительных виртуальных машин.

iSCSI можно выбрать, когда существующая инфраструктура Ethernet поддерживает необходимую нагрузку и есть возможность выделить достаточные сетевые ресурсы для обмена с СХД. Например, такой вариант можно рассматривать при расширении кластера, который уже использует iSCSI.

Особого внимания требуют периоды одновременной активности виртуальных машин. Массовый запуск, обновление операционных систем и работа нескольких требовательных приложений могут создавать кратковременные увеличения нагрузки.

При оценке подключения важно учитывать обычную работу виртуальных машин и поведение хранилища в периоды высокой активности. Стабильная работа одного сервера еще не подтверждает, что сеть выдержит суммарную нагрузку всего кластера.

Для передачи больших объемов данных и резервного копирования

В задачах резервного копирования часто требуется передать значительный объем информации за ограниченное время.

Например, компания может выделять для создания копий ночные часы, чтобы снизить влияние на рабочие приложения. Здесь необходимо учитывать способ хранения резервных копий. Некоторые программы позволяют записывать их на сервер, которому СХД предоставляет блочный том через Fibre Channel или iSCSI. Такой вариант поддерживается, в частности, Veeam Backup & Replication.

При этом FC и iSCSI применяются только на соответствующем участке инфраструктуры. Данные от защищаемых серверов могут поступать другими способами, а программа резервного копирования дополнительно обрабатывает их перед записью.

Fibre Channel подойдет, если сервер резервного копирования уже имеет доступ к выделенной сети хранения и может использовать ее ресурсы для передачи данных. В такой схеме обмен с СХД проходит отдельно от обычной сети Ethernet.

iSCSI можно использовать для записи резервных копий на внешний блочный том через Ethernet. Важно учитывать, какой объем данных сеть должна передать за отведенное время и какие другие приложения используют те же соединения.

Скорость создания копий зависит также от производительности исходных систем и самого хранилища. Например, медленное чтение с защищаемого сервера может ограничивать выполнение задания даже при достаточной пропускной способности сети.

Отдельная задача — восстановление данных. Во время восстановления информация движется от хранилища копий к целевой системе. Для него могут потребоваться другие показатели скорости, особенно если необходимо вернуть в работу большой объем данных за короткий срок.

Таким образом, при сравнении FC и iSCSI для резервного копирования следует учитывать продолжительность создания копий и требования к восстановлению. Оценка должна охватывать весь путь передачи данных, включая участки, которые не используют выбранную технологию подключения.

Для нескольких приложений с разным характером нагрузки

Одна СХД может одновременно обслуживать базы данных, виртуальные машины и другие корпоративные приложения. У каждой системы свои требования к скорости обмена. При совместной работе они используют общие ресурсы хранилища.

Предположим, база данных постоянно выполняет небольшие операции записи, а другая система переносит крупные файлы. Если нагрузка возрастает, интенсивный обмен одного приложения может повлиять на время ответа другого.

При использовании Fibre Channel обмен с хранилищем отделен от обычной сети Ethernet. Однако серверы могут использовать общие соединения, порты СХД и ресурсы ее контроллеров. Поэтому специализированная сеть сама по себе не исключает взаимного влияния приложений.

При использовании iSCSI необходимо учитывать распределение нагрузки в Ethernet. Если обмен с СХД и другие потоки данных проходят через общие соединения, их активность может влиять на доступную пропускную способность. Степень влияния зависит от организации сети и возможностей оборудования.

Конкуренция возникает и внутри самой системы хранения. Например, несколько приложений могут одновременно обращаться к общим накопителям или использовать ресурсы одного контроллера.

Для подобных ситуаций некоторые корпоративные СХД поддерживают управление производительностью отдельных томов. Такие механизмы позволяют ограничивать интенсивность операций одной нагрузки или выделять ресурсы более требовательному приложению. Набор доступных функций зависит от модели хранилища.

При смешанной нагрузке полезно оценивать работу приложений одновременно. Проверка каждой системы по отдельности может не выявить ограничений, которые возникают при совместном использовании ресурсов.

Для уже работающей инфраструктуры важно определить, где именно возникает конкуренция: в сети передачи данных или внутри СХД. Если Ethernet обеспечивает необходимую производительность, переход на Fibre Channel может оказаться избыточным. Если сеть хранения FC уже развернута, стоит проверить возможность подключения новых приложений без ухудшения работы существующих систем.

Выбор технологии должен учитывать наиболее требовательные приложения и их совместную работу. Это поможет определить, какие возможности подключения действительно нужны для текущей нагрузки и ее дальнейшего роста.

Какое оборудование требуется для подключения СХД

Способ подключения определяет, какие адаптеры и порты нужны серверу и системе хранения. Для Fibre Channel используют специализированные сетевые компоненты, а iSCSI работает через Ethernet. В обоих случаях сервер может соединяться с СХД напрямую или через коммутатор, если оборудование поддерживает выбранную схему.

Разберем состав каждого варианта и требования к совместимости.

Оборудование для Fibre Channel

На стороне сервера за обмен данными отвечает адаптер Fibre Channel, или FC HBA (Host Bus Adapter). Обычно он представляет собой отдельную плату с одним или несколькими портами. Через них сервер соединяется с сетью хранения.

СХД также должна иметь порты FC. Они могут находиться непосредственно на контроллерах или предоставляться дополнительными модулями. Конструкция зависит от модели хранилища.

В корпоративных инфраструктурах устройства обычно соединяют через коммутаторы Fibre Channel. Один коммутатор может обслуживать несколько серверов и СХД. Например, к нему подключают два физических сервера, каждый из которых получает доступ к выделенным логическим томам хранилища.

Некоторые системы поддерживают прямое соединение без коммутатора. Такая возможность есть у Dell PowerVault ME5. В этом случае серверный адаптер подключается непосредственно к порту СХД. Однако количество соединений ограничено доступными портами оборудования.

Для передачи данных в сетях FC обычно используют оптоволоконные кабели и оптические приемопередатчики. Последние устанавливают в соответствующие порты адаптеров и коммутаторов. Они преобразуют электрические сигналы в оптические и обратно.

Скорость и допустимая длина соединения зависят от характеристик портов, приемопередатчиков и кабеля.

Например, Dell PowerVault ME5 поддерживает Fibre Channel на скоростях 16 и 32 Гбит/с. Для каждого режима необходимо использовать совместимые компоненты из документации производителя.

Таким образом, для подключения через Fibre Channel серверу требуется FC HBA, системе хранения — соответствующие порты, а для передачи данных — совместимые кабели и приемопередатчики. Коммутатор нужен в тех конфигурациях, где устройства объединяют через сеть хранения.

Оборудование для iSCSI

Для iSCSI применяют сетевые адаптеры Ethernet. Они могут быть встроены в сервер или установлены отдельно. Команды обращения к хранилищу передает программный инициатор, который работает в операционной системе или гипервизоре.

Серверу не обязательно иметь специализированный адаптер хранения. Можно использовать совместимую сетевую плату Ethernet, если ее характеристики отвечают требованиям выбранной конфигурации.

На стороне СХД нужны порты с поддержкой iSCSI. Здесь важно различать интерфейсы передачи данных и порты управления. Последние предназначены для настройки и обслуживания хранилища и не обязательно позволяют подключать блочные тома.

Обычно серверы соединяют с системой хранения через коммутаторы Ethernet. Прямое подключение тоже возможно для поддерживаемых конфигураций. Например, Dell PowerVault ME5 допускает оба способа.

Тип соединительного кабеля зависит от портов оборудования:

• RJ-45. Используют медные кабели соответствующей категории. Они должны поддерживать необходимую скорость и длину линии.
• SFP+ и SFP28. Применяют совместимые оптические приемопередатчики и кабели. В Ethernet-инфраструктуре эти интерфейсы часто используют для соединений на 10 и 25 Гбит/с соответственно.
• DAC (Direct Attach Copper). Медные кабели прямого подключения с установленными на концах соединителями. Для них не нужны отдельные оптические приемопередатчики. Подходят только кабели, которые поддерживают оба соединяемых устройства.

Например, в линейке Dell PowerVault ME5 предусмотрены исполнения с портами iSCSI 10GBASE-T для медного соединения через RJ-45 и варианты с интерфейсами 10/25 GbE. Конкретный тип подключения зависит от исполнения контроллеров.

Помимо физических соединений, для iSCSI необходима настройка IP-сети. Сервер и СХД должны иметь сетевые адреса, а инициатор — возможность устанавливать соединение с целевым узлом хранилища.

Подробный порядок настройки зависит от операционной системы и модели СХД. На этапе выбора оборудования достаточно убедиться, что все участники поддерживают нужный способ подключения.

Совместимость серверов, сетевых устройств и СХД

Перед закупкой необходимо проверить всю цепочку соединения. Совпадение скорости портов или типа разъема еще не гарантирует совместимость оборудования.

Например, FC и Ethernet могут использовать внешне похожие приемопередатчики. Однако каждый модуль рассчитан на определенную технологию передачи данных. Модуль Fibre Channel нельзя считать совместимым с Ethernet только из-за одинакового разъема.

Для проверки конфигурации необходимо:

1. Установить поддерживаемые протоколы СХД. Уточнить точную модель, исполнение контроллеров и доступные порты. Возможности разных модификаций одной линейки могут отличаться.
2. Сверить адаптеры сервера. Проверить модель, скорость, драйверы и версии встроенного программного обеспечения. Для FC особенно важно соответствие адаптера требованиям производителя хранилища и сервера.
3. Уточнить совместимость программного обеспечения. Проверить поддержку операционной системы или гипервизора и необходимых компонентов для работы с FC либо iSCSI.
4. Сопоставить характеристики коммутаторов и портов. Они должны поддерживать выбранную технологию и требуемые режимы соединения.
5. Подобрать кабели и приемопередатчики. Учесть тип разъема, скорость, длину линии и перечень компонентов, которые производитель разрешает использовать с конкретным оборудованием.

Производители корпоративных СХД публикуют таблицы совместимости.

Например, Dell предоставляет такой документ для PowerVault ME5. В нем перечислены проверенные адаптеры Fibre Channel, программные инициаторы iSCSI, кабели, приемопередатчики и операционные системы.

У NetApp для аналогичных проверок используется Interoperability Matrix Tool. С его помощью можно сверить совместимые сочетания платформ, протоколов, адаптеров, драйверов и версий программного обеспечения.

Важно! Список совместимых компонентов СХД может отличаться от перечня оборудования, которое поддерживает производитель сервера. Поэтому при подборе конфигурации нужно сверять требования обеих сторон.

Особое внимание стоит уделить существующей инфраструктуре. Например, сервер уже может иметь подходящий адаптер Ethernet, но СХД должна поддерживать iSCSI через соответствующие порты. Для Fibre Channel потребуется проверить наличие FC HBA и возможность соединения с выбранным хранилищем.

После проверки можно определить, какие компоненты уже подходят для подключения и что потребуется добавить или заменить. Это позволит подготовить техническую спецификацию с учетом реальной совместимости оборудования.

Как обеспечить отказоустойчивость и защитить доступ к СХД

Если сервер подключен к СХД только одним путем, отказ сетевого соединения может остановить чтение и запись данных. Резервные пути позволяют сохранить доступ при сбое отдельного компонента. При этом необходимо ограничивать круг серверов, которым разрешено работать с логическими томами хранилища.

Для Fibre Channel и iSCSI действуют общие принципы отказоустойчивости, но способы организации соединений и управления доступом различаются.

Как организуют резервные соединения

Для защиты от отказа отдельного сетевого компонента сервер подключают к СХД несколькими независимыми путями. Если один перестает работать, другой должен обеспечивать доступ к тому же хранилищу.

В инфраструктуре Fibre Channel обычно создают две отдельные сети хранения. Каждая имеет собственные коммутаторы и кабельные соединения. Сервер подключается к обеим сетям, а СХД предоставляет ему доступ через соответствующие порты.

Например, если один FC-коммутатор выходит из строя, связь с хранилищем сохраняется через вторую сеть. Однако это возможно только при правильной настройке всех компонентов.

Для iSCSI применяют похожий принцип. Сервер соединяют с хранилищем через независимые сетевые пути Ethernet. В отказоустойчивой конфигурации для них используют разные сетевые адаптеры и коммутаторы. Это снижает риск одновременной потери всех соединений.

Особое внимание нужно уделять общим точкам отказа.

Например, два кабеля могут подключаться к одному коммутатору. При его неисправности оба соединения станут недоступны. Поэтому количество кабелей само по себе не определяет надежность подключения.

Важно! В двухконтроллерных СХД резервные пути обычно организуют с учетом портов обоих контроллеров. Это позволяет использовать возможности отказоустойчивости самого хранилища, если его архитектура поддерживает необходимый режим работы.

При этом резервирование сети защищает прежде всего от проблем на участке между сервером и СХД. Для сохранения доступа при отказе контроллера или других внутренних компонентов хранилище должно иметь собственные механизмы отказоустойчивости.

Как MPIO управляет несколькими путями

Операционная система должна понимать, что несколько соединений ведут к одному логическому тому. Для этого используют MPIO (Multipath I/O) — механизм управления несколькими путями ввода-вывода.

Предположим, сервер подключен к одному тому СХД через два независимых соединения. MPIO объединяет их с точки зрения операционной системы: сервер работает с одним блочным устройством и может обращаться к нему через доступные пути.

При отказе одного соединения MPIO позволяет продолжить обмен через другое. В зависимости от настроек и возможностей хранилища пути могут использоваться одновременно либо часть из них остается резервной.

Для некоторых СХД важен механизм ALUA (Asymmetric Logical Unit Access). Он сообщает серверу, какие пути обеспечивают предпочтительный доступ к тому. MPIO использует эту информацию при выборе соединения.

Например, в двухконтроллерной системе один контроллер может предоставлять более предпочтительный путь к определенному тому. ALUA позволяет серверу учитывать эту особенность и правильно направлять запросы.

Поддержка MPIO предусмотрена в Windows Server, Linux и VMware ESXi. Однако параметры переключения зависят от операционной системы, драйверов и модели СХД. Для некоторых хранилищ производитель рекомендует собственные компоненты или определенные правила выбора путей.

Важно! MPIO не гарантирует мгновенного переключения при любом сбое. Если рабочее соединение пропадает, серверу может потребоваться время, чтобы обнаружить проблему и перенаправить запросы. Приложения в этот момент способны испытывать задержки.

Поэтому необходимо учитывать не только наличие резервных соединений, но и то, как конкретная конфигурация обрабатывает их отказ.

Как ограничивают доступ к данным

Резервирование обеспечивает доступность хранилища, но не решает вопрос разграничения прав. Если к СХД подключены несколько серверов, каждый должен получать доступ только к разрешенным логическим томам.

В сетях Fibre Channel для ограничения взаимодействия устройств применяют зонирование.

Администратор настраивает зоны на FC-коммутаторах и определяет, какие порты серверов могут устанавливать соединение с портами хранилища.

Для настройки часто используют WWPN (World Wide Port Name) — идентификатор порта Fibre Channel. Он позволяет указать конкретный порт устройства независимо от того, к какому разъему коммутатора тот подключен.

Например, серверу с корпоративной базой данных разрешают соединение с необходимыми портами СХД. Порты других серверов в эту зону не включают. В результате сеть ограничивает взаимодействие между устройствами.

Однако зонирование управляет соединениями, а права на конкретные логические тома задают на стороне СХД.

При использовании iSCSI доступ ограничивают средствами IP-сети и настройками самого хранилища.

Для соединений с СХД можно выделить отдельные сетевые сегменты. Например, VLAN (Virtual Local Area Network) позволяет логически отделить обмен с хранилищем от остального трафика Ethernet. Дополнительно сетевое оборудование может ограничивать подключения к адресам СХД.

Для проверки подлинности инициаторов iSCSI поддерживает протокол CHAP (Challenge Handshake Authentication Protocol).

При установлении соединения система хранения проверяет, располагает ли инициатор необходимыми учетными данными. Это позволяет ограничить подключение устройств, которые не прошли проверку.

В некоторых конфигурациях доступна взаимная проверка CHAP. Тогда сервер также удостоверяется в подлинности хранилища.

При этом CHAP отвечает за проверку подлинности, но не шифрует передаваемые данные. Сегментация сети через VLAN тоже не обеспечивает шифрование. Если проект предусматривает защиту информации при передаче, потребуется отдельно подобрать совместимые средства, например IPsec при его поддержке обеими сторонами.

Независимо от технологии подключения права на тома настраивают в самой СХД. Для этого используют идентификаторы серверных инициаторов:

• WWPN — идентификатор порта Fibre Channel.
• IQN (iSCSI Qualified Name) — имя инициатора iSCSI.

Администратор указывает, каким инициаторам разрешен доступ к определенным томам. Например, пространство для бухгалтерской базы данных предоставляют серверу, на котором работает соответствующее приложение. Остальные узлы не должны видеть этот том без отдельного разрешения.

Особого внимания требует совместный доступ нескольких серверов к одному блочному устройству. Обычная файловая система может не поддерживать одновременную запись с разных узлов. Для подобной работы нужны специальные механизмы кластерного программного обеспечения. Без них существует риск повреждения данных.

Как проверить работу резервирования и защиты

После настройки необходимо убедиться, что сервер видит все предусмотренные пути к хранилищу и правильно использует их.

Для проверки отказоустойчивости контролируют состояние MPIO и проводят испытания с отключением отдельных соединений. Например, в тестовой среде или согласованное время отключают один из резервируемых путей и проверяют, сохраняется ли доступ к логическому тому.

Затем соединение восстанавливают и проверяют, возвращается ли система к предусмотренному режиму работы. Важно оценить сообщения об ошибках, время переключения и поведение приложений.

Испытания необходимо проводить по рекомендациям производителя оборудования. Неправильное отключение компонентов в работающей инфраструктуре может привести к остановке приложений.

Отдельно проверяют настройки доступа. Для Fibre Channel сверяют состав зон и список серверов, которым предоставлены логические тома. Для iSCSI контролируют доступность сетевых соединений, параметры проверки подлинности и разрешения на стороне СХД.

Например, сервер виртуализации должен видеть предназначенные ему тома. Доступ к пространству другой системы должен оставаться ограниченным, если совместная работа не предусмотрена конфигурацией.

Регулярная проверка помогает обнаружить потерю резервного пути или ошибку в настройках до того, как она приведет к нарушению работы. При этом необходимо учитывать состояние всех компонентов: сервера, сети и самой СХД.

Для Fibre Channel основными средствами остаются независимые сети хранения, MPIO, зонирование и разграничение доступа к томам. В инфраструктуре iSCSI применяют резервные соединения Ethernet, MPIO, сетевую изоляцию и проверку подлинности. Надежность обеих схем зависит от согласованной работы этих механизмов.

Сколько стоит внедрение и обслуживание

Расходы на Fibre Channel и iSCSI зависят от существующей инфраструктуры, количества серверов и требований к надежности соединений. Компания может использовать часть установленного оборудования или создавать сеть хранения с нуля. Разница в объеме закупок напрямую влияет на бюджет проекта.

При расчете важно учитывать затраты на внедрение, дальнейшее обслуживание и возможное расширение. Дешевое подключение на старте не всегда означает меньшие расходы за весь срок эксплуатации.

Первоначальные затраты на Fibre Channel

Создание новой сети Fibre Channel требует специализированного оборудования. В стоимость проекта входят серверные адаптеры FC, коммутаторы, кабели и оптические приемопередатчики. Их количество зависит от числа подключаемых устройств и выбранной схемы соединений.

Если компания планирует две независимые сети хранения для резервирования, ей потребуются отдельные коммутаторы и соединения. Это увеличивает бюджет по сравнению с подключением через один коммутатор. При расчете необходимо учитывать количество доступных портов и возможность дальнейшего расширения.

У некоторых моделей FC-коммутаторов дополнительные порты активируются по лицензии. Например, Cisco использует такой механизм в ряде устройств серии MDS. Поэтому при покупке важно уточнять количество портов, доступных в базовой комплектации, и условия их расширения.

Для небольших конфигураций возможен другой вариант. Некоторые СХД поддерживают прямое подключение серверов без коммутаторов Fibre Channel.

Например, такая возможность предусмотрена в Dell PowerVault ME5. Это позволяет сократить расходы на сетевое оборудование, но количество подключаемых серверов будет ограничено портами хранилища.

Если сеть FC уже работает, первоначальные затраты могут оказаться значительно ниже.

Например, компания добавляет сервер к существующей СХД. При наличии свободных портов и достаточной производительности сети потребуется приобрести совместимый адаптер и необходимые компоненты соединения. Покупка дополнительных коммутаторов может не понадобиться.

Затраты на расширение действующей инфраструктуры поэтому нужно рассчитывать отдельно от стоимости создания новой сети. Сравнение этих сценариев по одной общей цене будет некорректным.

Стоимость подключения через iSCSI

iSCSI позволяет использовать сетевую инфраструктуру Ethernet. Если серверы и коммутаторы поддерживают необходимую скорость, часть оборудования уже может быть доступна для подключения СХД.

Например, в Windows Server предусмотрен программный инициатор iSCSI. Он позволяет организовать обмен с хранилищем через совместимый сетевой адаптер Ethernet без отдельной платы FC.

Однако использование существующей сети не всегда позволяет обойтись без новых закупок.

Предположим, компания планирует подключить СХД через порты 25 Гбит/с, а установленные коммутаторы поддерживают только более медленные соединения. Для реализации проекта придется обновить сетевое оборудование или организовать отдельный участок сети с необходимыми характеристиками.

Дополнительные расходы возможны и при организации резервных соединений. Если проект предусматривает независимые сетевые пути, потребуется достаточное количество адаптеров, портов и коммутаторов. Их наличие необходимо учитывать в бюджете.

Стоимость также зависит от исполнения самой СХД. Например, Dell PowerVault ME5 выпускается с различными интерфейсами подключения. Поэтому при сравнении следует учитывать цену конкретной конфигурации хранилища, а не только расходы на сеть.

На практике возможны две ситуации:

• В компании уже есть подходящая сеть Ethernet. Для iSCSI могут потребоваться минимальные изменения существующей инфраструктуры.
• Сеть необходимо существенно модернизировать. Закупка новых коммутаторов, адаптеров и кабельных соединений увеличит первоначальные расходы.

При этом iSCSI не требует обязательного отказа от уже используемой корпоративной сети. Для обмена с хранилищем можно задействовать подходящие ресурсы Ethernet, если их характеристик достаточно и такая схема отвечает требованиям проекта.

Расходы на настройку и обслуживание

После закупки оборудования специалисты должны настроить соединения между серверами и СХД. В стоимость внедрения входят подготовка сетевой конфигурации, разграничение доступа и проверка работы резервных путей.

Объем работ зависит от масштаба инфраструктуры. Подключение одного сервера к действующей системе обычно требует меньше изменений, чем развертывание новой сети хранения для нескольких серверных узлов.

У каждой технологии есть свои особенности настройки. Для Fibre Channel специалисты работают с конфигурацией FC-коммутаторов и зонами доступа. При использовании iSCSI они настраивают IP-соединения, инициаторы и соответствующие сетевые параметры.

Если компания меняет действующий способ подключения, в бюджет могут войти дополнительные работы. Например, перенос данных на новую СХД требует подготовки, проверки совместимости приложений и испытаний после переключения.

После запуска инфраструктура нуждается в техническом сопровождении. Основные расходы связаны со следующими задачами:

• Поддержка оборудования. Диагностика неисправностей, ремонт и замена компонентов в соответствии с условиями сервисного договора.
• Обновление программного обеспечения. Проверка совместимости и установка поддерживаемых версий драйверов и встроенного ПО.
• Контроль состояния системы. Мониторинг доступности соединений, ошибок портов и загрузки сетевых ресурсов.
• Изменение конфигураций. Подключение новых серверов, расширение сети и устранение возникающих проблем.

На стоимость сопровождения могут влиять дополнительные сервисы производителя.

Например, для использования Dell AIOps с хранилищами PowerVault ME5 необходим договор ProSupport. Этот сервис предоставляет возможности централизованного наблюдения за состоянием инфраструктуры. При этом требование к ProSupport относится к указанному сервису, а не ко всем встроенным средствам мониторинга СХД.

Стоит учитывать и опыт сотрудников. Если специалисты компании уже обслуживают сеть FC, ее дальнейшее развитие может потребовать меньше времени на освоение оборудования. При переходе на новую технологию могут понадобиться обучение или помощь подрядчика.

iSCSI использует знакомые сетевым администраторам механизмы Ethernet и TCP/IP. Однако поиск причин задержек и ошибок при работе с блочным хранилищем требует знаний о серверных системах и СХД. Поэтому расходы на сопровождение нельзя оценивать только по типу сети.

Как рассчитать полную стоимость подключения

Для сравнения Fibre Channel и iSCSI следует выбрать одинаковый расчетный период. Например, компания может использовать срок, на который планирует эксплуатацию или обновление серверной инфраструктуры.

Затем необходимо определить четыре основные группы расходов.

Полную стоимость за выбранный период можно рассчитать по формуле:

Полная стоимость = первоначальная закупка + внедрение + обслуживание за расчетный период + запланированное расширение.

При этом нужно учитывать только дополнительные затраты, необходимые для рассматриваемого варианта.

Например, если подходящий Ethernet-коммутатор уже установлен и его ресурсов достаточно, повторно включать его полную покупную стоимость в бюджет нового проекта не требуется.

Для наглядности рассмотрим две ситуации.

Компания расширяет действующую сеть Fibre Channel. В инфраструктуре есть свободные порты коммутаторов, а СХД поддерживает подключение дополнительных серверов. Основные расходы могут приходиться на серверные адаптеры, соединительные компоненты и настройку. В подобной ситуации сохранение FC способно оказаться экономически выгоднее перехода на другую технологию.

Компания впервые подключает внешнюю СХД. В серверной уже работает Ethernet с необходимой пропускной способностью и возможностью организовать резервные соединения. При использовании iSCSI можно задействовать часть имеющихся ресурсов. Создание отдельной сети Fibre Channel потребовало бы дополнительных закупок.

Оба примера показывают, насколько сильно итоговая стоимость зависит от начальных условий. Универсальной разницы в цене между FC и iSCSI нет.

При сравнении необходимо также учитывать одинаковые требования к отказоустойчивости.

Например, две независимые сети FC нельзя напрямую сопоставлять по стоимости с iSCSI через единственный коммутатор. При отказе оборудования эти конфигурации будут вести себя по-разному.

Отдельного расчета требует дальнейший рост. Если компания планирует подключать новые серверы, следует заранее оценить доступность свободных портов, стоимость их расширения и дополнительные расходы на обслуживание.

В результате расчет покажет стоимость подключения на протяжении всего срока эксплуатации, включая уже доступные ресурсы и необходимые новые вложения. На этой основе можно оценить экономическую целесообразность Fibre Channel и iSCSI для конкретной инфраструктуры.

Как выбрать подключение СХД перед закупкой

Перед закупкой необходимо определить, какой способ подключения соответствует задачам компании и возможностям ее инфраструктуры. Для этого потребуется собрать сведения о серверах, установить требования к работе хранилища и проверить совместимость компонентов.

Результаты проверки должны войти в техническое задание. Это позволит сравнить предложения поставщиков по единым критериям и заранее согласовать условия приемки оборудования.

Какие исходные данные собрать

Начните с перечня серверов, которые будут работать с СХД. Укажите их модели, установленные сетевые адаптеры, операционные системы и гипервизоры. Для действующей инфраструктуры также потребуются сведения о коммутаторах и доступных портах.

Затем определите, какие приложения будут использовать хранилище. Для каждой системы важно знать объем данных, характер нагрузки и допустимые задержки. Если оборудование уже работает, необходимые показатели можно получить из средств мониторинга.

Особое внимание стоит уделить периодам максимальной активности. Например, средняя нагрузка на сервер может оставаться небольшой, но во время массового запуска виртуальных машин количество обращений к СХД существенно увеличивается. Подобные изменения необходимо учитывать при подготовке требований.

Для нового проекта, где фактических измерений пока нет, можно использовать сведения от разработчиков программного обеспечения и предварительную оценку нагрузки. До согласования закупки нужно определить, как эти предположения будут проверяться.

Также уточните планы развития инфраструктуры. Компания может планировать подключение дополнительных серверов, увеличение числа виртуальных машин или перенос новых приложений на внешнее хранилище. Эти изменения влияют на необходимое количество соединений и запас производительности.

В результате должны быть известны:

• Количество подключаемых серверов и их программная конфигурация.
• Характеристики существующей сети и доступные ресурсы.
• Требования приложений к производительности и доступности данных.
• Ожидаемый рост нагрузки и числа подключений.
• Ограничения по срокам внедрения и допустимым перерывам в работе.

Эти сведения станут основой для сравнения вариантов Fibre Channel и iSCSI.

Как сравнить Fibre Channel и iSCSI

Сначала определите, какие варианты технически возможны.

Например, действующая СХД может поддерживать только один способ подключения. В другом проекте оборудование допускает оба варианта, и компания может выбрать подходящий.

Для корректного сравнения подготовьте конфигурации с одинаковыми требованиями к производительности, отказоустойчивости и расширению. Они должны обслуживать одно и то же количество серверов и обеспечивать доступ к одинаковым объемам данных.

Fibre Channel стоит рассмотреть в первую очередь, когда компания располагает действующей сетью FC, которая поддерживает подключение нового оборудования. При этом необходимо проверить свободные ресурсы и совместимость выбранной СХД.

iSCSI имеет смысл оценить, когда инфраструктура Ethernet уже соответствует требованиям проекта или ее можно модернизировать без существенных изменений. Использование существующих сетевых компонентов способно уменьшить объем закупок.

Важно! При создании новой инфраструктуры с нуля потребуется рассчитать оба варианта. Учитывайте необходимое оборудование, стоимость внедрения и расходы на дальнейшую эксплуатацию.

Отдельного внимания требуют проекты с высокими требованиями к времени ответа приложений. Здесь нельзя ориентироваться на общие утверждения о преимуществах FC или iSCSI. Для объективного сравнения нужны характеристики конкретных конфигураций и результаты испытаний при сопоставимой нагрузке.

Например, поставщик может предложить СХД с портами Fibre Channel и альтернативное исполнение с iSCSI. Само наличие интерфейсов определенной скорости еще не подтверждает, что оба решения обеспечат одинаковое время ответа. Необходимо оценить работу всей системы, включая контроллеры, накопители и сетевые соединения.

Когда оба варианта удовлетворяют техническим требованиям, можно сравнить их полную стоимость за планируемый срок эксплуатации. Если один из них требует модернизации действующей инфраструктуры, соответствующие затраты должны входить в расчет.

Такой подход позволяет принимать решение по характеристикам проекта, а не по предполагаемому превосходству одной технологии.

Что указать в техническом задании

После предварительного выбора необходимо зафиксировать требования к поставляемому решению. Формулировки должны позволять проверить оборудование после установки.

Например, требование «обеспечить высокую скорость работы СХД» слишком общее. Оно не определяет, какую производительность ожидает компания и при каких условиях ее будут измерять.

В техническом задании лучше использовать конкретные параметры.

Значения производительности следует определять по реальным потребностям компании.

Например, можно установить допустимую задержку для определенной рабочей нагрузки и необходимую скорость передачи данных.

При этом важно согласовать условия измерений. Результат проверки будет зависеть от характера чтения и записи, размера операций и количества одновременно работающих приложений. Без этих сведений заявленные показатели могут оказаться несопоставимыми.

Отдельно укажите требования к отказоустойчивости.

Например, проект может предусматривать сохранение доступа к данным при отказе одного сетевого соединения. В техническом задании необходимо определить, какие компоненты входят в проверяемую схему и какой результат считается допустимым.

Для существующей инфраструктуры стоит зафиксировать и ограничения. Компания может планировать сохранить действующие серверы, коммутаторы или операционные системы. Поставщик должен учитывать их характеристики при подготовке конфигурации.

Техническое задание также должно предусматривать возможность расширения.

Например, если через два года компания намерена подключить дополнительные серверы, необходимо заранее определить, какой запас ресурсов потребуется.

Как проверить предложение поставщика

После получения коммерческого предложения необходимо сопоставить его с техническим заданием. Обратите внимание на точные модели оборудования, состав комплектующих и поддерживаемые варианты подключения.

В предложении должны быть указаны компоненты, необходимые для реализации согласованной схемы. Наличие подходящих портов у СХД еще не подтверждает, что остальные устройства и программное обеспечение будут совместимы.

Для проверки полезно запросить следующие документы:

1. Спецификация оборудования. В ней должны быть перечислены модели, количество устройств, интерфейсы, дополнительные модули и необходимые лицензии. Это позволит проверить полноту комплектации.
2. Схема подключения. На ней должны быть обозначены серверы, коммутаторы, порты СХД и предусмотренные резервные пути. По схеме можно определить, соответствует ли решение требованиям к доступности данных.
3. Подтверждение совместимости. Поставщик должен указать, на основании какой документации выбраны оборудование и программные компоненты. Например, для систем NetApp можно использовать Interoperability Matrix Tool, а для Dell PowerVault ME5 — официальную таблицу совместимости.
4. Условия технической поддержки. Необходимо уточнить сроки и порядок обслуживания, а также состав услуг, включенных в предложение. Это поможет оценить возможности сопровождения системы после ввода в эксплуатацию.
5. Порядок приемочных испытаний. До поставки нужно согласовать перечень проверок и показатели, которые оборудование должно продемонстрировать после установки.

Особенно важно различать характеристики отдельных устройств и возможности всей конфигурации.

Например, таблица совместимости производителя подтверждает поддержку определенного сочетания компонентов, но сама по себе не гарантирует выполнение заданных требований к производительности.

Если поставщик указывает результаты испытаний, уточните, на каком оборудовании они получены и какую нагрузку использовали. Данные для другой конфигурации можно использовать как ориентир, но окончательные показатели необходимо подтвердить для выбранного решения.

Как проверить результат после установки

Критерии приемки следует согласовать до закупки. Тогда после монтажа компания сможет оценить работу системы по заранее установленным условиям.

Проверка должна охватывать несколько направлений.

1. Доступность данных. Серверы должны обнаруживать назначенные им логические тома и выполнять разрешенные операции чтения и записи. При этом доступ к чужим томам должен оставаться ограниченным.
2. Производительность. Специалисты проверяют согласованные показатели при установленной нагрузке. Результаты сопоставляют с требованиями технического задания. Условия измерения необходимо зафиксировать в протоколе испытаний.
3. Работа резервных соединений. В соответствии с документацией производителя проверяют поведение системы при отказе предусмотренных компонентов. Испытания должны показать, сохраняется ли доступ к хранилищу и как приложения реагируют на переключение путей.
4. Восстановление нормальной работы. После возвращения соединений проверяют состояние оборудования, доступность путей и наличие ошибок. Конфигурация должна вернуться в предусмотренный режим работы.

Испытания, связанные с отключением оборудования, необходимо проводить в согласованных условиях. Для действующей инфраструктуры особенно важно заранее оценить риск влияния на приложения и выбрать подходящее время.

Вопросы и ответы