[PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ......

43
© 2009 IBM Corporation IBM Systems & Technology Group Виртуализация Power VM в кластерах IBM PowerHA для AIX Валерий Груздев Отдел продаж IBM POWER Systems Power Systems Technical Sales Manager Russia & CIS [email protected]

Transcript of [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ......

Page 1: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

© 2009 IBM Corporation

IBM Systems & Technology Group

Виртуализация Power VM в кластерах IBM

PowerHA для AIX

Валерий ГруздевОтдел продаж IBM POWER SystemsPower Systems Technical Sales Manager Russia & [email protected]

Page 2: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Focus on Innovation

System zPower Systems System x BladeCenter Storage

VirtualizationProcessors Power EfficiencyRAS

IBMTechnologyLeadership

AIX

z\OS

IBMResearch

Security

Page 3: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

В середине 2008 был объявлен новый продукт IBM PowerHA

• IBM HACMP стал называться PowerHA

• Объединил решения для AIX, Linux, IBM i• IBM PowerHA™ for AIX® and Linux (formerly HACMP™)• IBM PowerHA for i (formerly HASM)

• Новые версии продукта 5.4, 5.4.1, 5.5

• Составная часть системных программных продуктов для IBM Power

• PowerHA включает в себя• поддержку новых функций

операционных систем

• Интеграцию с технологиямиIBM PowerVM

Page 4: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

IBM PowerHA for AIX vs IBM PowerVM

Существуют мнения, что:

• Решения PowerVM и PowerHA имеют противоположные цели

• С установкой продукта PowerHA надежность системы автоматически повышается

• Виртуализация PowerVM снижает надежность систеиы и приложений

• Решения HA снижают утилизацию оборудование за счет установки резервировных компонент и серверов

• Решения HA используют очень сложные сетевые технологии

• Технологии PowerVM несовместимы с PowerHA,

Цель данной презентации – разъяснить эти противорения

Page 5: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

IBM PowerHA™ for AIX® - не ... • ... «коробочное» программное обеспечение.• ... может магическим образом повысить доступность

системы сразу после установки ПО.

Основные положения IBM PowerHA

IBM PowerHA™ for AIX® - это ...• ... профессиональный, надежный отработанный инструмент

для создания высокодоступных решений.• технология, отработанная годами и реальными решениями.• простая интеграция с приложениями.• требует планирования и продуманного подхода.

IBM PowerHA™ for AIX® - обеспечивает ... • сокращение количества и времени простоев систем• сокращение затрат на обслуживание системы• целостность данных и безопасность системы• реализацию катастрофоустойчивое решение• и многое другое...

Page 6: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Основная задача при планировании HA решения - • Найти «ЕДИНУЮ ТОЧКУ ОТКАЗА» • Реализовать решение, которое исключает SPOF

Основные положения IBM PowerHA. SPOF.

Page 7: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

К счастью, для большинства решений не приходится «изобретать велосипед»PowerHA включает в себя простые алгоритмы для настройки стандартных высокодоступных решений

• Двухузловой кластер “Active-Passive”• Кластер “Mutual Takeover”

Достаточно • Подключить и скомутировать оборудование• Заполнить несколько простых форм...

Основные положения IBM PowerHA. SPOF.

Page 8: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Пример конфигурирования простого кластера PowerHA

RG1 (NodeA, NodeB)

NODE A NODE B

StorageSubsystem

Topology Components:• Cluster name• Node Names• IP Network

• Interfaces• Serial Network

Типы ресурсов кластера• Service IP• Volume Group/s• Application Server

Resource Components:• Resource Group/s

• Policies - startup - fallover - fallback

• Взаимозависимости RG• Parent / Child• Location

RG2 (NodeB)

Service IPVolume GroupDevelopment App

Cluster Name: Cluster 1

Network: net_ether0

Network: rs232_net

Network: diskhb_net

Service IPVolume GroupProduction App

Page 9: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Правила размещения приложений в кластере

RG1 (NodeA, NodeB)

NODE A NODE B

StorageSubsystem

RG2 (NodeB)

Service IPVolume GroupDevelopment App

Cluster Name: Cluster 1

Network: net_ether0

Network: rs232_net

Network: diskhb_net

Service IPVolume GroupProduction App

Location Dependencies:• RGs можно разместить на

одном узле• RGs можно разместить на

разных узлах

Можно выставить приоритеты для RG:

• High• Intermediate• Low

В нашем примереRG1 Production – High PriorityRG2 Development – Low Priority

В случае перемещения RG:• RG2 Offline• RG1 will move to Node B

Page 10: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Взаимная поддержка узлов. Mutual Fallover.

RG1 (NodeA, NodeB)

NODE A NODE B

StorageSubsystem

RG2 (NodeB, NodeA)

Service IPVolume GroupApplication 2

Cluster Name: Cluster 1

Network: net_ether0

Network: rs232_net

Network: diskhb_net

Service IPVolume GroupApplication 1

Environment:• На каждом узле работает

Production• Node A fails to Node B• Node B fails to Node A

Падение узла:• При падении одного узла и

перемещении RGs на другой узел возможно потребуются дополнительные вычислительные мощности – процессоры и память

RG2 (NodeB, NodeA)

Service IPVolume GroupApplication 2

RG1 (NodeA, NodeB)

Service IPVolume GroupApplication 1

ONLINE

ONLINE

Page 11: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Технологии IBM PowerVM позволяют автоматически перераспределять вычислительные мощности в случае срабатывания кластера PowerVM

Дополнительные вычислительные мощности

DLPAR – динамическое изменение конфигурации раздела

Prod

Develop

Test

PowerHA

AIX

InactiveCPUsProd

Standard serverProduction CoD server

PowerHAProduction T & D

StandBy

Резервный сервер может быть занят второстепенными задачами

Резервный сервер может иметь выключенные – неактивные ресурсы

PowerHA выдает команды активации ресурсов и их пере-распределения (в том числе и для чужих разделов)

On/Off CoD

Page 12: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Для работы DLPAR необходимо настроить связь между HMC и серверомФактически PowerHA посылает команды HMC, а HMC перераспределяет ресурсы.

Применения DLPAR для PowerHA.

# ssh hmc…

Allocate

Опция PowerHA DLPAR :• Универсальная. Используется для

процессоров и памяти.• Применяется для LPAR

с выделенными и с разделяемыми ресусрами.

• Работает с системами IBM Power4, Power5, Power6.http://www.ibm.com/common/ssi/rep_ca/3/897/ENUS208-313/ENUS208-313.PDF

Опция PowerHA DLPAR :• Требует настройки HMC. • HMC как SPOF ! Помогает Дублирование HMC.• Время переключение ресурсов может увеличиться.

Зависит от объема ресурсов, загрузки / занятости системы.Освобоздение ресурсов происходит дольше, чем назначение.

Page 13: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Основные свойства разделов с общим процессорным пулом.• Каждому разделу SPLPAR гарантируется процессорная мощность EC.

EC может быть дробной (от 0.1 до 1) x (кол-во VP).• Если раздел недогружен, неиспользуемая мощность отдается в общий пул.• Если в общем пуле есть свободные мощности, они раздаются

нуждающимся разделам, согласно выставленным приоритетам.• Перераспределение мощности происходит очень быстро, ок. 0.01 сек.

Дополнительные вычислительные мощности. SPLPAR

2-way (shared pool)4-way(dedicated)

2-way(dedicated)

HypervisorIBM p570 Server(8 процессоров)

Micro-partitioning

AIX 5.3 AIX 5.3 AIX 5.3

OracleDB2

WebSphereWebLogic

…..

OracleDB2

WebSphereWebLogic

…..

OracleDB2

WebSphereWebLogic

…..

SMT (off) SMT (off) SMT (on)SMT (off)SMT (on)

open source applications

Linux AIX 5.2

legacy application

LPAR 1LPAR 2LPAR 3LPAR 4LPAR 5

IBMSystem

p5

IBM

IBMSystem

p5

IBM

Entitled Capacity

Текущая мощность

Максимальная мощность

Page 14: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Технологии IBM PowerVM автоматически перераспределяют процессорные мощности для SPLPAR при повышении / понижении загрузки системы. Пример :

Prod

ProductionPowerHA

Резервный сервер может быть занят второстепенными задачами

Stand-ByProduct

При перемещении Продуктивной задачи АВТОМАТИЧЕСКИ отберет всю процессорную мощность EC, и даже больше...

T & D

LPAR Dedicated Capped VPs Ent.CapT & D Shared Uncapped 4 0.4Stand-By Shared Uncapped 4 3.4

Пример PowerHA & SPLPAR

Page 15: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Разделы LPAR с разделяемыми процессорами :• Автоматически перераспределяют процессорные мощности.• Перераспределение происходит почти мгновенно.• HMC не участвует в перераспределении.• Работает с системами IBM Power5, Power6.

Разделы LPAR с разделяемыми процессорами :• Перераспределяют только процессорную мощность – не память!• Используется только для SPLPAR. • Требует просчитанных настроек.• Требует PowerVM

Применения SPLPAR для PowerHA.

Page 16: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Active Memory Sharing - Позволяет эффективно обнениваться памятью между работающими разделами LPAR.

Production PowerHA

AMS позволяет подобно SPLPAR, автоматически, быстро перераспределятть оперативную память между разделами

Суммарный объем назначенной в разделы памяти может превышать общий объем памяти системы.

При переключении узлов кластера продуктивный раздел подключит «свою память» автоматически

Пример PowerHA & AMS

Если процессорная мощность легко передается из раздела в раздел (DLPAR, SPLPAR), то с памятью это не просто.Можно использовать либо :

• DLPAR – медленно, требует специальных действий, • Сразу выделить всю память – заморозить весь объем памяти

Prod8 CPU24GB

Stby4 CPU24GB

Develop4 CPU16GB

p570 32GB p570 32GB

VIOSVIOSSwap

Page 17: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

IBM PowerHA for AIX vs IBM PowerVM

Таким образом :

• Технологии PowerVM совместно с продуктами PowerHA :

• Позволяют эффективно перераспределять вычислительные ресурсы – процессоры и память.

• Консолидированные решения позволяют исключить простаивающие ресурсы.

Page 18: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Подключение дисковых систем

• Информация и Данные для приложений размещаются на внешнем дисковом массиве, доступном для всех узлов кластера.

• Поддерживаются массивы Fiber Channel, SCSI, SAS…http://www-03.ibm.com/systems/power/software/availability/aix/faq/index.html

• Основная задача при проектировании HA решения – исключить SPOF

• Multipathing (MPIO, SDDPCM, Powerpath, etc.)• RAID• Remote-…, Metro-…, Global-…, LVM-… MIRRORING.

Page 19: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

VIO client

Generic SCSI diskVirtual SCSI

Adapters

VIO client Generic

SCSI diskVirtual SCSIAdapters

VIO client Generic SCSI

disk Virtual SCSIAdapters

VIO client Generic SCSI

disk Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

PowerHA и PowerVM / VIOS

• В системе с несколькими LPAR удобно использовать VIOS для доступа к дискам – технология Virtual SCSI

VIOSvSCSI

FC Adapters

IBM 2105 LUNEMC 5000 LUN

SCSISAS

StorageVirtualiser

SAN

VIO client Generic SCSI disk

Virtual SCSIAdapters

IBM Power

• Дисковый массив подключается к VIOS (FC, SCSI, SAS…)

• VIOS раздает виртуальные диски по разделам

• Не требуется огромного количества PCI адаптеров

• Практически нет накладных расходов

• VIOS – SPOF !!!

IBMSystem p5

IBM

IBMSystem p5

IBM

• PowerHA поддерживает Virtual SCSI и Virtual Disks

Page 20: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

FRAME 1

AIX Client LPAR 4

VIO Server 2

vhost0

hdisk0(5GB) rootvg

hdisk1(72GB)

WholeDisk

Mapping(no_reserve)

VIO Server 1

vhost0

hdisk0(5GB) rootvg

hdisk1(72GB)

WholeDisk

Mapping(no_reserve)

Решения для виртуальных дисков

• Первый шаг – использовать 2 x VIOS для доступа к дисковым массивам.

• Драйвер MPIO в клиенте обеспечиват режим Multipath Failover для виртуальных дисков.

Hypervisor

AIX Client LPAR 3scsi0

hdisk0 rootvg

hdisk1 datavg

vscsi0

vscsi1

StorageSubsystem

MPIO

IBMSystem p5

IBM

IBMSystem p5

IBM

Page 21: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Решения для виртуальных дисков

• Узлы класткра могут располагаться в одном сервере как отдельные LPAR.

• Есть защита от выключения VIOS

• Нет защиты от выключения сервера

FRAME 1

Hypervisor

HACMP Node1

VIOS 2

VIOS 1 hdisk0

hdisk0 }sharedvg

STORAGESUBSYSTEM

hdisk0

hdisk0

MPIOvhost0 vscsi0

vscsi1

HACMP Node2

hdisk0 }sharedvgMPIO

vscsi0

vscsi1

vhost1

vhost0

vhost1

no_reserve

IBMSystem p5

IBM

IBMSystem p5

IBM

Page 22: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

FRAME 1

FRAME 2HACMP Node4

HACMP Node3

Решения для виртуальных дисков

• 2 x VIOS, 2 узла.

• Типичное решение 2-х узлового кластера с виртуальным вводом-выводом.

Hypervisor

HACMP Node1

VIOS 2

VIOS 1

hdisk0

hdisk0 }sharedvg

STORAGESUBSYSTEM

hdisk0

hdisk0

MPIO

vhost0

vhost0

vscsi0

vscsi1

no_reserve

Hypervisor

HACMP Node2

VIOS 2

VIOS 1 hdisk0 }sharedvg

hdisk0

hdisk0

MPIO

vhost0

vhost0

vscsi0

vscsi1no_reserve

IBMSystem p5

IBM

IBMSystem p5

IBM

IBMSystem p5

IBM

IBMSystem p5

IBM

Page 23: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

FRAME 1

FRAME 2HACMP Node4

HACMP Node3

Решения для виртуальных дисков

• Возможности AIX LVM Mirror попозволяют поддерживать синхронные копии данных для 2 дисковых массивов

Hypervisor

HACMP Node1

VIOS 2

VIOS 1 hdisk0

hdisk1STORAGESUBSYSTEM-1

MPIO

vhost0

vhost0

vscsi0

vscsi1

no_reserve

Hypervisor

HACMP Node2

VIOS 2

VIOS 1

hdisk0

hdisk0

MPIO

vhost0

vhost0

vscsi0

vscsi1no_reserve

hdisk1

hdisk0

STORAGESUBSYSTEM-2

hdisk0

hdisk1 hdisk0

hdisk0LVM Mirror

hdisk1

hdisk0LVM Mirror

Page 24: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Детали LVM Mirroring

AIXDB LVM

Mirror

AIX имеет встроенную отработанную технологию зеркалирования дисков – LVM Mirror. LVM использует различные политики чтения-записи:

• Параллельная или последовательная запись• Чтение всех копий или только одной и т.д

LVM Mirror очень часто используют в решениях HA из-за простоты реализации и надежной работы

SAN

100% I/O Wait

Особенности работы FC:• SAN (Network) «послал команду и жду ответа.• В случае сбоя в SAN время ожидания может

быть существенным.• Все операции ввода вывода замораживаются

до истечения тайм-аута.• После тайм-аута сбойный диск помечается как

MISSING и программа может продолжть работу.

Page 25: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Пример Multipathing или Лучшее враг Хорошего

VIOS VIOS

AIX

AIXDB

AIX

LVM Mirror

HACMP

• Проблемы из-за слишком большого количества путей. • Каждый LUN виден через 2 VIOS по 4 путям...

FC switch

FC switch

DS

VIOS VIOS

AIX

AIXDB

AIX

FC switch

FC switch

DS

При отключении DS ожидание I/O длится слишком долго и приводит к сбою в приложении

LVM Mirror

Page 26: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Пример Multipathing или Лучшее враг Хорошего

VIOS VIOS

AIX

AIXDB

AIX

LVM Mirror

HACMP

• Решение проблемы – уменьшить количество путей.• Каждый дисковый массив виден через «свой» VIOS

FC switch

FC switch

DS

VIOS VIOS

AIX

AIXDB

AIX

FC switch

FC switch

DS

При отключении DS время ожидание I/O не превышает 40-60 сек.

После паузы приложение успешно продолжает работу.

LVM Mirror

Page 27: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Cross-Site LVM Mirroring

PowerHA 5.5 включает новую опцию – Cross-Site LVM Mirroring• Узлы кластера находятся на удаленных площадках• Дисковые массивы привязываются к площадкам.• PowerHA следит за состоянием копий зеркала LVM Mirror• В случае нарушения зеркальных копий PowerHA автоматически

запускает команды синнхронизации.• В том числе и отрабатываются состояния Disk Missing…

FC switchFC switch

FC switchFC switch

LVM mirrors

Page 28: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

FC switchFC switch

FC switchFC switch

LVM mirrors

FC switchFC switch

FC switchFC switch

LVM mirrors

DW

DM

DW

DM

Direct SAN Links Up to 15km

DWDM, CWDM or other SAN extenders(Ie. 120km)

Distance Limited by latency effect on performance

Cross-Site LVM Mirroring

Page 29: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

VIO client

Generic SCSI diskVirtual SCSI

Adapters

VIO client Generic

SCSI diskVirtual SCSIAdapters

VIO client Generic SCSI

disk Virtual SCSIAdapters

VIO client Generic SCSI

disk Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

VIO client Generic SCSI disk

Virtual SCSIAdapters

PowerHA и PowerVM / VIOS

• PowerVM предлагает новый механизм виртуализации дисков N_Port Virtualization - NPIV

VIOS

FC Adapters

8Gb PCI

IBM 2105 LUNEMC 5000 LUN

Pass Through

mode

SAN

Virtual FCAdapters

IBM Power

• Дисковый массив подключается к VIOS 8Gb FC. NPIV

• Виртуальные FC подключаются непосредственно к коммутатору

• VIO клиент работает напрямик с дисковым массивом / лентой...

• Еще меньше накладных расходов

• Поддерживается 2 x VIOS и Heterogeneous Multipathing

IBMSystem p5

IBM

IBMSystem p5

IBM

• VIO клиент использует драйверы Multipath

VIO client IBM 2105 LUNEMC 5000 LUN

Page 30: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

IBM PowerHA for AIX vs IBM PowerVM

Таким образом :

• Технологии PowerVM совместно с продуктами PowerHA :

• Позволяют выбрать наиболее подходящее решение для подключения дисковых массивов.

• Позволяют консолидировать ввод-вывод

• упрощает построение кластеров для множества разделов LPAR

• Позволяет быстро расширять инфраструктуру по мере необходимости.

• Экономит физические интерфейсы

Page 31: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Сетевые интерфейсы в PowerHA

• Основная идея – исключить SPOF.• Резервирование / дублирование сетевых интерфейсов / сетей• PowerHA имеет традиционные собственные средства

• Мониторинг сетевой топологии (heart beat)• Обнаружение сбоя в интерфейсе/в сети• Замена сбойного интерфейса путем перемещения

«Сервисного Адреса» (IPAT – replacing, aliasing).

Ethernet Switch Ethernet Switch

Service IP

Page 32: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Сетевые интерфейсы в PowerHA. Etherchannel.

• Основная идея – исключить SPOF• Для резервирования сетевых интерфейсов могут использоваться

«внешние» технологии• Etherchannel, NIB• SEA Failover - PowerVM

Технология EtherChannel

Автоматически исключает сбойный адаптер из группы.

Реагирует на Port Up/Down

Не требует дополнительного ПО

Переключение происходит «на лету»

Балансирует нагрузку между адааптерами.

Отдельный интерфейс NIB.

Требует коммутатор с поддержкой Etherchannel.

AIX / VIOS

ent1ent0

Ethernet Switch

ent4(LA)

ent2

Link AggregationAdapter (Combines physical adapters)

Physical EthernetAdapter

ChannelGroup

IEEE 802.3ad Link Aggregation (LA)Cisco EtherChannel (EC)

ent3

NIB – Network Interface Backup

PowerHA Supports

Page 33: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Сетевые интерфейсы в PowerHA. SEA Failover.

• Основная идея – исключить SPOF

Frame 1

VIOS2

Hypervisor

AIX Client LPAR 1

en0

ent0(virt)

VIOS1ent4

(SEA)

ent2(virt)

ent0(phy)

Ethernet Switch

ent0(phy)

ent4(SEA)

ent2(virt)

Ethernet Switch

ent5(virt)

ControlChannel

ControlChannel

ent5(virt)

PVID 99PVID 10

SEA Failover

Автоматическое переключение сетевого трафика между VIOS

Реагирует на Port Up / Down

Не требует участия ПО

Переключение происходит «на лету»

Требует PowerVM

Не балансирует нагрузку между VIOS.

PowerHA Supports

Page 34: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Сетевые интерфейсы в PowerHA. Etherchannel + SEA FO

VIOS2

Hypervisor

AIX Client LPAR 1

en0

ent0(virt)

VIOS1

ent0(phy)

ent4(SEA)

ent2(virt)

ent1(phy)

Ethernet Switch

ent3(LA)

ent0(phy)

ent4(SEA)

ent2(virt)

ent1(phy)

ent3(LA)

VIOS2

Hypervisor

AIX Client LPAR 2

en0

ent0(virt)

VIOS1

ent0(phy)

ent4(SEA)

ent2(virt)

ent1(phy)

ent3(LA)

ent0(phy)

ent4(SEA)

ent2(virt)

ent1(phy)

ent3(LA)

Ethernet Switch

Frame1

Frame2

ent5(virt)

ent5(virt)

ent5(virt) ent5

(virt)

ControlChannel

ControlChannel

ControlChannel

ControlChannel

IBMSystem p5

IBM

IBMSystem p5

IBM

IBMSystem p5

IBM

IBMSystem p5

IBM

Page 35: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Сетевые интерфейсы в PowerHA..

• С использованием продвинутых сетевых технологий можно использовать лишь один – надежный ! - сетевой интерфейс в узле кластера. PowerHA 5.5

PowerHA Supports

• PowerHA часто не может определить потерю связи при использовании виртуальных интерфейсов.

• PowerHA 5.5 Предлагает решение – использовать внешних арбитров и конфигурационный файл netmon.cf

Page 36: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Сетевые интерфейсы в PowerHA. IVE.

• IVE – встроенный Ethernet адаптер с АППАРАТНОЙ виртуализацией• Управляется PowerVM, поддерживает PowerHA

en3

lhea

0lh

ea0 en1

en2

en0en1

en0

Physical Ports

Physical HEA

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

Port Group 2

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16Port Group 1

LPAR 1AIX / VIOS

LPAR 2AIX / VIOS

• 16 / 32 логических портов

• 1Gb или 10Gb интерфейс

• Поддерживает VIOS – SEA• Поддерживает EtherChannel• Логические порты отражают

состояние Port Up/Down !

Page 37: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

IBM PowerHA for AIX vs IBM PowerVM

Таким образом :

• Технологии PowerVM совместно с продуктами PowerHA :

• Позволяют выбрать наиболее подходящее решение сетевой топологии кластера.

• Позволяют существенно упростить сетевую конфигурациюМножество функций по конфигурации сетевой структуры кластера PowerHA выполняет автоматически.

• Позволяет консолидировать сетевые интерфейсы с использованием виртуальных адаптеров.

Page 38: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Вопросы расстояния.

• Самый задаваемый вопрос:- Можно ли разнести узлы кластера на XXX км ?

XXX XXX km

• Ответ:- Да Нет Наверное .....

• Некоторые задачи, которые необходимо решить при разнесении узлов:

• Репликация данных...• Быстрые – надежные –

резервируемые каналы связи• Сетевая топология• Алгоритм восстановления

работоспособности• .....

Конечно МОЖНО

Page 39: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Репликация данных

• Cross-Site LVM Mirroring• Синхронное зеркалирование через Fibre Channel• Требует высокоскоростных каналов

• GLVM - Sync• Синхронное зеркалирование через IP канал связи• Снижение скорости записи на диск• Любая* дисковая система

• GLVM – Async – PowerHA 5.5• Асинхронное зеркалирование

через IP канал связи• Скорость записи не страдает• Любая* дисковая система• Вопросы потери информации

Page 40: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Синхронизация данных

• Metro-Mirror • ESS/Metro-Mirror and System Storage DS6000/DS8000 Metro-

Mirror, SVC Metro-Mirror.• Синхронные копии поддерживают сам дисковые системы.• Требует быстрые каналы связи.• Скорость записи...• Нет встроенной поддержки не-IBM дисков.

• Global-Mirror• V5.5.0 Global Mirror for SVC – PowerVM 5.5.• Асинхронное зеркалирование через

IP канал связи.• Скорость записи не страдает.• Вопросы потери информации.

Consistency Group• Поддерживается подключение

SVC через VIOS (PowerHA 5.5)

Page 41: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Вопросы расстояния

Репликация данных

PowerHA Dispersion NeedAIX Base Technology Disk Storage Distance Consideration

PowerHA Data Center LVM Mirroring Storage agnostic Up to 15KM

PowerHA Campus LVM split-site mirror SANUp to 40KM can extend with DWDM

PowerHA/XD CampusGLVM Synchronous replication over IP Storage agnostic Up to 100KM

PowerHA/XD RemoteGLVM Asynchronous replication over IP Storage agnostic Unlimited

PowerHA/XD Campus LVM

SAN Based Metro Mirror Synchronous Replication over FC Up to 300KM

PowerHA/XD Remote LVM

SAN Based Global Mirror Asynchronous Replication over FC Unlimited

Page 42: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

Времена

Примерные значения времени реакции кластера

Action Time Associated, sec

Initial System failure detection 2 - 20Service IP address takeover 1 - 2SRDF customized recovery 30 - ???Disk and volume group acquisition 10Filesystem recovery & mounting 5 - 360Additional CPU Activation 60 - 120Application recovery and startup 5 - 360

Page 43: [PPT]IBM Power Systems CoD Features · Web viewXXX XXX km Ответ ... ENUS208-313/ENUS208-313.PDF ... IBM 2105 LUN EMC 5000 LUN SCSI SAS Storage Virtualiser SAN VIO client Generic

IBM Power Systems

© 2009 IBM Corporation

®