Data Center : Conceitos Bsicos

Alex Martins de Oliveira

Conceitos e Projetos Disponibilidade, Confiabilidade e Redundncia Planejamento de Espaos Distribuio Eltrica e UPS (Uniterruptable Power Supply) Climatizao Cabeamento Estruturado Eficincia Energtica e Green Data Centers

Roteiro

Conceitos e Projetos Disponibilidade, Confiabilidade e Redundncia Planejamento de Espaos Distribuio Eltrica e UPS (Uniterruptable Power Supply) Climatizao Cabeamento Estruturado Eficincia Energtica e Green Data Centers

Roteiro

 Infraestrutura Bsica:
Sala de Computadores (computer room); Ar condicionado e controle ambiental; Distribuio eltrica e UPS (Uniterruptable Power Supply); Automao do edifcio; Deteco e supresso de incndio; Segurana e controle; Espao de suporte, entre outros.

Conceitos e Projetos

 Portanto, um Data Center no um CPD.

Conceitos e Projetos

 Tipos de Data Centers

Enterprise; Internet; Collocation.

Conceitos e Projetos

 Data Center Enterprise

Utilizado para atender um nico cliente; Montados e operados pelo proprietrio; Em geral apresenta pouca redundncia; Custo de instalao, operao e manuteno de infraestrutura so os fatores de deciso para sua escolha.

Conceitos e Projetos

 Data Center Internet

Atendem diversos clientes; Possuem uma grande densidade de equipamentos crticos de TI; Possuem maior redundncia de componentes e sistemas para garantir a continuidade dos negcios; A disponibilidade da infraestrutura do data center o principal fator de projeto do site

Conceitos e Projetos

 Data Center Collocation

Entregam apenas infraestrutura fsica (espao, energia, ar condicionado, segurana, etc.); Clientes so responsveis por instalao e operao de seus equipamentos e sistemas; A segurana um ponto crtico pois todos os clientes acessam a sala dos computadores.

Conceitos e Projetos

Tradicional Responsvel Foco Arquiteto Definio dos espaos Fluxo de pessoas Engenheiro Tecnologia de TI Adequado ao espao comercial; Comea aps a etapa de projeto fsico; Atende aos requisitos especficos dos usurios do espao comercial; Desenvolvido em conjunto com equipes de TI e provedores.

Data Center

Espao da computer room e demais espaos; Fluxo de equipamentos crticos de TI; Comea com o projeto de engenharia do site.

Baseado nos requisitos de: - Rede - Servidores - Conectividade Requisitos de Engenharia - Distribuio eltrica - Climatizao

Conceitos e Projetos

 Mtodos de projeto
Mtodo de projeto independente Mtodo turn-key

Conceitos e Projetos

Conceitos e Projetos Disponibilidade, Confiabilidade e Redundncia Planejamento de Espaos Distribuio Eltrica e UPS (Uniterruptable Power Supply) Climatizao Cabeamento Estruturado Eficincia Energtica e Green Data Centers

Roteiro

 A disponibilidade de um sistema o tempo durante o qual ele est em operao em relao ao tempo em que ele deve estar em operao; A disponibilidade pode ser calculada: Disponibilidade = MTBF/(MTBF+MTTR) MTBF = Mean time between failure MTTR = Mean time to repair Para sistemas altamente confiveis esse nmero deve estar prximo de 1 ou 100%

Disponibilidade, Confiabilidade e Redundncia

 Mas 100% no existe; Na prtica esse nmero deve ser, no mnimo 99,9%(trs noves; A infraestrutura de um data center deve oferecer uma disponibilidade mnima de 99,67%; Cada nove adicional aumenta a ordem de grandeza em um fator de 10. Disponibilidade 9,99% para 9,999%; Isso tambm multiplica por 10 os custos de infraestrutura.

Disponibilidade, Confiabilidade e Redundncia

 A disponibilidade de um data center ser expressa por um percentual num perodo de 1 ano;

Disponibilidade, Confiabilidade e Redundncia

 Exemplo de clculo de disponibilidade: Sistema Hbrido serial, supondo S1=50% e S2=60%: Disponibilidade = (S1).(S2) = 0,5x0,6 = 30%
Sistema S1 Sistema S2

Disponibilidade, Confiabilidade e Redundncia

 Exemplo de clculo de disponibilidade: Sistema Hbrido paralelo, supondo S1=50% e S2=60%: Disponibilidade = (S1+S2)-(S1.S2) = 80%
Sistema S1

Sistema S2

Disponibilidade, Confiabilidade e Redundncia

 A confiabilidade pode ser entendida como a distribuio do tempo entre falhas de um sistema ou componente (MTBF); A redundncia em data centers pode ser entendida com a duplicidade de partes, mdulos, encaminhamentos, etc. H uma norma que classifica o data center quanto a disponibilidade e redundncia; ANSI/TIA-942 a nica que aplica o conceito de tier.

Disponibilidade, Confiabilidade e Redundncia

 ANSI/TIA-942 estabelece o seguinte:

Os pontos isolados de falhas devem ser eliminados para melhorar a redundncia e a confiabilidade; A redundncia aumenta a tolerncia a falhas, bem como sua capacidade de manuteno; A redundncia deve ser tratada de forma separada e independente para cada subsistema do data center. Instituies que certificam data centers no mundo: The Uptime Instituto (Estados Unidos) e TUV Rheinland do Brasil(organizao de origem alem)

Disponibilidade, Confiabilidade e Redundncia

 Classificao Tier:
Data Center tier I: Data Center Bsico; Data Center tier II: Data Center com componentes redundantes; Data Center tier III: Data Center com manuteno e operao simultneas; Data Center tier IV: Infraestrutura tolerante a falhas.

Disponibilidade, Confiabilidade e Redundncia

 Data Center tier I: Data Center Bsico

No apresenta componentes redundantes em sua infraestrutura de distribuio eltrica ou ar condicionado; Esse tipo de data center deve ser desligado para manutenes planejadas e no planejadas.

Disponibilidade, Confiabilidade e Redundncia

 Data Center tier II: Data Center com componentes redundantes

Possui componentes redundantes, porm com uma nica infraestrutura de distribuio; Nesse caso, para esses componentes redundantes no h necessidade de parar a operao para manuteno; Para manuteno dos encaminhamentos de distribuio ainda necessrio a parada do site;

Disponibilidade, Confiabilidade e Redundncia

 Data Center tier III: Data Center com manuteno e operao simultneas
Possui componentes redundantes; Vrios encaminhamentos de distribuio independentes para atender a carga crtica de TI da computer room; Todos os componentes crticos de TI devem ter fontes redundantes, para serem compatveis com a infraestrutura; Atividades de manuteno planejada podem ser realizadas utilizando as capacidades dos componentes e encaminhamentos redundantes a fim de garantir a operao segura dos componentes remanescentes.

Disponibilidade, Confiabilidade e Redundncia

 Data Center tier IV: Infraestrutura tolerante a falhas

Alm do que tem no tier III; Capacidade de redundncia N dos componentes e encaminhamentos de distribuio(energia e ar) da computer room; Capacidade de manter a operao quando os componentes redundantes so retirados de servio por qualquer motivo; Componentes e encaminhamentos devem ser capazes de manter a operao, mesmo que com risco destes pararem; Em caso de incndio ou outra situao de emergncia, a operao pode ser interrompida; No Brasil no h data center tier IV.

Disponibilidade, Confiabilidade e Redundncia

Tier Tier Data Center I Data Center I Data Center II Data Center II Data Center III Data Center III Data Center IV Data Center IV

Paradas por ano Paradas por ano 3 x 2h para manut 3 x 2h para manut -

DownTime 99,75% (22,00h) 99,75% (22,00h) 99,98% (1,6h) 99,98% 99,99% (0,8h) 99,99% (0,8h)

2 x 12h para manut. 99,67% (28,8h) 2 x 12h para manut. 99,67% (28,8h)

Disponibilidade, Confiabilidade e Redundncia

Elemento Fonte Componente redundante Ramos de distribuio Manuteno simultnea Tolerante a falhas Custo por kW

Tier 1 N N 1 No No US$ 10.000

Tier 2 N ou(N+1) N+1 1 No No US$ 11.000

Tier 3 N+2 N+1 1 normal e 1 alternativo Sim No US$ 20.000

Tier 4 2N, mnimo N+1,mnimo 2 ativos simultneos Sim Sim US$ 22.000

Disponibilidade, Confiabilidade e Redundncia

 Disponibilidade de data centers de acordo com a ANSI/BICSI-002

H cinco classes operacionais do site(entre F0 e F4), sendo o F0 a classe mais baixa disponibilidade e a F4 a mais alta;

Disponibilidade, Confiabilidade e Redundncia

ANSI/BICSI-002 Classe F0 F1 F2 F3 F4 DownTime 99,0%(400h) 99,0%(100h e 400h) 99,9%(50h e 90h) 99,99%(4h) 99,999%

Disponibilidade, Confiabilidade e Redundncia

Conceitos e Projetos Disponibilidade, Confiabilidade e Redundncia Planejamento de Espaos Distribuio Eltrica e UPS (Uniterruptable Power Supply) Climatizao Cabeamento Estruturado Eficincia Energtica e Green Data Centers

Roteiro

 Um dos aspectos mais crticos no projeto de data center. As reas devem ser dimensionadas levando em conta os vrios subsistemas, tais como:
Sistemas eltricos(distribuio eltrica); Espaos de suporte (sala de impresso, NOC, salas de reunies, sala de baterias, entrada de telecomunicaes, etc.); Sala de computadores.

Planejamento de Espaos

 Exemplo de um diagrama bsico com os espaos:

Edifcio Data Center
Sala de Telecomunicaes Sala de Energia/UPS geradores Entrada Telecom Entrada de energia

Automao Incndio Monitoramento

Sala de Computadores

Sala de operao da rede

Sala de ar condicionado

Planejamento de Espaos

 Consideraes sobre a sala de computadores:

Para o piso elevado deve-se ter uma laje de 14 cm e deve ser projetada para uma carga de 732,36 kgf/m2; Para data center de alta densidade, deve-se usar uma laje de 20 cm em um carga de 1.220,6036 kgf/m2; As placas do piso elevado devem ter dimenses de 24 x 24 pol. (0,60 x 0,60 m), pois essa a dimenso padro para equipamentos de TI; As paredes devem ser brancas para facilitar a iluminao; A iluminao deve ser projetada para oferecer 500 lux; O p direito deve ser de no mnimo 2,60 m. A temperatura da sala de equipamentos deve ser entre 18C e 27C com umidades relativas entre 30% e 60% (NBR 14565:2011); J a ANSI/EIA-942 estabelece temperaturas entre 20C e 25C, com umidades relativas entre 40% e 50%.

Planejamento de Espaos

 Consideraes sobre a sala de computadores:

Paginao do piso falso (NBR 14565:2011)

Planejamento de Espaos

 Resumo de recomendaes de condies ambientais:

Recomendaes NBR 14565:2011 Temperatura ambiental Ponto de condensao Troca mxima de calor Umidade relativa do ar Medies 18C a 27C Entre 5,5 e 15C 5C/h Entre 30% e 60% A cada 3m ao longo da linha central dos corredores frios e no ponto de retorno do ar condicionado Normas ANSI/TIA-942 20C a 25C 25C 5C/h Entre 40% e 50% Entre 3 e 6m ao longo da linha central dos corredores frios e nos pontos de entrada do ar condicionado

Planejamento de Espaos

 Localizao geogrfica:
Recomendaes das normas NBR 14565:2011,ANSI/BICSI-002 E ANSI/TIA-942; Local no deve estar sujeito a inundao; Evitar locais prximos a cabeceiras de aeroportos; Evitar locais prximos sujeitos a abalos ssmicos; Evitar Locais prximos a linhas de transmisso eltrica; Procurar locais com fcil acesso rodovirio; Procurar locais prximos a concessionria de energia; Procurar locais prximos a centros de servios so tambm recomendados.

Planejamento de Espaos

Conceitos e Projetos Disponibilidade, Confiabilidade e Redundncia Planejamento de Espaos Distribuio Eltrica e UPS (Uniterruptable Power Supply) Climatizao Cabeamento Estruturado Eficincia Energtica e Green Data Centers

Roteiro

 Sistema mais crtico de uma data center; Para garantir a continuidade da operao, sistemas auxiliares de alimentao eltrica so agregados; Sistemas auxiliares so os grupos geradores a diesel e os sistemas UPS, conhecidos popularmente como no-breaks;

Distribuio Eltrica e UPS (Uniterruptable Power Supply)

 Distribuio eltrica no data center(elementos bsicos):

Entrada de alimentao eltrica proveniente da concessionria; Grupo motor-gerador (referido simplesmente como gerador); Chaveadores (chaves de comutao); Sistema UPS; Quadros/Paineis de distribuio (PDU, Power Distribution Unit) Sistema de aterramento.

Distribuio Eltrica e UPS (Uniterruptable Power Supply)

220/127V AC Concessionria/ substao 13,2kV 220/127V

220/127V AC

220/127V AC Transformador/ PDU 220/127V AC Transformador/ PDU

Concessionria/ substao 13,2kV 220/127V

UPS

Gerador

Distribuio Eltrica e UPS (Uniterruptable Power Supply)

 Capacidade e eficincia do sistema eltrico:

Pensemos num exemplo de data center em que sua capacidade seja de 200kW, uma redundncia N+1 pode ter as seguintes configuraes: Dois mdulos de 200kW; Trs mdulos de 100kW; Quatro mdulos de 66 kW; Cinco mdulos de 50 kW.

Eficincia calcula por:

e1=carga requerida(kW)/potncia instalada(kW)

Distribuio Eltrica e UPS (Uniterruptable Power Supply)

 Dois mdulos de 200kW:

Ep = (200/400).100(%)=50%

Trs mdulos de 100kW:

Ep = (200/300).100(%)=66%

Quatro mdulos de 66kW:

Ep = (200/264).100(%)=75%

Distribuio Eltrica e UPS (Uniterruptable Power Supply)

 Classificao dos sistemas eltricos:

N ou requisito bsico; Redundncia N+1; Redundncia N+2; Redundncia 2N; Redundncia 2(N+1).

Distribuio Eltrica e UPS (Uniterruptable Power Supply)

Conceitos e Projetos Disponibilidade, Confiabilidade e Redundncia Planejamento de Espaos Distribuio Eltrica e UPS (Uniterruptable Power Supply) Climatizao Cabeamento Estruturado Eficincia Energtica e Green Data Centers

Roteiro

 Consideraes iniciais de projeto:

Tamanho da sala; Densidade de carga, kW por gabinete(ou m2); Nmero de unidades CRAC (Computer room Air Conditioner); Localizao da sala no edifcio; P-direito; Expanso futura; Manuteno; Requisitos de confiabilidade.

Climatizao

 Os antigos CPDs operavam a temperaturas bastante baixa(entre 17 e 20C); A temperatura de entrada de ar dos equipamentos devem estar entre 18 e 27C, com uma umidade relativa entre 40 e 55%; A sada de ar quente dos equipamentos aprox. em 38C, com umidade de 20%; A sada do ar frio da unidade CRAC deve estar entre 13 e 16C.

Climatizao

 Corredores frios e quentes

Climatizao

Unidade kWatts kWatts TR BTU/h 1 TR = 12.000 BTU/h

Multiplicar por 3410 0,283 3,53 0,00029 BUT/h TR kWatts kWatts

Unidade

Climatizao

Conceitos e Projetos Disponibilidade, Confiabilidade e Redundncia Planejamento de Espaos Distribuio Eltrica e UPS (Uniterruptable Power Supply) Climatizao Cabeamento Estruturado Eficincia Energtica e Green Data Centers

Roteiro

ENI = Interface de Rede Externa MD = Distribuidor principal ZD = Distribuidor de zona LDP = Ponto de distribuio local EO = Tomada do equipamento

Cabeamento Estruturado

Conceitos e Projetos Disponibilidade, Confiabilidade e Redundncia Planejamento de Espaos Distribuio Eltrica e UPS (Uniterruptable Power Supply) Climatizao Cabeamento Estruturado Eficincia Energtica e Green Data Centers

Roteiro

 Necessidade devido ao grande consumo de energia; Conceito de green Data Center ainda no oficial; Conceito baseado na economia de energia, otimizao no uso da gua, ar condicionado, etc; A instituio mais avanada no sentido de mtrica de grenn data center eo The Green Grid (www.thegreengrid.org); O The Green Grid sugeriu o conceito de PUE (Power Usage Effectiveness) e DCE (Datacenter efficiency)

Eficincia Energtica e Green Data Centers

 PUE calculado por:

PUE = Cinfraestrutura/Cti, onde: Cinfraestrutura = Carga total da infraestrutura, em kW; Cti = Carga total dos equipamentos de TI.

DCE = (1/PUE)x100%

Eficincia Energtica e Green Data Centers

 Exemplo: Considere um data center com as seguintes caractersticas, de acordo com a tabela abaixo:
Sistema Equipamentos de TI Climatizao Iluminao UPS e baterias Carga total do Site Carga (kW) 250 350 15 70 685

Eficincia Energtica e Green Data Centers

 Exemplo: PUE = 685kW/250kW = 2,74 O valor do PUE deve se aproximar de 1,00 (eficincia de 100%) Pesquisas recentes mostram que a maioria dos data centers tem PUE em torno de 3,00. Uma PUE de 2,74 mostra que a demanda do data center 2,74 vezes maior que a energia necessria para alimentar os equipamentos de TI; Se nesse data center forem instalados novos equipamentos de TI cujo consumo seja de 10kW, a distribuio eltrica deve ser capaz de fornecer 27,40 kW (10kW x 2,74)

Eficincia Energtica e Green Data Centers

 Exemplo: Assim a eficincia desse data center medido por: DCE= (250kW/685kW)x100% = 36,49%

Eficincia Energtica e Green Data Centers

Marin, Paulo Srgio. Data Centers: Desvendando cada Passo: Conceitos, Projeto, Infraestrutura fsica e Eficincia energtica. So Paulo. Editora rica. 2011

Bibliografia

Obrigado!