Planejamento e Projeto de

Infraestrutura para Datacenter

Prof. Dr. Paulo Sérgio Marin, Engº.
Engenheiro Eletricista
marin@paulomarin.com
 Planejamento e Projeto de
Infraestrutura para Datacenter

Aula 3
- Breve revisão da aula anterior.
- Distribuição elétrica, sistemasUPS e classificações tier.
- Climatização do data center.
 Minhas Credenciais
Prof. Dr. Paulo Marin, Engº.
• Estudos de pós-doutorado em des. de energia sustentável (Calgary, AB, Canadá);
• Doutor em Engenharia Elétrica – Interferência eletromagnética;
• Mestre em Engenharia Elétrica – Propagação de sinais;
• Engenheiro Eletricista Pleno;
• Coordenador da ABNT - Cabeamento estruturado: comercial, data centers, residencial e infraestrutura
• Coordenador da ANSI/BICSI nos Estados Unidos (ANSI/BICSI-005 - ESS Electronic Safety & Security);
• Membro da ANSI/BICSI-002 - USA (Data Center Infrastructure Standard & Recommended Practices);
• Autor de inúmeros artigos técnicos publicados no Brasil e no exterior;
• Autor do livro ‘Cabeamento Estruturado – Desvendando cada passo: do projeto à instalação’ (publicado em 2008,
em sua quarta edição atualmente);
• Autor do livro ‘Data Centers – Desvendando cada passo: conceitos, projeto,
infraestrutura física e eficiência energética’ (publicado em 2011);
• Colunista da Revista RTI por mais de dez anos;
• Organizador, presidente de mesa e mediador de congressos técnicos
• Palestrante internacional em diversos eventos técnicos e acadêmicos;
• Membro da BICSI (A Telecommunications Association – USA);
• Membro do IEEE (Institute of Electric and Electronics Engineers - USA).
Distribuição Elétrica & UPS
 Distribuição Elétrica
Gerador Gerador
N +1

ATS

Concessionária

760kW

Quadro de Distribuição Elétrica (2.000A, 380V)

UPS UPS UPS UPS UPS UPS

100 100 65 65 65 65
kW kW kW kW kW kW
300kW

Quadro Elétrico
Cargas Mecânicas
200kW 260kW
Painel Elétrico (600A, 380V) Painel Elétrico (1000A, 380V)

PDUs PDUs

às cargas mecânicas
Esquema de distribuição com
às cargas
críticas de TI
às cargas
críticas de TI quadros, painéis e PDUs.
(50kW por PDU) (65kW por PDU)
Sistema Elétrico - Classificações
Classificações de referência para data centers
Esquema Elétrico Tier 1
Data center básico
Esquema Elétrico Tier 2

Data center com

Componentes redundantes
Esquema Elétrico Tier 3
Data center com
manutenção e operaçao
simultâneas
Esquema Elétrico Tier 4
Data center tolerante a falhas
Consumo Elétrico Os sistemas mecânicos/
climatização são
responsáveis por 50% do
Consumo elétrico médio em data centers consumo do data center

A carga crítica/TI
Consumo elétrico representa 36% do
consumo do data center

A iluminação é
responsável por 3%
Mechanical
do consumo do data center
36%
Lighting
50%
UPS/Batteries
Os sistemas UPS/Baterias
Critical Load
são responsáveis por 11%
do consumo do
11%
data center
3%
Consumo Elétrico

• Determinando a capacidade elétrica do data center:

– Carga de TI (carga crítica)
– Fator de crescimento
(para determinar capacidade futura p/ aumento de carga)
– Espaços de suporte
– Carga de iluminação
– Carga de climatização
– Carga do sistema UPS
Análise de Consumo
Exemplo de dimensionamento

Equipamento Tipo/Observação Consumo (VA)

Servidores blade Chassis/10 RU 5.600 VA por
(unidade de rack) chassis
Storage (array) 12 hard disks por 520 VA por array
array
Switch Ethernet Switch core/4608 7.500 VA por
portas switch

Características de consumo de equipamentos

críticos de TI da computer room
http://www.dell.com/html/us/products/rack_advisor_new/
Determinação da Carga

Aplica-se um fator de crescimento para que a carga total de projeto seja obtida

Um fator de crescimento de 30% para 5 anos pode ser adotado:

Carga futura = carga inicial x fator crescimento
Carga futura = 266.800 x 0,30 = 80.04 kVA
Carga TI (5 anos) = 346,84 kVA (estimada)
Determinação da Carga
Espaços de suporte
Cargaespaços suporte = Cargainicial . Fator carga (kVA)

Cargaespaços suporte = 266,8 . 0,15 = 40 kVA

Iluminação
Sala de servidores (média: 21,7VA/m2)
Carga ilum.computer room = Área computer room . Densidade pot.ilum. (kVA)

Carga ilum.computer room = 182,16 . 21,7 = 3.952,87 ≈ 4 kVA

Espaços de suporte (a mesma da sala de servidores)
Carga ilum.espaço suporte = Área ilum.computer room = 4kVA
Carga iluminação total = Carga ilum.computer room + Carga ilum. espaço suporte (kVA)
Carga ilum.total data center = 4 + 4 = 8 kVA
Determinação da Carga

Sistema UPS e Baterias

Carga crítica de TI total (futura) = 346,84 kVA

Consumo elétrico do sistema UPS e baterias

CargaUPS = (346,84 x 0,20) + (346,84 x 0,15) = 121,4 kVA

Notas:
a. Ineficiência do sistema UPS: 15%
b. Ineficiência das baterias: 20%
Determinação da Carga
Sistemas Mecânicos – Climatização

Fator de carga = 70% (parâmetro de projeto)

Carga sistema mecânico = Carga total do data center . Fator carga sistema mecânico

Carga sistema mecânico = 516,2 . 0,70 = 361,34 kVA

Carga Total
Consumo Elétrico do Data Center

Sistema mecânico Equipamentos de TI

361,4 kVA 346,8 kVA
(41,19%) (39,52%)

Sistema UPS e
baterias 121,4 kVA
(13,83%)

Espaços de suporte
40 kVA
Iluminação do site (4,56%)
8 kVA
(0,9%)
Dimensionamento do Sistema
Elétrico - Busway

Dimensionamento da entrada de serviço elétrico

Carga SE = Carga total site . Fator sobrecarga (kVA)

Carga SE = 877,5 . 1,25 = 1.096,87 kVA

O barramento de distribuição (busway) deve ter a capacidade

de corrente de 1300 A.
Sistemas UPS e Baterias
Sistema UPS básico

Sistema UPS rotativo com flywheel

Esquema de sistema UPS de conversão dupla

Capacidade e Eficiência
• Capacidade é potência (kW) necessária para alimentar a
carga do site com alguma margem para crescimento.
• O dimensionamento do sistema deve ser feito com base na
classificação do sistema elétrico.
• A eficiência de projeto define-se como a carga requerida
pelo site dividida pela potência total instalada no site

ep = carga requerida/potência instalada

Exemplos de aplicação
• Sistema UPS modular
• Site com redundância N+1
• Capacidade: 200kW
Sistemas UPS e
Classificações Tier

Como a conexão do bypass estático do sistema

UPS pode afetar sua classificação tier.
UPS Rotativo Híbrido
Esquema UPS Rotativo Híbrido
Aterramento no Data Center
• Elementos:
• EGB: Equipment ground
bus
• CGB: Clean ground bus
• DCMGB: Data center
master ground bus
• BGB: Building ground
bus
Malha de Referência de Sinal
Componentes
Climatização do Data
Center
Gerenciamento Térmico
• Quase 100% da energia elétrica usada no data center é
convertida em calor.
• Este calor deve ser retirado do data center.
• O direcionamento do fluxo de ar é crítico dentro da sala de
servidores.
• O tipo de sistema de HVAC deve ser adequado às necessidades do
data center (insuflação sob o piso, overhead, contenção, etc.).
• O sistema de ar condicionado gasta em torno de 35% da energia
elétrica necessária para resfriar a sala de servidores.
– Exemplo: Para cada 10kW de carga para a qual se deseja
retirar calor da sala de servidores, 3,5kW serão consumidos
pelo sistema de ar- condicionado.
Ciclo de Refrigeração

Consumo de energia elétrica:

Ciclo de refrigeração: - Fan Coils

(5 a 10%)
- Evaporação
- Compressão - Compressor e Condensador
- Condensação (20 a 30%)
- Regulagem do fluxo de ar

Aplicado sobre o refrigerante

Considerações de Projeto
– Tamanho da sala
– Densidade
• kW por gabinetes
• kW / m2
– Quantidade de máquinas
– Disposição das máquinas
– Localização da sala
– Pé-direito
– Piso elevado
– Expansão futura
– Requisitos de confiabilidade
– Classificação Tier
– Manutenção
– Clima local
Densidade Geral de Climatização
• Watts / gabinete
• Watts / m2
• Carga máxima (kW) da sala de servidores
Watts por m²
A dissipação de calor aumenta com o aumento da densidade de equipamentos.

Blades
Cenário Atual

Passado

15 a 25 kW/m²
Dissipação de Calor de
Equipamentos de TI

Fonte: ASHRAE (American Society of Heating, Refrigeration and Ai-conditioning Engineers).

Sistemas de Climatização do
Data Center
CRAC - Computer Room Air Conditioner
• Uma unidade CRAC é como um equipamento de ar-condicionado convencional.
Ele usa um ciclo de refrigeração de expansão direta internamente, ou seja, o
compressor é montado na unidade CRAC. A refrigeração é realizada pela
passagem forçada de ar por uma serpentina (fan coil) de refrigeração. Uma
unidade CRAC opera com volume constante e modula apenas os estados on e
off. Há algumas unidades CRAC capazes de variar o fluxo de ar com o uso de
compressores especiais.

CRAH – Computer Room Air Handler

• Uma unidade CRAH opera como um sistema de refrigeração baseado em água
gelada (chillers) típico, como aqueles utilizados em sistemas de ar-
condicioando central. A refrigeração é realizada pela passagem forçada de ar
por uma serpentina (fan coil) que transporta água gelada. Normalmente há
uma planta de chillers que supre o sistema de refrigeração com água gelada. As
unidades CRAH podem variar o fluxo de ar para manter a pressão estática
tanto para insuflação de ar sob o piso elevado quanto em sistemas de duto
aéreos (overhead).
Esquema de Climatização (CRAH)
Torre de Resfriamento
(parte externa do edifício)

DATA CENTER

Computer Room

Unidade CRAH
Casa de Máquinas

Chillers

Esquema de climatização da sala de servidores com unidades CRAH e chillers.

Esquema CRAH
Figura: White paper APC
Esquema de Climatização
CRAC
Sistema CRAC para data center com expansão
direta e rejeição de calor a ar

Figura: White paper APC

Esquema de Climatização - CRAC

Sistema CRAC para data center com glycol e

rejeição de calor a ar

Figura: White paper APC

Esquema de Climatização CRAC

Sistema Esquema de Climatização - CRAC

CRAC para data center com rejeição de calor a água

Figura: White paper APC

 ASHRAE TC 9.9
Parâmetro ASHRAE TC 9.9
Térmico 2004 2008
Temp. mínima 20°C 18°C

Temp. máxima 25°C 27°C

Umidade
Relatiava do ar 40% 5,5°C DP
(mínima)
Umidade
Relativa do ar 55% 60% e 15°C DP
(máxima)
Corredores Frios e Quentes
Exemplos de computer rooms

Configuração de corredores frios e

quentes na computer room
Climatização da Sala de Servidores
Recomenda-se que
as unidades CRAC
sejam posicionadas
nos corredores
quentes.

Desta forma, a co-

leta de ar quente
e consequente
exaustão é facilita-
da e mais eficiente.

A quantidade de
unidades CRAC
também é crítica.
Distribuição Overhead
• Este tipo de distribuição de ar na computer room é recomendado
quando não há piso elevado no ambiente
– Esta arquitetura limita a escolha do tipo de equipamento a ser
instalado na computer room (CRAC/CRAH);
– Permite que o ar frio seja insuflado de forma mais direta no
corredor frio;
– Os dutos de ar devem insuflar ar apenas nos corredores frios.
Exemplos
Distribuição Overhead
Exemplos
Distribuição Overhead

Insuflação de ar frio por sistema de dutos e

coleta de ar quente pela unidade CRAC
Prof. Dr. Paulo Sérgio Marin, Engº.
Engenheiro Eletricista
marin@paulomarin.com