14/02/2013

Curso de Tecnologia em Redes de Computadores

Disciplina: Planejamento e projeto de redes
06. Data Center: Cabeamento Estruturado
Prof. Ronaldo <ronaldo.maia@ifrn.edu.br>

Introduo
A tcnica de cabeamento estruturado foi inicialmente desenvolvida h algumas dcadas para o uso em edifcios comerciais
Passou depois a ser adotada em outros ambientes como residncias, indstrias, hospitais, hotis, escolas, data centers, entre outros.

Em data centers, a topologia de distribuio parecida com adotada em edifcios comerciais, porm, com uma nova nomenclatura e algumas pequenas diferenas:

Fonte: MARIN, Paulo Srgio. Data Centers - Desvendando cada passo: conceitos, projeto, infraestrutura fsica e eficincia energtica - pg. 181

14/02/2013

Introduo
O diagrama apresentado usado nas principais normas
ANSI/TIA-942-2005, ISO/IEC 24764:2010, ANSI/BICSI-002-2011 e NBR 14565:2012
Apresentam pequenas variaes na nomenclatura

Introduo
Por definio das normas aplicveis, os elementos funcionais de um data center so:
Interface de rede externa (ENI) Cabo de acesso rede Distribuidor principal (MD/MDA) Cabeamento de backbone Distribuidor de zona (ZD/HDA) Cabeamento horizontal Ponto de distribuio local (LDP/ZDA) Cabo do ponto de distribuio local (cabo do LDP, cabo da ZDA) Tomada de equipamento (EO)

14/02/2013

Introduo
So definidos 3 subsistemas em um sistema de cabeamento estruturado de um data center:
Cabeamento horizontal Cabeamento de backbone Cabeamento de acesso rede

Um subsistema de cabeamento sempre compreende hardware de conexo (componentes) e cabos

Componentes e cabos separados no configuram um subsistema

Subsistema de cabeamento horizontal

Conecta o distribuidor de zona (ZD/HDA) s tomadas dos equipamentos (EO) de TI
Segmentos de cabos so comumente instalados em bandejas sob o piso elevado nos data centers
A distribuio por meio de calhas e dutos areos tambm possvel, apesar de menos comum nesses ambientes Ao se lanar cabos pelo mesmo espao para a insuflao de ar, tais cabos devem ser classificados como plenum (CMP)

Topologia estrela: segmento exclusivo entre ZD e a EO

possvel haver um ponto de distribuio local (LDP/ZDA), sendo equivalente ao ponto de consolidao (CP) dos edifcios comerciais

Fonte: ANSI/TIA-942-2005

14/02/2013

Subsistema de cabeamento horizontal

A ISO/IEC 24764 reconhece os seguintes cabos para o cabeamento horizontal de um data center:
Cabos balanceados de 4 pares, 100 ohms, blindados ou no, cat 6A/classe EA (600 MHz) Cabos pticos multimodo OM3 (50/125 m), otimizados para transmisso laser Cabos pticos monomodo Arranjos de cabos do tipo trunking (para cobre e fibra) e com conectores MPO (Multifiber Push On)

A ANSI/TIA-942 reconhece os seguintes cabos para o cabeamento horizontal de um data center:

Cabos balanceados de 4 pares, 100 ohms, blindados ou no, cat 5e/classe D e cat 6/classe E Cabos pticos multimodo OM1 (62,5/125 m) e OM3 (50/125 m) Cabos pticos monomodo Arranjos de cabos tipo trunking no so reconhecidos por esta norma

Subsistema de cabeamento horizontal

So reconhecidos 3 tipos de cabos de cobre pelas normas
UTP (Unshilded Twisted Pair): par tranado sem blindagem F/UTP (Foiled/Unshilded Twisted Pair): par tranado sem blindagem individual e com blindagem geral S/FTP (Screened/Foiled Twisted Pair): par tranado com dupla blindagem: individual e geral

UTP

F/UTP

S/FTP

Assim como em edifcios comerciais, para data centers, h 2 formas de conectar os ativos ao cabeamento horizontal
Conexo Cruzada (cross-connect ) Interconexo

14/02/2013

Subsistema de cabeamento horizontal

Mtodo de interconexo (interconnection )
A figura abaixo ilustra os componentes do sistema de cabeamento horizontal do data center, bem como as distncias mximas permitidas
Cordo do equipamento Distribuidor de zona (ZD/HDA) A Cordo do equipamento B Segmento de cabo horizontal - mx. 90 m
C

Tomada de equipamento (EO/EDA)

A + B + C 100 metros A + C 10 metros

Subsistema de cabeamento horizontal

Mtodo de conexo cruzada (cross-connect )
Configura-se pelo espelhamento das sadas do equipamento de TI em um patch panel, oferecendo a possibilidade de separao entre os ativos de TI (ex: switches) e componentes do cabeamento (ex: patch panel)
Pode ser requerida por questes de segurana ou organizao/gerencamento

Distribuidor de zona (ZD/HDA)

Cordo do equipamento

A
Cordo do equipamento

B Patch Cord C
Segmento de cabo horizontal - mx. 90 m A + B + C + D 100 metros A + B + D 10 metros

D
Tomada de equipamento (EO/EDA)

14/02/2013

Subsistema de cabeamento horizontal

Quando utilizado um ponto de distribuio local (LPD/ZDA) no cabeamento horizontal, este pode ser feito da seguinte forma
Fonte: MARIN, Paulo Srgio. Data Centers - Desvendando cada passo: conceitos, projeto, infraestrutura fsica e eficincia energtica - pg. 188

Subsistema de cabeamento horizontal

Como a atenuao dos cabos de pares tranados flexveis sofre degradao de cerca de 20% em relao aos construdos com condutores slidos, sendo oferecidas limitaes em sua combinao
A tabela abaixo mostra tais combinaes, onde: H + C 100 metros

Fonte: ANSI/TIA-942-2005

14/02/2013

Subsistema de cabeamento horizontal

Cabeamento ptico centralizado
Apresentado por meio do TSB-72 (Telecomunnications Systems Bulletin) Utiliza o conceito FTTD (Fiber To The Desk )
Conecta o equipamento de TI ao distribuidor principal (MD/MDA) e s tomadas dos equipamentos (EO) sem a utilizao de conversores (apenas passivos)

Pelas normas, aplica-se somente a instalaes dentro de um nico data center, no sendo aplicado interconexo de 2 data centers em um mesmo cmpus
Resumindo, a tcnica de cabeamento ptico centralizado aplica-se somente aos subsistemas de cabeamento horizontal e de backbone dentro do edifcio A implementao dessa tcnica pode ser obtida atravs de um dos mtodos
Interconexo/emenda: no usa conexo cruzada em distribuidor de zona Comprimento mximo de 300m (incluindo os cordes de ambos equipamentos) Pull-through (passagem direta) Comprimento mximo de 100m (incluindo os cordes de ambos equipamentos)

Subsistema de cabeamento horizontal

Cabeamento ptico centralizado
Uso de fibras multimodo com conectores SC, LC e MTRJ

90 metros

210 metros 100 metros

14/02/2013

Cabeamento de backbone
a parte dos sistema que interconecta o distribuidor principal (MDA/MDA) ao distribiudor de zona (ZD/HDA)
Compreende os segmentos de cabo que so lanados pelo data center interligando os equipamentos de TI (core, de uso comum do data center) instalados no MDA aos equipamentos instalados no ZDA

Fonte: ANSI/TIA-942-2005

Cabeamento de backbone
A topologia adotada para a sua implementao a estrela com at 2 nveis hierrquicos
A hierarquia identificada pela ordem em que os distribuidores so conectados para formar o subsistema de acesso rede externa e o subsistema de backbone

14/02/2013

Cabeamento de backbone
As conexes podem ser configuradas tambm de forma a prover redundncia

Cabeamento de backbone
A ISO/IEC 24764 reconhece os seguintes cabos para o cabeamento horizontal de um data center:
Cabos balanceados de 4 pares, 100 ohms, blindados ou no, cat 6A/classe EA (600 MHz) Cabos pticos multimodo OM3 (50/125 m), otimizados para transmisso laser Cabos pticos monomodo Arranjos de cabos do tipo trunking (para cobre e fibra) e com conectores MPO (Multifiber Push On)

A ANSI/TIA-942 reconhece os seguintes cabos para o cabeamento de backbone de um data center:

Cabos balanceados de 4 pares, 100 ohms, blindados ou no, cat 5e/classe D e cat 6/classe E Cabos pticos multimodo OM1 (62,5/125 m) e OM3 (50/125 m) Cabos pticos monomodo Arranjos de cabos tipo trunking no so reconhecidos por esta norma

14/02/2013

Cabeamento de backbone Componentes pticos

Tomada de equipamento
Em data centers, no h reas de trabalho (como as definidas para edifcios comerciais)
Mas de forma anloga, h os espaos nos quais os equipamentos terminais de TI (servidores, storages, etc.) interagem com a infraestrutura de cabeamento So chamados EDA (Equipament Distribution Area) ou EO (Equipament Outlet)
o espao em um sistema de data center onde os cabos provenientes de um distribuidor de zona (ZD) so terminados em tomadas acessveis a equipamentos de TI A figura ilustra a topologia em data centers de mdio e grande porte

10

14/02/2013

Tomada de equipamento
Data centers de pequeno porte, no precisam, necessariamente, de um distribuidor de zona (ZD/HDA) entre o distribuidor principal (MD) e a EO
Normalmente as filas de gabinetes com servidores e dispositivos de storage (na posio da EO) so conectadas diretamente s filas de racks com os equipamentos de core da rede do data center (instalados no MD) Os conectores e tomadas permitidos na EO so basicamente os mesmos dos outros subsistemas
Tomadas RJ-45 blindada Arranjos pticos, etc.

Tomada de equipamento
Existem outros padres proprietrios para a terminao de cabos de cobre usualmente encontradas em data centers
So usadas para transmisses a velocidades mais altas e com nvel de isolao de rudo superior, sendo reconhecidas por normas aplicveis
GG45 (patente pertencente Nexans) TERA (patente pertencente Siemon)

TERA

Fonte: http://www.nexans.com.br/eservice/Brazilpt_BR/navigate_144050/LANmark_7_GG45_Connector.html

Fonte: http://www.siemon.com/us/standards/1311_utp_screened_telecommunications_outlet_connector.asp

11

14/02/2013

Encaminhamentos do cabeamento em data centers

Cabling - Separao Dados x Energia
A tabela abaixo consta na ANSI/TIA 942, e vlida para cabos de energia com ou sem blindagem individual, e dispostos em canaletas/trilhos metlicos e aterrados
Cabos de Energia sem blindagem aplicados em Canaletas/Trilhos/Dutos SEM aterramento, as distncias (Tabela 2) devem ser DOBRADAS. Recomendado: Projetar rotas de cabeamento no blindados com separao de lmpadas fluorescentes de 125 mm (5 polegadas)

Encaminhamentos do cabeamento em data centers

Cabling - Separao Dados x Energia
Para cabos de energia ou de dados sem blindagem individual e projetados em canaletas/dutos metlicos aterrados, fechados e com espessura mnima de 1mm (ao) ou de 2mm (alumnio)
NO se aplica DISTNCIA MNIMA de separao

12

14/02/2013

Encaminhamentos do cabeamento em data centers

Cabling - Separao Dados x Energia
Ao se usar piso elevado, recomendado usar corredores separados ou, pelo menos, efetuar separao vertical A separao de FO e TP deve ocorrer por questes de organizao e administrao

Recomendado

ltimo recurso

Encaminhamentos do cabeamento em data centers

EF Encaminhamento de Cabos de Entrada:
Devem ser subterrneos
Entradas areas devem ser evitadas

Dimensionamento:
O nmero de dutos depende do nmero de Provedores de Acesso e da quantidade de circuitos Cada Provedor de Acesso deve ter pelo menos 01 duto de 100 mm para cada ponto de entrada. Dutos para cabos pticos de entrada devem ter 3 sub-dutos internos sendo dois de 38mm e um de 25mm; ou trs de 33mm.

13

14/02/2013

Consideraes de projeto
O projeto de cabeamento deve levar em considerao o tamanho do site, em especial, a computer room, alm da topologia de distribuio a ser adotada
A figura ilustra a topologia de cabeamento de um data center de mdio porte tpico, e sua conexo com o meio externo
Fonte: ANSI/TIA-942-2005

Consideraes de projeto
Para sites menores (pequeno porte), a topologia reduzida a mais recomendada, conforme a orientao da ANSI/TIA 942
Percebe-se conexes diretas entre o distribuidor principal (MDA) e as tomadas dos equipamentos (EDA)
Desta forma, temos apenas o cabeamento horizontal

Fonte: ANSI/TIA-942-2005

Pode haver um ponto de distribuio local (ZDA) Em seguida, veremos a recomendao para data centers de grande porte

14

14/02/2013

Fonte: ANSI/TIA-942-2005

Redundncia na infraestrutura de telecomunicaes

Fonte: ANSI/TIA-942-2005 - Figura 10

15

14/02/2013

ANSI/TIA-942-2005 G.3.1 Telecommunications tiering

Assim como os demais sistemas de um data center, o de cabeamento tambm recebe 4 classificaes tier Tier 1
Requitos bsicos, sem a necessidade de redundncia fsica Rotular todos os patch panels, tomadas e cabos, conforme anexo B da ANSI/TIA 942 e a ANSI/TIA-606-B; alm de os armrios e prateleiras com seu identificador na parte da frente e de trs Potenciais pontos de falha
Falha no equipamento do provedor de acesso; ou em sua infraestrutura de acesso Falha no roteador ou switch, se eles no so redundantes Danos ao backbone ou cabeamento horizontal Evento catastrfico na sala de entrada, na facilidade de entrada (maintenance hole) ou na MDA pode interromper todos os servios de telecomunicaes no data center

ANSI/TIA-942-2005 G.3.1 Telecommunications tiering

Tier 2 (atende requisitos tier 1 e especificaes adicionais)
Equipamentos crticos de telecomunicaes, equipamentos do provedor de acesso, roteadores, switches de produo de LAN e de SAN deve ter componentes redundantes (fontes de alimentao, processadores) Deve ter cabeamento redundante na distribuio do backbone (ptico/metlico) Uma instalao de tier 2 aborda a vulnerabilidade de servios de telecomunicaes que entram no prdio
Deve ter uma segunda entrada para o provedor de acesso, que devem ser terminados em uma nica sala de entrada
Recomenda-se mnimo de 20 metros ao longo dos encaminhamentos, e lados opostos da sala de entrada

Patch cords e jumpers devem ser rotulados com o nome da conexo em ambas
as extremidades do cabo. Quanto aos potenciais pontos de falha:
Equipamento do provedor de acesso localizado na sala de entrada conectado ao mesmo distribuidor de energia eltrica, suportado por um nico sistema de climatizao Roteamento redundante e switches de core localizados em uma MDA conectada ao mesmo distribuidor de energia eltrica, suportado por um nico sistema de climatizao Distribuio redundante de switches localizadas na HDA conectada ao mesmo distribuidor de energia eltrica, suportado por um nico sistema de climatizao Evento catastrfico na sala de entrada ou na MDA pode interromper todos os servios de telecomunicaes no data center

16

14/02/2013

ANSI/TIA-942-2005 G.3.1 Telecommunications tiering

Tier 3 (atende requisitos tier 2 e especificaes adicionais)
Deve ser atendido por, pelo menos, dois provedores de acesso Duas salas de entradas (ambas conectadas a cada provedor de acesso) Deve ter caminhos redundantes no backbone : entre as salas de entrada, reas de distribuio principal e reas de distribuio horizontal Todo o cabeamento, cross-connects e patch cords devem ser documentadas atravs de planilhas, bancos de dados ou programas projetados para executar a administrao do cabo Deve existir um backup "quente" para todos os equipamentos crticos de telecomunicaes, incluindo o do provedor de acesso, roteadores e switches (LAN/SAN) de core Potenciais pontos de falha
Evento catastrfico na rea de distribuio principal pode interromper todos os servios de telecomunicaes no data center Evento catastrfico na rea de distribuio horizontal pode interromper todos os servios para a rea de servidores de TI

ANSI/TIA-942-2005 G.3.1 Telecommunications tiering

Tier 4 (atende requisitos tier 3 e especificaes adicionais)
Cabeamento do backbone deve ser redundante Cabeamento entre dois espaos devem seguir rotas fisicamente separadas, com caminhos comuns apenas dentro dos dois espaos finais As reas de distribuio principal e secundria devem estar, preferncialmente, em lados opostos do data center (distncia mnima de 20 m) rea de distribuio secundria opcional, se a sala de informtica um espao nico e contnuo, provavelmente h pouco a ser adquirida atravs da implementao de uma rea de distribuio secundria As reas de distribuio principal e secundria tero encaminhamentos individuais para cada sala de entrada, devendo tambm haver caminho entre as duas (principal e secundria) Sistemas crticos devem ter cabeamento horizontal para duas reas de distribuio horizontal
Cabeamento horizontal redundante opcional, mesmo para sites tier 4

Potenciais pontos de falha

A rea de distribuio principal (se a de distribuio secundria no for implementado) Na rea de distribuio horizontal, se no existir o cabeamento horizontal redundante

17

14/02/2013

Referncias Bibliogrficas
MARIN, Paulo Srgio. Data Centers - Desvendando

cada passo: conceitos, projeto, infraestrutura fsica e eficincia energtica. So Paulo: rica, 2011.
ANSI/TIA-942-2005: Telecommunications Infrastructure Standard for Data Centers. http://www.nexans.com.br http://www.siemon.com

Exerccios
1. Compare a topologia de distribuio do cabeamento de um data center com a adotada em edifcios comerciais (de acordo com as normas aplicveis). 2. Quais os elementos funcionais do cabeamento de data center? 3. Qual a funo do subsistema de cabeamento horizontal em um data center? Como so normalmente instalados os cabos neste subsistema? 4. Quais os cabos reconhecidos pela ANSI/TIA 942 nos sistemas de cabeamento horizontal e de backbone? Apresente os diagramas genricos para ambos os sistemas. 5. Explique os mtodos de conexo que podem ser implantados em um subsistema de cabeamento horizontal. Indique tambm as distncias mximas permitidas. 6. Em que consiste as EDAs? 7. Quais as orientaes referentes a separao de cabos de dados e energia? E quanto a separao de cabos de dados pticos e metlicos? 8. Quais os principais requisitos tier 1 e 4? E os principais pontos de falhas tier 2 e 3?

18