Академический Документы
Профессиональный Документы
Культура Документы
Nmero 2
Jul/Dez 2015
Doc. 16
Abstract
The case describes a sequence of events which led to the need for physical moving of a data center,
in a federal higher education institution, and the decisions involved along the process.
A rigor, as obras de reforma do prdio que abriga o ncleo de tecnologia da informao (NTI)
da universidade j estavam atrasadas quando Miguel assumiu a gesto daquela unidade, em
novembro de 2012. A reforma fora decidida na gesto universitria anterior e contava com recursos
oramentrios oriundos do programa de apoio a planos de reestruturao e expanso das
universidades federais (Reuni). De acordo com o planejamento da obra, a reforma custaria cerca de
700 mil reais e seria realizada no prazo de sete meses, especificamente entre maro e outubro
daquele ano.
Sendo uma obra contratada por meio de licitao pblica, Miguel esperava que os projetos
que deram suporte ao processo licitatrio estivessem disponveis para seu conhecimento.
Infelizmente, no foi o que aconteceu. A obra fora licitada com especificaes mnimas, de tal modo
que apenas a planta baixa e ilustraes grficas da fachada do prdio foram apresentadas.
Naquele instante, Miguel percebeu que enfrentaria alguns grandes desafios: (a) gerenciar toda
uma estrutura de tecnologia da informao (TI, profissionais, usurios, equipamentos, processos)
convivendo diariamente dentro de uma obra de reforma predial (fluxo de trabalhadores da
empreiteira, barulho de equipamentos pesados, poluio causada por resduos de construo etc.); (b)
supervisionar uma obra de reforma predial que no dispunha de especificaes completas; e (c)
implementar as transformaes que havia se proposto a realizar (centradas principalmente em
aspectos de governana e institucionalizao da TI na universidade) enquanto dividia ateno com as
obras de reforma predial.
Antes de continuar a descrio das dificuldades enfrentadas por Miguel e sua equipe do NTI,
faz-se necessrio apresentar alguns conceitos, prticas e definies importantes. Assim, a seo a
seguir apresentar o programa Reuni; a seo seguinte apresentar o modelo de licitaes adotado
pela universidade; e a ltima seo retomar a apresentao do caso.
________________________________________________________________________________________________
GVcasos | So Paulo | V. 5 | n. 2 | jul-dez 2015 www.fgv.br/gvcasos
3
DESAFIOS EM INFRAESTRUTURA DE TECNOLOGIA DA INFORMAO:
OBRAS DE CONSTRUO CIVIL E MOVIMENTAO DE DATACENTER
Pedro Jcome de Moura Jr.
A licitao foi realizada com especificao mnima, com projeto de natureza arquitetnica.
Os demais projetos foram elaborados ao longo da execuo da obra, estando o NTI responsvel pela
elaborao dos projetos de cabeamento lgico e superviso do projeto de rede eltrica.
Ao assumir a gesto do NTI, em novembro de 2012, Miguel procurou entender como a obra
de reforma do prdio era conduzida (contratos, prazos, recursos) e quais projetos compunham a
reforma, de modo que se pudesse avaliar o que j fora feito e o que restava fazer. Na ocasio, a
empresa executora apresentou projeto arquitetnico parcial (planta baixa) e afirmou no dispor ainda
dos projetos eltrico e de rede lgica.
Junto equipe do NTI, Miguel props modificaes no projeto arquitetnico (ainda no nvel
de planta baixa), tomando como referncia questes relativas segurana da informao. Assim, as
modificaes propostas buscaram reduzir a necessidade de circulao de pessoas, internas e externas
ao setor, em reas que demandam controle de permetro, bem como buscaram tornar mais fcil o
acesso de pessoal externo (clientes, usurios) direo e s coordenaes.
Os projetos inexistentes ou incompletos foram encomendados equipe prpria, responsvel
por projetos de rede lgica para a IFES e tambm com alguma expertise sobre redes eltricas. Uma
das servidoras tcnico-administrativas com formao em arquitetura embora no atue na IFES
nessa funo disps-se espontaneamente a elaborar projeto ergonmico e de mobilirio.
Foi durante esse esforo de compreenso da obra e seus projetos que Miguel percebeu a
ausncia de abordagem estratgica para reforma do espao ocupado pelos equipamentos servidores
de grande porte, equipamentos de armazenamento de dados (storage), servidores (blade) e
equipamentos de conectividade de rede (roteadores e switches), ou seja, equipamentos que compem
o datacenter da IFES.
A sensao relatada por Miguel era de ser obrigado a conceber uma obra de reforma do
datacenter, com o datacenter funcionando dentro da obra. Ora, sabia-se que isso seria impraticvel,
j que a obra em questo envolvia demolio de paredes, remoo de entulhos, novas edificaes,
aterro do piso falso, cimento, areia, gua, poeira, suor e calor. Claro, sem contar que o
fornecimento de energia eltrica teria que ser temporariamente suspenso, uma vez que uma nova
rede eltrica seria necessria, afetando os no-breaks e o grupo gerador.
A avaliao da situao levou Miguel a propor aos coordenadores e gerentes do NTI que uma
das novas salas construdas (a reforma previa duas novas salas e um auditrio) acomodasse o
datacenter, o que implicava deslocamento fsico de uma estrutura que fora criada ao longo de
dcadas, com camadas acomodadas de tecnologia (Miguel chamava-as de eras geolgicas da TI) e,
como era de se esperar, contando com pouca documentao atualizada. Com o deslocamento, a
antiga sala seria liberada para a reforma e poder-se-ia ainda discutir se valeria a pena retornar o
datacenter ( sala original) quando fosse concluda a obra.
Miguel solicitou uma reunio com a equipe da gerncia de redes para expor a situao e
apresentar a proposta de movimentao fsica do datacenter. Participaram Rafael, coordenador da
rea e conhecedor da proposta, j que havia conversado previamente com Miguel; Ziraldo, gerente
de operaes da rede; Frank, um dos mais experientes analistas de TI do setor; e Roberto, analista
responsvel pela elaborao de projetos de rede lgica. A reunio transcorria bem at que Miguel
mencionou a possibilidade de movimentao do datacenter. Roberto falou primeiro. Na opinio dele,
essa era uma tarefa impossvel. A falta de documentao foi apontada como responsvel pelo
desconhecimento sobre todos os enlaces de rede existentes no datacenter e mexer nisso seria
loucura. Ziraldo ponderou que a equipe no poderia realizar a tarefa sem o apoio de uma
consultoria especializada no assunto. Frank procurou alternativas movimentao, mas, em conjunto,
aquela equipe no chegou a consenso sobre a viabilidade de nenhuma das alternativas, como j havia
sido tentado por Miguel e os demais coordenadores.
________________________________________________________________________________________________
GVcasos | So Paulo | V. 5 | n. 2 | jul-dez 2015 www.fgv.br/gvcasos
4
DESAFIOS EM INFRAESTRUTURA DE TECNOLOGIA DA INFORMAO:
OBRAS DE CONSTRUO CIVIL E MOVIMENTAO DE DATACENTER
Pedro Jcome de Moura Jr.
O amadurecimento da ideia
Nos dias que se seguiram quela primeira reunio, Miguel, Rafael e Homero (coordenador da
rea de servios) prospectaram a possibilidade de contratao de consultoria especfica para apoiar o
processo. Trs empresas especializadas dispuseram-se a discutir o projeto. Visitas foram feitas ao
datacenter da IFES, houve troca de documentao entre as equipes e as propostas tcnico-comerciais
foram apresentadas. Os valores variaram aproximadamente entre 200 e 800 mil reais.
Considerando o volume estimado de investimentos, Miguel optou por inserir o projeto no
planejamento estratgico de TI (PETI) para o exerccio seguinte, esperando poder iniciar processo
licitatrio para contratao da consultoria ao longo do ano de 2014. Enquanto se discutia o PETI,
Homero, um dos coordenadores, comentou sobre a possibilidade de participao da rede nacional de
ensino e pesquisa (RNP) no processo, j que a RNP prov os principais links de conexo da rede da
IFES internet e detm contratos com operadoras de telecom, geralmente especialistas tambm em
operaes dessa natureza (movimentao de datacenters).
As dificuldades de contratao de consultoria avolumaram-se ao longo do exerccio 2014.
No s houve contingenciamento de recursos federais, Copa do Mundo no Brasil e eleies
presidenciais, mas o processo em si de elaborao de edital e termo de referncia mostrava-se
significativamente oneroso. Essas dificuldades estimularam ainda mais a aproximao com a RNP e
a busca de uma soluo que contasse com aquela instituio como parceira principal.
Paralelamente, Marco integrou-se equipe. Embora no trabalhe no NTI, Marco servidor
da IFES e amigo de longa data de Homero. Marco possui grande experincia em telecom, fruto de
sua atuao na iniciativa privada como provedor de internet em cidades do interior do Estado. A
chegada de Marco e os resultados dos contatos com a RNP causaram uma revoluo no
entendimento do projeto e na percepo de que a movimentao do datacenter poderia ser feita sem,
necessariamente, contar com apoio de consultoria contratada.
Ampliaram-se os esforos de documentao as is do datacenter (ou seja, documentao do
estado atual) e elaborao do que viria a ser o novo ambiente. Todas as conexes externas de fibra
ptica (havia 17 conexes ativas) e todas as conexes internas entre equipamentos do datacenter
foram mapeadas. Ao final de um ano de planejamento, sabia-se precisamente o que deveria ser feito,
como deveria ser feito e que sequncia de passos deveria ocorrer. Os Anexos 2 e 3 ilustram,
respectivamente, a forma como o mapeamento foi realizado e a sequncia inicial de passos planejada.
O ms de janeiro de 2015 foi definido como a janela de movimentao, considerando-se
principalmente o recesso acadmico que ocorre normalmente nesse perodo. Ainda assim, todas as
etapas de movimentao deveriam ocorrer em finais de semana, de modo que o impacto sobre a
continuidade dos servios de TI fosse mnimo. Comunicados publicados no portal web institucional
e e-mails enviados a toda a comunidade acadmica informavam sobre a operao e preveniam todos
quanto instabilidade dos servios de TI no perodo. Chegara a hora da ao.
A execuo
A primeira interveno ocorreu nos dias 24 e 25 de janeiro de 2015. Naquela janela de
ao, como descreveu Miguel, a equipe do NTI realizou uma das maiores tarefas de infraestrutura
computacional da universidade dos ltimos 20 anos (era sobre esse perodo que ele podia falar com
alguma propriedade). A equipe iniciou a movimentao fsica do datacenter no NTI com
desligamento, remoo, limpeza, montagem e reativao de cada um dos componentes que
________________________________________________________________________________________________
GVcasos | So Paulo | V. 5 | n. 2 | jul-dez 2015 www.fgv.br/gvcasos
5
DESAFIOS EM INFRAESTRUTURA DE TECNOLOGIA DA INFORMAO:
OBRAS DE CONSTRUO CIVIL E MOVIMENTAO DE DATACENTER
Pedro Jcome de Moura Jr.
compem o mix servidores, blade1, storage2 e conectividade entre a sala antiga (em reforma) e a sala
nova. Antes dessa tarefa, lembra Miguel, a maior empreitada havia sido o downsizing de
servidores/aplicaes quando, em meados da dcada de 90, desativamos o mainframe3 e instauramos
a era cliente-servidor na universidade, com plataforma RISC 4 e aplicaes em banco de dados
relacional.
A operao daqueles dois primeiros dias s foi possvel porque a equipe do NTI,
principalmente o pessoal da coordenao da rede, havia encampado o desafio e dedicado parcela
significativa de seu tempo ao planejamento e execuo das aes necessrias movimentao.
Naquele final de semana, contando com o apoio (a) em sobreaviso da equipe de banco de dados e
aplicaes, (b) da equipe externa, capitaneada por Marco, atuando no remanejamento das fibras
pticas prprias da universidade, (c) da equipe da empresa PGN (nome fictcio) representando a
fabricante dos equipamentos blade e storage, e (d) da equipe da empreiteira (que executava as obras
de reforma no prdio) no suporte rede eltrica, a equipe de Ziraldo, Frank, Roberto, Rafael e seus
colegas executou a maior parte da movimentao do datacenter da universidade.
No dia seguinte, uma segunda-feira, Miguel dizia: Pelo que vi e contei, foram ao menos 12h
de trabalho ininterrupto no sbado e outras 12h no domingo. Miguel afirmava que fora graas a
esses esforos, ao compromisso e s competncias desenvolvidas/aplicadas que a universidade
amanheceu nesta segunda-feira como se nada tivesse ocorrido. Todos os servios esto operacionais
e o pessoal do help desk reporta demanda em nveis normais.
Mas restava ainda uma srie de aes a serem executadas para que a movimentao fosse
realmente concluda. Os prximos passos incluam a concluso do remanejamento das fibras pticas
da rede e das fibras que interligam a rede da universidade s redes externas (RNP, operadoras e rede
metropolitana). Ou seja, o que dependia exclusiva e diretamente doNTI j fora feito.
A segunda interveno ocorreu nos dias 7 e 8 de fevereiro de 2015. Naquela ocasio, toda a
estrutura de conectividade de rede da universidade foi movimentada para o novo ambiente do
datacenter (racks, roteadores, switches e conexes de fibra ptica do anel interno), principalmente o
roteador core da rede. Novamente, as equipes envolvidas demonstraram grande capacidade de
planejamento e execuo, aliada ao senso de compromisso desenvolvido ao longo do processo. Em
nenhum momento, recorda Miguel, a equipe demonstrou desnimo, cansao ou indisposio. Mesmo
com considervel desafio pela frente, a equipe continuava demonstrando empenho, entusiasmo e
descontrao.
Por fim, a terceira interveno ocorreu entre os dias 19 e 22 de fevereiro de 2015, quando era
aguardada a participao efetiva da RNP e seus prepostos (operadoras de telecom) para
movimentao dos seus equipamentos de conectividade internet (ponto de presena da RNP no
Estado, ou PoP). Intensa comunicao ocorrera nos meses que antecederam a movimentao, e ao
menos trs visitas de prepostos da RNP universidade e ao NTI ocorreram. No bastasse ser a
ltima etapa da movimentao, havia ainda um agravante: o contrato com a construtora no podia
mais sofrer aditivo de prazo, e, em um ms, a contar daquela ltima interveno, a construtora
precisaria concluir a obra de reforma, o que inclua toda a reforma do antigo ambiente do datacenter.
Mas como a construtora poderia trabalhar, se o espao ainda estava ocupado? Os ltimos
componentes do datacenter precisavam ser removidos naquele momento.
1
Blade uma arquitetura computacional modular, geralmente compreendendo servidores com alta capacidade de
processamento.
2
Storage um conjunto modular de equipamentos especficos para armazenamento de grandes volumes de dados.
3
Mainframe a designao para computador de grande porte, originalmente com arquitetura centralizada (sem
capacidade de processamento nos terminais de acesso).
4
RISC representa uma arquitetura de processadores empregados em computadores, com conjunto mnimo de instrues.
________________________________________________________________________________________________
GVcasos | So Paulo | V. 5 | n. 2 | jul-dez 2015 www.fgv.br/gvcasos
6
DESAFIOS EM INFRAESTRUTURA DE TECNOLOGIA DA INFORMAO:
OBRAS DE CONSTRUO CIVIL E MOVIMENTAO DE DATACENTER
Pedro Jcome de Moura Jr.
Infelizmente, a RNP no pde cumprir sua parte no acordo. Mudanas internas sucessivas na
equipe de conduo do projeto na RNP fizeram com que houvesse descontinuidade de
entendimentos, de documentao e de compromissos, relata Miguel. No dia marcado para sua grande
atuao, a RNP no enviou o conjunto completo das equipes de prepostos, e no havia mais tempo
hbil para adiamentos. Miguel e sua equipe precisavam tomar uma deciso.
Reunidos na sala da diretoria, Miguel, Rafael, Homero e Ziraldo ponderaram os riscos
potenciais, os recursos disponveis e as restries existentes, e decidiram que, com a expertise
adquirida pela equipe da universidade e os recursos materiais disposio, seria possvel realizar a
parte do processo sob responsabilidade da RNP e prepostos ausentes. Era uma deciso unilateral,
mas, alegava Miguel, tomada apenas luz da falta do parceiro. s 11h30 do dia 21, o ltimo rack
ainda existente no velho ambiente do datacenter, carregado de equipamentos de conectividade, foi
desligado.
exceo dessa dificuldade com o parceiro, a ltima etapa transcorreu como as demais: com
sucesso. A conectividade da rede da universidade internet (via PoP-RNP) foi restabelecida s
16h30 daquele sbado e, no dia seguinte, as ltimas fuses de fibra ptica estavam concludas. A
movimentao do datacenter havia sido realizada com equipe prpria, principalmente, com consumo
aproximado de 360 horas/homem de trabalho (para execuo), ou seja, considerando-se valores de
salrios e tributos, o custo direto de execuo foi de aproximadamente 24 mil reais. Mesmo assim,
ressalta Miguel, em nenhum momento, desde o planejamento at a execuo, discutimos
remunerao adicional pela tarefa. Consultado a respeito, Rafael, que coordenava a maioria das
pessoas envolvidas, afirmou: Discutimos compensao em dobro das horas adicionais trabalhadas e
assumi o compromisso, j prximo ao fim da movimentao, de verificar a possibilidade de
pagamento de horas-extras, o que no foi confirmado at o momento.
Como saldo positivo, o NTI ganhara uma equipe confiante, rica em know-how especializado
e altamente integrada. O NTI ganhara tambm um novo ambiente de datacenter, plenamente
documentado e com maior capacidade de crescimento. A universidade ganhara tudo isso, evitara
dispndio significativo de recursos com consultorias e nem desconfiava de que a movimentao
estava ocorrendo com esse nvel de complexidade.
Concludas todas as etapas que previam envolvimento direto da equipe do NTI, no incio de
maro de 2015, a construtora encarregada da obra de reforma pde realizar as ligaes eltricas
definitivas para alimentao do grupo gerador e no-breaks, bem como concluir a reforma da antiga
sala que abrigava o datacenter, transformando-a na nova sala de reunies do prdio reformado.
A situao atual
Caminhando pelo prdio j completamente reformado, Miguel refletia sobre todo o processo
passado e sobre como conduzir as demais mudanas futuras. Essencialmente, Miguel se questionava:
Ser se essa reforma era mesmo necessria?. Afinal, o custo total acabou sendo muito mais
elevado que as estimativas iniciais, e isso no s do ponto de vista financeiro-oramentrio
diretamente. Foram quase trs anos de conduo da TI institucional dentro de um prdio em obras.
Quantas horas de trabalho foram desperdiadas porque funcionrios apresentaram quadros alrgicos?
Quantas horas de trabalho da direo e coordenaes foram desviadas (da rea fim) mesmo
contando com engenheiro fiscal da obra para avaliaes, discusses e decises envolvendo a obra e
seus efeitos? Quantas horas foram dedicadas burocracia institucional, com longas justificativas
para autorizao de aditivos contratuais? Quantas horas foram dedicadas elaborao de projetos
necessrios e que no foram planejados quando deveriam ter sido? Quantas melhorias poderiam ter
sido implementadas se tivesse havido discusso prvia adequada e com base em projetos?
Por outro lado, a satisfao da equipe com a superao do desafio parecia uma grande
recompensa. Apesar de todas as dificuldades, a universidade havia conquistado um novo patamar em
________________________________________________________________________________________________
GVcasos | So Paulo | V. 5 | n. 2 | jul-dez 2015 www.fgv.br/gvcasos
7
DESAFIOS EM INFRAESTRUTURA DE TECNOLOGIA DA INFORMAO:
OBRAS DE CONSTRUO CIVIL E MOVIMENTAO DE DATACENTER
Pedro Jcome de Moura Jr.
________________________________________________________________________________________________
GVcasos | So Paulo | V. 5 | n. 2 | jul-dez 2015 www.fgv.br/gvcasos
8
DESAFIOS EM INFRAESTRUTURA DE TECNOLOGIA DA INFORMAO:
OBRAS DE CONSTRUO CIVIL E MOVIMENTAO DE DATACENTER
Pedro Jcome de Moura Jr.
Anexo 1
Sinalizao obrigatria da obra (com dados de identificao fictcios; foto de 24/01/2015)
Fonte: Autor
Anexo 2
Ilustrao do mapeamento da distribuio lgica de fibras pticas
________________________________________________________________________________________________
GVcasos | So Paulo | V. 5 | n. 2 | jul-dez 2015 www.fgv.br/gvcasos
9
DESAFIOS EM INFRAESTRUTURA DE TECNOLOGIA DA INFORMAO:
OBRAS DE CONSTRUO CIVIL E MOVIMENTAO DE DATACENTER
Pedro Jcome de Moura Jr.
Anexo 3
Sequncia planejada de atividades
Onde:
eM: equipe de Marco (quatro pessoas)
eZ: equipe de Ziraldo (Ziraldo, Frank, Roberto em tempo integral e mais cinco colegas em atuao parcial)
eR: equipe de desenvolvimento e banco de dados (trs pessoas, sobreaviso)
eE: equipe de energia eltrica da empreiteira (duas pessoas)
eH: equipe PGN (duas pessoas)
eC: Miguel, Homero e Rafael (diretor e coordenadores do NTI, supervisores de todo o processo)
Totais: 19 pessoas presenciais e 03 sobreavisos
Sequncia A:
eM identifica fibras individualmente;
eM remove fibras da sala antiga (SA);
eM identifica fibras nas caixas de passagem;
eM religa as fibras removidas de SA para a sala nova (SN);
eM busca sistematicamente sobras de fibras nas caixas de passagem p/ evitar emendas.
Sobreavisos:
eR permanece de sobreaviso durante todo o final de semana, caso ocorram problemas com o protocolo da sequncia C
(SIGs, SGBD);
eH permanece de sobreaviso durante todo o final de semana, caso ocorram problemas com a reativao do blade.
________________________________________________________________________________________________
GVcasos | So Paulo | V. 5 | n. 2 | jul-dez 2015 www.fgv.br/gvcasos