Criao de clusters virtuais com o Rocks

Cluster slido

CAPA
como rocha
O Rocks oferece uma soluo fcil para
criao de clusters de mquinas virtuais.
por Matthew D. Sacks

R
ocks uma distribuio Linux
e um sistema de gerenciamen-
to de clusters que permite a
instalao rpida de clusters Linux em
hardware fsico ou contineres virtuais
Xen. Um cluster Rocks [1] fcil de
instalar e oferece todos os benefcios da
virtualizao para os ns membros do
cluster. Com pelo menos duas mqui-
nas fsicas, o Rocks permite a instala-
o simples e rpida de clusters, assim
como seu gerenciamento, liberando o
administrador para se concentrar no
suporte computao em grid e s
aplicaes distribudas que tornam os
clusters uma opo to atraente.
A distribuio Rocks padro traz Virtualizar clusters?
vrias ferramentas de cdigo aberto
de alto desempenho distribudas e
paralelas, tais como o Grid Engine
[2] da Sun, OpenMPI [3] e Condor.
Essa poderosa coleo de recursos
avanados um dos motivos pelos
quais a NASA, a NSA (agncia na-
cional de segurana dos EUA), a
IBM, o Austin Research Lab, a Ma-
rinha dos EUA, o MIT, Harvard e
a Universidade Johns Hopkins esto
usando o Rocks em algumas de suas
aplicaes mais exigentes.
Os argumentos a favor do uso de
clusters virtuais so os mesmos que
justificam qualquer soluo de vir-
tualizao: flexibilidade, facilidade
de gerenciamento e uso eficiente de
hardware. Por exemplo, num am-
biente em que sistemas operacionais
de 32 e 64 bits precisam coexistir, a
virtualizao uma soluo muito
mais eficiente do que tentar suportar
duas plataformas de hardware dife-
rentes num nico cluster.

Linux Magazine #52 | Maro de 2009 49

 CAPA | Rocks
artigo presume que haja
Internet Pblica
pelo menos duas mquinas
fsicas para implementa-
o do n central e pelo
menos um continer de
192.168.1.1/24 MV. O n central requer
ao menos 1 GB de mem-
N central ria RAM e o continer de
MV deve possuir pelo me-
10.10.1.1/24
nos 4 GB de memria (o
Rocks exige um mnimo
Switch
de 1 GB).
essencial garantir que
o hardware seja suporta-
do pelo sistema operacio-
Ns computacionais
nal Rocks. Ele se baseia
ou Contineres MV
no CentOS, ento basta
conferir se o hardware
10.10.1.10 10.10.1.11 10.10.1.12 consta na lista de com-
patibilidade do Red Hat.
Figura 1 Exemplo de configurao do Rocks.
A regra geral usar itens
muito difundidos, princi-
Pr-instalao palmente no tocante a adaptadores
Antes de instalar o cluster, certifi- de rede e de vdeo.
que-se de que todos os componentes A configurao de rede bsica
necessrios estejam disponveis. Clus- do Rocks supe a presena de uma
ters Rocks podem ser configurados rede pblica e outra privada para o
de vrias formas diferentes, com v- continer de MV e seus ns compu-
rias configuraes de rede. O Rocks tacionais. O n central deve possuir
pode ser instalado em contineres duas interfaces de rede, e os ns
virtuais ou diretamente no hardware computacionais precisam de pelo
fsico. O exemplo fornecido neste menos uma interface para conec-
Figura 2 Seleo de rolls no Rocks.
50
tar-se rede privada do n central.
Alm disso, preciso um switch
que conecte os vrios contineres
de MV ao n central. Veja a figura
1 para um exemplo de configurao
de rede para o Rocks.
Preparao
Para instalar o Rocks, insira seu DVD
ou CD e inicie o sistema a partir
dessa mdia. O Rocks vai pedir os
rolls. No lxico do Rocks, um roll
uma coleo de softwares com uma
tarefa especfica. Uma configurao
bsica requer os rolls Kernel/Boot,
Base, Web Server e OS 1 e 2, assim
como o roll Xen para o suporte
virtualizao de clusters.
A configurao-base no muito
interessante, ento bom pesquisar
os vrios rolls disponveis [4] para
incluir os de computao distribu-
da ou em grid conforme desejado
e tambm para se divertir com o
Rocks. Bons pontos de partida in-
cluem o Sun Grid Engine (SGE),
o Torque e o roll HPC.
A splash screen vai pedir um
modo de inicializao. Para fazer
a instalao do n central, digite
frontend e pressione [Enter]. Se
isso no for feito dentro de poucos
segundos, o instalador entrar na
instalao de n computacional. Se
isso acontecer, reinicie o sistema e
digite frontend no prompt antes da
inicializao automtica.
Ao final da inicializao pelo
CD, o sistema tentar contactar
um servidor DHCP, mas se no
conseguir encontrar um nas duas
interfaces de rede, ele pedir uma
configurao de rede. O mais pro-
vvel que a eth0 consiga um IP e
a eth1 (na rede privada do cluster)
no tenha um servidor DHCP. Nesse
caso, instale um servidor DHCP na
rede privada interna ou selecione
manual configuration e fornea o
endereo IPv4 da interface, o do
roteador e o do servidor DNS ma-
nualmente. Com a rede conecta-
http://www.linuxmagazine.com.br
 Rocks | CAPA

da, selecione OK para proceder

instalao do n central.
Aparecer uma tela com a mensagem
Welcome to Rocks. Ela permite fazer
a instalao a partir de DVDs, CDs ou
da rede. A forma mais fcil baixar o
DVD antes e instalar a partir dele, pois
ele contm a maioria dos rolls e pacotes
oferecidos no site do Rocks.
Com o DVD no leitor, clique
em CD/DVD Based Roll e depois
escolha o roll desejado. O sistema
Rocks bsico consiste no kernel, sis-
tema operacional, servidor web e roll
bsico. Para configurar um cluster
virtual, tambm necessrio o roll
Xen (figura 2).
Agora selecione os rolls recomen- Figura 3 O Tio Sam pede sua contribuio para o registro de clusters.
dados e clique em Submit. Os
rolls selecionados agora aparecem
esquerda da tela de instalao. Clicar processo de instalao, pois s vezes em quantas mquinas fsicas dese-
em Next inicia a instalao. o computador entra em outra insta- jarmos. Um cluster pode ter 500
Digitar as informaes do clus- lao quando a mdia de instalao servidores num grande data center,
ter fornece sua identificao caso no retirada. ou pode conter duas mquinas sob
seja registrado em rocksclusters. Com a instalao completada, o uma mesa. Para desfrutar dos bene-
org. Vrios prompts pedem infor- sistema reinicia automaticamente fcios da virtualizao num cluster,
maes de configurao, como as e exibe uma tela azul de login do um continer de mquina virtual
de rede em eth0 e eth1, a senha de CentOS 5. Agora que o n central ser usado para instalarmos os ns
root, o fuso horrio e o esquema foi instalado, j podemos iniciar a computacionais. Instalar ns compu-
de particionamento. instalao dos vrios contineres de tacionais num continer Xen acelera
MV e ns computacionais. a instalao e o gerenciamento dos
Instalao ns computacionais do cluster.
O instalador inicia e exibe uma Contineres de MV Para comear a instalar os ns
caixa que informa que os scripts de Os ns computacionais fazem todo o computacionais, faa login no cen-
pr-instalao esto em execuo. trabalho e servem como sistemas indi- tral e abra um terminal. Na primeira
Depois, o instalador cria o sistema viduais que compem o supercom- vez que o terminal abre, ser pedido
de arquivos e um instalador grfico putador que estamos construiindo. que voc crie um arquivo de chave
muito semelhante ao do Red Hat possvel criar ns computacionais SSH. Para aceitar os valores padro,
Enterprise Linux ser exibido, com
imagens das pirmides e do Tio Exemplo 1: Verificar o status de mquinas virtuais
Sam incentivando fs de clusters a
registrarem seus clusters em nome 01 [root@cluster ~]# rocks list host vm
da National Science Foundation 02
americana (figura 3). 03 VMHOST SLICE MEM CPUS MAC HOST STATUS
Nota: Se voc tiver selecionado
04 compute001: 1 512 1 00:16:3e:00:00:02
uma instalao de rede, os rolls se-
vmcontainer00 active
ro baixados da Internet antes de a
instalao comear. Num certo pon- 05 compute002: 2 512 1 00:16:3e:00:00:03
to durante esse processo, a mdia de vmcontainer00 active
instalao deve ser automaticamente 06 compute003: 3 512 1 00:16:3e:00:00:04
ejetada, devendo voc retir-la; caso vmcontainer00 active
contrrio, monitore com cuidado o

Linux Magazine #52 | Maro de 2009 51

 CAPA | Rocks

Quadro 1: Comandos de rede, ser preciso um Ns computacionais

servidor DHCP, pois le- Agora que o continer de MV est
Para um n computacional: var tempo demais at os instalado, vamos criar os ns com-
# rocks stop host vm computa-x-x-x ns computacionais desis- putacionais do Xen no continer
tirem de obter um IP do para realizar o trabalho do cluster.
Iniciar um n computacional: servidor inexistente. possvel criar quantos contineres
# rocks start host vm computa-x-x-x Nota: Na presena de forem precisos e tambm mistur-los
uma appliance de switch com ns computacionais no virtuais.
Consultar todos os ns: gerencivel, unidade de Para iniciar um n computacional,
# rocks list host fora ou NAS na rede pri- basta executar alguns comandos no
vada do cluster, lembre-se n central:
Consultar informaes sobre ns de configurar esses dispo-
computacionais virtuais:
sitivos antes de instalar # ricjs add host vm \
# rocks list host vm os contineres de MV e os vm-container-0-0 \
ns computacionais. Ve- membership=Computa
rifique os endereos MAC
pressione [Enter], a menos que voc no console de insert-ethers conforme Para definir vrios parmetros da
queira digitar uma senha para sua os dispositivos sejam iniciados para mquina virtual, como memria,
chave SSH. a instalao. tamanho de disco e informaes
Em seguida, digite insert-ethers O continer de MV vai aparecer de rede, pode-se passar argumen-
na linha decomando e selecione na seo Inserted Appliances com tos opcionais ao comando add. O
VM Container em Choose Appli- o endereo MAC do continer. tamanho padro da memria de
cation Type. Ser mostrada uma Um asterisco ser mostrado entre 1.024 MB.
caixa de mensagem que diz Inserted parnteses aps o n central pedir Aps a execuo do comando,
Appliances, e o endereo MAC do uma configurao do Kickstart, o ser adicionada ao banco de da-
continer de MV (que a prpria que inclui os rolls padro inclu- dos a configurao de um novo n
mquina fsica) deve ser exibido aps dos durante a instalao inicial do computacional virtual, e aparecer
a inicializao. n central. a seguinte sada:
Certifique-se de que o continer Agora relaxe e deixe o Rocks fazer
de MV suporta a inicializao via todo o trabalho. A beleza do Rocks Added VM on node vm-container
rede (PXE) e est configurado para que ele simplifica muito o provi- -0-0 slice 1 with vm_name
usar essa modalidade. Se no for o sionamento do cluster contanto computa-0-0-1
caso, ser preciso iniciar o continer que o n central realize instalaes
de MV manualmente com o CD automatizadas com uso do Kickstart. Ao tentar criar uma MV Xen com
do roll Kernel ou o DVD do Rocks Com o Kickstart, os pacotes so ins- esse comando, pode aparecer uma
no continer de VM simplesmente talados no continer de MV. Essa mensagem de erro dizendo que no
inserindo o CD/DVD e deixando-o outra boa hora para um cafezinho. h memria suficiente para a mqui-
iniciar pela mdia de instalao. Ao retornar, j deve haver um con- na. Nesse caso, talvez seja preciso
Se no houver um servidor DHCP tiner novo em folha para instalao reduzir a quantidade de memria
na rede dos ns computacionais, de ns computacionais sobre Xen. O disponvel para todas as MVs editan-
eles no obtero IPs. Se um grande nome padro do primeiro continer do o item dom0-min-mem no arquivo de
cluster possuir mltiplos segmentos vm-container-0-0. configurao do Xen /etc/xen/xend-
config.sxp.
Exemplo 2: Comando xm Agora que o continer foi atribu-
do mquina fsica, a instalao
01 [root@vmcontainer00 ~] xm list da mquina virtual no continer
02 Name ID Mem(MiB) VCPUs State Time(s) executada com o comando rocks
03 Domain0 0 1024 1 r 4035.5 create host vm computa-0-0-1. Esse
04 Computa001 2 512 1 b 23174.3 comando l a configurao do ban-
05 Computa002 3 512 1 r 3228.3 co de dados do Rocks e comea a
06 Computa003 4 512 1 b 2114.3 provisionar a mquina virtual Xen
no continer automaticamente. Di-

52 http://www.linuxmagazine.com.br

gitando rocks-console computa-0-0-1
possvel acompanhar o progresso
da instalao.
Com a mquina virtual j criada,
basta o seguinte comando para ini-
ci-la a partir do n central:
# rocks start host VM \
computa-0-0-1
Se a mquina virtual iniciar com
sucesso, o terminal mostrar o se-
guinte:
Using config file /etc/xen/rocks/
computa-0-0-1
Started domain computa-0-0-1
Agora repita o processo de asso-
cial a MV mquina fsica, criando
e iniciando cada MV a cada vez, at
o limite de memria fsica do servi-
dor. Ao fim desse processo, o cluster
est pronto para o uso.
Administrao
Depois que criado um n compu-
tacional virtual, pode-se consultar
o estado da MV a partir do n cen-
tral. Para isso, execute o comando
rocks list host computa-0-0-1; o
exemplo 1 ilustra sua sada. Tam-
bm possvel verificar o estado
das MVs ou do prprio continer
de MV com os comandos xm do
Xen (exemplo 2).
O comando rocks a ferramen-
ta primria de administrao para
todo o cluster. Sua estrutura bsica
rocks <comando> <argumentos>.
possvel acessar a lista completa de
comandos no site rocksclusters.org
ou digitando-se rocks list help na
linha de comando. O comando ro
cks permite iniciar e parar ns com-
putacionais, alterar configuraes e
consultar itens de configurao.
O Rocks inclui utilitrios para
administrao distribuda, que exe-
cutam comandos em todo um
cluster ou em grupos de ns do
cluster. O comando padro para a
Linux Magazine #52 | Maro de 2009
Rocks | CAPA
execuo de comandos distribuda
tentakel. Ele fcil de usar, e o
Rocks adiciona automaticamente
todos os ns a /etc/tentakel.conf em
vrios agrupamentos. Para execu-
tar um comando em todos os ns
em /etc/tentakel.conf, digite ten
takel <comando>. Para executar um
comando em apenas um grupo de
ns, use tentakel -g <nome_do_gru
11 4082-1300
po> <comando>.
Aplicativos
Para usar todos os ns do cluster num
nico aplicativo, este precisa ter sido
criado para o cluster. A OpenMPI
uma biblioteca frequentemente
utilizada para criar aplicativos distri-
budos para execuo em clusters.
O Sun Grid Engine e o Torque so
sistemas de fila para distribuio
de tarefas (chamadas de jobs) entre
os elementos do cluster. Embora o
problema de criar e implementar
aplicativos paralelos em clusters seja
muito extenso, h muitas informaes
online sobre o Sun Grid Engine, o
Torque e o Condor.
Concluso
A facilidade de uso do Rocks e seu
suporte s aplicaes mais comuns
o tornam o favorito entre os ambien-
tes cientficos de computao que
se dedicam a desvendar os mistrios
do universo. n
Mais informaes
[1] Clusters Rocks: http://
www.rocksclusters.org
[2] Sun Grid Engine: http://
gridengine.sunsource.net/
[3] OpenMPI: http://www.
open-mpi.org/
[4] Guia do roll SGE: http://
tinyurl.com/b2hbx3
[5] Documentao do Rocks:
http://tinyurl.com/be9pb6
53