Comments on: Usando DRBD com GFS e Fencing Manual

By: Rodrigo

Rodrigo — Mon, 16 Jun 2008 20:24:35 +0000

Olá,
estou começando a estudar DRBD e heartbeat e gostaria de saber se é possível implementar a seguinte solução para se ter um “cluster” de um banco de dados Oracle: heartbeat+drbd em servidiores idênticos com a base de dados do oracle em sistema de arquivos ext3.

By: Tiago Cruz

Tiago Cruz — Mon, 16 Jun 2008 20:49:18 +0000

Olá Rodrigo,

Sim, é possível. Porém apenas uma máquina ficaria “online” respondendo… o DRBD deverá ser configurado em Primário/ Secundário.

A máquina secundária só entrará em “produção” quando a primária cair… quem vai fazer isso será os scripts do heartbeat (montar a partição, iniciar o oracle…)

Abraços

By: Fabio Silva

Fabio Silva — Mon, 16 Jun 2008 22:16:07 +0000

Bacana em thiago… preciso testar qualquer hora destas…

Abraços…

By: Rodrigo

Rodrigo — Tue, 17 Jun 2008 04:51:27 +0000

Obrigado pela resposta Tiago.

Saberia me dizer se é possível utilizar a solução que eu comentei quando já se tem um servidor oracle em produção, isto é, implementar o DRBD sem refazer as partições do oracle deste servidor que está em produção, ou sem parar este servidor. Ou levantar o segundo servidor com DRBD fazer ele responder pelas consultas, parar o que está em produção, adicioná-lo no DRBD, algo do tipo?

Acho que ví algo do tipo do guia do usuário do DRBD, não estou muito certo disso.

By: Brivaldo Jr

Brivaldo Jr — Wed, 18 Jun 2008 07:27:10 +0000

Rodrigo,

Diretamente, até onde sei o DRBD precisa criar um cabeçalho no disco/partição apagando todas as informações dele, contudo, já que os 2 servidores são iguais acredito ser possível realizar uma “dobradinha” e migrar os
dados sem problemas.

Abraços.

By: Brivaldo Jr

Brivaldo Jr — Wed, 18 Jun 2008 07:32:06 +0000

Rodrigo,

Cometi uma pequena gafe, existem 2 modos disso funcionar:

Select an initial sync source. If you are dealing with newly-initialized, empty disk, this choice is entirely arbitrary. If one of your nodes already has valuable data that you need to preserve, however, it is of crucial importance that you select that node as your synchronization source. If you do initial device synchronization in the wrong direction, you will lose that data. Exercise caution.

Ou seja, se você definir o servidor 1 como seu servidor primário, você pode clonar os dados para o segundo sem perder os arquivos.

By: Tiago Cruz

Tiago Cruz — Wed, 18 Jun 2008 13:45:12 +0000

Rodrigo,

Até dá para fazer, desde que o seu Oracle já esteja em uma partição só para ele (ex: uma LVM).
Aí você cria o DRBD em cima dessa partição, ex:

on oracle-1.com.br {
device /dev/drbd0;
disk /dev/lvm/oracle;
address 192.168.0.1:7789;
flexible-meta-disk internal;
}

E na outra máquina você usa a mesma partição para replica-lo. Porém, faça isso primeiro em ambiente de testes (VM’s) e você pode até pensar em usar o OCFS (Oracle Cluster FileSystem) que já é próprio para o Oracle.

Agora, se você não tem uma partição separada, precisará de espaço em disco o suficiente para criar a partição/LVM e migrar os dados do banco para lá…

Abraços

By: Ricardo

Ricardo — Fri, 20 Jun 2008 13:10:37 +0000

O que é exatamente que o GFS faz? ele pode ser comparado ao NFS?

By: Tiago Cruz

Tiago Cruz — Fri, 20 Jun 2008 13:30:51 +0000

Ricardo,

O GFS é um FileSystem para Clusters que permite escrita simultânea no mesmo arquivo vindo de vários nós diferentes.

Dê uma olhada aqui para você entender melhor:
http://www.redhat.com/magazine/008jun05/features/gfs_nfs/

Abraços

By: bruno

bruno — Wed, 30 Jul 2008 18:58:40 +0000

Tiago, muito bom seu artigo, porem, tenho uma duvida,
fiz funcionar a escrita nos 2 discos ao mesmo tempo e tudo mas, o problema é quando eu desligo um deles, ai trava tudo e nao consigo escrever no outro node que esta ativo.
Voce ja passou por isso?

By: Tiago Cruz

Tiago Cruz — Wed, 30 Jul 2008 19:42:01 +0000

Olá Bruno,

Sim, já passei por isso inúmeras vezes e provavelmente o GFS está bloqueando o I/O porque seu nó morto não foi corretamente “fenceado”.

É para isso que serve o /sbin/obliterate que manda um “fence_ack_manual -O -e -n $REMOTE” no cara que caiu para o GFS parar de encher o saco e liberar o I/O novamente.

Recomendo que tenha um fence_device descente (via DRAC/RSA por exemplo) porque o manual é uma merda mesmo

Abraços

By: bruno

bruno — Wed, 30 Jul 2008 19:57:45 +0000

Na verdade eu não to utilizando o fence manual
Estou usando o uma bladecenter que faz o fence via RSA, porem continua a mesma coisa,
Nos logs eu vi que ele ta dando erro na parte de fencing agora:
Jul 30 17:18:39 node1 kernel: drbd0: helper command: /sbin/drbdadm outdate-peer
Jul 30 17:18:44 node1 fence_node[9470]: Fence of “10.0.20.35″ was unsuccessful
Jul 30 17:18:44 node1 kernel: drbd0: outdate-peer helper broken, returned 1

Vou dar uma olhada pra ver se acho algo a mais pra resolver isso ai posto aqui.. Valeuu

By: Tiago Cruz

Tiago Cruz — Wed, 30 Jul 2008 20:09:43 +0000

É isso mesmo, o fence do cluster.conf não está corretamente configurado — ou está correto porém não funciona :/

Passei por isso no fence_gnbd e acabei desistindo… se você conseguir algo, por favor compartilhe conosco visto que em pt_BR é difícil achar algo sobre este assunto :-/

Abraços e boa sorte

By: Diego Pereia

Diego Pereia — Wed, 03 Sep 2008 13:19:56 +0000

Bom dia;
Gostaria de saber se é possivel utilizar o Drbd para trabalhar em 2 maquinas como primarias pois eu estou balanceando as requisiçoes entre os servidores web.
E gostaria de saber também se é possivel utilizar o Drbd sem o heartbeat?
Desde já agradeço!

By: Tiago Cruz

Tiago Cruz — Wed, 03 Sep 2008 15:45:56 +0000

Diego, boa tarde!

Sim, é possível usar em duas máquinas como primary desde que seu filesystem suporte a concorrência de escrita no mesmo (GFS ou OCFS, por exemplo).

Sim, é possível usa-lo sem o heartbeat, são dois projetos completamente distintos.

Abraços

By: Diego Pereia

Diego Pereia — Wed, 03 Sep 2008 16:26:40 +0000

Tiago, boa tarde!
Seria possivel você me dar um auxilio, ou disponibilizar algum material para que posso ver e entender seu funcionamento para dar andamento no meu projeto de conclusao de curso, nele eu estou implementando servidores web em linux com alta disponibilidade, balanceamento de carga e sincronizaçao de arquivos a alta disponibilidade e o balanceamento eu consegui implementar e ja ta funcionando blz!
Agora a parte de sincronizaçao tudo que eu acho utiliza o drbd com heartbeat e uma maquina master e uma slave + com eu alterno as requisiçoes entre os servidores nao posso implementar como master e slaver!
Se puder me dar um auxilio desde já agradeço!
Abraços

By: Tiago Cruz

Tiago Cruz — Wed, 03 Sep 2008 16:39:35 +0000

Diego,

Segue alguns links que podem te ajudar:

http://ha-mc.org/?q=node/15
http://sources.redhat.com/cluster/wiki/DRBD_Cookbook
http://sources.redhat.com/cluster/wiki/FAQ/GFS

By: Diego Pereia

Diego Pereia — Wed, 03 Sep 2008 16:56:30 +0000

Ok Tiago obrigado!

By: Tiago Cruz

Tiago Cruz — Thu, 04 Sep 2008 13:55:34 +0000

Diego,

Dê uma olhada no ChironFS que pode atender suas necessidades:
http://www.everlinux.com/blog/2008/08/06/conhecendo-o-chironfs-tolerante-a-falhas-com-replicacao-de-dados/

Eu particularmente prefiro ele ao DRBD8 com Dual Primary