Travamentos
32 views
Skip to first unread message
Edson Marquezani Filho
Dec 15, 2009, 5:11:53 AM12/15/09
to xen...@googlegroups.com
Olá, pessoal. Estou com um problema meio sério aqui, e estou tendo
dificuldades em isolar a causa.
Tenho dois servidores que rodam máquinas virtuais Xen aqui,
configurados como cluster. Ontém comecei a ter problemas.
Aparentemente, as máquinas estão travando o tempo todo, por pequenos
instantes, e voltam. Param de responder e depois voltam. Estou quase
certo de que a causa disso é hardware, porque essas máquinas sofreram
uma certa agressão externa recentemente, e porque tenho recebido essas
mensagens aqui no log das dom0s:
Dec 14 10:09:16 slave kernel: BUG: soft lockup - CPU#4 stuck for 12s!
[kipmi1:4501]
Dec 14 12:27:56 slave kernel: BUG: soft lockup - CPU#7 stuck for 14s!
[kipmi1:4501]
Dec 14 13:50:54 slave kernel: BUG: soft lockup - CPU#6 stuck for 15s!
[kipmi1:4501]
Dec 14 13:50:55 slave kernel: BUG: soft lockup - CPU#1 stuck for 10s!
[swapper:0]
Dec 14 13:56:38 slave kernel: BUG: soft lockup - CPU#6 stuck for 14s!
[kipmi1:4501]
Dec 14 14:06:26 slave kernel: BUG: soft lockup - CPU#3 stuck for 10s!
[kipmi1:4501]
Dec 14 14:18:06 slave kernel: BUG: soft lockup - CPU#6 stuck for 12s!
[kipmi1:4501]
Dec 14 15:22:07 slave kernel: BUG: soft lockup - CPU#3 stuck for 20s!
[kipmi1:4501]
Dec 14 15:22:08 slave kernel: BUG: soft lockup - CPU#1 stuck for 19s!
[swapper:0]
Dec 14 18:31:36 slave kernel: BUG: soft lockup - CPU#3 stuck for 20s!
[dlm_send:3864]
Dec 14 18:31:36 slave kernel: BUG: soft lockup - CPU#7 stuck for 20s!
[kipmi1:4501]
Dec 15 07:17:21 slave kernel: BUG: soft lockup - CPU#6 stuck for 14s!
[kipmi1:4501]
Dec 15 07:17:40 slave kernel: BUG: soft lockup - CPU#6 stuck for 10s!
[kipmi1:4501]
O mais curioso é que com ambas está acontecendo o mesmo problema.
Alguém pode me sugerir uma forma de averiguar melhor isso, ou algo pra
fazer testes e ver se o problema é que a máquina está realmente
travando em nível de hardware? E se o problema é só nas domUs ou na
dom0 também? Ainda não consegui entender direito isso.
Muito obrigado.
Obs: esses problemas surgiram sem qualquer modificação ou atualização
em configurações ou software.
dificuldades em isolar a causa.
Tenho dois servidores que rodam máquinas virtuais Xen aqui,
configurados como cluster. Ontém comecei a ter problemas.
Aparentemente, as máquinas estão travando o tempo todo, por pequenos
instantes, e voltam. Param de responder e depois voltam. Estou quase
certo de que a causa disso é hardware, porque essas máquinas sofreram
uma certa agressão externa recentemente, e porque tenho recebido essas
mensagens aqui no log das dom0s:
Dec 14 10:09:16 slave kernel: BUG: soft lockup - CPU#4 stuck for 12s!
[kipmi1:4501]
Dec 14 12:27:56 slave kernel: BUG: soft lockup - CPU#7 stuck for 14s!
[kipmi1:4501]
Dec 14 13:50:54 slave kernel: BUG: soft lockup - CPU#6 stuck for 15s!
[kipmi1:4501]
Dec 14 13:50:55 slave kernel: BUG: soft lockup - CPU#1 stuck for 10s!
[swapper:0]
Dec 14 13:56:38 slave kernel: BUG: soft lockup - CPU#6 stuck for 14s!
[kipmi1:4501]
Dec 14 14:06:26 slave kernel: BUG: soft lockup - CPU#3 stuck for 10s!
[kipmi1:4501]
Dec 14 14:18:06 slave kernel: BUG: soft lockup - CPU#6 stuck for 12s!
[kipmi1:4501]
Dec 14 15:22:07 slave kernel: BUG: soft lockup - CPU#3 stuck for 20s!
[kipmi1:4501]
Dec 14 15:22:08 slave kernel: BUG: soft lockup - CPU#1 stuck for 19s!
[swapper:0]
Dec 14 18:31:36 slave kernel: BUG: soft lockup - CPU#3 stuck for 20s!
[dlm_send:3864]
Dec 14 18:31:36 slave kernel: BUG: soft lockup - CPU#7 stuck for 20s!
[kipmi1:4501]
Dec 15 07:17:21 slave kernel: BUG: soft lockup - CPU#6 stuck for 14s!
[kipmi1:4501]
Dec 15 07:17:40 slave kernel: BUG: soft lockup - CPU#6 stuck for 10s!
[kipmi1:4501]
O mais curioso é que com ambas está acontecendo o mesmo problema.
Alguém pode me sugerir uma forma de averiguar melhor isso, ou algo pra
fazer testes e ver se o problema é que a máquina está realmente
travando em nível de hardware? E se o problema é só nas domUs ou na
dom0 também? Ainda não consegui entender direito isso.
Muito obrigado.
Obs: esses problemas surgiram sem qualquer modificação ou atualização
em configurações ou software.
Liberie Cunha-Neto
Dec 15, 2009, 6:44:37 AM12/15/09
to xen...@googlegroups.com
poderia postar um xm info , lspci , uname -a , e xm dmesg
do servidor ?
voce esta apenas mostrando o sintoma , precisamos achar a causa dele.
2009/12/15 Edson Marquezani Filho <edsonma...@gmail.com>:
> --
> Você recebeu esta mensagem porque está inscrito em Grupo "xen-br" do Grupos Google.
> Para enviar mensagens para este grupo, envie um email para xen...@googlegroups.com
> Para anular a inscrição neste grupo, envie um email para xen-br-un...@googlegroups.com
> Para mais opções, visite este grupo em http://groups.google.com/group/xen-br?hl=pt-BR
> Site do GU Xen-BR: http://www.xen-br.org
> Antes de enviar sua primeira mensagem leia atentamente as regras para participação no site http://groups.google.com/group/xen-br/web/regras?hl=pt-BR
do servidor ?
voce esta apenas mostrando o sintoma , precisamos achar a causa dele.
2009/12/15 Edson Marquezani Filho <edsonma...@gmail.com>:
> Você recebeu esta mensagem porque está inscrito em Grupo "xen-br" do Grupos Google.
> Para enviar mensagens para este grupo, envie um email para xen...@googlegroups.com
> Para anular a inscrição neste grupo, envie um email para xen-br-un...@googlegroups.com
> Para mais opções, visite este grupo em http://groups.google.com/group/xen-br?hl=pt-BR
> Site do GU Xen-BR: http://www.xen-br.org
> Antes de enviar sua primeira mensagem leia atentamente as regras para participação no site http://groups.google.com/group/xen-br/web/regras?hl=pt-BR
FGil
Apr 23, 2010, 10:20:47 PM4/23/10
to xen...@googlegroups.com
Olá pessoal,
Estamos tendo o mesmo problema que o nosso colega Edson Marquezani
postou logo no final do ano passado.
- Servidor HP Proliant DL160 G6 com Xeon Quad Core 2.26Ghz 4Gb RAM.
- Xen 3.3.2 com Kernel 2.6.18.8-xen
Seguimos com o processo de compilacao do Xen conforme é descrito no
portal do Xen, porém, ao executa-lo o sistema trava, a mensagem "BUG:
soft lockup detected on CPUXX" aparece para cada core, e o sistema nao
inicializa, parando no prompt do initramfs.
Nao tive como postar as mensagens do dmesg, messages etc pois o
servidor nao inicializa e nao registra nada no log.
Já tentei a opcao "acpi=off", e atualizei a BIOS e o problema
persiste.
Alguém tem alguma idéia do que esteja acontecendo?
Obrigado!
[]'s Fabio
On 15 dez 2009, 08:44, Liberie Cunha-Neto <libe...@gmail.com> wrote:
> poderia postar um xm info , lspci , uname -a , e xm dmesg
> do servidor ?
> voce esta apenas mostrando o sintoma , precisamos achar a causa dele.
>
>
> > Olá, pessoal. Estou com um problema meio sério aqui, e estou tendo
> > dificuldades em isolar a causa.
>
> > Tenho dois servidores que rodam máquinas virtuais Xen aqui,
> > configurados como cluster. Ontém comecei a ter problemas.
> > Aparentemente, as máquinas estão travando o tempo todo, por pequenos
> > instantes, e voltam. Param de responder e depois voltam. Estou quase
> > certo de que a causa disso é hardware, porque essas máquinas sofreram
> > uma certa agressão externa recentemente, e porque tenho recebido essas
> > mensagens aqui no log das dom0s:
>
> > Dec 14 10:09:16 slave kernel: BUG:softlockup- CPU#4 stuck for 12s!
> > Olá, pessoal. Estou com um problema meio sério aqui, e estou tendo
> > dificuldades em isolar a causa.
>
> > Tenho dois servidores que rodam máquinas virtuais Xen aqui,
> > configurados como cluster. Ontém comecei a ter problemas.
> > Aparentemente, as máquinas estão travando o tempo todo, por pequenos
> > instantes, e voltam. Param de responder e depois voltam. Estou quase
> > certo de que a causa disso é hardware, porque essas máquinas sofreram
> > uma certa agressão externa recentemente, e porque tenho recebido essas
> > mensagens aqui no log das dom0s:
>
> > [kipmi1:4501]
> > Dec 14 12:27:56 slave kernel: BUG:softlockup- CPU#7 stuck for 14s!
> > [kipmi1:4501]
> > Dec 14 13:50:54 slave kernel: BUG:softlockup- CPU#6 stuck for 15s!
> > [kipmi1:4501]
> > Dec 14 13:50:55 slave kernel: BUG:softlockup- CPU#1 stuck for 10s!
> > [swapper:0]
> > Dec 14 13:56:38 slave kernel: BUG:softlockup- CPU#6 stuck for 14s!
> > [kipmi1:4501]
> > Dec 14 14:06:26 slave kernel: BUG:softlockup- CPU#3 stuck for 10s!
> > [kipmi1:4501]
> > Dec 14 14:18:06 slave kernel: BUG:softlockup- CPU#6 stuck for 12s!
> > [kipmi1:4501]
> > Dec 14 15:22:07 slave kernel: BUG:softlockup- CPU#3 stuck for 20s!
> > [kipmi1:4501]
> > Dec 14 15:22:08 slave kernel: BUG:softlockup- CPU#1 stuck for 19s!
> > [swapper:0]
> > Dec 14 18:31:36 slave kernel: BUG:softlockup- CPU#3 stuck for 20s!
> > [dlm_send:3864]
> > Dec 14 18:31:36 slave kernel: BUG:softlockup- CPU#7 stuck for 20s!
> > [kipmi1:4501]
> > Dec 15 07:17:21 slave kernel: BUG:softlockup- CPU#6 stuck for 14s!
> > [kipmi1:4501]
> > Dec 15 07:17:40 slave kernel: BUG:softlockup- CPU#6 stuck for 10s!
> > [kipmi1:4501]
>
> > O mais curioso é que com ambas está acontecendo o mesmo problema.
>
> > Alguém pode me sugerir uma forma de averiguar melhor isso, ou algo pra
> > fazer testes e ver se o problema é que a máquina está realmente
> > travando em nível de hardware? E se o problema é só nas domUs ou na
> > dom0 também? Ainda não consegui entender direito isso.
>
> > Muito obrigado.
>
> > Obs: esses problemas surgiram sem qualquer modificação ou atualização
> > em configurações ou software.
>
> > --
> > Você recebeu esta mensagem porque está inscrito em Grupo "xen-br" do Grupos Google.
> > Para enviar mensagens para este grupo, envie um email para xen...@googlegroups.com
> > Para anular a inscrição neste grupo, envie um email para xen-br-un...@googlegroups.com
> > Para mais opções, visite este grupo emhttp://groups.google.com/group/xen-br?hl=pt-BR
>
> > O mais curioso é que com ambas está acontecendo o mesmo problema.
>
> > Alguém pode me sugerir uma forma de averiguar melhor isso, ou algo pra
> > fazer testes e ver se o problema é que a máquina está realmente
> > travando em nível de hardware? E se o problema é só nas domUs ou na
> > dom0 também? Ainda não consegui entender direito isso.
>
> > Muito obrigado.
>
> > Obs: esses problemas surgiram sem qualquer modificação ou atualização
> > em configurações ou software.
>
> > --
> > Você recebeu esta mensagem porque está inscrito em Grupo "xen-br" do Grupos Google.
> > Para enviar mensagens para este grupo, envie um email para xen...@googlegroups.com
> > Para anular a inscrição neste grupo, envie um email para xen-br-un...@googlegroups.com
Edson Marquezani Filho
Apr 26, 2010, 8:14:18 AM4/26/10
to xen...@googlegroups.com
2010/4/23 FGil <fabi...@gmail.com>:
a esse problema, na ocasião. (A situação ficou um tanto conturbada e
acabei me envolvendo com a contingência desse problema, e não tive
como voltar aqui pra contar o final da história.)
Porém, o que eu posso dizer é que meu problema era de hardware. Não
foi à toa, afinal esses servidores foram seriamente agredidos
fisicamente. A parte boa da história é que após um processo minucioso
de restauração de nossa equipe, voltaram a funcionar como se nada
tivesse acontecido. Não vi mais qualquer mensagem dessas.
( Ah, e pude constatar posteriormente que a rede estava sofrendo de
sério congestionamento por conta de vírus Windows, que inicialmente me
fizeram fritar os miolos, achando que o problema estava em meus
servidores. )
Posso afirmar com total segurança que não foi problema de software,
muito menos culpa do kernel ou do Xen. E, depois de um pouco mais de
tempo lidando com a infra-estrutura do Xen disponível no Red Hat,
posso dizer que é completamente estável e satisfatória. Recomendo. =)
>
> Olá pessoal,
>
> Estamos tendo o mesmo problema que o nosso colega Edson Marquezani
> postou logo no final do ano passado.
>
> - Servidor HP Proliant DL160 G6 com Xeon Quad Core 2.26Ghz 4Gb RAM.
> - Xen 3.3.2 com Kernel 2.6.18.8-xen
>
> Seguimos com o processo de compilacao do Xen conforme é descrito no
> portal do Xen, porém, ao executa-lo o sistema trava, a mensagem "BUG:
> soft lockup detected on CPUXX" aparece para cada core, e o sistema nao
> inicializa, parando no prompt do initramfs.
>
> Nao tive como postar as mensagens do dmesg, messages etc pois o
> servidor nao inicializa e nao registra nada no log.
>
> Já tentei a opcao "acpi=off", e atualizei a BIOS e o problema
> persiste.
>
> Alguém tem alguma idéia do que esteja acontecendo?
>
> Obrigado!
>
> []'s Fabio
>
>
Olá, pessoal. Peço desculpas por não ter dado satisfações com relação
> Olá pessoal,
>
> Estamos tendo o mesmo problema que o nosso colega Edson Marquezani
> postou logo no final do ano passado.
>
> - Servidor HP Proliant DL160 G6 com Xeon Quad Core 2.26Ghz 4Gb RAM.
> - Xen 3.3.2 com Kernel 2.6.18.8-xen
>
> Seguimos com o processo de compilacao do Xen conforme é descrito no
> portal do Xen, porém, ao executa-lo o sistema trava, a mensagem "BUG:
> soft lockup detected on CPUXX" aparece para cada core, e o sistema nao
> inicializa, parando no prompt do initramfs.
>
> Nao tive como postar as mensagens do dmesg, messages etc pois o
> servidor nao inicializa e nao registra nada no log.
>
> Já tentei a opcao "acpi=off", e atualizei a BIOS e o problema
> persiste.
>
> Alguém tem alguma idéia do que esteja acontecendo?
>
> Obrigado!
>
> []'s Fabio
>
>
a esse problema, na ocasião. (A situação ficou um tanto conturbada e
acabei me envolvendo com a contingência desse problema, e não tive
como voltar aqui pra contar o final da história.)
Porém, o que eu posso dizer é que meu problema era de hardware. Não
foi à toa, afinal esses servidores foram seriamente agredidos
fisicamente. A parte boa da história é que após um processo minucioso
de restauração de nossa equipe, voltaram a funcionar como se nada
tivesse acontecido. Não vi mais qualquer mensagem dessas.
( Ah, e pude constatar posteriormente que a rede estava sofrendo de
sério congestionamento por conta de vírus Windows, que inicialmente me
fizeram fritar os miolos, achando que o problema estava em meus
servidores. )
Posso afirmar com total segurança que não foi problema de software,
muito menos culpa do kernel ou do Xen. E, depois de um pouco mais de
tempo lidando com a infra-estrutura do Xen disponível no Red Hat,
posso dizer que é completamente estável e satisfatória. Recomendo. =)
Reply all
Reply to author
Forward
0 new messages