Procedimentos Para Placa Waas

© Copyright 2010 PromonLogicalis. Todos os direitos reservados.

LLLLLLLL, dd de mmmmm de aaaa

WAAS Banco do Brasil

Troubleshoot do Wide Area Application Engine

São Paulo, Setembro de 2013

2 | CONFIDENCIAL

Conteúdo

▪ Informações Iniciais▪ Materiais Necessários▪ Procedimentos

▪ Coleta de Logs▪ Coleta do show tech▪ Coleta do sysreport▪ Coleta do show statistics connection

▪ Imagem do Painel Frontal

▪ Problemas com as fontes de energia▪ LED Power ON▪ LEDs das fontes de tensão

3 | CONFIDENCIAL

Conteúdo

▪ Painel de informações frontal (Operator Information P anel)▪ Observações gerais▪ Significado dos LEDs

▪ Outros LEDs no painel frontal

▪ System Error▪ Painel de LEDs de diagnóstico – Significado dos LEDs▪ Painel de LEDs de diagnóstico – Botão Remind

▪ Ferramentas de diagnóstico no momento do boot▪ POST e bipes emitidos ao ligar a máquina▪ Programa de diagnóstico (“F2 for diagnostics”)

4 | CONFIDENCIAL

Conteúdo

▪ System Board

▪ Painel Traseiro

▪ Procedimento para recuperação do WAAS▪ Quando deve ser realizado?▪ Materiais necessários▪ Procedimento para realizar o recovery▪ Configurações iniciais▪ Plano de teste e validação

5 | CONFIDENCIAL

Conteúdo





6 | CONFIDENCIAL

Informações Iniciais:

▪ Materiais necessários:

▪ Notebook com software que possa acessar o equipamento via porta console (putty, por exemplo)

▪ Cabo serial para conectar a porta console do equipamento ao seu notebook. Caso não haja uma entrada serial no seu notebook, traga também um adaptador USB x Serial.

▪ Chave de fenda (Philips Nº2) para desmontar o equipamento do rack caso necessário

▪ CD de software recovery, versão 5.1.1b

7 | CONFIDENCIAL

Informações Iniciais:

▪ Procedimentos:

▪ Inicialmente verifique se o equipamento está ligando normalmente.

▪ Verifique nos LEDs externos do equipamento se é possível localizar algum erro de hardware (olhar seções: problemas com as fontes de energia, painel de informações frontal e system error).

▪ Caso o equipamento esteja ligando, colete os logs especificados nos próximos itens (show tech, sysreport e show statistics connection)

▪ Caso não seja possível ligar o equipamento verifique na placa mãe se algum dos LEDsde erro se encontra aceso (olhar seção system board). Se o equipamento não subir mas for possível visualizar a tela do boot ao ligar, realize os testes disponíveis no momento do boot (olhar seção ferramentas de diagnóstico no momento do boot).

▪ A seguir serão descritos os procedimentos de troubleshoot acima mencionados, além de outros procedimentos que podem ser úteis.

8 | CONFIDENCIAL

Conteúdo





9 | CONFIDENCIAL

Coleta de logs:

▪ Coleta do show tech

▪ Acesse pela porta console o equipamento que está apresentando problema. Quando pedido, digite o IP, o nome de usuário e a senha da máquina.

▪ Clique com o botão direito na aba superior e selecione a opção change settings

▪ Para gravar as informações do show tech em um arquivo de texto selecione a aba Session>logging e ative a opção All session output. Escolha o nome e o local do arquivo onde serão gravados automaticamente as respostas aos comandos aplicados no terminal.

▪ No terminal digite os seguintes comandos:

terminal lenght 0show tech support

10 | CONFIDENCIAL

Coleta de logs :

▪ Coleta do sysreport:

▪ Após acessar o equipamento, digite os comandos abaixo:

conf tinetd enable ftpexitcopy sysreport disk nome_do_sysreport

▪ O sysreport será salvo no disco. É recomendável que ele seja copiado para sua área de trabalho ou outro local que facilite a análise do mesmo.

▪ Acesse o ftp do WAAS e copie o arquivo de sysreport recém gerado para o local que considere melhor.

11 | CONFIDENCIAL

Coleta de logs :

▪ Coleta do show statistics connection

▪ Seguindo o mesmo procedimento utilizado para coletar o show tech colete também a saída do seguinte comando:

▪ show statistics connection

12 | CONFIDENCIAL

Conteúdo





13 | CONFIDENCIAL

Imagem do Painel Frontal:

14 | CONFIDENCIAL

Conteúdo





15 | CONFIDENCIAL

Problemas com as fontes de energia:

▪ Verificar o LED “Power-on” no painel de informações n a parte frontal do equipamento. Ele pode estar em três estados:

▪ Aceso: O equipamento está ligado

▪ Piscando: Equipamento está em standby

▪ Apagado: O equipamento está desligado, sem conexão com fontes de energia e/ou apresentando falha de hardware.

16 | CONFIDENCIAL

Problemas com as fontes de energia:

▪ Verificar os LEDs das fontes AC e DC localizados na p arte traseira do equipamento. Eles podem estar em três estados:

▪ Ambos acesos: As duas fontes estão funcionando corretamente

▪ Apenas o LED AC aceso: Possível problema com a fonte DC

▪ Ambos apagados: Possível problema com a fonte AC ou a fonte não está recebendo energia da rede elétrica

▪ Se o LED DC estiver aceso, o LED AC também deve estar.

17 | CONFIDENCIAL

Conteúdo





18 | CONFIDENCIAL

Painel de informações frontal (Operator Information Panel)

▪ Painel localizado na parte frontal do equipamento, a esquerda, da vista do usuário

▪ Verifique os LEDs desse painel, que informam sobre o funcionamento correto ou não do equipamento.

▪ Atenção especial deve ser observada se os LEDs de Sy stem Error ou de Informationestiverem acesos

19 | CONFIDENCIAL


Significado dos LED’s

▪ Power ON (LED verde):

▪ Aceso: O equipamento está ligado

▪ Piscando: Equipamento está em standby, mas permanece conectado a uma fonte AC

▪ Apagado: O equipamento está desligado, desconectado de qualquer fonte de energia e/ou apresentando falha de hardware.

▪ System Locator (LED azul):

▪ Aceso: Sua função é apenas a de localizar o equipamento.

▪ Hard Disk drive activity (LED verde):

▪ Aceso: Indica atividade no barramento SAS

20 | CONFIDENCIAL



▪ Information (LED verde):

▪ Aceso na cor verde: OCORREU UM ERRO NÃO CRÍTICO.

▪ O que fazer?

▪ Observe o painel de LEDs de diagnóstico (“Light Path Diagnostics”) para isolar o erro. Uma explicação mais detalhada de como usar esse painel se encontra na seção System Error - Painel de LEDs de Diagnóstico.

21 | CONFIDENCIAL



▪ System -error (LED âmbar):

▪ Aceso: OCORREU UM ERRO DE SISTEMA.

▪ O que fazer?

▪ Observe o painel de LEDs de diagnóstico para isolar o erro. Uma explicação mais detalhada de como usar esse painel se encontra na seção System Error - Painel de LEDs de Diagnóstico

22 | CONFIDENCIAL

Conteúdo





23 | CONFIDENCIAL

Outros LEDs no painel frontal:

Significado dos LEDs

▪ Hard Disk drive activity (LED verde ao lado do drive de hard disk):

▪ Notar que esse LED não é o mesmo que o do Operator Information Panel

▪ Aceso: Indica atividade no drive do HD

▪ Hard Disk drive status (LED âmbar ao lado do drive de hard disk):

▪ Aceso: Falha no drive

▪ Piscando lentamente: Drive está sendo reconstruído como parte de uma configuração de RAID

▪ Piscando rapidamente: Aguarde. O controlador está identificando o drive.

24 | CONFIDENCIAL

Conteúdo





25 | CONFIDENCIAL

System Error:

▪ Painel de LED’s de diagnóstico

▪ Quando os LEDs “System Error” ou “Information” estiverem acesos deve ser verificado o Painel de LEDs de diagnóstico como forma de auxiliar a encontrar o problema.

▪ Para acessar o painel deslize o latch em frente ao Painel de informações frontal (Operator Information Panel) e então puxe esse painel para frente, revelando o painel abaixo.

26 | CONFIDENCIAL

System Error:

▪ Painel de LEDs de diagnóstico

▪ Significado dos LEDs:

▪ OVER SPEC: As fontes estão usando mais energia do que o máximo aconselhável

▪ PS1: A fonte de energia na baia 1 falhou

▪ PS2: A fonte de energia na baia 2 falhou

▪ CPU: Indica falha em um dos microprocessadores

▪ VRM: Um erro ocorreu no módulo regulador de tensão do microprocessador.

▪ CNFG: Erro de configuração do hardware

27 | CONFIDENCIAL

System Error:



▪ MEM: Há um erro na memória do equipamento. Para mais detalhes, o LED aceso na “System Board” indica qual o pente de memória que está apresentando defeito.

▪ NMI: Ocorreu um erro de verificação (check). Verifique o log de erros de sistema. Para isso religue o equipamento e aperte F2 quando surgir a mensagem “F2 for Diagnostics”, escolha a opção Hardware Info > System Error Log e anote o código do erro que aparecer. Envie esse código quando abrir o chamado.

▪ S ERR: LED reservado. Não se preocupe com ele.

▪ SP: Erro no “service processor”

28 | CONFIDENCIAL

System Error:



▪ DASD: Erro no drive de HD

▪ RAID: Erro no controlador de RAID. Se possível, verifique o código do erro no system error log conforme procedimento explicado no slide anterior.

▪ FAN: Erro em uma ou mais fans (ventoinhas). O LED ao lado da fan que estiver com problemas estará aceso.

▪ TEMP: A temperatura do equipamento ou a temperatura ambiente estão acima do permitido. Pode indicar também um erro em uma das fans ou ser causada por uma passagem de ar que esteja bloqueada.

29 | CONFIDENCIAL

System Error:



▪ BRD: Erro na placa mãe. Se possível, verifique o código de erro no system error log conforme processo descrito anteriormente.

▪ PCI: Erro no bus PCI. Um LED da system board ficará aceso próximo ao slot PCI que estiver falhando. Se possível, verifique o código de erro no system error log conforme processo descrito anteriormente.

30 | CONFIDENCIAL

System Error:

▪ Painel de LED’s de diagnóstico

▪ Botão Remind:

▪ Fica localizado no canto superior esquerdo do painel de diagnóstico.

▪ Pressionar o botão indica que o usuário está ciente dos erros presentes até o momento. O LED de system error então ficará piscando até que uma das seguintes situações ocorra:

▪ Os problemas são resolvidos. Nesse caso o LED de system error se apagará

▪ Ocorre um novo problema. Nesse caso o LED de system error voltará a ficar aceso.

▪ O sistema é reiniciado.

31 | CONFIDENCIAL

Conteúdo





32 | CONFIDENCIAL

Ferramentas de diagnóstico no momento do boot :

▪ POST e bips emitidos ao ligar a máquina:

▪ POST são os testes que o equipamento realiza ao iniciar, em todos os componentes de hardware do equipamento.

▪ Preste atenção aos bips que o equipamento emite ao ligar. Se for emitido apenas um bip significa que os testes foram realizados corretamente

▪ Se nenhum bip for emitido ou se mais de um bip for emitido é porque ocorreu erro no teste de algum dos componentes. Anote a quantidade de bips e se há pausa entre eles.

33 | CONFIDENCIAL

Ferramentas de diagnóstico no momento do boot:

▪ Programa de diagnóstico ( “F2 for diagnostics” )

▪ Diagnostico que pode ser utilizado ao ligar o equipamento, emite logs que facilitam encontrar o local onde o erro está ocorrendo.

▪ Para usá-lo, ao ligar o equipamento pressione F2 quando surgir a mensagem “F2 for diagnostics” , digite a senha exigida, escolha a opção de teste “Extended” e faça todos os testes disponíveis.

▪ Sempre salve a sessão do putty e envie o arquivo gerado no chamado aberto conosco.

▪ Se o teste escolhido não for completado com sucesso pode haver um problema com o componente que está sendo testado.

▪ Após terminado o teste escolha a opção “Utility > View Test Log” . Anote o código do erro gerado.

34 | CONFIDENCIAL

Conteúdo

▪ System Board

▪ Painel Traseiro


35 | CONFIDENCIAL

System Board:

36 | CONFIDENCIAL

System Board:

▪ A system board é uma placa que contém alguns dos pri ncipais componentes de hardware, como memórias e processadores e fica loca lizada no interior do equipamento

▪ Os LEDs presentes na System Board auxiliam na localiza ção de um possível erro.

▪ Os LEDs de Power Channel mostrados acima quando estão acesos indicam excesso de corrente em um dos componentes da máquina.

37 | CONFIDENCIAL

Conteúdo

▪ System Board

▪ Painel Traseiro


38 | CONFIDENCIAL

Painel Traseiro:

39 | CONFIDENCIAL

Painel Traseiro:

▪ É o local onde estão ligados os conectores. Próximo a alguns dos conectores se encontram LEDs que, quando acesos, indicam que há u ma conexão em funcionamento naquela entrada.

▪ Notar que o led “ ethernet link ” fica aceso quando há uma conexão ethernet ativa, enquanto que o led “ ethernet activity ” fica aceso somente enquanto há transmissão de dados pela conexão.

▪ Os LEDs System Locator e System Error nesse painel possuem o mesmo significado dos LED’s de mesmo nome localizados no p ainel frontal.

40 | CONFIDENCIAL

Conteúdo

▪ System Board

▪ Painel Traseiro


41 | CONFIDENCIAL

Procedimento para recuperação do WAAS – Quando deve ser realizado ?

▪ Deve ser executado apenas quando ocorrer uma das se guintes situações:

▪ Ao logar no equipamento aparece uma das seguintes me nsagens de erro:

▪ System Initialization Finished.Disk based software not installed.Some applications may not run correctly!

▪ No directory /local/local1/./!Logging in with home = "/".System Initialization Finished.System running with no functional system disk (usually disk00).Most applications will not run correctly!Disk based software not installed.Some applications may not run correctly!

42 | CONFIDENCIAL

Procedimento para recuperação do WAAS – Quando deve ser realizado ?

▪ Deve ser executado apenas quando ocorrer uma das se guintes situações:

▪ As partições não estão montadas corretamente

▪ O equipamento não sobe pelo software

43 | CONFIDENCIAL

Procedimento para recuperação do WAAS - Materiais Necessários

▪ Para executar este procedimento é necessários os se guintes materiais:

▪ CD Recovery Software

▪ Cabo Console.

▪ Notebook com entrada serial para cabo console ou adaptador USBxSERIAL.

44 | CONFIDENCIAL

Procedimento para recuperação do WAAS - Procedimento para realizar o recovery

▪ Passo 1:

▪ Plugar o cabo console na respectiva porta no WAAS.

▪ Colocar o CD recovery no WAAS.▪ Na console do WAAS, copiar a saída do comando show running-config no-policy e colar no bloco de notas para termos o backup da configuração.

▪ Executar o comando reload.

Após executar o Passo 1 o WAAS iniciará seu boot pelo CD recovery.

45 | CONFIDENCIAL


▪ Passo 2:

▪ Após o boot pelo CD, o seguinte menu irá aparecer:

Installer Main Menu: 1. Configure Network 2. Manufacture flash 3. Install flash cookie 4. Install flash image from network 5. Install flash image from cdrom6. Install flash image from disk 7. Recreate RAID device8. Wipe out disks and install .bin image9. Exit (and reboot)

Choice [0]:

46 | CONFIDENCIAL


▪ Passo 3:

▪ Execute a opção 2, Manufacture flash.

▪ A opção de Manufacture flash verifica a memoria flash e, caso esteja invalida,

ela é automaticamente formatada para que seja colocada no layout padrão da

cisco. Caso a flash seja formatada, novos cookies serão automaticamente

reinstalados pelo CD-ROM.

Após termino do processo você será redirecionado novamente ao menu.

47 | CONFIDENCIAL


▪ Passo 4:

▪ Execute a opção 3, Install flash cookie .

48 | CONFIDENCIAL


▪ Passo 5:

▪ Execute a opção 5, Install flash image from cdrom

49 | CONFIDENCIAL


▪ Passo 6:

▪ Execute a opção 7, Recreate RAID device.

▪ A opção Recreate RAID device é o procedimento para recrear o RAID array.

50 | CONFIDENCIAL


▪ Passo 7:

▪ Execute a opção 8, Wipe out disks and install .bin image .

▪ A opção de Wipe out disks and install .bin image é o procedimento para

instalação do software. Esta opção executará as seguintes tarefas:

▪ Limpa os dados de todos os discos.

▪ Reinstalar o file system padrão da cisco nos discos.

▪ Instalar os componentes da memoria flash através da imagem .bin contida

no CD recovery.

▪ Instalar os componentes dos discos através da imagem .bin contida no CD

recovery.

51 | CONFIDENCIAL


▪ Passo 8:

• Após termino do processo você será redirecionado novamente ao menu inicial, e,

após isso, execute a opção 9, Exit and Reboot, que realizará o restart do WAAS

para que seja aplicada a nova reinstalação do software.

52 | CONFIDENCIAL

Procedimento para recuperação do WAAS - Configurações Iniciais

Devido aos procedimentos de recovery executados, o WAAS foi zerado e está sem configuração. Com isso, é necessário realizar um startup inicial para que o mesmo sincronize as configurações com o Central Manager.

� Após o termino do boot, irá aparecer alguns passos para realizar as configurações

iniciais. Será necessário colocar uma nova senha até que as configurações sejam

sincronizadas. Utilize a senha default até o termino do procedimento.

Em sequencia será direcionado para um processo de configuração inicial, aperte

a tecla ESC para cancelar o processo.

53 | CONFIDENCIAL


� Em seguida, digite os seguintes comandos:

interface GigabitEthernet 1/0 Interface de Gerenciamento

ip address IP_ADDRESS NETMASK

no autosense

bandwidth 100

full-duplex

exit

interface GigabitEthernet 2/0

shutdown

exit

primary-interface gigabitEthernet 1/0

54 | CONFIDENCIAL


� Após isso, execute os seguintes comandos:

enable

license add Enterprise

conf t

Hostname Nome_do_WAAS

ip name-server 10.8.4.1

central-manager address 10.8.7.119

cms enable

Exit

55 | CONFIDENCIAL


OBS.: Caso apareça a mensagem de falha mostrada abaixo na aplicação do

comando cms enable, entre em contato com a equipe de tecnologia do Banco do

Brasil, em Brasília, para remover o WAAS desta agência do Central Manager. Após a

remoção, executar o comando cms enable novamente.

Registration record for this device already exists or other nodes share the following information with this node: Mac <Endereco_MAC>already used by device HQ-WAAS(CeConfig_188); Ipaddress HQ-WAAS#<endereco_ip> already used by device HQ-WAAS(CeConfig_188);register: Registration failed.cms: unable to register node

56 | CONFIDENCIAL

Procedimento para recuperação do WAAS – Plano de teste e validação

Após a execução do procedimento, realize os seguintes comandos para validação do WAAS.

� Show alarms

Verificar se o WAAS possui algum alarme. Caso sim, realizar a copia destes alarmes e

enviar para a equipe de tecnologia do Banco do Brasil, em Brasília.

� Show cms info

Verificar se o status está Online, Sincronizado com o IP 10.8.7.119 e o status do serviço

CMS como CMS services information : Service cms_ce is running.

Caso esteja diferente disso, executar o comando cms config-sync no modo enable.

Verificar o status novamente e caso não tenha mudanças, informar a equipe de tecnologia

do Banco do Brasil, em Brasília.

57 | CONFIDENCIAL

OBRIGADO!

Documents

Procedimentos Para Placa Waas