Índice do fórum Treinamentos Avançados Treinamento Oracle RAC Erro ao abrir database PRCR-1079 , CRS-2632

Erro ao abrir database PRCR-1079 , CRS-2632

Dúvidas, dicas e atualizações sobre o Treinamento Oracle RAC.


Mensagens: 0
Portilho e amigos boa noite.

Ainda estou testando o Oracle RAC na VM, tenho feito de tudo para dar problema, desligar VM de qualquer jeito, refazer exemplos apostila.
Enfim consegui, hoje me deparei com o seguinte erro abaixo ao levantar base.
Procurei diversas soluções, mas infelizmente não consegui.
Teria como me auxiliar, a resolver este problema. :roll:


[oracle@rac01 bin]$ ./srvctl start database -d PROD
PRCR-1079 : Failed to start resource ora.prod.db
CRS-2664: Resource 'ora.asm' is already running on 'rac01'
CRS-2632: There are no more servers to try to place resource 'ora.prod.db' on that would satisfy its placement policy
[oracle@rac01 bin]$

Como está....
[root@rac01 bin]# ./crsctl stat res -t
--------------------------------------------------------------------------------
NAME TARGET STATE SERVER STATE_DETAILS
--------------------------------------------------------------------------------
Local Resources
--------------------------------------------------------------------------------
ora.DATA.dg
ONLINE INTERMEDIATE rac01
ONLINE ONLINE rac02
ora.FRA.dg
ONLINE OFFLINE rac01
ONLINE ONLINE rac02
ora.LISTENER.lsnr
ONLINE ONLINE rac01
ONLINE ONLINE rac02
ora.asm
ONLINE INTERMEDIATE rac01 Startup Initiated
ONLINE ONLINE rac02 Started
ora.eons
ONLINE ONLINE rac01
ONLINE ONLINE rac02
ora.gsd
OFFLINE OFFLINE rac01
OFFLINE OFFLINE rac02
ora.net1.network
ONLINE ONLINE rac01
ONLINE ONLINE rac02
ora.ons
ONLINE ONLINE rac01
ONLINE ONLINE rac02
--------------------------------------------------------------------------------
Cluster Resources
--------------------------------------------------------------------------------
ora.LISTENER_SCAN1.lsnr
1 ONLINE ONLINE rac02
ora.LISTENER_SCAN2.lsnr
1 ONLINE ONLINE rac01
ora.LISTENER_SCAN3.lsnr
1 ONLINE ONLINE rac01
ora.oc4j
1 OFFLINE OFFLINE
ora.prod.db
1 ONLINE OFFLINE
2 ONLINE ONLINE rac02 Open
ora.rac01.vip
1 ONLINE ONLINE rac01
ora.rac02.vip
1 ONLINE ONLINE rac02
ora.scan1.vip
1 ONLINE ONLINE rac02
ora.scan2.vip
1 ONLINE ONLINE rac01
ora.scan3.vip
1 ONLINE ONLINE rac01
[root@rac01 bin]#

portilho Site Admin

Mensagens: 482
Oi!
Parece que o problema é que o ASM de um nó não subiu, e daí para cima (Disk Group, ASM) também não.
Reinicie as duás máquinas e coloque Alert Log do Grid (a partir de quando a máquina iniciou após este reboot).
Se você utilizar a tag de código (Code) fica mais visual aqui. Clique no botão Code aí em cima, e coloque o Log entre as Tags.

Exemplo:
Aqui ficaria o Alert Log...


Mensagens: 0
Olá Portilho boa noite e obrigado pela ajuda.
Vamos lá;
[ctssd(5689)]CRS-2407:The new Cluster Time Synchronization Service reference node is host rac02.
2016-10-09 18:56:43.304
[ctssd(5689)]CRS-2408:The clock on host rac01 has been updated by the Cluster Time Synchronization Service to be synchronous with the mean cluster time.
2016-10-09 18:56:44.231
[ctssd(5689)]CRS-2401:The Cluster Time Synchronization Service started on host rac01.
2016-10-09 18:56:45.479
[crsd(5705)]CRS-1012:The OCR service started on node rac01.
2016-10-09 18:56:46.225
[crsd(5705)]CRS-1201:CRSD started on node rac01.
2016-10-09 18:56:50.867
[cssd(5571)]CRS-1612:Network communication with node rac02 (2) missing for 50% of timeout interval.  Removal of this node from cluster in 0.790 seconds date

portilho Site Admin

Mensagens: 482
Oi !
Verefique se os nós estão se comunicando pelo IP da rede privada.


Mensagens: 0
Portilho olha só como está ping entre as redes Privadas....
[oracle@rac01 ~]$ ping 192.168.0.112 (REDE PRIVADA
PING 192.168.0.112 (192.168.0.112) 56(84) bytes of data.
64 bytes from 192.168.0.112: icmp_seq=1 ttl=64 time=0.239 ms
64 bytes from 192.168.0.112: icmp_seq=2 ttl=64 time=0.885 ms
64 bytes from 192.168.0.112: icmp_seq=3 ttl=64 time=0.597 ms
^Z
[1]+  Stopped                 ping 192.168.0.112  (REDE PRIVADA)
[oracle@rac01 ~]$ ping 192.168.0.111
PING 192.168.0.111 (192.168.0.111) 56(84) bytes of data.
64 bytes from 192.168.0.111: icmp_seq=1 ttl=64 time=0.015 ms
64 bytes from 192.168.0.111: icmp_seq=2 ttl=64 time=0.024 ms
64 bytes from 192.168.0.111: icmp_seq=3 ttl=64 time=0.056 ms
^Z
[2]+  Stopped                 ping 192.168.0.111(REDE PRIVADA)
[oracle@rac01 ~]$ ssh oracle@192.168.0.112
Last login: Mon Oct 10 17:41:44 2016 from rac01-priv.localdomain
[oracle@rac02 ~]$ ping 192.168.0.112
PING 192.168.0.112 (192.168.0.112) 56(84) bytes of data.
64 bytes from 192.168.0.112: icmp_seq=1 ttl=64 time=0.017 ms
64 bytes from 192.168.0.112: icmp_seq=2 ttl=64 time=0.053 ms
64 bytes from 192.168.0.112: icmp_seq=3 ttl=64 time=0.053 ms
^Z
[1]+  Stopped                 ping 192.168.0.112 (REDE PRIVADA
[oracle@rac02 ~]$ ping 192.168.0.111
PING 192.168.0.111 (192.168.0.111) 56(84) bytes of data.
64 bytes from 192.168.0.111: icmp_seq=1 ttl=64 time=0.248 ms
64 bytes from 192.168.0.111: icmp_seq=2 ttl=64 time=0.572 ms
64 bytes from 192.168.0.111: icmp_seq=3 ttl=64 time=0.698 ms
^Z
[2]+  Stopped                 ping 192.168.0.111
[oracle@rac02 ~]$ ssh oracle@192.168.0.111
Last login: Mon Oct 10 17:46:29 2016 from 192.168.1.110
[oracle@rac01 ~]$ /u01/app/11.2.0.4/grid/bin/srvctl start database -d PROD
PRCR-1079 : Failed to start resource ora.prod.db
CRS-2664: Resource 'ora.asm' is already running on 'rac01'
CRS-2632: There are no more servers to try to place resource 'ora.prod.db' on that would satisfy its placement policy
ORA-01078: failure in processing system parameters
CRS-2674: Start of 'ora.prod.db' on 'rac02' failed
[oracle@rac01 ~]$


Olha como está como oifcfg
[oracle@rac01 bin]$ ./oifcfg getif
eth0  192.168.1.0  global  public
eth1  192.168.0.0  global  cluster_interconnect
[oracle@rac01 bin]$ ssh oracle@192.168.0.112
Last login: Mon Oct 10 17:47:03 2016 from rac01-priv.localdomain
[oracle@rac02 ~]$ /u01/app/11.2.0.4/grid/bin/oifcfg getif
eth0  192.168.1.0  global  public
eth1  192.168.0.0  global  cluster_interconnect
[oracle@rac02 ~]$


Status do Cluster abaixo, rac02 parou..

[root@rac02 ~]# /u01/app/11.2.0.4/grid/bin/crsctl stat res -t
--------------------------------------------------------------------------------
NAME           TARGET  STATE        SERVER                   STATE_DETAILS                                                                                                                                                                   
--------------------------------------------------------------------------------
Local Resources
--------------------------------------------------------------------------------
ora.DATA.dg
               ONLINE  INTERMEDIATE rac01                                                                                                                                                                                                   
               ONLINE  ONLINE       rac02                                                                                                                                                                                                   
ora.FRA.dg
               ONLINE  INTERMEDIATE rac01                                                                                                                                                                                                   
               ONLINE  ONLINE       rac02                                                                                                                                                                                                   
ora.LISTENER.lsnr
               ONLINE  ONLINE       rac01                                                                                                                                                                                                   
               ONLINE  ONLINE       rac02                                                                                                                                                                                                   
ora.asm
               ONLINE  INTERMEDIATE rac01                    Startup Initiated                                                                                                                                                               
               ONLINE  ONLINE       rac02                                                                                                                                                                                                   
ora.eons
               ONLINE  ONLINE       rac01                                                                                                                                                                                                   
               ONLINE  ONLINE       rac02                                                                                                                                                                                                   
ora.gsd
               OFFLINE OFFLINE      rac01                                                                                                                                                                                                   
               OFFLINE OFFLINE      rac02                                                                                                                                                                                                   
ora.net1.network
               ONLINE  ONLINE       rac01                                                                                                                                                                                                   
               ONLINE  ONLINE       rac02                                                                                                                                                                                                   
ora.ons
               ONLINE  ONLINE       rac01                                                                                                                                                                                                   
               ONLINE  ONLINE       rac02                                                                                                                                                                                                   
--------------------------------------------------------------------------------
Cluster Resources
--------------------------------------------------------------------------------
ora.LISTENER_SCAN1.lsnr
      1        ONLINE  ONLINE       rac01                                                                                                                                                                                                   
ora.LISTENER_SCAN2.lsnr
      1        ONLINE  ONLINE       rac02                                                                                                                                                                                                   
ora.LISTENER_SCAN3.lsnr
      1        ONLINE  ONLINE       rac02                                                                                                                                                                                                   
ora.oc4j
      1        OFFLINE OFFLINE                                                                                                                                                                                                               
ora.prod.db
      1        ONLINE  OFFLINE                                                                                                                                                                                                               
      2        ONLINE  OFFLINE                               Instance Shutdown                                                                                                                                                               
ora.rac01.vip
      1        ONLINE  ONLINE       rac01                                                                                                                                                                                                   
ora.rac02.vip
      1        ONLINE  ONLINE       rac02                                                                                                                                                                                                   
ora.scan1.vip
      1        ONLINE  ONLINE       rac01                                                                                                                                                                                                   
ora.scan2.vip
      1        ONLINE  ONLINE       rac02                                                                                                                                                                                                   
ora.scan3.vip
      1        ONLINE  ONLINE       rac02                                                                                                                                                                                                   
[root@rac02 ~]#


Fiz o stop e start cluster log abaixo
[root@rac02 rac02]# tail -f alertrac02.log
2016-10-10 11:42:07.498
[ctssd(5468)]CRS-2406:The Cluster Time Synchronization Service timed out on host rac02. Details in /u01/app/11.2.0.4/grid/log/rac02/ctssd/octssd.log.
2016-10-10 11:42:58.942
[cssd(5385)]CRS-1601:CSSD Reconfiguration complete. Active nodes are rac01 rac02 .
2016-10-10 11:43:05.607
[crsd(5486)]CRS-2772:Server 'rac01' has been assigned to pool 'Generic'.
2016-10-10 11:43:05.607
[crsd(5486)]CRS-2772:Server 'rac01' has been assigned to pool 'ora.PROD'.
2016-10-10 12:04:01.160
[cssd(5385)]CRS-1612:Network communication with node rac01 (1) missing for 50% of timeout interval.  Removal of this node from cluster in 1.000 seconds
2016-10-10 18:07:09.450
[/u01/app/11.2.0.4/grid/bin/orarootagent.bin(5680)]CRS-5822:Agent '/u01/app/11.2.0.4/grid/bin/orarootagent_root' disconnected from server. Details at (:CRSAGF00117:) in /u01/app/11.2.0.4/grid/log/rac02/agent/crsd/orarootagent_root/orarootagent_root.log.
2016-10-10 18:07:10.389
[ctssd(5468)]CRS-2405:The Cluster Time Synchronization Service on host rac02 is shutdown by user
2016-10-10 18:07:24.482
[cssd(5385)]CRS-1603:CSSD on node rac02 shutdown by user.
2016-10-10 18:07:41.990
[cssd(12614)]CRS-1713:CSSD daemon is started in clustered mode
2016-10-10 18:07:58.193
[cssd(12614)]CRS-1707:Lease acquisition for node rac02 number 2 completed
2016-10-10 18:07:58.292
[cssd(12614)]CRS-1605:CSSD voting file is online: /u01/shared_config03/rac01/vdsk3; details in /u01/app/11.2.0.4/grid/log/rac02/cssd/ocssd.log.
2016-10-10 18:07:58.408
[cssd(12614)]CRS-1605:CSSD voting file is online: /u01/shared_config02/rac01/vdsk2; details in /u01/app/11.2.0.4/grid/log/rac02/cssd/ocssd.log.
2016-10-10 18:07:58.514
[cssd(12614)]CRS-1605:CSSD voting file is online: /u01/shared_config01/rac01/vdsk1; details in /u01/app/11.2.0.4/grid/log/rac02/cssd/ocssd.log.
2016-10-10 18:08:09.648
[cssd(12614)]CRS-1601:CSSD Reconfiguration complete. Active nodes are rac01 rac02 .
2016-10-10 18:08:11.084
[ctssd(12670)]CRS-2407:The new Cluster Time Synchronization Service reference node is host rac01.
2016-10-10 18:08:11.993
[ctssd(12670)]CRS-2401:The Cluster Time Synchronization Service started on host rac02.
2016-10-10 18:08:13.467
[crsd(12687)]CRS-1012:The OCR service started on node rac02.
2016-10-10 18:08:15.170
[crsd(12687)]CRS-1201:CRSD started on node rac02.
2016-10-10 18:08:16.336
[ohasd(5166)]CRS-8011:reboot advisory message from host: rac01, component: mo180740, with time stamp: L-2016-10-10-18:08:16.331
[ohasd(5166)]CRS-8013:reboot advisory message text: Rebooting after limit 1020 exceeded; disk timeout 1020, network timeout 700, last heartbeat from CSSD at epoch seconds 1476133695.167, 1160 milliseconds ago based on invariant clock value of 22887644
2016-10-10 18:08:17.368
[cssd(12614)]CRS-1612:Network communication with node rac01 (1) missing for 50% of timeout interval.  Removal of this node from cluster in 0.970 seconds


Antes do "desastre" fiz o backup OCR e data files com RMAN, será este o momento?

att

Matheus

portilho Site Admin

Mensagens: 482
Agora é o outro nó que remove o anterior, certo? Inverteu a remoção de nós.
Você fez alteração de rede?

Por favor, cole aqui o conteúdo de /etc/hosts, /etc/sysconfig/network-scripts/ifcfg-eth0, e /etc/sysconfig/network-scripts/ifcfg-eth1.


Mensagens: 0
Portilho boa noite,
Tentei no feriado inteiro e nada. Kkkk
Vamos lá...
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

# Public
192.168.1.111 rac01.localdomain rac01
192.168.1.112 rac02.localdomain rac02
# Private
192.168.0.111 rac01-priv.localdomain rac01-priv
192.168.0.112 rac02-priv.localdomain rac02-priv
# Virtual
192.168.1.121 rac01-vip.localdomain rac01-vip
192.168.1.122 rac02-vip.localdomain rac02-vip
# Storage
192.168.1.210 storage.localdomain storage


ifcfg-eth0
TYPE=Ethernet
BOOTPROTO=none
IPADDR=192.168.1.111
PREFIX=24
GATEWAY=192.168.1.100
DNS1=192.168.1.210
DNS2=8.8.8.8
DEFROUTE=yes
IPV4_FAILURE_FATAL=yes
IPV6INIT=no
NAME=eth0
UUID=571e980a-b857-473d-aee0-12acfd793182
ONBOOT=yes
HWADDR=00:0C:29:FE:5A:0F
DOMAIN=localdomain
LAST_CONNECT=1474397320


ifcfg-eth1

TYPE=Ethernet
BOOTPROTO=none
IPADDR=192.168.0.111
PREFIX=24
DEFROUTE=yes
IPV4_FAILURE_FATAL=yes
IPV6INIT=no
NAME=eth1
UUID=f58604af-6bc3-405d-bffe-c7cd998b05ce
ONBOOT=yes
HWADDR=00:0C:29:FE:5A:19
LAST_CONNECT=1474397320


Estou desistindo dessas VM, vou refazer tudo novamente e passo a passo provocar o caos, só que desta vez documentando onde e quando houver o problema.
Assim tenho certeza quando e onde onde ocorreu o problema.
Caso não encontre erros sem problemas, fica aqui registro meu obrigado pelo suporte.
Mas volto logo...bem rápido pois ainda está muito fresco na memória todo treinamento.

att

Matheus

portilho Site Admin

Mensagens: 482
É Matheus, também não encontro onde está o problema. Parece tudo ok. Se você um ambiente real, só com chamado na Oracle.
Não deixe de continuar com os estudos e prática, e qualquer problema é so deixar aqui!


Voltar para Treinamento Oracle RAC

cron