Conde Bond Post

Sólo existe un tipo de conocimiento, aquel que se transmite.

EM12c ConfigStateMgr:798 errors (storage_reporting_data) ~ Resolució d’Incidents


The Metalink Oracle Support associate these error messages [EM12c ConfigStateMgr:798 errors (storage_reporting_data) ] to bug 13547855 which in most cases are related to Oracle Cloud Control agents deployment into targets. Applying the procedure described in the Oracle Support document referenced can be set. However, not always like this.
You can download the english version of this post here: EM12c ConfigStateMgr798errors_storage_reporting_data – Troubleshooting

En l’entrada del bloc http://www.snapdba.com/2013/02/em12c-configstatemgr-798-errors-storage_reporting_data/ s’associa aquets missatges d’error al bug 13547855 que en la majoria dels casos estan relacionats amb el deslligament d’agents Oracle Cloud Control en un entorn. Aplicant el procediment descrit en el document de Suport d’Oracle al que fa referència es poden fixar.

De tota manera, no sempre és així, i malgrat seguir les instruccions per fixar-lo, la consola segueix reportant insistentment els missatges d’error. Si revisem el fitxer de registre on es notifica l’errada veiem:

# cat /u01/app/12cagent/agent_inst/sysman/log/gcagent_errors.log | grep "2013-09-09" 2013-09-09 13:53:19,563 [201607:GC.Executor.75083 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_keys)] ERROR - null 2013-09-09 13:53:19,564 [201607:GC.Executor.75083 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_keys)] ERROR - host:srva0d1:host_storage:storage_reporting_keys 2013-09-09 13:53:19,564 [201607:GC.Executor.75083 (host:srva0d1:host_storage)] ERROR - Critical error: 2013-09-09 13:53:19,701 [201607:GC.Executor.75083 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_alias)] ERROR - null 2013-09-09 13:53:19,702 [201607:GC.Executor.75083 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_alias)] ERROR - host:srva0d1:host_storage:storage_reporting_alias 2013-09-09 13:53:19,702 [201607:GC.Executor.75083 (host:srva0d1:host_storage)] ERROR - Critical error: 2013-09-09 13:53:20,346 [201731:oracle.dfw.impl.incident.DiagnosticsDataExtractorImpl - Incident Dump Executor (created: Mon Sep 09 13:53:19 CEST 2013)] ERROR - Result set exceeded max flood control level 2013-09-09 13:53:20,567 [201731:oracle.dfw.impl.incident.DiagnosticsDataExtractorImpl - Incident Dump Executor (created: Mon Sep 09 13:53:19 CEST 2013)] ERROR - Result set exceeded max flood control level

Darrera del vessament que provoca el resultat obtingut per la funció del programa que executa la consulta (que en una altra entrada de bloc us explicaré com fixar modificant el codi del programa perl responsable de l’incident) pot haver-hi altres errades. Per tant, seguirem el procediment descrit i comprovarem el contingut del fitxer de registre amb les errades de l’agent relacionades amb l’emmagatzematge de dades:

# cat $AGENT_HOME/agent_inst/sysman/log/gcagent_errors.log | grep storage_reporting_data 2013-09-04 13:53:19,368 [101557:GC.Executor.39108 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_data)] ERROR - null 2013-09-04 13:53:19,373 [101557:GC.Executor.39108 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_data)] ERROR - host:srva0d1:host_storage:storage_reporting_data 2013-09-05 13:53:19,554 [121731:GC.Executor.46652 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_data)] ERROR - null 2013-09-05 13:53:19,559 [121731:GC.Executor.46652 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_data)] ERROR - host:srva0d1:host_storage:storage_reporting_data 2013-09-07 13:53:19,332 [161745:GC.Executor.60863 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_data)] ERROR - null 2013-09-07 13:53:19,337 [161745:GC.Executor.60863 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_data)] ERROR - host:srva0d1:host_storage:storage_reporting_data

Si analitzem la naturalesa del missatge podem deduïr que l’agent Oracle Cloud Control no està obtenint dades d’un destí definit en la seva configuració de l’emmagatzematge:

2013-09-09 13:53:19,408 [201607:GC.Executor.75083 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_data)] ERROR - null 2013-09-09 13:53:19,412 [201607:GC.Executor.75083 (host:srva0d1:host_storage) (host:srva0d1:host_storage:storage_reporting_data)] ERROR - host:srva0d1:host_storage:storage_reporting_data

En el nostre cas, recentment s’havia fet un canvi en la configuració dels discs del servidor causant de l’incident, consultant el contingut del fitxer que es mostra tot seguit:

# cat $AGENT_HOME/agent_inst/sysman/emd/state/configstate/host/$(hostname –s)/ storage_reporting_issues.xml <DC CN="" TS="2013-09-05T13:53:20.008+02:00" TI="TARGET_GUID=D5215C2D28F0768DE043428814AC10B0" TN="srva0d1" TT="host"> RS TS="2013-09-05T13:53:20.005+02:00" MN="storage_reporting_issues"> RH> <CI NM="type">ERROR</CI> <CI NM="message_counter">10</CI> <CI NM="message_id">ERROR_INST_MAPPING</CI> <CI NM="message_params">Filesystem /dev/mapper/vg00-LV04_var</CI> <CI NM="action_id">ACTION_INST_RESOLV_ISSUE</CI> <CI NM="action_params"/> </RH>

Confirmem de que es tracta d’una errada de lectura o en l’accés a un volum, el /dev/sdd. Ho comprovem des del sistema d’arxius amb l’usuari root:

# fdisk /dev/sdd Unable to read /dev/sdd # /opt/mpp/lsvdev | grep sdd # pvscan /dev/sdd: read failed after 0 of 4096 at 0: Input/output error /dev/sdd: read failed after 0 of 4096 at 107374116864: Input/output error dev/sdd: read failed after 0 of 4096 at 107374174208: Input/output error /dev/sdd: read failed after 0 of 4096 at 4096: Input/output error PV /dev/sdb VG vg01 lvm2 [1.82 TB / 837.71 GB free] PV /dev/sda2 VG vg00 lvm2 [135.84 GB / 30.84 GB free] Total: 2 [1.95 TB] / in use: 2 [1.95 TB] / in no VG: 0 [0 ]

I efectivament, nosaltres no tenim accés al volum /sdd/ . Nosaltres hem de fixar aquest problema en la configuració del sistema operatiu o bé substituint el disc si està en mal estat.

login as: root root@ srva0d1 password: Last login: Thu Sep 12 07:50:14 2013 from 172.24.24.164 [root@ srva0d1 ~]# pvscan PV /dev/sdb VG vg01 lvm2 [1.82 TB / 837.71 GB free] PV /dev/sda2 VG vg00 lvm2 [135.84 GB / 30.84 GB free] Total: 2 [1.95 TB] / in use: 2 [1.95 TB] / in no VG: 0 [0 ]

Una vegada fet això, i seguint el procediment descrit en el document de Suport Oracle els missatges desapareixeran de la consola em12c .

Pots descarregar aquesta entrada aquí: EM12c ConfigStateMgr798errors_storage_reporting_data – resolucio incidents

Responder

Introduce tus datos o haz clic en un icono para iniciar sesión:

Logo de WordPress.com

Estás comentando usando tu cuenta de WordPress.com. Cerrar sesión / Cambiar )

Imagen de Twitter

Estás comentando usando tu cuenta de Twitter. Cerrar sesión / Cambiar )

Foto de Facebook

Estás comentando usando tu cuenta de Facebook. Cerrar sesión / Cambiar )

Google+ photo

Estás comentando usando tu cuenta de Google+. Cerrar sesión / Cambiar )

Conectando a %s

A %d blogueros les gusta esto: