DB2经常自动宕机,重启后数据库无法连接了,报SQL1015N错误

情况描述如下:在2015/1/5号早上9点10几分的时候,正在跑批时,数据库出现自动宕机,我看日志是在2015-01-05-09.14分时候最后有个日志是
db2pd -temptable finished,看到以前的日志,每次自动宕机最后一条日志都是db2pd -temptable finished,
这时大约在(9:25的时候去重新去启动了数据库服务,启动了之后这次却发现数据库无法连接了(之前出现宕机时重启服务一般会自动好了),连接时提示数据库状态不一致,报出了SQL1015N的错误信息。
然后用命令LIST UTILITIES 查发现进度一直处于0%,等了数小时(超过10小时)还一直是这个状态。(要是平时数据库在自动恢复也至少也会进度的)
日志很多看不太懂,请专家帮忙分析一下原因,及有什么好的解决方案能让数据库恢复正常,感激不尽!
环境说明:

操作系统:Microsoft(R)Windows(R) Server 2003 Enterprise
x64 Edition

系统类型:x64-basedPC

数据库版本:DB2 v9.7  32位



下面是打出的最新db2dialog.log信息:


2015-01-05-09.12.18.937000+480 E42057962H493      LEVEL: Warning
PID     : 396                  TID  : 4000        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-59                 APPID: 32.221.32.89.1263.150104094754
AUTHID  : PAS     
EDUID   : 4000                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, data management, sqldBeginIndexCreate, probe:1
MESSAGE : ADM5540W  Rebuilding "1" indexes on table "PAS     .JKSJ_HCMX".


2015-01-05-09.12.18.937000+480 E42058457H554      LEVEL: Warning
PID     : 396                  TID  : 4000        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-59                 APPID: 32.221.32.89.1263.150104094754
AUTHID  : PAS     
EDUID   : 4000                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, data management, sqldIndexCreate, probe:1
MESSAGE : ADM5541W  Rebuilding index with IID "1" in object with ID "393" and
          table space ID "8" on table "PAS     .JKSJ_HCMX".


2015-01-05-09.12.19.093000+480 E42059013H513      LEVEL: Warning
PID     : 396                  TID  : 4000        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-59                 APPID: 32.221.32.89.1263.150104094754
AUTHID  : PAS     
EDUID   : 4000                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, data management, sqldEndIndexCreate, probe:1
MESSAGE : ADM5542W  Indexes on table "PAS     .JKSJ_HCMX" are successfully
          rebuilt.


2015-01-05-09.12.19.093000+480 E42059528H636      LEVEL: Warning
PID     : 396                  TID  : 4000        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-59                 APPID: 32.221.32.89.1263.150104094754
AUTHID  : PAS     
EDUID   : 4000                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, data management, sqldEndNoLogList, probe:1
MESSAGE : ADM5530W  The COMMIT processing of table "PAS     .JKSJ_HCMX" that
          used NOT LOGGED INITIALLY has been initiated.  It is recommended that
          you take a backup of this table's table space(s).


2015-01-05-09.12.19.109000+480 I42060166H484      LEVEL: Warning
PID     : 396                  TID  : 4000        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-59                 APPID: 32.221.32.89.1263.150104094754
AUTHID  : PAS     
EDUID   : 4000                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, database utilities, sqluvtld_route_in, probe:841
DATA #1 :
Starting LOAD operation (S) (1) (I).


2015-01-05-09.14.14.796000+480 I42060652H336      LEVEL: Event
PID     : 396                  TID  : 592         PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 592                  EDUNAME: db2pdbe 0
FUNCTION: DB2 UDB, RAS/PD component, pdDumpTempTableStats, probe:3485
START   : db2pd -temptable started


2015-01-05-09.14.14.812000+480 I42060990H337      LEVEL: Event
PID     : 396                  TID  : 592         PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 592                  EDUNAME: db2pdbe 0
FUNCTION: DB2 UDB, RAS/PD component, pdDumpTempTableStats, probe:3594
START   : db2pd -temptable finished


2015-01-05-09.25.22.843000+480 I42061329H327      LEVEL: Event
PID     : 3096                 TID  : 3172        PROC : DB2START.EXE
INSTANCE: DB2                  NODE : 000
EDUID   : 3172
FUNCTION: DB2 UDB, base sys utilities, sqleIssueStartStop, probe:21
DATA #1 :
Single node instance [0] is starting


2015-01-05-09.25.22.906000+480 I42061658H1553     LEVEL: Event
PID     : 3096                 TID  : 3172        PROC : DB2START.EXE
INSTANCE: DB2                  NODE : 000
EDUID   : 3172
FUNCTION: DB2 UDB, base sys utilities, sqleStartStopSingleNode, probe:1130
DATA #1 : String, 39 bytes
D:PROGRA~1IBMSQLLIBbinDB2STAR2.EXE
DATA #2 : Hexdump, 256 bytes
0x00127634 : 443A 5C50 524F 4752 417E 315C 4942 4D5C    D:PROGRA~1IBM
0x00127644 : 5351 4C4C 4942 5C62 696E 5C44 4232 5354    SQLLIBbinDB2ST
0x00127654 : 4152 322E 4558 4500 4E4F 4D53 4700 0000    AR2.EXE.NOMSG...
0x00127664 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x00127674 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x00127684 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x00127694 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x001276A4 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x001276B4 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x001276C4 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x001276D4 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x001276E4 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x001276F4 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x00127704 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x00127714 : 0000 0000 0000 0000 0000 0000 0000 0000    ................
0x00127724 : 0000 0000 0000 0000 0000 0000 0000 0000    ................


2015-01-05-09.25.24.156000+480 I42063213H547      LEVEL: Event
PID     : 2880                 TID  : 2656        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2656                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfBufferManager::initBufferManager, probe:10
START   : Starting FCM Buffer Manager
1 resource group(s).
4224 buffers allocated.
Maximum number of buffers supported is 8192.
Total buffer manager memory required for 1 logical and 0 fail-over partition(s) is 18481164 bytes.


2015-01-05-09.25.24.171000+480 I42063762H551      LEVEL: Event
PID     : 2880                 TID  : 2656        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2656                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfChannelManager::initChannelManager, probe:10
START   : Starting FCM Channel Manager
1 resource group(s).
128 channels allocated.
Maximum number of channels supported is 8192.
Total channel manager memory required for 1 logical and 0 fail-over partitions(s) is 409616 bytes.


2015-01-05-09.25.24.171000+480 I42064315H550      LEVEL: Event
PID     : 2880                 TID  : 2656        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2656                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfSessionManager::initSessionManager, probe:10
START   : Starting FCM Session Manager
1 resource group(s).
128 sessions allocated.
Maximum number of sessions supported is 64000.
Total session manager memory required for 1 logical and 0 fail-over partitions is 1396736 bytes.


2015-01-05-09.25.24.171000+480 I42064867H428      LEVEL: Event
PID     : 2880                 TID  : 2656        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2656                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqlkf_init_allocate_shared, probe:500
START   : FCM infrastructure started
FCM running in non-shared mode; FCM parallelism degree: 1; comm protocol: TCP/IPv4


2015-01-05-09.25.24.250000+480 I42065297H386      LEVEL: Severe
PID     : 2880                 TID  : 2656        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2656                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, base sys utilities, sqleInitSysCtlr, probe:66
DATA #1 : Hexdump, 4 bytes
0x0320FC20 : 4C00 0000                                  L...


2015-01-05-09.25.24.250000+480 E42065685H856      LEVEL: Critical
PID     : 2880                 TID  : 2276        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2276                 EDUNAME: db2ipccm 0
FUNCTION: DB2 UDB, base sys utilities, sqle_panic, probe:10
MESSAGE : ADM14001C  An unexpected and critical error has occurred: "Panic".
          The instance may have been shutdown as a result. "Automatic" FODC
          (First Occurrence Data Capture) has been invoked and diagnostic
          information has been recorded in directory
          "C:DOCUME~1ALLUSE~1APPLIC~1IBMDB2DB2COPY1DB2FODC_Panic_2015-0
          1-05-09.25.24.250000". Please look in this directory for detailed
          evidence about what happened and contact IBM support if necessary to
          diagnose the problem.


2015-01-05-09.25.24.250000+480 I42066543H382      LEVEL: Severe
PID     : 2880                 TID  : 2656        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2656                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, base sys utilities, sqleSysCtlr, probe:15
DATA #1 : Hexdump, 4 bytes
0x0320FC50 : 4C00 0000                                  L...


2015-01-05-09.25.24.296000+480 I42066927H420      LEVEL: Severe
PID     : 2880                 TID  : 2276        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2276                 EDUNAME: db2ipccm 0
FUNCTION: DB2 UDB, base sys utilities, sqle_panic, probe:10
MESSAGE : sqle_panic: Panic/sleep =
DATA #1 : Hexdump, 4 bytes
0xFB10019C : 0000 0000                                  ....


2015-01-05-09.25.24.296000+480 I42067349H391      LEVEL: Severe
PID     : 2880                 TID  : 2276        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2276                 EDUNAME: db2ipccm 0
FUNCTION: DB2 UDB, base sys utilities, sqleCleanupResources, probe:5
DATA #1 : Hexdump, 4 bytes
0x0371F83C : 0000 0000                                  ....


2015-01-05-09.25.24.296000+480 I42067742H467      LEVEL: Severe
PID     : 2880                 TID  : 2276        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2276                 EDUNAME: db2ipccm 0
FUNCTION: DB2 UDB, base sys utilities, sqleCleanupResources, probe:10
DATA #1 : Hexdump, 20 bytes
0x004181C8 : 496E 7374 616E 6365 206E 6F74 2061 6374    Instance not act
0x004181D8 : 6976 6500                                  ive.


2015-01-05-09.25.24.296000+480 I42068211H351      LEVEL: Severe
PID     : 2880                 TID  : 2276        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2276                 EDUNAME: db2ipccm 0
FUNCTION: DB2 UDB, base sys utilities, sqleCleanupResources, probe:6
MESSAGE : Cleaning up ipc resources and exiting.


2015-01-05-09.25.24.515000+480 I42068564H436      LEVEL: Error
PID     : 3096                 TID  : 3172        PROC : DB2START.EXE
INSTANCE: DB2                  NODE : 000
EDUID   : 3172
FUNCTION: DB2 UDB, oper system services, sqloStartDB2Service, probe:50
DATA #2 : Hexdump, 25 bytes
0x00126A20 : 4442 322D 3020 3A20 BDF8 B3CC D2E2 CDE2    DB2-0 : ........
0x00126A30 : D6D5 D6B9 A1A3 0D0A 0A                     .........


2015-01-05-09.25.24.515000+480 I42069002H439      LEVEL: Severe
PID     : 3096                 TID  : 3172        PROC : DB2START.EXE
INSTANCE: DB2                  NODE : 000
EDUID   : 3172
FUNCTION: DB2 UDB, base sys utilities, sqleStartStopSingleNode, probe:70
DATA #1 : Hexdump, 25 bytes
0x00126FF4 : 4442 322D 3020 3A20 BDF8 B3CC D2E2 CDE2    DB2-0 : ........
0x00127004 : D6D5 D6B9 A1A3 0D0A 0A                     .........


2015-01-05-09.25.24.515000+480 I42069443H320      LEVEL: Event
PID     : 3096                 TID  : 3172        PROC : DB2START.EXE
INSTANCE: DB2                  NODE : 000
EDUID   : 3172
FUNCTION: DB2 UDB, base sys utilities, sqleIssueStartStop, probe:190
DATA #1 :
Single node stopped [-1032].


2015-01-05-09.31.04.500000+480 I42069765H547      LEVEL: Event
PID     : 392                  TID  : 2148        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2148                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfBufferManager::initBufferManager, probe:10
START   : Starting FCM Buffer Manager
1 resource group(s).
4224 buffers allocated.
Maximum number of buffers supported is 8192.
Total buffer manager memory required for 1 logical and 0 fail-over partition(s) is 18481164 bytes.


2015-01-05-09.31.04.593000+480 I42070314H551      LEVEL: Event
PID     : 392                  TID  : 2148        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2148                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfChannelManager::initChannelManager, probe:10
START   : Starting FCM Channel Manager
1 resource group(s).
128 channels allocated.
Maximum number of channels supported is 8192.
Total channel manager memory required for 1 logical and 0 fail-over partitions(s) is 409616 bytes.


2015-01-05-09.31.04.609000+480 I42070867H550      LEVEL: Event
PID     : 392                  TID  : 2148        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2148                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfSessionManager::initSessionManager, probe:10
START   : Starting FCM Session Manager
1 resource group(s).
128 sessions allocated.
Maximum number of sessions supported is 64000.
Total session manager memory required for 1 logical and 0 fail-over partitions is 1396736 bytes.


2015-01-05-09.31.04.609000+480 I42071419H428      LEVEL: Event
PID     : 392                  TID  : 2148        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2148                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqlkf_init_allocate_shared, probe:500
START   : FCM infrastructure started
FCM running in non-shared mode; FCM parallelism degree: 1; comm protocol: TCP/IPv4


2015-01-05-09.31.06.453000+480 E42071849H327      LEVEL: Event
PID     : 392                  TID  : 772         PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 772
FUNCTION: DB2 UDB, base sys utilities, DB2StartMain, probe:911
MESSAGE : ADM7513W  Database manager has started.
START   : DB2 DBM


2015-01-05-09.44.40.843000+480 I42072178H517      LEVEL: Event
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, config/install, sqlfLogUpdateCfgParam, probe:20
CHANGE  : CFG DB JRPAS   : "Database_memory" From: "818920"   To: "786432"


2015-01-05-09.44.42.062000+480 I42072697H448      LEVEL: Warning
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqledint, probe:30
MESSAGE : Crash Recovery is needed.


2015-01-05-09.44.45.453000+480 E42073147H478      LEVEL: Event
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeLocalDatabase::FirstConnect, probe:1000
START   : DATABASE: JRPAS    : ACTIVATED: NO


2015-01-05-09.44.45.515000+480 I42073627H512      LEVEL: Warning
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlpresr, probe:410
MESSAGE : Crash recovery started. LowtranLSN 00000EC48810F7F1 MinbuffLSN
          00000EC31DEB7453


2015-01-05-09.44.45.531000+480 E42074141H465      LEVEL: Warning
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlpresr, probe:410
MESSAGE : ADM1530E  Crash recovery has been initiated.


2015-01-05-09.44.45.578000+480 I42074608H509      LEVEL: Warning
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlprecm, probe:2000
DATA #1 :
Using parallel recovery with 3 agents 14 QSets 42 queues and 256 chunks


2015-01-05-09.44.51.921000+480 I42075119H541      LEVEL: Error
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, common communication, sqlcctcptest, probe:11
MESSAGE : Detected client termination
DATA #1 : Hexdump, 2 bytes
0x025C3388 : 3600                                       6.


2015-01-05-09.44.51.968000+480 I42075662H523      LEVEL: Error
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, common communication, sqlcctest, probe:50
MESSAGE : sqlcctest RC
DATA #1 : Hexdump, 2 bytes
0x025C33A8 : 3600                                       6.


2015-01-05-09.44.51.968000+480 I42076187H510      LEVEL: Error
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeAgent::AgentBreathingPoint, probe:10
CALLED  : DB2 UDB, common communication, sqlcctest
RETCODE : ZRC=0x00000036=54


2015-01-05-09.44.51.984000+480 I42076699H985      LEVEL: Warning
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeAgent::AgentBreathingPoint, probe:16
CALLSTCK:
  [0] 0x6CC8FB63 pdLog + 0x2E3
  [1] 0x6D5D37B6 sqltLogCallStack + 0x1A
  [2] 0x6D690C0B sqeAgent::AgentBreathingPoint + 0x3D5
  [3] 0x6D3F3DDC sqleIntrptWait + 0x120
  [4] 0x6D704262 sqeScoordCB::ScoordWait + 0xAE
  [5] 0x6DFDF626 sqlprecm + 0x812
  [6] 0x6DFCF5F5 sqlpresr + 0x71D
  [7] 0x6D68453C sqeLocalDatabase::RecoverDatabase + 0x70
  [8] 0x6D684D18 sqeLocalDatabase::RestartDatabase + 0x1B0
  [9] 0x6ED8B77F _VInfreq_?InitEngineComponentssqeApplicationAAEHDPAVsqeAgentPAUSQLE_BWAPAUsqlcaPAUSQLESRSU_STATUS_VECTORDZ + 0x47B


2015-01-05-09.44.52.859000+480 I42077686H541      LEVEL: Error
PID     : 392                  TID  : 3552        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 3552                 EDUNAME: db2redom (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlprGetFreeQE, probe:60
RETCODE : ZRC=0x80100003=-2146435069=SQLP_INTRP "USER INTERRUPT DETECTED"
          DIA8003C The interrupt  has been received.


2015-01-05-09.44.53.234000+480 I42078229H544      LEVEL: Error
PID     : 392                  TID  : 3552        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 3552                 EDUNAME: db2redom (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlpPRecReadLog, probe:3880
RETCODE : ZRC=0x80100003=-2146435069=SQLP_INTRP "USER INTERRUPT DETECTED"
          DIA8003C The interrupt  has been received.


2015-01-05-09.44.54.453000+480 I42078775H538      LEVEL: Error
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlprecm, probe:2350
RETCODE : ZRC=0x800F0003=-2146500605=SQLO_INTRP "Interrupt.  User Cancel."
          DIA8003C The interrupt  has been received.


2015-01-05-09.44.54.453000+480 I42079315H580      LEVEL: Error
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlpresr, probe:640
DATA #1 : String, 142 bytes
Crash recovery failed with rc -2146500605
LowtranLSN 00000EC31DEB7453 MinbuffLSN 00000EC31DEB7453
Recovery started on log file S0000013.LOG.


2015-01-05-09.44.54.453000+480 E42079897H502      LEVEL: Error
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeLocalDatabase::RecoverDatabase, probe:60
MESSAGE : ADM1532E  Crash recovery has failed with SQLCODE "-1044".


2015-01-05-09.44.54.453000+480 I42080401H500      LEVEL: Error
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeLocalDatabase::RestartDatabase, probe:111
MESSAGE : Restart failed due to interrupt with type: -2097151993


2015-01-05-09.44.54.453000+480 I42080903H572      LEVEL: Severe
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeLocalDatabase::RestartDatabase, probe:202
MESSAGE : If 'DATALINK: file server not registered' appears above and
          DATALINKS=NO, set DATALINKS=YES and try RESTART again


2015-01-05-09.44.54.453000+480 I42081477H463      LEVEL: Severe
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeApplication::AppStartUsing, probe:140
RETCODE : ZRC=0xFFFFFBEC=-1044


2015-01-05-09.44.54.484000+480 I42081942H498      LEVEL: Warning
PID     : 392                  TID  : 2328        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-33                 APPID: 32.221.32.89.1486.150105014440
AUTHID  : PAS     
EDUID   : 2328                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, buffer pool services, sqlbCleanupBeforeTerm, probe:4941
DATA #1 : String, 41 bytes
Recovery failed, dirty pages not flushed.


2015-01-05-10.01.06.531000+480 I42082442H442      LEVEL: Warning
PID     : 392                  TID  : 2148        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2148                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfDynamicResourceMgr::AdjustResources, probe:100
MESSAGE : FCM Automatic/Dynamic Resource Adjustment (Buffer): 1024 will be
          released; new total will be 3200


2015-01-05-10.31.06.546000+480 I42082886H441      LEVEL: Warning
PID     : 392                  TID  : 2148        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2148                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfDynamicResourceMgr::AdjustResources, probe:100
MESSAGE : FCM Automatic/Dynamic Resource Adjustment (Buffer): 768 will be
          released; new total will be 2432


2015-01-05-11.59.26.375000+480 I42083329H444      LEVEL: Warning
PID     : 392                  TID  : 2812        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-313
EDUID   : 2812                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, bsu security, sqlexLogPluginMessage, probe:20
DATA #1 : String with size, 62 bytes
Password validation for user pas failed with rc = -2146500507


2015-01-05-11.59.28.625000+480 I42083775H444      LEVEL: Warning
PID     : 392                  TID  : 2812        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-314
EDUID   : 2812                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, bsu security, sqlexLogPluginMessage, probe:20
DATA #1 : String with size, 62 bytes
Password validation for user pas failed with rc = -2146500507


2015-01-05-12.05.01.421000+480 I42084221H444      LEVEL: Warning
PID     : 392                  TID  : 2812        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-360
EDUID   : 2812                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, bsu security, sqlexLogPluginMessage, probe:20
DATA #1 : String with size, 62 bytes
Password validation for user pas failed with rc = -2146500507


2015-01-05-12.05.17.265000+480 I42084667H444      LEVEL: Warning
PID     : 392                  TID  : 2812        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-364
EDUID   : 2812                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, bsu security, sqlexLogPluginMessage, probe:20
DATA #1 : String with size, 62 bytes
Password validation for user pas failed with rc = -2146500507


2015-01-05-12.14.39.781000+480 I42085113H444      LEVEL: Warning
PID     : 392                  TID  : 2812        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-402
EDUID   : 2812                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, bsu security, sqlexLogPluginMessage, probe:20
DATA #1 : String with size, 62 bytes
Password validation for user pas failed with rc = -2146500507


2015-01-05-12.14.57.546000+480 I42085559H444      LEVEL: Warning
PID     : 392                  TID  : 2812        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-403
EDUID   : 2812                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, bsu security, sqlexLogPluginMessage, probe:20
DATA #1 : String with size, 62 bytes
Password validation for user pas failed with rc = -2146500507


2015-01-05-14.25.37.468000+480 I42086005H403      LEVEL: Event
PID     : 392                  TID  : 3432        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 3432
FUNCTION: DB2 UDB, base sys utilities, DB2StopMain, probe:104
DATA #1 : String, 26 bytes
Force phase is in progress
DATA #2 : Hexdump, 4 bytes
0x08FAFE4C : 0100 0000                                  ....


2015-01-05-14.25.37.468000+480 I42086410H646      LEVEL: Event
PID     : 392                  TID  : 2148        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2148                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, base sys utilities, sqeAppServices::ExecuteStopForce, probe:1040
DATA #1 : String, 49 bytes
[ForceSN]->Number of applications to be forced :
DATA #2 : Hexdump, 4 bytes
0x0320F7FC : 0300 0000                                  ....
DATA #3 : String, 43 bytes
[ForceSN]->Number of system applications :
DATA #4 : Hexdump, 4 bytes
0x0320F7F8 : 0200 0000                                  ....


2015-01-05-14.30.18.250000+480 I42087058H547      LEVEL: Event
PID     : 2096                 TID  : 2304        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2304                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfBufferManager::initBufferManager, probe:10
START   : Starting FCM Buffer Manager
1 resource group(s).
4224 buffers allocated.
Maximum number of buffers supported is 8192.
Total buffer manager memory required for 1 logical and 0 fail-over partition(s) is 18481164 bytes.


2015-01-05-14.30.18.359000+480 I42087607H551      LEVEL: Event
PID     : 2096                 TID  : 2304        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2304                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfChannelManager::initChannelManager, probe:10
START   : Starting FCM Channel Manager
1 resource group(s).
128 channels allocated.
Maximum number of channels supported is 8192.
Total channel manager memory required for 1 logical and 0 fail-over partitions(s) is 409616 bytes.


2015-01-05-14.30.18.375000+480 I42088160H550      LEVEL: Event
PID     : 2096                 TID  : 2304        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2304                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfSessionManager::initSessionManager, probe:10
START   : Starting FCM Session Manager
1 resource group(s).
128 sessions allocated.
Maximum number of sessions supported is 64000.
Total session manager memory required for 1 logical and 0 fail-over partitions is 1396736 bytes.


2015-01-05-14.30.18.375000+480 I42088712H428      LEVEL: Event
PID     : 2096                 TID  : 2304        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2304                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqlkf_init_allocate_shared, probe:500
START   : FCM infrastructure started
FCM running in non-shared mode; FCM parallelism degree: 1; comm protocol: TCP/IPv4


2015-01-05-14.30.20.203000+480 E42089142H328      LEVEL: Event
PID     : 2096                 TID  : 2160        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2160
FUNCTION: DB2 UDB, base sys utilities, DB2StartMain, probe:911
MESSAGE : ADM7513W  Database manager has started.
START   : DB2 DBM


2015-01-05-14.36.22.031000+480 I42089472H448      LEVEL: Warning
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqledint, probe:30
MESSAGE : Crash Recovery is needed.


2015-01-05-14.36.24.218000+480 E42089922H478      LEVEL: Event
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeLocalDatabase::FirstConnect, probe:1000
START   : DATABASE: JRPAS    : ACTIVATED: NO


2015-01-05-14.36.24.265000+480 I42090402H512      LEVEL: Warning
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlpresr, probe:410
MESSAGE : Crash recovery started. LowtranLSN 00000EC48810F7F1 MinbuffLSN
          00000EC31DEB7453


2015-01-05-14.36.24.265000+480 E42090916H465      LEVEL: Warning
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlpresr, probe:410
MESSAGE : ADM1530E  Crash recovery has been initiated.


2015-01-05-14.36.24.296000+480 I42091383H509      LEVEL: Warning
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlprecm, probe:2000
DATA #1 :
Using parallel recovery with 3 agents 14 QSets 42 queues and 256 chunks


2015-01-05-14.36.36.875000+480 I42091894H541      LEVEL: Error
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, common communication, sqlcctcptest, probe:11
MESSAGE : Detected client termination
DATA #1 : Hexdump, 2 bytes
0x08CC3388 : 3600                                       6.


2015-01-05-14.36.36.968000+480 I42092437H523      LEVEL: Error
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, common communication, sqlcctest, probe:50
MESSAGE : sqlcctest RC
DATA #1 : Hexdump, 2 bytes
0x08CC33A8 : 3600                                       6.


2015-01-05-14.36.36.968000+480 I42092962H510      LEVEL: Error
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeAgent::AgentBreathingPoint, probe:10
CALLED  : DB2 UDB, common communication, sqlcctest
RETCODE : ZRC=0x00000036=54


2015-01-05-14.36.37.046000+480 I42093474H985      LEVEL: Warning
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeAgent::AgentBreathingPoint, probe:16
CALLSTCK:
  [0] 0x6CC8FB63 pdLog + 0x2E3
  [1] 0x6D5D37B6 sqltLogCallStack + 0x1A
  [2] 0x6D690C0B sqeAgent::AgentBreathingPoint + 0x3D5
  [3] 0x6D3F3DDC sqleIntrptWait + 0x120
  [4] 0x6D704262 sqeScoordCB::ScoordWait + 0xAE
  [5] 0x6DFDF626 sqlprecm + 0x812
  [6] 0x6DFCF5F5 sqlpresr + 0x71D
  [7] 0x6D68453C sqeLocalDatabase::RecoverDatabase + 0x70
  [8] 0x6D684D18 sqeLocalDatabase::RestartDatabase + 0x1B0
  [9] 0x6ED8B77F _VInfreq_?InitEngineComponentssqeApplicationAAEHDPAVsqeAgentPAUSQLE_BWAPAUsqlcaPAUSQLESRSU_STATUS_VECTORDZ + 0x47B


2015-01-05-14.36.37.890000+480 I42094461H541      LEVEL: Error
PID     : 2096                 TID  : 3512        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 3512                 EDUNAME: db2redom (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlprGetFreeQE, probe:60
RETCODE : ZRC=0x80100003=-2146435069=SQLP_INTRP "USER INTERRUPT DETECTED"
          DIA8003C The interrupt  has been received.


2015-01-05-14.36.37.937000+480 I42095004H544      LEVEL: Error
PID     : 2096                 TID  : 3512        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 3512                 EDUNAME: db2redom (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlpPRecReadLog, probe:3880
RETCODE : ZRC=0x80100003=-2146435069=SQLP_INTRP "USER INTERRUPT DETECTED"
          DIA8003C The interrupt  has been received.


2015-01-05-14.36.38.140000+480 I42095550H538      LEVEL: Error
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlprecm, probe:2350
RETCODE : ZRC=0x800F0003=-2146500605=SQLO_INTRP "Interrupt.  User Cancel."
          DIA8003C The interrupt  has been received.


2015-01-05-14.36.38.171000+480 I42096090H580      LEVEL: Error
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, recovery manager, sqlpresr, probe:640
DATA #1 : String, 142 bytes
Crash recovery failed with rc -2146500605
LowtranLSN 00000EC31DEB7453 MinbuffLSN 00000EC31DEB7453
Recovery started on log file S0000013.LOG.


2015-01-05-14.36.38.171000+480 E42096672H502      LEVEL: Error
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeLocalDatabase::RecoverDatabase, probe:60
MESSAGE : ADM1532E  Crash recovery has failed with SQLCODE "-1044".


2015-01-05-14.36.38.171000+480 I42097176H500      LEVEL: Error
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeLocalDatabase::RestartDatabase, probe:111
MESSAGE : Restart failed due to interrupt with type: -2097151993


2015-01-05-14.36.38.171000+480 I42097678H572      LEVEL: Severe
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeLocalDatabase::RestartDatabase, probe:202
MESSAGE : If 'DATALINK: file server not registered' appears above and
          DATALINKS=NO, set DATALINKS=YES and try RESTART again


2015-01-05-14.36.38.171000+480 I42098252H463      LEVEL: Severe
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, base sys utilities, sqeApplication::AppStartUsing, probe:140
RETCODE : ZRC=0xFFFFFBEC=-1044


2015-01-05-14.36.38.187000+480 I42098717H498      LEVEL: Warning
PID     : 2096                 TID  : 2452        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000         DB   : JRPAS
APPHDL  : 0-17                 APPID: 32.221.32.89.1294.150105063620
AUTHID  : PAS     
EDUID   : 2452                 EDUNAME: db2agent (JRPAS) 0
FUNCTION: DB2 UDB, buffer pool services, sqlbCleanupBeforeTerm, probe:4941
DATA #1 : String, 41 bytes
Recovery failed, dirty pages not flushed.


2015-01-05-15.00.20.250000+480 I42099217H442      LEVEL: Warning
PID     : 2096                 TID  : 2304        PROC : db2syscs.exe
INSTANCE: DB2                  NODE : 000
EDUID   : 2304                 EDUNAME: db2sysc 0
FUNCTION: DB2 UDB, fast comm manager, sqkfDynamicResourceMgr::AdjustResources, probe:100
MESSAGE : FCM Automatic/Dynamic Resource Adjustment (Buffer): 1024 will be
          released; new total will be 3200
参与7

5同行回答

zss0109211zss0109211数据库管理员null
FODC日志传一下显示全部
FODC日志传一下收起
互联网服务 · 2015-01-22
浏览3137
nayaernayaer研发工程师广州XX科技公司
回复 4# wangyax 由于是客户(非科技人员)直接操作的,而且客户也只能描述一个大概,肯定不记得具体的时间点他做了哪个操作,反正他宕机后再启动服务后,再发出connect to jrpas就报SQL1015N错误了(这些操作应该还是我们以前教他的),后面应该没打过其它命令,只打过connect to jrpas,发...显示全部
回复 4# wangyax

由于是客户(非科技人员)直接操作的,而且客户也只能描述一个大概,肯定不记得具体的时间点他做了哪个操作,反正他宕机后再启动服务后,再发出connect to jrpas就报SQL1015N错误了(这些操作应该还是我们以前教他的),后面应该没打过其它命令,只打过connect to jrpas,发生错误后就跟我们取得了联系,然后让他打了这个日志给我们
我通过日志猜想,操作如下:     9:14的时候发生LOAD 加载导致宕机   9:25的时候应用人员发现了问题去db2start了服务
   9:44的时候应该是发出了connect to jrpas连接然后提示报错

专家,通过日志能发现什么问题?

收起
软件开发 · 2015-01-09
浏览3089
wangyaxwangyax软件开发工程师金融机构
问题发生的时间是啥时候?有几个关键的时间点,9:25之前以及之后,9:44之后,那些操作是错误程序造成的,那些又是你手工搞的?能不能详细描述一下应用人员是怎么操作的,发生了什么现象;你发现了什么,怎么操作的?...显示全部
问题发生的时间是啥时候?
有几个关键的时间点,9:25之前以及之后,9:44之后,那些操作是错误程序造成的,那些又是你手工搞的?能不能详细描述一下应用人员是怎么操作的,发生了什么现象;你发现了什么,怎么操作的?收起
互联网服务 · 2015-01-07
浏览3187
nayaernayaer研发工程师广州XX科技公司
首先很感谢wangyax 的回复!看到之前宕机的日志,每次出现宕机都是在加载LOAD操作时,宕机后每次最后一条日志就是db2pd -temptable finished,而且这种频率是一个月会发生好几次,请问专家是何原因呢?应该如何避免这个问题呢,另外我现在数据库是属于生产机,而且设置也一直是循环日志...显示全部
首先很感谢wangyax 的回复!
看到之前宕机的日志,每次出现宕机都是在加载LOAD操作时,宕机后每次最后一条日志就是db2pd -temptable finished,而且这种频率是一个月会发生好几次,请问专家是何原因呢?应该如何避免这个问题呢,另外我现在数据库是属于生产机,而且设置也一直是循环日志方式的,
这个问题已经困扰我很久了,有人说是因为我的版本可能是32位造成的?是这个原因吗?或者说是DB2版本本身存在这个BUG?
1)、那天早上也是出现了宕机后,然后人工去db2start 了服务,这时再connect to jrpas 就出现SQL1015N错误,提示数据库不一致,等了一天都没恢复过来,日志就是上面这些。
2)、这个问题可能不能复现,只能等他自己出现。最主要是现在没找出具体原因
下面是get db cfg


       数据库 jrpas 的数据库配置



数据库配置发行版级别                                    = 0x0d00

数据库发行版级别                                        = 0x0d00



数据库地域                                              = CN

数据库代码页                                            = 1386

数据库代码集                                            = GBK

数据库国家/地区代码                                     = 86

数据库整理顺序                                          = UNIQUE

备用整理顺序                              (ALT_COLLATE) =

数字兼容性                                              = OFF

Varchar2 兼容性                                         = OFF

日期兼容性                                              = OFF

数据库页大小                                            = 4096



动态 SQL 查询管理                      (DYN_QUERY_MGMT) = DISABLE



语句集中器                                  (STMT_CONC) = OFF



对此数据库的发现支持                      (DISCOVER_DB) = ENABLE



限制访问                                                = NO

缺省查询优化类                           (DFT_QUERYOPT) = 5

并行度                                     (DFT_DEGREE) = ANY

在算术异常时继续                      (DFT_SQLMATHWARN) = NO

缺省刷新有效期                        (DFT_REFRESH_AGE) = 0

缺省维护的选项(DFT_MTTB_TYPES)的表类型                = SYSTEM

保留的高频值的数目                     (NUM_FREQVALUES) = 10

保留的分位点数目                        (NUM_QUANTILES) = 20



十进制浮点舍入方式                    (DECFLT_ROUNDING) = ROUND_HALF_EVEN



备份暂挂                                                = NO



已将所有已落实的事务写入磁盘                            = NO

前滚暂挂                                                = NO

复原暂挂                                                = NO



启用的多页文件分配                                      = YES



恢复状态的日志保留                                      = NO

日志记录状态的用户出口                                  = NO



自调整内存                            (SELF_TUNING_MEM) = ON

数据库共享内存大小(4KB)             (DATABASE_MEMORY) = AUTOMATIC(823124)

数据库内存阈值                          (DB_MEM_THRESH) = 10

锁定列表的最大存储量(4KB)                   (LOCKLIST) = 50000

每个应用程序的锁定百分比列表                 (MAXLOCKS) = 98

程序包高速缓存大小(4KB)                  (PCKCACHESZ) = AUTOMATIC(105790)

共享排序的排序堆域值(4KB)            (SHEAPTHRES_SHR) = AUTOMATIC(307861)

排序列表堆(4KB)                            (SORTHEAP) = AUTOMATIC(61572)



数据库堆(4KB)                                (DBHEAP) = 8192

目录高速缓存大小(4KB)               (CATALOGCACHE_SZ) = 801

日志缓冲区大小(4KB)                         (LOGBUFSZ) = 4096

实用程序堆大小(4KB)                    (UTIL_HEAP_SZ) = 118912

缓冲池大小(页)                             (BUFFPAGE) = 1000

SQL 语句堆(4KB)                            (STMTHEAP) = 4096

缺省应用程序堆(4KB)                      (APPLHEAPSZ) = 512

应用程序内存大小(4KB)                (APPL_MEMORY) = AUTOMATIC(20000)

统计信息堆大小(4KB)                    (STAT_HEAP_SZ) = AUTOMATIC(4384)



检查死锁的时间间隔(毫秒)                  (DLCHKTIME) = 10000

锁定超时(秒)                             (LOCKTIMEOUT) = 10



更改的页阈值                           (CHNGPGS_THRESH) = 80

异步页清除程序的数目                   (NUM_IOCLEANERS) = AUTOMATIC(31)

I/O 服务器的数目                        (NUM_IOSERVERS) = AUTOMATIC(10)

索引排序标志                                 (INDEXSORT) = YES

顺序检测标志                                (SEQDETECT) = YES

缺省预取大小(页)                    (DFT_PREFETCH_SZ) = AUTOMATIC



跟踪修改的页数                               (TRACKMOD) = OFF



容器的缺省数目                                          = 1

缺省表空间扩展数据块大小(页)            (DFT_EXTENT_SZ) = 32



最大活动应用程序数                           (MAXAPPLS) = AUTOMATIC(140)

活动应用程序的平均数目       (AVG_APPLS) = AUTOMATIC(1)

每个应用程序的最大打开数据库文件数           (MAXFILOP) = 32768



日志文件大小(4KB)                         (LOGFILSIZ) = 20480

主日志文件的数目                           (LOGPRIMARY) = 200

辅助日志文件的数目                          (LOGSECOND) = 40

已更改的至日志文件的路径                   (NEWLOGPATH) =

日志文件路径                                            = D:\DB2\NODE0000\SQL00002\SQLOGDIR\

溢出日志路径                          (OVERFLOWLOGPATH) =

镜像日志路径                            (MIRRORLOGPATH) =

首个活动日志文件                                        =

磁盘上已满的块日志                    (BLK_LOG_DSK_FUL) = NO

非记录块操作                          (BLOCKNONLOGGED) = NO

事务使用的最大主日志空间的百分比        (MAX_LOG)= 0

1 个活动 UOW 的活动日志文件的数目        (NUM_LOG_SPAN) = 0



组落实计数                                  (MINCOMMIT) = 1

软检查点前回收的日志文件的百分比              (SOFTMAX) = 1360

启用的恢复的日志保留                        (LOGRETAIN) = OFF

启用的日志记录的用户出口                     (USEREXIT) = OFF



HADR 数据库角色                                          = STANDARD

HADR 本地主机名                        (HADR_LOCAL_HOST) =

HADR 本地服务名称                       (HADR_LOCAL_SVC) =

HADR 远程主机名                       (HADR_REMOTE_HOST) =

HADR 远程服务名称                      (HADR_REMOTE_SVC) =

远程服务器的 HADR 实例名              (HADR_REMOTE_INST) =

HADR 超时值                               (HADR_TIMEOUT) = 120

HADR 日志写同步方式                      (HADR_SYNCMODE) = NEARSYNC

HADR 对等窗口持续时间(秒)       (HADR_PEER_WINDOW) = 0



第一个日志归档方法                        (LOGARCHMETH1) = OFF

logarchmeth1 的选项                        (LOGARCHOPT1) =

第二个日志归档方法                        (LOGARCHMETH2) = OFF

logarchmeth2 的选项                        (LOGARCHOPT2) =

故障转移日志归档路径                     (FAILARCHPATH) =

错误时重试日志归档次数                   (NUMARCHRETRY) = 5

日志归档重试延迟(秒)                 (ARCHRETRYDELAY) = 20

供应商选项                                  (VENDOROPT) =



启用的自动重新启动                        (AUTORESTART) = ON

索引重新创建时间和重做索引构建               (INDEXREC) = SYSTEM (RESTART)

在索引构建期间记录页                    (LOGINDEXBUILD) = OFF

loadrec 会话的缺省数目                (DFT_LOADREC_SES) = 1

要保留的数据库备份的数目               (NUM_DB_BACKUPS) = 12

恢复历史记录保留时间(天数)          (REC_HIS_RETENTN) = 366

自动删除恢复对象                     (AUTO_DEL_REC_OBJ) = OFF



TSM 管理类                              (TSM_MGMTCLASS) =

TSM 节点名                               (TSM_NODENAME) =

TSM 所有者                                  (TSM_OWNER) =

TSM 密码                                 (TSM_PASSWORD) =



自动维护                                   (AUTO_MAINT) = ON

   自动数据库备份                       (AUTO_DB_BACKUP) = OFF

   自动表维护                           (AUTO_TBL_MAINT) = ON

     自动 runstats                       (AUTO_RUNSTATS) = OFF

       自动语句统计信息                  (AUTO_STMT_STATS) = ON

     自动统计信息概要分析              (AUTO_STATS_PROF) = OFF

       自动概要文件更新                  (AUTO_PROF_UPD) = OFF

     自动重组                       (AUTO_REORG) = OFF



自动重新验证                               (AUTO_REVAL) = DEFERRED

当前已落实                                   (CUR_COMMIT) = ON

带有 DECIMAL 输入的 CHAR 输出         (DEC_TO_CHAR_FMT) = NEW

启用 XML 字符操作                      (ENABLE_XMLCHAR) = YES

WLM 收集时间间隔(分钟)              (WLM_COLLECT_INT) = 0

监视器收集设置

请求度量值                            (MON_REQ_METRICS) = BASE

活动度量值                            (MON_ACT_METRICS) = BASE

对象度量值                            (MON_OBJ_METRICS) = BASE

工作单元事件数                           (MON_UOW_DATA) = NONE

锁定超时事件数                        (MON_LOCKTIMEOUT) = NONE

死锁事件数                               (MON_DEADLOCK) = WITHOUT_HIST

锁定等待事件数                           (MON_LOCKWAIT) = NONE

锁定等待事件阈值                        (MON_LW_THRESH) = 5000000

软件包列表条目数目         (MON_PKGLIST_SZ) = 32

锁定事件通知级别          (MON_LCK_MSG_LVL) = 1



SMTP 服务器                               (SMTP_SERVER) =

SQL 条件编译标志                          (SQL_CCFLAGS) =

部分实际值设置             SECTION_ACTUALS) = NONE
get dbm cfg 信息如下:


          数据库管理器配置



     节点类型                                            = 带有本地客户机和远程客户机的企业服务器版



数据库管理器配置发行版级别                              = 0x0d00



最大打开文件数                            (MAXTOTFILOP) = 16000

CPU 速度(毫秒/指令)                       (CPUSPEED) = 1.968101e-007

通信带宽(MB/秒)                     (COMM_BANDWIDTH) = 1.000000e+002



最大并发活动数据库数                            (NUMDB) = 8

联合数据库系统支持                          (FEDERATED) = NO

事务处理器监视器名                        (TP_MON_NAME) =



缺省对方付费帐户                      (DFT_ACCOUNT_STR) =



Java Development Kit 安装路径(JDK_PATH)               = D:\PROGRA~1\IBM\SQLLIB\java\jdk



诊断错误捕获级别                            (DIAGLEVEL) = 3

通知级别                                  (NOTIFYLEVEL) = 3

诊断数据目录路径                             (DIAGPATH) =

轮转 db2diag 和通知日志的大小(MB)          (DIAGSIZE) = 0



缺省数据库监视器开关

   缓冲池                              (DFT_MON_BUFPOOL) = OFF

   锁定                                   (DFT_MON_LOCK) = OFF

   排序                                   (DFT_MON_SORT) = OFF

   语句                                   (DFT_MON_STMT) = OFF

   表                                    (DFT_MON_TABLE) = OFF

   时间戳记                          (DFT_MON_TIMESTAMP) = ON

   工作单元                                (DFT_MON_UOW) = OFF

监视实例和数据库的运行状况                 (HEALTH_MON) = ON



SYSADM 组名                              (SYSADM_GROUP) =

SYSCTRL 组名                            (SYSCTRL_GROUP) =

SYSMAINT 组名                          (SYSMAINT_GROUP) =

SYSMON 组名                              (SYSMON_GROUP) =



客户机用户标识-密码插件                (CLNT_PW_PLUGIN) =

客户机 Kerberos 插件                  (CLNT_KRB_PLUGIN) = IBMkrb5

组插件                                   (GROUP_PLUGIN) =

本地授权的 GSS 插件                   (LOCAL_GSSPLUGIN) =

服务器插件方式                        (SRV_PLUGIN_MODE) = UNFENCED

GSS 插件的服务器列表            (SRVCON_GSSPLUGIN_LIST) =

服务器用户标识-密码插件              (SRVCON_PW_PLUGIN) =

服务器连接认证                            (SRVCON_AUTH) = NOT_SPECIFIED

集群管理器                                (CLUSTER_MGR) =



数据库管理器认证                       (AUTHENTICATION) = SERVER

备用认证                           (ALTERNATE_AUTH_ENC) = NOT_SPECIFIED

没有权限就允许编目                     (CATALOG_NOAUTH) = NO

信赖所有客户机                         (TRUST_ALLCLNTS) = YES

可信的客户机认证                       (TRUST_CLNTAUTH) = CLIENT

绕过联合认证                               (FED_NOAUTH) = NO



缺省数据库路径                              (DFTDBPATH) = D:



数据库监视器堆大小(4KB)                 (MON_HEAP_SZ) = 4096

“Java 虚拟机”堆大小(4KB)             (JAVA_HEAP_SZ) = 2048

审计缓冲区大小(4KB)                    (AUDIT_BUF_SZ) = 0

实例共享内存(4KB)的大小             (INSTANCE_MEMORY) = AUTOMATIC(1000000)

备份缓冲区缺省大小(4KB)                   (BACKBUFSZ) = 1024

复原缓冲区缺省大小(4KB)                   (RESTBUFSZ) = 1024



代理程序的堆栈大小                     (AGENT_STACK_SZ) = 16

最小已落实专用内存(4KB)                (MIN_PRIV_MEM) = 32

专用内存阈值(4KB)                   (PRIV_MEM_THRESH) = 20000



排序堆阈值(4KB)                          (SHEAPTHRES) = 0



目录高速缓存支持                            (DIR_CACHE) = YES



应用程序支持层堆大小(4KB)                 (ASLHEAPSZ) = 15

最大请求者 I/O 块大小(以字节计)            (RQRIOBLK) = 32767

查询堆大小(4KB)                       (QUERY_HEAP_SZ) = 1000



已调速实用程序对工作负载的影响        (UTIL_IMPACT_LIM) = 10



代理程序的优先级                             (AGENTPRI) = SYSTEM

代理程序池大小                         (NUM_POOLAGENTS) = AUTOMATIC(100)

池中的初始代理程序数                   (NUM_INITAGENTS) = 0

最大协调代理程序数                    (MAX_COORDAGENTS) = AUTOMATIC(200)

最大客户机连接数                      (MAX_CONNECTIONS) = AUTOMATIC(MAX_COORDAGENTS)



保留受防护的进程                           (KEEPFENCED) = YES

合用受防护的进程的数目                    (FENCED_POOL) = AUTOMATIC(MAX_COORDAGENTS)

受防护的进程的初始数目                 (NUM_INITFENCED) = 0



索引重新创建时间和重做索引构建               (INDEXREC) = RESTART



事务管理器数据库名称                      (TM_DATABASE) = 1ST_CONN

事务再同步时间间隔(秒)              (RESYNC_INTERVAL) = 180



SPM 名称                                     (SPM_NAME) = IBMX64SE

SPM 日志大小                          (SPM_LOG_FILE_SZ) = 256

SPM 再同步代理程序限制                 (SPM_MAX_RESYNC) = 20

SPM 日志路径                             (SPM_LOG_PATH) =



NetBIOS 工作站名                                (NNAME) =



TCP/IP 服务名称                              (SVCENAME) = db2c_DB2

发现方式                                     (DISCOVER) = SEARCH

发现服务器实例                          (DISCOVER_INST) = ENABLE



SSL 服务器 keydb 文件                   (SSL_SVR_KEYDB) =

SSL 服务器隐藏文件                      (SSL_SVR_STASH) =

SSL 服务器证书标签                      (SSL_SVR_LABEL) =

SSL 服务名称                             (SSL_SVCENAME) =

SSL 密码规范                          (SSL_CIPHERSPECS) =

SSL 版本                                 (SSL_VERSIONS) =

SSL 客户机 keydb 文件                  (SSL_CLNT_KEYDB) =

SSL 客户机隐藏文件                     (SSL_CLNT_STASH) =



最大查询并行度                        (MAX_QUERYDEGREE) = 20

启用分区内并行性                       (INTRA_PARALLEL) = NO



每个查询的最大异步 TQ 数              (FEDERATED_ASYNC) = 0



内部通信缓冲区数(4KB)               (FCM_NUM_BUFFERS) = AUTOMATIC(4220)

内部通信信道数                       (FCM_NUM_CHANNELS) = AUTOMATIC(2048)

节点连接耗用时间(秒)                    (CONN_ELAPSE) = 10

最大节点连接重试次数                  (MAX_CONNRETRIES) = 5

节点间的最大时差(分钟)                (MAX_TIME_DIFF) = 60



db2start/db2stop 超时(分钟)         (START_STOP_TIME) = 10收起
软件开发 · 2015-01-07
浏览3663
wangyaxwangyax软件开发工程师金融机构
这个问题似乎是你在load数据的时候产生的,从日志来看是不是在load操作的过程中有中断?看日志中报出了这样的信息RETCODE : ZRC=0x80100003=-2146435069=SQLP_INTRP "USER INTERRUPT DETECTED"这种中断可能会造成数据的不一致导致数据宕机。如果这种数据库只是开发、测试级...显示全部
这个问题似乎是你在load数据的时候产生的,从日志来看是不是在load操作的过程中有中断?
看日志中报出了这样的信息RETCODE : ZRC=0x80100003=-2146435069=SQLP_INTRP "USER INTERRUPT DETECTED"

这种中断可能会造成数据的不一致导致数据宕机。如果这种数据库只是开发、测试级别的数据库,将数据改成循环日志有可能在数据不一致只会影响部分表,不至于宕机。

另外:
1)能不能详细介绍你产生问题是的操作?
2)问题能否复现,从系统监控内存和日志是否正常?收起
互联网服务 · 2015-01-06
浏览3568

提问者

nayaer
研发工程师广州XX科技公司

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2015-01-06
  • 关注会员:2 人
  • 问题浏览:30396
  • 最近回答:2015-01-22
  • X社区推广