Task 13669583

Name	hadcm3n_yfdw_1940_40_007535080_3
Workunit	7732312
Created	29 Nov 2011, 5:11:58 UTC
Sent	30 Nov 2011, 19:05:24 UTC
Report deadline	1 Mar 2012, 2:32:35 UTC
Received	9 Mar 2012, 17:18:32 UTC
Server state	Over
Outcome	Computation error
Client state	Compute error
Exit status	-1073741819 (0xC0000005) STATUS_ACCESS_VIOLATION
Computer ID	1180411
Run time	5 days 14 hours 11 min 49 sec
CPU time	5 days 4 hours 39 min 18 sec
Validate state	Invalid
Credit	3,110.40
Device peak FLOPS	2.83 GFLOPS
Application version	UK Met Office Coupled Model Full Resolution Ocean v6.07 windows_intelx86
Stderr	<core_client_version>6.12.34</core_client_version> <![CDATA[ <message> - exit code -1073741819 (0xc0000005) </message> <stderr_txt> CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=6152, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bCPDN Monitor - Quit request from BOINC... Suspended CPDN Monitor - Suspend request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=3172, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... 18:07:44 (1188): Can't acquire lockfile (32) - waiting 35s 18:08:08 (5720): Can't acquire lockfile (32) - waiting 35s 18:08:08 (6576): No heartbeat from core client for 30 sec - exiting CPDN Monitor - No 'heartbeat' from BOINC... CPDN Monitor - Quit request from BOINC... 18:08:43 (5720): Can't set up shared mem: -1. Will run in standalone mode. 18:08:43 (5688): Can't set up shared mem: -1. Will run in standalone mode. 19:07:05 (5376): Can't acquire lockfile (32) - waiting 35s 19:07:40 (5376): Can't acquire lockfile (32) - exiting 19:07:40 (5376): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 19:18:22 (6960): Can't acquire lockfile (32) - waiting 35s 19:18:57 (6960): Can't acquire lockfile (32) - exiting 19:18:57 (6960): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 19:57:17 (6044): Can't acquire lockfile (32) - waiting 35s 19:57:52 (6044): Can't acquire lockfile (32) - exiting 19:57:52 (6044): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 20:08:51 (6180): Can't acquire lockfile (32) - waiting 35s 20:09:26 (6180): Can't acquire lockfile (32) - exiting 20:09:26 (6180): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 20:19:32 (7456): Can't acquire lockfile (32) - waiting 35s 20:20:07 (7456): Can't acquire lockfile (32) - exiting 20:20:07 (7456): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 20:31:02 (5628): Can't acquire lockfile (32) - waiting 35s 20:31:37 (5628): Can't acquire lockfile (32) - exiting 20:31:37 (5628): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 20:41:37 (6368): Can't acquire lockfile (32) - waiting 35s 20:42:12 (6368): Can't acquire lockfile (32) - exiting 20:42:12 (6368): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 20:52:53 (5968): Can't acquire lockfile (32) - waiting 35s 20:53:28 (5968): Can't acquire lockfile (32) - exiting 20:53:28 (5968): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 21:04:02 (2744): Can't acquire lockfile (32) - waiting 35s 21:04:37 (2744): Can't acquire lockfile (32) - exiting 21:04:37 (2744): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 21:15:30 (7620): Can't acquire lockfile (32) - waiting 35s 21:16:05 (7620): Can't acquire lockfile (32) - exiting 21:16:05 (7620): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 21:26:05 (940): Can't acquire lockfile (32) - waiting 35s 21:26:40 (940): Can't acquire lockfile (32) - exiting 21:26:40 (940): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 21:36:42 (8008): Can't acquire lockfile (32) - waiting 35s 21:37:17 (8008): Can't acquire lockfile (32) - exiting 21:37:17 (8008): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 21:47:52 (5488): Can't acquire lockfile (32) - waiting 35s 21:48:27 (5488): Can't acquire lockfile (32) - exiting 21:48:27 (5488): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 23:27:38 (7700): Can't acquire lockfile (32) - waiting 35s 23:28:13 (7700): Can't acquire lockfile (32) - exiting 23:28:13 (7700): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 23:38:35 (7172): Can't acquire lockfile (32) - waiting 35s 23:39:10 (7172): Can't acquire lockfile (32) - exiting 23:39:10 (7172): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 23:49:56 (4420): Can't acquire lockfile (32) - waiting 35s 23:50:31 (4420): Can't acquire lockfile (32) - exiting 23:50:31 (4420): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 00:00:31 (5564): Can't acquire lockfile (32) - waiting 35s 00:01:06 (5564): Can't acquire lockfile (32) - exiting 00:01:06 (5564): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 00:11:07 (7848): Can't acquire lockfile (32) - waiting 35s 00:11:42 (7848): Can't acquire lockfile (32) - exiting 00:11:42 (7848): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 00:21:42 (6632): Can't acquire lockfile (32) - waiting 35s 00:22:17 (6632): Can't acquire lockfile (32) - exiting 00:22:17 (6632): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 00:32:18 (4368): Can't acquire lockfile (32) - waiting 35s 00:32:53 (4368): Can't acquire lockfile (32) - exiting 00:32:53 (4368): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 00:42:53 (2976): Can't acquire lockfile (32) - waiting 35s 00:43:28 (2976): Can't acquire lockfile (32) - exiting 00:43:28 (2976): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 13:19:06 (6092): Can't acquire lockfile (32) - waiting 35s 13:19:41 (6092): Can't acquire lockfile (32) - exiting 13:19:41 (6092): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 13:29:52 (5816): Can't acquire lockfile (32) - waiting 35s 13:30:27 (5816): Can't acquire lockfile (32) - exiting 13:30:27 (5816): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 13:40:39 (7912): Can't acquire lockfile (32) - waiting 35s 13:41:14 (7912): Can't acquire lockfile (32) - exiting 13:41:14 (7912): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 13:51:39 (5872): Can't acquire lockfile (32) - waiting 35s 13:52:14 (5872): Can't acquire lockfile (32) - exiting 13:52:14 (5872): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:02:25 (6248): Can't acquire lockfile (32) - waiting 35s 14:03:00 (6248): Can't acquire lockfile (32) - exiting 14:03:00 (6248): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:13:24 (7364): Can't acquire lockfile (32) - waiting 35s 14:13:59 (7364): Can't acquire lockfile (32) - exiting 14:13:59 (7364): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:24:29 (6252): Can't acquire lockfile (32) - waiting 35s 14:25:04 (6252): Can't acquire lockfile (32) - exiting 14:25:04 (6252): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:35:15 (1372): Can't acquire lockfile (32) - waiting 35s 14:35:50 (1372): Can't acquire lockfile (32) - exiting 14:35:50 (1372): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:46:07 (2348): Can't acquire lockfile (32) - waiting 35s 14:46:42 (2348): Can't acquire lockfile (32) - exiting 14:46:42 (2348): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:57:15 (6472): Can't acquire lockfile (32) - waiting 35s 14:57:50 (6472): Can't acquire lockfile (32) - exiting 14:57:50 (6472): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:07:50 (6140): Can't acquire lockfile (32) - waiting 35s 15:08:25 (6140): Can't acquire lockfile (32) - exiting 15:08:25 (6140): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:18:43 (5496): Can't acquire lockfile (32) - waiting 35s 15:19:18 (5496): Can't acquire lockfile (32) - exiting 15:19:18 (5496): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:29:35 (3108): Can't acquire lockfile (32) - waiting 35s 15:30:10 (3108): Can't acquire lockfile (32) - exiting 15:30:10 (3108): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:40:18 (4512): Can't acquire lockfile (32) - waiting 35s 15:40:53 (4512): Can't acquire lockfile (32) - exiting 15:40:53 (4512): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:51:43 (7876): Can't acquire lockfile (32) - waiting 35s 15:52:18 (7876): Can't acquire lockfile (32) - exiting 15:52:18 (7876): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 16:03:08 (6648): Can't acquire lockfile (32) - waiting 35s 16:03:43 (6648): Can't acquire lockfile (32) - exiting 16:03:43 (6648): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 16:14:17 (6088): Can't acquire lockfile (32) - waiting 35s 16:14:52 (6088): Can't acquire lockfile (32) - exiting 16:14:52 (6088): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 16:24:53 (4716): Can't acquire lockfile (32) - waiting 35s 16:25:28 (4716): Can't acquire lockfile (32) - exiting 16:25:28 (4716): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 18:16:18 (3720): Can't acquire lockfile (32) - waiting 35s 18:16:53 (3720): Can't acquire lockfile (32) - exiting 18:16:53 (3720): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 18:27:03 (7844): Can't acquire lockfile (32) - waiting 35s 18:27:38 (7844): Can't acquire lockfile (32) - exiting 18:27:38 (7844): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 18:38:14 (5660): Can't acquire lockfile (32) - waiting 35s 18:38:49 (5660): Can't acquire lockfile (32) - exiting 18:38:49 (5660): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 18:49:32 (6616): Can't acquire lockfile (32) - waiting 35s 18:50:07 (6616): Can't acquire lockfile (32) - exiting 18:50:07 (6616): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 19:00:45 (7976): Can't acquire lockfile (32) - waiting 35s 19:01:20 (7976): Can't acquire lockfile (32) - exiting 19:01:20 (7976): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 19:11:37 (5364): Can't acquire lockfile (32) - waiting 35s 19:12:12 (5364): Can't acquire lockfile (32) - exiting 19:12:12 (5364): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=6188, iMonCtr=1 Model crash detected, will try to restart... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=6264, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CCPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Suspended CPDN Monitor - Suspend request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=4528, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=5264, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=5408, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Suspended CPDN Monitor - Suspend request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Suspended CPDN Monitor - Suspend request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=6004, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... Unhandled Exception Detected... - Unhandled Exception Record - Reason: Access Violation (0xc0000005) at address 0x77507373 read attempt to address 0x40E50916 Engaging BOINC Windows Runtime Debugger... Unhandled Exception Detected... - Unhandled Exception Record - Reason: Access Violation (0xc0000005) at address 0x77693AB3 read attempt to address 0x40E5091E Engaging BOINC Windows Runtime Debugger... </stderr_txt> ]]>

Latest Trickles Received
Time Sent (UTC)	Host ID	Result ID	Result Name	Timestep	CPU Time (sec)	Average (sec/TS)
08 Mar 2012 22:15:58	1180411	13669583	hadcm3n_yfdw_1940_40_007535080_3	259,200	446,654	1.7232
28 Feb 2012 20:21:31	1180411	13669583	hadcm3n_yfdw_1940_40_007535080_3	233,280	402,220	1.7242
21 Feb 2012 20:57:16	1180411	13669583	hadcm3n_yfdw_1940_40_007535080_3	207,360	357,597	1.7245
13 Feb 2012 19:53:34	1180411	13669583	hadcm3n_yfdw_1940_40_007535080_3	181,440	313,004	1.7251
06 Feb 2012 18:23:20	1180411	13669583	hadcm3n_yfdw_1940_40_007535080_3	155,520	269,274	1.7314
02 Feb 2012 19:21:14	1180411	13669583	hadcm3n_yfdw_1940_40_007535080_3	129,600	224,344	1.7310
28 Jan 2012 13:13:39	1180411	13669583	hadcm3n_yfdw_1940_40_007535080_3	103,680	178,747	1.7240
23 Jan 2012 22:08:02	1180411	13669583	hadcm3n_yfdw_1940_40_007535080_3	77,760	132,852	1.7085
21 Dec 2011 20:08:56	1180411	13669583	hadcm3n_yfdw_1940_40_007535080_3	51,840	89,080	1.7184
04 Dec 2011 17:52:20	1180411	13669583	hadcm3n_yfdw_1940_40_007535080_3	25,920	45,450	1.7535