ATLAS heavy ion event with asymmetric jets

ATLAS Computing and Muon Calibration Center

Service query error. Using cached data.
Summary Type:

Interval options:
Panda data queried at Thursday, 25-Jul-19 06:07:41 EDT (356016 minutes old) with interval of 1 hours

Panda Production Summary

 Node CountFinished JobsFailed JobsFailed %Nodes Failing
All Nodes413000%5 nodes with Panda job information in AGLT2_SL6
UM-Worker-Nodes196000%
MSU T266000%
MSU T2 56k138000%
New Nodes Nov 201513000%

Panda Analysis Summary

 Node CountFinished JobsFailed JobsFailed %Nodes Failing
All Nodes413000%5 nodes with Panda job information in ANALY_AGLT2_SL6
UM-Worker-Nodes196000%
MSU T266000%
MSU T2 56k138000%
New Nodes Nov 201513000%

Panda Multicore Summary

 Node CountFinished JobsFailed JobsFailed %Nodes Failing
All Nodes413000%5 nodes with Panda job information in AGLT2_MCORE
UM-Worker-Nodes196000%
MSU T266000%
MSU T2 56k138000%
New Nodes Nov 201513000%

Cluster summary data queried at Saturday, 28-Mar-20 11:30:18 EDT (13 minutes old)
Michigan State (&)
CRAC#1 Normal 50% I=84.0 O=62.1F / #2 Normal 100% 80.6 54.1F
University of Michigan
142.2  W  S  H
138.6  W  S  H
130.8  W  S  H
129.2  W  S  H
129.2  W  S  H
127.0  W  S  H
367.7  W  S  H
197.6  W  S  H
182.8  W  S  H
167.9  W  S  H
167.5  W  S  H
159.1  W  S  H
125.6  W  S  H
122.5  W  S  H
121.2  W  S  H
120.5  W  S  H
120.0  W  S  H
119.8  W  S  H
153.9  W  S  H
148.2  W  S  H
145.8  W  S  H
144.1  W  S  H
142.1  W  S  H
140.9  W  S  H
116.9  W  S  H
115.7  W  S  H
113.4  W  S  H
111.7  W  S  H
111.3  W  S  H
108.6  W  S  H
138.0  W  S  H
137.6  W  S  H
136.9  W  S  H
135.1  W  S  H
133.9  W  S  H
130.8  W  S  H
108.1  W  S  H
107.7  W  S  H
106.9  W  S  H
106.4  W  S  H
106.0  W  S  H
104.6  W  S  H
130.7  W  S  H
129.3  W  S  H
128.8  W  S  H
128.7  W  S  H
128.2  W  S  H
126.8  W  S  H
104.4  W  S  H
102.3  W  S  H
102.1  W  S  H
101.7  W  S  H
100.5  W  S  H
100.4  W  S  H
126.7  W  S  H
126.1  W  S  H
124.7  W  S  H
122.7  W  S  H
122.3  W  S  H
122.0  W  S  H
100.1  W  S  H
99.7  W  S  H
99.3  W  S  H
98.1  W  S  H
96.4  W  S  H
94.8  W  S  H
118.6  W  S  H
117.9  W  S  H
116.7  W  S  H
115.7  W  S  H
115.4  W  S  H
115.1  W  S  H
94.2  W  S  H
93.9  W  S  H
92.8  W  S  H
90.8  W  S  H
90.1  W  S  H
90.1  W  S  H
114.2  W  S  H
113.6  W  S  H
113.0  W  S  H
112.4  W  S  H
112.2  W  S  H
111.1  W  S  H
89.1  W  S  H
88.4  W  S  H
88.3  W  S  H
88.2  W  S  H
88.0  W  S  H
87.9  W  S  H
110.8  W  S  H
110.6  W  S  H
110.3  W  S  H
109.2  W  S  H
108.2  W  S  H
107.6  W  S  H
86.1  W  S  H
86.0  W  S  H
84.8  W  S  H
84.2  W  S  H
84.2  W  S  H
83.3  W  S  H
106.8  W  S  H
105.5  W  S  H
105.2  W  S  H
103.9  W  S  H
103.9  W  S  H
103.5  W  S  H
83.2  W  S  H
82.7  W  S  H
82.2  W  S  H
82.0  W  S  H
81.0  W  S  H
80.7  W  S  H
101.5  W  S  H
101.0  W  S  H
100.3  W  S  H
100.2  W  S  H
99.7  W  S  H
97.9  W  S  H
80.2  W  S  H
78.8  W  S  H
78.8  W  S  H
78.5  W  S  H
77.6  W  S  H
76.4  W  S  H
97.2  W  S  H
94.5  W  S  H
94.2  W  S  H
93.3  W  S  H
93.2  W  S  H
92.8  W  S  H
74.4  W  S  H
72.5  W  S  H
72.5  W  S  H
69.8  W  S  H
69.4  W  S  H
67.9  W  S  H
92.3  W  S  H
92.1  W  S  H
91.7  W  S  H
91.1  W  S  H
91.0  W  S  H
90.8  W  S  H
67.6  W  S  H
67.6  W  S  H
67.0  W  S  H
66.7  W  S  H
66.6  W  S  H
66.5  W  S  H
90.2  W  S  H
89.5  W  S  H
88.8  W  S  H
88.6  W  S  H
87.6  W  S  H
87.6  W  S  H
66.1  W  S  H
64.4  W  S  H
64.2  W  S  H
63.9  W  S  H
63.7  W  S  H
62.5  W  S  H
87.5  W  S  H
86.4  W  S  H
85.2  W  S  H
84.0  W  S  H
83.9  W  S  H
83.8  W  S  H
62.0  W  S  H
61.6  W  S  H
61.3  W  S  H
60.5  W  S  H
60.1  W  S  H
59.7  W  S  H
83.5  W  S  H
82.7  W  S  H
82.3  W  S  H
82.2  W  S  H
81.6  W  S  H
81.3  W  S  H
58.9  W  S  H
58.4  W  S  H
57.5  W  S  H
56.9  W  S  H
56.8  W  S  H
56.5  W  S  H
81.3  W  S  H
80.6  W  S  H
80.3  W  S  H
79.6  W  S  H
78.6  W  S  H
78.2  W  S  H
55.8  W  S  H
55.0  W  S  H
54.5  W  S  H
54.2  W  S  H
53.7  W  S  H
53.1  W  S  H
78.0  W  S  H
77.6  W  S  H
77.0  W  S  H
76.5  W  S  H
76.5  W  S  H
75.9  W  S  H
52.9  W  S  H
52.8  W  S  H
52.3  W  S  H
51.0  W  S  H
49.4  W  S  H
49.3  W  S  H
75.5  W  S  H
75.4  W  S  H
74.9  W  S  H
74.5  W  S  H
74.4  W  S  H
74.2  W  S  H
49.2  W  S  H
48.8  W  S  H
48.5  W  S  H
48.2  W  S  H
48.0  W  S  H
47.6  W  S  H
74.1  W  S  H
73.5  W  S  H
73.5  W  S  H
73.0  W  S  H
72.9  W  S  H
71.6  W  S  H
47.6  W  S  H
47.6  W  S  H
47.5  W  S  H
47.5  W  S  H
46.8  W  S  H
46.6  W  S  H
71.4  W  S  H
71.3  W  S  H
70.5  W  S  H
69.9  W  S  H
69.4  W  S  H
68.9  W  S  H
46.5  W  S  H
46.2  W  S  H
46.0  W  S  H
45.5  W  S  H
45.3  W  S  H
45.0  W  S  H
68.6  W  S  H
67.6  W  S  H
67.3  W  S  H
66.7  W  S  H
66.2  W  S  H
65.2  W  S  H
44.7  W  S  H
44.6  W  S  H
44.4  W  S  H
44.2  W  S  H
43.6  W  S  H
43.2  W  S  H
65.1  W  S  H
64.9  W  S  H
61.8  W  S  H
60.2  W  S  H
59.3  W  S  H
57.0  W  S  H
43.0  W  S  H
42.6  W  S  H
42.3  W  S  H
40.9  W  S  H
40.4  W  S  H
40.3  W  S  H
55.6  W  S  H
54.2  W  S  H
53.7  W  S  H
53.0  W  S  H
53.0  W  S  H
52.8  W  S  H
40.0  W  S  H
40.0  W  S  H
39.5  W  S  H
39.0  W  S  H
38.9  W  S  H
38.7  W  S  H
52.2  W  S  H
48.3  W  S  H
47.4  W  S  H
47.0  W  S  H
46.8  W  S  H
46.0  W  S  H
36.8  W  S  H
36.6  W  S  H
36.4  W  S  H
33.1  W  S  H
33.1  W  S  H
32.8  W  S  H
45.9  W  S  H
45.7  W  S  H
45.4  W  S  H
45.0  W  S  H
41.9  W  S  H
41.7  W  S  H
32.8  W  S  H
32.2  W  S  H
32.0  W  S  H
31.9  W  S  H
31.8  W  S  H
31.7  W  S  H
41.3  W  S  H
40.6  W  S  H
40.0  W  S  H
39.7  W  S  H
39.5  W  S  H
39.3  W  S  H
31.7  W  S  H
31.4  W  S  H
31.1  W  S  H
31.1  W  S  H
30.6  W  S  H
30.3  W  S  H
39.0  W  S  H
37.6  W  S  H
37.4  W  S  H
37.1  W  S  H
34.5  W  S  H
34.2  W  S  H
30.0  W  S  H
29.5  W  S  H
28.9  W  S  H
28.9  W  S  H
28.2  W  S  H
27.0  W  S  H
32.4  W  S  H
32.2  W  S  H
31.2  W  S  H
23.2  W  S  H
21.4  W  S  H
17.6  W  S  H
26.9  W  S  H
24.6  W  S  H
24.0  W  S  H
23.8  W  S  H
23.8  W  S  H
23.5  W  S  H
17.2  W  S  H
16.8  W  S  H
15.0  W  S  H
12.4  W  S  H
12.2  W  S  H
12.1  W  S  H
23.4  W  S  H
23.3  W  S  H
23.2  W  S  H
23.0  W  S  H
22.9  W  S  H
22.4  W  S  H
 9.6  W  S  H
 6.9  W  S  H
 2.8  W  S  H
 2.2  W  S  H
 0.6  W  S  H
 0.3  W  S  H
22.3  W  S  H
22.1  W  S  H
21.8  W  S  H
21.4  W  S  H
21.1  W  S  H
19.6  W  S  H
 0.2  W  S  H
 0.1  W  S  H
 0.1  W  S  H
 0.1  W  S  H
94 d
94 d
19.0  W  S  H
17.8  W  S  H
17.3  W  S  H
17.0  W  S  H
16.6  W  S  H
16.4  W  S  H
94 d
94 d
94 d
94 d
94 d
84 d
14.9  W  S  H
13.3  W  S  H
12.5  W  S  H
12.2  W  S  H
2 d
1 d
122 d
115 d
102 d
101 d
100 d
0 d
12160 Total Cores procurable on 380 Compute Nodes at AGLT2; Cumul load_fifteen: 27063.8 ( 222.6% ); cpu_nice: 1939.2 ( 15.9% )

380 nodes load_fifteen(merged)
0.00 to 0.85   1.6% idle
0.85 to 50%   0.8% lightload
50% to 95%   1.6% medium load
95% to 210%   43.4% matched load
210% to 250%   29.2% overloaded
250% to 300%   17.1% trouble?
300% and up   6.3% ouch!
380 nodes W=cpu_wio%
00.00 - 08.00   96.1% low
08.00 - 20.00   0.5% medium
20.00 - 50.00   2.4% high
50.00+   1.1% very high
380 nodes S=cpu_sys%
00.00 - 08.00   93.7% low
08.00 - 20.00   5.8% medium
20.00 - 50.00   0.3% high
50.00+   0.3% very high
380 nodes H=health code
 0    0.3% no info
 1    1.8% script failure
 2    13.2% bulk problem
 3    0.3% network problem
 4    1.6% condor problem
 5    0.0% healthy&ready
 6    82.9% healthy&ON
V10.4 - Sat Mar 28 11:30