ATLAS heavy ion event with asymmetric jets

ATLAS Computing and Muon Calibration Center

Service query error. Using cached data.
Summary Type:

Interval options:
Panda data queried at Thursday, 25-Jul-19 06:07:41 EDT (196716 minutes old) with interval of 1 hours

Panda Production Summary

 Node CountFinished JobsFailed JobsFailed %Nodes Failing
All Nodes413000%5 nodes with Panda job information in AGLT2_SL6
UM-Worker-Nodes196000%
MSU T266000%
MSU T2 56k138000%
New Nodes Nov 201513000%

Panda Analysis Summary

 Node CountFinished JobsFailed JobsFailed %Nodes Failing
All Nodes413000%5 nodes with Panda job information in ANALY_AGLT2_SL6
UM-Worker-Nodes196000%
MSU T266000%
MSU T2 56k138000%
New Nodes Nov 201513000%

Panda Multicore Summary

 Node CountFinished JobsFailed JobsFailed %Nodes Failing
All Nodes413000%5 nodes with Panda job information in AGLT2_MCORE
UM-Worker-Nodes196000%
MSU T266000%
MSU T2 56k138000%
New Nodes Nov 201513000%

Cluster summary data queried at Sunday, 08-Dec-19 19:30:19 EST (14 minutes old)
Michigan State (&)
CRAC#1 Normal 50% I=86.5 O=74.7F / #2 Normal 100% 84.7 59.2F
University of Michigan
172.4  W  S  H
167.2  W  S  H
166.3  W  S  H
146.2  W  S  H
145.4  W  S  H
143.6  W  S  H
225.3  W  S  H
220.3  W  S  H
199.2  W  S  H
194.4  W  S  H
188.4  W  S  H
188.1  W  S  H
143.2  W  S  H
142.8  W  S  H
140.9  W  S  H
139.7  W  S  H
137.2  W  S  H
136.5  W  S  H
180.9  W  S  H
176.6  W  S  H
174.3  W  S  H
174.2  W  S  H
172.8  W  S  H
171.8  W  S  H
135.0  W  S  H
132.9  W  S  H
132.2  W  S  H
130.7  W  S  H
130.3  W  S  H
129.2  W  S  H
171.0  W  S  H
171.0  W  S  H
166.7  W  S  H
166.2  W  S  H
166.2  W  S  H
165.6  W  S  H
125.9  W  S  H
122.5  W  S  H
122.2  W  S  H
120.1  W  S  H
115.1  W  S  H
114.5  W  S  H
163.1  W  S  H
159.7  W  S  H
159.2  W  S  H
156.2  W  S  H
155.2  W  S  H
154.1  W  S  H
110.9  W  S  H
110.9  W  S  H
109.5  W  S  H
108.8  W  S  H
107.9  W  S  H
106.8  W  S  H
152.4  W  S  H
152.0  W  S  H
151.7  W  S  H
150.0  W  S  H
149.4  W  S  H
149.2  W  S  H
106.6  W  S  H
105.9  W  S  H
105.2  W  S  H
105.1  W  S  H
104.2  W  S  H
102.4  W  S  H
148.9  W  S  H
148.8  W  S  H
148.5  W  S  H
147.9  W  S  H
147.4  W  S  H
146.7  W  S  H
102.3  W  S  H
102.0  W  S  H
101.1  W  S  H
100.0  W  S  H
99.7  W  S  H
99.7  W  S  H
146.0  W  S  H
143.9  W  S  H
143.2  W  S  H
142.7  W  S  H
142.7  W  S  H
139.2  W  S  H
99.7  W  S  H
99.6  W  S  H
99.4  W  S  H
98.8  W  S  H
98.6  W  S  H
97.5  W  S  H
137.7  W  S  H
136.7  W  S  H
135.2  W  S  H
135.1  W  S  H
134.9  W  S  H
134.3  W  S  H
97.3  W  S  H
97.1  W  S  H
96.5  W  S  H
96.4  W  S  H
96.3  W  S  H
95.2  W  S  H
134.1  W  S  H
133.9  W  S  H
133.7  W  S  H
132.7  W  S  H
132.3  W  S  H
132.2  W  S  H
95.1  W  S  H
94.3  W  S  H
94.3  W  S  H
94.1  W  S  H
94.1  W  S  H
93.9  W  S  H
131.5  W  S  H
131.2  W  S  H
130.7  W  S  H
129.6  W  S  H
129.6  W  S  H
129.4  W  S  H
92.3  W  S  H
91.7  W  S  H
90.1  W  S  H
89.0  W  S  H
88.0  W  S  H
86.6  W  S  H
129.3  W  S  H
129.2  W  S  H
129.2  W  S  H
129.0  W  S  H
128.5  W  S  H
128.4  W  S  H
83.8  W  S  H
83.2  W  S  H
81.7  W  S  H
80.4  W  S  H
79.2  W  S  H
78.8  W  S  H
128.2  W  S  H
128.1  W  S  H
128.0  W  S  H
128.0  W  S  H
127.7  W  S  H
127.5  W  S  H
78.1  W  S  H
69.7  W  S  H
68.0  W  S  H
67.4  W  S  H
67.4  W  S  H
67.4  W  S  H
127.5  W  S  H
126.6  W  S  H
126.6  W  S  H
126.6  W  S  H
126.4  W  S  H
126.2  W  S  H
66.9  W  S  H
66.8  W  S  H
66.8  W  S  H
66.5  W  S  H
66.5  W  S  H
66.5  W  S  H
124.8  W  S  H
123.6  W  S  H
123.2  W  S  H
123.1  W  S  H
122.2  W  S  H
121.7  W  S  H
66.3  W  S  H
66.0  W  S  H
66.0  W  S  H
65.7  W  S  H
65.7  W  S  H
65.5  W  S  H
121.5  W  S  H
121.0  W  S  H
120.8  W  S  H
120.6  W  S  H
120.4  W  S  H
120.2  W  S  H
65.4  W  S  H
65.1  W  S  H
65.0  W  S  H
64.8  W  S  H
64.7  W  S  H
64.7  W  S  H
119.8  W  S  H
118.8  W  S  H
118.4  W  S  H
118.1  W  S  H
117.9  W  S  H
117.8  W  S  H
64.5  W  S  H
63.8  W  S  H
63.6  W  S  H
62.9  W  S  H
62.1  W  S  H
61.9  W  S  H
117.3  W  S  H
117.1  W  S  H
116.6  W  S  H
116.3  W  S  H
115.7  W  S  H
115.5  W  S  H
61.6  W  S  H
61.4  W  S  H
61.2  W  S  H
60.8  W  S  H
60.8  W  S  H
60.6  W  S  H
114.8  W  S  H
113.8  W  S  H
113.0  W  S  H
112.6  W  S  H
112.5  W  S  H
112.2  W  S  H
60.4  W  S  H
58.8  W  S  H
58.8  W  S  H
58.6  W  S  H
58.1  W  S  H
58.1  W  S  H
109.5  W  S  H
108.8  W  S  H
107.5  W  S  H
107.3  W  S  H
107.2  W  S  H
106.5  W  S  H
58.0  W  S  H
57.4  W  S  H
57.4  W  S  H
56.7  W  S  H
56.7  W  S  H
56.4  W  S  H
106.3  W  S  H
105.8  W  S  H
105.7  W  S  H
103.5  W  S  H
99.8  W  S  H
98.5  W  S  H
55.7  W  S  H
55.1  W  S  H
54.6  W  S  H
52.3  W  S  H
52.1  W  S  H
50.4  W  S  H
98.0  W  S  H
95.6  W  S  H
94.7  W  S  H
94.1  W  S  H
92.5  W  S  H
92.5  W  S  H
49.8  W  S  H
49.5  W  S  H
49.4  W  S  H
46.9  W  S  H
46.2  W  S  H
45.1  W  S  H
91.9  W  S  H
91.8  W  S  H
91.7  W  S  H
90.0  W  S  H
88.7  W  S  H
88.3  W  S  H
43.6  W  S  H
42.3  W  S  H
40.5  W  S  H
40.4  W  S  H
40.1  W  S  H
40.1  W  S  H
87.2  W  S  H
86.0  W  S  H
84.4  W  S  H
81.3  W  S  H
81.0  W  S  H
80.2  W  S  H
40.1  W  S  H
40.1  W  S  H
40.0  W  S  H
40.0  W  S  H
40.0  W  S  H
39.9  W  S  H
78.6  W  S  H
78.4  W  S  H
77.9  W  S  H
77.6  W  S  H
76.7  W  S  H
76.4  W  S  H
39.9  W  S  H
39.8  W  S  H
39.8  W  S  H
39.8  W  S  H
39.6  W  S  H
39.5  W  S  H
76.4  W  S  H
75.6  W  S  H
75.5  W  S  H
73.7  W  S  H
73.6  W  S  H
73.3  W  S  H
39.5  W  S  H
39.2  W  S  H
39.2  W  S  H
38.9  W  S  H
38.8  W  S  H
38.0  W  S  H
72.6  W  S  H
72.0  W  S  H
71.9  W  S  H
71.6  W  S  H
71.2  W  S  H
71.0  W  S  H
37.3  W  S  H
36.3  W  S  H
35.7  W  S  H
34.5  W  S  H
31.4  W  S  H
31.2  W  S  H
70.1  W  S  H
69.7  W  S  H
67.7  W  S  H
67.6  W  S  H
67.5  W  S  H
67.1  W  S  H
30.9  W  S  H
30.9  W  S  H
30.8  W  S  H
30.5  W  S  H
29.9  W  S  H
29.3  W  S  H
66.8  W  S  H
64.7  W  S  H
63.6  W  S  H
62.6  W  S  H
61.4  W  S  H
61.0  W  S  H
24.2  W  S  H
23.7  W  S  H
23.6  W  S  H
23.5  W  S  H
23.4  W  S  H
23.1  W  S  H
58.4  W  S  H
57.2  W  S  H
56.0  W  S  H
55.7  W  S  H
55.5  W  S  H
55.4  W  S  H
23.1  W  S  H
23.0  W  S  H
22.8  W  S  H
22.8  W  S  H
22.7  W  S  H
22.6  W  S  H
54.9  W  S  H
54.3  W  S  H
52.1  W  S  H
51.6  W  S  H
48.0  W  S  H
41.7  W  S  H
22.4  W  S  H
22.1  W  S  H
22.0  W  S  H
21.8  W  S  H
21.7  W  S  H
21.4  W  S  H
39.8  W  S  H
38.2  W  S  H
37.8  W  S  H
37.2  W  S  H
37.1  W  S  H
36.3  W  S  H
20.9  W  S  H
20.0  W  S  H
18.2  W  S  H
17.6  W  S  H
17.2  W  S  H
16.6  W  S  H
31.0  W  S  H
30.2  W  S  H
11.2  W  S  H
 0.2  W  S  H
 0.1  W  S  H
 0.1  W  S  H
16.6  W  S  H
16.5  W  S  H
13.8  W  S  H
12.8  W  S  H
3 d
2 d
5 d
3 d
3 d
3 d
12 d
2 d
12080 Total Cores procurable on 388 Compute Nodes at AGLT2; Cumul load_fifteen: 34591.0 ( 286.3% ); cpu_nice: 1127.1 ( 9.3% )

388 nodes load_fifteen(merged)
0.00 to 0.85   0.8% idle
0.85 to 50%   0.0% lightload
50% to 95%   0.5% medium load
95% to 210%   12.4% matched load
210% to 250%   22.7% overloaded
250% to 300%   28.6% trouble?
300% and up   35.1% ouch!
388 nodes W=cpu_wio%
00.00 - 08.00   97.9% low
08.00 - 20.00   1.0% medium
20.00 - 50.00   0.3% high
50.00+   0.8% very high
388 nodes S=cpu_sys%
00.00 - 08.00   99.7% low
08.00 - 20.00   0.0% medium
20.00 - 50.00   0.3% high
50.00+   0.0% very high
388 nodes H=health code
 0    0.0% no info
 1    1.3% script failure
 2    2.8% bulk problem
 3    0.3% network problem
 4    3.1% condor problem
 5    0.0% healthy&ready
 6    92.5% healthy&ON
V10.4 - Sun Dec 8 19:30