powered by simpleCommunicator - 2.0.49     © 2025 Programmizd 02
Форумы / Sybase ASA, ASE, IQ [игнор отключен] [закрыт для гостей] / Latch sleeping
25 сообщений из 26, страница 1 из 2
Latch sleeping
    #38505918
Сергей08
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Добрый день\вечер всем.
Sybase ASE 15.5
6 engines

Время от времени несколько процессов зависают на Latch sleep.
Воспроизвести не получается. Чаще всего по звонку от заказчика узнаём :)
Почитал документацию и не очень много нашёл. В документации по системным таблицам слово latch вообще только один раз нашёл.
Что это и как работает вроде знаю. Но как узнать кто создаёт тупиковую ситуацию!
Куда ещё можно глянуть кроме sysprocesses ? Можно ли узнать какая защёлка ждётся?



Спасибо.
...
Рейтинг: 0 / 0
Latch sleeping
    #38506288
Компостеров
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Если настроен мониторинг, то можно смотреть monProcessWaits

http://www.petersap.nl/SybaseWiki/index.php?title=MDA_tables_-_queries_for_wait_events
...
Рейтинг: 0 / 0
Latch sleeping
    #38506577
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Сергей08,

Смотри sp_lock, sp__wholocks.
...
Рейтинг: 0 / 0
Latch sleeping
    #38507004
Сергей08
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Спасибо за ответы
Компостеров,
Мониторинг настроен. Но как то не вижу ничего, что поможет найти
причину проблемы. Можно увидеть что проблема есть.
Покопаюсь ещё в мон таблицах.
Может недопонял.
Например: повезло и вижу вживую 'latch sleeping'
на 20 процессах. Чё дальше? Кто виноват? Куда смотреть ?

MasterZiv,
Хотел бы видеть что то типа sp_latch . Подобно как мы имеем Sp_lock.
В sp_lock ничего полезного о защёлках не вижу.. Или как то, что то можно
почерпнуть?

-----------------------------------------------
Поддержка рекомендует DBCC всего чего попало. Но DBCC имеет свойтсво наплевать
на 'kill' пока там чего то не закончит и единственный способ перегружать
сервер что бы убрать сон процессов на защёлках. Причем как то и не уверены,
что только DBCC виновата. Было и без DBCC .Может и совпадения ...
и кроме latch sleeping в процессах ничего и не видно.

Как бы узнать, как работает механизм защёлок? Пока не нашёл
и подозреваю, что на уровне OS... Может и проблема там?
...
Рейтинг: 0 / 0
Latch sleeping
    #38507025
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Сергей08,

MasterZiv,
Хотел бы видеть что то типа sp_latch . Подобно как мы имеем Sp_lock.
В sp_lock ничего полезного о защёлках не вижу.. Или как то, что то можно
почерпнуть?

На сколько я помню, latch-и тоже должны показыватся в sp_lock.
...
Рейтинг: 0 / 0
Latch sleeping
    #38507310
Фотография komrad
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Сергей08
Как бы узнать, как работает механизм защёлок? Пока не нашёл
и подозреваю, что на уровне OS... Может и проблема там?

подозревать не надо, тем более уходить в OS
latches - это объект Sybase, а не операционки

запустите sysmon на 5-7 минут несколько раз в период тормозов и выложите тут

латчи по задумке должны быть очень короткими по сравнению с блокировками
тынц

это читали?
...
Рейтинг: 0 / 0
Latch sleeping
    #38507520
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
по идее сп лок должен и латчи показывать.
...
Рейтинг: 0 / 0
Latch sleeping
    #38507819
Сергей08
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Eсли бы sp_lock показывал что то - то уже давно бы проблема снялась.
Увидели бы страницу- затем нашли обьект и было бы полегче.

Мне пока вживую не удалось увидеть(только результаты мониторинга) но колеги абсолютно уверены, что sp_lock ничего не дает. Как по мне так это логично - всё таки локи и защёлки совсем не одно и тоже.

А по поводу Sybase docs .. читал.
Там к радости или к сожалению не много о защёлках.

Продвинутый в этом отношении Oracle имеет возможность увидеть так называемые 'горячие страницы' что бы локализовать проблему защёлок.
Что то мне подсказывает и у Sybase мы что то должны иметь подобное.

Ща попробую найти sysmon на это время
...
Рейтинг: 0 / 0
Latch sleeping
    #38507995
Сергей08
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
komradподозревать не надо, тем более уходить в OS



Недостаток информации рождает чудовищ. (В оригинале 'Сон разума рождает чудовищ ' :) )

Защёлок может быть много и что бы ими управлять их надо где то хранить.
Подобно syslocks. Пусть мне эти знания не помогут , но мне как минимум интересно...
...
Рейтинг: 0 / 0
Latch sleeping
    #38508212
Сергей08
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
comradзапустите sysmon на 5-7 минут несколько раз в период тормозов и выложите тут



Вроде нашёл защёлку и sysmon на одно время. Не уверен что много процессов залочено в следующие секунды , но уже одно то, что видим latch sleeping в процессах уже, наверное, проблема.

18.12 17:05:00 Configured user connections: 4000 Blocked: 0 Used: 670 Active: 22

spid loginame hostname blk dbname cpu(sec) phys_io program cmd stat
----- -------------- ----------- ----- ---------------- ---------- ----------- ----------------- -------------- ------------
266 XXXXXXXXXX XXXXXXXXXXXX XXXXX 3.80 0 sst_server INSERT latch sleep
..................

Sysmon
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
35.
36.
37.
38.
39.
40.
41.
42.
43.
44.
45.
46.
47.
48.
49.
50.
51.
52.
53.
54.
55.
56.
57.
58.
59.
60.
61.
62.
63.
64.
65.
66.
67.
68.
69.
70.
71.
72.
73.
74.
75.
76.
77.
78.
79.
80.
81.
82.
83.
84.
85.
86.
87.
88.
89.
90.
91.
92.
93.
94.
95.
96.
97.
98.
99.
100.
101.
102.
103.
104.
105.
106.
107.
108.
109.
110.
111.
112.
113.
114.
115.
116.
117.
118.
119.
120.
121.
122.
123.
124.
125.
126.
127.
128.
129.
130.
131.
132.
133.
134.
135.
136.
137.
138.
139.
140.
141.
142.
143.
144.
145.
146.
147.
148.
149.
150.
151.
152.
153.
154.
155.
156.
157.
158.
159.
160.
161.
162.
163.
164.
165.
166.
167.
168.
169.
170.
171.
172.
173.
174.
175.
176.
177.
178.
179.
180.
181.
182.
183.
184.
185.
186.
187.
188.
189.
190.
191.
192.
193.
194.
195.
196.
197.
198.
199.
200.
201.
202.
203.
204.
205.
206.
207.
208.
209.
210.
211.
212.
213.
214.
215.
216.
217.
218.
219.
220.
221.
222.
223.
224.
225.
226.
227.
228.
229.
230.
231.
232.
233.
234.
235.
236.
237.
238.
239.
240.
241.
242.
243.
244.
245.
246.
247.
248.
249.
250.
251.
252.
253.
254.
255.
256.
257.
258.
259.
260.
261.
262.
263.
264.
265.
266.
267.
268.
269.
270.
271.
272.
273.
274.
275.
276.
277.
278.
279.
280.
281.
282.
283.
284.
285.
286.
287.
288.
289.
290.
291.
292.
293.
294.
295.
296.
297.
298.
299.
300.
301.
302.
303.
304.
305.
306.
307.
308.
309.
310.
311.
312.
313.
314.
315.
316.
317.
318.
319.
320.
321.
322.
323.
324.
325.
326.
327.
328.
329.
330.
331.
332.
333.
334.
335.
336.
337.
338.
339.
340.
341.
342.
343.
344.
345.
346.
347.
348.
349.
350.
351.
352.
353.
354.
355.
356.
357.
358.
359.
360.
361.
362.
363.
364.
365.
366.
367.
368.
369.
370.
371.
372.
373.
374.
375.
376.
377.
378.
379.
380.
381.
382.
383.
384.
385.
386.
387.
388.
389.
390.
391.
392.
393.
394.
395.
396.
397.
398.
399.
400.
401.
402.
403.
404.
405.
406.
407.
408.
409.
410.
411.
412.
413.
414.
415.
416.
417.
418.
419.
420.
421.
422.
423.
424.
425.
426.
427.
428.
429.
430.
431.
432.
433.
434.
435.
436.
437.
438.
439.
440.
441.
442.
443.
444.
445.
446.
447.
448.
449.
450.
451.
452.
453.
454.
455.
456.
457.
458.
459.
460.
461.
462.
463.
464.
465.
466.
467.
468.
469.
470.
471.
472.
473.
474.
475.
476.
477.
478.
479.
480.
481.
482.
483.
484.
485.
486.
487.
488.
489.
490.
491.
492.
493.
494.
495.
496.
497.
498.
499.
500.
501.
502.
503.
504.
505.
506.
507.
508.
509.
510.
511.
512.
513.
514.
515.
516.
517.
518.
519.
520.
521.
522.
523.
524.
525.
526.
527.
528.
529.
530.
531.
532.
533.
534.
535.
536.
537.
538.
539.
540.
541.
542.
543.
544.
545.
546.
547.
548.
549.
550.
551.
552.
553.
554.
555.
556.
557.
558.
559.
560.
561.
562.
563.
564.
565.
566.
567.
568.
569.
570.
571.
572.
573.
574.
575.
576.
577.
578.
579.
580.
581.
582.
583.
584.
585.
586.
587.
588.
589.
590.
591.
592.
593.
594.
595.
596.
597.
598.
599.
600.
601.
602.
603.
604.
605.
606.
607.
608.
609.
610.
611.
612.
613.
614.
615.
616.
617.
618.
619.
620.
621.
622.
623.
624.
625.
626.
627.
628.
629.
630.
631.
632.
633.
634.
635.
636.
637.
638.
639.
640.
641.
642.
643.
644.
645.
646.
647.
648.
649.
650.
651.
652.
653.
654.
655.
656.
657.
658.
659.
660.
661.
662.
663.
664.
665.
666.
667.
668.
669.
670.
671.
672.
673.
674.
675.
676.
677.
678.
679.
680.
681.
682.
683.
684.
685.
686.
687.
688.
689.
690.
691.
692.
693.
694.
695.
696.
697.
698.
699.
700.
701.
702.
703.
704.
705.
706.
707.
708.
709.
710.
711.
712.
713.
714.
715.
716.
717.
718.
719.
720.
721.
722.
723.
724.
725.
726.
727.
728.
729.
730.
731.
732.
733.
734.
735.
736.
737.
738.
739.
740.
741.
742.
743.
744.
745.
746.
747.
748.
749.
750.
751.
752.
753.
754.
755.
756.
757.
758.
759.
760.
761.
762.
763.
764.
765.
766.
767.
768.
769.
770.
771.
772.
773.
774.
775.
776.
777.
778.
779.
780.
781.
782.
783.
784.
785.
786.
787.
788.
789.
790.
791.
792.
793.
794.
795.
796.
797.
798.
799.
800.
801.
802.
803.
804.
805.
806.
807.
808.
809.
810.
811.
812.
813.
814.
815.
816.
817.
818.
819.
820.
821.
822.
823.
824.
825.
826.
827.
828.
829.
830.
831.
832.
833.
834.
835.
836.
837.
838.
839.
840.
841.
842.
843.
844.
845.
846.
847.
848.
849.
850.
851.
852.
853.
854.
855.
856.
857.
858.
859.
860.
861.
862.
863.
864.
865.
866.
867.
868.
869.
870.
871.
872.
873.
874.
875.
876.
877.
878.
879.
880.
881.
882.
883.
884.
885.
886.
887.
888.
889.
890.
891.
892.
893.
894.
895.
896.
897.
898.
899.
900.
901.
902.
903.
904.
905.
906.
907.
908.
909.
910.
911.
912.
913.
914.
915.
916.
917.
918.
919.
920.
921.
922.
923.
924.
925.
926.
927.
928.
929.
930.
931.
932.
933.
934.
935.
936.
937.
938.
939.
940.
941.
942.
943.
944.
945.
946.
947.
948.
949.
950.
951.
952.
953.
954.
955.
956.
957.
958.
959.
960.
961.
962.
963.
964.
965.
966.
967.
968.
969.
970.
971.
972.
973.
974.
975.
976.
977.
978.
979.
980.
981.
982.
983.
984.
985.
986.
987.
988.
989.
990.
991.
992.
993.
994.
995.
996.
997.
998.
999.
1000.
1001.
1002.
1003.
1004.
1005.
1006.
1007.
1008.
1009.
1010.
1011.
1012.
1013.
1014.
1015.
1016.
1017.
1018.
1019.
1020.
1021.
1022.
1023.
1024.
1025.
1026.
1027.
1028.
1029.
1030.
1031.
1032.
1033.
1034.
1035.
1036.
1037.
1038.
1039.
1040.
1041.
1042.
1043.
1044.
1045.
1046.
1047.
1048.
1049.
1050.
1051.
1052.
1053.
1054.
1055.
1056.
1057.
1058.
1059.
1060.
1061.
1062.
1063.
1064.
1065.
1066.
1067.
1068.
1069.
1070.
1071.
1072.
1073.
1074.
1075.
1076.
1077.
1078.
1079.
1080.
1081.
1082.
1083.
1084.
1085.
1086.
1087.
1088.
1089.
1090.
1091.
1092.
1093.
1094.
1095.
1096.
1097.
1098.
1099.
1100.
1101.
1102.
1103.
1104.
1105.
1106.
1107.
1108.
1109.
1110.
1111.
1112.
1113.
1114.
1115.
1116.
1117.
1118.
1119.
1120.
1121.
1122.
1123.
1124.
1125.
1126.
1127.
1128.
1129.
1130.
1131.
1132.
1133.
1134.
1135.
1136.
1137.
1138.
1139.
1140.
1141.
1142.
1143.
1144.
1145.
1146.
1147.
1148.
1149.
1150.
1151.
1152.
1153.
1154.
1155.
1156.
1157.
1158.
1159.
1160.
1161.
1162.
1163.
1164.
1165.
1166.
1167.
1168.
1169.
1170.
1171.
1172.
1173.
1174.
1175.
1176.
1177.
1178.
1179.
1180.
1181.
1182.
1183.
1184.
1185.
1186.
1187.
1188.
1189.
1190.
1191.
1192.
1193.
1194.
1195.
1196.
1197.
1198.
1199.
1200.
1201.
1202.
1203.
1204.
1205.
1206.
1207.
1208.
1209.
1210.
1211.
1212.
1213.
1214.
1215.
1216.
1217.
1218.
1219.
1220.
1221.
1222.
1223.
1224.
1225.
1226.
1227.
1228.
1229.
1230.
1231.
1232.
1233.
1234.
1235.
1236.
1237.
1238.
1239.
1240.
1241.
1242.
1243.
1244.
1245.
1246.
1247.
1248.
1249.
1250.
1251.
1252.
1253.
1254.
1255.
1256.
1257.
1258.
1259.
1260.
1261.
1262.
1263.
1264.
1265.
1266.
1267.
1268.
1269.
1270.
1271.
1272.
1273.
1274.
1275.
1276.
1277.
1278.
1279.
1280.
1281.
1282.
1283.
1284.
1285.
1286.
1287.
1288.
1289.
1290.
1291.
1292.
1293.
1294.
1295.
1296.
1297.
1298.
1299.
1300.
1301.
1302.
1303.
1304.
1305.
1306.
1307.
1308.
1309.
1310.
1311.
1312.
1313.
1314.
1315.
1316.
1317.
1318.
1319.
1320.
1321.
1322.
1323.
1324.
1325.
1326.
1327.
1328.
1329.
1330.
1331.
1332.
1333.
1334.
1335.
1336.
1337.
1338.
1339.
1340.
1341.
1342.
1343.
1344.
1345.
1346.
1347.
1348.
1349.
1350.
1351.
1352.
1353.
1354.
1355.
1356.
1357.
1358.
1359.
1360.
1361.
1362.
1363.
1364.
1365.
1366.
1367.
1368.
1369.
1370.
1371.
1372.
1373.
1374.
1375.
1376.
1377.
1378.
1379.
1380.
1381.
1382.
1383.
1384.
1385.
1386.
1387.
1388.
1389.
1390.
1391.
1392.
1393.
1394.
1395.
1396.
1397.
1398.
1399.
1400.
1401.
1402.
1403.
1404.
1405.
1406.
1407.
1408.
1409.
1410.
1411.
1412.
1413.
1414.
1415.
1416.
1417.
1418.
1419.
1420.
1421.
1422.
1423.
1424.
1425.
1426.
1427.
1428.
1429.
1430.
1431.
1432.
1433.
1434.
1435.
1436.
1437.
1438.
1439.
1440.
1441.
1442.
1443.
1444.
1445.
1446.
1447.
1448.
1449.
1450.
1451.
1452.
1453.
1454.
1455.
1456.
1457.
1458.
1459.
1460.
1461.
1462.
1463.
1464.
1465.
1466.
1467.
1468.
1469.
1470.
1471.
1472.
1473.
1474.
1475.
1476.
1477.
1478.
1479.
1480.
1481.
1482.
1483.
1484.
1485.
1486.
1487.
1488.
1489.
1490.
1491.
1492.
1493.
1494.
1495.
1496.
1497.
1498.
1499.
1500.
1501.
1502.
1503.
1504.
1505.
1506.
1507.
1508.
1509.
1510.
1511.
1512.
1513.
1514.
1515.
1516.
1517.
1518.
1519.
1520.
1521.
1522.
1523.
1524.
1525.
1526.
 =============================================================================== 
      Sybase Adaptive Server Enterprise System Performance Report
=============================================================================== 
 
Server Version:        Adaptive Server Enterprise/15.5/EBF 20633 SMP ESD#5.2/P/ 
                       RS6000/AIX 5.3/asear155/2602/64-bit/FBO/Sun Dec  9 11:59 
                       :29 2012                                                 
Run Date:              Dec 17, 2013                                             
Sampling Started at:   Dec 17, 2013 17:05:01                                    
Sampling Ended at:     Dec 17, 2013 17:10:01                                    
Sample Interval:       00:05:00                                                 
Sample Mode:           No Clear                                                 
Counters Last Cleared: Dec 10, 2013 02:10:18                                    
Server Name:           XXXXXXX                                                   
=============================================================================== 
 
Kernel Utilization
------------------
 
  Your Runnable Process Search Count is set to 2000                             
  and I/O Polling Process Count is set to 10                                    
 
  Engine Busy Utilization        CPU Busy   I/O Busy       Idle                 
  ------------------------       --------   --------   --------    
    Engine 0                       27.9 %     64.0 %      8.0 %              
    Engine 1                       31.8 %     60.1 %      8.1 %              
    Engine 2                       27.6 %     65.3 %      7.1 %              
    Engine 3                       23.8 %     54.9 %     21.3 %              
    Engine 4                       27.3 %     67.8 %      5.0 %              
  ------------------------       --------   --------   --------    
  Summary           Total         138.4 %    312.1 %    149.4 %              
                  Average          23.1 %     52.0 %     24.9 %              
 
  CPU Yields by Engine            per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total CPU Yields                    0.0           0.0           0       n/a   
 
  Network Checks
    Non-Blocking                  40977.5          99.8    12293262     100.0 %
    Blocking                          0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------
  Total Network I/O Checks        40977.5          99.8    12293262             
  Avg Net I/Os per Check              n/a           n/a     0.08183       n/a   
 
  Disk I/O Checks
    Total Disk I/O Checks         47243.8         115.0    14173151       n/a   
    Checks Returning I/O          40817.0          99.4    12245093      86.4 %
    Avg Disk I/Os Returned            n/a           n/a     0.08596       n/a   
 
 
=============================================================================== 
 
Worker Process Management
-------------------------
                                  per sec      per xact       count  % of total
                             ------------  ------------  ----------  ---------- 
 Worker Process Requests
   Total Requests                     0.0           0.0           0       n/a   
 
 Worker Process Usage
   Total Used                         0.0           0.0           0       n/a   
   Max Ever Used During Sample        0.0           0.0           0       n/a   
 
 Memory Requests for Worker Processes
   Total Requests                     0.0           0.0           0       n/a   
 
 Tuning Recommendations for Worker Processes                                    
 -------------------------------------------                                    
  - Consider decreasing the 'number of worker processes'
    configuration parameter.
 
 
=============================================================================== 
 
Parallel Query Management
-------------------------
 
  Parallel Query Usage            per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Parallel Queries              0.0           0.0           0       n/a   
 
  Merge Lock Requests             per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total # of Requests                 0.0           0.0           0       n/a   
 
  Sort Buffer Waits               per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total # of Waits                    0.0           0.0           0       n/a   
 
=============================================================================== 
 
Task Management                   per sec      per xact       count  % of total
---------------------------  ------------  ------------  ----------  ---------- 
 
  Connections Opened                  0.4           0.0         122       n/a   
 
  Task Context Switches by Engine
    Engine 0                       1455.8           3.5      436727      17.8 %
    Engine 1                       1467.0           3.6      440104      17.9 %
    Engine 2                       1447.4           3.5      434234      17.7 %
    Engine 3                       2342.4           5.7      702719      28.6 %
    Engine 4                       1482.3           3.6      444704      18.1 %
  -------------------------  ------------  ------------  ----------
    Total Task Switches:           8195.0          19.9     2458488             
 
  Task Context Switches Due To:
    Voluntary Yields                240.4           0.6       72131       2.9 %
    Cache Search Misses             681.2           1.7      204368       8.3 %
    Exceeding I/O batch size          2.1           0.0         625       0.0 %
    System Disk Writes              136.2           0.3       40872       1.7 %
    Logical Lock Contention           6.9           0.0        2056       0.1 %
    Address Lock Contention           0.3           0.0          88       0.0 %
    Latch Contention                 11.3           0.0        3381       0.1 %
    Physical Lock Transition          0.0           0.0           0       0.0 %
    Logical Lock Transition           0.0           0.0           0       0.0 %
    Object Lock Transition            0.0           0.0           0       0.0 %
    Log Semaphore Contention         94.8           0.2       28429       1.2 %
    PLC Lock Contention              15.1           0.0        4517       0.2 %
    Group Commit Sleeps             216.8           0.5       65035       2.6 %
    Last Log Page Writes            216.5           0.5       64953       2.6 %
    Modify Conflicts                105.6           0.3       31669       1.3 %
    I/O Device Contention             0.0           0.0           0       0.0 %
    Network Packet Received        1665.0           4.1      499512      20.3 %
    Network Packet Sent             933.8           2.3      280127      11.4 %
    Interconnect Message Sleeps       0.0           0.0           0       0.0 %
    Network services               2370.5           5.8      711158      28.9 %
    Other Causes                   1498.6           3.6      449567      18.3 %
 
 
=============================================================================== 
 
Application Management
----------------------
 
  Application Statistics Summary (All Applications)
  -------------------------------------------------
  Priority Changes                per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    To High Priority                113.6           0.3       34089      49.4 %
    To Medium Priority              115.2           0.3       34569      50.1 %
    To Low Priority                   1.2           0.0         358       0.5 %
  -------------------------  ------------  ------------  ----------
  Total Priority Changes            230.1           0.6       69016             
 
  Allotted Slices Exhausted       per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    High Priority                     0.0           0.0           0       0.0 %
    Medium Priority                   1.3           0.0         399      98.3 %
    Low Priority                      0.0           0.0           7       1.7 %
  -------------------------  ------------  ------------  ----------
  Total Slices Exhausted              1.4           0.0         406             
 
  Skipped Tasks By Engine         per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Engine Skips                  0.0           0.0           0       n/a   
 
  Engine Scope Changes                0.0           0.0           0       n/a   
 
=============================================================================== 
 
ESP Management                    per sec      per xact       count  % of total
---------------------------  ------------  ------------  ----------  ---------- 
  ESP Requests                        0.0           0.0           0       n/a   
=============================================================================== 
 
Housekeeper Task Activity
-------------------------
                                  per sec      per xact       count  % of total
                             ------------  ------------  ----------             
Buffer Cache Washes                                                             
  Clean                            218.4           0.5       65532      99.4 % 
  Dirty                              1.4           0.0         415       0.6 % 
                             ------------  ------------  ----------             
Total Washes                       219.8           0.5       65947              
 
Garbage Collections                  4.8           0.0        1425       n/a    
Pages Processed in GC                0.3           0.0          81       n/a    
 
Statistics Updates                   1.2           0.0         345       n/a    
 
=============================================================================== 
 
Monitor Access to Executing SQL
-------------------------------
                                  per sec      per xact       count  % of total
                             ------------  ------------  ----------  ---------- 
 Waits on Execution Plans            0.0           0.0           0       n/a    
 Number of SQL Text Overflows        0.0           0.0           0       n/a    
 Maximum SQL Text Requested          n/a           n/a     2139896       n/a    
  (since beginning of sample)                                                   
 
 
 Tuning Recommendations for Monitor Access to Executing SQL                     
 ----------------------------------------------------------                     
 - Consider increasing the 'max SQL text monitored' parameter 
   to at least 1209948 (i.e., half way from its current value 
   to Maximum SQL Text Requested).
 
=============================================================================== 
 
Transaction Profile
-------------------
 
  Transaction Summary             per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Committed Xacts                 410.8           n/a      123238     n/a     
 
  Transaction Detail              per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Inserts
    Fully Logged
      APL Heap Table               2140.6           5.2      642166      90.0 %
      APL Clustered Table             0.0           0.0           0       0.0 %
      Data Only Lock Table          236.9           0.6       71056      10.0 %
      Fast Bulk Insert                0.0           0.0           0       0.0 %
    Minimally Logged
      APL Heap Table                  0.0           0.0           0       0.0 %
      APL Clustered Table             0.0           0.0           0       0.0 %
      Data Only Lock Table            0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Rows Inserted              2377.4           5.8      713222      69.6 %
 
  Updates
    Fully Logged
      APL Deferred                   11.3           0.0        3380       1.3 %
      APL Direct In-place            44.1           0.1       13234       5.1 %
      APL Direct Cheap              306.8           0.7       92027      35.3 %
      APL Direct Expensive            0.0           0.0           0       0.0 %
      DOL Deferred                    0.1           0.0          28       0.0 %
      DOL Direct                    506.7           1.2      152013      58.3 %
    Minimally Logged
      APL Direct In-place             0.0           0.0           0       0.0 %
      APL Direct Cheap                0.0           0.0           0       0.0 %
      APL Direct Expensive            0.0           0.0           0       0.0 %
      DOL Direct                      0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Rows Updated                868.9           2.1      260682      25.4 %
 
  Data Only Locked Updates
    Fully Logged
      DOL Replace                   211.0           0.5       63306      44.4 %
      DOL Shrink                     18.3           0.0        5500       3.9 %
      DOL Cheap Expand                9.2           0.0        2751       1.9 %
      DOL Expensive Expand           12.8           0.0        3845       2.7 %
      DOL Expand & Forward            0.7           0.0         196       0.1 %
      DOL Fwd Row Returned            0.0           0.0           8       0.0 %
    Minimally Logged
      DOL Replace                   254.8           0.6       76435      53.6 %
      DOL Shrink                      0.0           0.0           0       0.0 %
      DOL Cheap Expand                0.0           0.0           0       0.0 %
      DOL Expensive Expand            0.0           0.0           0       0.0 %
      DOL Expand & Forward            0.0           0.0           0       0.0 %
      DOL Fwd Row Returned            0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total DOL Rows Updated            475.4           1.2      142610      13.9 %
 
  Deletes
    Fully Logged
      APL Deferred                    0.8           0.0         240       0.5 %
      APL Direct                    140.5           0.3       42135      82.6 %
      DOL                            28.7           0.1        8622      16.9 %
    Minimally Logged
      APL Direct                      0.0           0.0           0       0.0 %
      DOL                             0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Rows Deleted                170.0           0.4       50997       5.0 %
 
  =========================  ============  ============  ==========
  Total Rows Affected              3416.3           8.3     1024901             
  =========================  ============  ============  ==========
 
=============================================================================== 
 
Transaction Management
----------------------
 
  ULC Flushes to Xact Log         per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Any Logging Mode DMLs
    by End Transaction              345.5           0.8      103662      46.9 %
    by Change of Database             0.1           0.0          36       0.0 %
    by Unpin                         53.6           0.1       16082       7.3 %
    by Log markers                  262.7           0.6       78801      35.7 %
 
  Fully Logged DMLs
    by Full ULC                      59.0           0.1       17693       8.0 %
    by Single Log Record             15.3           0.0        4589       2.1 %
 
  Minimally Logged DMLs
    by Full ULC                       0.0           0.0           0       0.0 %
    by Single Log Record              0.0           0.0           0       0.0 %
    by Start of Sub-Command           0.0           0.0           0       0.0 %
    by End of Sub-Command             0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------
  Total ULC Flushes                 736.2           1.8      220863             
 
  ULC Flushes Skipped             per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Fully Logged DMLs
    by ULC Discards                  70.6           0.2       21173     100.0 %
  Minimally Logged DMLs
    by ULC Discards                   0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------
  Total ULC Flushes Skips            70.6           0.2       21173             
 
  ULC Log Records                 per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Fully Logged DMLs                5377.1          13.1     1613118       100.0 
  Minimally Logged DMLs               0.0           0.0           0         0.0 
  -------------------------  ------------  ------------  ----------
  Total ULC Log Records            5377.1          13.1     1613118             
 
  Max ULC Size During Sample
  --------------------------
  Fully Logged DMLs                   n/a           n/a           0       n/a   
  Minimally Logged DMLs               n/a           n/a           0       n/a   
 
  ML-DMLs Sub-Command Scans       per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Sub-Command Scans             0.0           0.0           0       n/a   
 
  ML-DMLs ULC Efficiency          per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total ML-DML Sub-Commands           0.0           0.0           0       n/a   
 
  ULC Semaphore Requests
    Granted                       11384.2          27.7     3415264      99.9 %
    Waited                           15.1           0.0        4517       0.1 %
  -------------------------  ------------  ------------  ----------
  Total ULC Semaphore Req         11399.3          27.7     3419781             
 
  Log Semaphore Requests
    Granted                         679.9           1.7      203973      87.8 %
    Local Waited                     94.8           0.2       28429      12.2 %
    Global Waited                     0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------
  Total Log Semaphore Req           774.7           1.9      232402             
 
  Transaction Log Writes            345.2           0.8      103573       n/a   
  Transaction Log Alloc             445.1           1.1      133541       n/a   
  Avg # Writes per Log Page           n/a           n/a     0.77559       n/a   
 
=============================================================================== 
 
Index Management
----------------
 
  Nonclustered Maintenance        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Ins/Upd Requiring Maint           0.0           0.0           0       n/a   
      # of NC Ndx Maint               0.0           0.0           0       n/a   
 
    Deletes Requiring Maint           0.0           0.0           0       n/a   
      # of NC Ndx Maint               0.0           0.0           0       n/a   
 
    RID Upd from Clust Split          0.0           0.0           0       n/a   
      # of NC Ndx Maint               0.0           0.0           0       n/a   
 
    Upd/Del DOL Req Maint           535.5           1.3      160663       n/a   
      # of DOL Ndx Maint            293.2           0.7       87973       n/a   
      Avg DOL Ndx Maint / Op          n/a           n/a     0.54756       n/a   
 
  Page Splits                        13.1           0.0        3944       n/a   
    Retries                           0.0           0.0           0       0.0 %
    Deadlocks                         0.0           0.0           0       0.0 %
    Add Index Level                   0.0           0.0           0       0.0 %
 
  Page Shrinks                        0.1           0.0          43       n/a   
    Deadlocks                          %                                       
    Deadlock Retries Exceeded         0.0           0.0           0       0.0 %
 
  Index Scans                     per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Ascending Scans                4360.2          10.6     1308050      16.6 %
    DOL Ascending Scans           21872.4          53.2     6561713      83.4 %
    Descending Scans                  3.4           0.0        1026       0.0 %
    DOL Descending Scans              0.2           0.0          61       0.0 %
                             ------------  ------------  ----------             
    Total Scans                   26236.2          63.9     7870850             
 
=============================================================================== 
 
Metadata Cache Management
-------------------------
 
  Metadata Cache Summary         per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
 
  Open Object Usage                                                             
    Active                            n/a           n/a        7091       n/a   
    Max Ever Used Since Boot          n/a           n/a        7812       n/a   
    Free                              n/a           n/a        7909       n/a   
    Reuse Requests                                                              
      Succeeded                       n/a           n/a           0       n/a   
      Failed                          n/a           n/a           0       n/a   
 
  Open Index Usage                                                              
    Active                            n/a           n/a        2781       n/a   
    Max Ever Used Since Boot          n/a           n/a        2786       n/a   
    Free                              n/a           n/a        4219       n/a   
    Reuse Requests                                                              
      Succeeded                       n/a           n/a           0       n/a   
      Failed                          n/a           n/a           0       n/a   
 
  Open Partition Usage                                                          
    Active                            n/a           n/a        2781       n/a   
    Max Ever Used Since Boot          n/a           n/a        2786       n/a   
    Free                              n/a           n/a        6219       n/a   
    Reuse Requests                                                              
      Succeeded                       n/a           n/a           0       n/a   
      Failed                          n/a           n/a           0       n/a   
 
  Open Database Usage                                                           
    Active                            n/a           n/a          13       n/a   
    Max Ever Used Since Boot          n/a           n/a          13       n/a   
    Free                              n/a           n/a          17       n/a   
    Reuse Requests                                                              
      Succeeded                       n/a           n/a           0       n/a   
      Failed                          n/a           n/a           0       n/a   
 
  Object Manager Spinlock Contention  n/a           n/a         n/a       0.0 %
 
  Object Spinlock Contention          n/a           n/a         n/a       0.0 %
 
  Index Spinlock Contention           n/a           n/a         n/a       0.0 %
 
  Index Hash Spinlock Contention      n/a           n/a         n/a       0.0 %
 
  Partition Spinlock Contention       n/a           n/a         n/a       0.0 %
 
  Partition Hash Spinlock Contention  n/a           n/a         n/a       0.0 %
 
=============================================================================== 
 
Lock Management
---------------
 
  Lock Summary                    per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Lock Requests             22926.4          55.8     6877905       n/a   
  Avg Lock Contention                 7.1           0.0        2144       0.0 %
  Cluster Locks Retained              0.0           0.0           0       0.0 %
  Deadlock Percentage                 0.0           0.0           0       0.0 %
 
  Lock Detail                     per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
 
  Table Lock Hashtable
    Lookups                        4875.6          11.9     1462690       n/a   
    Avg Chain Length                  n/a           n/a     0.07870       n/a   
    Spinlock Contention               n/a           n/a         n/a       0.0 %
 
  Exclusive Table
    Granted                          53.6           0.1       16093     100.0 %
    Waited                            0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total EX-Table Requests            53.6           0.1       16093       0.2 %
 
  Shared Table
    Granted                           0.2           0.0          55     100.0 %
    Waited                            0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total SH-Table Requests             0.2           0.0          55       0.0 %
 
  Exclusive Intent
    Granted                         538.4           1.3      161527     100.0 %
    Waited                            0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total EX-Intent Requests          538.4           1.3      161527       2.3 %
 
  Shared Intent
    Granted                        3794.9           9.2     1138470     100.0 %
    Waited                            0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total SH-Intent Requests         3794.9           9.2     1138470      16.6 %
 
  Page & Row Lock HashTable
    Lookups                       12424.9          30.2     3727483       n/a   
    Avg Chain Length                  n/a           n/a     0.00675       n/a   
    Spinlock Contention               n/a           n/a         n/a       0.0 %
 
  Exclusive Page
    Granted                           3.4           0.0        1025     100.0 %
    Waited                            0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total EX-Page Requests              3.4           0.0        1025       0.0 %
 
  Update Page
    Total UP-Page Requests            0.0           0.0           0       n/a   
 
  Shared Page
    Granted                        4052.7           9.9     1215809     100.0 %
    Waited                            0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total SH-Page Requests           4052.7           9.9     1215809      17.7 %
 
 
  Exclusive Row
    Granted                         850.7           2.1      255213      99.4 %
    Waited                            5.1           0.0        1543       0.6 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total EX-Row Requests             855.9           2.1      256756       3.7 %
 
  Update Row
    Granted                         501.3           1.2      150375     100.0 %
    Waited                            0.2           0.0          59       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total UP-Row Requests             501.4           1.2      150434       2.2 %
 
  Shared Row
    Granted                        5968.7          14.5     1790612     100.0 %
    Waited                            1.5           0.0         446       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total SH-Row Requests            5970.2          14.5     1791058      26.0 %
 
 
  Next-Key
    Granted                           0.0           0.0           0       0.0 %
    Waited                            0.0           0.0           8     100.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Next-Key Requests             0.0           0.0           8       0.0 %
 
 
  Address Lock Hashtable
    Lookups                        7155.8          17.4     2146753       n/a   
    Avg Chain Length                  n/a           n/a     0.00021       n/a   
    Spinlock Contention               n/a           n/a         n/a       0.0 %
 
  Exclusive Address
    Granted                         103.2           0.3       30950     100.0 %
    Waited                            0.0           0.0           4       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total EX-Address Requests         103.2           0.3       30954       0.5 %
 
  Shared Address
    Granted                        7052.1          17.2     2115632     100.0 %
    Waited                            0.3           0.0          84       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total SH-Address Requests        7052.4          17.2     2115716      30.8 %
 
 
  Last Page Locks on Heaps
    Granted                        2140.6           5.2      642166     100.0 %
    Waited                            0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Last Pg Locks              2140.6           5.2      642166     100.0 %
 
 
  Deadlocks by Lock Type          per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Deadlocks                     0.0           0.0           0       n/a   
 
 
 
  Deadlock Detection
    Deadlock Searches                 0.0           0.0           0       n/a   
 
 
  Lock Promotions
    Ex-Page to Ex-Table               0.0           0.0           0       0.0 %
    Sh-Page to Sh-Table               0.0           0.0           0       0.0 %
    Ex-Row to Ex-Table                0.0           0.0           0       0.0 %
    Sh-Row to Sh-Table                0.0           0.0          14     100.0 %
    Sh-Next-Key to Sh-Table           0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------
  Total Lock Promotions               0.0           0.0          14             
 
 
  Lock Timeouts by Lock Type      per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total Timeouts                      0.0           0.0           0       n/a   
 
  Cluster Lock Summary            per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
 
  Physical Locks Summary          per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
No physical locks are acquired
 
 
  Logical Locks Summary          per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
 
  Object Locks Summary            per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
 
 
=============================================================================== 
 
Data Cache Management
---------------------
 
  Cache Statistics Summary (All Caches)
  -------------------------------------
                                  per sec      per xact       count  % of total
                             ------------  ------------  ----------  ----------
 
    Cache Search Summary
      Total Cache Hits           165229.7         402.2    49568915      99.4 %
      Total Cache Misses            961.9           2.3      288560       0.6 %
  -------------------------  ------------  ------------  ----------
    Total Cache Searches         166191.6         404.6    49857475             
 
    Cache Turnover
      Buffers Grabbed              7024.7          17.1     2107411       n/a   
      Buffers Grabbed Dirty           0.0           0.0           0       0.0 %
 
    Cache Strategy Summary
      Cached (LRU) Buffers       162315.0         395.1    48694509      99.2 %
      Discarded (MRU) Buffers      1314.4           3.2      394310       0.8 %
 
    Large I/O Usage
      Large I/Os Performed         3320.0           8.1      995986      98.2 %
 
      Large I/Os Denied due to                                                  
        Pool < Prefetch Size         50.5           0.1       15140       1.5 %
        Pages Requested                                                         
        Reside in Another                                                       
        Buffer Pool                  12.0           0.0        3604       0.4 %
  -------------------------  ------------  ------------  ----------
    Total Large I/O Requests       3382.4           8.2     1014730             
 
    Large I/O Effectiveness
      Pages by Lrg I/O Cached     25229.5          61.4     7568852       n/a   
      Pages by Lrg I/O Used        3872.6           9.4     1161772      15.3 %
 
    Asynchronous Prefetch Activity
      APFs Issued                  2185.2           5.3      655548       7.3 %
      APFs Denied Due To                                                        
        APF I/O Overloads             0.0           0.0           0       0.0 %
        APF Limit Overloads           0.0           0.0           0       0.0 %
        APF Reused Overloads         13.7           0.0        4114       0.0 %
      APF Buffers Found in Cache                                                
        With Spinlock Held            1.7           0.0         512       0.0 %
        W/o Spinlock Held         27727.7          67.5     8318297      92.6 %
  -------------------------  ------------  ------------  ----------
    Total APFs Requested          29928.2          72.9     8978471             
 
    Other Asynchronous Prefetch Statistics
      APFs Used                    2171.6           5.3      651465       n/a   
      APF Waits for I/O             282.8           0.7       84835       n/a   
      APF Discards                    0.0           0.0           0       n/a   
 
    Dirty Read Behavior
      Page Requests                  12.9           0.0        3870       n/a   
 
------------------------------------------------------------------------------- 
  Cache: default data cache
                                  per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Spinlock Contention               n/a           n/a         n/a       3.3 %
 
    Utilization                       n/a           n/a         n/a     100.0 %
 
    Cache Searches
      Cache Hits                 165229.7         402.2    49568915      99.4 %
         Found in Wash               35.7           0.1       10703       0.0 %
      Cache Misses                  961.9           2.3      288560       0.6 %
  -------------------------  ------------  ------------  ----------
    Total Cache Searches         166191.6         404.6    49857475
 
    Pool Turnover
      2  Kb Pool
          LRU Buffer Grab          3704.8           9.0     1111425      52.7 %
            Grabbed Locked Buffer     0.0           0.0           0       0.0 %
            Grabbed Dirty             0.0           0.0           0       0.0 %
      4  Kb Pool
          LRU Buffer Grab           221.7           0.5       66506       3.2 %
            Grabbed Locked Buffer     0.0           0.0           0       0.0 %
            Grabbed Dirty             0.0           0.0           0       0.0 %
      16 Kb Pool
          LRU Buffer Grab          3098.3           7.5      929480      44.1 %
            Grabbed Locked Buffer     0.0           0.0           0       0.0 %
            Grabbed Dirty             0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------
    Total Cache Turnover           7024.7          17.1     2107411
 
    Cluster Cache Behavior
      No physical locks are acquired on buffers in this cache
 
    Buffer Wash Behavior
      Buffers Passed Clean         2828.9           6.9      848673      99.3 %
      Buffers Already in I/O          0.0           0.0           5       0.0 %
      Buffers Washed Dirty           19.2           0.0        5758       0.7 %
 
    Cache Strategy
      Cached (LRU) Buffers       162315.0         395.1    48694509      99.2 %
      Discarded (MRU) Buffers      1314.4           3.2      394310       0.8 %
 
    Large I/O Usage
      Large I/Os Performed         3320.0           8.1      995986      98.2 %
 
      Large I/Os Denied due to
        Pool < Prefetch Size         50.5           0.1       15140       1.5 %
        Pages Requested
        Reside in Another
        Buffer Pool                  12.0           0.0        3604       0.4 %
  -------------------------  ------------  ------------  ----------
    Total Large I/O Requests       3382.4           8.2     1014730
 
    Large I/O Detail
     4   Kb Pool
        Pages Cached                443.4           1.1      133012       n/a
        Pages Used                  443.4           1.1      133013     100.0 %
     16  Kb Pool
        Pages Cached              24786.1          60.3     7435840       n/a
        Pages Used                 3429.2           8.3     1028759      13.8 %
 
    Dirty Read Behavior
	  Page Requests              12.9           0.0        3870       n/a
 
    Tuning Recommendations for Data cache : default data cache
    -------------------------------------                                       
    - Consider using 'relaxed LRU replacement policy'
      for this cache.
 
=============================================================================== 
 
Procedure Cache Management        per sec      per xact       count  % of total
---------------------------  ------------  ------------  ----------  ---------- 
  Procedure Requests               1342.5           3.3      402745       n/a   
  Procedure Reads from Disk           0.1           0.0          29       0.0 %
  Procedure Writes to Disk            0.0           0.0           0       0.0 %
  Procedure Removals                  4.2           0.0        1270       n/a   
  Procedure Recompilations            1.1           0.0         333       n/a   
 
  Recompilations Requests:
    Execution Phase                   1.1           0.0         333     100.0 %
    Compilation Phase                 0.0           0.0           0       0.0 %
    Execute Cursor Execution          0.0           0.0           0       0.0 %
    Redefinition Phase                0.0           0.0           0       0.0 %
 
  Recompilation Reasons:
    Table Missing                     1.1           0.0         332       n/a   
    Temporary Table Missing           1.1           0.0         332       n/a   
    Schema Change                     0.0           0.0           1       n/a   
    Index Change                      0.0           0.0           0       n/a   
    Isolation Level Change            0.0           0.0           0       n/a   
    Permissions Change                0.0           0.0           0       n/a   
    Cursor Permissions Change         0.0           0.0           0       n/a   
 
  SQL Statement Cache:
    Statements Cached                 2.0           0.0         604       n/a   
    Statements Found in Cache        25.6           0.1        7671       n/a   
    Statements Not Found              2.0           0.0         604       n/a   
    Statements Dropped                2.0           0.0         614       n/a   
    Statements Restored               1.0           0.0         304       n/a   
    Statements Not Cached             0.0           0.0           0       n/a   
 
 
=============================================================================== 
 
Memory Management                 per sec      per xact       count  % of total
---------------------------  ------------  ------------  ----------  ---------- 
  Pages Allocated                    51.0           0.1       15294       n/a   
  Pages Released                     51.0           0.1       15294       n/a   
 
=============================================================================== 
 
Recovery Management
-------------------
 
  Checkpoints                     per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    # of Normal Checkpoints           0.1           0.0          16     100.0 %
    # of Free Checkpoints             0.0           0.0           0       0.0 %
  -------------------------  ------------  ------------  ----------             
  Total Checkpoints                   0.1           0.0          16             
 
  Avg Time per Normal Chkpt       0.75000 seconds                               
 
=============================================================================== 
 
Disk I/O Management
-------------------
 
  Max Outstanding I/Os            per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Server                            n/a           n/a           0       n/a   
    Engine 0                          n/a           n/a         603       n/a   
    Engine 1                          n/a           n/a         532       n/a   
    Engine 2                          n/a           n/a         683       n/a   
    Engine 3                          n/a           n/a         721       n/a   
    Engine 4                          n/a           n/a         676       n/a   
 
 
  I/Os Delayed by
    Disk I/O Structures               n/a           n/a           0       n/a   
    Server Config Limit               n/a           n/a           0       n/a   
    Engine Config Limit               n/a           n/a           0       n/a   
    Operating System Limit            n/a           n/a           0       n/a   
 
 
  Total Requested Disk I/Os        3508.6           8.5     1052583             
 
  Completed Disk I/O's
    Asynchronous I/O's
      Engine 0                      818.4           2.0      245532      23.3 %
      Engine 1                      639.5           1.6      191864      18.2 %
      Engine 2                      764.0           1.9      229189      21.8 %
      Engine 3                      499.7           1.2      149916      14.2 %
      Engine 4                      787.0           1.9      236107      22.4 %
    Synchronous I/O's
      Total Completed I/Os            0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------             
  Total Completed I/Os             3508.7           8.5     1052608             
 
 
  Device Activity Detail
  ----------------------
 
  Device:                                                                       
    /dev/raudit_dev1                                                            
    audit_dev1                    per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                             0.0           0.0           0       0.0 %
      Non-APF                         0.0           0.0           0       0.0 %
    Writes                            2.6           0.0         782     100.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          2.6           0.0         782       0.1 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/raudit_dev2                                                            
    audit_dev2                    per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/raudit_dev3                                                            
    audit_dev3                    per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdata01                                                                
    data01                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                            52.1           0.1       15621      36.3 %
      Non-APF                        40.4           0.1       12110      28.1 %
    Writes                           51.1           0.1       15317      35.6 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                        143.5           0.3       43048       4.1 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdata02                                                                
    data02                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                            16.2           0.0        4856      33.7 %
      Non-APF                        15.5           0.0        4636      32.2 %
    Writes                           16.4           0.0        4915      34.1 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                         48.0           0.1       14407       1.4 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdata03                                                                
    data03                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                            67.4           0.2       20215      54.9 %
      Non-APF                        35.2           0.1       10546      28.6 %
    Writes                           20.2           0.0        6056      16.4 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                        122.7           0.3       36817       3.5 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdata04                                                                
    data04                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                           279.3           0.7       83775      61.5 %
      Non-APF                       140.5           0.3       42159      31.0 %
    Writes                           34.3           0.1       10276       7.5 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                        454.0           1.1      136210      12.9 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdata05                                                                
    data05                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                           324.6           0.8       97391      68.4 %
      Non-APF                       133.4           0.3       40015      28.1 %
    Writes                           16.4           0.0        4923       3.5 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                        474.4           1.2      142329      13.5 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdata06                                                                
    data06                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                           430.7           1.0      129214      78.0 %
      Non-APF                       113.0           0.3       33896      20.5 %
    Writes                            8.6           0.0        2574       1.6 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                        552.3           1.3      165684      15.7 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdata07                                                                
    data07                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                           435.2           1.1      130571      83.1 %
      Non-APF                        74.1           0.2       22231      14.2 %
    Writes                           14.2           0.0        4267       2.7 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                        523.6           1.3      157069      14.9 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdata08                                                                
    data08                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                           577.9           1.4      173383      70.7 %
      Non-APF                       128.9           0.3       38664      15.8 %
    Writes                          111.1           0.3       33336      13.6 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                        817.9           2.0      245383      23.3 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdata09                                                                
    data09                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdbccdev                                                               
    dbccdev                       per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rdbcclog                                                               
    dbcclog                       per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rlogg01                                                                
    log01                         per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                             0.0           0.0           0       0.0 %
      Non-APF                         0.0           0.0           0       0.0 %
    Writes                            4.1           0.0        1237     100.0 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          4.1           0.0        1237       0.1 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rlogg02                                                                
    log02                         per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rlogg03                                                                
    log03                         per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rlogg04                                                                
    log04                         per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rmaster                                                                
    master                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                             0.2           0.0          71      22.0 %
      Non-APF                         0.0           0.0           8       2.5 %
    Writes                            0.8           0.0         244      75.5 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          1.1           0.0         323       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rrecov_data01                                                          
    recov_data01                  per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rrecov_data02                                                          
    recov_data02                  per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rrecov_log01                                                           
    recov_log01                   per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rsysprocsdev                                                           
    sysprocsdev                   per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rsystemdbdev                                                           
    systemdbdev                   per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rtemp01                                                                
    tempdbdev                     per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                             0.0           0.0           0       0.0 %
      Non-APF                         0.0           0.0          14       5.3 %
    Writes                            0.8           0.0         249      94.7 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.9           0.0         263       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rtemp02                                                                
    tempdbdev2                    per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rtemp03                                                                
    temp03                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                             0.6           0.0         170       4.6 %
      Non-APF                         0.2           0.0          55       1.5 %
    Writes                           11.5           0.0        3464      93.9 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                         12.3           0.0        3689       0.4 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rtemp04                                                                
    temp04                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rtemp05                                                                
    temp05                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                             0.0           0.0           0       0.0 %
      Non-APF                         0.0           0.0          12       0.5 %
    Writes                            8.0           0.0        2385      99.5 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          8.0           0.0        2397       0.2 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/rtemp06                                                                
    temp06                        per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_data01                                                         
    unmirr_data01                 per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_data02                                                         
    unmirr_data02                 per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_data03                                                         
    unmirr_data03                 per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_data04                                                         
    unmirr_data04                 per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_data05                                                         
    unmirr_data05                 per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_data06                                                         
    unmirr_data06                 per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_data07                                                         
    unmirr_data07                 per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_log01                                                          
    unmirr_log01                  per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_log02                                                          
    unmirr_log02                  per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_log03                                                          
    unmirr_log03                  per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       n/a   
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                          0.0           0.0           0       0.0 %
 
 
  ----------------------------------------------------------------------------- 
 
  Device:                                                                       
    /dev/runmirr_log04                                                          
    unmirr_log04                  per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Reads                                                                       
      APF                             0.9           0.0         282       0.3 %
      Non-APF                         0.1           0.0          21       0.0 %
    Writes                          342.1           0.8      102636      99.7 %
  -------------------------  ------------  ------------  ----------  ---------- 
  Total I/Os                        343.1           0.8      102939       9.8 %
 
 
  ----------------------------------------------------------------------------- 
 
 
 
=============================================================================== 
 
Network I/O Management
----------------------
 
  Total Network I/O Requests       2598.8           6.3      779639       n/a   
    Network I/Os Delayed              0.0           0.0           0       0.0 %
 
 
  Total TDS Packets Received      per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Engine 0                        331.4           0.8       99419      19.9 %
    Engine 1                        382.7           0.9      114797      23.0 %
    Engine 2                        315.6           0.8       94665      19.0 %
    Engine 3                        321.7           0.8       96502      19.3 %
    Engine 4                        313.8           0.8       94129      18.8 %
  -------------------------  ------------  ------------  ----------             
  Total TDS Packets Rec'd          1665.0           4.1      499512             
 
 
  Total Bytes Received            per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Engine 0                      54883.6         133.6    16465085      19.1 %
    Engine 1                      70933.4         172.7    21280018      24.6 %
    Engine 2                      54675.8         133.1    16402729      19.0 %
    Engine 3                      54293.1         132.2    16287931      18.8 %
    Engine 4                      53312.3         129.8    15993686      18.5 %
  -------------------------  ------------  ------------  ----------             
  Total Bytes Rec'd              288098.2         701.3    86429449             
 
 
   Avg Bytes Rec'd per Packet          n/a           n/a         173       n/a  
 
  ----------------------------------------------------------------------------- 
 
  Total TDS Packets Sent          per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Engine 0                        334.7           0.8      100419      19.8 %
    Engine 1                        415.8           1.0      124736      24.6 %
    Engine 2                        307.5           0.7       92238      18.2 %
    Engine 3                        304.8           0.7       91426      18.1 %
    Engine 4                        325.6           0.8       97685      19.3 %
  -------------------------  ------------  ------------  ----------             
  Total TDS Packets Sent           1688.3           4.1      506504             
 
 
  Total Bytes Sent                per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
    Engine 0                      45607.5         111.0    13682263      11.3 %
    Engine 1                     156776.1         381.6    47032841      38.9 %
    Engine 2                      61190.3         149.0    18357096      15.2 %
    Engine 3                      40027.3          97.4    12008187       9.9 %
    Engine 4                      99572.4         242.4    29871724      24.7 %
  -------------------------  ------------  ------------  ----------             
  Total Bytes Sent               403173.7         981.5   120952111             
 
 
  Avg Bytes Sent per Packet           n/a           n/a         238       n/a   
 
===============================================================================
 
Replication Agent
-----------------
 
Replication Agent:  micose
Replication Server: MICOS_RS
 
                                  per sec      per xact       count  % of total
                             ------------  ------------  ----------  ----------
Log Scan Summary
    Log Records Scanned               n/a           n/a     1067314       n/a
    Log Records Processed             n/a           n/a      348720       n/a
    Number of Log Scans               n/a           n/a       58886       n/a
    Amount of Time for Log Scans (ms) n/a           n/a         771       n/a
    Longest Time for Log Scan (ms)    n/a           n/a           0       n/a
    Average Time per Log Scan (ms)    n/a           n/a         0.0       n/a
 
Log Scan Activity
    Updates                           n/a           n/a       83466       n/a
    Inserts                           n/a           n/a       58830       n/a
    Deletes                           n/a           n/a           0       n/a
    Store Procedures                  n/a           n/a           1       n/a
    DDL Log Records                   n/a           n/a           0       n/a
    Writetext Log Records             n/a           n/a           0       n/a
    Text/Image Log Records            n/a           n/a        9746       n/a
    CLRs                              n/a           n/a           0       n/a
    Checkpoints Processed             n/a           n/a           5       n/a
    SQL Statements Processed          n/a           n/a           0       n/a
 
Transaction Activity
    Opened                            n/a           n/a       99959       n/a
    Commited                          n/a           n/a       99956       n/a
    Aborted                           n/a           n/a           2       n/a
    Prepared                          n/a           n/a           2       n/a
    Delayed Commit                    n/a           n/a           0       n/a
    Maintenance User                  n/a           n/a           0       n/a
 
Log Extension Wait
    Count                             n/a           n/a       37157       n/a
    Amount of time (ms)               n/a           n/a      158139       n/a
    Longest Wait (ms)                 n/a           n/a           0       n/a
    Average Time (ms)                 n/a           n/a         4.3       n/a
 
Schema Cache
 Usage
    Max Ever Used                     n/a           n/a          13       n/a
    Schemas reused                    n/a           n/a       13843       n/a
 Forward Schema Lookups
    Count                             n/a           n/a           0       n/a
    Total Wait (ms)                   n/a           n/a           0       n/a
    Longest Wait (ms)                 n/a           n/a           0       n/a
    Average Time (ms)                 n/a           n/a         0.0       n/a
 Backward Schema Lookups
    Count                             n/a           n/a           0       n/a
    Total Wait (ms)                   n/a           n/a           0       n/a
    Longest Wait (ms)                 n/a           n/a           0       n/a
    Average Time (ms)                 n/a           n/a         0.0       n/a
 
Truncation Point Movement
    Moved                             n/a           n/a          70       n/a
    Gotten from RS                    n/a           n/a          70       n/a
 
Connections to Replication Server
    Success                           n/a           n/a           0       n/a
    Failed                            n/a           n/a           0       n/a
 
Network Packet Information
    Packets Sent                      n/a           n/a      151840       n/a
    Full Packets Sent                 n/a           n/a       95308       n/a
    Largest Packet                    n/a           n/a           0       n/a
    Amount of Bytes Sent              n/a           n/a   233827563       n/a
    Average Packet                    n/a           n/a      1540.0       n/a
 
I/O Wait from RS
    Count                             n/a           n/a      265218       n/a
    Amount of Time (ms)               n/a           n/a      113315       n/a
    Longest Wait (ms)                 n/a           n/a           0       n/a
    Average Wait (ms)                 n/a           n/a         0.4       n/a
 
--------------------------------------------------------------------------------
Replication Agent:  micose_for_Recovery
Replication Server: MICOS_RS
 
                                  per sec      per xact       count  % of total
                             ------------  ------------  ----------  ----------
Log Scan Summary
    Log Records Scanned               n/a           n/a           0       n/a
    Log Records Processed             n/a           n/a           0       n/a
    Number of Log Scans               n/a           n/a           0       n/a
    Amount of Time for Log Scans (ms) n/a           n/a           0       n/a
    Longest Time for Log Scan (ms)    n/a           n/a           0       n/a
    Average Time per Log Scan (ms)    n/a           n/a         0.0       n/a
 
Log Scan Activity
    Updates                           n/a           n/a           0       n/a
    Inserts                           n/a           n/a           0       n/a
    Deletes                           n/a           n/a           0       n/a
    Store Procedures                  n/a           n/a           0       n/a
    DDL Log Records                   n/a           n/a           0       n/a
    Writetext Log Records             n/a           n/a           0       n/a
    Text/Image Log Records            n/a           n/a           0       n/a
    CLRs                              n/a           n/a           0       n/a
    Checkpoints Processed             n/a           n/a           0       n/a
    SQL Statements Processed          n/a           n/a           0       n/a
 
Transaction Activity
    Opened                            n/a           n/a           0       n/a
    Commited                          n/a           n/a           0       n/a
    Aborted                           n/a           n/a           0       n/a
    Prepared                          n/a           n/a           0       n/a
    Delayed Commit                    n/a           n/a           0       n/a
    Maintenance User                  n/a           n/a           0       n/a
 
Log Extension Wait
    Count                             n/a           n/a           0       n/a
    Amount of time (ms)               n/a           n/a           0       n/a
    Longest Wait (ms)                 n/a           n/a           0       n/a
    Average Time (ms)                 n/a           n/a         0.0       n/a
 
Schema Cache
 Usage
    Max Ever Used                     n/a           n/a           0       n/a
    Schemas reused                    n/a           n/a           0       n/a
 Forward Schema Lookups
    Count                             n/a           n/a           0       n/a
    Total Wait (ms)                   n/a           n/a           0       n/a
    Longest Wait (ms)                 n/a           n/a           0       n/a
    Average Time (ms)                 n/a           n/a         0.0       n/a
 Backward Schema Lookups
    Count                             n/a           n/a           0       n/a
    Total Wait (ms)                   n/a           n/a           0       n/a
    Longest Wait (ms)                 n/a           n/a           0       n/a
    Average Time (ms)                 n/a           n/a         0.0       n/a
 
Truncation Point Movement
    Moved                             n/a           n/a           0       n/a
    Gotten from RS                    n/a           n/a           0       n/a
 
Connections to Replication Server
    Success                           n/a           n/a           0       n/a
    Failed                            n/a           n/a           0       n/a
 
Network Packet Information
    Packets Sent                      n/a           n/a           0       n/a
    Full Packets Sent                 n/a           n/a           0       n/a
    Largest Packet                    n/a           n/a           0       n/a
    Amount of Bytes Sent              n/a           n/a           0       n/a
    Average Packet                    n/a           n/a         0.0       n/a
 
I/O Wait from RS
    Count                             n/a           n/a           0       n/a
    Amount of Time (ms)               n/a           n/a           0       n/a
    Longest Wait (ms)                 n/a           n/a           0       n/a
    Average Wait (ms)                 n/a           n/a         0.0       n/a
 
--------------------------------------------------------------------------------
=============================== End of Report =================================
=============================================================================== 
...
Рейтинг: 0 / 0
Latch sleeping
    #38508271
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Сергей08Мне пока вживую не удалось увидеть(только результаты мониторинга) но колеги абсолютно уверены, что sp_lock ничего не дает. Как по мне так это логично - всё таки локи и защёлки совсем не одно и тоже.

Это одно и то же.
...
Рейтинг: 0 / 0
Latch sleeping
    #38508287
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
В доке по sp_lock syslocks следов латчей не нашёл.
...
Рейтинг: 0 / 0
Latch sleeping
    #38508300
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Давай ещё раз.

Сергей08Время от времени несколько процессов зависают на Latch sleep.
Воспроизвести не получается. Чаще всего по звонку от заказчика узнаём :)


Это дедлоки или просто локи ? Если дедлоки, включайте запись в логи о дедлоках, там будет какая-то информация о
каждом дедлоке.

Включается параметром (sp_configure).


Сергей08Почитал документацию и не очень много нашёл. В документации по системным таблицам слово latch вообще только один раз нашёл.
Что это и как работает вроде знаю. Но как узнать кто создаёт тупиковую ситуацию!


С чего ты взял, что это deadlock ? Какие для этого есть аргументы?
По идее, на latch-ах должно процесс висеть не может, потому что это нетранзакционные локи.
...
Рейтинг: 0 / 0
Latch sleeping
    #38508397
Фотография komrad
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Сергей08comradзапустите sysmon на 5-7 минут несколько раз в период тормозов и выложите тут



Вроде нашёл защёлку и sysmon на одно время. Не уверен что много процессов залочено в следующие секунды , но уже одно то, что видим latch sleeping в процессах уже, наверное, проблема.

18.12 17:05:00 Configured user connections: 4000 Blocked: 0 Used: 670 Active: 22

spid loginame hostname blk dbname cpu(sec) phys_io program cmd stat
----- -------------- ----------- ----- ---------------- ---------- ----------- ----------------- -------------- ------------
266 XXXXXXXXXX XXXXXXXXXXXX XXXXX 3.80 0 sst_server INSERT latch sleep
..................

Sysmon
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
  Transaction Detail              per sec      per xact       count  % of total
  -------------------------  ------------  ------------  ----------  ---------- 
  Inserts
    Fully Logged
      APL Heap Table               2140.6           5.2      642166      90.0 %
      APL Clustered Table             0.0           0.0           0       0.0 %
      Data Only Lock Table          236.9           0.6       71056      10.0 %
      Fast Bulk Insert                0.0           0.0           0       0.0 %



Особого криминала в сисмоне не видать, но если судить по приведенному процессу и указанному в спойлере куску сисмона, то используй :
1) процедуру sp_object_stats чтобы найти самые "нагруженные" объекты
2) mda-таблицу monOpenObjectActivity для проверки общей картины по объектам
...
Рейтинг: 0 / 0
Latch sleeping
    #38508490
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
MasterZivДавай ещё раз.

Сергей08Время от времени несколько процессов зависают на Latch sleep.
Воспроизвести не получается. Чаще всего по звонку от заказчика узнаём :)


Это дедлоки или просто локи ? Если дедлоки, включайте запись в логи о дедлоках, там будет какая-то информация о
каждом дедлоке.

Включается параметром (sp_configure).


Сергей08Почитал документацию и не очень много нашёл. В документации по системным таблицам слово latch вообще только один раз нашёл.
Что это и как работает вроде знаю. Но как узнать кто создаёт тупиковую ситуацию!


С чего ты взял, что это deadlock ? Какие для этого есть аргументы?
По идее, на latch-ах долго процесс висеть не может, потому что это нетранзакционные локи.
...
Рейтинг: 0 / 0
Latch sleeping
    #38508589
Сергей08
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
е MasterZivЭто дедлоки или просто локи ?

Это latch (защёлка). Извини , но я категорически не согласен, что 'Это одно и то же. '

е MasterZivС чего ты взял, что это deadlock ??

Ни слова о деадлоках не говорил. Если бы я переводил 'deadlock' то в лучшем случае перевёл бы как тупиковая блокировка.
Имел ввиду тупиковую ситуацию. Проблему видишь , а как решить или локализовать непонятно.
Проблему локов или дедлоков не сложно локализовать или решить. А тут даже непонятно кого убивать. Blocked :0 , а несколько процессов тупо весят на инсертах или апдейтах со статусом 'latch sleeping'
...
Рейтинг: 0 / 0
Latch sleeping
    #38508721
moris
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Сергей08,

Латчи - это кратковременный механизм обеспечения синхронизации при работе с DOL объектами. Латчи работают, разумеется, на уровне ASE и должны отрабатывать очень быстро. И поэтому когда появляется latch sleep, значит что то начинает серъезно тормозить чаще всего- либо работа с CPU (engine-ми), либо работа с дисками.

Тормоза при работе с CPU (engine-ми) происходит когда все engine-ы используются более чем на 95%. Это может либо реальная нагрузка пользователей, либо не оптимальная настройка ASE на многопроцессорной машине, влекущая за собой проблемы со спинблокировками. Большая конкуренция за спинблокировки (spin lock) может легко вызывать 100% утилизацию всех engine-ов, и как следствие - latch sleep. Смотреть sysmon - раздел engines / раздел кеши -spinlock contention

Другая частая проблема при latch sleep неподходящая производительность дисковой системы ввода/вывода , когда возникают очереди при записи, либо значительно увеличивается service time выполнения одного disk request. Смотреть - iostat -x на уровне OS (avgqu-sz / svctm / %util) для дисков на которых размещены девайсы БД Sybase
...
Рейтинг: 0 / 0
Latch sleeping
    #38509028
Сергей08
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
moris,
Спасибо за ответ. Очень похоже на очереди при записи.
Статистика OS вроде не показывает проблем. Обнаружили предполагаемую
проблему. По ошибке в джобе обслуживания ребилд индексов не проводился. Индексы стали уж слишком большие.
В несколько раз больше чем должны быть. Ребилд займёт несколько дней и НАДЕЮСЬ это поможет.
Не нравится, что имея 'latch sleeping' несколько минут не было никаких
способов локализовать проблему быть уверенным что это индекс ( или OAM или datarows page...)
Индексы всё равно надо ребилдить, но будет обидно, если
это так и не поможет. Нехорошо как то... вслепую несколько дней
...
Рейтинг: 0 / 0
Latch sleeping
    #38509809
moris
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Сергей08Статистика OS вроде не показывает проблем

Надо настроить постоянный мониторинг disk io и уже после того, как увидели множественные latch sleep смотреть статистику что было именно в тот момент - (очередь на запись /service time ). Так частенько бывает, что проблема носит не постоянный характер, а возникает время от времени..
...
Рейтинг: 0 / 0
Latch sleeping
    #38510182
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Сергей08 По ошибке в джобе обслуживания ребилд индексов не проводился. Индексы стали уж слишком большие.
В несколько раз больше чем должны быть. Ребилд займёт несколько дней и НАДЕЮСЬ это поможет.


Перестройка индексов -- это всё чушь собачья. Не нужное никому действо, практически бесполезное в 90% случаев.
Оно конечно, ты хозяин, тебе виднее, возможно, у вас там какая-то специфика.
Просто не расстраивайся, когда оно тебе не поможет.
...
Рейтинг: 0 / 0
Latch sleeping
    #38510225
Фотография komrad
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
MasterZivПерестройка индексов -- это всё чушь собачья. Не нужное никому действо, практически бесполезное в 90% случаев.


я прям даже завидую ;) какая легкая жизнь без забот
...
Рейтинг: 0 / 0
Latch sleeping
    #38510545
moris
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
MasterZivПерестройка индексов -- это всё чушь собачья. Не нужное никому действо, практически бесполезное в 90% случаев.


Я бы не был бы так голословным. Поможет не поможет, зависит от степени фрагментации индексов, т.е. насколько уменьшится их размер, и будут ли они потом попадать в кеши.
...
Рейтинг: 0 / 0
Latch sleeping
    #38510562
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
morisMasterZivПерестройка индексов -- это всё чушь собачья. Не нужное никому действо, практически бесполезное в 90% случаев.


Я бы не был бы так голословным. Поможет не поможет, зависит от степени фрагментации индексов, т.е. насколько уменьшится их размер, и будут ли они потом попадать в кеши.

Ну что, ну сколько у них там фрагментация ? Ну, 20%, ну 40.
Ну, поглядим-увидим...
...
Рейтинг: 0 / 0
Latch sleeping
    #38511048
Сергей08
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Добрый день .
По поводу индексов.
Один индекс недоребилдили (ночи не хватило) и его размер уже уменьшился с 32g до 18.
Второй прошёл ребилд и размер с 9gb уменьшился до 2 gb. Надеюсь что это были (есть?)
латчи на OAM страницы и переестройка должна помочь в результате.
...
Рейтинг: 0 / 0
Latch sleeping
    #38520869
Mikle83
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
TC - как успехи борьбы с latch? Эффект есть от предпринятых действий?
...
Рейтинг: 0 / 0
25 сообщений из 26, страница 1 из 2
Форумы / Sybase ASA, ASE, IQ [игнор отключен] [закрыт для гостей] / Latch sleeping
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]