[Sat Jan 10 03:30:09 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3876340]: 1 @fd[3393992]: 1 @fd[3876351]: 1 @fd[3451452]: 1 @fd[3451458]: 2 @fd[3876353]: 3 @fd[3876361]: 3 @fd[3876272]: 3 @fd[3876344]: 3 @fd[3876338]: 3 @fd[3876371]: 3 @fd[3876347]: 3 @fd[3876285]: 5 @fd[1310169]: 6 @fd[3876334]: 6 @fd[3876332]: 6 @fd[3876354]: 6 @fd[3876367]: 6 @fd[2320334]: 7 @fd[1645434]: 8 @fd[3464235]: 8 @fd[1645427]: 8 @fd[1769795]: 9 @fd[3454199]: 10 @fd[3454142]: 10 @fd[1645696]: 30 @fd[1310167]: 30 @latency[150]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[101]: [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[99]: [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[89]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[80]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[62]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[45]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[46]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[59]: [0] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[29]: [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[114]: [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@@@@@@@@@@@@@@@@ | @latency[90]: [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 0 | | [32, 64) 1 |@@@@@@@@@@@@@@@@@ | @latency[149]: [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@@@@@@@@@@@@@@@@@ | @latency[72]: [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 0 | | [16, 32) 1 |@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@@@@ | @latency[126]: [2, 4) 1 |@@@@@@@ | [4, 8) 1 |@@@@@@@ | [8, 16) 1 |@@@@@@@ | [16, 32) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2 |@@@@@@@@@@@@@@ | @latency[32]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 0 | | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@ | [8, 16) 1 |@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@ | @latency[63]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 0 | | [4, 8) 2 |@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 1 |@@@@@@@ | @latency[54]: [1] 3 |@@@@@@@@@@@@@@ | [2, 4) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 2 |@@@@@@@@@ | [16, 32) 0 | | [32, 64) 2 |@@@@@@@@@ | [64, 128) 0 | | [128, 256) 1 |@@@@ | @latency[137]: [4, 8) 3 |@@@@@@@@@@@@ | [8, 16) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@ | @latency[68]: [0] 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@ | [4, 8) 1 |@@@@@ | [8, 16) 2 |@@@@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 0 | | [64, 128) 2 |@@@@@@@@@@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@@@ | @latency[138]: [1] 2 |@@@@@@ | [2, 4) 3 |@@@@@@@@@ | [4, 8) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 8 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@ | @latency[60]: [1] 5 |@@@@@@@@@@@@@@@@@ | [2, 4) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@ | @latency[34]: [1] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 4 |@@@@@@@@@@@@@ | [64, 128) 1 |@@@ | @latency[42]: [1] 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@ | [32, 64) 4 |@@@@@@@@@@ | @latency[56]: [0] 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 35 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 11 |@@@@@@@@@@@@@@@@ | [16, 32) 11 |@@@@@@@@@@@@@@@@ | [32, 64) 3 |@@@@ | [64, 128) 3 |@@@@ | @latency[53]: [0] 69 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 18 |@@@@@@@@@@@@@ | [2, 4) 19 |@@@@@@@@@@@@@@ | [4, 8) 7 |@@@@@ | [8, 16) 12 |@@@@@@@@@ | [16, 32) 2 |@ | @latency[58]: [1] 5 |@@@@@@ | [2, 4) 9 |@@@@@@@@@@@ | [4, 8) 40 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 38 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 7 |@@@@@@@@@ | [64, 128) 1 |@ | @latency[43]: [0] 3 |@@ | [1] 18 |@@@@@@@@@@@@@ | [2, 4) 70 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 24 |@@@@@@@@@@@@@@@@@ | [8, 16) 15 |@@@@@@@@@@@ | [16, 32) 6 |@@@@ | [32, 64) 10 |@@@@@@@ | [64, 128) 2 |@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 3 |@@ | @latency[65]: [0] 100 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 23 |@@@@@@@@@@@ | [2, 4) 12 |@@@@@@ | [4, 8) 4 |@@ | [8, 16) 2 |@ | [16, 32) 8 |@@@@ | [32, 64) 2 |@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 3 |@ | [32K, 64K) 5 |@@ | @latency[44]: [1] 11 |@@@@@@ | [2, 4) 83 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 80 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 29 |@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@ | [32, 64) 5 |@@@ | [64, 128) 2 |@ | [128, 256) 2 |@ | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[55]: [0] 2 |@ | [1] 41 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 104 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 48 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 27 |@@@@@@@@@@@@@ | [16, 32) 8 |@@@@ | [32, 64) 1 | | [64, 128) 1 | | [128, 256) 2 |@ | @latency[27]: [0] 10 |@@@@@@@@ | [1] 11 |@@@@@@@@ | [2, 4) 64 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 30 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 36 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 20 |@@@@@@@@@@@@@@@@ | [64, 128) 11 |@@@@@@@@ | [128, 256) 12 |@@@@@@@@@ | [256, 512) 4 |@@@ | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 1 | | @latency[18]: [0] 7 |@@@@ | [1] 50 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 73 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 33 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 38 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 37 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 15 |@@@@@@@@@@ | [64, 128) 2 |@ | [128, 256) 2 |@ | @latency[48]: [0] 34 |@@@@@@@@@@@@@@@@@@@@@ | [1] 32 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 18 |@@@@@@@@@@@ | [4, 8) 61 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 81 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13 |@@@@@@@@ | [32, 64) 13 |@@@@@@@@ | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 3 |@ | [8K, 16K) 7 |@@@@ | @latency[67]: [0] 11 |@@@@ | [1] 45 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 99 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 116 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 9 |@@@@ | [16, 32) 5 |@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | @latency[35]: [0] 10 |@@@@@ | [1] 45 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 89 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 46 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 42 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 3 |@ | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 1 | | @latency[40]: [0] 2 | | [1] 70 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 154 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 76 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 14 |@@@@ | [16, 32) 1 | | [32, 64) 1 | | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 1 | | @latency[21]: [1] 2 | | [2, 4) 94 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 133 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 64 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 31 |@@@@@@@@@@@@ | [32, 64) 14 |@@@@@ | @latency[47]: [1] 232 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 73 |@@@@@@@@@@@@@@@@ | [4, 8) 62 |@@@@@@@@@@@@@ | [8, 16) 11 |@@ | [16, 32) 6 |@ | [32, 64) 4 | | @latency[120]: [0] 2 | | [1] 36 |@@@@@@@@ | [2, 4) 219 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 200 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 20 |@@@@ | [16, 32) 3 | | [32, 64) 1 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 1 | | @latency[36]: [0] 4 |@ | [1] 24 |@@@@@@@@@ | [2, 4) 51 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 130 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 137 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 126 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 14 |@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[123]: [1] 16 |@@@ | [2, 4) 214 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 170 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 77 |@@@@@@@@@@@@@@@@@@ | [16, 32) 10 |@@ | [32, 64) 4 | | [64, 128) 3 | | @latency[37]: [0] 22 |@@@@@@ | [1] 32 |@@@@@@@@@ | [2, 4) 169 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 171 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 119 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 72 |@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 21 |@@@@@@ | [64, 128) 6 |@ | [128, 256) 1 | | @latency[50]: [0] 135 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 187 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 95 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 85 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 100 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 27 |@@@@@@@ | [32, 64) 2 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 5 |@ | [8K, 16K) 2 | | @latency[20]: [0] 25 |@@@ | [1] 103 |@@@@@@@@@@@@@@@ | [2, 4) 67 |@@@@@@@@@@ | [4, 8) 348 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 99 |@@@@@@@@@@@@@@ | [16, 32) 166 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 11 |@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[19]: [0] 36 |@@@@ | [1] 138 |@@@@@@@@@@@@@@@@@ | [2, 4) 412 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 197 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 78 |@@@@@@@@@ | [16, 32) 38 |@@@@ | [32, 64) 16 |@@ | [64, 128) 3 | | [128, 256) 3 | | @latency[70]: [0] 6 | | [1] 180 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 367 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 179 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 160 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 48 |@@@@@@ | [32, 64) 38 |@@@@@ | [64, 128) 8 |@ | [128, 256) 1 | | [256, 512) 1 | | @latency[15]: [0] 161 |@@@@@@@@@@@@@@@@@@@ | [1] 440 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 318 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 86 |@@@@@@@@@@ | [8, 16) 32 |@@@ | [16, 32) 12 |@ | [32, 64) 2 | | @latency[30]: [0] 45 |@@@@@@@@@@ | [1] 206 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 222 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 230 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 136 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 108 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 77 |@@@@@@@@@@@@@@@@@ | [64, 128) 26 |@@@@@ | [128, 256) 18 |@@@@ | [256, 512) 13 |@@ | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 6 |@ | [8K, 16K) 2 | | @latency[22]: [0] 486 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 177 |@@@@@@@@@@@@@@@@@@ | [2, 4) 244 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 184 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 63 |@@@@@@ | [16, 32) 34 |@@@ | [32, 64) 10 |@ | [64, 128) 5 | | @latency[26]: [0] 41 |@@@ | [1] 24 |@@ | [2, 4) 118 |@@@@@@@@@ | [4, 8) 622 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 233 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 399 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 46 |@@@ | @latency[49]: [0] 328 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 295 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 536 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 250 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 203 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 100 |@@@@@@@@@ | [32, 64) 62 |@@@@@@ | [64, 128) 19 |@ | [128, 256) 30 |@@ | [256, 512) 6 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 1 | | [16K, 32K) 2 | | @latency[24]: [0] 26 |@ | [1] 75 |@@@@@ | [2, 4) 199 |@@@@@@@@@@@@@@ | [4, 8) 735 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 327 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 621 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 212 |@@@@@@@@@@@@@@ | [64, 128) 11 | | @latency[25]: [0] 85 |@@@@ | [1] 234 |@@@@@@@@@@@@ | [2, 4) 259 |@@@@@@@@@@@@@ | [4, 8) 969 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 242 |@@@@@@@@@@@@ | [16, 32) 463 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 81 |@@@@ | [64, 128) 1 | | [128, 256) 5 | | @latency[596]: [1] 257 |@@@@@@@@@@@@ | [2, 4) 1050 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 988 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 137 |@@@@@@ | [16, 32) 7 | | [32, 64) 7 | | [64, 128) 1 | | [128, 256) 1 | | [256, 512) 2 | | @latency[16]: [0] 147 |@@@@@@@@@@ | [1] 421 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 703 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 518 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 633 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 44 |@@@ | [32, 64) 4 | | @latency[605]: [1] 688 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 699 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 982 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 97 |@@@@@ | [16, 32) 12 | | [32, 64) 6 | | [64, 128) 7 | | [128, 256) 0 | | [256, 512) 3 | | @latency[33]: [0] 318 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 307 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 356 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 550 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 589 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 320 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 70 |@@@@@@ | [64, 128) 4 | | [128, 256) 0 | | [256, 512) 1 | | @latency[39]: [0] 37 |@ | [1] 443 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 1196 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1164 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 405 |@@@@@@@@@@@@@@@@@ | [16, 32) 73 |@@@ | [32, 64) 12 | | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 2 | | @latency[51]: [0] 70 |@@ | [1] 293 |@@@@@@@@@@@ | [2, 4) 973 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1286 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 730 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 183 |@@@@@@@ | [32, 64) 25 |@ | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | @latency[31]: [0] 60 |@ | [1] 1615 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 501 |@@@@@@@@@@@@@@@@ | [4, 8) 899 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 846 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 757 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 131 |@@@@ | [64, 128) 14 | | [128, 256) 3 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 1 | | @latency[66]: [0] 435 |@@@@@@@@@@@@ | [1] 1818 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 924 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1071 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 553 |@@@@@@@@@@@@@@@ | [16, 32) 63 |@ | [32, 64) 17 | | [64, 128) 2 | | [128, 256) 3 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 2 | | @latency[64]: [0] 1021 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 1567 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 859 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1266 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 810 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 183 |@@@@@@ | [32, 64) 47 |@ | [64, 128) 6 | | [128, 256) 4 | | [256, 512) 1 | | [512, 1K) 1 | | @latency[91]: [1] 385 |@@@@@@@@@@@@ | [2, 4) 1184 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1408 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1572 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 756 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 759 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 63 |@@ | [128, 256) 7 | | [256, 512) 9 | | [512, 1K) 0 | | [1K, 2K) 2 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[13]: [0] 4299 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1034 |@@@@@@@@@@@@ | [2, 4) 532 |@@@@@@ | [4, 8) 273 |@@@ | [8, 16) 117 |@ | [16, 32) 84 |@ | [32, 64) 16 | | [64, 128) 14 | | [128, 256) 2 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 3 | | [16K, 32K) 12 | | [32K, 64K) 3 | | @latency[38]: [0] 1076 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 1073 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 658 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1389 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1178 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 965 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 345 |@@@@@@@@@@@@ | [64, 128) 14 | | [128, 256) 2 | | [256, 512) 1 | | [512, 1K) 2 | | [1K, 2K) 1 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 3 | | @latency[52]: [0] 86 |@@ | [1] 551 |@@@@@@@@@@@@@ | [2, 4) 2148 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2077 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1479 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 357 |@@@@@@@@ | [32, 64) 40 | | [64, 128) 3 | | [128, 256) 0 | | [256, 512) 1 | | [512, 1K) 1 | | @latency[61]: [0] 55 |@ | [1] 500 |@@@@@@@@@@@ | [2, 4) 1686 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2191 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1917 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 730 |@@@@@@@@@@@@@@@@@ | [32, 64) 69 |@ | [64, 128) 4 | | [128, 256) 2 | | [256, 512) 1 | | @latency[41]: [0] 3037 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2301 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1828 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 535 |@@@@@@@@@ | [8, 16) 138 |@@ | [16, 32) 60 |@ | [32, 64) 6 | | [64, 128) 3 | | [128, 256) 5 | | [256, 512) 2 | | @latency[57]: [0] 1 | | [1] 235 |@@@@ | [2, 4) 901 |@@@@@@@@@@@@@@@@@@ | [4, 8) 2543 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1908 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2201 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 724 |@@@@@@@@@@@@@@ | [64, 128) 31 | | [128, 256) 8 | | [256, 512) 1 | | [512, 1K) 1 | | @latency[10]: [0] 2441 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 4180 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 3516 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2773 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1760 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1226 |@@@@@@@@@@@@@@@ | [32, 64) 310 |@@@ | [64, 128) 16 | | [128, 256) 15 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | [32K, 64K) 1 | | @latency[28]: [0] 2 | | [1] 36 | | [2, 4) 129 | | [4, 8) 9445 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5193 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1436 |@@@@@@@ | [32, 64) 5 | | @latency[23]: [0] 1271 |@@@@@@@@@ | [1] 566 |@@@@ | [2, 4) 1135 |@@@@@@@@ | [4, 8) 1669 |@@@@@@@@@@@@@ | [8, 16) 967 |@@@@@@@ | [16, 32) 4420 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 6662 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1053 |@@@@@@@@ | [128, 256) 1 | | @latency[69]: [0] 4644 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 5778 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2900 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3654 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1620 |@@@@@@@@@@@@@@ | [16, 32) 259 |@@ | [32, 64) 25 | | [64, 128) 12 | | [128, 256) 6 | | [256, 512) 6 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 1 | | @latency[74]: [0] 2254 |@@@@@@@@@@@@@@@@@ | [1] 3066 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5909 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6564 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2162 |@@@@@@@@@@@@@@@@@ | [16, 32) 617 |@@@@ | [32, 64) 182 |@ | [64, 128) 16 | | [128, 256) 7 | | [256, 512) 4 | | [512, 1K) 7 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | @latency[17]: [0] 3448 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 5741 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 6440 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5110 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2205 |@@@@@@@@@@@@@@@@@ | [16, 32) 351 |@@ | [32, 64) 15 | | [64, 128) 4 | | @latency[116]: [0] 9 | | [1] 976 |@@@@@ | [2, 4) 4388 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7184 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6961 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 8540 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 3374 |@@@@@@@@@@@@@@@@@@@@ | [64, 128) 87 | | [128, 256) 19 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[7]: [0] 479 |@ | [1] 1273 |@@@ | [2, 4) 18284 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 12727 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3641 |@@@@@@@@@@ | [16, 32) 1228 |@@@ | [32, 64) 340 | | [64, 128) 151 | | [128, 256) 9 | | [256, 512) 3 | | @latency[14]: [0] 876 |@@@@@ | [1] 5149 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7821 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7931 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 8904 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 8519 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 207 |@ | [64, 128) 28 | | [128, 256) 11 | | [256, 512) 2 | | @latency[147]: [0] 1146 |@@@@@@ | [1] 3809 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5350 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7769 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 8596 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 6031 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 6997 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 482 |@@ | [128, 256) 42 | | [256, 512) 25 | | [512, 1K) 7 | | [1K, 2K) 1 | | [2K, 4K) 1 | | [4K, 8K) 5 | | [8K, 16K) 4 | | [16K, 32K) 15 | | @latency[11]: [0] 2961 |@@@ | [1] 7999 |@@@@@@@@@@ | [2, 4) 18585 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6166 |@@@@@@@@ | [8, 16) 38914 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4559 |@@@@@@ | [32, 64) 872 |@ | [64, 128) 320 | | [128, 256) 88 | | [256, 512) 32 | | [512, 1K) 6 | | @latency[12]: [0] 36347 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 14275 |@@@@@@@@@@@@@@@ | [2, 4) 46866 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 24420 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4568 |@@@@@ | [16, 32) 1646 |@ | [32, 64) 217 | | [64, 128) 36 | | [128, 256) 1 | | [256, 512) 2 | | @latency[5]: [0] 2979 |@@ | [1] 22585 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 49554 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 46107 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 54737 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 33016 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 5011 |@@@@ | [64, 128) 1175 |@ | [128, 256) 944 | | [256, 512) 852 | | [512, 1K) 308 | | [1K, 2K) 9 | | [2K, 4K) 6 | | [4K, 8K) 0 | | [8K, 16K) 2 | | [16K, 32K) 1 | | @latency[3]: [0] 109698 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 71590 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 96600 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 25980 |@@@@@@@@@@@@ | [8, 16) 14721 |@@@@@@ | [16, 32) 11528 |@@@@@ | [32, 64) 4663 |@@ | [64, 128) 501 | | [128, 256) 368 | | [256, 512) 132 | | [512, 1K) 29 | | [1K, 2K) 4 | | [2K, 4K) 5 | | [4K, 8K) 3 | | [8K, 16K) 4 | | [16K, 32K) 12 | | @latency[9]: [0] 203792 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 50256 |@@@@@@@@@@@@ | [2, 4) 73915 |@@@@@@@@@@@@@@@@@@ | [4, 8) 66402 |@@@@@@@@@@@@@@@@ | [8, 16) 42774 |@@@@@@@@@@ | [16, 32) 27119 |@@@@@@ | [32, 64) 3561 | | [64, 128) 216 | | [128, 256) 28 | | [256, 512) 6 | | [512, 1K) 12 | | @latency[2]: [0] 1931191 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 162574 |@@@@ | [2, 4) 81523 |@@ | [4, 8) 100469 |@@ | [8, 16) 49977 |@ | [16, 32) 25398 | | [32, 64) 7001 | | [64, 128) 273 | | [128, 256) 64 | | [256, 512) 38 | | [512, 1K) 11 | | [1K, 2K) 2 | | [2K, 4K) 16 | | [4K, 8K) 30 | | [8K, 16K) 45 | | [16K, 32K) 102 | | [32K, 64K) 2 | | @latency[4]: [0] 236936 |@@@@@@@ | [1] 291894 |@@@@@@@@@ | [2, 4) 494418 |@@@@@@@@@@@@@@@@ | [4, 8) 1553284 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 344455 |@@@@@@@@@@@ | [16, 32) 309512 |@@@@@@@@@@ | [32, 64) 120161 |@@@@ | [64, 128) 32272 |@ | [128, 256) 5726 | | [256, 512) 1267 | | [512, 1K) 1408 | | [1K, 2K) 1684 | | [2K, 4K) 49 | | [4K, 8K) 49 | | [8K, 16K) 47 | | [16K, 32K) 126 | | [32K, 64K) 4 | | @latency[6]: [0] 9187 | | [1] 79190 | | [2, 4) 2061533 |@@@@@@@@@@@@@@@@@ | [4, 8) 818817 |@@@@@@ | [8, 16) 6185678 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2952224 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 39827 | | [64, 128) 59603 | | [128, 256) 328 | | [256, 512) 178 | | [512, 1K) 205 | | [1K, 2K) 414 | | [2K, 4K) 43 | | [4K, 8K) 24 | | [8K, 16K) 10 | | [16K, 32K) 1 | | @latency[1]: [0] 3837386 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 6715788 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4749749 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1072608 |@@@@@@@@ | [8, 16) 152025 |@ | [16, 32) 74344 | | [32, 64) 33982 | | [64, 128) 4187 | | [128, 256) 4954 | | [256, 512) 1413 | | [512, 1K) 2391 | | [1K, 2K) 2356 | | [2K, 4K) 191 | | [4K, 8K) 43 | | [8K, 16K) 18 | | [16K, 32K) 8 | | [32K, 64K) 38 | | [64K, 128K) 101 | | @latency[8]: [0] 2176402 |@@@@@@@@@@@@@@@@@@ | [1] 1270843 |@@@@@@@@@@ | [2, 4) 6100398 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5049337 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 800259 |@@@@@@ | [16, 32) 2186329 |@@@@@@@@@@@@@@@@@@ | [32, 64) 32741 | | [64, 128) 12056 | | [128, 256) 2916 | | [256, 512) 1540 | | [512, 1K) 208 | | [1K, 2K) 13 | | [2K, 4K) 9 | | [4K, 8K) 10 | | [8K, 16K) 17 | | [16K, 32K) 16 | | [32K, 64K) 4 | | @start[3876272]: 70547981226966686 @start[3393992]: 70547981227119867 @start[3454142]: 70547981227637490 @start[3876285]: 70547981227753381 @start[3464235]: 70547981228365967 @start[3454199]: 70547981228969516 @start[1645427]: 70547981229140988 @start[2320334]: 70547981229249554 @start[1645434]: 70547981229293632 @start[3451458]: 70547981231797040 @start[3451452]: 70547981231832818 @start[1769795]: 70547981232515678 @start[3876334]: 70547981243276770 @start[3876332]: 70547981244342973 @start[3876338]: 70547981247013648 @start[3876340]: 70547981248960688 @start[3876354]: 70547981267936189 @start[3876344]: 70547981273634016 @start[3876353]: 70547981274210107 @start[1310169]: 70547981274375814 @start[3876347]: 70547981274573246 @start[1310167]: 70547981274702109 @start[3876351]: 70547981274900155 @start[3876367]: 70547981292144059 @start[3876371]: 70547981295909943 @start[1645696]: 70547981296030438 @start[3876361]: 70547981296137432 [Sat Jan 10 04:36:22 UTC 2026] respawn: 0: stopped pid 24 with status 0 [Sat Jan 10 04:36:22 UTC 2026] respawn: sleeping 1 seconds... [Sat Jan 10 04:36:24 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3878601]: 1 @fd[3878569]: 1 @fd[3451452]: 1 @fd[1767926]: 1 @fd[3645842]: 1 @fd[3878589]: 1 @fd[3451458]: 2 @fd[2831088]: 2 @fd[1648380]: 2 @fd[3878592]: 3 @fd[3878517]: 3 @fd[3878599]: 3 @fd[3878564]: 3 @fd[3878578]: 5 @fd[3878514]: 5 @fd[3878587]: 6 @fd[3878582]: 6 @fd[3878561]: 6 @fd[3878577]: 6 @fd[1645432]: 8 @fd[1645429]: 8 @fd[1645430]: 8 @fd[1769795]: 9 @fd[3876889]: 10 @fd[3876887]: 10 @fd[1649440]: 19 @fd[1310169]: 22 @fd[1645781]: 22 @fd[3123231]: 24 @fd[3870072]: 27 @fd[1645488]: 30 @fd[2320334]: 30 @latency[26]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[84]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[59]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[46]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[31]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[21]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[12]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[50]: [0] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 0 | | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[13]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 0 | | [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[17]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 0 | | [16, 32) 0 | | [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[49]: [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@@@@@@@@ | @latency[29]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 0 | | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@ | @latency[30]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 0 | | [16, 32) 0 | | [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[83]: [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[67]: [1] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[72]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 0 | | [8, 16) 1 |@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@ | [32, 64) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[28]: [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@ | @latency[71]: [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[27]: [0] 1 |@@@@@@@@@@@@@@@@@ | [1] 0 | | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[19]: [2, 4) 2 |@@@@@@@@@@@ | [4, 8) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@ | @latency[22]: [1] 1 |@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@ | @latency[23]: [1] 2 |@@@@@@@@@@@ | [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 1 |@@@@@ | [32, 64) 1 |@@@@@ | @latency[56]: [0] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 1 |@@@@@@@@ | @latency[63]: [0] 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 4 |@@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@ | [4, 8) 0 | | [8, 16) 0 | | [16, 32) 1 |@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@@ | @latency[61]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2 |@@@@@@@@@@@@@ | [4, 8) 0 | | [8, 16) 1 |@@@@@@ | [16, 32) 1 |@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@@@@ | @latency[25]: [0] 2 |@@@@@@@ | [1] 2 |@@@@@@@ | [2, 4) 1 |@@@ | [4, 8) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 0 | | [16, 32) 1 |@@@ | @latency[45]: [0] 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 3 |@@@@@@@@@ | [2, 4) 0 | | [4, 8) 1 |@@@ | [8, 16) 1 |@@@ | [16, 32) 1 |@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 1 |@@@ | @latency[82]: [1] 2 |@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[60]: [1] 2 |@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[24]: [1] 2 |@@@@@@ | [2, 4) 2 |@@@@@@ | [4, 8) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@ | [16, 32) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 3 |@@@@@@@@@ | @latency[20]: [0] 2 |@@@@@ | [1] 6 |@@@@@@@@@@@@@@@@@ | [2, 4) 0 | | [4, 8) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 0 | | [16, 32) 6 |@@@@@@@@@@@@@@@@@ | [32, 64) 3 |@@@@@@@@ | @latency[7]: [0] 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 10 |@@@@@@@@@@@@@@@@@ | [2, 4) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@ | @latency[10]: [0] 1 | | [1] 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 78 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 49 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 20 |@@@@@@@@@@@@@ | [16, 32) 19 |@@@@@@@@@@@@ | @latency[3]: [0] 40 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 62 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 21 |@@@@@@@@@@@@@@@ | [4, 8) 71 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 14 |@@@@@@@@@@ | [16, 32) 23 |@@@@@@@@@@@@@@@@ | [32, 64) 7 |@@@@@ | [64, 128) 2 |@ | @latency[14]: [0] 1 | | [1] 21 |@@@@@@@@@ | [2, 4) 81 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 71 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 120 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 83 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 4 |@ | @latency[54]: [1] 5 |@ | [2, 4) 34 |@@@@@@@@@@@@ | [4, 8) 84 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 65 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 145 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 61 |@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 1 | | @latency[81]: [0] 75 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 86 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 43 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 115 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 81 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 98 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 98 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 7 |@@@ | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 3 |@ | [8K, 16K) 1 | | [16K, 32K) 8 |@@@ | @latency[5]: [0] 19 |@@@@ | [1] 90 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 126 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 229 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 54 |@@@@@@@@@@@@ | [16, 32) 185 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 27 |@@@@@@ | [64, 128) 6 |@ | [128, 256) 1 | | [256, 512) 2 | | [512, 1K) 1 | | @latency[2]: [0] 632 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 285 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 90 |@@@@@@@ | [4, 8) 267 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 52 |@@@@ | [16, 32) 39 |@@@ | [32, 64) 24 |@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 1 | | @latency[11]: [0] 1721 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 106 |@@@ | [2, 4) 364 |@@@@@@@@@@ | [4, 8) 26 | | [8, 16) 13 | | [16, 32) 6 | | [32, 64) 7 | | [64, 128) 1 | | @latency[9]: [0] 492 |@@@@@@@@ | [1] 1697 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2959 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 975 |@@@@@@@@@@@@@@@@@ | [8, 16) 874 |@@@@@@@@@@@@@@@ | [16, 32) 671 |@@@@@@@@@@@ | [32, 64) 148 |@@ | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[6]: [0] 161 | | [1] 1521 |@@@@@@ | [2, 4) 12964 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1393 |@@@@@ | [8, 16) 4343 |@@@@@@@@@@@@@@@@@ | [16, 32) 445 |@ | [32, 64) 40 | | [64, 128) 72 | | [128, 256) 1 | | [256, 512) 7 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 7 | | @latency[8]: [0] 11194 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1367 |@@@@@@ | [2, 4) 8291 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 388 |@ | [8, 16) 510 |@@ | [16, 32) 91 | | [32, 64) 79 | | [64, 128) 4 | | [128, 256) 5 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 2 | | [16K, 32K) 2 | | @latency[1]: [0] 17300 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 8467 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5440 |@@@@@@@@@@@@@@@@ | [4, 8) 946 |@@ | [8, 16) 937 |@@ | [16, 32) 1107 |@@@ | [32, 64) 57 | | [64, 128) 40 | | [128, 256) 2 | | [256, 512) 7 | | @latency[4]: [0] 15979 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 11433 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7748 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4365 |@@@@@@@@@@@@@@ | [8, 16) 952 |@@@ | [16, 32) 1628 |@@@@@ | [32, 64) 423 |@ | [64, 128) 672 |@@ | [128, 256) 184 | | [256, 512) 5 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 1 | | [4K, 8K) 3 | | [8K, 16K) 1 | | [16K, 32K) 1 | | @start[3123231]: 70548083158729712 @start[3878517]: 70548083158804854 @start[1767926]: 70548083158815993 @start[3878514]: 70548083159024386 @start[3878561]: 70548083159227758 @start[1645429]: 70548083159272099 @start[3876887]: 70548083159358891 @start[3876889]: 70548083159835643 @start[3451458]: 70548083159865526 @start[3451452]: 70548083159893369 @start[1645430]: 70548083160035740 @start[1645432]: 70548083160195179 @start[3878564]: 70548083161096610 @start[3878569]: 70548083161990955 @start[3878578]: 70548083172594118 @start[3878577]: 70548083176568627 @start[2320334]: 70548083177580763 @start[3878587]: 70548083177765874 @start[3878582]: 70548083178038868 @start[3878589]: 70548083178349200 @start[3878599]: 70548083197769203 @start[1645488]: 70548083197933270 @start[3878592]: 70548083198086318 @start[3878601]: 70548083214582186 @start[1645781]: 70548083215859720 @start[1648380]: 70548083216217262 @start[1649440]: 70548083216222370 @start[1310169]: 70548083216274176 @start[3870072]: 70548083216280622 @start[2831088]: 70548083216281305 @start[3645842]: 70548083231769295 @start[1769795]: 70548083232152381 [Sat Jan 10 04:38:04 UTC 2026] respawn: 0: stopped pid 24 with status 0 [Sat Jan 10 04:38:04 UTC 2026] respawn: sleeping 1 seconds... [Sat Jan 10 04:38:06 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3902078]: 1 @fd[3451452]: 1 @fd[1832618]: 1 @fd[3902099]: 1 @fd[1648380]: 2 @fd[1648330]: 2 @fd[3451458]: 2 @fd[3902092]: 3 @fd[3902013]: 3 @fd[3902082]: 5 @fd[3902016]: 5 @fd[3902080]: 5 @fd[1645429]: 5 @fd[3902083]: 5 @fd[1310166]: 6 @fd[3902086]: 6 @fd[3902084]: 6 @fd[3902091]: 6 @fd[3902087]: 6 @fd[1645445]: 7 @fd[3464235]: 8 @fd[1645432]: 8 @fd[1769795]: 9 @fd[3879158]: 10 @fd[3879164]: 10 @fd[1649440]: 19 @fd[1650644]: 22 @fd[3198756]: 27 @fd[1645488]: 30 @latency[94]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[87]: [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[103]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 0 | | [8, 16) 0 | | [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[29]: [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[34]: [8, 16) 1 |@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[61]: [1] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[48]: [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[33]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[93]: [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[82]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[81]: [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@ | @latency[55]: [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[41]: [4, 8) 1 |@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@@@@@@@@@@@@@ | @latency[32]: [1] 1 |@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[102]: [4, 8) 2 |@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2 |@@@@@@@@@@@ | @latency[64]: [0] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 0 | | [2, 4) 2 |@@@@@@ | [4, 8) 0 | | [8, 16) 0 | | [16, 32) 1 |@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@ | @latency[63]: [0] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@ | [2, 4) 1 |@@@ | [4, 8) 0 | | [8, 16) 0 | | [16, 32) 1 |@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@ | @latency[80]: [2, 4) 2 |@@@@@@@@@@@@@ | [4, 8) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[37]: [1] 3 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@ | @latency[92]: [0] 1 |@@@@@ | [1] 1 |@@@@@ | [2, 4) 2 |@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@ | @latency[88]: [1] 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@ | @latency[100]: [1] 3 |@@@@@@@@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 |@@@@@@@@@ | [8K, 16K) 1 |@@@@ | @latency[36]: [1] 3 |@@@@@@@@@@@@@ | [2, 4) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@ | @latency[19]: [0] 3 |@@@@@@ | [1] 6 |@@@@@@@@@@@@@ | [2, 4) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@ | [16, 32) 2 |@@@@ | @latency[27]: [0] 5 |@@@@@@@@@@@@@ | [1] 4 |@@@@@@@@@@ | [2, 4) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@ | [8, 16) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@ | @latency[46]: [0] 2 |@@@@ | [1] 25 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 6 |@@@@@@@@@@@@ | [4, 8) 10 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@ | [16, 32) 4 |@@@@@@@@ | [32, 64) 8 |@@@@@@@@@@@@@@@@ | [64, 128) 3 |@@@@@@ | [128, 256) 0 | | [256, 512) 1 |@@ | @latency[60]: [0] 3 |@@@@@@ | [1] 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 10 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@ | [16, 32) 2 |@@@@ | [32, 64) 3 |@@@@@@ | @latency[65]: [0] 44 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 17 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7 |@@@@@@@@ | [4, 8) 0 | | [8, 16) 0 | | [16, 32) 4 |@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@ | [32K, 64K) 2 |@@ | @latency[52]: [1] 6 |@@@@@@@@@ | [2, 4) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 12 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[22]: [1] 3 |@@@@ | [2, 4) 9 |@@@@@@@@@@@@@ | [4, 8) 36 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 16 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[20]: [0] 6 |@@@@ | [1] 17 |@@@@@@@@@@@@@ | [2, 4) 3 |@@ | [4, 8) 65 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6 |@@@@ | [16, 32) 24 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 4 |@@@ | @latency[56]: [0] 7 |@@@@@@@@@@@ | [1] 9 |@@@@@@@@@@@@@@@ | [2, 4) 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 4 |@@@@@@ | @latency[30]: [0] 5 |@@@@@@ | [1] 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 39 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 17 |@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 8 |@@@@@@@@@@ | @latency[17]: [0] 11 |@@@@@@@@@@@@ | [1] 6 |@@@@@@ | [2, 4) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 15 |@@@@@@@@@@@@@@@@ | [8, 16) 47 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 46 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@ | [64, 128) 1 |@ | @latency[43]: [2, 4) 141 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 18 |@@@@@@ | [8, 16) 10 |@@@ | [16, 32) 1 | | [32, 64) 11 |@@@@ | [64, 128) 4 |@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 2 | | [16K, 32K) 3 |@ | @latency[101]: [0] 14 |@@@@@@@@@@@ | [1] 26 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 40 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 66 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 53 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6 |@@@@ | [32, 64) 4 |@@@ | [64, 128) 0 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 6 |@@@@ | @latency[78]: [0] 4 |@@ | [1] 12 |@@@@@@@@ | [2, 4) 11 |@@@@@@@ | [4, 8) 73 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 21 |@@@@@@@@@@@@@@ | [16, 32) 31 |@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 62 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 3 |@@ | @latency[77]: [0] 10 |@@@@@@ | [1] 5 |@@@ | [2, 4) 12 |@@@@@@@ | [4, 8) 83 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 58 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 41 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 8 |@@@@@ | [64, 128) 1 | | @latency[50]: [0] 143 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 74 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 49 |@@@@@@@@@@@@@@@@@ | [4, 8) 18 |@@@@@@ | [8, 16) 17 |@@@@@@ | [16, 32) 8 |@@ | [32, 64) 1 | | @latency[21]: [0] 16 |@@@@@@ | [1] 15 |@@@@@ | [2, 4) 55 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 138 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 82 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@ | [32, 64) 3 |@ | @latency[15]: [1] 65 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 159 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 73 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 9 |@@ | [16, 32) 15 |@@@@ | @latency[59]: [1] 20 |@@@@@@@@ | [2, 4) 31 |@@@@@@@@@@@@ | [4, 8) 67 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 106 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 130 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 13 |@@@@@ | [64, 128) 1 | | @latency[99]: [0] 92 |@@@@@@@@@@@@@@@@@@@@@@@ | [1] 98 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 36 |@@@@@@@@@ | [4, 8) 111 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 207 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 26 |@@@@@@ | [32, 64) 9 |@@ | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 7 |@ | [8K, 16K) 1 | | [16K, 32K) 1 | | @latency[45]: [0] 5 |@ | [1] 21 |@@@@@ | [2, 4) 55 |@@@@@@@@@@@@@ | [4, 8) 209 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 165 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 87 |@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 42 |@@@@@@@@@@ | [64, 128) 6 |@ | [128, 256) 1 | | @latency[26]: [0] 23 |@@ | [1] 16 |@ | [2, 4) 398 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 313 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 168 |@@@@@@@@@@@@@@@@ | [16, 32) 530 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[25]: [0] 15 |@ | [1] 27 |@@ | [2, 4) 372 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 405 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 168 |@@@@@@@@@@@@@@@@ | [16, 32) 534 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 | | @latency[24]: [0] 6 | | [1] 21 |@ | [2, 4) 289 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 446 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 126 |@@@@@@@@@@ | [16, 32) 649 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 63 |@@@@@ | [64, 128) 2 | | @latency[31]: [1] 1776 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 93 |@@ | [4, 8) 7 | | [8, 16) 4 | | [16, 32) 7 | | [32, 64) 3 | | [64, 128) 4 | | [128, 256) 1 | | @latency[13]: [0] 266 |@@@@@@@@@@@@ | [1] 1144 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 855 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 461 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 127 |@@@@@ | [16, 32) 113 |@@@@@ | [32, 64) 1 | | [64, 128) 5 | | [128, 256) 1 | | @latency[10]: [0] 448 |@@@@@@@@ | [1] 2717 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2297 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1893 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 595 |@@@@@@@@@@@ | [16, 32) 474 |@@@@@@@@@ | [32, 64) 13 | | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | @latency[23]: [0] 2 | | [1] 28 | | [2, 4) 969 |@@@@@@@@ | [4, 8) 977 |@@@@@@@@ | [8, 16) 1821 |@@@@@@@@@@@@@@@ | [16, 32) 4081 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 6285 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 122 |@ | @latency[11]: [0] 2988 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 3700 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 4320 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2858 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 707 |@@@@@@@@ | [16, 32) 280 |@@@ | [32, 64) 18 | | [64, 128) 20 | | [128, 256) 9 | | @latency[28]: [0] 8 | | [1] 105 | | [2, 4) 222 |@ | [4, 8) 10418 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3596 |@@@@@@@@@@@@@@@@@ | [16, 32) 1278 |@@@@@@ | [32, 64) 9 | | @latency[58]: [0] 11 | | [1] 1209 |@@@@@@@ | [2, 4) 3927 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7497 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6299 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 7958 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1775 |@@@@@@@@@@@ | [64, 128) 51 | | [128, 256) 19 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | @latency[14]: [0] 1158 |@@@@@@@ | [1] 4628 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 6332 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6700 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 8595 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 3285 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 69 | | [64, 128) 12 | | [128, 256) 7 | | [256, 512) 1 | | @latency[7]: [0] 545 |@ | [1] 477 |@ | [2, 4) 14967 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 13430 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2816 |@@@@@@@@@ | [16, 32) 1329 |@@@@ | [32, 64) 303 |@ | [64, 128) 87 | | [128, 256) 35 | | [256, 512) 7 | | [512, 1K) 1 | | [1K, 2K) 1 | | [2K, 4K) 0 | | [4K, 8K) 1 | | @latency[89]: [0] 1073 |@@@@@@ | [1] 4306 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 4799 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8772 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6862 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6531 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 4526 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 352 |@@ | [128, 256) 37 | | [256, 512) 33 | | [512, 1K) 5 | | [1K, 2K) 3 | | [2K, 4K) 1 | | [4K, 8K) 4 | | [8K, 16K) 4 | | [16K, 32K) 7 | | @latency[3]: [0] 6338 |@@@@@@@@@@@@@@@@@@@@@ | [1] 15572 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 6773 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8913 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4218 |@@@@@@@@@@@@@@ | [16, 32) 9650 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2272 |@@@@@@@ | [64, 128) 590 |@ | [128, 256) 315 |@ | [256, 512) 4 | | [512, 1K) 3 | | [1K, 2K) 1 | | [2K, 4K) 1 | | [4K, 8K) 5 | | [8K, 16K) 8 | | [16K, 32K) 6 | | @latency[12]: [0] 26164 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 10044 |@@@@@@@@@@@@@ | [2, 4) 38537 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 25246 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5036 |@@@@@@ | [16, 32) 1326 |@ | [32, 64) 183 | | [64, 128) 4 | | [128, 256) 0 | | [256, 512) 1 | | @latency[5]: [0] 8845 |@@@@@@@ | [1] 7574 |@@@@@@ | [2, 4) 10284 |@@@@@@@@@ | [4, 8) 14436 |@@@@@@@@@@@@@ | [8, 16) 57664 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9757 |@@@@@@@@ | [32, 64) 1004 | | [64, 128) 259 | | [128, 256) 30 | | [256, 512) 18 | | [512, 1K) 1 | | [1K, 2K) 1 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 2 | | [16K, 32K) 3 | | @latency[9]: [0] 17583 |@@@@@@@@@@@@@ | [1] 22254 |@@@@@@@@@@@@@@@@ | [2, 4) 69467 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 45171 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 38869 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 23832 |@@@@@@@@@@@@@@@@@ | [32, 64) 2965 |@@ | [64, 128) 106 | | [128, 256) 19 | | [256, 512) 7 | | [512, 1K) 2 | | [1K, 2K) 1 | | @latency[2]: [0] 52508 |@@@@@@@@@@@@@@@@@@@@@@@ | [1] 79096 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 41534 |@@@@@@@@@@@@@@@@@@ | [4, 8) 116880 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 20732 |@@@@@@@@@ | [16, 32) 18752 |@@@@@@@@ | [32, 64) 3822 |@ | [64, 128) 187 | | [128, 256) 35 | | [256, 512) 26 | | [512, 1K) 12 | | [1K, 2K) 8 | | [2K, 4K) 9 | | [4K, 8K) 47 | | [8K, 16K) 77 | | [16K, 32K) 108 | | [32K, 64K) 4 | | [64K, 128K) 1 | | @latency[4]: [0] 149315 |@@@@@@ | [1] 107367 |@@@@ | [2, 4) 138203 |@@@@@ | [4, 8) 1222056 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 135127 |@@@@@ | [16, 32) 293494 |@@@@@@@@@@@@ | [32, 64) 59141 |@@ | [64, 128) 30603 |@ | [128, 256) 3998 | | [256, 512) 657 | | [512, 1K) 43 | | [1K, 2K) 5 | | [2K, 4K) 8 | | [4K, 8K) 52 | | [8K, 16K) 58 | | [16K, 32K) 148 | | [32K, 64K) 1 | | @latency[6]: [0] 509 | | [1] 67402 | | [2, 4) 1378505 |@@@@@@@@ | [4, 8) 620127 |@@@ | [8, 16) 8618680 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 351133 |@@ | [32, 64) 14587 | | [64, 128) 139348 | | [128, 256) 230 | | [256, 512) 136 | | [512, 1K) 63 | | [1K, 2K) 99 | | [2K, 4K) 4 | | [4K, 8K) 0 | | [8K, 16K) 2 | | [16K, 32K) 2 | | @latency[1]: [0] 1773869 |@@@@@@@@@@@ | [1] 8217302 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 932811 |@@@@@ | [4, 8) 166128 |@ | [8, 16) 60456 | | [16, 32) 46224 | | [32, 64) 1421 | | [64, 128) 834 | | [128, 256) 481 | | [256, 512) 171 | | [512, 1K) 52 | | [1K, 2K) 97 | | [2K, 4K) 4 | | [4K, 8K) 2 | | [8K, 16K) 2 | | [16K, 32K) 2 | | @latency[8]: [0] 1308569 |@@@@@@@@ | [1] 808085 |@@@@@ | [2, 4) 7967245 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 712523 |@@@@ | [8, 16) 460152 |@@@ | [16, 32) 36755 | | [32, 64) 7530 | | [64, 128) 2483 | | [128, 256) 2357 | | [256, 512) 992 | | [512, 1K) 81 | | [1K, 2K) 23 | | [2K, 4K) 7 | | [4K, 8K) 15 | | [8K, 16K) 19 | | [16K, 32K) 15 | | @start[1645445]: 70551988844731688 @start[3902013]: 70551988844768746 @start[1832618]: 70551988844933248 @start[3902016]: 70551988845404935 @start[3464235]: 70551988846062401 @start[3879164]: 70551988846471493 @start[3879158]: 70551988846903158 @start[1645429]: 70551988847072963 @start[1645432]: 70551988847146689 @start[3451458]: 70551988847492996 @start[3451452]: 70551988847575074 @start[1769795]: 70551988848092975 @start[3902083]: 70551988859525932 @start[3902080]: 70551988860592789 @start[3902082]: 70551988861689432 @start[3902084]: 70551988864436962 @start[1310166]: 70551988864603579 @start[3902087]: 70551988868553736 @start[3902086]: 70551988869488716 @start[3902078]: 70551988871427116 @start[3902091]: 70551988894878742 @start[3902092]: 70551988898407465 @start[1645488]: 70551988910944537 @start[3902099]: 70551988912608028 @start[1648380]: 70551988914573664 @start[1649440]: 70551988914579813 @start[1650644]: 70551988914651910 @start[3198756]: 70551988914653869 @start[1648330]: 70551988914663628 [Sat Jan 10 05:43:09 UTC 2026] respawn: 0: stopped pid 24 with status 0 [Sat Jan 10 05:43:09 UTC 2026] respawn: sleeping 1 seconds... [Sat Jan 10 05:43:10 UTC 2026] respawn: 1: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end.