[Sun Jan 11 01:32:14 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3370398]: 1 @fd[3413852]: 1 @fd[3413848]: 1 @fd[3406415]: 1 @fd[3413854]: 1 @fd[3406566]: 1 @fd[3413850]: 1 @fd[3413853]: 1 @fd[3413851]: 1 @fd[3413167]: 4 @fd[3406584]: 4 @fd[3413168]: 4 @fd[3406560]: 5 @fd[3413837]: 6 @fd[1065788]: 7 @fd[4159998]: 9 @fd[3406739]: 15 @fd[3591810]: 66 @latency[110]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[109]: [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[53]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[48]: [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[27]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[51]: [0] 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 0 | | [2, 4) 1 |@@@@@@@@@@@@@@@@@ | @latency[87]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 0 | | [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[92]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[73]: [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[101]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[41]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[65]: [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@ | @latency[102]: [1] 1 |@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@ | @latency[90]: [2, 4) 1 |@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@ | @latency[99]: [2, 4) 1 |@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@ | @latency[72]: [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[42]: [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@@@@ | [64, 128) 1 |@@@@@@@@@@@@@ | @latency[29]: [0] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 0 | | [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[91]: [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[89]: [1] 2 |@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[32]: [1] 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@ | @latency[35]: [0] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 0 | | [2, 4) 2 |@@@@@@ | [4, 8) 0 | | [8, 16) 2 |@@@@@@ | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@ | @latency[50]: [0] 3 |@@@@@@@@@@@@ | [1] 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 6 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@ | @latency[36]: [0] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@ | [2, 4) 2 |@@@@@@ | [4, 8) 0 | | [8, 16) 1 |@@@ | [16, 32) 0 | | [32, 64) 3 |@@@@@@@@@@ | [64, 128) 5 |@@@@@@@@@@@@@@@@@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@ | @latency[33]: [2, 4) 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 9 |@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@ | [16, 32) 0 | | [32, 64) 2 |@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@ | @latency[37]: [1] 1 |@ | [2, 4) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 6 |@@@@@@@@@@ | [8, 16) 3 |@@@@@ | [16, 32) 0 | | [32, 64) 2 |@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@ | @latency[54]: [1] 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@ | [8, 16) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[64]: [0] 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@ | [8, 16) 1 |@@ | [16, 32) 1 |@@ | @latency[34]: [0] 2 |@@@@@ | [1] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@ | [16, 32) 1 |@@ | [32, 64) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[19]: [0] 8 |@@@@@ | [1] 11 |@@@@@@@@ | [2, 4) 70 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 31 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 13 |@@@@@@@@@ | [16, 32) 6 |@@@@ | @latency[30]: [0] 3 |@ | [1] 12 |@@@@@@@ | [2, 4) 85 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 8 |@@@@ | [16, 32) 16 |@@@@@@@@@ | [32, 64) 1 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[52]: [0] 129 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 70 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 22 |@@@@@@@@ | [4, 8) 14 |@@@@@ | [8, 16) 11 |@@@@ | [16, 32) 0 | | [32, 64) 1 | | @latency[21]: [0] 63 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 8 |@@@@ | [2, 4) 69 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 68 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 92 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9 |@@@@@ | [32, 64) 2 |@ | @latency[13]: [0] 23 |@@@@@@@@@ | [1] 122 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 77 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 49 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 18 |@@@@@@@ | [16, 32) 43 |@@@@@@@@@@@@@@@@@@ | @latency[17]: [1] 2 | | [2, 4) 66 |@@@@@@@@@@ | [4, 8) 29 |@@@@ | [8, 16) 325 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13 |@@ | [32, 64) 1 | | @latency[44]: [2, 4) 1 | | [4, 8) 390 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 136 |@@@@@@@@@@@@@@@@@@ | [16, 32) 24 |@@@ | [32, 64) 21 |@@ | [64, 128) 8 |@ | [128, 256) 2 | | @latency[25]: [0] 28 |@@@@@ | [1] 20 |@@@@ | [2, 4) 49 |@@@@@@@@@ | [4, 8) 260 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 69 |@@@@@@@@@@@@@ | [16, 32) 239 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 22 |@@@@ | @latency[24]: [0] 21 |@@@@ | [1] 16 |@@@ | [2, 4) 84 |@@@@@@@@@@@@@@@@@@ | [4, 8) 189 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 73 |@@@@@@@@@@@@@@@@ | [16, 32) 235 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 74 |@@@@@@@@@@@@@@@@ | [64, 128) 1 | | @latency[31]: [0] 193 |@@@@@@@@@@@@@@@@@@ | [1] 540 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 26 |@@ | [4, 8) 5 | | [8, 16) 3 | | [16, 32) 5 | | [32, 64) 1 | | [64, 128) 1 | | @latency[26]: [0] 391 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 200 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 171 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 268 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 101 |@@@@@@@@@@@@@ | [16, 32) 267 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 11 |@ | [64, 128) 1 | | @latency[18]: [1] 30 |@ | [2, 4) 1082 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 581 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 429 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 81 |@@@ | [32, 64) 1 | | @latency[16]: [1] 29 |@ | [2, 4) 1004 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 652 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 443 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 80 |@@@@ | [32, 64) 3 | | @latency[20]: [0] 9 | | [1] 33 |@ | [2, 4) 1186 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 562 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 372 |@@@@@@@@@@@@@@@@ | [16, 32) 91 |@@@ | [32, 64) 2 | | @latency[10]: [0] 322 |@@@@@@@@@@@ | [1] 1419 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 403 |@@@@@@@@@@@@@@ | [4, 8) 252 |@@@@@@@@@ | [8, 16) 186 |@@@@@@ | [16, 32) 57 |@@ | [32, 64) 3 | | [64, 128) 1 | | @latency[100]: [0] 749 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 391 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 171 |@@@@@@@@@@@ | [4, 8) 565 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 580 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 270 |@@@@@@@@@@@@@@@@@@ | [32, 64) 21 |@ | [64, 128) 1 | | @latency[11]: [0] 613 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 1047 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 738 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 338 |@@@@@@@@@@@@@@@@ | [8, 16) 152 |@@@@@@@ | [16, 32) 5 | | [32, 64) 1 | | @latency[22]: [0] 4 | | [1] 7 | | [2, 4) 28 | | [4, 8) 208 |@@@@@@@ | [8, 16) 317 |@@@@@@@@@@@ | [16, 32) 1413 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1461 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 72 |@@ | @latency[23]: [0] 70 |@ | [1] 21 | | [2, 4) 59 |@ | [4, 8) 119 |@@ | [8, 16) 198 |@@@ | [16, 32) 2604 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2060 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 209 |@@@@ | @latency[28]: [0] 16 | | [1] 371 |@@ | [2, 4) 398 |@@ | [4, 8) 7384 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5392 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 50 | | @latency[38]: [0] 31 | | [1] 21 | | [2, 4) 16 | | [4, 8) 12047 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2145 |@@@@@@@@@ | [16, 32) 339 |@ | [32, 64) 94 | | [64, 128) 16 | | [128, 256) 3 | | [256, 512) 3 | | @latency[39]: [0] 7052 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1503 |@@@@@@@@@@@ | [2, 4) 3851 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2671 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 90 | | [16, 32) 54 | | [32, 64) 13 | | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | [32K, 64K) 0 | | [64K, 128K) 0 | | [128K, 256K) 1 | | [256K, 512K) 0 | | [512K, 1M) 0 | | [1M, 2M) 1 | | @latency[66]: [0] 9 | | [1] 653 |@@@@@@@ | [2, 4) 1690 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 4142 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3727 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4577 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 672 |@@@@@@@ | [64, 128) 18 | | [128, 256) 4 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[97]: [0] 603 |@@@@@@ | [1] 1656 |@@@@@@@@@@@@@@@@@ | [2, 4) 2027 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4788 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3206 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3288 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2998 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 122 |@ | [128, 256) 8 | | [256, 512) 9 | | [512, 1K) 2 | | [1K, 2K) 0 | | [2K, 4K) 1 | | @latency[85]: [2, 4) 1 | | [4, 8) 15108 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4315 |@@@@@@@@@@@@@@ | [16, 32) 682 |@@ | [32, 64) 233 | | [64, 128) 37 | | [128, 256) 2 | | [256, 512) 2 | | @latency[3]: [0] 4339 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 7890 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 3445 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3860 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1732 |@@@@@@@@@@@ | [16, 32) 4357 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 374 |@@ | [64, 128) 9 | | [128, 256) 12 | | [256, 512) 4 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 2 | | [4K, 8K) 2 | | [8K, 16K) 1 | | [16K, 32K) 6 | | [32K, 64K) 0 | | [64K, 128K) 0 | | [128K, 256K) 0 | | [256K, 512K) 1 | | @latency[14]: [1] 15 | | [2, 4) 1634 |@@@ | [4, 8) 1393 |@@@ | [8, 16) 1713 |@@@@ | [16, 32) 21415 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 36 | | [64, 128) 4 | | @latency[86]: [0] 947 |@@ | [1] 562 |@ | [2, 4) 420 |@ | [4, 8) 960 |@@ | [8, 16) 18415 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 8807 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 756 |@@ | [64, 128) 64 | | [128, 256) 4 | | [256, 512) 1 | | @latency[12]: [0] 9172 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 1534 |@@@@ | [2, 4) 18707 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 7758 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1767 |@@@@ | [16, 32) 912 |@@ | [32, 64) 83 | | [64, 128) 5 | | @latency[5]: [0] 1177 |@@ | [1] 3163 |@@@@@@@ | [2, 4) 6807 |@@@@@@@@@@@@@@@@ | [4, 8) 5799 |@@@@@@@@@@@@@@ | [8, 16) 20958 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 5575 |@@@@@@@@@@@@@ | [32, 64) 267 | | [64, 128) 58 | | [128, 256) 15 | | [256, 512) 4 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 | | @latency[7]: [0] 18288 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 5532 |@@@@@@@@@@@@@@@ | [2, 4) 9255 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 5155 |@@@@@@@@@@@@@@ | [8, 16) 2322 |@@@@@@ | [16, 32) 5533 |@@@@@@@@@@@@@@@ | [32, 64) 199 | | [64, 128) 37 | | [128, 256) 9 | | @latency[9]: [0] 5698 |@@@@@@@@@ | [1] 8869 |@@@@@@@@@@@@@@ | [2, 4) 30771 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 17792 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 15044 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 7240 |@@@@@@@@@@@@ | [32, 64) 546 | | [64, 128) 18 | | [128, 256) 3 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[2]: [0] 22102 |@@@@@@@@@@@@@@@@@@@@@ | [1] 32433 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 29438 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 53897 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 16104 |@@@@@@@@@@@@@@@ | [16, 32) 8169 |@@@@@@@ | [32, 64) 1102 |@ | [64, 128) 21 | | [128, 256) 31 | | [256, 512) 12 | | [512, 1K) 2 | | [1K, 2K) 3 | | [2K, 4K) 6 | | [4K, 8K) 19 | | [8K, 16K) 27 | | [16K, 32K) 47 | | [32K, 64K) 1 | | [64K, 128K) 0 | | [128K, 256K) 0 | | [256K, 512K) 1 | | @latency[4]: [0] 64133 |@@@@@@ | [1] 75726 |@@@@@@@ | [2, 4) 341756 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 523047 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 63752 |@@@@@@ | [16, 32) 138168 |@@@@@@@@@@@@@ | [32, 64) 21649 |@@ | [64, 128) 11996 |@ | [128, 256) 908 | | [256, 512) 76 | | [512, 1K) 7 | | [1K, 2K) 3 | | [2K, 4K) 10 | | [4K, 8K) 19 | | [8K, 16K) 21 | | [16K, 32K) 74 | | [32K, 64K) 0 | | [64K, 128K) 0 | | [128K, 256K) 0 | | [256K, 512K) 0 | | [512K, 1M) 1 | | @latency[15]: [0] 368 | | [1] 1801 | | [2, 4) 29448 | | [4, 8) 35578 |@ | [8, 16) 1831115 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 96587 |@@ | [32, 64) 314 | | [64, 128) 9 | | [128, 256) 0 | | [256, 512) 1 | | @latency[6]: [0] 3293 | | [1] 7161 | | [2, 4) 549451 |@@@@@@ | [4, 8) 221552 |@@ | [8, 16) 4201641 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 708744 |@@@@@@@@ | [32, 64) 9238 | | [64, 128) 14780 | | [128, 256) 66 | | [256, 512) 105 | | [512, 1K) 117 | | [1K, 2K) 53 | | [2K, 4K) 2 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[1]: [0] 719892 |@@@@@@@@ | [1] 4630397 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 275976 |@@@ | [4, 8) 86606 | | [8, 16) 28064 | | [16, 32) 15237 | | [32, 64) 7200 | | [64, 128) 1605 | | [128, 256) 673 | | [256, 512) 237 | | [512, 1K) 156 | | [1K, 2K) 80 | | [2K, 4K) 16 | | [4K, 8K) 6 | | [8K, 16K) 3 | | [16K, 32K) 1 | | [32K, 64K) 1 | | @latency[8]: [0] 541746 |@@@@@@ | [1] 276031 |@@@ | [2, 4) 4322927 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 478484 |@@@@@ | [8, 16) 143306 |@ | [16, 32) 16165 | | [32, 64) 1659 | | [64, 128) 1111 | | [128, 256) 1159 | | [256, 512) 208 | | [512, 1K) 17 | | [1K, 2K) 3 | | [2K, 4K) 1 | | [4K, 8K) 5 | | [8K, 16K) 10 | | [16K, 32K) 8 | | [32K, 64K) 0 | | [64K, 128K) 0 | | [128K, 256K) 0 | | [256K, 512K) 0 | | [512K, 1M) 1 | | @start[3413848]: 31327782596835681 @start[3413837]: 31327782596913957 @start[3413167]: 31327782606220053 @start[3413168]: 31327782606483291 @start[3406584]: 31327782606514137 @start[3406566]: 31327782606547280 @start[3413851]: 31327782608232121 @start[3413852]: 31327782608947165 @start[3413853]: 31327782610026771 @start[3413854]: 31327782610319602 @start[3413850]: 31327782610406086 @start[3406739]: 31327782610571835 @start[3406560]: 31327782610607499 @start[3591810]: 31327782610677922 @start[3406415]: 31327782610712140 @start[3370398]: 31327782610732027 @start[4159998]: 31327782611249995 @start[1065788]: 31327782674016081 [Sun Jan 11 02:01:17 UTC 2026] respawn: 0: stopped pid 25 with status 0 [Sun Jan 11 02:01:17 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 02:01:18 UTC 2026] respawn: 1: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 55 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3461006]: 1 @fd[3145744]: 2 @fd[3145690]: 2 @fd[1980382]: 7 @fd[3146531]: 19 @fd[3174273]: 24 @latency[43]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[47]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[87]: [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[65]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[109]: [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[35]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[102]: [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[27]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 0 | | [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[21]: [0] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 0 | | [2, 4) 0 | | [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[32]: [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[101]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[108]: [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 1 |@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@ | @latency[85]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[46]: [1] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[53]: [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@ | @latency[36]: [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 0 | | [128, 256) 1 |@@@@@@@@@@@@@ | @latency[54]: [1] 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[45]: [1] 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[41]: [1] 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@ | @latency[33]: [1] 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@ | @latency[40]: [0] 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@ | [4, 8) 0 | | [8, 16) 1 |@@@ | [16, 32) 1 |@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@ | [32K, 64K) 1 |@@@ | @latency[99]: [2, 4) 2 |@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 5 |@@@@@@@@@@@@@@@@@@@@@ | @latency[29]: [0] 1 |@@ | [1] 4 |@@@@@@@@@@ | [2, 4) 4 |@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@ | [8, 16) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 6 |@@@@@@@@@@@@@@@ | [32, 64) 1 |@@ | @latency[51]: [0] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 6 |@@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@ | @latency[90]: [0] 5 |@@@@@@@@@@@@@@@@@@ | [1] 6 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@ | [32, 64) 4 |@@@@@@@@@@@@@@ | @latency[39]: [1] 11 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 11 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@ | [16, 32) 5 |@@@@@@@@ | [32, 64) 3 |@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@ | @latency[52]: [0] 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@ | [8, 16) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[42]: [1] 1 |@ | [2, 4) 35 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 9 |@@@@@@@@@@@@@ | [8, 16) 13 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 9 |@@@@@@@@@@@@@ | [32, 64) 5 |@@@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 |@ | [16K, 32K) 1 |@ | @latency[50]: [0] 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 38 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 12 |@@@@@@@@@@@@@@@@ | [4, 8) 15 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@ | @latency[70]: [0] 1 | | [1] 72 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 26 |@@@@@@@@@@@@@@@@@@ | [4, 8) 15 |@@@@@@@@@@ | [8, 16) 12 |@@@@@@@@ | [16, 32) 9 |@@@@@@ | [32, 64) 1 | | [64, 128) 0 | | [128, 256) 1 | | @latency[30]: [0] 5 |@@@@@ | [1] 8 |@@@@@@@@ | [2, 4) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 14 |@@@@@@@@@@@@@@ | [32, 64) 3 |@@@ | [64, 128) 1 |@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@ | @latency[22]: [1] 1 | | [2, 4) 17 |@@@@@@@@@@@ | [4, 8) 29 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 15 |@@@@@@@@@@ | [16, 32) 44 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 74 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[100]: [0] 84 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 79 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 28 |@@@@@@@@@@@@@@@@@ | [4, 8) 26 |@@@@@@@@@@@@@@@@ | [8, 16) 9 |@@@@@ | [16, 32) 1 | | @latency[37]: [0] 46 |@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 99 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 29 |@@@@@@@@@@@@@@@ | [8, 16) 12 |@@@@@@ | [16, 32) 4 |@@ | [32, 64) 2 |@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[84]: [0] 86 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 123 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 14 |@@@@@ | [4, 8) 35 |@@@@@@@@@@@@@@ | [8, 16) 77 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 18 |@@@@@@@ | [32, 64) 10 |@@@@ | [64, 128) 1 | | @latency[31]: [0] 293 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 441 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 16 |@ | [4, 8) 2 | | [8, 16) 2 | | [16, 32) 1 | | [32, 64) 2 | | @latency[13]: [0] 5 | | [1] 127 |@@@@@@@@@@@@@@@ | [2, 4) 413 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 210 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 58 |@@@@@@@ | [16, 32) 19 |@@ | [32, 64) 2 | | @latency[25]: [0] 39 |@@@@@ | [1] 36 |@@@@@ | [2, 4) 138 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 348 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 91 |@@@@@@@@@@@@@ | [16, 32) 259 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 3 | | [64, 128) 1 | | @latency[24]: [0] 26 |@@@@ | [1] 20 |@@@ | [2, 4) 173 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 293 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 74 |@@@@@@@@@@@@ | [16, 32) 308 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 72 |@@@@@@@@@@@@ | [64, 128) 2 | | @latency[34]: [0] 26 |@@ | [1] 139 |@@@@@@@@@@@@@ | [2, 4) 268 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 536 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 312 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 289 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 44 |@@@@ | @latency[26]: [0] 274 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 319 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 220 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 346 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 169 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 266 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 19 |@@ | [64, 128) 2 | | @latency[19]: [0] 171 |@@@@@@@@@@ | [1] 284 |@@@@@@@@@@@@@@@@@ | [2, 4) 833 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 516 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 293 |@@@@@@@@@@@@@@@@@@ | [16, 32) 92 |@@@@@ | [32, 64) 1 | | [64, 128) 1 | | @latency[64]: [0] 668 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 574 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 200 |@@@@@@@@@@@@@@@ | [4, 8) 472 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 331 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 210 |@@@@@@@@@@@@@@@@ | [32, 64) 137 |@@@@@@@@@@ | [64, 128) 2 | | [128, 256) 2 | | @latency[28]: [0] 17 | | [1] 119 |@@@@@ | [2, 4) 474 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 917 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1047 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 36 |@ | [32, 64) 1 | | @latency[16]: [1] 66 |@@ | [2, 4) 1508 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 870 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 738 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 36 |@ | [32, 64) 2 | | @latency[20]: [0] 53 |@ | [1] 89 |@@ | [2, 4) 1781 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 831 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 563 |@@@@@@@@@@@@@@@@ | [16, 32) 60 |@ | @latency[18]: [0] 171 |@@@@@ | [1] 185 |@@@@@ | [2, 4) 1693 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 922 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 673 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 46 |@ | [32, 64) 5 | | @latency[10]: [0] 496 |@@@@@@@@@@@ | [1] 2314 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1038 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 501 |@@@@@@@@@@@ | [8, 16) 229 |@@@@@ | [16, 32) 79 |@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 1 | | @latency[23]: [0] 251 |@@@ | [1] 152 |@@ | [2, 4) 347 |@@@@@ | [4, 8) 542 |@@@@@@@ | [8, 16) 384 |@@@@@ | [16, 32) 1093 |@@@@@@@@@@@@@@@ | [32, 64) 3557 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 27 | | [128, 256) 1 | | @latency[17]: [1] 12 | | [2, 4) 312 |@@ | [4, 8) 249 |@@ | [8, 16) 6180 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 26 | | [32, 64) 3 | | @latency[38]: [0] 5345 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1377 |@@@@@@@@@@@@@ | [2, 4) 1822 |@@@@@@@@@@@@@@@@@ | [4, 8) 3420 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 59 | | [16, 32) 13 | | [32, 64) 4 | | [64, 128) 1 | | @latency[66]: [0] 5 | | [1] 766 |@@@@@@@@@ | [2, 4) 2208 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4037 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2585 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3621 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 833 |@@@@@@@@@@ | [64, 128) 26 | | [128, 256) 10 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[97]: [0] 918 |@@@@@@@@@@ | [1] 2362 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3048 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4416 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3645 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2758 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2401 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 143 |@ | [128, 256) 16 | | [256, 512) 11 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 5 | | [8K, 16K) 0 | | [16K, 32K) 6 | | @latency[44]: [0] 2162 |@@@@@@@@ | [1] 857 |@@@ | [2, 4) 1059 |@@@@ | [4, 8) 2193 |@@@@@@@@ | [8, 16) 13748 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9121 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 721 |@@ | [64, 128) 50 | | @latency[7]: [0] 1131 |@@@@@@ | [1] 2753 |@@@@@@@@@@@@@@@ | [2, 4) 9471 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 9312 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2910 |@@@@@@@@@@@@@@@ | [16, 32) 5146 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 258 |@ | [64, 128) 55 | | [128, 256) 4 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[8]: [0] 30460 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 9624 |@@@@@@@@@@@@@@@@ | [2, 4) 4616 |@@@@@@@ | [4, 8) 2235 |@@@ | [8, 16) 643 |@ | [16, 32) 435 | | [32, 64) 18 | | [64, 128) 0 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | @latency[5]: [0] 3824 |@@@@@@ | [1] 4661 |@@@@@@@ | [2, 4) 4899 |@@@@@@@@ | [4, 8) 5207 |@@@@@@@@ | [8, 16) 30431 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 3273 |@@@@@ | [32, 64) 341 | | [64, 128) 84 | | [128, 256) 15 | | [256, 512) 8 | | @latency[3]: [0] 16267 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 16976 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 8347 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7777 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5757 |@@@@@@@@@@@@@@@@@ | [16, 32) 5495 |@@@@@@@@@@@@@@@@ | [32, 64) 632 |@ | [64, 128) 196 | | [128, 256) 93 | | [256, 512) 10 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 | | [8K, 16K) 2 | | [16K, 32K) 3 | | @latency[12]: [0] 15096 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 2473 |@@@@ | [2, 4) 26242 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 15972 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3738 |@@@@@@@ | [16, 32) 547 |@ | [32, 64) 84 | | [64, 128) 12 | | @latency[11]: [0] 48810 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 9244 |@@@@@@@@@ | [2, 4) 8049 |@@@@@@@@ | [4, 8) 4682 |@@@@ | [8, 16) 1242 |@ | [16, 32) 156 | | [32, 64) 13 | | [64, 128) 2 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[2]: [0] 39456 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 46922 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 26856 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 38710 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 8534 |@@@@@@@@@ | [16, 32) 6713 |@@@@@@@ | [32, 64) 1082 |@ | [64, 128) 59 | | [128, 256) 25 | | [256, 512) 9 | | [512, 1K) 6 | | [1K, 2K) 6 | | [2K, 4K) 6 | | [4K, 8K) 33 | | [8K, 16K) 31 | | [16K, 32K) 69 | | @latency[14]: [1] 9 | | [2, 4) 3050 |@ | [4, 8) 3196 |@ | [8, 16) 154781 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 15017 |@@@@@ | [32, 64) 113 | | [64, 128) 3 | | @latency[4]: [0] 81054 |@@@@@@@@@@@ | [1] 62866 |@@@@@@@@ | [2, 4) 267422 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 371508 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 59511 |@@@@@@@@ | [16, 32) 132485 |@@@@@@@@@@@@@@@@@@ | [32, 64) 21318 |@@ | [64, 128) 13017 |@ | [128, 256) 1207 | | [256, 512) 209 | | [512, 1K) 86 | | [1K, 2K) 57 | | [2K, 4K) 6 | | [4K, 8K) 22 | | [8K, 16K) 18 | | [16K, 32K) 71 | | @latency[15]: [0] 530 | | [1] 2568 | | [2, 4) 48621 |@ | [4, 8) 38250 |@ | [8, 16) 1798837 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 46963 |@ | [32, 64) 456 | | [64, 128) 12 | | [128, 256) 2 | | [256, 512) 2 | | @latency[6]: [0] 9524 | | [1] 17874 | | [2, 4) 832210 |@@@@@@@@@ | [4, 8) 359818 |@@@@ | [8, 16) 4479883 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 414631 |@@@@ | [32, 64) 7230 | | [64, 128) 52415 | | [128, 256) 65 | | [256, 512) 21 | | [512, 1K) 21 | | [1K, 2K) 23 | | [2K, 4K) 2 | | [4K, 8K) 1 | | @latency[1]: [0] 1080966 |@@@@@@@@@@@@ | [1] 4658358 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 364081 |@@@@ | [4, 8) 104967 |@ | [8, 16) 32668 | | [16, 32) 14858 | | [32, 64) 4417 | | [64, 128) 1373 | | [128, 256) 539 | | [256, 512) 243 | | [512, 1K) 151 | | [1K, 2K) 51 | | [2K, 4K) 4 | | [4K, 8K) 1 | | [8K, 16K) 8 | | [16K, 32K) 1 | | @latency[9]: [0] 774132 |@@@@@@@@ | [1] 466930 |@@@@@ | [2, 4) 4554207 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 337892 |@@@ | [8, 16) 149683 |@ | [16, 32) 24797 | | [32, 64) 3235 | | [64, 128) 1617 | | [128, 256) 1318 | | [256, 512) 297 | | [512, 1K) 58 | | [1K, 2K) 6 | | [2K, 4K) 4 | | [4K, 8K) 12 | | [8K, 16K) 8 | | [16K, 32K) 18 | | @start[3461006]: 31329972253083858 @start[3145744]: 31329972254763879 @start[3146531]: 31329972254769531 @start[3174273]: 31329972254785811 @start[3145690]: 31329972254795764 @start[1980382]: 31329972289313592 [Sun Jan 11 02:37:46 UTC 2026] respawn: 1: stopped pid 63 with status 0 [Sun Jan 11 02:37:46 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 02:37:48 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3463230]: 1 @fd[3145744]: 2 @fd[2462674]: 2 @fd[3463223]: 5 @fd[3463228]: 5 @fd[3463221]: 6 @fd[3463219]: 6 @fd[3884005]: 7 @fd[3146531]: 19 @fd[262380]: 23 @fd[1957290]: 23 @fd[3591810]: 24 @latency[27]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[36]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[47]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16]: [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[32]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 0 | | [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[82]: [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[30]: [1] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 0 | | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[14]: [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 0 | | [64, 128) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[61]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[81]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[71]: [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[73]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[46]: [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[67]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@ | @latency[33]: [1] 1 |@@@@@@@@@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[21]: [1] 1 |@@@@@@@@ | [2, 4) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[12]: [1] 1 |@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@ | @latency[22]: [1] 2 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@ | @latency[99]: [2, 4) 1 |@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@ | @latency[72]: [1] 1 |@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 1 |@@@@@@@@@@ | @latency[70]: [0] 1 |@@@@@@@@ | [1] 0 | | [2, 4) 0 | | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@ | @latency[29]: [0] 1 |@@@@@@@@@@@@@ | [1] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@@@@ | @latency[50]: [1] 2 |@@@@@@@@@@@@@ | [2, 4) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[80]: [0] 1 |@@@@@@ | [1] 0 | | [2, 4) 2 |@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@ | @latency[17]: [1] 2 |@@@@@@@@@ | [2, 4) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@ | @latency[35]: [0] 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@ | [2, 4) 1 |@@@ | [4, 8) 1 |@@@ | [8, 16) 1 |@@@ | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@ | @latency[37]: [2, 4) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@ | [8, 16) 1 |@@@ | [16, 32) 0 | | [32, 64) 1 |@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@ | @latency[23]: [2, 4) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@ | [32, 64) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[25]: [0] 3 |@@@@@@@@@@@@@ | [1] 2 |@@@@@@@@ | [2, 4) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[26]: [1] 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2 |@@@@@@ | [4, 8) 1 |@@@ | [8, 16) 2 |@@@@@@ | [16, 32) 1 |@@@ | @latency[34]: [0] 4 |@@@@@@@@@@@@@@@@@@ | [1] 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4 |@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 1 |@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@@ | @latency[24]: [0] 1 |@@@@ | [1] 3 |@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@ | [4, 8) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@ | [16, 32) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[13]: [2, 4) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@ | @latency[20]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@ | [1] 5 |@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@ | [4, 8) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@ | [16, 32) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[19]: [0] 6 |@@@@@@@@@@@@@ | [1] 3 |@@@@@@ | [2, 4) 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 10 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@ | @latency[3]: [0] 79 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 11 |@@@@@@@ | [2, 4) 20 |@@@@@@@@@@@@@ | [4, 8) 39 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 19 |@@@@@@@@@@@@ | [16, 32) 11 |@@@@@@@ | [32, 64) 3 |@ | [64, 128) 0 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[10]: [1] 96 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 141 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 56 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 35 |@@@@@@@@@@@@ | [16, 32) 21 |@@@@@@@ | [32, 64) 2 | | @latency[7]: [0] 13 |@@@@ | [1] 20 |@@@@@@ | [2, 4) 53 |@@@@@@@@@@@@@@@@@@ | [4, 8) 67 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 40 |@@@@@@@@@@@@@ | [16, 32) 153 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 16 |@@@@@ | [64, 128) 2 | | [128, 256) 2 | | @latency[48]: [0] 1 | | [1] 10 |@@@@ | [2, 4) 49 |@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 107 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 65 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 120 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 41 |@@@@@@@@@@@@@@@@@ | [64, 128) 0 | | [128, 256) 1 | | [256, 512) 1 | | @latency[31]: [0] 193 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 174 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 17 |@@@@ | [4, 8) 7 |@ | [8, 16) 2 | | [16, 32) 1 | | [32, 64) 2 | | @latency[15]: [0] 13 |@@@@@ | [1] 31 |@@@@@@@@@@@@@ | [2, 4) 97 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 81 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 119 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 59 |@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5]: [0] 42 |@@@@@@@@@@@@@@ | [1] 101 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 119 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 148 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 45 |@@@@@@@@@@@@@@@ | [16, 32) 31 |@@@@@@@@@@ | [32, 64) 25 |@@@@@@@@ | [64, 128) 20 |@@@@@@@ | [128, 256) 1 | | [256, 512) 1 | | @latency[78]: [0] 65 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 117 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 58 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 108 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 88 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 86 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 80 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 2 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 3 |@ | [8K, 16K) 3 |@ | [16K, 32K) 5 |@@ | @latency[2]: [0] 691 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 266 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 127 |@@@@@@@@@ | [4, 8) 226 |@@@@@@@@@@@@@@@@@ | [8, 16) 43 |@@@ | [16, 32) 28 |@@ | [32, 64) 18 |@ | [64, 128) 1 | | @latency[11]: [0] 1348 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 161 |@@@@@@ | [2, 4) 646 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 35 |@ | [8, 16) 59 |@@ | [16, 32) 14 | | [32, 64) 2 | | @latency[9]: [0] 386 |@@@@@@@@@@ | [1] 733 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 1921 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 723 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 1292 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 673 |@@@@@@@@@@@@@@@@@@ | [32, 64) 79 |@@ | [64, 128) 2 | | [128, 256) 2 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[6]: [0] 247 |@ | [1] 1513 |@@@@@@ | [2, 4) 12714 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1629 |@@@@@@ | [8, 16) 4228 |@@@@@@@@@@@@@@@@@ | [16, 32) 225 | | [32, 64) 36 | | [64, 128) 52 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 1 | | [16K, 32K) 3 | | @latency[8]: [0] 11568 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2495 |@@@@@@@@@@@ | [2, 4) 6702 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 682 |@@@ | [8, 16) 282 |@ | [16, 32) 77 | | [32, 64) 68 | | [64, 128) 2 | | [128, 256) 2 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 2 | | @latency[1]: [0] 15896 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 7179 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 6843 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1004 |@@@ | [8, 16) 1336 |@@@@ | [16, 32) 818 |@@ | [32, 64) 40 | | [64, 128) 39 | | [128, 256) 6 | | [256, 512) 2 | | @latency[4]: [0] 17682 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 11936 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7652 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1827 |@@@@@ | [8, 16) 526 |@ | [16, 32) 2039 |@@@@@ | [32, 64) 443 |@ | [64, 128) 988 |@@ | [128, 256) 70 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 | | [8K, 16K) 2 | | [16K, 32K) 2 | | @start[3463228]: 31330071895551570 @start[3463223]: 31330071897675490 @start[3463221]: 31330071901121097 @start[262380]: 31330071901347071 @start[3463219]: 31330071901585306 @start[1957290]: 31330071923296589 @start[3463230]: 31330071924778948 @start[3145744]: 31330071926948933 @start[3146531]: 31330071926953505 @start[3591810]: 31330071926965134 @start[3884005]: 31330071926999999 @start[2462674]: 31330071927025484 [Sun Jan 11 02:39:26 UTC 2026] respawn: 0: stopped pid 26 with status 0 [Sun Jan 11 02:39:26 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 02:39:28 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3370398]: 1 @fd[3464405]: 1 @fd[3661788]: 1 @fd[3464261]: 1 @fd[3658823]: 1 @fd[3644136]: 1 @fd[3661355]: 1 @fd[3660878]: 1 @fd[3660720]: 1 @fd[3658539]: 4 @fd[3658540]: 4 @fd[3661770]: 4 @fd[3464421]: 4 @fd[3464399]: 5 @fd[4159998]: 9 @fd[3660490]: 11 @fd[3464751]: 15 @fd[2057422]: 60 @fd[1957290]: 86 @latency[98]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[38]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[34]: [0] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 0 | | [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[90]: [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 1 |@@@@@@@@@@@@@@@@@ | @latency[79]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[89]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 0 | | [16, 32) 1 |@@@@@@@@@@@@@ | @latency[81]: [1] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[71]: [0] 1 |@@@@@@@@@@@@@ | [1] 0 | | [2, 4) 0 | | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@ | @latency[51]: [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[52]: [1] 2 |@@@@@@@@@ | [2, 4) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@ | @latency[65]: [1] 1 |@@@@@@@@ | [2, 4) 1 |@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[80]: [2, 4) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[78]: [0] 1 |@@@@@@@@ | [1] 0 | | [2, 4) 0 | | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@ | @latency[36]: [0] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@ | [2, 4) 1 |@@@ | [4, 8) 0 | | [8, 16) 1 |@@@ | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@ | @latency[29]: [1] 1 |@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@ | [64, 128) 1 |@@@@@@@@ | [128, 256) 0 | | [256, 512) 1 |@@@@@@@@ | @latency[35]: [1] 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4 |@@@@@@@@@@@@@@@@ | [4, 8) 0 | | [8, 16) 0 | | [16, 32) 2 |@@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@@ | @latency[33]: [0] 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 3 |@@@@@@@@@@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@ | @latency[37]: [1] 4 |@@@@@@@@@@@@@@@@ | [2, 4) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@@@ | [8, 16) 2 |@@@@@@@@ | [16, 32) 1 |@@@@ | [32, 64) 1 |@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 |@@@@ | @latency[42]: [1] 1 |@@@@@ | [2, 4) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 0 | | [32, 64) 1 |@@@@@ | [64, 128) 1 |@@@@@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@@@ | @latency[99]: [1] 1 |@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@ | @latency[48]: [0] 1 |@@@ | [1] 4 |@@@@@@@@@@@@@ | [2, 4) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@ | @latency[30]: [0] 1 |@@@ | [1] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@@@@@@@@@ | [8, 16) 1 |@@@ | [16, 32) 1 |@@@ | [32, 64) 1 |@@@ | [64, 128) 1 |@@@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@ | @latency[50]: [0] 43 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 7 |@@@@@@@@ | [2, 4) 4 |@@@@ | [4, 8) 2 |@@ | @latency[91]: [0] 26 |@@@@@@@@@@@@ | [1] 111 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 15 |@@@@@@@ | [4, 8) 33 |@@@@@@@@@@@@@@@ | [8, 16) 39 |@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@ | [32, 64) 1 | | [64, 128) 1 | | @latency[25]: [0] 25 |@@@@ | [1] 19 |@@@ | [2, 4) 110 |@@@@@@@@@@@@@@@@@@ | [4, 8) 308 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 107 |@@@@@@@@@@@@@@@@@@ | [16, 32) 191 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 5 | | @latency[31]: [0] 305 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 426 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 27 |@@@ | [4, 8) 6 | | [8, 16) 4 | | [16, 32) 3 | | [32, 64) 2 | | [64, 128) 1 | | @latency[24]: [0] 24 |@@@ | [1] 23 |@@@ | [2, 4) 121 |@@@@@@@@@@@@@@@@@@ | [4, 8) 339 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 98 |@@@@@@@@@@@@@@@ | [16, 32) 247 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 5 | | @latency[57]: [0] 738 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 121 |@@@@@@@@ | [2, 4) 31 |@@ | [4, 8) 11 | | [8, 16) 10 | | [16, 32) 4 | | [32, 64) 3 | | [64, 128) 3 | | @latency[53]: [0] 779 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 151 |@@@@@@@@@@ | [2, 4) 42 |@@ | [4, 8) 8 | | [8, 16) 9 | | [16, 32) 2 | | [32, 64) 4 | | [64, 128) 3 | | @latency[74]: [0] 876 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 152 |@@@@@@@@@ | [2, 4) 45 |@@ | [4, 8) 14 | | [8, 16) 7 | | [16, 32) 6 | | [32, 64) 7 | | [64, 128) 2 | | [128, 256) 1 | | @latency[75]: [0] 926 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 152 |@@@@@@@@ | [2, 4) 26 |@ | [4, 8) 14 | | [8, 16) 5 | | [16, 32) 3 | | [32, 64) 2 | | [64, 128) 1 | | @latency[13]: [1] 7 | | [2, 4) 1047 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 101 |@@@@@ | [8, 16) 35 |@ | [16, 32) 45 |@@ | [32, 64) 8 | | @latency[23]: [0] 41 |@@@@@@ | [1] 36 |@@@@@ | [2, 4) 173 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 303 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 215 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 336 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 176 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 18 |@@ | @latency[84]: [0] 984 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 252 |@@@@@@@@@@@@@ | [2, 4) 44 |@@ | [4, 8) 14 | | [8, 16) 10 | | [16, 32) 10 | | [32, 64) 8 | | [64, 128) 3 | | @latency[49]: [0] 1577 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 221 |@@@@@@@ | [2, 4) 36 |@ | [4, 8) 14 | | [8, 16) 11 | | [16, 32) 5 | | [32, 64) 6 | | [64, 128) 2 | | @latency[26]: [0] 17 | | [1] 9 | | [2, 4) 1543 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 269 |@@@@@@@@@ | [8, 16) 117 |@@@ | [16, 32) 56 |@ | [32, 64) 9 | | [64, 128) 7 | | [128, 256) 0 | | [256, 512) 1 | | @latency[88]: [0] 1579 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 365 |@@@@@@@@@@@@ | [2, 4) 88 |@@ | [4, 8) 27 | | [8, 16) 16 | | [16, 32) 8 | | [32, 64) 5 | | [64, 128) 18 | | [128, 256) 2 | | @latency[32]: [0] 22 | | [1] 2261 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 251 |@@@@@ | [4, 8) 178 |@@@@ | [8, 16) 54 |@ | [16, 32) 31 | | [32, 64) 11 | | [64, 128) 22 | | [128, 256) 3 | | @latency[18]: [1] 57 |@ | [2, 4) 1999 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 791 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 411 |@@@@@@@@@@ | [16, 32) 154 |@@@@ | [32, 64) 2 | | @latency[20]: [0] 23 | | [1] 65 |@ | [2, 4) 2153 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 656 |@@@@@@@@@@@@@@@ | [8, 16) 416 |@@@@@@@@@@ | [16, 32) 206 |@@@@ | [32, 64) 4 | | @latency[16]: [1] 47 |@ | [2, 4) 2237 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 887 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 478 |@@@@@@@@@@@ | [16, 32) 233 |@@@@@ | [32, 64) 8 | | @latency[39]: [0] 15 | | [1] 3 | | [2, 4) 1429 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2527 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 58 |@ | [16, 32) 8 | | [32, 64) 13 | | [64, 128) 15 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | @latency[19]: [0] 4 | | [1] 12 | | [2, 4) 739 |@@@@@@@@@@@@@ | [4, 8) 572 |@@@@@@@@@@ | [8, 16) 2785 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 110 |@@ | [32, 64) 1 | | @latency[76]: [0] 3840 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 756 |@@@@@@@@@@ | [2, 4) 144 |@ | [4, 8) 53 | | [8, 16) 32 | | [16, 32) 25 | | [32, 64) 26 | | [64, 128) 10 | | @latency[47]: [0] 1 | | [1] 11 | | [2, 4) 3855 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1645 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 78 |@ | [16, 32) 29 | | [32, 64) 29 | | [64, 128) 17 | | @latency[41]: [0] 1789 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 2886 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1086 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 136 |@@ | [8, 16) 81 |@ | [16, 32) 40 | | [32, 64) 17 | | [64, 128) 19 | | [128, 256) 6 | | [256, 512) 1 | | [512, 1K) 1 | | @latency[17]: [1] 3 | | [2, 4) 1180 |@@@@@@@@@@ | [4, 8) 1064 |@@@@@@@@@ | [8, 16) 5865 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 189 |@ | [32, 64) 6 | | [64, 128) 1 | | @latency[22]: [0] 10 | | [1] 10 | | [2, 4) 95 |@ | [4, 8) 616 |@@@@@@@ | [8, 16) 1655 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4214 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2227 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 211 |@@ | @latency[28]: [0] 188 |@ | [1] 1551 |@@@@@@@@@@@ | [2, 4) 2007 |@@@@@@@@@@@@@@ | [4, 8) 7308 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4445 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 140 | | [32, 64) 1 | | @latency[60]: [0] 17 | | [1] 1043 |@@@@@@@@ | [2, 4) 3240 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6433 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3811 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3797 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 504 |@@@@ | [64, 128) 16 | | [128, 256) 6 | | @latency[100]: [0] 16513 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1805 |@@@@@ | [2, 4) 1375 |@@@@ | [4, 8) 180 | | [8, 16) 28 | | [16, 32) 10 | | [32, 64) 7 | | [64, 128) 7 | | [128, 256) 3 | | [256, 512) 3 | | @latency[86]: [0] 1101 |@@@@@@@@ | [1] 2667 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3596 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6509 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3788 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3638 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1960 |@@@@@@@@@@@@@@@ | [64, 128) 145 |@ | [128, 256) 49 | | [256, 512) 15 | | [512, 1K) 2 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 | | [8K, 16K) 0 | | [16K, 32K) 4 | | @latency[14]: [1] 34 | | [2, 4) 3669 |@@@@@@@@@ | [4, 8) 2091 |@@@@@ | [8, 16) 2231 |@@@@@ | [16, 32) 20863 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 87 | | [64, 128) 5 | | @latency[69]: [1] 30389 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1609 |@@ | [4, 8) 1119 |@ | [8, 16) 53 | | [16, 32) 9 | | [32, 64) 11 | | [64, 128) 8 | | [128, 256) 8 | | [256, 512) 3 | | [512, 1K) 2 | | @latency[7]: [0] 725 |@@ | [1] 530 |@ | [2, 4) 16124 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 10327 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5835 |@@@@@@@@@@@@@@@@@@ | [16, 32) 4489 |@@@@@@@@@@@@@@ | [32, 64) 304 | | [64, 128) 97 | | [128, 256) 28 | | [256, 512) 3 | | [512, 1K) 1 | | @latency[21]: [0] 26984 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 4636 |@@@@@@@@ | [2, 4) 4106 |@@@@@@@ | [4, 8) 1218 |@@ | [8, 16) 4824 |@@@@@@@@@ | [16, 32) 238 | | [32, 64) 21 | | [64, 128) 24 | | [128, 256) 2 | | @latency[40]: [0] 11 | | [1] 38929 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 3979 |@@@@@ | [4, 8) 2202 |@@ | [8, 16) 167 | | [16, 32) 26 | | [32, 64) 14 | | [64, 128) 29 | | [128, 256) 3 | | [256, 512) 1 | | @latency[12]: [0] 13378 |@@@@@@@@@@@@@@@@@@@@@ | [1] 4059 |@@@@@@ | [2, 4) 31732 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 10137 |@@@@@@@@@@@@@@@@ | [8, 16) 2763 |@@@@ | [16, 32) 724 |@ | [32, 64) 73 | | [64, 128) 5 | | @latency[10]: [0] 744 | | [1] 14698 |@@@@@@@@@@@@@@@@@@ | [2, 4) 22188 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 31113 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 42273 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 12889 |@@@@@@@@@@@@@@@ | [32, 64) 1450 |@ | [64, 128) 378 | | [128, 256) 434 | | [256, 512) 205 | | [512, 1K) 6 | | @latency[9]: [0] 16565 |@@@@@@@@@@@@@@@@ | [1] 31137 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 51215 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 25974 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 21063 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 9228 |@@@@@@@@@ | [32, 64) 766 | | [64, 128) 49 | | [128, 256) 10 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 | | [16K, 32K) 6 | | [32K, 64K) 5 | | @latency[2]: [0] 47894 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 55194 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 50026 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 45010 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 15751 |@@@@@@@@@@@@@@ | [16, 32) 9597 |@@@@@@@@@ | [32, 64) 1430 |@ | [64, 128) 112 | | [128, 256) 54 | | [256, 512) 24 | | [512, 1K) 4 | | [1K, 2K) 3 | | [2K, 4K) 8 | | [4K, 8K) 34 | | [8K, 16K) 27 | | [16K, 32K) 44 | | [32K, 64K) 8 | | [64K, 128K) 12 | | [128K, 256K) 5 | | [256K, 512K) 3 | | [512K, 1M) 1 | | [1M, 2M) 1 | | [2M, 4M) 1 | | [4M, 8M) 2 | | @latency[5]: [0] 25303 |@@@@@@@@ | [1] 158024 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 112570 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 126993 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 123894 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 41311 |@@@@@@@@@@@@@ | [32, 64) 31618 |@@@@@@@@@@ | [64, 128) 6185 |@@ | [128, 256) 4023 |@ | [256, 512) 2788 | | [512, 1K) 944 | | [1K, 2K) 3770 |@ | [2K, 4K) 258 | | [4K, 8K) 243 | | [8K, 16K) 58 | | [16K, 32K) 15 | | [32K, 64K) 23 | | [64K, 128K) 8 | | [128K, 256K) 2 | | [256K, 512K) 4 | | @latency[3]: [0] 128944 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 192388 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 197213 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 130730 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 67237 |@@@@@@@@@@@@@@@@@ | [16, 32) 54337 |@@@@@@@@@@@@@@ | [32, 64) 15447 |@@@@ | [64, 128) 4249 |@ | [128, 256) 2078 | | [256, 512) 319 | | [512, 1K) 44 | | [1K, 2K) 11 | | [2K, 4K) 4 | | [4K, 8K) 5 | | [8K, 16K) 8 | | [16K, 32K) 14 | | [32K, 64K) 11 | | [64K, 128K) 8 | | [128K, 256K) 3 | | [256K, 512K) 2 | | [512K, 1M) 0 | | [1M, 2M) 0 | | [2M, 4M) 1 | | [4M, 8M) 1 | | @latency[11]: [0] 17280 |@@ | [1] 270489 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 164129 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 194049 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 350138 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 98221 |@@@@@@@@@@@@@@ | [32, 64) 18757 |@@ | [64, 128) 6838 |@ | [128, 256) 1856 | | [256, 512) 741 | | [512, 1K) 78 | | [1K, 2K) 10 | | [2K, 4K) 10 | | [4K, 8K) 7 | | [8K, 16K) 11 | | [16K, 32K) 14 | | [32K, 64K) 8 | | [64K, 128K) 11 | | [128K, 256K) 8 | | @latency[4]: [0] 168537 |@@@@@@@@@@@@ | [1] 240545 |@@@@@@@@@@@@@@@@@ | [2, 4) 716101 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 253103 |@@@@@@@@@@@@@@@@@@ | [8, 16) 101037 |@@@@@@@ | [16, 32) 161263 |@@@@@@@@@@@ | [32, 64) 65293 |@@@@ | [64, 128) 20356 |@ | [128, 256) 2167 | | [256, 512) 208 | | [512, 1K) 32 | | [1K, 2K) 34 | | [2K, 4K) 61 | | [4K, 8K) 71 | | [8K, 16K) 59 | | [16K, 32K) 99 | | [32K, 64K) 15 | | [64K, 128K) 16 | | [128K, 256K) 6 | | [256K, 512K) 5 | | [512K, 1M) 0 | | [1M, 2M) 0 | | [2M, 4M) 0 | | [4M, 8M) 2 | | @latency[15]: [0] 28766 | | [1] 11055 | | [2, 4) 323135 |@@@@@@@@@@ | [4, 8) 192673 |@@@@@@ | [8, 16) 1642187 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 76886 |@@ | [32, 64) 467 | | [64, 128) 33 | | [128, 256) 5 | | [256, 512) 2 | | [512, 1K) 1 | | @latency[6]: [0] 19845 | | [1] 21625 | | [2, 4) 1372229 |@@@@@@@@@@@@@@@@@@ | [4, 8) 736495 |@@@@@@@@@ | [8, 16) 3928812 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 400976 |@@@@@ | [32, 64) 23786 | | [64, 128) 23372 | | [128, 256) 166 | | [256, 512) 82 | | [512, 1K) 59 | | [1K, 2K) 6 | | [2K, 4K) 2 | | [4K, 8K) 0 | | [8K, 16K) 3 | | [16K, 32K) 4 | | [32K, 64K) 2 | | @latency[8]: [0] 1185056 |@@@@@@@@@@@@@@@@ | [1] 1145109 |@@@@@@@@@@@@@@@ | [2, 4) 3778144 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 401101 |@@@@@ | [8, 16) 73908 |@ | [16, 32) 19049 | | [32, 64) 4509 | | [64, 128) 1557 | | [128, 256) 1259 | | [256, 512) 250 | | [512, 1K) 41 | | [1K, 2K) 13 | | [2K, 4K) 4 | | [4K, 8K) 4 | | [8K, 16K) 11 | | [16K, 32K) 8 | | [32K, 64K) 2 | | [64K, 128K) 3 | | [128K, 256K) 5 | | [256K, 512K) 3 | | [512K, 1M) 0 | | [1M, 2M) 0 | | [2M, 4M) 1 | | [4M, 8M) 2 | | @latency[1]: [0] 2465901 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 3687045 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 723249 |@@@@@@@@@@ | [4, 8) 219732 |@@@ | [8, 16) 84385 |@ | [16, 32) 36558 | | [32, 64) 208437 |@@ | [64, 128) 88185 |@ | [128, 256) 47220 | | [256, 512) 27288 | | [512, 1K) 15957 | | [1K, 2K) 7917 | | [2K, 4K) 1770 | | [4K, 8K) 101 | | [8K, 16K) 191 | | [16K, 32K) 376 | | [32K, 64K) 427 | | [64K, 128K) 185 | | [128K, 256K) 68 | | [256K, 512K) 23 | | [512K, 1M) 5 | | [1M, 2M) 0 | | [2M, 4M) 2 | | [4M, 8M) 2 | | @start[3644136]: 31332282978156583 @start[3660720]: 31332283170843444 @start[3660878]: 31332283173631433 @start[3658539]: 31332283173889559 @start[3658823]: 31332283174085598 @start[3658540]: 31332283174134155 @start[3464421]: 31332283174624129 @start[3464405]: 31332283174633529 @start[3660490]: 31332283174650463 @start[3464399]: 31332283174659376 @start[3464751]: 31332283174660051 @start[2057422]: 31332283174678800 @start[1957290]: 31332283174684273 @start[3464261]: 31332283174689597 @start[3370398]: 31332283174701209 @start[3661788]: 31332283174754783 @start[3661355]: 31332283175691266 @start[4159998]: 31332283176017702 @start[3661770]: 31332283176044031 [Sun Jan 11 03:16:17 UTC 2026] respawn: 0: stopped pid 24 with status 0 [Sun Jan 11 03:16:17 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 03:16:18 UTC 2026] respawn: 1: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 55 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3687397]: 1 @fd[3687326]: 1 @fd[3687343]: 1 @fd[3687333]: 1 @fd[3687402]: 1 @fd[3674105]: 1 @fd[3687389]: 1 @fd[3687324]: 1 @fd[3687387]: 1 @fd[3687404]: 1 @fd[3687346]: 1 @fd[3687383]: 1 @fd[3687381]: 1 @fd[3687330]: 1 @fd[3687332]: 1 @fd[3687406]: 1 @fd[3687323]: 1 @fd[3687396]: 1 @fd[3687374]: 1 @fd[3687349]: 1 @fd[3687353]: 1 @fd[3687329]: 1 @fd[3686848]: 1 @fd[3687312]: 1 @fd[3687348]: 1 @fd[3687371]: 1 @fd[3687334]: 1 @fd[3687316]: 1 @fd[3687327]: 1 @fd[3687331]: 1 @fd[3687344]: 1 @fd[3687409]: 1 @fd[3687352]: 1 @fd[3687340]: 1 @fd[3687417]: 1 @fd[3664216]: 1 @fd[3687351]: 1 @fd[3687314]: 1 @fd[3687328]: 1 @fd[3687375]: 1 @fd[3687354]: 1 @fd[3687378]: 1 @fd[3687400]: 1 @fd[3687263]: 1 @fd[3687313]: 1 @fd[3685247]: 2 @fd[3687301]: 3 @fd[3687359]: 3 @fd[3687300]: 3 @fd[3544096]: 3 @fd[3687303]: 3 @fd[3687429]: 3 @fd[3687363]: 3 @fd[3687361]: 3 @fd[3687370]: 3 @fd[3687369]: 3 @fd[3687295]: 3 @fd[3687299]: 3 @fd[3687306]: 3 @fd[3687294]: 3 @fd[3687365]: 3 @fd[3687297]: 3 @fd[3687304]: 3 @fd[3687310]: 3 @fd[3687308]: 3 @fd[3687307]: 3 @fd[3664501]: 3 @fd[3687298]: 3 @fd[3687296]: 3 @fd[3687305]: 3 @fd[3687309]: 3 @fd[3653347]: 3 @fd[3687401]: 4 @fd[3687403]: 4 @fd[3687398]: 4 @fd[3687377]: 4 @fd[3687388]: 4 @fd[3687373]: 4 @fd[3687382]: 4 @fd[3687408]: 4 @fd[3687385]: 4 @fd[3687399]: 4 @fd[3687418]: 4 @fd[3687376]: 4 @fd[3687390]: 4 @fd[3687379]: 4 @fd[3686849]: 5 @fd[3687315]: 5 @fd[3687427]: 5 @fd[3686895]: 5 @fd[3687372]: 6 @fd[3687366]: 6 @fd[3687428]: 6 @fd[3687166]: 7 @fd[3687424]: 8 @fd[3686803]: 10 @latency[31]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[28]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[24]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[26]: [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[25]: [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[22]: [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16]: [2, 4) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[20]: [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[18]: [2, 4) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[19]: [2, 4) 3 |@@@@@ | [4, 8) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@ | @latency[13]: [2, 4) 5 |@@@@@@@@ | [4, 8) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5 |@@@@@@@@ | @latency[17]: [0] 1 |@ | [1] 3 |@@@@ | [2, 4) 11 |@@@@@@@@@@@@@@@@@ | [4, 8) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 10 |@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@ | [32, 64) 1 |@ | @latency[60]: [1] 4 |@@@@ | [2, 4) 13 |@@@@@@@@@@@@@@ | [4, 8) 46 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@ | @latency[52]: [0] 1 |@ | [1] 14 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 7 |@@@@@@@@@@ | [8, 16) 13 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 13 |@@@@@@@@@@@@@@@@@@@ | [64, 128) 2 |@@@ | @latency[86]: [1] 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@ | @latency[12]: [0] 79 |@@@@@@@@@@@@@@@@@@@ | [1] 4 | | [2, 4) 210 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 120 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 11 |@@ | [16, 32) 1 | | [32, 64) 0 | | [64, 128) 1 | | @latency[7]: [0] 10 | | [1] 25 |@@ | [2, 4) 279 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 541 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 278 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 58 |@@@@@ | [32, 64) 6 | | [64, 128) 3 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 0 | | [64K, 128K) 1 | | [128K, 256K) 1 | | @latency[15]: [1] 36 |@ | [2, 4) 967 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1005 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 73 |@@@ | @latency[9]: [0] 226 |@@@@@@@@@@@@@@ | [1] 683 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 810 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 483 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 88 |@@@@@ | [16, 32) 23 |@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | @latency[10]: [0] 1036 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 470 |@@@@@@@@@@@@@@ | [2, 4) 809 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1713 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 313 |@@@@@@@@@ | [16, 32) 188 |@@@@@ | [32, 64) 14 | | [64, 128) 23 | | [128, 256) 6 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 1 | | [2K, 4K) 1 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 0 | | [64K, 128K) 0 | | [128K, 256K) 1 | | [256K, 512K) 0 | | [512K, 1M) 1 | | @latency[2]: [0] 3702 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 3128 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 825 |@@@@@@@@@@@ | [4, 8) 421 |@@@@@ | [8, 16) 170 |@@ | [16, 32) 55 | | [32, 64) 6 | | [64, 128) 7 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 1 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 2 | | [64K, 128K) 1 | | [128K, 256K) 1 | | [256K, 512K) 0 | | [512K, 1M) 1 | | @latency[14]: [1] 1058 |@@@@@@@@ | [2, 4) 6782 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3676 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3162 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 600 |@@@@ | [32, 64) 4 | | @latency[5]: [0] 50 | | [1] 8611 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 10033 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5311 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4231 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 874 |@@@@ | [32, 64) 92 | | [64, 128) 166 | | [128, 256) 94 | | [256, 512) 45 | | [512, 1K) 10 | | [1K, 2K) 1 | | [2K, 4K) 1 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | [32K, 64K) 2 | | [64K, 128K) 0 | | [128K, 256K) 0 | | [256K, 512K) 0 | | [512K, 1M) 0 | | [1M, 2M) 0 | | [2M, 4M) 1 | | @latency[11]: [0] 175 | | [1] 1041 |@@@@@ | [2, 4) 4033 |@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8720 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 9949 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9932 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 664 |@@@ | [64, 128) 380 |@ | [128, 256) 61 | | [256, 512) 2 | | [512, 1K) 2 | | @latency[4]: [0] 724 |@@ | [1] 8948 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 13529 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3780 |@@@@@@@@@@@@@@ | [8, 16) 1843 |@@@@@@@ | [16, 32) 753 |@@ | [32, 64) 4987 |@@@@@@@@@@@@@@@@@@@ | [64, 128) 458 |@ | [128, 256) 23 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 | | [16K, 32K) 0 | | [32K, 64K) 0 | | [64K, 128K) 3 | | [128K, 256K) 2 | | @latency[6]: [0] 1210 |@@@ | [1] 565 |@ | [2, 4) 16316 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 16617 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5148 |@@@@@@@@@@@@@@@@ | [16, 32) 1845 |@@@@@ | [32, 64) 305 | | [64, 128) 300 | | [128, 256) 4 | | @latency[8]: [0] 12051 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 24731 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4287 |@@@@@@@@@ | [4, 8) 1300 |@@ | [8, 16) 478 |@ | [16, 32) 109 | | [32, 64) 11 | | [64, 128) 24 | | [128, 256) 9 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 1 | | [2K, 4K) 1 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 4 | | [64K, 128K) 4 | | [128K, 256K) 5 | | @latency[3]: [0] 15676 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 13277 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 10336 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7901 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4718 |@@@@@@@@@@@@@@@ | [16, 32) 3390 |@@@@@@@@@@@ | [32, 64) 699 |@@ | [64, 128) 444 |@ | [128, 256) 81 | | [256, 512) 3 | | [512, 1K) 1 | | [1K, 2K) 1 | | [2K, 4K) 1 | | [4K, 8K) 1 | | [8K, 16K) 7 | | [16K, 32K) 12 | | [32K, 64K) 14 | | [64K, 128K) 3 | | [128K, 256K) 0 | | [256K, 512K) 1 | | [512K, 1M) 1 | | @latency[1]: [0] 57262 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 15332 |@@@@@@@@@@@@@ | [2, 4) 11914 |@@@@@@@@@@ | [4, 8) 9288 |@@@@@@@@ | [8, 16) 2952 |@@ | [16, 32) 245 | | [32, 64) 3025 |@@ | [64, 128) 7128 |@@@@@@ | [128, 256) 2007 |@ | [256, 512) 1257 |@ | [512, 1K) 697 | | [1K, 2K) 188 | | [2K, 4K) 8 | | [4K, 8K) 5 | | [8K, 16K) 3 | | [16K, 32K) 10 | | [32K, 64K) 10 | | [64K, 128K) 8 | | [128K, 256K) 3 | | @start[3687296]: 31332310373275338 @start[3687295]: 31332310375549728 @start[3687294]: 31332310375804342 @start[3687301]: 31332310390966271 @start[3686803]: 31332310396393420 @start[3687300]: 31332310397329172 @start[3687263]: 31332310401223426 @start[3687298]: 31332310402357935 @start[3687297]: 31332310404070896 @start[3687299]: 31332310405189610 @start[3687313]: 31332310426087107 @start[3687315]: 31332310426130391 @start[3687312]: 31332310426131506 @start[3687314]: 31332310426235160 @start[3687304]: 31332310426331414 @start[3687303]: 31332310426381380 @start[3687305]: 31332310426478345 @start[3687329]: 31332310427772596 @start[3687327]: 31332310427794417 @start[3687326]: 31332310427864418 @start[3687323]: 31332310427903595 @start[3687328]: 31332310427976131 @start[3687324]: 31332310428105207 @start[3687330]: 31332310428504053 @start[3687331]: 31332310428741241 @start[3687306]: 31332310428847145 @start[3687333]: 31332310428957657 @start[3687334]: 31332310429028356 @start[3687307]: 31332310429088572 @start[3687332]: 31332310429128473 @start[3687310]: 31332310429217379 @start[3687309]: 31332310429286272 @start[3687308]: 31332310429469787 @start[3687343]: 31332310431131310 @start[3687340]: 31332310431232238 @start[3687354]: 31332310431281532 @start[3687351]: 31332310431405445 @start[3687353]: 31332310431594123 @start[3687348]: 31332310431718632 @start[3687352]: 31332310431756712 @start[3687346]: 31332310431900457 @start[3687349]: 31332310432126804 @start[3687344]: 31332310432285943 @start[3664216]: 31332310433683611 @start[3687316]: 31332310436954801 @start[3687371]: 31332310448805910 @start[3687375]: 31332310449086751 @start[3687374]: 31332310449089422 @start[3544096]: 31332310449262846 @start[3687378]: 31332310449554914 @start[3687383]: 31332310449642539 @start[3687381]: 31332310449773489 @start[3687387]: 31332310450131568 @start[3687389]: 31332310450190227 @start[3687377]: 31332310451044336 @start[3687376]: 31332310451140423 @start[3687385]: 31332310451425996 @start[3687373]: 31332310451469571 @start[3687390]: 31332310451746865 @start[3687388]: 31332310451923999 @start[3687382]: 31332310452291661 @start[3687372]: 31332310452439680 @start[3687396]: 31332310452465519 @start[3687400]: 31332310452904581 @start[3687366]: 31332310452925176 @start[3687379]: 31332310452973562 @start[3687402]: 31332310453171776 @start[3687397]: 31332310453374938 @start[3687406]: 31332310453635202 @start[3687404]: 31332310453975047 @start[3687409]: 31332310454202081 @start[3687417]: 31332310454453554 @start[3687401]: 31332310459105711 @start[3687369]: 31332310460313917 @start[3687398]: 31332310467896124 @start[3687363]: 31332310468737228 @start[3674105]: 31332310475526777 @start[3664501]: 31332310475547519 @start[3687424]: 31332310477516544 @start[3687427]: 31332310479155265 @start[3687428]: 31332310479474638 @start[3687429]: 31332310480278781 @start[3687408]: 31332310483073190 @start[3687370]: 31332310483948835 @start[3687403]: 31332310487403726 @start[3687361]: 31332310488533615 @start[3686849]: 31332310495642383 @start[3686848]: 31332310495668699 @start[3653347]: 31332310495706361 @start[3687418]: 31332310500030082 @start[3687359]: 31332310500956603 @start[3685247]: 31332310501500089 @start[3686895]: 31332310510940323 @start[3687399]: 31332310516423002 @start[3687365]: 31332310517519867 @start[3687166]: 31332310522369663 [Sun Jan 11 03:16:45 UTC 2026] respawn: 1: stopped pid 63 with status 0 [Sun Jan 11 03:16:45 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 03:16:46 UTC 2026] respawn: 2: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 91 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3697527]: 1 @fd[3719198]: 1 @fd[3793461]: 3 @fd[3793457]: 3 @fd[3688854]: 3 @fd[3694567]: 3 @fd[3791336]: 3 @fd[3793324]: 5 @fd[3793390]: 5 @fd[3793455]: 5 @fd[3793379]: 5 @fd[3793458]: 5 @fd[3793368]: 5 @fd[3793401]: 5 @fd[3793456]: 6 @fd[3793460]: 6 @fd[3793450]: 8 @fd[3793448]: 8 @fd[3793311]: 10 @fd[3793340]: 10 @latency[31]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[28]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[59]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[37]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[25]: [2, 4) 4 |@@@@@@@@@@@@@@@@@ | [4, 8) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@ | [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[26]: [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[24]: [2, 4) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[22]: [4, 8) 2 |@@@@ | [8, 16) 6 |@@@@@@@@@@@@@ | [16, 32) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 4 |@@@@@@@@ | [128, 256) 1 |@@ | @latency[13]: [0] 7 |@@@@@@ | [1] 2 |@ | [2, 4) 59 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 16 |@@@@@@@@@@@@@@ | [8, 16) 4 |@@@ | [16, 32) 1 | | [32, 64) 1 | | [64, 128) 4 |@@@ | [128, 256) 1 | | @latency[52]: [0] 1 |@ | [1] 43 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 8 |@@@@@@@@@ | [4, 8) 8 |@@@@@@@@@ | [8, 16) 13 |@@@@@@@@@@@@@@@ | [16, 32) 18 |@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 10 |@@@@@@@@@@@@ | @latency[16]: [1] 1 | | [2, 4) 60 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 24 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@ | @latency[18]: [1] 1 | | [2, 4) 66 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 23 |@@@@@@@@@@@@@@@@@@ | [8, 16) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[20]: [0] 1 | | [1] 9 |@@@@@@ | [2, 4) 74 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 22 |@@@@@@@@@@@@@@@ | [8, 16) 33 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5 |@@@ | [32, 64) 4 |@@ | [64, 128) 2 |@ | [128, 256) 3 |@@ | [256, 512) 1 | | [512, 1K) 1 | | @latency[23]: [2, 4) 3 |@ | [4, 8) 14 |@@@@@@@ | [8, 16) 26 |@@@@@@@@@@@@@@ | [16, 32) 93 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 64 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 10 |@@@@@ | @latency[50]: [1] 78 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 121 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 119 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 27 |@@@@@@@@@@@ | [16, 32) 12 |@@@@@ | [32, 64) 2 | | [64, 128) 1 | | [128, 256) 1 | | @latency[51]: [1] 123 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 97 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 99 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 28 |@@@@@@@@@@@ | [16, 32) 12 |@@@@@ | [32, 64) 1 | | [64, 128) 1 | | @latency[19]: [1] 7 |@ | [2, 4) 313 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 58 |@@@@@@@@@ | [8, 16) 97 |@@@@@@@@@@@@@@@@ | [16, 32) 1 | | @latency[17]: [1] 1 | | [2, 4) 324 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 64 |@@@@@@@@@@ | [8, 16) 112 |@@@@@@@@@@@@@@@@@ | [16, 32) 1 | | @latency[21]: [1] 2 | | [2, 4) 285 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 80 |@@@@@@@@@@@@@@ | [8, 16) 207 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 11 |@@ | [32, 64) 1 | | [64, 128) 1 | | @latency[60]: [0] 1 | | [1] 29 |@@@@@@ | [2, 4) 112 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 238 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 156 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 135 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 36 |@@@@@@@ | [64, 128) 3 | | [128, 256) 1 | | @latency[86]: [0] 37 |@@@@@@@@ | [1] 95 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 147 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 229 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 214 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 126 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 65 |@@@@@@@@@@@@@@ | [64, 128) 7 |@ | [128, 256) 1 | | [256, 512) 1 | | [512, 1K) 1 | | @latency[12]: [0] 535 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 217 |@@@@@@@@@@@@@ | [2, 4) 830 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 337 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 164 |@@@@@@@@@@ | [16, 32) 24 |@ | [32, 64) 2 | | [64, 128) 0 | | [128, 256) 1 | | @latency[7]: [0] 172 |@@@@@@@@ | [1] 100 |@@@@ | [2, 4) 942 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1053 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 241 |@@@@@@@@@@@ | [16, 32) 158 |@@@@@@@ | [32, 64) 13 | | [64, 128) 10 | | [128, 256) 3 | | [256, 512) 0 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 1 | | [4K, 8K) 1 | | @latency[9]: [0] 3067 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 5190 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 3795 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2525 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 896 |@@@@@@@@ | [16, 32) 380 |@@@ | [32, 64) 28 | | [64, 128) 7 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 4 | | [32K, 64K) 3 | | @latency[2]: [0] 20502 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 3452 |@@@@@@@@ | [2, 4) 2954 |@@@@@@@ | [4, 8) 2615 |@@@@@@ | [8, 16) 1196 |@@@ | [16, 32) 532 |@ | [32, 64) 138 | | [64, 128) 26 | | [128, 256) 4 | | [256, 512) 5 | | [512, 1K) 0 | | [1K, 2K) 3 | | [2K, 4K) 2 | | [4K, 8K) 2 | | [8K, 16K) 9 | | [16K, 32K) 1 | | [32K, 64K) 4 | | [64K, 128K) 3 | | [128K, 256K) 4 | | [256K, 512K) 2 | | [512K, 1M) 1 | | [1M, 2M) 1 | | @latency[10]: [0] 1657 |@@@@@@@@@ | [1] 2207 |@@@@@@@@@@@@@ | [2, 4) 8728 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8589 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 8766 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2276 |@@@@@@@@@@@@@ | [32, 64) 315 |@ | [64, 128) 125 | | [128, 256) 92 | | [256, 512) 39 | | [512, 1K) 6 | | [1K, 2K) 1 | | [2K, 4K) 3 | | [4K, 8K) 1 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[15]: [0] 26 | | [1] 1898 |@@ | [2, 4) 49198 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 13579 |@@@@@@@@@@@@@@ | [8, 16) 43874 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1430 |@ | [32, 64) 30 | | [64, 128) 9 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[5]: [0] 7143 |@@@@@@@@@@@@ | [1] 29788 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 24046 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 22831 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 17146 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 7344 |@@@@@@@@@@@@ | [32, 64) 5015 |@@@@@@@@ | [64, 128) 1458 |@@ | [128, 256) 879 |@ | [256, 512) 577 |@ | [512, 1K) 149 | | [1K, 2K) 15 | | [2K, 4K) 2 | | [4K, 8K) 2 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | [64K, 128K) 1 | | [128K, 256K) 1 | | @latency[14]: [1] 1337 | | [2, 4) 113674 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 13847 |@@@@@@ | [8, 16) 14156 |@@@@@@ | [16, 32) 2289 |@ | [32, 64) 26 | | [64, 128) 3 | | @latency[11]: [0] 236 | | [1] 36158 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 19252 |@@@@@@@@@@@@@@@@ | [4, 8) 28326 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 58941 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 19288 |@@@@@@@@@@@@@@@@@ | [32, 64) 4061 |@@@ | [64, 128) 1732 |@ | [128, 256) 564 | | [256, 512) 174 | | [512, 1K) 21 | | [1K, 2K) 4 | | [2K, 4K) 1 | | [4K, 8K) 4 | | [8K, 16K) 2 | | [16K, 32K) 2 | | [32K, 64K) 0 | | [64K, 128K) 0 | | [128K, 256K) 1 | | @latency[3]: [0] 32085 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 53825 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 43680 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 25400 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 17554 |@@@@@@@@@@@@@@@@ | [16, 32) 14527 |@@@@@@@@@@@@@@ | [32, 64) 4031 |@@@ | [64, 128) 1225 |@ | [128, 256) 579 | | [256, 512) 102 | | [512, 1K) 21 | | [1K, 2K) 11 | | [2K, 4K) 6 | | [4K, 8K) 3 | | [8K, 16K) 5 | | [16K, 32K) 8 | | [32K, 64K) 3 | | [64K, 128K) 0 | | [128K, 256K) 2 | | [256K, 512K) 1 | | [512K, 1M) 0 | | [1M, 2M) 1 | | @latency[4]: [0] 17267 |@@@@@@@@@@@@@@ | [1] 63444 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 52235 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 16657 |@@@@@@@@@@@@@ | [8, 16) 9720 |@@@@@@@ | [16, 32) 11369 |@@@@@@@@@ | [32, 64) 20064 |@@@@@@@@@@@@@@@@ | [64, 128) 6225 |@@@@@ | [128, 256) 1200 | | [256, 512) 52 | | [512, 1K) 13 | | [1K, 2K) 31 | | [2K, 4K) 65 | | [4K, 8K) 16 | | [8K, 16K) 3 | | [16K, 32K) 6 | | [32K, 64K) 4 | | [64K, 128K) 0 | | [128K, 256K) 0 | | [256K, 512K) 2 | | @latency[6]: [0] 3364 | | [1] 3168 | | [2, 4) 291119 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 61364 |@@@@@@@@@@ | [8, 16) 135187 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 20085 |@@@ | [32, 64) 2832 | | [64, 128) 1552 | | [128, 256) 45 | | [256, 512) 14 | | [512, 1K) 16 | | [1K, 2K) 3 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 4 | | [32K, 64K) 1 | | @latency[8]: [0] 263568 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 111868 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 126968 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 16640 |@@@ | [8, 16) 5143 |@ | [16, 32) 1529 | | [32, 64) 537 | | [64, 128) 167 | | [128, 256) 79 | | [256, 512) 28 | | [512, 1K) 5 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | [64K, 128K) 0 | | [128K, 256K) 1 | | [256K, 512K) 0 | | [512K, 1M) 0 | | [1M, 2M) 1 | | [2M, 4M) 1 | | @latency[1]: [0] 401584 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 152274 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 87319 |@@@@@@@@@@@ | [4, 8) 46242 |@@@@@ | [8, 16) 13832 |@ | [16, 32) 4249 | | [32, 64) 23589 |@@@ | [64, 128) 11676 |@ | [128, 256) 6096 | | [256, 512) 3053 | | [512, 1K) 838 | | [1K, 2K) 241 | | [2K, 4K) 33 | | [4K, 8K) 11 | | [8K, 16K) 13 | | [16K, 32K) 37 | | [32K, 64K) 31 | | [64K, 128K) 15 | | [128K, 256K) 4 | | [256K, 512K) 2 | | [512K, 1M) 0 | | [1M, 2M) 1 | | @start[3793340]: 31332504023063145 @start[3793311]: 31332504023450629 @start[3697527]: 31332504095828452 @start[3688854]: 31332504095895975 @start[3719198]: 31332504096567477 @start[3694567]: 31332504096702378 @start[3793448]: 31332504107276774 @start[3793450]: 31332504107615248 @start[3793455]: 31332504112812415 @start[3793458]: 31332504114198344 @start[3793460]: 31332504116963460 @start[3793461]: 31332504117532894 @start[3793456]: 31332504118743957 @start[3793457]: 31332504118905939 @start[3793390]: 31332504121029576 @start[3791336]: 31332504132551414 @start[3793379]: 31332504142254491 @start[3793401]: 31332504142304145 @start[3793368]: 31332504142321420 @start[3793324]: 31332504142350209 [Sun Jan 11 03:19:58 UTC 2026] respawn: 2: stopped pid 94 with status 0 [Sun Jan 11 03:19:58 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 03:19:59 UTC 2026] respawn: 3: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 127 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3923478]: 1 @fd[3925525]: 1 @fd[3908671]: 1 @fd[3925331]: 1 @fd[3838304]: 1 @fd[3925516]: 1 @fd[3911614]: 1 @fd[3917980]: 1 @fd[3835146]: 3 @fd[3902082]: 3 @fd[3925521]: 3 @fd[3925511]: 3 @fd[3912365]: 3 @fd[3916718]: 3 @fd[3925539]: 3 @fd[3925502]: 4 @fd[3925537]: 5 @fd[3925450]: 5 @fd[3925519]: 5 @fd[3925524]: 5 @fd[3925520]: 6 @fd[3925538]: 6 @fd[3925534]: 8 @fd[3925545]: 8 @fd[4159998]: 9 @fd[3925372]: 10 @fd[3925387]: 10 @fd[3925357]: 10 @fd[3925332]: 10 @latency[74]: [0] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@@@ | [2, 4) 1 |@@@@@@@@ | @latency[36]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@@ | @latency[46]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@@ | @latency[51]: [0] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@@@@@ | @latency[65]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@@ | @latency[66]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@@ | @latency[70]: [0] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@@@@@ | @latency[69]: [0] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@@@@@ | @latency[61]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@@ | @latency[47]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[32]: [0] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@@@@@ | [2, 4) 0 | | [4, 8) 0 | | [8, 16) 1 |@@@@@@@@ | @latency[33]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@@ | @latency[34]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[62]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[38]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@@ | @latency[39]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@@ | @latency[43]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@@ | @latency[44]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[45]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[48]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[50]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[58]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[52]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[53]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[54]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 0 | | [2, 4) 1 |@@@@@@ | @latency[57]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[55]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[56]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[72]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@@ | @latency[27]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | @latency[68]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 0 | | [2, 4) 1 |@@@@@@ | @latency[29]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@@ | [2, 4) 0 | | [4, 8) 1 |@@@@@@@ | @latency[59]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@ | @latency[28]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 0 | | [2, 4) 0 | | [4, 8) 1 |@@@@@@ | [8, 16) 1 |@@@@@@ | @latency[67]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | [2, 4) 1 |@@@@@@ | @latency[40]: [0] 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@ | @latency[41]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@ | [2, 4) 1 |@@@@@@ | @latency[64]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@ | @latency[63]: [0] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@ | @latency[42]: [0] 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 3 |@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@ | @latency[35]: [0] 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 3 |@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@ | [4, 8) 1 |@@@@@ | @latency[30]: [0] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@ | [4, 8) 0 | | [8, 16) 0 | | [16, 32) 1 |@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@ | @latency[37]: [0] 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2 |@@@@@@@@ | [4, 8) 1 |@@@@ | [8, 16) 0 | | [16, 32) 1 |@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@@ | @latency[49]: [0] 6 |@@@@@@@@@@ | [1] 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@ | [8, 16) 7 |@@@@@@@@@@@ | [16, 32) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 7 |@@@@@@@@@@@ | [64, 128) 9 |@@@@@@@@@@@@@@@ | [128, 256) 2 |@@@ | @latency[25]: [0] 14 |@@@@@@@@@@@@@ | [1] 4 |@@@ | [2, 4) 37 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 56 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 9 |@@@@@@@@ | [16, 32) 2 |@ | @latency[26]: [0] 18 |@@@@@@@@@@@@@@@@ | [1] 7 |@@@@@@ | [2, 4) 52 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6 |@@@@@ | [16, 32) 3 |@@ | @latency[71]: [0] 9 |@@@@@@@ | [1] 63 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 35 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 29 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6 |@@@@ | [16, 32) 3 |@@ | [32, 64) 3 |@@ | [64, 128) 1 | | @latency[73]: [0] 8 |@@@@@@@ | [1] 59 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 39 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 27 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 12 |@@@@@@@@@@ | [16, 32) 3 |@@ | [32, 64) 3 |@@ | @latency[24]: [0] 15 |@@@@@@@@@ | [1] 6 |@@@ | [2, 4) 30 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 79 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 13 |@@@@@@@@ | [16, 32) 10 |@@@@@@ | @latency[13]: [0] 16 |@@@@@ | [1] 7 |@@ | [2, 4) 142 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 35 |@@@@@@@@@@@@ | [8, 16) 8 |@@ | [16, 32) 1 | | @latency[23]: [0] 15 |@@@@@@ | [1] 7 |@@ | [2, 4) 34 |@@@@@@@@@@@@@@ | [4, 8) 63 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 42 |@@@@@@@@@@@@@@@@@ | [16, 32) 122 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 31 |@@@@@@@@@@@@@ | [64, 128) 2 | | @latency[22]: [0] 12 |@@@@ | [1] 5 |@ | [2, 4) 23 |@@@@@@@@ | [4, 8) 50 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 75 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 136 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 47 |@@@@@@@@@@@@@@@@@ | [64, 128) 6 |@@ | @latency[31]: [0] 8 |@ | [1] 340 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 34 |@@@@@ | [4, 8) 2 | | [8, 16) 2 | | [16, 32) 0 | | [32, 64) 1 | | [64, 128) 1 | | @latency[20]: [0] 8 | | [1] 9 | | [2, 4) 597 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 69 |@@@@@@ | [8, 16) 37 |@@@ | [16, 32) 4 | | @latency[18]: [0] 6 | | [1] 8 | | [2, 4) 588 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 80 |@@@@@@@ | [8, 16) 43 |@@@ | [16, 32) 2 | | @latency[16]: [0] 8 | | [1] 6 | | [2, 4) 589 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 81 |@@@@@@@ | [8, 16) 40 |@@@ | [16, 32) 4 | | [32, 64) 1 | | @latency[14]: [0] 11 | | [1] 16 |@ | [2, 4) 587 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 205 |@@@@@@@@@@@@@@@@@@ | [8, 16) 75 |@@@@@@ | [16, 32) 31 |@@ | [32, 64) 2 | | [64, 128) 1 | | @latency[21]: [0] 8 | | [1] 9 | | [2, 4) 1198 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 69 |@@ | [8, 16) 195 |@@@@@@@@ | [16, 32) 2 | | @latency[19]: [0] 7 | | [1] 13 | | [2, 4) 1329 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 97 |@@@ | [8, 16) 182 |@@@@@@@ | [16, 32) 3 | | @latency[17]: [0] 9 | | [1] 11 | | [2, 4) 1356 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 108 |@@@@ | [8, 16) 195 |@@@@@@@ | [16, 32) 2 | | [32, 64) 0 | | [64, 128) 1 | | @latency[60]: [0] 10 | | [1] 150 |@@@@@@ | [2, 4) 592 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1169 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 596 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 243 |@@@@@@@@@@ | [32, 64) 117 |@@@@@ | [64, 128) 3 | | [128, 256) 2 | | @latency[86]: [0] 218 |@@@@@@@@@@@@ | [1] 654 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 723 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 928 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 855 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 311 |@@@@@@@@@@@@@@@@@ | [32, 64) 187 |@@@@@@@@@@ | [64, 128) 33 |@ | [128, 256) 14 | | [256, 512) 5 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 0 | | [64K, 128K) 1 | | @latency[7]: [0] 259 |@@ | [1] 327 |@@@ | [2, 4) 5181 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4342 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1164 |@@@@@@@@@@@ | [16, 32) 441 |@@@@ | [32, 64) 69 | | [64, 128) 42 | | [128, 256) 5 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | [32K, 64K) 1 | | [64K, 128K) 1 | | @latency[12]: [0] 2826 |@@@@@@@@@@@@@@@ | [1] 831 |@@@@ | [2, 4) 9563 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1570 |@@@@@@@@ | [8, 16) 486 |@@ | [16, 32) 64 | | [32, 64) 10 | | [64, 128) 6 | | @latency[8]: [0] 3816 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 2623 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5750 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5576 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3560 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1136 |@@@@@@@@@@ | [32, 64) 613 |@@@@@ | [64, 128) 103 | | [128, 256) 30 | | [256, 512) 8 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 2 | | [4K, 8K) 0 | | [8K, 16K) 3 | | [16K, 32K) 2 | | [32K, 64K) 6 | | [64K, 128K) 1 | | @latency[10]: [0] 1703 |@@@ | [1] 10740 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 23518 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 20299 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 13536 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4735 |@@@@@@@@@@ | [32, 64) 595 |@ | [64, 128) 273 | | [128, 256) 149 | | [256, 512) 73 | | [512, 1K) 2 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 0 | | [16K, 32K) 5 | | [32K, 64K) 4 | | [64K, 128K) 5 | | @latency[3]: [0] 57710 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 54529 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 47463 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 33248 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 24206 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 16627 |@@@@@@@@@@@@@@ | [32, 64) 5723 |@@@@@ | [64, 128) 1317 |@ | [128, 256) 294 | | [256, 512) 57 | | [512, 1K) 8 | | [1K, 2K) 1 | | [2K, 4K) 1 | | [4K, 8K) 2 | | [8K, 16K) 5 | | [16K, 32K) 11 | | [32K, 64K) 9 | | [64K, 128K) 7 | | [128K, 256K) 3 | | [256K, 512K) 0 | | [512K, 1M) 0 | | [1M, 2M) 0 | | [2M, 4M) 1 | | @latency[15]: [0] 124 | | [1] 2660 | | [2, 4) 257836 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 21137 |@@@@ | [8, 16) 34666 |@@@@@@ | [16, 32) 2015 | | [32, 64) 34 | | [64, 128) 4 | | @latency[4]: [0] 45887 |@@@@@@@@@@@@@@@@@@@@@@ | [1] 99616 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 105540 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 27841 |@@@@@@@@@@@@@ | [8, 16) 14206 |@@@@@@ | [16, 32) 13215 |@@@@@@ | [32, 64) 26670 |@@@@@@@@@@@@@ | [64, 128) 1684 | | [128, 256) 242 | | [256, 512) 31 | | [512, 1K) 3 | | [1K, 2K) 31 | | [2K, 4K) 44 | | [4K, 8K) 12 | | [8K, 16K) 21 | | [16K, 32K) 23 | | [32K, 64K) 17 | | [64K, 128K) 13 | | [128K, 256K) 6 | | [256K, 512K) 2 | | @latency[5]: [0] 9166 |@@@ | [1] 134427 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 92012 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 90227 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 37551 |@@@@@@@@@@@@@@ | [16, 32) 11087 |@@@@ | [32, 64) 8970 |@@@ | [64, 128) 3978 |@ | [128, 256) 2642 |@ | [256, 512) 1283 | | [512, 1K) 281 | | [1K, 2K) 29 | | [2K, 4K) 6 | | [4K, 8K) 0 | | [8K, 16K) 2 | | [16K, 32K) 12 | | [32K, 64K) 10 | | [64K, 128K) 7 | | [128K, 256K) 4 | | [256K, 512K) 4 | | [512K, 1M) 1 | | [1M, 2M) 1 | | [2M, 4M) 1 | | [4M, 8M) 1 | | @latency[2]: [0] 493496 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 29006 |@@@ | [2, 4) 7302 | | [4, 8) 3786 | | [8, 16) 1670 | | [16, 32) 355 | | [32, 64) 126 | | [64, 128) 30 | | [128, 256) 6 | | [256, 512) 4 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 2 | | [4K, 8K) 6 | | [8K, 16K) 11 | | [16K, 32K) 11 | | [32K, 64K) 16 | | [64K, 128K) 12 | | [128K, 256K) 5 | | [256K, 512K) 1 | | [512K, 1M) 0 | | [1M, 2M) 0 | | [2M, 4M) 1 | | @latency[11]: [0] 737 | | [1] 194933 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 111632 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 141430 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 221313 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 69861 |@@@@@@@@@@@@@@@@ | [32, 64) 8220 |@ | [64, 128) 3018 | | [128, 256) 593 | | [256, 512) 167 | | [512, 1K) 30 | | [1K, 2K) 2 | | [2K, 4K) 4 | | [4K, 8K) 0 | | [8K, 16K) 4 | | [16K, 32K) 21 | | [32K, 64K) 4 | | [64K, 128K) 3 | | [128K, 256K) 1 | | @latency[6]: [0] 1608 | | [1] 7881 | | [2, 4) 720127 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 116936 |@@@@@@@@ | [8, 16) 106843 |@@@@@@@ | [16, 32) 18239 |@ | [32, 64) 2038 | | [64, 128) 896 | | [128, 256) 70 | | [256, 512) 20 | | [512, 1K) 10 | | [1K, 2K) 2 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 | | [16K, 32K) 4 | | [32K, 64K) 3 | | [64K, 128K) 0 | | [128K, 256K) 1 | | @latency[9]: [0] 577404 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 289904 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 96733 |@@@@@@@@ | [4, 8) 26985 |@@ | [8, 16) 4107 | | [16, 32) 1301 | | [32, 64) 380 | | [64, 128) 209 | | [128, 256) 85 | | [256, 512) 31 | | [512, 1K) 12 | | [1K, 2K) 3 | | [2K, 4K) 1 | | [4K, 8K) 2 | | [8K, 16K) 4 | | [16K, 32K) 5 | | [32K, 64K) 6 | | [64K, 128K) 3 | | [128K, 256K) 1 | | [256K, 512K) 2 | | [512K, 1M) 0 | | [1M, 2M) 0 | | [2M, 4M) 0 | | [4M, 8M) 1 | | @latency[1]: [0] 886886 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 163382 |@@@@@@@@@ | [2, 4) 112923 |@@@@@@ | [4, 8) 87455 |@@@@@ | [8, 16) 17132 |@ | [16, 32) 6028 | | [32, 64) 145330 |@@@@@@@@ | [64, 128) 68422 |@@@@ | [128, 256) 33130 |@ | [256, 512) 13081 | | [512, 1K) 5343 | | [1K, 2K) 932 | | [2K, 4K) 123 | | [4K, 8K) 31 | | [8K, 16K) 96 | | [16K, 32K) 205 | | [32K, 64K) 286 | | [64K, 128K) 146 | | [128K, 256K) 72 | | [256K, 512K) 7 | | [512K, 1M) 8 | | [1M, 2M) 1 | | @start[3925331]: 31332921740730385 @start[3925387]: 31332921747163604 @start[3925502]: 31332921752605967 @start[3838304]: 31332921755573908 @start[3835146]: 31332921755645453 @start[3925511]: 31332921760249184 @start[3911614]: 31332921761957038 @start[4159998]: 31332921762398828 @start[3925519]: 31332921772469769 @start[3925520]: 31332921774515555 @start[3925521]: 31332921775207072 @start[3925524]: 31332921785029630 @start[3925525]: 31332921787712272 @start[3925372]: 31332921790004995 @start[3925332]: 31332921800028830 @start[3917980]: 31332921816930706 @start[3912365]: 31332921817101635 @start[3925534]: 31332921822892109 @start[3925537]: 31332921829706777 @start[3925538]: 31332921831571835 @start[3925539]: 31332921832625093 @start[3925357]: 31332921845564787 @start[3925450]: 31332921852254692 @start[3923478]: 31332921860956113 @start[3916718]: 31332921861140714 @start[3925545]: 31332921866669675 @start[3925516]: 31332921871349502 @start[3908671]: 31332921871457843 @start[3902082]: 31332921871528538 [Sun Jan 11 03:26:56 UTC 2026] respawn: 3: stopped pid 135 with status 0 [Sun Jan 11 03:26:56 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 03:26:57 UTC 2026] respawn: 4: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 163 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3986485]: 1 @fd[4028175]: 1 @fd[4028199]: 1 @fd[3986681]: 1 @fd[4028196]: 1 @fd[3974575]: 1 @fd[3370398]: 1 @fd[4024825]: 1 @fd[1745171]: 1 @fd[3370401]: 2 @fd[3145744]: 2 @fd[3145682]: 2 @fd[4028125]: 3 @fd[4028169]: 4 @fd[4026601]: 4 @fd[3986472]: 4 @fd[4028180]: 4 @fd[4028204]: 5 @fd[4028185]: 5 @fd[4028191]: 5 @fd[3986674]: 5 @fd[4028184]: 6 @fd[4028124]: 6 @fd[4028173]: 6 @fd[4028209]: 6 @fd[957706]: 6 @fd[4028188]: 6 @fd[3985945]: 6 @fd[4028200]: 6 @fd[4024828]: 8 @fd[4159998]: 9 @fd[2918069]: 9 @fd[9966]: 9 @fd[3463799]: 11 @fd[3463804]: 11 @fd[4021973]: 15 @fd[3145737]: 19 @fd[3591810]: 23 @fd[800117]: 23 @fd[2057289]: 24 @fd[1980386]: 29 @fd[1059646]: 168 @latency[43]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[32]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[121]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[103]: [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[27]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[55]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[156]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[157]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[38]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[119]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[138]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[154]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[151]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[54]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[143]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[161]: [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@ | @latency[198]: [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@ | @latency[197]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 0 | | [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[181]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[160]: [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[167]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[49]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[187]: [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@ | @latency[53]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[125]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 0 | | [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[150]: [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 0 | | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[134]: [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@ | @latency[57]: [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 0 | | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[115]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 0 | | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@ | @latency[180]: [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@ | @latency[46]: [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@ | @latency[78]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[136]: [1] 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 1 |@@@@@@@@@@@@@@@@@ | @latency[102]: [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@@@@@@@ | @latency[142]: [0] 1 |@@@@@@@@@@@@@@@@@ | [1] 0 | | [2, 4) 0 | | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@@@@@@@@@@@@@@@ | @latency[101]: [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16K, 32K) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[91]: [1] 1 |@@@@@@@@ | [2, 4) 1 |@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@ | @latency[135]: [1] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2 |@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@ | @latency[106]: [8, 16) 1 |@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@@@@@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@@@@@@@@@@@@@@@@@@ | @latency[116]: [1] 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@ | @latency[28]: [0] 1 |@@@@@@@@@@@@@ | [1] 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@ | @latency[140]: [4, 8) 1 |@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[166]: [1] 1 |@@@@@@@@@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[153]: [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[52]: [1] 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@ | @latency[45]: [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[123]: [1] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 |@@@@@@@@@@@@@ | [16K, 32K) 1 |@@@@@@@@@@@@@ | @latency[152]: [1] 2 |@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@ | @latency[100]: [8, 16) 2 |@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [128, 256) 0 | | [256, 512) 1 |@@@@@@@@ | @latency[35]: [0] 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@ | [2, 4) 1 |@@@@ | [4, 8) 1 |@@@@ | [8, 16) 0 | | [16, 32) 1 |@@@@ | @latency[188]: [1] 1 |@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@@@@@@@@@ | @latency[124]: [1] 3 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@ | @latency[36]: [0] 1 |@@@@@@@@ | [1] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@ | @latency[37]: [1] 3 |@@@@@@@@@@@@ | [2, 4) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 0 | | [32, 64) 1 |@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@@ | @latency[105]: [1] 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@ | @latency[114]: [0] 2 |@@@@@@@@@@@@@@ | [1] 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@ | [32, 64) 0 | | [64, 128) 1 |@@@@@@@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@@@@@@@@@@@@ | @latency[169]: [1] 3 |@@@@@@@@@@ | [2, 4) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@ | [8, 16) 2 |@@@@@@ | [16, 32) 2 |@@@@@@ | @latency[174]: [0] 2 |@@@@@@@@ | [1] 3 |@@@@@@@@@@@@@ | [2, 4) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@ | @latency[141]: [1] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 3 |@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@@@@@ | @latency[189]: [0] 1 |@@@@ | [1] 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@ | [16, 32) 1 |@@@@ | @latency[104]: [1] 1 |@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@ | [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@@@@@ | [128, 256) 0 | | [256, 512) 1 |@@@@@ | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | @latency[34]: [0] 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@ | [8, 16) 1 |@@@@ | [16, 32) 2 |@@@@@@@@ | @latency[40]: [0] 22 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 8 |@@@@@@@@@@@@@@@@@@ | [2, 4) 4 |@@@@@@@@@ | [4, 8) 2 |@@@@ | [8, 16) 2 |@@@@ | [16, 32) 2 |@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@@ | @latency[42]: [1] 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 9 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@ | [16, 32) 2 |@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@ | @latency[50]: [0] 35 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 8 |@@@@@@@@@@@ | [2, 4) 6 |@@@@@@@@ | [4, 8) 2 |@@ | @latency[41]: [0] 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 7 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@ | @latency[132]: [0] 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 2 |@@@@@@ | [2, 4) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@ | [32, 64) 3 |@@@@@@@@@@ | [64, 128) 2 |@@@@@@ | [128, 256) 1 |@@@ | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@ | [32K, 64K) 1 |@@@ | @latency[175]: [0] 4 |@@@@@@@@@ | [1] 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@ | @latency[99]: [1] 1 |@@ | [2, 4) 2 |@@@@ | [4, 8) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 5 |@@@@@@@@@@ | @latency[117]: [0] 68 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@ | [2, 4) 3 |@@ | [4, 8) 2 |@ | [8, 16) 1 | | @latency[113]: [0] 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 8 |@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@ | [8, 16) 9 |@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@ | [32, 64) 3 |@@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@@ | @latency[29]: [0] 3 |@@@@@ | [1] 7 |@@@@@@@@@@@ | [2, 4) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9 |@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@ | [64, 128) 0 | | [128, 256) 2 |@@@ | @latency[149]: [0] 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 11 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@ | [32, 64) 1 |@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 |@@ | [16K, 32K) 1 |@@ | @latency[47]: [0] 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 22 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@ | [32, 64) 2 |@@@@ | [64, 128) 0 | | [128, 256) 1 |@@ | [256, 512) 1 |@@ | @latency[39]: [0] 44 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 14 |@@@@@@@@@@@@@@@@ | [2, 4) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@ | [8, 16) 5 |@@@@@ | [16, 32) 2 |@@ | [32, 64) 2 |@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@ | [32K, 64K) 4 |@@@@ | @latency[58]: [0] 1 |@ | [1] 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 6 |@@@@@@@@@@@ | [8, 16) 7 |@@@@@@@@@@@@@ | [16, 32) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 11 |@@@@@@@@@@@@@@@@@@@@ | [128, 256) 2 |@@@ | @latency[133]: [0] 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 91 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 5 |@@ | [4, 8) 5 |@@ | [8, 16) 3 |@ | [16, 32) 11 |@@@@@@ | [32, 64) 0 | | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[97]: [1] 50 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 46 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@ | [8, 16) 4 |@@@@ | [16, 32) 11 |@@@@@@@@@@@ | [32, 64) 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 14 |@@@@@@@@@@@@@@ | [128, 256) 10 |@@@@@@@@@@ | [256, 512) 2 |@@ | @latency[30]: [0] 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 47 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 12 |@@@@@@@@@@@@ | [16, 32) 20 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 9 |@@@@@@@@@ | [64, 128) 6 |@@@@@@ | @latency[48]: [0] 4 |@@@ | [1] 60 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 65 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 43 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 13 |@@@@@@@@@@ | [32, 64) 3 |@@ | [64, 128) 0 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 | | [16K, 32K) 1 | | @latency[131]: [0] 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 81 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 61 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 64 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 41 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 36 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 9 |@@@@@ | [64, 128) 3 |@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 7 |@@@@ | @latency[31]: [0] 20 |@@@ | [1] 345 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 10 |@ | [4, 8) 2 | | [8, 16) 2 | | [16, 32) 2 | | [32, 64) 0 | | [64, 128) 1 | | @latency[112]: [0] 22 |@@@@@@@ | [1] 53 |@@@@@@@@@@@@@@@@@@ | [2, 4) 81 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 153 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 61 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 62 |@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 15 |@@@@@ | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 | | [16K, 32K) 3 |@ | @latency[26]: [0] 10 |@ | [1] 22 |@@@@ | [2, 4) 92 |@@@@@@@@@@@@@@@@@@ | [4, 8) 261 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 122 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 172 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 | | @latency[13]: [0] 6 | | [1] 52 |@@@@@@@@ | [2, 4) 329 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 180 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 78 |@@@@@@@@@@@@ | [16, 32) 60 |@@@@@@@@@ | [32, 64) 7 |@ | @latency[24]: [0] 20 |@@@ | [1] 17 |@@@ | [2, 4) 128 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 272 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 100 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 223 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 3 | | [64, 128) 2 | | @latency[25]: [0] 34 |@@@@@@ | [1] 14 |@@ | [2, 4) 133 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 289 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 108 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 203 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 | | @latency[51]: [0] 38 |@@@@@@@@@ | [1] 84 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 104 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 167 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 146 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 212 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 55 |@@@@@@@@@@@@@ | [64, 128) 1 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[79]: [0] 5 | | [1] 81 |@@@@@@@@@@@@@@@ | [2, 4) 125 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 273 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 158 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 211 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 42 |@@@@@@@@ | [64, 128) 3 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[18]: [1] 5 | | [2, 4) 1056 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 523 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 289 |@@@@@@@@@@@@@@ | [16, 32) 67 |@@@ | [32, 64) 2 | | @latency[20]: [0] 28 |@ | [1] 28 |@ | [2, 4) 1157 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 547 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 303 |@@@@@@@@@@@@@ | [16, 32) 90 |@@@@ | [32, 64) 5 | | @latency[16]: [0] 38 |@ | [1] 73 |@@@ | [2, 4) 1094 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 685 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 403 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 75 |@@@ | [32, 64) 6 | | @latency[23]: [0] 3 | | [1] 12 | | [2, 4) 163 |@@@@@@ | [4, 8) 1253 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 456 |@@@@@@@@@@@@@@@@@@ | [16, 32) 682 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1004 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 11 | | @latency[19]: [0] 6 | | [1] 10 | | [2, 4) 806 |@@@@@@@@@@@@@@@ | [4, 8) 227 |@@@@ | [8, 16) 2655 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 110 |@@ | [32, 64) 1 | | @latency[60]: [0] 8 | | [1] 354 |@@@@@@@@ | [2, 4) 1386 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2193 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1051 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 738 |@@@@@@@@@@@@@@@@@ | [32, 64) 162 |@@@ | [64, 128) 5 | | [128, 256) 4 | | @latency[21]: [1] 2 | | [2, 4) 896 |@@@@@@@@@@ | [4, 8) 267 |@@@ | [8, 16) 4576 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 179 |@@ | [32, 64) 3 | | @latency[86]: [0] 442 |@@@@@@@@@@ | [1] 1352 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1607 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2159 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1404 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 799 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 367 |@@@@@@@@ | [64, 128) 32 | | [128, 256) 13 | | [256, 512) 1 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | @latency[22]: [1] 10 | | [2, 4) 125 |@@ | [4, 8) 191 |@@@ | [8, 16) 2367 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3018 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2507 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 47 | | @latency[17]: [0] 15 | | [1] 3 | | [2, 4) 2006 |@@@@@@@@@@@@@@ | [4, 8) 516 |@@@ | [8, 16) 7271 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 231 |@ | [32, 64) 8 | | @latency[168]: [0] 7 | | [1] 346 |@@@@ | [2, 4) 1678 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3755 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2992 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2419 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 190 |@@ | [64, 128) 19 | | [128, 256) 2 | | [256, 512) 1 | | @latency[195]: [0] 306 |@@@ | [1] 850 |@@@@@@@@@@ | [2, 4) 1578 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 4116 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1962 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3173 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 683 |@@@@@@@@ | [64, 128) 57 | | [128, 256) 13 | | [256, 512) 2 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 3 | | [8K, 16K) 0 | | [16K, 32K) 3 | | @latency[7]: [0] 310 |@ | [1] 517 |@@ | [2, 4) 10434 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 7147 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4547 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2417 |@@@@@@@@@@@@ | [32, 64) 196 | | [64, 128) 52 | | [128, 256) 14 | | [256, 512) 7 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | @latency[14]: [1] 80 | | [2, 4) 9626 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6700 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 11702 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4871 |@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 44 | | [64, 128) 8 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | [32K, 64K) 1 | | @latency[12]: [0] 7203 |@@@@@@@@@@@@@@@@@@ | [1] 2374 |@@@@@@ | [2, 4) 19921 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 7439 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 1331 |@@@ | [16, 32) 213 | | [32, 64) 44 | | [64, 128) 8 | | @latency[10]: [0] 3288 |@@@@@@ | [1] 8676 |@@@@@@@@@@@@@@@@@ | [2, 4) 18901 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 14891 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 25386 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 5187 |@@@@@@@@@@ | [32, 64) 800 |@ | [64, 128) 307 | | [128, 256) 173 | | [256, 512) 86 | | [512, 1K) 3 | | [1K, 2K) 2 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 | | [16K, 32K) 0 | | [32K, 64K) 0 | | [64K, 128K) 4 | | @latency[3]: [0] 67957 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 66018 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 50051 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 27325 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 18892 |@@@@@@@@@@@@@@ | [16, 32) 9222 |@@@@@@@ | [32, 64) 4148 |@@@ | [64, 128) 1045 | | [128, 256) 308 | | [256, 512) 61 | | [512, 1K) 8 | | [1K, 2K) 1 | | [2K, 4K) 2 | | [4K, 8K) 4 | | [8K, 16K) 6 | | [16K, 32K) 8 | | [32K, 64K) 4 | | [64K, 128K) 5 | | [128K, 256K) 1 | | [256K, 512K) 1 | | @latency[2]: [0] 108819 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 50496 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 42223 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 29628 |@@@@@@@@@@@@@@ | [8, 16) 11831 |@@@@@ | [16, 32) 6213 |@@ | [32, 64) 1031 | | [64, 128) 80 | | [128, 256) 38 | | [256, 512) 14 | | [512, 1K) 7 | | [1K, 2K) 3 | | [2K, 4K) 5 | | [4K, 8K) 27 | | [8K, 16K) 29 | | [16K, 32K) 18 | | [32K, 64K) 11 | | [64K, 128K) 10 | | [128K, 256K) 4 | | [256K, 512K) 1 | | @latency[5]: [0] 11909 |@@@@@ | [1] 114225 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 71522 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 61422 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 59633 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 14133 |@@@@@@ | [32, 64) 9872 |@@@@ | [64, 128) 2765 |@ | [128, 256) 2241 |@ | [256, 512) 1024 | | [512, 1K) 312 | | [1K, 2K) 19 | | [2K, 4K) 4 | | [4K, 8K) 0 | | [8K, 16K) 3 | | [16K, 32K) 6 | | [32K, 64K) 10 | | [64K, 128K) 1 | | [128K, 256K) 0 | | [256K, 512K) 0 | | [512K, 1M) 1 | | @latency[11]: [0] 1578 | | [1] 169309 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 87187 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 94871 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 169783 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 36926 |@@@@@@@@@@@ | [32, 64) 6681 |@@ | [64, 128) 2292 | | [128, 256) 579 | | [256, 512) 204 | | [512, 1K) 19 | | [1K, 2K) 4 | | [2K, 4K) 6 | | [4K, 8K) 2 | | [8K, 16K) 6 | | [16K, 32K) 7 | | [32K, 64K) 3 | | [64K, 128K) 4 | | @latency[4]: [0] 193317 |@@@@@@@@@@@@@ | [1] 113630 |@@@@@@@ | [2, 4) 739466 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 168667 |@@@@@@@@@@@ | [8, 16) 95786 |@@@@@@ | [16, 32) 93329 |@@@@@@ | [32, 64) 14719 |@ | [64, 128) 7369 | | [128, 256) 837 | | [256, 512) 266 | | [512, 1K) 62 | | [1K, 2K) 33 | | [2K, 4K) 54 | | [4K, 8K) 42 | | [8K, 16K) 44 | | [16K, 32K) 66 | | [32K, 64K) 37 | | [64K, 128K) 16 | | [128K, 256K) 8 | | [256K, 512K) 0 | | [512K, 1M) 1 | | @latency[15]: [0] 508 | | [1] 4327 | | [2, 4) 430874 |@@@@@@@@@@@@ | [4, 8) 124120 |@@@ | [8, 16) 1787521 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 63796 |@ | [32, 64) 524 | | [64, 128) 22 | | [128, 256) 2 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[8]: [0] 584308 |@@@@@@@@@@@@@@ | [1] 443309 |@@@@@@@@@@@ | [2, 4) 2063669 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 156282 |@@@ | [8, 16) 20652 | | [16, 32) 6855 | | [32, 64) 1313 | | [64, 128) 884 | | [128, 256) 622 | | [256, 512) 169 | | [512, 1K) 31 | | [1K, 2K) 6 | | [2K, 4K) 5 | | [4K, 8K) 6 | | [8K, 16K) 6 | | [16K, 32K) 4 | | [32K, 64K) 2 | | [64K, 128K) 3 | | @latency[9]: [0] 894796 |@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 486187 |@@@@@@@@@@@@@ | [2, 4) 1877811 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 156087 |@@@@ | [8, 16) 31616 | | [16, 32) 7720 | | [32, 64) 1114 | | [64, 128) 810 | | [128, 256) 543 | | [256, 512) 126 | | [512, 1K) 48 | | [1K, 2K) 9 | | [2K, 4K) 16 | | [4K, 8K) 3 | | [8K, 16K) 4 | | [16K, 32K) 8 | | [32K, 64K) 5 | | [64K, 128K) 4 | | @latency[6]: [0] 8012 | | [1] 10671 | | [2, 4) 1391104 |@@@@@@@@@@@@@@@@@ | [4, 8) 503559 |@@@@@@ | [8, 16) 4052554 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 584287 |@@@@@@@ | [32, 64) 12544 | | [64, 128) 10657 | | [128, 256) 92 | | [256, 512) 37 | | [512, 1K) 27 | | [1K, 2K) 22 | | [2K, 4K) 4 | | [4K, 8K) 2 | | [8K, 16K) 0 | | [16K, 32K) 7 | | [32K, 64K) 1 | | @latency[1]: [0] 2277406 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 4059318 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 438970 |@@@@@ | [4, 8) 108420 |@ | [8, 16) 36024 | | [16, 32) 10383 | | [32, 64) 121655 |@ | [64, 128) 43412 | | [128, 256) 24389 | | [256, 512) 9581 | | [512, 1K) 3594 | | [1K, 2K) 494 | | [2K, 4K) 76 | | [4K, 8K) 25 | | [8K, 16K) 60 | | [16K, 32K) 112 | | [32K, 64K) 212 | | [64K, 128K) 106 | | [128K, 256K) 28 | | [256K, 512K) 9 | | @start[4028125]: 31334045887907374 @start[1745171]: 31334045887940669 @start[4028124]: 31334045888227513 @start[2918069]: 31334045888415144 @start[3463799]: 31334045888503018 @start[3463804]: 31334045888635421 @start[9966]: 31334045888781930 @start[4028173]: 31334045889438844 @start[3370401]: 31334045889856940 @start[3370398]: 31334045889878378 @start[4028169]: 31334045891843092 @start[4028180]: 31334045892304329 @start[4028175]: 31334045894920348 @start[4028191]: 31334045908400969 @start[4028185]: 31334045909469261 @start[4028188]: 31334045915281664 @start[4028184]: 31334045915779230 @start[3591810]: 31334045915940355 @start[4028196]: 31334045916104906 @start[4028204]: 31334045932016324 @start[4028209]: 31334045934042998 @start[800117]: 31334045934208571 @start[4028200]: 31334045934457618 @start[4028199]: 31334045943958160 @start[3145744]: 31334045945983042 @start[3145737]: 31334045945988828 @start[1980386]: 31334045946002711 @start[2057289]: 31334045946002738 @start[3145682]: 31334045946020635 @start[3986472]: 31334045983470640 @start[3986681]: 31334045985006271 @start[4026601]: 31334045985228528 @start[4021973]: 31334045985392300 @start[3986674]: 31334045985435285 @start[1059646]: 31334045985644065 @start[3986485]: 31334045985727032 @start[3974575]: 31334045985989319 @start[4159998]: 31334045987273616 @start[957706]: 31334045988122615 @start[4024828]: 31334046009794884 @start[4024825]: 31334046016054594 @start[3985945]: 31334046016119152 [Sun Jan 11 03:45:40 UTC 2026] respawn: 4: stopped pid 171 with status 0 [Sun Jan 11 03:45:40 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 03:45:41 UTC 2026] respawn: 5: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 163