[Thu Jan 8 03:30:33 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[2175957]: 1 @fd[3145744]: 2 @fd[3145684]: 2 @fd[2175958]: 5 @fd[2175956]: 6 @fd[1980382]: 7 @fd[3145703]: 19 @fd[3946591]: 24 @fd[2671694]: 26 @fd[781482]: 29 @latency[140]: [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[103]: [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[100]: [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[77]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[199]: [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 1 |@@@@@@@@@@@@@@@@@ | @latency[198]: [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[73]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[190]: [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[188]: [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@ | @latency[58]: [1] 1 |@@@@@@@@@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@ | @latency[62]: [1] 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 0 | | [4, 8) 1 |@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 0 | | [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[167]: [4, 8) 1 |@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@@@@@@@@@ | @latency[79]: [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[63]: [0] 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 0 | | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 0 | | [32, 64) 1 |@@@@@@@@@@@@@@@@@ | @latency[69]: [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[45]: [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 0 | | [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[189]: [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[179]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[71]: [1] 1 |@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@ | [8, 16) 1 |@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 0 | | [128, 256) 0 | | [256, 512) 1 |@@@@@@@ | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 |@@@@@@@@@@@@@@ | @latency[68]: [1] 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@ | @latency[41]: [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@ | [16, 32) 0 | | [32, 64) 1 |@@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@@@@ | @latency[180]: [2, 4) 1 |@@@ | [4, 8) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@ | @latency[197]: [1] 4 |@@@@@@@@@@@@@@ | [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@ | @latency[43]: [0] 1 |@@@ | [1] 2 |@@@@@@ | [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@ | @latency[56]: [0] 7 |@@@@@@@@@@@@@@@@@@@ | [1] 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@ | [8, 16) 2 |@@@@@ | [16, 32) 1 |@@ | @latency[46]: [2, 4) 5 |@@@@@@@@@@@@@@@@ | [4, 8) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@ | [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 5 |@@@@@@@@@@@@@@@@ | [64, 128) 7 |@@@@@@@@@@@@@@@@@@@@@@ | [128, 256) 2 |@@@@@@ | @latency[72]: [0] 25 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 11 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@ | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 |@@ | [8K, 16K) 1 |@@ | @latency[47]: [2, 4) 8 |@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@ | [8, 16) 8 |@@@@@@@@@@@@@@@ | [16, 32) 25 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 8 |@@@@@@@@@@@@@@@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 |@ | [16K, 32K) 1 |@ | @latency[32]: [1] 10 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 6 |@@@@@@@@@@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 |@@ | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 2 |@@@@ | @latency[60]: [0] 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 22 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 8 |@@@@@@@@@@@@@ | [32, 64) 3 |@@@@@ | [64, 128) 1 |@ | @latency[29]: [0] 7 |@@@@@@ | [1] 18 |@@@@@@@@@@@@@@@@@ | [2, 4) 16 |@@@@@@@@@@@@@@@ | [4, 8) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 54 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 14 |@@@@@@@@@@@@@ | [32, 64) 6 |@@@@@ | [64, 128) 1 | | [128, 256) 3 |@@ | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 1 | | @latency[51]: [0] 89 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 29 |@@@@@@@@@@@@@@@@ | [2, 4) 24 |@@@@@@@@@@@@@@ | [4, 8) 8 |@@@@ | [8, 16) 10 |@@@@@ | [16, 32) 4 |@@ | [32, 64) 2 |@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 |@ | @latency[74]: [1] 152 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 13 |@@@@ | [4, 8) 3 |@ | [8, 16) 1 | | [16, 32) 1 | | [32, 64) 1 | | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 1 | | @latency[33]: [0] 3 |@@ | [1] 6 |@@@@@ | [2, 4) 61 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 47 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 47 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 21 |@@@@@@@@@@@@@@@@@ | [32, 64) 7 |@@@@@ | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[52]: [0] 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 38 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 49 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 63 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4 |@@@ | [32, 64) 2 |@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 1 | | @latency[38]: [1] 94 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 8 |@@@@ | [4, 8) 91 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 11 |@@@@@@ | [16, 32) 16 |@@@@@@@@ | [32, 64) 7 |@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[59]: [0] 2 |@ | [1] 63 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 40 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 60 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 9 |@@@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[75]: [0] 418 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 115 |@@@@@@@@@@@@@@ | [2, 4) 107 |@@@@@@@@@@@@@ | [4, 8) 7 | | [8, 16) 2 | | [16, 32) 1 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 1 | | @latency[27]: [1] 4 | | [2, 4) 12 |@ | [4, 8) 438 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 467 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9 |@ | [32, 64) 5 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 1 | | @latency[40]: [0] 61 |@@@@ | [1] 701 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 267 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 8 | | [8, 16) 4 | | [16, 32) 6 | | [32, 64) 2 | | [64, 128) 3 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 2 | | @latency[44]: [0] 4 | | [1] 950 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 141 |@@@@@@@ | [4, 8) 25 |@ | [8, 16) 8 | | [16, 32) 1 | | [32, 64) 0 | | [64, 128) 1 | | @latency[67]: [0] 1 | | [1] 1304 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 159 |@@@@@@ | [4, 8) 29 |@ | [8, 16) 2 | | @latency[22]: [0] 249 |@@@@@@@@@@@@@@@ | [1] 125 |@@@@@@@ | [2, 4) 157 |@@@@@@@@@@ | [4, 8) 133 |@@@@@@@@ | [8, 16) 58 |@@@ | [16, 32) 815 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 200 |@@@@@@@@@@@@ | [64, 128) 7 | | @latency[55]: [0] 1 | | [1] 973 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 717 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 127 |@@@@@@ | [8, 16) 15 | | [16, 32) 10 | | [32, 64) 4 | | [64, 128) 0 | | [128, 256) 1 | | @latency[48]: [0] 242 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 342 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 422 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 485 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 425 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 50 |@@@@@ | [32, 64) 7 | | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 1 | | @latency[24]: [0] 56 |@@@ | [1] 68 |@@@@ | [2, 4) 391 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 842 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 252 |@@@@@@@@@@@@@@@ | [16, 32) 748 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 158 |@@@@@@@@@ | [64, 128) 2 | | @latency[26]: [0] 410 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 248 |@@@@@@@@@@@@@@@ | [2, 4) 453 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 841 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 300 |@@@@@@@@@@@@@@@@@@ | [16, 32) 643 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 89 |@@@@@ | [64, 128) 9 | | [128, 256) 1 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 3 | | [8K, 16K) 2 | | @latency[120]: [0] 1 | | [1] 2742 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 198 |@@@ | [4, 8) 61 |@ | [8, 16) 0 | | [16, 32) 3 | | [32, 64) 0 | | [64, 128) 1 | | @latency[123]: [0] 1 | | [1] 2810 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 394 |@@@@@@@ | [4, 8) 17 | | [8, 16) 5 | | [16, 32) 3 | | [32, 64) 0 | | [64, 128) 1 | | @latency[42]: [0] 62 |@@ | [1] 387 |@@@@@@@@@@@@@@ | [2, 4) 1383 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1174 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 341 |@@@@@@@@@@@@ | [16, 32) 49 |@ | [32, 64) 5 | | [64, 128) 3 | | [128, 256) 0 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | @latency[57]: [0] 28 |@ | [1] 292 |@@@@@@@@@@ | [2, 4) 387 |@@@@@@@@@@@@@@ | [4, 8) 739 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 791 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1412 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 172 |@@@@@@ | [64, 128) 7 | | [128, 256) 4 | | @latency[35]: [0] 109 |@@@@ | [1] 377 |@@@@@@@@@@@@@ | [2, 4) 1286 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1409 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 552 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 115 |@@@@ | [32, 64) 9 | | [64, 128) 1 | | [128, 256) 1 | | @latency[36]: [0] 297 |@@@@@@@@@@@@@@@@@ | [1] 879 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 590 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 865 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 645 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 773 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 206 |@@@@@@@@@@@@ | [64, 128) 6 | | [128, 256) 2 | | @latency[61]: [0] 2 | | [1] 148 |@@@@ | [2, 4) 838 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1705 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 728 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 735 |@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 486 |@@@@@@@@@@@@@@ | [64, 128) 12 | | [128, 256) 3 | | [256, 512) 0 | | [512, 1K) 2 | | @latency[64]: [0] 929 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 1111 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 984 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1134 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 464 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 44 |@@ | [32, 64) 5 | | [64, 128) 3 | | [128, 256) 2 | | [256, 512) 1 | | @latency[54]: [0] 720 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 1408 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1035 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1265 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 570 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 76 |@@ | [32, 64) 12 | | [64, 128) 4 | | [128, 256) 5 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 1 | | @latency[37]: [0] 361 |@@@@@@@@@@@@@@@@ | [1] 786 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 720 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1122 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 860 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 958 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 368 |@@@@@@@@@@@@@@@@@ | [64, 128) 14 | | [128, 256) 3 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 1 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 3 | | [32K, 64K) 2 | | @latency[49]: [0] 7 | | [1] 3155 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1581 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 465 |@@@@@@@ | [8, 16) 92 |@ | [16, 32) 63 |@ | [32, 64) 38 | | [64, 128) 8 | | [128, 256) 10 | | @latency[50]: [0] 640 |@@@@@@@@@@@@@@@@@@@@ | [1] 1609 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1170 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1245 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 606 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 119 |@@@ | [32, 64) 40 |@ | [64, 128) 6 | | [128, 256) 8 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 1 | | [4K, 8K) 2 | | @latency[34]: [0] 55 |@ | [1] 493 |@@@@@@@@@@@@@@@@@ | [2, 4) 971 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1470 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1205 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1439 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 246 |@@@@@@@@ | [64, 128) 19 | | [128, 256) 5 | | [256, 512) 1 | | @latency[21]: [0] 2 | | [1] 17 | | [2, 4) 222 |@@ | [4, 8) 269 |@@ | [8, 16) 419 |@@@@ | [16, 32) 5078 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 22 | | @latency[25]: [0] 93 |@@ | [1] 1547 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1369 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2072 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 266 |@@@@@@ | [16, 32) 620 |@@@@@@@@@@@@@@@ | [32, 64) 72 |@ | [64, 128) 3 | | [128, 256) 0 | | [256, 512) 1 | | @latency[87]: [0] 243 |@@@@@@@@@ | [1] 696 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1132 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1384 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1353 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 618 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 756 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 67 |@@ | [128, 256) 3 | | [256, 512) 4 | | [512, 1K) 0 | | [1K, 2K) 2 | | @latency[20]: [0] 37 | | [1] 139 |@@ | [2, 4) 3565 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2000 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 929 |@@@@@@@@@@@@@ | [16, 32) 483 |@@@@@@@ | [32, 64) 10 | | [64, 128) 2 | | [128, 256) 2 | | @latency[19]: [0] 1034 |@@@@@@@@@@@@@@@@@@ | [1] 1527 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1275 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 498 |@@@@@@@@ | [8, 16) 300 |@@@@@ | [16, 32) 2952 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 16 | | [64, 128) 1 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[39]: [0] 769 |@@@@@@@@@@@@@@@@@@ | [1] 2128 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1336 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1699 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 940 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 649 |@@@@@@@@@@@@@@@ | [32, 64) 211 |@@@@@ | [64, 128) 17 | | [128, 256) 7 | | [256, 512) 3 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 4 | | [32K, 64K) 3 | | @latency[16]: [0] 185 |@@ | [1] 356 |@@@@@ | [2, 4) 3383 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2513 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1656 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 312 |@@@@ | [32, 64) 30 | | @latency[30]: [0] 148 |@@@ | [1] 578 |@@@@@@@@@@@@@ | [2, 4) 1426 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2273 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1955 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1901 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 153 |@@@ | [64, 128) 12 | | [128, 256) 2 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 | | [8K, 16K) 1 | | @latency[13]: [0] 7303 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 98 | | [2, 4) 681 |@@@@ | [4, 8) 331 |@@ | [8, 16) 174 |@ | [16, 32) 161 |@ | [32, 64) 13 | | [64, 128) 2 | | @latency[31]: [0] 696 |@@@@@@@@@@@@@ | [1] 2148 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2465 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2698 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1262 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 738 |@@@@@@@@@@@@@@ | [32, 64) 108 |@@ | [64, 128) 20 | | [128, 256) 12 | | [256, 512) 4 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 2 | | [16K, 32K) 0 | | [32K, 64K) 1 | | @latency[10]: [0] 1204 |@@@@@@@@@@@@@ | [1] 4503 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2366 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1213 |@@@@@@@@@@@@@@ | [8, 16) 1305 |@@@@@@@@@@@@@@@ | [16, 32) 350 |@@@@ | [32, 64) 28 | | [64, 128) 24 | | [128, 256) 7 | | [256, 512) 6 | | @latency[70]: [0] 682 |@@@@@ | [1] 6140 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2063 |@@@@@@@@@@@@@@@@@ | [4, 8) 1121 |@@@@@@@@@ | [8, 16) 1894 |@@@@@@@@@@@@@@@@ | [16, 32) 778 |@@@@@@ | [32, 64) 257 |@@ | [64, 128) 30 | | [128, 256) 10 | | [256, 512) 0 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 1 | | @latency[596]: [0] 1 | | [1] 11451 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1814 |@@@@@@@@ | [4, 8) 263 |@ | [8, 16) 45 | | [16, 32) 11 | | [32, 64) 3 | | [64, 128) 1 | | [128, 256) 1 | | @latency[53]: [0] 3615 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 3489 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2522 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1968 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2223 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 731 |@@@@@@@@@@ | [32, 64) 79 |@ | [64, 128) 12 | | [128, 256) 1 | | [256, 512) 1 | | @latency[605]: [0] 1 | | [1] 13974 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1273 |@@@@ | [4, 8) 136 | | [8, 16) 19 | | [16, 32) 2 | | [32, 64) 4 | | [64, 128) 6 | | [128, 256) 4 | | @latency[28]: [0] 10 | | [1] 48 | | [2, 4) 118 | | [4, 8) 11306 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4745 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 42 | | [32, 64) 4 | | @latency[17]: [0] 38 | | [1] 79 | | [2, 4) 715 |@@@@ | [4, 8) 500 |@@@ | [8, 16) 7973 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 7391 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 23 | | @latency[23]: [0] 1368 |@@@@@@@@ | [1] 1125 |@@@@@@ | [2, 4) 1072 |@@@@@@ | [4, 8) 1394 |@@@@@@@@ | [8, 16) 1866 |@@@@@@@@@@@ | [16, 32) 4444 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 8446 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 930 |@@@@@ | [128, 256) 2 | | @latency[18]: [0] 2475 |@@@@@@@@@@@@ | [1] 6088 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 10341 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5869 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3700 |@@@@@@@@@@@@@@@@@@ | [16, 32) 679 |@@@ | [32, 64) 20 | | [64, 128) 12 | | [128, 256) 3 | | @latency[169]: [0] 16 | | [1] 1345 |@@@@@@@@@ | [2, 4) 3914 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7652 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6897 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 7477 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2276 |@@@@@@@@@@@@@@@ | [64, 128) 59 | | [128, 256) 20 | | [256, 512) 0 | | [512, 1K) 3 | | [1K, 2K) 1 | | @latency[194]: [0] 1601 |@@@@@@@@@@ | [1] 3753 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5421 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7925 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 8321 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 5611 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 5595 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 319 |@ | [128, 256) 50 | | [256, 512) 17 | | [512, 1K) 3 | | [1K, 2K) 2 | | [2K, 4K) 2 | | [4K, 8K) 3 | | [8K, 16K) 4 | | [16K, 32K) 7 | | @latency[7]: [0] 652 |@ | [1] 1314 |@@ | [2, 4) 24233 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 24059 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6882 |@@@@@@@@@@@@@@ | [16, 32) 11452 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 840 |@ | [64, 128) 109 | | [128, 256) 17 | | [256, 512) 3 | | [512, 1K) 3 | | [1K, 2K) 1 | | @latency[11]: [0] 2801 |@@@@ | [1] 16768 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 11805 |@@@@@@@@@@@@@@@@@ | [4, 8) 13518 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 34657 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 5581 |@@@@@@@@ | [32, 64) 985 |@ | [64, 128) 368 | | [128, 256) 73 | | [256, 512) 34 | | [512, 1K) 6 | | [1K, 2K) 1 | | @latency[12]: [0] 39808 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 17489 |@@@@@@@@@@@@@@@@@ | [2, 4) 52210 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 30219 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3352 |@@@ | [16, 32) 1312 |@ | [32, 64) 107 | | [64, 128) 11 | | [128, 256) 1 | | [256, 512) 1 | | @latency[14]: [1] 22 | | [2, 4) 5665 |@@ | [4, 8) 5165 |@@ | [8, 16) 101432 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 32562 |@@@@@@@@@@@@@@@@ | [32, 64) 290 | | [64, 128) 23 | | [128, 256) 10 | | [256, 512) 3 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 10 | | [32K, 64K) 8 | | @latency[5]: [0] 3403 |@@@ | [1] 15341 |@@@@@@@@@@@@@@@ | [2, 4) 22763 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 21821 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 51530 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 39901 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 3961 |@@@ | [64, 128) 934 | | [128, 256) 857 | | [256, 512) 320 | | [512, 1K) 213 | | [1K, 2K) 13 | | [2K, 4K) 3 | | [4K, 8K) 2 | | @latency[9]: [0] 191522 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 51821 |@@@@@@@@@@@@@@ | [2, 4) 66038 |@@@@@@@@@@@@@@@@@ | [4, 8) 58457 |@@@@@@@@@@@@@@@ | [8, 16) 42899 |@@@@@@@@@@@ | [16, 32) 23734 |@@@@@@ | [32, 64) 2538 | | [64, 128) 148 | | [128, 256) 26 | | [256, 512) 8 | | [512, 1K) 13 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 3 | | [32K, 64K) 1 | | @latency[3]: [0] 177068 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 231787 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 169027 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 55883 |@@@@@@@@@@@@ | [8, 16) 40760 |@@@@@@@@@ | [16, 32) 15602 |@@@ | [32, 64) 5483 |@ | [64, 128) 2739 | | [128, 256) 836 | | [256, 512) 127 | | [512, 1K) 16 | | [1K, 2K) 9 | | [2K, 4K) 8 | | [4K, 8K) 11 | | [8K, 16K) 12 | | [16K, 32K) 16 | | [32K, 64K) 2 | | @latency[2]: [0] 2806504 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 295365 |@@@@@ | [2, 4) 72095 |@ | [4, 8) 103490 |@ | [8, 16) 42430 | | [16, 32) 24953 | | [32, 64) 5019 | | [64, 128) 270 | | [128, 256) 166 | | [256, 512) 52 | | [512, 1K) 20 | | [1K, 2K) 9 | | [2K, 4K) 12 | | [4K, 8K) 51 | | [8K, 16K) 79 | | [16K, 32K) 106 | | [32K, 64K) 1 | | @latency[4]: [0] 301409 |@@@@@@@@@@@ | [1] 376330 |@@@@@@@@@@@@@@ | [2, 4) 802814 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1322351 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 283741 |@@@@@@@@@@@ | [16, 32) 319248 |@@@@@@@@@@@@ | [32, 64) 99901 |@@@ | [64, 128) 32573 |@ | [128, 256) 4312 | | [256, 512) 3436 | | [512, 1K) 2811 | | [1K, 2K) 1644 | | [2K, 4K) 33 | | [4K, 8K) 57 | | [8K, 16K) 63 | | [16K, 32K) 111 | | [32K, 64K) 0 | | [64K, 128K) 0 | | [128K, 256K) 1 | | @latency[15]: [0] 1671 | | [1] 10272 | | [2, 4) 463305 |@@@@@@@@ | [4, 8) 170141 |@@@ | [8, 16) 2695617 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1813235 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 5545 | | [64, 128) 79 | | [128, 256) 10 | | [256, 512) 6 | | [512, 1K) 4 | | @latency[6]: [0] 25164 | | [1] 36742 | | [2, 4) 2415516 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 1019148 |@@@@@@@@ | [8, 16) 6422356 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4955818 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 63019 | | [64, 128) 75292 | | [128, 256) 357 | | [256, 512) 121 | | [512, 1K) 166 | | [1K, 2K) 428 | | [2K, 4K) 55 | | [4K, 8K) 38 | | [8K, 16K) 17 | | @latency[8]: [0] 2283863 |@@@@@@@@@@@@@@@@@@@ | [1] 1472427 |@@@@@@@@@@@@ | [2, 4) 6230507 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4553983 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 520554 |@@@@ | [16, 32) 40939 | | [32, 64) 7574 | | [64, 128) 3248 | | [128, 256) 3120 | | [256, 512) 925 | | [512, 1K) 233 | | [1K, 2K) 26 | | [2K, 4K) 11 | | [4K, 8K) 13 | | [8K, 16K) 19 | | [16K, 32K) 21 | | [32K, 64K) 0 | | [64K, 128K) 0 | | [128K, 256K) 1 | | @latency[1]: [0] 3938884 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 6268222 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4368326 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1936670 |@@@@@@@@@@@@@@@@ | [8, 16) 186265 |@ | [16, 32) 66963 | | [32, 64) 35329 | | [64, 128) 4567 | | [128, 256) 6468 | | [256, 512) 1895 | | [512, 1K) 2673 | | [1K, 2K) 2320 | | [2K, 4K) 266 | | [4K, 8K) 65 | | [8K, 16K) 25 | | [16K, 32K) 5 | | [32K, 64K) 47 | | [64K, 128K) 161 | | [128K, 256K) 7 | | @start[2175958]: 31077936589663255 @start[2175956]: 31077936591851405 @start[2671694]: 31077936591974287 @start[2175957]: 31077936608636231 @start[781482]: 31077936611545588 @start[3946591]: 31077936611569044 @start[3145744]: 31077936612235253 @start[3145703]: 31077936612248792 @start[3145684]: 31077936612331022 @start[1980382]: 31077936627892380 [Thu Jan 8 04:37:11 UTC 2026] respawn: 0: stopped pid 24 with status 0 [Thu Jan 8 04:37:11 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 8 04:37:13 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[1694609]: 1 @fd[2178168]: 1 @fd[2761489]: 1 @fd[2178193]: 1 @fd[3145744]: 2 @fd[1694615]: 2 @fd[3145684]: 2 @fd[2178116]: 3 @fd[2178187]: 5 @fd[2178188]: 6 @fd[2178178]: 6 @fd[2178181]: 6 @fd[2178114]: 6 @fd[9964]: 6 @fd[2178196]: 6 @fd[3946591]: 8 @fd[1059647]: 8 @fd[9966]: 9 @fd[9973]: 9 @fd[4159998]: 9 @fd[2176502]: 11 @fd[2176505]: 11 @fd[2176582]: 11 @fd[3145703]: 19 @fd[9977]: 22 @fd[262368]: 23 @fd[2671694]: 24 @fd[1059646]: 24 @fd[1065787]: 29 @latency[27]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[32]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[36]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[50]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16]: [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[81]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 0 | | [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[14]: [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 0 | | [64, 128) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[80]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 0 | | [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[62]: [8, 16) 1 |@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[21]: [1] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[72]: [0] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[26]: [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 0 | | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@@@@@@@@ | @latency[47]: [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[33]: [1] 1 |@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[22]: [1] 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@ | @latency[12]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[51]: [2, 4) 1 |@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@ | [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@ | @latency[23]: [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[71]: [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[79]: [1] 1 |@@@@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[29]: [0] 1 |@@@@@@@@@@ | [1] 0 | | [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@ | @latency[69]: [1] 2 |@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@ | @latency[35]: [0] 1 |@@@@ | [1] 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2 |@@@@@@@@ | [4, 8) 1 |@@@@ | [8, 16) 0 | | [16, 32) 1 |@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@@ | @latency[31]: [1] 1 |@@@@@ | [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@ | @latency[17]: [1] 4 |@@@@@@@@@@@@@@@@@ | [2, 4) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@ | [8, 16) 0 | | [16, 32) 2 |@@@@@@@@ | @latency[70]: [1] 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@@@@ | @latency[25]: [0] 1 |@@@ | [1] 1 |@@@ | [2, 4) 6 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[34]: [0] 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 4 |@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@ | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@@ | @latency[24]: [1] 1 |@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@ | [4, 8) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@ | [16, 32) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[19]: [1] 9 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@@@@@ | [8, 16) 1 |@@ | [16, 32) 1 |@@ | @latency[30]: [1] 25 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 8 |@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@ | [8, 16) 4 |@@@@@@@@ | [16, 32) 1 |@@ | @latency[13]: [2, 4) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@ | [16, 32) 1 |@@ | @latency[20]: [0] 4 |@@@@@@@@@ | [1] 2 |@@@@ | [2, 4) 1 |@@ | [4, 8) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@ | [16, 32) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@ | @latency[3]: [0] 86 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 19 |@@@@@@@@@@@ | [2, 4) 14 |@@@@@@@@ | [4, 8) 28 |@@@@@@@@@@@@@@@@ | [8, 16) 14 |@@@@@@@@ | [16, 32) 5 |@@@ | [32, 64) 4 |@@ | @latency[10]: [1] 90 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 50 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 17 |@@@@@@@@@ | [8, 16) 18 |@@@@@@@@@@ | [16, 32) 6 |@@@ | [32, 64) 1 | | @latency[7]: [0] 21 |@@@@@@@ | [1] 6 |@@ | [2, 4) 42 |@@@@@@@@@@@@@@ | [4, 8) 54 |@@@@@@@@@@@@@@@@@@ | [8, 16) 37 |@@@@@@@@@@@@ | [16, 32) 156 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 21 |@@@@@@@ | [64, 128) 1 | | [128, 256) 3 |@ | @latency[48]: [0] 3 |@ | [1] 9 |@@@ | [2, 4) 29 |@@@@@@@@@@@ | [4, 8) 95 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 75 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 130 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 44 |@@@@@@@@@@@@@@@@@ | @latency[15]: [0] 5 |@@ | [1] 18 |@@@@@@@@ | [2, 4) 101 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 70 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 112 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 77 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 | | [64, 128) 1 | | @latency[5]: [0] 53 |@@@@@@@@@@@@@@@@@@@ | [1] 84 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 96 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 138 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 42 |@@@@@@@@@@@@@@@ | [16, 32) 20 |@@@@@@@ | [32, 64) 11 |@@@@ | [64, 128) 5 |@ | [128, 256) 1 | | [256, 512) 1 | | @latency[77]: [0] 24 |@@@@@@@@@ | [1] 135 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 65 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 105 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 94 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 98 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 89 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 3 |@ | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[2]: [0] 645 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 330 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 135 |@@@@@@@@@@ | [4, 8) 183 |@@@@@@@@@@@@@@ | [8, 16) 55 |@@@@ | [16, 32) 30 |@@ | [32, 64) 16 |@ | [64, 128) 3 | | [128, 256) 0 | | [256, 512) 1 | | @latency[11]: [0] 1821 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 215 |@@@@@@ | [2, 4) 383 |@@@@@@@@@@ | [4, 8) 116 |@@@ | [8, 16) 27 | | [16, 32) 14 | | [32, 64) 3 | | @latency[9]: [0] 56 |@@@ | [1] 217 |@@@@@@@@@@@@@@ | [2, 4) 801 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 441 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 627 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 434 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 44 |@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 | | @latency[6]: [0] 659 |@@ | [1] 1594 |@@@@@@ | [2, 4) 13636 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1497 |@@@@@ | [8, 16) 2865 |@@@@@@@@@@ | [16, 32) 276 |@ | [32, 64) 45 | | [64, 128) 45 | | [128, 256) 2 | | [256, 512) 1 | | @latency[8]: [0] 10147 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2306 |@@@@@@@@@@@ | [2, 4) 8143 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 416 |@@ | [8, 16) 318 |@ | [16, 32) 89 | | [32, 64) 61 | | [64, 128) 5 | | [128, 256) 4 | | [256, 512) 3 | | @latency[1]: [0] 15732 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 3851 |@@@@@@@@@@@@ | [2, 4) 4012 |@@@@@@@@@@@@@ | [4, 8) 1187 |@@@ | [8, 16) 992 |@@@ | [16, 32) 645 |@@ | [32, 64) 45 | | [64, 128) 39 | | [128, 256) 2 | | [256, 512) 3 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 13 | | @latency[4]: [0] 15137 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 15966 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 5501 |@@@@@@@@@@@@@@@@@ | [4, 8) 1595 |@@@@@ | [8, 16) 307 | | [16, 32) 1079 |@@@ | [32, 64) 263 | | [64, 128) 539 |@ | [128, 256) 56 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @start[2178178]: 31078036406315269 @start[9977]: 31078036406464994 @start[262368]: 31078036406559683 @start[2178116]: 31078036406633060 @start[2761489]: 31078036406687194 @start[2178181]: 31078036406763630 @start[2178114]: 31078036406765614 @start[2176505]: 31078036406821477 @start[1059647]: 31078036406990927 @start[2178168]: 31078036407024591 @start[2176502]: 31078036407133789 @start[2176582]: 31078036407463809 @start[9973]: 31078036407498121 @start[3946591]: 31078036407575408 @start[9966]: 31078036407593253 @start[9964]: 31078036407645077 @start[1694615]: 31078036407738557 @start[1694609]: 31078036407794757 @start[4159998]: 31078036408691825 @start[2178187]: 31078036418126770 @start[2178196]: 31078036419070109 @start[2178188]: 31078036419310804 @start[2178193]: 31078036430890168 @start[2671694]: 31078036432619596 @start[3145744]: 31078036432998518 @start[3145703]: 31078036433006354 @start[1059646]: 31078036433027388 @start[1065787]: 31078036433028955 @start[3145684]: 31078036433046127 [Thu Jan 8 04:38:51 UTC 2026] respawn: 0: stopped pid 24 with status 0 [Thu Jan 8 04:38:51 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 8 04:38:53 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[2222290]: 1 @fd[2222304]: 1 @fd[3145684]: 2 @fd[3145744]: 2 @fd[2222292]: 3 @fd[2222294]: 3 @fd[2222298]: 4 @fd[781482]: 7 @fd[3145737]: 19 @fd[262380]: 24 @fd[1065787]: 24 @fd[2671694]: 26 @fd[1065790]: 29 @latency[47]: [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[99]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 0 | | [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[48]: [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[90]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[34]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@ | @latency[38]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[80]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[96]: [4, 8) 1 |@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@ | @latency[72]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@ | @latency[82]: [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[58]: [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@@@@@@@@@@@@ | @latency[66]: [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@ | @latency[81]: [1] 1 |@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 1 |@@@@@@@@@@ | @latency[79]: [0] 1 |@@@@@@@ | [1] 0 | | [2, 4) 0 | | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@ | @latency[41]: [1] 2 |@@@@@@@@@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@ | @latency[59]: [1] 2 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 1 |@@@@@@@@@@ | @latency[36]: [0] 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@ | [2, 4) 1 |@@@ | [4, 8) 0 | | [8, 16) 1 |@@@ | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@ | @latency[35]: [1] 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@ | [8, 16) 1 |@@@@ | [16, 32) 1 |@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@@ | @latency[32]: [2, 4) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@@@@ | @latency[42]: [2, 4) 3 |@@@@@@@@@@@@@@@ | [4, 8) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 3 |@@@@@@@@@@@@@@@ | @latency[29]: [1] 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 3 |@@@@@@@@@@@@@@@@@@@ | @latency[39]: [0] 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@ | [2, 4) 2 |@@@ | [4, 8) 0 | | [8, 16) 3 |@@@@@ | [16, 32) 0 | | [32, 64) 1 |@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@ | @latency[33]: [1] 9 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@@@@@ | [8, 16) 2 |@@@@ | [16, 32) 1 |@@ | [32, 64) 1 |@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@ | @latency[27]: [0] 1 |@@ | [1] 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@ | [16, 32) 1 |@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 1 |@@ | @latency[52]: [1] 3 |@@@@@ | [2, 4) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 10 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[37]: [1] 1 |@ | [2, 4) 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 19 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@ | [16, 32) 0 | | [32, 64) 4 |@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 3 |@@@ | [32K, 64K) 1 |@ | @latency[70]: [0] 1 | | [1] 73 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 27 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 9 |@@@@@@ | [8, 16) 16 |@@@@@@@@@@@ | [16, 32) 8 |@@@@@ | [32, 64) 3 |@@ | @latency[22]: [1] 2 | | [2, 4) 10 |@@ | [4, 8) 19 |@@@@@ | [8, 16) 18 |@@@@ | [16, 32) 11 |@@@ | [32, 64) 189 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 13 |@@@ | @latency[50]: [0] 75 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 98 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 44 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 41 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 32 |@@@@@@@@@@@@@@@@ | [16, 32) 8 |@@@@ | [32, 64) 1 | | @latency[91]: [0] 51 |@@@@@@@@@@@@ | [1] 206 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 194 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 137 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 56 |@@@@@@@@@@@@@@ | [16, 32) 13 |@@@ | [32, 64) 16 |@@@@ | @latency[13]: [0] 26 |@@ | [1] 366 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 552 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 191 |@@@@@@@@@@@@@@@@@ | [8, 16) 99 |@@@@@@@@@ | [16, 32) 50 |@@@@ | [32, 64) 1 | | @latency[30]: [0] 4 | | [1] 78 |@@@@@@@@@ | [2, 4) 375 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 433 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 248 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 304 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 42 |@@@@@ | @latency[26]: [0] 49 |@@@@ | [1] 36 |@@ | [2, 4) 151 |@@@@@@@@@@@@ | [4, 8) 630 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 148 |@@@@@@@@@@@@ | [16, 32) 504 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 9 | | @latency[31]: [0] 475 |@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 994 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 36 |@ | [4, 8) 9 | | [8, 16) 10 | | [16, 32) 4 | | [32, 64) 6 | | [64, 128) 1 | | @latency[24]: [0] 41 |@@@@ | [1] 25 |@@ | [2, 4) 210 |@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 493 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 165 |@@@@@@@@@@@@@@@@@ | [16, 32) 499 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 116 |@@@@@@@@@@@@ | [64, 128) 3 | | @latency[25]: [0] 49 |@@@@ | [1] 55 |@@@@ | [2, 4) 177 |@@@@@@@@@@@@@@ | [4, 8) 619 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 132 |@@@@@@@@@@@ | [16, 32) 510 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 14 |@ | [64, 128) 1 | | @latency[89]: [0] 135 |@@@@@@@@@ | [1] 711 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 199 |@@@@@@@@@@@@@@ | [4, 8) 278 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 253 |@@@@@@@@@@@@@@@@@@ | [16, 32) 212 |@@@@@@@@@@@@@@@ | [32, 64) 97 |@@@@@@@ | [64, 128) 1 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 1 | | @latency[16]: [1] 68 |@ | [2, 4) 2858 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1540 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 833 |@@@@@@@@@@@@@@@ | [16, 32) 301 |@@@@@ | [32, 64) 5 | | @latency[20]: [0] 9 | | [1] 86 |@ | [2, 4) 3300 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1179 |@@@@@@@@@@@@@@@@@@ | [8, 16) 772 |@@@@@@@@@@@@ | [16, 32) 293 |@@@@ | [32, 64) 6 | | @latency[18]: [0] 64 | | [1] 364 |@@@@@ | [2, 4) 3366 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1752 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1056 |@@@@@@@@@@@@@@@@ | [16, 32) 298 |@@@@ | [32, 64) 6 | | [64, 128) 1 | | @latency[10]: [0] 901 |@@@@@@@@@@ | [1] 4529 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1607 |@@@@@@@@@@@@@@@@@@ | [4, 8) 995 |@@@@@@@@@@@ | [8, 16) 478 |@@@@@ | [16, 32) 254 |@@ | [32, 64) 10 | | [64, 128) 1 | | @latency[19]: [0] 8 | | [1] 21 | | [2, 4) 635 |@@@ | [4, 8) 225 |@ | [8, 16) 8506 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 157 | | [32, 64) 6 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | [32K, 64K) 1 | | @latency[11]: [0] 3157 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 2965 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3978 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2308 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 536 |@@@@@@@ | [16, 32) 120 |@ | [32, 64) 11 | | [64, 128) 12 | | [128, 256) 3 | | [256, 512) 1 | | @latency[23]: [0] 119 | | [1] 71 | | [2, 4) 277 |@ | [4, 8) 1369 |@@@@@@@@@ | [8, 16) 862 |@@@@@ | [16, 32) 3694 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 7550 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 401 |@@ | @latency[21]: [0] 6 | | [1] 5 | | [2, 4) 270 | | [4, 8) 255 | | [8, 16) 14286 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 268 | | [32, 64) 6 | | @latency[28]: [0] 15 | | [1] 62 | | [2, 4) 144 | | [4, 8) 9095 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6316 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 83 | | [32, 64) 2 | | @latency[17]: [1] 10 | | [2, 4) 595 |@ | [4, 8) 345 |@ | [8, 16) 16613 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 314 | | [32, 64) 1 | | @latency[60]: [0] 12 | | [1] 1641 |@@@@@@@@@@@ | [2, 4) 5471 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7649 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5323 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 7528 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1258 |@@@@@@@@ | [64, 128) 23 | | [128, 256) 11 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[88]: [0] 1830 |@@@@@@@@@@@ | [1] 4415 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 6127 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8395 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6071 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5794 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 4607 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 216 |@ | [128, 256) 29 | | [256, 512) 18 | | [512, 1K) 2 | | [1K, 2K) 1 | | [2K, 4K) 1 | | [4K, 8K) 2 | | [8K, 16K) 2 | | [16K, 32K) 9 | | @latency[7]: [0] 626 |@ | [1] 429 |@ | [2, 4) 21589 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 12872 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3265 |@@@@@@@ | [16, 32) 9865 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 498 |@ | [64, 128) 106 | | [128, 256) 48 | | [256, 512) 8 | | [512, 1K) 2 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | @latency[3]: [0] 16845 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 17859 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 7059 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 9368 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4027 |@@@@@@@@@@@ | [16, 32) 8502 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1948 |@@@@@ | [64, 128) 428 |@ | [128, 256) 709 |@@ | [256, 512) 8 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 1 | | [4K, 8K) 2 | | [8K, 16K) 3 | | [16K, 32K) 18 | | [32K, 64K) 2 | | @latency[5]: [0] 4267 |@@@@ | [1] 9299 |@@@@@@@@@ | [2, 4) 11944 |@@@@@@@@@@@@ | [4, 8) 11818 |@@@@@@@@@@@ | [8, 16) 51384 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 10681 |@@@@@@@@@@ | [32, 64) 968 | | [64, 128) 230 | | [128, 256) 58 | | [256, 512) 39 | | [512, 1K) 52 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 | | [8K, 16K) 2 | | [16K, 32K) 2 | | @latency[12]: [0] 23133 |@@@@@@@@@@@@@@@@@@@@@@@ | [1] 4958 |@@@@ | [2, 4) 51596 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 20756 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2264 |@@ | [16, 32) 1324 |@ | [32, 64) 158 | | [64, 128) 9 | | @latency[14]: [1] 46 | | [2, 4) 5112 |@@ | [4, 8) 3953 |@@ | [8, 16) 97021 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 36603 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 249 | | [64, 128) 5 | | @latency[9]: [0] 62796 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 33458 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 81849 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 47073 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 43071 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 21784 |@@@@@@@@@@@@@ | [32, 64) 1638 |@ | [64, 128) 46 | | [128, 256) 29 | | [256, 512) 3 | | [512, 1K) 3 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[2]: [0] 69086 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 84547 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 36141 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 95044 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 27008 |@@@@@@@@@@@@@@ | [16, 32) 22450 |@@@@@@@@@@@@ | [32, 64) 2963 |@ | [64, 128) 71 | | [128, 256) 46 | | [256, 512) 35 | | [512, 1K) 8 | | [1K, 2K) 11 | | [2K, 4K) 20 | | [4K, 8K) 57 | | [8K, 16K) 94 | | [16K, 32K) 141 | | @latency[4]: [0] 183145 |@@@@@@@@@@@ | [1] 123313 |@@@@@@@ | [2, 4) 538916 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 847458 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 132158 |@@@@@@@@ | [16, 32) 290907 |@@@@@@@@@@@@@@@@@ | [32, 64) 48364 |@@ | [64, 128) 31034 |@ | [128, 256) 2311 | | [256, 512) 273 | | [512, 1K) 95 | | [1K, 2K) 193 | | [2K, 4K) 10 | | [4K, 8K) 47 | | [8K, 16K) 56 | | [16K, 32K) 134 | | [32K, 64K) 1 | | @latency[15]: [0] 1113 | | [1] 5882 | | [2, 4) 60949 | | [4, 8) 59744 | | [8, 16) 3626248 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 205147 |@@ | [32, 64) 1152 | | [64, 128) 18 | | [128, 256) 3 | | @latency[6]: [0] 9131 | | [1] 19817 | | [2, 4) 1582071 |@@@@@@@@@@ | [4, 8) 565872 |@@@ | [8, 16) 7988867 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 890345 |@@@@@ | [32, 64) 20909 | | [64, 128) 159180 |@ | [128, 256) 82 | | [256, 512) 23 | | [512, 1K) 28 | | [1K, 2K) 56 | | [2K, 4K) 16 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 | | @latency[8]: [0] 1436731 |@@@@@@@@@ | [1] 758169 |@@@@ | [2, 4) 8045857 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 779755 |@@@@@ | [8, 16) 296562 |@ | [16, 32) 31387 | | [32, 64) 3425 | | [64, 128) 1953 | | [128, 256) 2356 | | [256, 512) 575 | | [512, 1K) 52 | | [1K, 2K) 2 | | [2K, 4K) 2 | | [4K, 8K) 10 | | [8K, 16K) 9 | | [16K, 32K) 15 | | @latency[1]: [0] 2125290 |@@@@@@@@@@@@@ | [1] 8318986 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 975723 |@@@@@@ | [4, 8) 133134 | | [8, 16) 63062 | | [16, 32) 34262 | | [32, 64) 1315 | | [64, 128) 780 | | [128, 256) 653 | | [256, 512) 211 | | [512, 1K) 108 | | [1K, 2K) 248 | | [2K, 4K) 15 | | [4K, 8K) 3 | | [8K, 16K) 8 | | [16K, 32K) 1 | | @start[2222294]: 31081942569747624 @start[2222292]: 31081942571008191 @start[2222290]: 31081942573149935 @start[2671694]: 31081942603943423 @start[781482]: 31081942604010348 @start[2222298]: 31081942604104429 @start[2222304]: 31081942619759099 @start[262380]: 31081942621436550 @start[3145744]: 31081942622195644 @start[3145737]: 31081942622204372 @start[1065787]: 31081942622225708 @start[1065790]: 31081942622231185 @start[3145684]: 31081942622311478 [Thu Jan 8 05:43:57 UTC 2026] respawn: 0: stopped pid 24 with status 0 [Thu Jan 8 05:43:57 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 8 05:43:58 UTC 2026] respawn: 1: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9