[Fri Jan 9 03:30:36 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3393497]: 1 @fd[3145744]: 2 @fd[3145688]: 2 @fd[4159998]: 4 @fd[3145705]: 19 @fd[1980383]: 24 @fd[1065787]: 24 @fd[2671694]: 29 @latency[66]: [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[100]: [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[102]: [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[140]: [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[65]: [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[199]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[43]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[198]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 0 | | [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[188]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[180]: [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@ | @latency[167]: [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@@@@@@@@@@@@ | @latency[78]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@ | @latency[68]: [0] 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@@@@@ | @latency[190]: [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@ | @latency[63]: [0] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[174]: [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@@@@ | @latency[187]: [1] 1 |@@@@ | [2, 4) 2 |@@@@@@@@ | [4, 8) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@ | @latency[41]: [0] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 4 |@@@@@@@@@@@@@ | [4, 8) 1 |@@@ | [8, 16) 1 |@@@ | [16, 32) 1 |@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 2 |@@@@@@ | @latency[61]: [1] 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 |@@@@@@@@@@ | @latency[189]: [1] 1 |@@ | [2, 4) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@ | @latency[42]: [1] 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 6 |@@@@@@@@@@@@@ | [64, 128) 1 |@@ | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@ | [32K, 64K) 1 |@@ | @latency[54]: [0] 40 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 22 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@ | [8, 16) 1 |@ | [16, 32) 8 |@@@@@@@@@@ | @latency[46]: [1] 4 |@@@@@@ | [2, 4) 11 |@@@@@@@@@@@@@@@@ | [4, 8) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 10 |@@@@@@@@@@@@@@@ | [16, 32) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 8 |@@@@@@@@@@@@ | @latency[87]: [1] 1 |@ | [2, 4) 11 |@@@@@@@@@@@@@@ | [4, 8) 36 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 39 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 35 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@ | @latency[58]: [1] 9 |@@@@@@@@@@@@ | [2, 4) 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 38 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 25 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 8 |@@@@@@@@@@ | [64, 128) 2 |@@ | @latency[51]: [0] 102 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 34 |@@@@@@@@@@@@@@@@@ | [2, 4) 12 |@@@@@@ | [4, 8) 5 |@@ | [8, 16) 1 | | @latency[29]: [0] 14 |@@@@@@@@@@@@ | [1] 13 |@@@@@@@@@@@ | [2, 4) 14 |@@@@@@@@@@@@ | [4, 8) 35 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 58 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 11 |@@@@@@@@@ | [32, 64) 4 |@@@ | [64, 128) 0 | | [128, 256) 4 |@@@ | [256, 512) 1 | | @latency[74]: [1] 34 |@@@@@@@@@@@@@@ | [2, 4) 124 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 8 |@@@ | [8, 16) 2 | | [16, 32) 0 | | [32, 64) 1 | | [64, 128) 0 | | [128, 256) 1 | | @latency[62]: [0] 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 25 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 18 |@@@@@@@@@@@@@@@@@ | [4, 8) 53 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 47 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@ | [32, 64) 2 |@ | [64, 128) 0 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | @latency[48]: [0] 1 | | [1] 13 |@@@@ | [2, 4) 150 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 10 |@@@ | [8, 16) 54 |@@@@@@@@@@@@@@@@@@ | [16, 32) 36 |@@@@@@@@@@@@ | [32, 64) 9 |@@@ | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 1 | | @latency[38]: [0] 3 |@ | [1] 58 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 148 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 53 |@@@@@@@@@@@@@@@@@@ | [8, 16) 31 |@@@@@@@@@@ | [16, 32) 10 |@@@ | [32, 64) 3 |@ | [64, 128) 1 | | @latency[56]: [0] 430 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 114 |@@@@@@@@@@@@@ | [2, 4) 119 |@@@@@@@@@@@@@@ | [4, 8) 14 |@ | [8, 16) 12 |@ | [16, 32) 4 | | [32, 64) 1 | | [64, 128) 0 | | [128, 256) 1 | | [256, 512) 1 | | @latency[27]: [0] 1 | | [1] 56 |@@@ | [2, 4) 804 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 37 |@@ | [8, 16) 15 | | [16, 32) 6 | | [32, 64) 2 | | [64, 128) 0 | | [128, 256) 2 | | @latency[40]: [0] 45 |@@ | [1] 79 |@@@@ | [2, 4) 917 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 42 |@@ | [8, 16) 15 | | [16, 32) 2 | | [32, 64) 0 | | [64, 128) 2 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 | | [32K, 64K) 1 | | @latency[44]: [0] 2 | | [1] 851 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 273 |@@@@@@@@@@@@@@@@ | [4, 8) 32 |@ | [8, 16) 7 | | [16, 32) 4 | | [32, 64) 3 | | [64, 128) 0 | | [128, 256) 1 | | @latency[67]: [0] 6 | | [1] 951 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 580 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 87 |@@@@ | [8, 16) 12 | | [16, 32) 5 | | [32, 64) 2 | | [64, 128) 4 | | @latency[45]: [0] 261 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 427 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 394 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 524 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 337 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 29 |@@ | [32, 64) 15 |@ | [64, 128) 7 | | [128, 256) 0 | | [256, 512) 1 | | [512, 1K) 1 | | @latency[31]: [0] 435 |@@@@@@@@@@@@@@@@@@@@ | [1] 1084 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 148 |@@@@@@@ | [4, 8) 171 |@@@@@@@@ | [8, 16) 81 |@@@ | [16, 32) 24 |@ | [32, 64) 17 | | [64, 128) 17 | | [128, 256) 15 | | [256, 512) 5 | | [512, 1K) 1 | | @latency[24]: [0] 37 |@@ | [1] 48 |@@@ | [2, 4) 344 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 701 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 222 |@@@@@@@@@@@@@@@@ | [16, 32) 699 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 82 |@@@@@@ | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 1 | | @latency[120]: [0] 2 | | [1] 2860 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 230 |@@@@ | [4, 8) 137 |@@ | [8, 16) 8 | | [16, 32) 6 | | [32, 64) 3 | | [64, 128) 0 | | [128, 256) 1 | | @latency[37]: [0] 53 |@@ | [1] 317 |@@@@@@@@@@@@@ | [2, 4) 1137 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1195 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 459 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 171 |@@@@@@@ | [32, 64) 13 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 | | [32K, 64K) 1 | | @latency[123]: [0] 1 | | [1] 2652 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 682 |@@@@@@@@@@@@@ | [4, 8) 121 |@@ | [8, 16) 17 | | [16, 32) 2 | | [32, 64) 2 | | [64, 128) 1 | | @latency[35]: [0] 29 |@ | [1] 342 |@@@@@@@@@@@@@ | [2, 4) 1353 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1311 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 400 |@@@@@@@@@@@@@@@ | [16, 32) 84 |@@@ | [32, 64) 10 | | @latency[57]: [0] 23 | | [1] 296 |@@@@@@@@@@@@ | [2, 4) 397 |@@@@@@@@@@@@@@@@@ | [4, 8) 875 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 823 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1211 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 165 |@@@@@@@ | [64, 128) 10 | | [128, 256) 3 | | @latency[33]: [0] 24 |@ | [1] 357 |@@@@@@@@@@@@@@@ | [2, 4) 536 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 936 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 824 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1217 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 193 |@@@@@@@@ | [64, 128) 11 | | [128, 256) 4 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 | | [16K, 32K) 1 | | @latency[59]: [0] 3 | | [1] 118 |@@@ | [2, 4) 671 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1563 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 938 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 640 |@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 410 |@@@@@@@@@@@@@ | [64, 128) 14 | | [128, 256) 3 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 | | [16K, 32K) 1 | | @latency[64]: [0] 446 |@@@@@@@@@@@@@@@ | [1] 1526 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 880 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1104 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 566 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 113 |@@@ | [32, 64) 37 |@ | [64, 128) 5 | | [128, 256) 3 | | [256, 512) 1 | | @latency[32]: [0] 54 |@ | [1] 442 |@@@@@@@@@@@@ | [2, 4) 1880 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1772 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 762 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 125 |@@@ | [32, 64) 15 | | [64, 128) 0 | | [128, 256) 3 | | @latency[47]: [0] 610 |@@@@@@@@@@@@@@@@@@@@@ | [1] 1501 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 996 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1303 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 566 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 61 |@@ | [32, 64) 13 | | [64, 128) 6 | | [128, 256) 4 | | [256, 512) 1 | | @latency[36]: [0] 295 |@@@@@@@@@@@@@@ | [1] 941 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 599 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1077 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 975 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1018 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 374 |@@@@@@@@@@@@@@@@@@ | [64, 128) 11 | | [128, 256) 4 | | [256, 512) 1 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 1 | | [4K, 8K) 1 | | [8K, 16K) 1 | | @latency[49]: [0] 9 | | [1] 2866 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2165 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 215 |@@@ | [8, 16) 126 |@@ | [16, 32) 74 |@ | [32, 64) 43 | | [64, 128) 8 | | [128, 256) 8 | | @latency[13]: [0] 4144 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 52 | | [2, 4) 625 |@@@@@@@ | [4, 8) 357 |@@@@ | [8, 16) 173 |@@ | [16, 32) 156 |@ | [32, 64) 15 | | [64, 128) 1 | | @latency[21]: [1] 28 | | [2, 4) 195 |@@ | [4, 8) 313 |@@@@ | [8, 16) 3775 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1367 |@@@@@@@@@@@@@@@@@@ | [32, 64) 12 | | @latency[25]: [0] 71 |@ | [1] 2870 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1079 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 969 |@@@@@@@@@@@@@@@@@ | [8, 16) 215 |@@@ | [16, 32) 654 |@@@@@@@@@@@ | [32, 64) 34 | | [64, 128) 2 | | [128, 256) 3 | | @latency[86]: [0] 242 |@@@@@@@@ | [1] 517 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 1062 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1403 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1402 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 621 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 646 |@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 54 |@@ | [128, 256) 7 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 1 | | [4K, 8K) 1 | | [8K, 16K) 1 | | @latency[55]: [0] 581 |@@@@@@@@@@@ | [1] 2595 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1358 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1244 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 548 |@@@@@@@@@@ | [16, 32) 45 | | [32, 64) 14 | | [64, 128) 5 | | [128, 256) 3 | | [256, 512) 1 | | @latency[30]: [0] 72 |@ | [1] 782 |@@@@@@@@@@@@@@@@@ | [2, 4) 2379 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2168 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 747 |@@@@@@@@@@@@@@@@ | [16, 32) 172 |@@@ | [32, 64) 36 | | [64, 128) 15 | | [128, 256) 18 | | [256, 512) 9 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[50]: [0] 524 |@@@@@@@@@@@@@@@ | [1] 1558 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 858 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1192 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1777 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 649 |@@@@@@@@@@@@@@@@@@ | [32, 64) 218 |@@@@@@ | [64, 128) 15 | | [128, 256) 6 | | [256, 512) 2 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 | | @latency[20]: [0] 33 | | [1] 154 |@@ | [2, 4) 3478 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2111 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 958 |@@@@@@@@@@@@@@ | [16, 32) 323 |@@@@ | [32, 64) 5 | | [64, 128) 3 | | [128, 256) 1 | | @latency[70]: [0] 11 | | [1] 5341 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1306 |@@@@@@@@@@@@ | [4, 8) 215 |@@ | [8, 16) 118 |@ | [16, 32) 84 | | [32, 64) 27 | | [64, 128) 9 | | [128, 256) 2 | | @latency[19]: [0] 1199 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 1449 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1197 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 472 |@@@@@@@@@@@ | [8, 16) 2216 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 813 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 6 | | [64, 128) 2 | | @latency[34]: [0] 102 |@@ | [1] 846 |@@@@@@@@@@@@@@@@ | [2, 4) 1931 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2647 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1322 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 507 |@@@@@@@@@ | [32, 64) 34 | | [64, 128) 7 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 2 | | @latency[16]: [0] 169 |@@ | [1] 392 |@@@@@ | [2, 4) 3446 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2611 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1413 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 206 |@@@ | [32, 64) 22 | | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[52]: [0] 3097 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2455 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2745 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 987 |@@@@@@@@@@@@@@@@ | [8, 16) 520 |@@@@@@@@ | [16, 32) 86 |@ | [32, 64) 9 | | [64, 128) 5 | | [128, 256) 4 | | [256, 512) 1 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [8K, 16K) 1 | | [16K, 32K) 1 | | @latency[22]: [0] 7 | | [1] 35 | | [2, 4) 383 |@@@@ | [4, 8) 707 |@@@@@@@@ | [8, 16) 2357 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4373 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 3701 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 58 | | @latency[39]: [0] 1376 |@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 2923 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2335 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2629 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1408 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 808 |@@@@@@@@@@@@@@ | [32, 64) 255 |@@@@ | [64, 128) 11 | | [128, 256) 12 | | [256, 512) 2 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 | | [32K, 64K) 5 | | @latency[10]: [0] 2370 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 4446 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2323 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1122 |@@@@@@@@@@@@@ | [8, 16) 1284 |@@@@@@@@@@@@@@@ | [16, 32) 234 |@@ | [32, 64) 20 | | [64, 128) 21 | | [128, 256) 7 | | [256, 512) 3 | | @latency[26]: [0] 185 |@@ | [1] 756 |@@@@@@@@@@ | [2, 4) 1771 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3712 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3751 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2730 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 216 |@@ | [64, 128) 13 | | [128, 256) 1 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 | | @latency[23]: [0] 2178 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 1145 |@@@@@@@@@@@@@@@@ | [2, 4) 1807 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1682 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1012 |@@@@@@@@@@@@@@ | [16, 32) 2021 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 3524 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 59 | | [128, 256) 5 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 7 | | [8K, 16K) 2 | | [16K, 32K) 1 | | @latency[596]: [0] 1 | | [1] 12838 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1387 |@@@@@ | [4, 8) 469 |@ | [8, 16) 92 | | [16, 32) 16 | | [32, 64) 0 | | [64, 128) 8 | | [128, 256) 4 | | @latency[17]: [0] 8 | | [1] 19 | | [2, 4) 590 |@@ | [4, 8) 387 |@ | [8, 16) 11895 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2062 |@@@@@@@@@ | [32, 64) 18 | | @latency[28]: [0] 2 | | [1] 36 | | [2, 4) 675 |@@@ | [4, 8) 10369 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5132 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 66 | | [32, 64) 2 | | @latency[605]: [0] 1 | | [1] 14503 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1463 |@@@@@ | [4, 8) 599 |@@ | [8, 16) 61 | | [16, 32) 23 | | [32, 64) 4 | | [64, 128) 8 | | [128, 256) 3 | | [256, 512) 1 | | @latency[53]: [0] 6983 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 3334 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5249 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2951 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1542 |@@@@@@@@@@@ | [16, 32) 466 |@@@ | [32, 64) 146 |@ | [64, 128) 16 | | [128, 256) 6 | | [256, 512) 5 | | [512, 1K) 0 | | [1K, 2K) 1 | | @latency[173]: [0] 15 | | [1] 1386 |@@@@@@@ | [2, 4) 4075 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 9553 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6955 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6228 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1315 |@@@@@@@ | [64, 128) 52 | | [128, 256) 7 | | [256, 512) 1 | | @latency[18]: [0] 3672 |@@@@@@@@@@@@@@@ | [1] 8716 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 12361 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 7634 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3196 |@@@@@@@@@@@@@ | [16, 32) 718 |@@@ | [32, 64) 37 | | [64, 128) 7 | | [128, 256) 2 | | [256, 512) 1 | | @latency[195]: [0] 1385 |@@@@@@@ | [1] 4189 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5966 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 9574 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 7312 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5848 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 4074 |@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 215 |@ | [128, 256) 38 | | [256, 512) 13 | | [512, 1K) 1 | | [1K, 2K) 1 | | [2K, 4K) 3 | | [4K, 8K) 1 | | [8K, 16K) 3 | | [16K, 32K) 4 | | @latency[7]: [0] 649 |@ | [1] 1550 |@@@ | [2, 4) 25538 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 25233 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 7374 |@@@@@@@@@@@@@@@ | [16, 32) 11093 |@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1008 |@@ | [64, 128) 94 | | [128, 256) 25 | | [256, 512) 2 | | [512, 1K) 3 | | [1K, 2K) 1 | | [2K, 4K) 1 | | @latency[11]: [0] 2679 |@@@@ | [1] 15941 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 12915 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 13928 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 32414 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 5427 |@@@@@@@@ | [32, 64) 868 |@ | [64, 128) 304 | | [128, 256) 56 | | [256, 512) 20 | | [512, 1K) 4 | | @latency[12]: [0] 36222 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 11067 |@@@@@@@@@@ | [2, 4) 55693 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 31162 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4322 |@@@@ | [16, 32) 1041 | | [32, 64) 101 | | [64, 128) 16 | | @latency[5]: [0] 3367 |@@ | [1] 33325 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 35861 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 30020 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 74384 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 17969 |@@@@@@@@@@@@ | [32, 64) 4099 |@@ | [64, 128) 1191 | | [128, 256) 1162 | | [256, 512) 481 | | [512, 1K) 183 | | [1K, 2K) 17 | | [2K, 4K) 2 | | [4K, 8K) 0 | | [8K, 16K) 1 | | @latency[14]: [0] 1 | | [1] 50 | | [2, 4) 5649 |@ | [4, 8) 7057 |@ | [8, 16) 201749 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 17898 |@@@@ | [32, 64) 184 | | [64, 128) 33 | | [128, 256) 7 | | [256, 512) 2 | | [512, 1K) 3 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 14 | | [32K, 64K) 6 | | @latency[9]: [0] 206901 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 64773 |@@@@@@@@@@@@@@@@ | [2, 4) 84417 |@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 53893 |@@@@@@@@@@@@@ | [8, 16) 36814 |@@@@@@@@@ | [16, 32) 18604 |@@@@ | [32, 64) 1785 | | [64, 128) 103 | | [128, 256) 23 | | [256, 512) 6 | | [512, 1K) 1 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 | | [32K, 64K) 1 | | @latency[3]: [0] 196994 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 228897 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 208842 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 54312 |@@@@@@@@@@@@ | [8, 16) 47062 |@@@@@@@@@@ | [16, 32) 17057 |@@@ | [32, 64) 7791 |@ | [64, 128) 2746 | | [128, 256) 856 | | [256, 512) 141 | | [512, 1K) 20 | | [1K, 2K) 8 | | [2K, 4K) 11 | | [4K, 8K) 8 | | [8K, 16K) 9 | | [16K, 32K) 18 | | [32K, 64K) 2 | | @latency[2]: [0] 2953689 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 164525 |@@ | [2, 4) 94868 |@ | [4, 8) 89404 |@ | [8, 16) 33560 | | [16, 32) 16744 | | [32, 64) 3344 | | [64, 128) 280 | | [128, 256) 74 | | [256, 512) 42 | | [512, 1K) 3 | | [1K, 2K) 10 | | [2K, 4K) 18 | | [4K, 8K) 54 | | [8K, 16K) 68 | | [16K, 32K) 139 | | [32K, 64K) 1 | | @latency[4]: [0] 322002 |@@@@@@@@@@@@ | [1] 377741 |@@@@@@@@@@@@@@@ | [2, 4) 1297913 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 898998 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 250768 |@@@@@@@@@@ | [16, 32) 297242 |@@@@@@@@@@@ | [32, 64) 59557 |@@ | [64, 128) 27082 |@ | [128, 256) 4018 | | [256, 512) 3345 | | [512, 1K) 2706 | | [1K, 2K) 2033 | | [2K, 4K) 55 | | [4K, 8K) 65 | | [8K, 16K) 30 | | [16K, 32K) 131 | | [32K, 64K) 2 | | [64K, 128K) 0 | | [128K, 256K) 1 | | @latency[15]: [0] 1918 | | [1] 9064 | | [2, 4) 473575 |@@@@@@ | [4, 8) 171182 |@@ | [8, 16) 3899533 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 417758 |@@@@@ | [32, 64) 1723 | | [64, 128) 62 | | [128, 256) 7 | | [256, 512) 2 | | @latency[6]: [0] 16581 | | [1] 36549 | | [2, 4) 2527080 |@@@@@@@@@@@@@@ | [4, 8) 1001995 |@@@@@ | [8, 16) 9355383 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1717874 |@@@@@@@@@ | [32, 64) 29510 | | [64, 128) 79709 | | [128, 256) 279 | | [256, 512) 69 | | [512, 1K) 155 | | [1K, 2K) 435 | | [2K, 4K) 56 | | [4K, 8K) 37 | | [8K, 16K) 24 | | [16K, 32K) 1 | | @latency[8]: [0] 2110758 |@@@@@@@@@@@ | [1] 1671137 |@@@@@@@@@ | [2, 4) 9151118 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1714970 |@@@@@@@@@ | [8, 16) 187110 |@ | [16, 32) 33291 | | [32, 64) 4799 | | [64, 128) 3535 | | [128, 256) 2615 | | [256, 512) 522 | | [512, 1K) 93 | | [1K, 2K) 15 | | [2K, 4K) 5 | | [4K, 8K) 10 | | [8K, 16K) 15 | | [16K, 32K) 19 | | @latency[1]: [0] 4517347 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 6893079 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4698249 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 588457 |@@@@ | [8, 16) 155768 |@ | [16, 32) 50068 | | [32, 64) 34589 | | [64, 128) 4339 | | [128, 256) 6341 | | [256, 512) 1743 | | [512, 1K) 2801 | | [1K, 2K) 2760 | | [2K, 4K) 281 | | [4K, 8K) 63 | | [8K, 16K) 31 | | [16K, 32K) 4 | | [32K, 64K) 51 | | [64K, 128K) 152 | | [128K, 256K) 9 | | @start[1980383]: 31164335708160006 @start[3145744]: 31164335708955068 @start[3145705]: 31164335708965790 @start[2671694]: 31164335709062469 @start[1065787]: 31164335709063014 @start[3145688]: 31164335709140641 @start[3393497]: 31164335742408509 @start[4159998]: 31164335742423405 [Fri Jan 9 04:37:10 UTC 2026] respawn: 0: stopped pid 25 with status 0 [Fri Jan 9 04:37:10 UTC 2026] respawn: sleeping 1 seconds... [Fri Jan 9 04:37:12 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[2721855]: 1 @fd[2799695]: 1 @fd[3395812]: 1 @fd[3395787]: 1 @fd[3395809]: 1 @fd[3145682]: 2 @fd[3145744]: 2 @fd[2799701]: 2 @fd[3145684]: 2 @fd[3395732]: 3 @fd[3395795]: 3 @fd[3395788]: 3 @fd[3395801]: 5 @fd[3395806]: 5 @fd[3395816]: 5 @fd[3395818]: 5 @fd[3395807]: 6 @fd[3395802]: 6 @fd[3395793]: 6 @fd[3395821]: 6 @fd[3395826]: 6 @fd[3395745]: 6 @fd[3394148]: 7 @fd[1065787]: 8 @fd[4159998]: 9 @fd[9972]: 9 @fd[9977]: 9 @fd[3394149]: 11 @fd[3394154]: 11 @fd[3146531]: 19 @fd[9975]: 21 @fd[3395517]: 22 @fd[1065788]: 23 @fd[781482]: 23 @fd[1065783]: 24 @fd[1980383]: 24 @fd[262368]: 29 @latency[27]: [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[28]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[47]: [128, 256) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[32]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 0 | | [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16]: [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[80]: [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[79]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[14]: [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 0 | | [64, 128) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [128, 256) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[21]: [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 1 |@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[71]: [1] 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[23]: [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 1 |@@@@@@@@@@@@@@@@@ | [32, 64) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[61]: [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[22]: [1] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 0 | | [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[33]: [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@ | @latency[50]: [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 0 | | [8, 16) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@ | @latency[87]: [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@@@@@@@ | @latency[69]: [1] 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@@@@ | @latency[70]: [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@@ | @latency[78]: [0] 1 |@@@@@@@@ | [1] 0 | | [2, 4) 1 |@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@ | @latency[68]: [1] 1 |@@@@@ | [2, 4) 1 |@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@ | @latency[29]: [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 0 | | [32, 64) 1 |@@@@@@@ | [64, 128) 1 |@@@@@@@ | [128, 256) 1 |@@@@@@@ | @latency[17]: [2, 4) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 2 |@@@@@@@@ | @latency[35]: [0] 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 4 |@@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@ | [4, 8) 0 | | [8, 16) 0 | | [16, 32) 1 |@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@@ | @latency[30]: [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@ | [16, 32) 1 |@@@@@ | [32, 64) 1 |@@@@@ | @latency[26]: [1] 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 5 |@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@ | [8, 16) 1 |@@@ | [16, 32) 1 |@@@ | @latency[34]: [0] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2 |@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@ | [16, 32) 1 |@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@@@ | @latency[25]: [0] 3 |@@@@@@@@@@@@@ | [1] 2 |@@@@@@@@ | [2, 4) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@ | @latency[37]: [0] 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@@ | [2, 4) 1 |@@@ | [4, 8) 1 |@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@@ | @latency[10]: [2, 4) 1 |@@@ | [4, 8) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@ | @latency[24]: [0] 2 |@@@@@@@@ | [1] 2 |@@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@ | @latency[19]: [0] 6 |@@@@@@@@@@@@@@@@@@ | [1] 0 | | [2, 4) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@ | @latency[13]: [2, 4) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@ | [16, 32) 1 |@@ | @latency[20]: [0] 7 |@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 5 |@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@ | [4, 8) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 3 |@@@@@@@@@@ | [16, 32) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@ | @latency[12]: [0] 16 |@@@@@@@ | [1] 117 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 19 |@@@@@@@@ | [4, 8) 9 |@@@@ | [8, 16) 7 |@@@ | [16, 32) 2 | | @latency[3]: [0] 39 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 19 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 9 |@@@@@@@@@ | [32, 64) 2 |@@ | [64, 128) 2 |@@ | [128, 256) 1 |@ | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@ | @latency[7]: [0] 17 |@@@@@ | [1] 9 |@@ | [2, 4) 51 |@@@@@@@@@@@@@@@@ | [4, 8) 73 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 53 |@@@@@@@@@@@@@@@@@ | [16, 32) 160 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 25 |@@@@@@@@ | [64, 128) 1 | | @latency[48]: [0] 1 | | [1] 15 |@@@@@@@ | [2, 4) 47 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 109 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 62 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 100 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 60 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[31]: [0] 171 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 201 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 15 |@@@ | [4, 8) 4 |@ | [8, 16) 2 | | [16, 32) 2 | | [32, 64) 1 | | @latency[15]: [0] 12 |@@@@@ | [1] 24 |@@@@@@@@@@ | [2, 4) 116 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 94 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 89 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 66 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 0 | | [64, 128) 1 | | @latency[5]: [0] 44 |@@@@@@@@@@@@@@@@ | [1] 108 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 105 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 143 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 22 |@@@@@@@@ | [16, 32) 22 |@@@@@@@@ | [32, 64) 14 |@@@@@ | [64, 128) 7 |@@ | [128, 256) 1 | | @latency[75]: [0] 73 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 95 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 67 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 113 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 96 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 67 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 99 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 4 |@ | [128, 256) 1 | | [256, 512) 1 | | @latency[2]: [0] 664 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 318 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 147 |@@@@@@@@@@@ | [4, 8) 148 |@@@@@@@@@@@ | [8, 16) 68 |@@@@@ | [16, 32) 27 |@@ | [32, 64) 17 |@ | [64, 128) 4 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[11]: [0] 1292 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 559 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 277 |@@@@@@@@@@@ | [4, 8) 73 |@@ | [8, 16) 33 |@ | [16, 32) 21 | | [32, 64) 2 | | [64, 128) 1 | | @latency[6]: [0] 240 | | [1] 858 |@@@ | [2, 4) 13815 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2374 |@@@@@@@@ | [8, 16) 2928 |@@@@@@@@@@@ | [16, 32) 277 |@ | [32, 64) 38 | | [64, 128) 52 | | [128, 256) 0 | | [256, 512) 1 | | @latency[8]: [0] 11841 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1406 |@@@@@@ | [2, 4) 7667 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 462 |@@ | [8, 16) 275 |@ | [16, 32) 89 | | [32, 64) 65 | | [64, 128) 8 | | [128, 256) 6 | | [256, 512) 3 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 | | [16K, 32K) 3 | | @latency[9]: [0] 16664 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 5376 |@@@@@@@@@@@@@@@@ | [2, 4) 1592 |@@@@ | [4, 8) 625 |@ | [8, 16) 1140 |@@@ | [16, 32) 551 |@ | [32, 64) 81 | | [64, 128) 2 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[4]: [0] 13915 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 18110 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 11466 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4067 |@@@@@@@@@@@ | [8, 16) 595 |@ | [16, 32) 1405 |@@@@ | [32, 64) 313 | | [64, 128) 910 |@@ | [128, 256) 81 | | [256, 512) 2 | | @latency[1]: [0] 47280 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 5286 |@@@@@ | [2, 4) 5580 |@@@@@@ | [4, 8) 1279 |@ | [8, 16) 1247 |@ | [16, 32) 721 | | [32, 64) 43 | | [64, 128) 48 | | [128, 256) 48 | | [256, 512) 20 | | @start[3394148]: 31164435586383735 @start[3395517]: 31164435586453929 @start[3395732]: 31164435586751309 @start[2721855]: 31164435586839284 @start[3395745]: 31164435586996095 @start[3394149]: 31164435587508214 @start[9975]: 31164435587536472 @start[3394154]: 31164435587640147 @start[9972]: 31164435587691563 @start[1065787]: 31164435587720714 @start[9977]: 31164435587739080 @start[2799701]: 31164435588159919 @start[2799695]: 31164435588199086 @start[4159998]: 31164435588718545 @start[3395793]: 31164435596115057 @start[3395795]: 31164435597318015 @start[3395788]: 31164435597569475 @start[3395787]: 31164435598596071 @start[3395806]: 31164435607361458 @start[3395801]: 31164435609485830 @start[781482]: 31164435611774737 @start[3395802]: 31164435612630721 @start[3395807]: 31164435612884258 @start[3395809]: 31164435613159701 @start[3395818]: 31164435623240615 @start[3395816]: 31164435625380416 @start[3395826]: 31164435630045278 @start[1065788]: 31164435630275318 @start[3395821]: 31164435630504009 @start[3395812]: 31164435643466531 @start[1065783]: 31164435644858403 @start[3145682]: 31164435644925947 @start[3145744]: 31164435645161677 @start[3146531]: 31164435645166154 @start[1980383]: 31164435645187070 @start[262368]: 31164435645188721 @start[3145684]: 31164435645202382 [Fri Jan 9 04:38:50 UTC 2026] respawn: 0: stopped pid 24 with status 0 [Fri Jan 9 04:38:50 UTC 2026] respawn: sleeping 1 seconds... [Fri Jan 9 04:38:52 UTC 2026] respawn: 0: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9 Attaching 3 probes... Tracing ksys_write() latency... Hit Ctrl-C to end. @fd[3438836]: 1 @fd[2799695]: 1 @fd[1973661]: 1 @fd[3145684]: 2 @fd[3145744]: 2 @fd[2799701]: 2 @fd[3438750]: 3 @fd[3438827]: 5 @fd[3438835]: 6 @fd[3438826]: 6 @fd[3438748]: 6 @fd[262368]: 7 @fd[1065783]: 8 @fd[4159998]: 9 @fd[9965]: 9 @fd[1137448]: 9 @fd[3290528]: 9 @fd[3396408]: 11 @fd[3396412]: 11 @fd[3146531]: 19 @fd[2671694]: 24 @fd[781482]: 29 @latency[99]: [32, 64) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[91]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[38]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 1 |@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[34]: [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@ | @latency[30]: [32, 64) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 0 | | [128, 256) 1 |@@@@@@@@@@ | @latency[81]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 0 | | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@ | @latency[79]: [0] 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 0 | | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[71]: [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[90]: [2, 4) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[80]: [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[48]: [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@@@ | @latency[78]: [1] 1 |@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[41]: [1] 1 |@@@@@ | [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@@@@@@@@@ | @latency[36]: [0] 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 3 |@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@ | [4, 8) 1 |@@@@ | [8, 16) 0 | | [16, 32) 1 |@@@@ | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 0 | | [32K, 64K) 1 |@@@@ | @latency[35]: [0] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 1 |@@@ | [2, 4) 1 |@@@ | [4, 8) 0 | | [8, 16) 2 |@@@@@@ | [16, 32) 0 | | [32, 64) 0 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 1 |@@@ | @latency[89]: [1] 2 |@@@@@@@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@ | @latency[32]: [0] 1 |@@@@@ | [1] 0 | | [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@ | @latency[62]: [0] 1 |@@@@@@ | [1] 1 |@@@@@@ | [2, 4) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@ | @latency[42]: [1] 2 |@@@@@@@@@@@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@@@@ | [64, 128) 1 |@@@@@@@@ | [128, 256) 1 |@@@@@@@@ | @latency[87]: [2, 4) 1 |@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | @latency[29]: [0] 1 |@@@@@ | [1] 2 |@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@@@@@ | @latency[51]: [1] 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@@ | @latency[39]: [0] 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2 |@@@@@@ | [2, 4) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@ | [8, 16) 3 |@@@@@@@@@@ | [16, 32) 1 |@@@ | [32, 64) 1 |@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 2 |@@@@@@ | @latency[33]: [1] 8 |@@@@@@@@@@@@@@@@@@ | [2, 4) 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@@@@@ | [8, 16) 2 |@@@@ | [16, 32) 2 |@@@@ | [32, 64) 1 |@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 |@@ | @latency[27]: [0] 1 |@ | [1] 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 8 |@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@ | [8, 16) 1 |@ | [16, 32) 1 |@ | [32, 64) 0 | | [64, 128) 1 |@ | @latency[52]: [1] 7 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[47]: [0] 3 |@@@@@@ | [1] 2 |@@@@ | [2, 4) 11 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 22 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 9 |@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@@ | @latency[37]: [1] 2 |@ | [2, 4) 54 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 14 |@@@@@@@@@@@@@ | [8, 16) 6 |@@@@@ | [16, 32) 0 | | [32, 64) 4 |@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 4 |@@@ | @latency[70]: [0] 1 | | [1] 1 | | [2, 4) 89 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 13 |@@@@@@@ | [8, 16) 16 |@@@@@@@@@ | [16, 32) 9 |@@@@@ | [32, 64) 8 |@@@@ | @latency[22]: [0] 1 | | [1] 2 | | [2, 4) 19 |@@@@@@@@ | [4, 8) 11 |@@@@ | [8, 16) 13 |@@@@@ | [16, 32) 11 |@@@@ | [32, 64) 119 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 7 |@@@ | @latency[50]: [0] 95 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 80 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 29 |@@@@@@@@@@@@@@@ | [4, 8) 13 |@@@@@@@ | [8, 16) 15 |@@@@@@@@ | @latency[13]: [1] 26 |@@ | [2, 4) 555 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 231 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 63 |@@@@@ | [16, 32) 39 |@@@ | [32, 64) 2 | | @latency[31]: [0] 592 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 885 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 33 |@ | [4, 8) 7 | | [8, 16) 8 | | [16, 32) 2 | | [32, 64) 3 | | @latency[24]: [0] 34 |@@ | [1] 25 |@@ | [2, 4) 305 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 419 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 97 |@@@@@@@@ | [16, 32) 614 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 53 |@@@@ | @latency[25]: [0] 39 |@@@ | [1] 53 |@@@@ | [2, 4) 157 |@@@@@@@@@@@@ | [4, 8) 643 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 131 |@@@@@@@@@@ | [16, 32) 524 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 6 | | @latency[92]: [0] 557 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 603 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 287 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 473 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 270 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 198 |@@@@@@@@@@@@@@@@@ | [32, 64) 131 |@@@@@@@@@@@ | [64, 128) 9 | | [128, 256) 1 | | @latency[26]: [0] 90 |@@@@ | [1] 116 |@@@@@@ | [2, 4) 576 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 963 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 359 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 793 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 40 |@@ | [64, 128) 2 | | @latency[16]: [1] 98 |@@ | [2, 4) 2478 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1803 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1151 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 62 |@ | [32, 64) 4 | | @latency[20]: [0] 5 | | [1] 98 |@ | [2, 4) 2967 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1475 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 992 |@@@@@@@@@@@@@@@@@ | [16, 32) 97 |@ | [32, 64) 3 | | @latency[10]: [0] 703 |@@@@@@@@@@@@ | [1] 2906 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1221 |@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 735 |@@@@@@@@@@@@@ | [8, 16) 352 |@@@@@@ | [16, 32) 136 |@@ | [32, 64) 2 | | @latency[18]: [0] 119 |@ | [1] 341 |@@@@@ | [2, 4) 3198 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1813 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1297 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 145 |@@ | [32, 64) 4 | | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 0 | | [8K, 16K) 0 | | [16K, 32K) 1 | | @latency[19]: [0] 8 | | [1] 17 | | [2, 4) 499 |@@@ | [4, 8) 230 |@ | [8, 16) 8619 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 32 | | [32, 64) 23 | | @latency[11]: [0] 3714 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 2845 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3170 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3132 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 318 |@@@@ | [16, 32) 74 |@ | [32, 64) 67 | | [64, 128) 0 | | [128, 256) 1 | | [256, 512) 1 | | @latency[23]: [0] 179 |@ | [1] 75 | | [2, 4) 777 |@@@@@ | [4, 8) 900 |@@@@@@ | [8, 16) 906 |@@@@@@ | [16, 32) 4838 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 6743 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 73 | | @latency[21]: [0] 43 | | [1] 5 | | [2, 4) 177 | | [4, 8) 247 | | [8, 16) 14549 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 78 | | [32, 64) 16 | | @latency[28]: [0] 8 | | [1] 43 | | [2, 4) 178 | | [4, 8) 10752 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 4643 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 55 | | [32, 64) 1 | | @latency[17]: [1] 12 | | [2, 4) 520 |@ | [4, 8) 338 |@ | [8, 16) 16833 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 71 | | [32, 64) 16 | | @latency[60]: [0] 17 | | [1] 1620 |@@@@@@@@@@ | [2, 4) 4245 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7917 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 5619 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 7855 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1294 |@@@@@@@@ | [64, 128) 44 | | [128, 256) 13 | | [256, 512) 2 | | [512, 1K) 0 | | [1K, 2K) 1 | | @latency[86]: [0] 1825 |@@@@@@@@@@ | [1] 3630 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5686 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8704 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 6437 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6132 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 4619 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 241 |@ | [128, 256) 42 | | [256, 512) 12 | | [512, 1K) 4 | | [1K, 2K) 1 | | [2K, 4K) 0 | | [4K, 8K) 4 | | [8K, 16K) 5 | | [16K, 32K) 8 | | @latency[7]: [0] 597 |@ | [1] 449 |@ | [2, 4) 16634 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 16504 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3831 |@@@@@@@@@@@ | [16, 32) 9468 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 514 |@ | [64, 128) 113 | | [128, 256) 47 | | [256, 512) 10 | | [512, 1K) 2 | | [1K, 2K) 0 | | [2K, 4K) 0 | | [4K, 8K) 2 | | @latency[3]: [0] 12250 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 20143 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 7337 |@@@@@@@@@@@@@@@@@@ | [4, 8) 9997 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5230 |@@@@@@@@@@@@@ | [16, 32) 8613 |@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2022 |@@@@@ | [64, 128) 613 |@ | [128, 256) 782 |@@ | [256, 512) 13 | | [512, 1K) 0 | | [1K, 2K) 3 | | [2K, 4K) 0 | | [4K, 8K) 3 | | [8K, 16K) 8 | | [16K, 32K) 17 | | @latency[5]: [0] 3287 |@@@ | [1] 8650 |@@@@@@@@@ | [2, 4) 10072 |@@@@@@@@@@ | [4, 8) 10928 |@@@@@@@@@@@ | [8, 16) 49867 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 10192 |@@@@@@@@@@ | [32, 64) 590 | | [64, 128) 204 | | [128, 256) 37 | | [256, 512) 33 | | [512, 1K) 53 | | [1K, 2K) 1 | | [2K, 4K) 1 | | @latency[12]: [0] 26101 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 3369 |@@@@ | [2, 4) 42117 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 29391 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2668 |@@@ | [16, 32) 1416 |@ | [32, 64) 117 | | [64, 128) 8 | | @latency[14]: [1] 46 | | [2, 4) 4784 |@@ | [4, 8) 4501 |@@ | [8, 16) 116686 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 16812 |@@@@@@@ | [32, 64) 176 | | [64, 128) 3 | | @latency[9]: [0] 13657 |@@@@@@@@@@ | [1] 24639 |@@@@@@@@@@@@@@@@@@ | [2, 4) 68510 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 38043 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 40674 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 20060 |@@@@@@@@@@@@@@@ | [32, 64) 1674 |@ | [64, 128) 69 | | [128, 256) 21 | | [256, 512) 5 | | [512, 1K) 7 | | @latency[2]: [0] 55760 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [1] 91861 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 39357 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 102405 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 23355 |@@@@@@@@@@@ | [16, 32) 21947 |@@@@@@@@@@@ | [32, 64) 2851 |@ | [64, 128) 123 | | [128, 256) 49 | | [256, 512) 23 | | [512, 1K) 9 | | [1K, 2K) 14 | | [2K, 4K) 20 | | [4K, 8K) 52 | | [8K, 16K) 92 | | [16K, 32K) 156 | | [32K, 64K) 1 | | @latency[4]: [0] 153820 |@@@@@@@@@ | [1] 117386 |@@@@@@@ | [2, 4) 555471 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 817084 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 123304 |@@@@@@@ | [16, 32) 290121 |@@@@@@@@@@@@@@@@@@ | [32, 64) 44813 |@@ | [64, 128) 31165 |@ | [128, 256) 2634 | | [256, 512) 237 | | [512, 1K) 186 | | [1K, 2K) 192 | | [2K, 4K) 15 | | [4K, 8K) 45 | | [8K, 16K) 53 | | [16K, 32K) 152 | | [32K, 64K) 1 | | @latency[15]: [0] 1133 | | [1] 4898 | | [2, 4) 57371 | | [4, 8) 67166 | | [8, 16) 3670192 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 151058 |@@ | [32, 64) 1764 | | [64, 128) 22 | | [128, 256) 7 | | [256, 512) 0 | | [512, 1K) 2 | | @latency[6]: [0] 12880 | | [1] 27952 | | [2, 4) 1392977 |@@@@@@@@@ | [4, 8) 666610 |@@@@ | [8, 16) 7735334 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1159134 |@@@@@@@ | [32, 64) 16511 | | [64, 128) 196349 |@ | [128, 256) 85 | | [256, 512) 24 | | [512, 1K) 37 | | [1K, 2K) 67 | | [2K, 4K) 8 | | [4K, 8K) 0 | | [8K, 16K) 2 | | @latency[8]: [0] 1248776 |@@@@@@@ | [1] 861756 |@@@@@ | [2, 4) 8378186 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 536319 |@@@ | [8, 16) 263438 |@ | [16, 32) 30643 | | [32, 64) 3871 | | [64, 128) 2570 | | [128, 256) 2376 | | [256, 512) 415 | | [512, 1K) 71 | | [1K, 2K) 41 | | [2K, 4K) 10 | | [4K, 8K) 13 | | [8K, 16K) 22 | | [16K, 32K) 22 | | [32K, 64K) 1 | | @latency[1]: [0] 1895101 |@@@@@@@@@@@@ | [1] 7994595 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1224799 |@@@@@@@ | [4, 8) 164326 |@ | [8, 16) 67843 | | [16, 32) 31309 | | [32, 64) 1183 | | [64, 128) 855 | | [128, 256) 711 | | [256, 512) 163 | | [512, 1K) 113 | | [1K, 2K) 250 | | [2K, 4K) 14 | | [4K, 8K) 1 | | [8K, 16K) 1 | | @start[3438750]: 31168340339201903 @start[1973661]: 31168340339313680 @start[3396412]: 31168340339324083 @start[3438748]: 31168340339475404 @start[9965]: 31168340339599820 @start[3396408]: 31168340339826871 @start[1137448]: 31168340339870022 @start[1065783]: 31168340340032123 @start[3290528]: 31168340340118482 @start[2799701]: 31168340340356202 @start[2799695]: 31168340340382721 @start[4159998]: 31168340340869614 @start[3438827]: 31168340349888597 @start[3438835]: 31168340351487589 @start[3438826]: 31168340351720674 @start[3438836]: 31168340366639019 @start[2671694]: 31168340370050712 @start[781482]: 31168340370063614 @start[3145744]: 31168340371742371 @start[3146531]: 31168340371760388 @start[3145684]: 31168340371845780 @start[262368]: 31168340462362493 [Fri Jan 9 05:43:54 UTC 2026] respawn: 0: stopped pid 25 with status 0 [Fri Jan 9 05:43:54 UTC 2026] respawn: sleeping 1 seconds... [Fri Jan 9 05:43:55 UTC 2026] respawn: 1: starting: /data/bpftrace/ksys_write_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/ksys_write_delay.bt -p 9