[Fri Jan 2 01:31:16 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[53]: [1] 3 |@@@@ | [2, 4) 36 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@ | [16, 32) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 23 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@ | @latency[5703]: [0] 4 |@@@ | [1] 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 43 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 15 |@@@@@@@@@@@@@ | [8, 16) 5 |@@@@ | @latency[5705]: [0] 4 |@@@ | [1] 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 56 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 12 |@@@@@@@@@@@ | [8, 16) 4 |@@@ | @latency[5707]: [0] 4 |@@@@ | [1] 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 50 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 14 |@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@ | @latency[6701]: [1] 10 |@@@ | [2, 4) 55 |@@@@@@@@@@@@@@@@@@@ | [4, 8) 147 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 123 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 127 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 23 |@@@@@@@@ | [64, 128) 1 | | @latency[5701]: [0] 4 | | [1] 325 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 777 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 111 |@@@@@@@ | [8, 16) 39 |@@ | [16, 32) 8 | | [32, 64) 0 | | [64, 128) 1 | | @latency[6702]: [1] 45314 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 32404 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 44018 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 25059 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 7107 |@@@@@@@@ | [32, 64) 976 |@ | [64, 128) 79 | | [128, 256) 22 | | [256, 512) 4 | | @latency[5702]: [0] 783 | | [1] 97580 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 34114 |@@@@@@@@@@@@@@@@@@ | [4, 8) 12966 |@@@@@@ | [8, 16) 12320 |@@@@@@ | [16, 32) 166 | | [32, 64) 14 | | [64, 128) 1 | | @latency[0]: [0] 810 | | [1] 78035 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 153213 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 38631 |@@@@@@@@@@@@@ | [8, 16) 34600 |@@@@@@@@@@@ | [16, 32) 6262 |@@ | [32, 64) 1006 | | [64, 128) 42 | | @latency[4729]: [0] 1489 | | [1] 198804 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 179005 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 46659 |@@@@@@@@@@@@ | [8, 16) 36169 |@@@@@@@@@ | [16, 32) 5905 |@ | [32, 64) 2293 | | [64, 128) 36 | | [128, 256) 1 | | [Fri Jan 2 01:33:21 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Fri Jan 2 01:33:21 UTC 2026] respawn: sleeping 1 seconds... [Fri Jan 2 01:33:22 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 35 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[16418]: [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@@@ | @latency[16420]: [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@@@ | @latency[16404]: [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@ | @latency[16406]: [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@@@@@@@@@ | @latency[16412]: [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@ | @latency[16408]: [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@@@@@@@@@@@@ | @latency[16410]: [16, 32) 2 |@@@@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16414]: [16, 32) 1 |@@@ | [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 4 |@@@@@@@@@@@@@@ | @latency[2427]: [4, 8) 1 |@@ | [8, 16) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16432]: [16, 32) 3 |@@@@@ | [32, 64) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16428]: [16, 32) 2 |@@@ | [32, 64) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@ | @latency[16424]: [16, 32) 2 |@@@@@ | [32, 64) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16426]: [16, 32) 1 |@ | [32, 64) 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 7 |@@@@@@@@@@@@@ | @latency[16434]: [8, 16) 9 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16430]: [16, 32) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 2 |@@@@@ | @latency[1984]: [16, 32) 10 |@@@@@@@@@@@@@ | [32, 64) 39 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@ | @latency[16394]: [16, 32) 9 |@@@@@ | [32, 64) 88 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@ | @latency[16398]: [8, 16) 3 |@ | [16, 32) 7 |@@@@ | [32, 64) 89 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16396]: [8, 16) 15 |@@@@@@@@@@@@@ | [16, 32) 11 |@@@@@@@@@@ | [32, 64) 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 17 |@@@@@@@@@@@@@@@ | @latency[16400]: [8, 16) 9 |@@@@@ | [16, 32) 4 |@@ | [32, 64) 84 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 4 |@@ | @latency[16402]: [8, 16) 27 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 15 |@@@@@@@@@@@@@ | [32, 64) 59 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16422]: [8, 16) 81 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 60 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 41 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 12 |@@@@@@@ | @latency[16416]: [8, 16) 84 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 68 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 40 |@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 6 |@@@ | @latency[53]: [1] 12 | | [2, 4) 653 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 298 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 97 |@@@@@@@ | [16, 32) 494 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 530 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 31 |@@ | [128, 256) 5 | | @latency[5705]: [0] 63 |@ | [1] 1203 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2706 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1109 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 800 |@@@@@@@@@@@@@@@ | [16, 32) 61 |@ | [32, 64) 1 | | @latency[5707]: [0] 79 |@ | [1] 1230 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2994 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 813 |@@@@@@@@@@@@@@ | [8, 16) 735 |@@@@@@@@@@@@ | [16, 32) 92 |@ | [32, 64) 1 | | @latency[5703]: [0] 29 | | [1] 1073 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2435 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1301 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1058 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 62 |@ | [32, 64) 1 | | @latency[5704]: [0] 1 | | [1] 6 | | [2, 4) 8 | | [4, 8) 204 |@ | [8, 16) 6441 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 16 | | [32, 64) 1 | | @latency[6701]: [1] 326 |@@@@@@@ | [2, 4) 1338 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1000 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2225 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 836 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 909 |@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 48 |@ | [128, 256) 1 | | @latency[5701]: [0] 66 | | [1] 1264 |@@@@@@@@@@@@@@@@@ | [2, 4) 3721 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1184 |@@@@@@@@@@@@@@@@ | [8, 16) 2078 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 648 |@@@@@@@@@ | [32, 64) 426 |@@@@@ | [64, 128) 45 | | [128, 256) 1 | | @latency[6702]: [0] 2 | | [1] 219291 |@@@@ | [2, 4) 130855 |@@ | [4, 8) 183868 |@@@ | [8, 16) 2720014 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 91450 |@ | [32, 64) 73879 |@ | [64, 128) 3102 | | [128, 256) 41 | | [256, 512) 8 | | [512, 1K) 10 | | [1K, 2K) 2 | | @latency[5702]: [0] 2719 | | [1] 400286 |@@@@@@@@ | [2, 4) 141808 |@@ | [4, 8) 824456 |@@@@@@@@@@@@@@@@ | [8, 16) 2529372 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 32381 | | [32, 64) 322 | | [64, 128) 8 | | @latency[0]: [0] 1834 | | [1] 407078 |@@@@ | [2, 4) 504340 |@@@@@ | [4, 8) 223708 |@@ | [8, 16) 5151046 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 245071 |@@ | [32, 64) 340130 |@@@ | [64, 128) 18431 | | [128, 256) 3 | | @latency[4729]: [0] 33354 | | [1] 1393926 |@@@@@@@@@ | [2, 4) 1141290 |@@@@@@@ | [4, 8) 735965 |@@@@ | [8, 16) 8001474 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 93201 | | [32, 64) 72518 | | [64, 128) 5494 | | [128, 256) 28 | | [256, 512) 9 | | [512, 1K) 4 | | [1K, 2K) 1 | | [Fri Jan 2 02:36:39 UTC 2026] respawn: 1: stopped pid 38 with status 0 [Fri Jan 2 02:36:39 UTC 2026] respawn: sleeping 1 seconds... [Fri Jan 2 02:36:40 UTC 2026] respawn: 2: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 35 [Fri Jan 2 02:36:41 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5703]: [0] 3 |@@@@@@@@@ | [1] 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1 |@@@ | [8, 16) 4 |@@@@@@@@@@@@@ | [16, 32) 1 |@@@ | @latency[5705]: [0] 5 |@@@@@@@@@@@@@@@@ | [1] 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@ | @latency[5707]: [0] 1 |@@ | [1] 6 |@@@@@@@@@@@@@@@@ | [2, 4) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@@@@@ | [8, 16) 6 |@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@ | @latency[5701]: [0] 1 |@@ | [1] 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 5 |@@@@@@@@@@@@ | [4, 8) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@ | @latency[0]: [2, 4) 41 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 16 |@@@@@@@@@@@ | [8, 16) 75 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13 |@@@@@@@@@ | [32, 64) 20 |@@@@@@@@@@@@@ | [64, 128) 10 |@@@@@@ | @latency[4729]: [0] 2211 |@@@@@@@@@ | [1] 11524 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1913 |@@@@@@@@ | [4, 8) 664 |@@ | [8, 16) 4262 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 50 | | [32, 64) 27 | | [64, 128) 54 | | [Fri Jan 2 02:38:21 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Fri Jan 2 02:38:21 UTC 2026] respawn: sleeping 1 seconds... [Fri Jan 2 02:38:23 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @dport[613365]: 0 @dport[613172]: 4729 @dport[613502]: 6702 @latency[16418]: [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@@@@@@@@@@ | @latency[16420]: [32, 64) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@@@@@@@@@@@@@@@@@@@ | @latency[16404]: [4, 8) 3 |@@@@@@@@@@@@@ | [8, 16) 1 |@@@@ | [16, 32) 1 |@@@@ | [32, 64) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16406]: [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16408]: [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@@@@@ | @latency[16410]: [8, 16) 4 |@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@ | [32, 64) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@ | @latency[16412]: [4, 8) 1 |@@@@@ | [8, 16) 2 |@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@@ | @latency[16414]: [16, 32) 2 |@@@@@@@@ | [32, 64) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16432]: [16, 32) 4 |@@@@@@@ | [32, 64) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@ | @latency[16428]: [16, 32) 4 |@@@@@@@ | [32, 64) 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@@ | @latency[16426]: [8, 16) 3 |@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@ | [32, 64) 22 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@@@@ | @latency[16424]: [8, 16) 1 |@@ | [16, 32) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@ | @latency[16434]: [2, 4) 1 |@@ | [4, 8) 1 |@@ | [8, 16) 2 |@@@@@ | [16, 32) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16430]: [4, 8) 1 |@@ | [8, 16) 1 |@@ | [16, 32) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@ | @latency[1984]: [8, 16) 1 |@ | [16, 32) 15 |@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@@ | @latency[16398]: [8, 16) 4 |@@ | [16, 32) 5 |@@ | [32, 64) 90 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16396]: [2, 4) 1 |@ | [4, 8) 3 |@@@ | [8, 16) 19 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 19 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 52 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 6 |@@@@@@ | @latency[16394]: [4, 8) 6 |@@@@ | [8, 16) 13 |@@@@@@@@@ | [16, 32) 4 |@@ | [32, 64) 73 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 4 |@@ | @latency[16402]: [8, 16) 2 |@ | [16, 32) 3 |@ | [32, 64) 94 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16400]: [4, 8) 1 | | [8, 16) 8 |@@@@@ | [16, 32) 7 |@@@@ | [32, 64) 82 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@ | @latency[16416]: [2, 4) 1 | | [4, 8) 0 | | [8, 16) 41 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 59 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 81 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 16 |@@@@@@@@@@ | @latency[16422]: [2, 4) 6 |@@@ | [4, 8) 6 |@@@ | [8, 16) 28 |@@@@@@@@@@@@@@@@ | [16, 32) 86 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 70 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 2 |@ | @latency[53]: [1] 2 | | [2, 4) 422 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 165 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 58 |@@@@@@@ | [16, 32) 262 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 391 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 15 |@ | [128, 256) 1 | | @latency[5707]: [0] 59 | | [1] 1332 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3370 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1022 |@@@@@@@@@@@@@@@ | [8, 16) 952 |@@@@@@@@@@@@@@ | [16, 32) 117 |@ | @latency[5705]: [0] 40 | | [1] 1263 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3096 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1338 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1037 |@@@@@@@@@@@@@@@@@ | [16, 32) 78 |@ | [32, 64) 1 | | @latency[5703]: [0] 13 | | [1] 1126 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2760 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1597 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1301 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 66 |@ | [32, 64) 1 | | @latency[6701]: [1] 428 |@@@@@@ | [2, 4) 1952 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1226 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 3250 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1049 |@@@@@@@@@@@@@@@@ | [32, 64) 1306 |@@@@@@@@@@@@@@@@@@@@ | [64, 128) 116 |@ | [128, 256) 1 | | [256, 512) 1 | | @latency[5706]: [1] 177 |@ | [2, 4) 401 |@@ | [4, 8) 407 |@@ | [8, 16) 8664 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 41 | | [32, 64) 3 | | @latency[5701]: [0] 64 | | [1] 2138 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 4596 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1863 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3223 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 863 |@@@@@@@@@ | [32, 64) 454 |@@@@@ | [64, 128) 48 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 2 | | @latency[5708]: [1] 215 | | [2, 4) 632 |@@ | [4, 8) 608 |@@ | [8, 16) 14594 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 65 | | [32, 64) 5 | | @latency[5704]: [0] 2 | | [1] 273 | | [2, 4) 615 |@ | [4, 8) 860 |@@ | [8, 16) 18205 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 72 | | [32, 64) 4 | | @latency[6702]: [0] 9 | | [1] 139658 |@@ | [2, 4) 91376 |@ | [4, 8) 113794 |@ | [8, 16) 3163566 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 252725 |@@@@ | [32, 64) 226669 |@@@ | [64, 128) 7165 | | [128, 256) 171 | | [256, 512) 103 | | [512, 1K) 121 | | [1K, 2K) 2 | | @latency[5702]: [0] 1043 | | [1] 243237 |@@ | [2, 4) 142283 |@ | [4, 8) 715441 |@@@@@@@@ | [8, 16) 4226636 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 49506 | | [32, 64) 607 | | [64, 128) 17 | | @latency[0]: [0] 561 | | [1] 230732 |@ | [2, 4) 263695 |@@ | [4, 8) 245514 |@ | [8, 16) 6712824 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 229784 |@ | [32, 64) 348531 |@@ | [64, 128) 17574 | | [128, 256) 2 | | @latency[4729]: [0] 31319 | | [1] 1225041 |@@@@@ | [2, 4) 1061357 |@@@@ | [4, 8) 948750 |@@@@ | [8, 16) 11334581 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 155492 | | [32, 64) 117571 | | [64, 128) 6611 | | [128, 256) 37 | | [256, 512) 66 | | [512, 1K) 20 | | [1K, 2K) 7 | | [2K, 4K) 0 | | [4K, 8K) 1 | | @start[613502]: 69853685153316844 @start[613365]: 69853685153564794 @start[613172]: 69853685153591991 [Fri Jan 2 03:44:46 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Fri Jan 2 03:44:46 UTC 2026] respawn: sleeping 1 seconds... [Fri Jan 2 03:44:47 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end.