[Thu Jan 1 01:31:18 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[2427]: [8, 16) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 2 |@@@@@@@@@ | @latency[5703]: [0] 5 |@@ | [1] 54 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 104 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 18 |@@@@@@@@@ | [8, 16) 6 |@@@ | [16, 32) 2 |@ | @latency[5705]: [0] 4 |@@ | [1] 70 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 98 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 10 |@@@@@ | [8, 16) 6 |@@@ | [16, 32) 1 | | @latency[5707]: [0] 4 |@@ | [1] 68 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 101 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 9 |@@@@ | [8, 16) 7 |@@@ | @latency[53]: [1] 1 | | [2, 4) 135 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 223 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 35 |@@@@@@@@ | [16, 32) 214 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 171 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 7 |@ | [128, 256) 2 | | @latency[6701]: [1] 9 |@ | [2, 4) 270 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 211 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 253 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 143 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 38 |@@@@@@@ | [64, 128) 2 | | @latency[5701]: [0] 6 | | [1] 195 |@@@@@@@@@ | [2, 4) 1081 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 108 |@@@@@ | [8, 16) 52 |@@ | [16, 32) 8 | | [32, 64) 3 | | [64, 128) 1 | | @latency[6702]: [1] 48024 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 55121 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 73394 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 37735 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 11457 |@@@@@@@@ | [32, 64) 1472 |@ | [64, 128) 72 | | [128, 256) 13 | | [256, 512) 2 | | @latency[5702]: [0] 2624 |@ | [1] 106099 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 85929 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 19121 |@@@@@@@@@ | [8, 16) 17296 |@@@@@@@@ | [16, 32) 119 | | [32, 64) 3 | | [64, 128) 1 | | @latency[0]: [0] 157 | | [1] 17349 |@@ | [2, 4) 306752 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 73289 |@@@@@@@@@@@@ | [8, 16) 49753 |@@@@@@@@ | [16, 32) 10308 |@ | [32, 64) 1679 | | [64, 128) 83 | | @latency[4729]: [0] 3106 | | [1] 124224 |@@@@@@@@@@@@@@@@ | [2, 4) 399045 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 80328 |@@@@@@@@@@ | [8, 16) 56166 |@@@@@@@ | [16, 32) 9563 |@ | [32, 64) 2495 | | [64, 128) 38 | | [128, 256) 1 | | [256, 512) 1 | | [Thu Jan 1 01:34:21 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Thu Jan 1 01:34:21 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 1 01:34:22 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 35 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[16418]: [32, 64) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@@@@@@@@@@@@@ | @latency[16420]: [32, 64) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16404]: [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@ | @latency[16406]: [16, 32) 1 |@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16410]: [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@ | @latency[16412]: [16, 32) 4 |@@@@@@@@@@@@@@@@@ | [32, 64) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@ | @latency[16408]: [8, 16) 1 |@@@ | [16, 32) 1 |@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16414]: [8, 16) 1 |@@@ | [16, 32) 3 |@@@@@@@@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16432]: [16, 32) 1 |@ | [32, 64) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16428]: [16, 32) 1 |@ | [32, 64) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16426]: [16, 32) 2 |@@@ | [32, 64) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16424]: [32, 64) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16434]: [16, 32) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16430]: [16, 32) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@@ | @latency[1984]: [16, 32) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 6 |@@@@@@@@@@ | @latency[16394]: [32, 64) 96 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@ | @latency[16396]: [8, 16) 2 |@ | [16, 32) 4 |@@ | [32, 64) 91 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16398]: [8, 16) 2 |@ | [16, 32) 6 |@@@ | [32, 64) 90 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16402]: [8, 16) 9 |@@@@@ | [16, 32) 9 |@@@@@ | [32, 64) 81 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16400]: [8, 16) 2 |@ | [16, 32) 17 |@@@@@@@@@@@ | [32, 64) 80 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16416]: [2, 4) 2 | | [4, 8) 0 | | [8, 16) 72 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 111 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 9 |@@@@ | @latency[16422]: [8, 16) 32 |@@@@@@@@@@@@@@@@@ | [16, 32) 96 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 66 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[53]: [1] 6 |@@@@ | [2, 4) 39 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 43 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 25 |@@@@@@@@@@@@@@@@@@ | [16, 32) 44 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 69 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 11 |@@@@@@@@ | @latency[5707]: [0] 105 |@ | [1] 1231 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2920 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 800 |@@@@@@@@@@@@@@ | [8, 16) 759 |@@@@@@@@@@@@@ | [16, 32) 27 | | @latency[5705]: [0] 96 |@ | [1] 1189 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2775 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 976 |@@@@@@@@@@@@@@@@@@ | [8, 16) 777 |@@@@@@@@@@@@@@ | [16, 32) 31 | | @latency[5703]: [0] 96 |@ | [1] 1010 |@@@@@@@@@@@@@@@@@@ | [2, 4) 2800 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1054 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 872 |@@@@@@@@@@@@@@@@ | [16, 32) 27 | | [32, 64) 1 | | @latency[6701]: [1] 26 | | [2, 4) 1359 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 914 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2102 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 772 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 940 |@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 93 |@@ | @latency[5704]: [1] 5 | | [2, 4) 7 | | [4, 8) 221 |@ | [8, 16) 6812 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 16 | | [32, 64) 1 | | @latency[5701]: [0] 29 | | [1] 1442 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3335 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1510 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1845 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 470 |@@@@@@@ | [32, 64) 494 |@@@@@@@ | [64, 128) 62 | | @latency[6702]: [1] 139347 |@@ | [2, 4) 82401 |@ | [4, 8) 163580 |@@@ | [8, 16) 2797881 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 61898 |@ | [32, 64) 64003 |@ | [64, 128) 1492 | | [128, 256) 38 | | [256, 512) 4 | | @latency[5702]: [0] 903 | | [1] 192927 |@@@ | [2, 4) 199500 |@@@ | [4, 8) 192398 |@@@ | [8, 16) 3235758 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 17601 | | [32, 64) 343 | | [64, 128) 6 | | @latency[0]: [0] 383 | | [1] 89788 | | [2, 4) 546419 |@@@@@ | [4, 8) 189790 |@ | [8, 16) 5066565 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 392324 |@@@@ | [32, 64) 360722 |@@@ | [64, 128) 18686 | | [128, 256) 3 | | @latency[4729]: [0] 25427 | | [1] 975060 |@@@@@@ | [2, 4) 1320106 |@@@@@@@@ | [4, 8) 675897 |@@@@ | [8, 16) 7900710 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 206416 |@ | [32, 64) 73631 | | [64, 128) 5746 | | [128, 256) 27 | | [256, 512) 5 | | [512, 1K) 3 | | [Thu Jan 1 02:36:20 UTC 2026] respawn: 1: stopped pid 38 with status 0 [Thu Jan 1 02:36:20 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 1 02:36:22 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5703]: [1] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@@@@ | @latency[5705]: [1] 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@@ | @latency[5707]: [1] 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@ | [4, 8) 4 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@ | @latency[5701]: [1] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@ | @latency[0]: [1] 10 |@@@@@@@@@@@ | [2, 4) 44 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 35 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@ | [32, 64) 7 |@@@@@@@@ | [64, 128) 3 |@@@ | @latency[4729]: [0] 2452 |@@@@@@@@@@@ | [1] 11030 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1141 |@@@@@ | [4, 8) 775 |@@@ | [8, 16) 4733 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 43 | | [32, 64) 22 | | [64, 128) 57 | | [Thu Jan 1 02:38:02 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Thu Jan 1 02:38:02 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 1 02:38:04 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5706]: [4, 8) 4 |@@@ | [8, 16) 58 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 | | @latency[5708]: [1] 1 | | [2, 4) 0 | | [4, 8) 2 |@ | [8, 16) 103 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 | | @latency[5703]: [0] 3 |@@ | [1] 13 |@@@@@@@@@@@@ | [2, 4) 55 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 25 |@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5705]: [0] 3 |@@ | [1] 20 |@@@@@@@@@@@@@@@@@@ | [2, 4) 56 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 21 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 23 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 | | @latency[5707]: [0] 3 |@@ | [1] 16 |@@@@@@@@@@@@ | [2, 4) 65 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 24 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 16 |@@@@@@@@@@@@ | @latency[5704]: [4, 8) 3 |@ | [8, 16) 146 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 | | @latency[6701]: [1] 4 |@ | [2, 4) 73 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 48 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 114 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 39 |@@@@@@@@@@@@@@@@@ | [32, 64) 35 |@@@@@@@@@@@@@@@ | [64, 128) 5 |@@ | @latency[5701]: [0] 3 | | [1] 173 |@@@@@@@@@@@@@@@ | [2, 4) 323 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 124 |@@@@@@@@@@@ | [8, 16) 575 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13 |@ | [32, 64) 11 | | [64, 128) 2 | | @latency[6702]: [1] 7240 |@@@@@@@@@@@@ | [2, 4) 3333 |@@@@@ | [4, 8) 4125 |@@@@@@@ | [8, 16) 29704 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4340 |@@@@@@@ | [32, 64) 2028 |@@@ | [64, 128) 90 | | [128, 256) 2 | | @latency[5702]: [0] 14 | | [1] 9382 |@@@@@@@@@@@@ | [2, 4) 4013 |@@@@@ | [4, 8) 6212 |@@@@@@@ | [8, 16) 40554 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 123 | | [32, 64) 6 | | @latency[0]: [0] 38 | | [1] 4155 |@@@ | [2, 4) 18186 |@@@@@@@@@@@@@@ | [4, 8) 6995 |@@@@@ | [8, 16) 64959 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4321 |@@@ | [32, 64) 4906 |@@@ | [64, 128) 233 | | @latency[4729]: [0] 821 | | [1] 30626 |@@@@@@@@@@@@ | [2, 4) 37737 |@@@@@@@@@@@@@@@ | [4, 8) 21492 |@@@@@@@@ | [8, 16) 124551 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1644 | | [32, 64) 445 | | [64, 128) 41 | | [128, 256) 1 | | [256, 512) 1 | | [Thu Jan 1 02:39:13 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Thu Jan 1 02:39:13 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 1 02:39:14 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 35 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @dport[1148107]: 4729 @latency[5703]: [0] 1 | | [1] 41 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 54 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 19 |@@@@@@@@@@@@@@@@@@ | [8, 16) 15 |@@@@@@@@@@@@@@ | @latency[5705]: [0] 2 |@@ | [1] 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 50 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 19 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 10 |@@@@@@@@@@ | [16, 32) 1 |@ | @latency[5707]: [1] 53 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 15 |@@@@@@@@@@@@@@ | [8, 16) 11 |@@@@@@@@@@ | @latency[5701]: [0] 2 | | [1] 53 |@@@@@@@@@@@@@@@@@@ | [2, 4) 104 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 34 |@@@@@@@@@@@ | [8, 16) 150 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 15 |@@@@@ | [32, 64) 4 |@ | @latency[6701]: [1] 9 |@ | [2, 4) 219 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 176 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 247 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 132 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 73 |@@@@@@@@@@@@@@@ | [64, 128) 11 |@@ | @latency[5706]: [0] 1 | | [1] 251 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 168 |@@@@@@@@@@@@@@ | [4, 8) 72 |@@@@@@ | [8, 16) 615 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 | | @latency[5708]: [0] 13 | | [1] 566 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 262 |@@@@@@@@@@@@@ | [4, 8) 121 |@@@@@@ | [8, 16) 1005 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 | | [32, 64) 1 | | @latency[5704]: [1] 791 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 159 |@@@@@@ | [4, 8) 138 |@@@@@@ | [8, 16) 1192 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 3 | | @latency[6702]: [1] 56784 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 26835 |@@@@@@@@@@@@@@ | [4, 8) 23144 |@@@@@@@@@@@@ | [8, 16) 94055 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 17863 |@@@@@@@@@ | [32, 64) 11242 |@@@@@@ | [64, 128) 525 | | [128, 256) 10 | | @latency[5702]: [0] 1371 | | [1] 131900 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 25590 |@@@@@@@@ | [4, 8) 22273 |@@@@@@@ | [8, 16) 148541 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 870 | | [32, 64) 29 | | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 2 | | @latency[0]: [0] 147 | | [1] 58141 |@@@@@@@@@@@@@@ | [2, 4) 144611 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 22442 |@@@@@ | [8, 16) 206786 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 14968 |@@@ | [32, 64) 15403 |@@@ | [64, 128) 853 | | [128, 256) 1 | | [256, 512) 1 | | @latency[4729]: [0] 2722 | | [1] 210164 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 166014 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 45683 |@@@@@@ | [8, 16) 364768 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 8292 |@ | [32, 64) 4934 | | [64, 128) 97 | | [128, 256) 0 | | [256, 512) 2 | | @start[1148107]: 30466285311002191 [Thu Jan 1 02:42:59 UTC 2026] respawn: 1: stopped pid 38 with status 0 [Thu Jan 1 02:42:59 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 1 02:43:00 UTC 2026] respawn: 2: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 56 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5705]: [0] 6 | | [1] 252 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 372 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 66 |@@@@@@@@@ | [8, 16) 57 |@@@@@@@ | [16, 32) 2 | | @latency[5707]: [0] 6 | | [1] 246 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 384 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 64 |@@@@@@@@ | [8, 16) 54 |@@@@@@@ | [16, 32) 1 | | @latency[5703]: [0] 4 | | [1] 202 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 425 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 68 |@@@@@@@@ | [8, 16) 60 |@@@@@@@ | @latency[6701]: [1] 5 |@ | [2, 4) 147 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 179 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 259 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 177 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 101 |@@@@@@@@@@@@@@@@@@@@ | [64, 128) 23 |@@@@ | @latency[5706]: [0] 48 |@@@@@ | [1] 76 |@@@@@@@@ | [2, 4) 470 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 81 |@@@@@@@@ | [8, 16) 490 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 0 | | [32, 64) 1 | | @latency[5701]: [0] 5 | | [1] 245 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 460 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 187 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 209 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 73 |@@@@@@@@ | [32, 64) 23 |@@ | [64, 128) 5 | | @latency[5708]: [0] 32 |@@ | [1] 117 |@@@@@@@@@@ | [2, 4) 502 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 152 |@@@@@@@@@@@@@ | [8, 16) 599 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 | | @latency[5704]: [0] 37 |@@@ | [1] 134 |@@@@@@@@@@@ | [2, 4) 503 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 124 |@@@@@@@@@@ | [8, 16) 622 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 | | @latency[6702]: [1] 25205 |@@@@@@@@@@@ | [2, 4) 28157 |@@@@@@@@@@@@@ | [4, 8) 104922 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 109886 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 59880 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 18227 |@@@@@@@@ | [64, 128) 1806 | | [128, 256) 43 | | [256, 512) 1 | | [512, 1K) 1 | | @latency[5702]: [0] 1855 | | [1] 91697 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 113677 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 63400 |@@@@@@@@@@@@@@@@@@ | [8, 16) 177486 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2464 | | [32, 64) 61 | | [64, 128) 11 | | @latency[0]: [0] 147 | | [1] 25364 |@@@@ | [2, 4) 261139 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 90564 |@@@@@@@@@@@@@@@@ | [8, 16) 290637 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 21400 |@@@ | [32, 64) 12399 |@@ | [64, 128) 540 | | [128, 256) 3 | | @latency[4729]: [0] 15371 |@ | [1] 178893 |@@@@@@@@@@@@@@@@@@ | [2, 4) 451531 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 196103 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 493021 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 20485 |@@ | [32, 64) 6690 | | [64, 128) 294 | | [128, 256) 6 | | [256, 512) 4 | | [512, 1K) 1 | | [1K, 2K) 1 | | [Thu Jan 1 02:50:32 UTC 2026] respawn: 2: stopped pid 59 with status 0 [Thu Jan 1 02:50:32 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 1 02:50:33 UTC 2026] respawn: 3: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 77 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @dport[1365999]: 0 @latency[6701]: [2, 4) 4 |@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 3 |@@@@@@@@@@@@@ | [64, 128) 2 |@@@@@@@@ | @latency[5707]: [0] 2 |@ | [1] 29 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 60 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 11 |@@@@@@@@@ | [8, 16) 1 | | @latency[5703]: [0] 1 | | [1] 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 16 |@@@@@@@@@@@@@@ | [8, 16) 1 | | @latency[5705]: [0] 1 | | [1] 37 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 55 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 10 |@@@@@@@@@ | [8, 16) 1 | | @latency[5701]: [0] 1 | | [1] 30 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 64 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 26 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 10 |@@@@@@@@ | [16, 32) 3 |@@ | [32, 64) 4 |@@@ | @latency[6702]: [1] 5467 |@@@@@@@@@@@@@@@@@@ | [2, 4) 5610 |@@@@@@@@@@@@@@@@@@ | [4, 8) 15732 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 13989 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4619 |@@@@@@@@@@@@@@@ | [32, 64) 914 |@@@ | [64, 128) 77 | | [128, 256) 2 | | @latency[5702]: [0] 188 | | [1] 17231 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 10417 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4909 |@@@@@@@@@@@@@@ | [8, 16) 14396 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 87 | | [32, 64) 4 | | @latency[0]: [0] 47 | | [1] 4469 |@@@@ | [2, 4) 46554 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 8788 |@@@@@@@@@ | [8, 16) 29873 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2242 |@@ | [32, 64) 1584 |@ | [64, 128) 78 | | @latency[4729]: [0] 414 | | [1] 31216 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 70891 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 16071 |@@@@@@@@@@@ | [8, 16) 46392 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1559 |@ | [32, 64) 208 | | [64, 128) 28 | | @start[1365999]: 30466796894534232 [Thu Jan 1 02:51:31 UTC 2026] respawn: 3: stopped pid 80 with status 0 [Thu Jan 1 02:51:31 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 1 02:51:32 UTC 2026] respawn: 4: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 98 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @dport[1148107]: 4729 @latency[5706]: [1] 5 |@@@@@ | [2, 4) 11 |@@@@@@@@@@@ | [4, 8) 22 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[5704]: [1] 10 |@@@@@@@@@@ | [2, 4) 20 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 22 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 50 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[6701]: [2, 4) 15 |@@@@@@@@@@@@@ | [4, 8) 58 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 53 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 16 |@@@@@@@@@@@@@@ | [64, 128) 8 |@@@@@@@ | @latency[5703]: [1] 61 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 108 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 41 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 39 |@@@@@@@@@@@@@@@@@@ | @latency[5705]: [1] 74 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 104 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 34 |@@@@@@@@@@@@@@@@@ | [8, 16) 36 |@@@@@@@@@@@@@@@@@@ | [16, 32) 1 | | @latency[5707]: [0] 1 | | [1] 78 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 115 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 20 |@@@@@@@@@ | [8, 16) 34 |@@@@@@@@@@@@@@@ | [16, 32) 1 | | @latency[5701]: [1] 74 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 126 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 55 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 68 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 28 |@@@@@@@@@@@ | [32, 64) 4 |@ | [64, 128) 2 | | @latency[5708]: [0] 1 | | [1] 70 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 119 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 80 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 175 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 | | [32, 64) 1 | | @latency[6702]: [0] 5 | | [1] 24232 |@@@@@@@@@@@@@@@@ | [2, 4) 22812 |@@@@@@@@@@@@@@@ | [4, 8) 38157 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 76093 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 43076 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 11941 |@@@@@@@@ | [64, 128) 1056 | | [128, 256) 24 | | [256, 512) 1 | | @latency[5702]: [0] 885 | | [1] 47069 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 29212 |@@@@@@@@@@@@@@ | [4, 8) 46986 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 103159 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 859 | | [32, 64) 29 | | [64, 128) 8 | | [128, 256) 0 | | [256, 512) 1 | | @latency[0]: [0] 161 | | [1] 16736 |@@@ | [2, 4) 109641 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 66066 |@@@@@@@@@@@@@@@ | [8, 16) 223766 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13553 |@@@ | [32, 64) 6541 |@ | [64, 128) 192 | | [128, 256) 3 | | @latency[4729]: [0] 1738 | | [1] 74653 |@@@@@@@@@@@@ | [2, 4) 145526 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 110398 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 301389 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13341 |@@ | [32, 64) 2039 | | [64, 128) 129 | | [128, 256) 4 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 1 | | @start[1148107]: 30466990010883765 [Thu Jan 1 02:54:44 UTC 2026] respawn: 4: stopped pid 101 with status 0 [Thu Jan 1 02:54:44 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 1 02:54:45 UTC 2026] respawn: 5: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 119 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @dport[1629933]: 0 @dport[1629744]: 4729 @dport[1630072]: 6702 @latency[16418]: [16, 32) 1 |@@@@@@ | [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16420]: [16, 32) 1 |@@@@@ | [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16406]: [16, 32) 1 |@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16408]: [16, 32) 2 |@@@@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16410]: [4, 8) 1 |@@@@ | [8, 16) 0 | | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16412]: [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16404]: [16, 32) 2 |@@@@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16414]: [16, 32) 4 |@@@@@@@@@@@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16432]: [32, 64) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16428]: [32, 64) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16426]: [16, 32) 4 |@@@@@@ | [32, 64) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16424]: [16, 32) 5 |@@@@@@@@ | [32, 64) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16434]: [16, 32) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@@ | @latency[16430]: [8, 16) 2 |@@@@@ | [16, 32) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[1984]: [16, 32) 10 |@@@@@@@@@@@@@ | [32, 64) 40 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@ | @latency[53]: [1] 1 |@@ | [2, 4) 6 |@@@@@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@ | [8, 16) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 7 |@@@@@@@@@@@@@@@@@ | @latency[16398]: [16, 32) 2 |@ | [32, 64) 95 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16396]: [8, 16) 1 | | [16, 32) 12 |@@@@@@@ | [32, 64) 82 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 5 |@@@ | @latency[16394]: [16, 32) 8 |@@@@ | [32, 64) 90 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16402]: [8, 16) 9 |@@@@@ | [16, 32) 6 |@@@ | [32, 64) 85 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16400]: [4, 8) 1 | | [8, 16) 6 |@@@ | [16, 32) 2 |@ | [32, 64) 90 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16416]: [2, 4) 2 |@ | [4, 8) 0 | | [8, 16) 26 |@@@@@@@@@@@@@@ | [16, 32) 96 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 67 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 3 |@ | @latency[16422]: [8, 16) 18 |@@@@@@@@@ | [16, 32) 94 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 79 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 3 |@ | @latency[5707]: [0] 84 |@ | [1] 1268 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2503 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 924 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 659 |@@@@@@@@@@@@@ | [16, 32) 17 | | @latency[5705]: [0] 79 |@ | [1] 1247 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2411 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1039 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 663 |@@@@@@@@@@@@@@ | [16, 32) 16 | | @latency[5703]: [0] 75 |@ | [1] 1044 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2379 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1160 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 790 |@@@@@@@@@@@@@@@@@ | [16, 32) 14 | | @latency[5706]: [1] 145 |@ | [2, 4) 75 | | [4, 8) 175 |@ | [8, 16) 5709 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 12 | | [32, 64) 2 | | @latency[6701]: [1] 36 | | [2, 4) 1324 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1052 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2076 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 962 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 839 |@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 145 |@@@ | @latency[5701]: [0] 15 | | [1] 1385 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3533 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1883 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2017 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 570 |@@@@@@@@ | [32, 64) 297 |@@@@ | [64, 128) 26 | | @latency[5708]: [1] 154 | | [2, 4) 117 | | [4, 8) 258 |@ | [8, 16) 9240 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 40 | | [32, 64) 2 | | @latency[5704]: [1] 236 |@ | [2, 4) 190 | | [4, 8) 442 |@ | [8, 16) 11638 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 28 | | [32, 64) 4 | | @latency[6702]: [0] 11 | | [1] 117048 |@@@ | [2, 4) 108264 |@@@ | [4, 8) 184151 |@@@@@ | [8, 16) 1746518 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 342505 |@@@@@@@@@@ | [32, 64) 132125 |@@@ | [64, 128) 4881 | | [128, 256) 154 | | [256, 512) 50 | | [512, 1K) 88 | | [1K, 2K) 1 | | @latency[5702]: [0] 2865 | | [1] 323287 |@@@@@ | [2, 4) 194911 |@@@ | [4, 8) 154268 |@@ | [8, 16) 2951591 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 33967 | | [32, 64) 608 | | [64, 128) 8 | | @latency[0]: [0] 661 | | [1] 67505 | | [2, 4) 681281 |@@@@@@@@@ | [4, 8) 168573 |@@ | [8, 16) 3889536 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 260903 |@@@ | [32, 64) 235780 |@@@ | [64, 128) 9899 | | [128, 256) 5 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 1 | | @latency[4729]: [0] 74537 | | [1] 854064 |@@@@@@ | [2, 4) 1481926 |@@@@@@@@@@@ | [4, 8) 674141 |@@@@@ | [8, 16) 6966739 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 113755 | | [32, 64) 96967 | | [64, 128) 4258 | | [128, 256) 39 | | [256, 512) 19 | | [512, 1K) 17 | | [1K, 2K) 8 | | [2K, 4K) 2 | | @start[1630072]: 30469828837194431 @start[1629933]: 30469828837547635 @start[1629744]: 30469828840412542 [Thu Jan 1 03:42:03 UTC 2026] respawn: 5: stopped pid 122 with status 0 [Thu Jan 1 03:42:03 UTC 2026] respawn: sleeping 1 seconds... [Thu Jan 1 03:42:04 UTC 2026] respawn: 6: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 119