[Mon Dec 29 01:31:13 UTC 2025] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[16418]: [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16420]: [16, 32) 1 |@@@@@ | [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16406]: [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16410]: [16, 32) 1 |@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[2427]: [8, 16) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16404]: [16, 32) 1 |@@@ | [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16408]: [16, 32) 1 |@@@ | [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@@@@@@@@ | @latency[16412]: [32, 64) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16414]: [16, 32) 3 |@@@@@@@@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@ | @latency[16432]: [16, 32) 1 |@ | [32, 64) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16428]: [16, 32) 6 |@@@@@@@@@@@ | [32, 64) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16426]: [16, 32) 5 |@@@@@@@@ | [32, 64) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16424]: [8, 16) 1 |@ | [16, 32) 2 |@@@ | [32, 64) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16434]: [4, 8) 1 |@@@ | [8, 16) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 3 |@@@@@@@@@ | @latency[16430]: [16, 32) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[1984]: [16, 32) 4 |@@@@ | [32, 64) 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16394]: [16, 32) 3 |@ | [32, 64) 96 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16398]: [8, 16) 5 |@@ | [16, 32) 3 |@ | [32, 64) 91 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16396]: [8, 16) 22 |@@@@@@@@@@@@@@@ | [16, 32) 4 |@@ | [32, 64) 72 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16402]: [8, 16) 13 |@@@@@@@@@@ | [16, 32) 20 |@@@@@@@@@@@@@@@@ | [32, 64) 65 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@ | @latency[16400]: [8, 16) 13 |@@@@@@@@ | [16, 32) 9 |@@@@@@ | [32, 64) 78 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16416]: [8, 16) 80 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 77 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 36 |@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 | | @latency[16422]: [8, 16) 21 |@@@@@@@@@@@@ | [16, 32) 86 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 83 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 4 |@@ | @latency[53]: [1] 13 |@@@@@ | [2, 4) 42 |@@@@@@@@@@@@@@@@@@ | [4, 8) 119 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 38 |@@@@@@@@@@@@@@@@ | [16, 32) 117 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 86 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 14 |@@@@@@ | @latency[5707]: [0] 92 |@ | [1] 1506 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2529 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1002 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 874 |@@@@@@@@@@@@@@@@@ | [16, 32) 18 | | @latency[5705]: [0] 98 |@@ | [1] 1453 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2440 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1180 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 841 |@@@@@@@@@@@@@@@@@ | [16, 32) 13 | | @latency[5703]: [0] 91 |@ | [1] 1306 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2426 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1265 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 935 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 20 | | [32, 64) 1 | | @latency[5704]: [1] 14 | | [2, 4) 30 | | [4, 8) 152 |@ | [8, 16) 6266 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 16 | | @latency[6701]: [1] 27 | | [2, 4) 1530 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1275 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2468 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 996 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 820 |@@@@@@@@@@@@@@@@@ | [64, 128) 77 |@ | [128, 256) 1 | | @latency[5701]: [0] 26 | | [1] 1923 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 4054 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1722 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1912 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 535 |@@@@@@ | [32, 64) 452 |@@@@@ | [64, 128) 37 | | @latency[6702]: [1] 196391 |@@@ | [2, 4) 159168 |@@ | [4, 8) 286309 |@@@@@ | [8, 16) 2822732 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 65003 |@ | [32, 64) 61968 |@ | [64, 128) 1250 | | [128, 256) 34 | | [256, 512) 2 | | [512, 1K) 3 | | @latency[5702]: [0] 3350 | | [1] 370677 |@@@@@ | [2, 4) 298821 |@@@@ | [4, 8) 178226 |@@ | [8, 16) 3226418 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 22169 | | [32, 64) 237 | | [64, 128) 12 | | [128, 256) 1 | | @latency[0]: [0] 707 | | [1] 103345 |@ | [2, 4) 1021256 |@@@@@@@@@@ | [4, 8) 291128 |@@ | [8, 16) 5049661 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 386750 |@@@ | [32, 64) 360335 |@@@ | [64, 128) 19814 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | [1K, 2K) 1 | | @latency[4729]: [0] 32430 | | [1] 1073617 |@@@@@@ | [2, 4) 1858840 |@@@@@@@@@@@@ | [4, 8) 752601 |@@@@ | [8, 16) 8049436 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 110821 | | [32, 64) 74640 | | [64, 128) 4106 | | [128, 256) 17 | | [256, 512) 10 | | [512, 1K) 1 | | [1K, 2K) 2 | | [2K, 4K) 1 | | [Mon Dec 29 02:36:31 UTC 2025] respawn: 0: stopped pid 17 with status 0 [Mon Dec 29 02:36:31 UTC 2025] respawn: sleeping 1 seconds... [Mon Dec 29 02:36:33 UTC 2025] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5703]: [0] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5705]: [0] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5707]: [0] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [1] 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5701]: [1] 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@ | @latency[0]: [1] 1 |@ | [2, 4) 52 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@ | [8, 16) 41 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 0 | | [32, 64) 3 |@@@ | [64, 128) 2 |@@ | @latency[4729]: [0] 1867 |@@@@@@@@@@ | [1] 8914 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2734 |@@@@@@@@@@@@@@@ | [4, 8) 1514 |@@@@@@@@ | [8, 16) 5074 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 67 | | [32, 64) 30 | | [64, 128) 53 | | [Mon Dec 29 02:38:13 UTC 2025] respawn: 0: stopped pid 17 with status 0 [Mon Dec 29 02:38:13 UTC 2025] respawn: sleeping 1 seconds... [Mon Dec 29 02:38:15 UTC 2025] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @dport[2059387]: 0 @dport[2059189]: 5702 @dport[2059525]: 6702 @latency[16418]: [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16420]: [32, 64) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16406]: [16, 32) 3 |@@@@@@@@@@@ | [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16408]: [16, 32) 3 |@@@@@@@@@@@ | [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16410]: [16, 32) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@@@@ | @latency[16412]: [16, 32) 1 |@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16404]: [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@ | @latency[16414]: [32, 64) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16432]: [16, 32) 3 |@@@@@ | [32, 64) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16428]: [16, 32) 1 |@ | [32, 64) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16426]: [16, 32) 1 |@@ | [32, 64) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 9 |@@@@@@@@@@@@@@@@@@@ | @latency[16424]: [16, 32) 2 |@@@ | [32, 64) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@ | @latency[16434]: [16, 32) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16430]: [8, 16) 7 |@@@@@@@@@@@@@@@@ | [16, 32) 22 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 10 |@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@@ | @latency[1984]: [16, 32) 9 |@@@@@@@@@@@ | [32, 64) 42 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@ | @latency[53]: [2, 4) 5 |@@@@@@@@@@ | [4, 8) 8 |@@@@@@@@@@@@@@@@@ | [8, 16) 11 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 10 |@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 10 |@@@@@@@@@@@@@@@@@@@@@ | [128, 256) 1 |@@ | @latency[16394]: [8, 16) 1 | | [16, 32) 3 |@ | [32, 64) 94 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16398]: [8, 16) 20 |@@@@@@@@@@@@@@@ | [16, 32) 10 |@@@@@@@ | [32, 64) 69 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16396]: [8, 16) 26 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 20 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 53 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16400]: [8, 16) 3 |@ | [16, 32) 4 |@@ | [32, 64) 93 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16402]: [32, 64) 100 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16416]: [8, 16) 5 |@@ | [16, 32) 101 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 90 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16422]: [8, 16) 26 |@@@@@@@@@@@@@ | [16, 32) 100 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 69 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 | | @latency[5707]: [0] 90 |@@ | [1] 1195 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2120 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1070 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 857 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 16 | | @latency[5705]: [0] 87 |@@ | [1] 1184 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1974 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1253 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 837 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 13 | | @latency[5703]: [0] 92 |@@ | [1] 991 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1929 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1335 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 999 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 15 | | @latency[6701]: [1] 36 | | [2, 4) 1147 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 829 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2043 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 926 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1061 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 140 |@@@ | @latency[5706]: [1] 49 | | [2, 4) 56 | | [4, 8) 177 |@ | [8, 16) 6292 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 15 | | @latency[5701]: [0] 20 | | [1] 1787 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3843 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1472 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 2257 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 450 |@@@@@@ | [32, 64) 381 |@@@@@ | [64, 128) 35 | | @latency[5708]: [1] 61 | | [2, 4) 121 | | [4, 8) 302 |@ | [8, 16) 10136 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 24 | | @latency[5704]: [1] 74 | | [2, 4) 123 | | [4, 8) 379 |@ | [8, 16) 10344 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 29 | | @latency[6702]: [0] 1 | | [1] 20125 | | [2, 4) 18809 | | [4, 8) 31307 | | [8, 16) 1971207 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 148779 |@@@ | [32, 64) 142925 |@@@ | [64, 128) 3003 | | [128, 256) 87 | | [256, 512) 6 | | [512, 1K) 7 | | @latency[5702]: [0] 379 | | [1] 40183 | | [2, 4) 41358 | | [4, 8) 108133 |@ | [8, 16) 3178322 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13276 | | [32, 64) 261 | | [64, 128) 4 | | @latency[0]: [0] 31 | | [1] 19414 | | [2, 4) 86553 |@ | [4, 8) 75441 | | [8, 16) 4005002 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 223011 |@@ | [32, 64) 290207 |@@@ | [64, 128) 14482 | | @latency[4729]: [0] 29338 | | [1] 646621 |@@@@ | [2, 4) 727458 |@@@@@ | [4, 8) 534971 |@@@ | [8, 16) 7280826 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 145882 |@ | [32, 64) 110623 | | [64, 128) 4138 | | [128, 256) 30 | | [256, 512) 17 | | [512, 1K) 11 | | [1K, 2K) 2 | | @start[2059525]: 30210036224391345 @start[2059189]: 30210036228256547 @start[2059387]: 30210036228268700 [Mon Dec 29 03:32:10 UTC 2025] respawn: 0: stopped pid 17 with status 0 [Mon Dec 29 03:32:10 UTC 2025] respawn: sleeping 1 seconds... [Mon Dec 29 03:32:11 UTC 2025] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 35 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @dport[2278693]: 0 @dport[2059387]: 0 @dport[2059189]: 4729 @dport[2064083]: 5702 @dport[2059525]: 6702 @latency[5703]: [1] 6 | | [2, 4) 447 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 711 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 164 |@@@@@@@@@@@ | [16, 32) 65 |@@@@ | [32, 64) 1 | | @latency[5705]: [1] 9 | | [2, 4) 466 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 750 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 96 |@@@@@@ | [16, 32) 73 |@@@@@ | @latency[5707]: [1] 6 | | [2, 4) 492 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 715 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 114 |@@@@@@@@ | [16, 32) 66 |@@@@ | [32, 64) 1 | | @latency[5706]: [2, 4) 12 | | [4, 8) 1054 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 234 |@@@@@@@@@@@ | [16, 32) 997 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 6 | | @latency[5701]: [1] 4 | | [2, 4) 516 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1062 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 731 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 411 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 37 |@ | [64, 128) 6 | | @latency[6701]: [2, 4) 378 |@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 620 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 912 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 632 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 256 |@@@@@@@@@@@@@@ | [64, 128) 41 |@@ | @latency[5708]: [2, 4) 8 | | [4, 8) 1798 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 430 |@@@@@@@@@@@@ | [16, 32) 1836 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 12 | | @latency[5704]: [2, 4) 35 | | [4, 8) 2923 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 654 |@@@@@@@@@@@ | [16, 32) 2530 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 16 | | @latency[6702]: [1] 5492 | | [2, 4) 268248 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 389583 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 408604 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 181847 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 41447 |@@@@@ | [64, 128) 5286 | | [128, 256) 84 | | [256, 512) 16 | | [512, 1K) 2 | | @latency[5702]: [1] 11032 |@ | [2, 4) 410680 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 438773 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 234647 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 469922 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 2490 | | [64, 128) 116 | | [128, 256) 10 | | @latency[0]: [1] 3616 | | [2, 4) 1112686 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 367122 |@@@@@@@@@@@@@@@@@ | [8, 16) 845806 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 260118 |@@@@@@@@@@@@ | [32, 64) 23425 |@ | [64, 128) 2145 | | [128, 256) 2 | | @latency[4729]: [0] 2441 | | [1] 22568 | | [2, 4) 1180405 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1304223 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 755957 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 983553 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 34600 |@ | [64, 128) 20186 | | [128, 256) 68 | | [256, 512) 6 | | [512, 1K) 0 | | [1K, 2K) 1 | | @start[2278693]: 30210665681265333 @start[2059525]: 30210665753951353 @start[2059387]: 30210665753971412 @start[2059189]: 30210665753978561 @start[2064083]: 30210665756056619 [Mon Dec 29 03:42:40 UTC 2025] respawn: 1: stopped pid 38 with status 0 [Mon Dec 29 03:42:40 UTC 2025] respawn: sleeping 1 seconds... [Mon Dec 29 03:42:41 UTC 2025] respawn: 2: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 35 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end.