[Thu Dec 18 15:56:52 UTC 2025] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. [Thu Dec 18 17:02:27 UTC 2025] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. [Thu Dec 18 17:04:10 UTC 2025] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[16418]: [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@@@@ | @latency[16420]: [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16406]: [16, 32) 1 |@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16408]: [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16404]: [32, 64) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16410]: [16, 32) 1 |@@@ | [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16412]: [16, 32) 1 |@@@ | [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16414]: [16, 32) 1 |@@@ | [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@ | @latency[16432]: [32, 64) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16424]: [8, 16) 1 |@ | [16, 32) 5 |@@@@@@@@@ | [32, 64) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16428]: [8, 16) 9 |@@@@@@@@@@@@@@@@@@ | [16, 32) 25 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@ | @latency[16426]: [8, 16) 1 |@@ | [16, 32) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16434]: [16, 32) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@@ | @latency[16430]: [4, 8) 1 |@@ | [8, 16) 3 |@@@@@@@@ | [16, 32) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@ | @latency[1984]: [4, 8) 1 |@@ | [8, 16) 9 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@@@@ | @latency[16394]: [16, 32) 6 |@@@ | [32, 64) 92 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16402]: [8, 16) 6 |@@@ | [16, 32) 8 |@@@@ | [32, 64) 84 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@ | @latency[16396]: [8, 16) 4 |@@ | [16, 32) 11 |@@@@@@ | [32, 64) 85 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16400]: [4, 8) 1 | | [8, 16) 4 |@@ | [16, 32) 17 |@@@@@@@@@@@ | [32, 64) 74 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 5 |@@@ | @latency[16398]: [8, 16) 2 |@ | [16, 32) 2 |@ | [32, 64) 96 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16422]: [8, 16) 1 | | [16, 32) 112 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 79 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 4 |@ | @latency[16416]: [4, 8) 2 | | [8, 16) 3 | | [16, 32) 171 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 22 |@@@@@@ | @latency[57846]: [2, 4) 4 |@ | [4, 8) 17 |@@@@ | [8, 16) 81 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 182 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 166 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 3 | | @latency[2427]: [2, 4) 41 |@@@@@@@ | [4, 8) 116 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 287 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 31 |@@@@@ | [32, 64) 3 | | @latency[53]: [1] 6 | | [2, 4) 51 |@@@@@ | [4, 8) 450 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 120 |@@@@@@@@@@@@@ | [16, 32) 320 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 289 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 29 |@@@ | [128, 256) 2 | | @latency[5707]: [1] 135 |@@ | [2, 4) 2955 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1374 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 783 |@@@@@@@@@@@@@ | [16, 32) 86 |@ | [32, 64) 1 | | @latency[5705]: [1] 144 |@@ | [2, 4) 2834 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1511 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 793 |@@@@@@@@@@@@@@ | [16, 32) 78 |@ | [32, 64) 1 | | @latency[5703]: [1] 126 |@@ | [2, 4) 2660 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1639 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 894 |@@@@@@@@@@@@@@@@@ | [16, 32) 75 |@ | @latency[6701]: [2, 4) 939 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1101 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1985 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1160 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1018 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 116 |@@@ | @latency[5706]: [1] 33 | | [2, 4) 1162 |@@@@@@@@@@ | [4, 8) 603 |@@@@@ | [8, 16) 5924 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 134 |@ | [32, 64) 9 | | @latency[5701]: [1] 113 |@ | [2, 4) 3658 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1975 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2365 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 671 |@@@@@@@@@ | [32, 64) 336 |@@@@ | [64, 128) 80 |@ | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[5708]: [1] 75 | | [2, 4) 1704 |@@@@@@@@ | [4, 8) 934 |@@@@ | [8, 16) 10171 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 182 | | [32, 64) 8 | | @latency[5704]: [1] 74 | | [2, 4) 2013 |@@@@@@@@@ | [4, 8) 1193 |@@@@@ | [8, 16) 11134 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 224 |@ | [32, 64) 8 | | @latency[6702]: [1] 148 | | [2, 4) 147345 |@@@@ | [4, 8) 226897 |@@@@@@ | [8, 16) 1722555 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 336494 |@@@@@@@@@@ | [32, 64) 132543 |@@@@ | [64, 128) 5173 | | [128, 256) 214 | | [256, 512) 7 | | [512, 1K) 1 | | [1K, 2K) 2 | | [2K, 4K) 1 | | @latency[5702]: [1] 110115 |@@ | [2, 4) 360207 |@@@@@@ | [4, 8) 375326 |@@@@@@ | [8, 16) 2810507 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 89687 |@ | [32, 64) 1421 | | [64, 128) 40 | | @latency[0]: [1] 5 | | [2, 4) 1979 | | [4, 8) 527220 |@@@@@@@ | [8, 16) 276987 |@@@ | [16, 32) 3650657 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 503949 |@@@@@@@ | [64, 128) 225420 |@@@ | [128, 256) 61 | | @latency[4729]: [0] 1420 | | [1] 233443 |@ | [2, 4) 3973661 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2313730 |@@@@@@@@@@@@@@@@ | [8, 16) 7434432 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 386360 |@@ | [32, 64) 37711 | | [64, 128) 57640 | | [128, 256) 368 | | [256, 512) 515 | | [512, 1K) 161 | | [1K, 2K) 6 | | [Thu Dec 18 18:03:41 UTC 2025] respawn: 0: stopped pid 17 with status 0 [Thu Dec 18 18:03:41 UTC 2025] respawn: sleeping 1 seconds... [Thu Dec 18 18:03:42 UTC 2025] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 35 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5703]: [1] 2 | | [2, 4) 132 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 54 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 10 |@@@ | @latency[5705]: [1] 7 |@@ | [2, 4) 132 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 44 |@@@@@@@@@@@@@@@@@ | [8, 16) 14 |@@@@@ | [16, 32) 1 | | @latency[5707]: [1] 4 |@ | [2, 4) 136 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 44 |@@@@@@@@@@@@@@@@ | [8, 16) 11 |@@@@ | [16, 32) 3 |@ | @latency[6701]: [2, 4) 24 |@@@@@@@@@@@@@@@@ | [4, 8) 26 |@@@@@@@@@@@@@@@@@ | [8, 16) 66 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 77 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 47 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 0 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[5701]: [2, 4) 139 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 106 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 70 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 15 |@@@@@ | [32, 64) 5 |@ | [64, 128) 4 |@ | @latency[5706]: [1] 13 |@ | [2, 4) 410 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 332 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 60 |@@@@@@@ | @latency[5708]: [1] 17 |@ | [2, 4) 570 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 566 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 73 |@@@@@@ | [16, 32) 1 | | @latency[5704]: [1] 23 |@ | [2, 4) 754 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 779 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 130 |@@@@@@@@ | [16, 32) 3 | | @latency[6702]: [1] 93 | | [2, 4) 10867 |@@@@@@@@@@@@@@ | [4, 8) 38943 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 29693 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 10672 |@@@@@@@@@@@@@@ | [32, 64) 1559 |@@ | [64, 128) 85 | | [128, 256) 14 | | [256, 512) 9 | | @latency[5702]: [1] 13854 |@@@@@@@@@ | [2, 4) 73690 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 54880 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 16819 |@@@@@@@@@@@ | [16, 32) 936 | | [32, 64) 12 | | [64, 128) 1 | | [128, 256) 1 | | @latency[0]: [2, 4) 754 | | [4, 8) 65654 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 86554 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 23144 |@@@@@@@@@@@@@ | [32, 64) 8701 |@@@@@ | [64, 128) 714 | | [128, 256) 7 | | @latency[4729]: [0] 25 | | [1] 10491 |@ | [2, 4) 275771 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 211377 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 52472 |@@@@@@@@@ | [16, 32) 9310 |@ | [32, 64) 10070 |@ | [64, 128) 1012 | | [128, 256) 23 | | [256, 512) 12 | | [512, 1K) 8 | | [1K, 2K) 0 | | [2K, 4K) 1 | | [Thu Dec 18 18:06:05 UTC 2025] respawn: 1: stopped pid 38 with status 0 [Thu Dec 18 18:06:05 UTC 2025] respawn: sleeping 1 seconds... [Thu Dec 18 18:06:06 UTC 2025] respawn: 2: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 56 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end.