[Wed Jan 7 01:31:19 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[16418]: [16, 32) 2 |@@@@@@@@@@@@@ | [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16416]: [16, 32) 1 |@@@@@ | [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16406]: [16, 32) 1 |@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@ | @latency[16410]: [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16408]: [16, 32) 2 |@@@@@@@ | [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@@@@@@ | @latency[16412]: [4, 8) 2 |@@@@@@@ | [8, 16) 1 |@@@ | [16, 32) 2 |@@@@@@@ | [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16430]: [16, 32) 2 |@@@ | [32, 64) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@ | @latency[16422]: [16, 32) 5 |@@@@@@@@ | [32, 64) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16424]: [8, 16) 4 |@@@@@@@@@@@@ | [16, 32) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16426]: [16, 32) 2 |@@@ | [32, 64) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@@ | @latency[16432]: [4, 8) 1 |@@ | [8, 16) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 6 |@@@@@@@@@@@@@@@@@ | @latency[16428]: [8, 16) 6 |@@@@@@@@@@@@@@ | [16, 32) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[1984]: [16, 32) 13 |@@@@@@@@@@@@@@@@@@ | [32, 64) 37 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@ | @latency[16394]: [16, 32) 1 | | [32, 64) 98 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16400]: [8, 16) 1 | | [16, 32) 1 | | [32, 64) 95 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@ | @latency[16398]: [8, 16) 16 |@@@@@@@@@@@@ | [16, 32) 15 |@@@@@@@@@@@ | [32, 64) 67 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16396]: [8, 16) 12 |@@@@@@@@ | [16, 32) 12 |@@@@@@@@ | [32, 64) 75 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16402]: [8, 16) 14 |@@@@@@@@ | [16, 32) 3 |@ | [32, 64) 82 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16420]: [8, 16) 9 |@@@@ | [16, 32) 99 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 85 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 | | @latency[16414]: [2, 4) 1 | | [4, 8) 1 | | [8, 16) 48 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 100 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 44 |@@@@@@@@@@@@@@@@@@@@@@ | @latency[16404]: [8, 16) 2 | | [16, 32) 19 |@@@@@ | [32, 64) 169 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 6 |@ | @latency[53]: [1] 5 |@@ | [2, 4) 97 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 48 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 44 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 80 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 69 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 5 |@@ | [128, 256) 1 | | @latency[5705]: [0] 105 |@@ | [1] 1436 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2234 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1272 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 984 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 7 | | @latency[5707]: [0] 98 |@@ | [1] 1501 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2329 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1141 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 953 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 14 | | [32, 64) 2 | | @latency[5703]: [0] 102 |@@ | [1] 1297 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2114 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1418 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1114 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 9 | | @latency[5704]: [1] 7 | | [2, 4) 5 | | [4, 8) 148 |@ | [8, 16) 5988 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 11 | | [32, 64) 6 | | @latency[6701]: [1] 70 |@ | [2, 4) 1379 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1032 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2514 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1011 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 926 |@@@@@@@@@@@@@@@@@@@ | [64, 128) 245 |@@@@@ | [128, 256) 2 | | [256, 512) 2 | | @latency[5701]: [0] 13 | | [1] 1766 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3234 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1747 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2902 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 551 |@@@@@@@@ | [32, 64) 434 |@@@@@@ | [64, 128) 34 | | [128, 256) 1 | | [256, 512) 1 | | @latency[6702]: [1] 74559 |@ | [2, 4) 42819 | | [4, 8) 45585 | | [8, 16) 3091027 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 246092 |@@@@ | [32, 64) 91260 |@ | [64, 128) 3899 | | [128, 256) 115 | | [256, 512) 3 | | [512, 1K) 3 | | @latency[5702]: [0] 529 | | [1] 132513 |@ | [2, 4) 46126 | | [4, 8) 119183 |@ | [8, 16) 3788585 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 16820 | | [32, 64) 573 | | [64, 128) 6 | | @latency[0]: [0] 213 | | [1] 38061 | | [2, 4) 250717 |@@ | [4, 8) 101376 | | [8, 16) 6122958 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 271482 |@@ | [32, 64) 433071 |@@@ | [64, 128) 20249 | | @latency[4729]: [0] 31045 | | [1] 846124 |@@@@ | [2, 4) 868506 |@@@@ | [4, 8) 564440 |@@@ | [8, 16) 9477375 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 107087 | | [32, 64) 67003 | | [64, 128) 3584 | | [128, 256) 16 | | [256, 512) 7 | | [512, 1K) 5 | | [1K, 2K) 0 | | [2K, 4K) 1 | | [4K, 8K) 1 | | [Wed Jan 7 02:36:44 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Wed Jan 7 02:36:44 UTC 2026] respawn: sleeping 1 seconds... [Wed Jan 7 02:36:46 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5703]: [1] 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2 |@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5705]: [0] 2 |@@@@@@@@@@@ | [1] 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@ | [4, 8) 2 |@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5707]: [0] 2 |@@@@@@@@@@@ | [1] 3 |@@@@@@@@@@@@@@@@@ | [2, 4) 2 |@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@ | [8, 16) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@ | @latency[5701]: [1] 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@ | @latency[0]: [1] 1 |@ | [2, 4) 45 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@ | [8, 16) 39 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@ | [32, 64) 6 |@@@@@@ | [64, 128) 4 |@@@@ | @latency[4729]: [0] 828 |@@@ | [1] 10796 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1889 |@@@@@@@@@ | [4, 8) 1432 |@@@@@@ | [8, 16) 5160 |@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 72 | | [32, 64) 26 | | [64, 128) 50 | | [Wed Jan 7 02:38:26 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Wed Jan 7 02:38:26 UTC 2026] respawn: sleeping 1 seconds... [Wed Jan 7 02:38:28 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5705]: [0] 25 |@@ | [1] 338 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 525 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 304 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 238 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 | | @latency[5707]: [0] 26 |@@ | [1] 349 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 547 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 276 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 232 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 | | @latency[5703]: [0] 25 |@@ | [1] 272 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 534 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 337 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 266 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 | | @latency[6701]: [1] 15 | | [2, 4) 507 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 369 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 975 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 352 |@@@@@@@@@@@@@@@@@@ | [32, 64) 356 |@@@@@@@@@@@@@@@@@@ | [64, 128) 54 |@@ | @latency[5706]: [1] 22 | | [2, 4) 12 | | [4, 8) 78 |@ | [8, 16) 2663 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 7 | | @latency[5701]: [0] 8 | | [1] 592 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1251 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 496 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 895 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 128 |@@@@@ | [32, 64) 90 |@@@ | [64, 128) 15 | | [128, 256) 1 | | @latency[5704]: [1] 23 | | [2, 4) 11 | | [4, 8) 110 |@ | [8, 16) 4670 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 6 | | @latency[5708]: [1] 52 | | [2, 4) 37 | | [4, 8) 127 |@ | [8, 16) 4804 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 15 | | @latency[6702]: [0] 5 | | [1] 95779 |@@@@@ | [2, 4) 29672 |@ | [4, 8) 30311 |@ | [8, 16) 846554 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 51998 |@@@ | [32, 64) 64316 |@@@ | [64, 128) 2202 | | [128, 256) 28 | | [256, 512) 2 | | [512, 1K) 2 | | @latency[5702]: [0] 743 | | [1] 125823 |@@@@@ | [2, 4) 27582 |@ | [4, 8) 52484 |@@ | [8, 16) 1203940 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4979 | | [32, 64) 66 | | @latency[0]: [0] 195 | | [1] 72009 |@@ | [2, 4) 197476 |@@@@@@ | [4, 8) 52508 |@ | [8, 16) 1698332 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 100291 |@@@ | [32, 64) 128647 |@@@ | [64, 128) 6251 | | @latency[4729]: [0] 9380 | | [1] 349386 |@@@@@@ | [2, 4) 339740 |@@@@@ | [4, 8) 188972 |@@@ | [8, 16) 2961232 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 29353 | | [32, 64) 22970 | | [64, 128) 941 | | [128, 256) 3 | | [256, 512) 3 | | [512, 1K) 1 | | [Wed Jan 7 02:58:13 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Wed Jan 7 02:58:13 UTC 2026] respawn: sleeping 1 seconds... [Wed Jan 7 02:58:14 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 35 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5706]: [1] 1 |@@@@@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[53]: [1] 4 |@@@@@@@@@@@@@@ | [2, 4) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@ | [16, 32) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[6701]: [2, 4) 17 |@@@@@@@@@@@@@ | [4, 8) 66 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 50 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 8 |@@@@@@ | [64, 128) 3 |@@ | @latency[5703]: [0] 5 | | [1] 195 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 531 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 108 |@@@@@@@@@@ | [8, 16) 63 |@@@@@@ | [16, 32) 1 | | @latency[5705]: [0] 4 | | [1] 257 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 464 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 113 |@@@@@@@@@@@@ | [8, 16) 60 |@@@@@@ | [16, 32) 5 | | @latency[5707]: [0] 6 | | [1] 241 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 513 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 80 |@@@@@@@@ | [8, 16) 62 |@@@@@@ | [16, 32) 1 | | @latency[5701]: [0] 2 | | [1] 250 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 498 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 214 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 143 |@@@@@@@@@@@@@@ | [16, 32) 77 |@@@@@@@@ | [32, 64) 15 |@ | @latency[6702]: [0] 1 | | [1] 28058 |@@@@@@@@@@@@@@@ | [2, 4) 25540 |@@@@@@@@@@@@@ | [4, 8) 93269 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 95993 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 29587 |@@@@@@@@@@@@@@@@ | [32, 64) 9465 |@@@@@ | [64, 128) 1354 | | [128, 256) 16 | | [256, 512) 2 | | @latency[5702]: [0] 468 | | [1] 94602 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 111294 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 48533 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 125333 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2123 | | [32, 64) 89 | | [64, 128) 12 | | [128, 256) 1 | | [256, 512) 1 | | @latency[0]: [0] 319 | | [1] 12355 |@@ | [2, 4) 242145 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 70434 |@@@@@@@@@@@@@@@ | [8, 16) 221519 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 15760 |@@@ | [32, 64) 8756 |@ | [64, 128) 340 | | [128, 256) 1 | | [256, 512) 1 | | @latency[4729]: [0] 6465 | | [1] 180414 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 450294 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 181313 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 320623 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 15384 |@ | [32, 64) 6431 | | [64, 128) 399 | | [128, 256) 6 | | [256, 512) 9 | | [512, 1K) 2 | | [Wed Jan 7 03:05:41 UTC 2026] respawn: 1: stopped pid 38 with status 0 [Wed Jan 7 03:05:41 UTC 2026] respawn: sleeping 1 seconds... [Wed Jan 7 03:05:42 UTC 2026] respawn: 2: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 56 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @dport[2182362]: 0 @dport[2182166]: 5702 @dport[2182502]: 6702 @latency[16410]: [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 1 |@@@@@@@@@@ | @latency[16408]: [4, 8) 1 |@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16394]: [4, 8) 2 |@@@@@@@@ | [8, 16) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 3 |@@@@@@@@@@@@@ | @latency[16396]: [8, 16) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16398]: [4, 8) 2 |@@@@@@@@@ | [8, 16) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 3 |@@@@@@@@@@@@@@ | [32, 64) 1 |@@@@ | @latency[16400]: [4, 8) 1 |@@@@@ | [8, 16) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16402]: [4, 8) 2 |@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16404]: [4, 8) 2 |@@@@@@@@@ | [8, 16) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4 |@@@@@@@@@@@@@@@@@@ | [32, 64) 3 |@@@@@@@@@@@@@@ | @latency[16422]: [4, 8) 3 |@@@@@@ | [8, 16) 25 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 5 |@@@@@@@@@@ | @latency[16414]: [2, 4) 2 |@@@@ | [4, 8) 3 |@@@@@@@ | [8, 16) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@ | [32, 64) 5 |@@@@@@@@@@@@ | [64, 128) 1 |@@ | @latency[16418]: [2, 4) 1 |@@@ | [4, 8) 1 |@@@ | [8, 16) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 6 |@@@@@@@@@@@@@@@@@@ | [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 2 |@@@@@@ | @latency[16416]: [8, 16) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 7 |@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 3 |@@@@@@@@@@ | @latency[16424]: [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@ | [8, 16) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16420]: [2, 4) 5 |@@@@@@@@@@@@@@@@@ | [4, 8) 5 |@@@@@@@@@@@@@@@@@ | [8, 16) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 4 |@@@@@@@@@@@@@ | [64, 128) 1 |@@@ | @latency[1984]: [4, 8) 1 |@@ | [8, 16) 8 |@@@@@@@@@@@@@@@@@@ | [16, 32) 22 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16392]: [4, 8) 5 |@@@@@ | [8, 16) 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 1 |@ | @latency[16390]: [2, 4) 6 |@@@@@@ | [4, 8) 43 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 45 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 7 |@@@@@@@@ | @latency[16384]: [2, 4) 4 |@@@ | [4, 8) 27 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 59 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 11 |@@@@@@@@@ | @latency[16388]: [4, 8) 6 |@@@ | [8, 16) 95 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 | | @latency[16386]: [2, 4) 1 | | [4, 8) 11 |@@@@@@ | [8, 16) 89 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 | | @latency[16406]: [2, 4) 16 |@@@@@@@@@@ | [4, 8) 19 |@@@@@@@@@@@@ | [8, 16) 33 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 80 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16412]: [2, 4) 38 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 46 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 20 |@@@@@@@@@@@@@@@@@@ | [64, 128) 3 |@@ | @latency[53]: [1] 10 |@@@@@@@@@@ | [2, 4) 38 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 43 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 38 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 52 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 7 |@@@@@@@ | @latency[5707]: [0] 31 | | [1] 1029 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2451 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 506 |@@@@@@@@@@ | [8, 16) 438 |@@@@@@@@@ | [16, 32) 16 | | @latency[5705]: [0] 27 | | [1] 1026 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2332 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 607 |@@@@@@@@@@@@@ | [8, 16) 457 |@@@@@@@@@@ | [16, 32) 23 | | @latency[5703]: [0] 25 | | [1] 830 |@@@@@@@@@@@@@@@@@ | [2, 4) 2406 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 695 |@@@@@@@@@@@@@@@ | [8, 16) 503 |@@@@@@@@@@ | [16, 32) 20 | | @latency[5706]: [0] 3 | | [1] 794 |@@@@@@@@@@@@@ | [2, 4) 1744 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 354 |@@@@@ | [8, 16) 3143 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 18 | | @latency[6701]: [1] 59 |@ | [2, 4) 1261 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1288 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1949 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 989 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 518 |@@@@@@@@@@@@@ | [64, 128) 45 |@ | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[5701]: [0] 16 | | [1] 1125 |@@@@@@@@@@@@@@@@@ | [2, 4) 3313 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1800 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1522 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 462 |@@@@@@@ | [32, 64) 143 |@@ | [64, 128) 22 | | @latency[5708]: [0] 3 | | [1] 1102 |@@@@@@@@@@@ | [2, 4) 2637 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 518 |@@@@@ | [8, 16) 5204 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13 | | @latency[5704]: [0] 5 | | [1] 1092 |@@@@@@ | [2, 4) 2115 |@@@@@@@@@@@@ | [4, 8) 656 |@@@@ | [8, 16) 8528 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 26 | | @latency[6702]: [0] 11 | | [1] 129630 |@@@@ | [2, 4) 99661 |@@@ | [4, 8) 179818 |@@@@@@ | [8, 16) 1490537 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 241301 |@@@@@@@@ | [32, 64) 95458 |@@@ | [64, 128) 2722 | | [128, 256) 119 | | [256, 512) 24 | | [512, 1K) 50 | | @latency[5702]: [0] 1858 | | [1] 294878 |@@@@@@ | [2, 4) 388453 |@@@@@@@@@ | [4, 8) 179662 |@@@@ | [8, 16) 2221030 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 45456 |@ | [32, 64) 177 | | [64, 128) 12 | | @latency[0]: [0] 423 | | [1] 132327 |@@ | [2, 4) 642712 |@@@@@@@@@@ | [4, 8) 154993 |@@ | [8, 16) 3196790 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 188830 |@@@ | [32, 64) 192217 |@@@ | [64, 128) 7205 | | @latency[4729]: [0] 20365 | | [1] 847589 |@@@@@@@@ | [2, 4) 1607921 |@@@@@@@@@@@@@@@@ | [4, 8) 682672 |@@@@@@@ | [8, 16) 4942968 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 584403 |@@@@@@ | [32, 64) 39352 | | [64, 128) 3198 | | [128, 256) 26 | | [256, 512) 5 | | [512, 1K) 3 | | [1K, 2K) 5 | | @start[2182166]: 30988274996176986 @start[2182362]: 30988274996488614 @start[2182502]: 30988274996533763 [Wed Jan 7 03:42:49 UTC 2026] respawn: 2: stopped pid 59 with status 0 [Wed Jan 7 03:42:49 UTC 2026] respawn: sleeping 1 seconds... [Wed Jan 7 03:42:50 UTC 2026] respawn: 3: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 56