[Sun Jan 11 01:32:14 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @dport[3405867]: 4729 @latency[53]: [1] 4 |@@@@@@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@ | [4, 8) 7 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@@ | [16, 32) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 6 |@@@@@@@@@@@@@@@@ | @latency[5704]: [4, 8) 7 |@ | [8, 16) 316 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 | | @latency[5705]: [0] 27 |@ | [1] 482 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1040 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 367 |@@@@@@@@@@@@@@@@@@ | [8, 16) 384 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 16 | | @latency[5707]: [0] 26 |@ | [1] 484 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1121 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 290 |@@@@@@@@@@@@@ | [8, 16) 378 |@@@@@@@@@@@@@@@@@ | [16, 32) 17 | | @latency[5703]: [0] 28 |@ | [1] 383 |@@@@@@@@@@@@@@@@@ | [2, 4) 1125 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 379 |@@@@@@@@@@@@@@@@@ | [8, 16) 398 |@@@@@@@@@@@@@@@@@@ | [16, 32) 7 | | @latency[6701]: [1] 17 | | [2, 4) 591 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 339 |@@@@@@@@@@@@@ | [8, 16) 1314 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 360 |@@@@@@@@@@@@@@ | [32, 64) 428 |@@@@@@@@@@@@@@@@ | [64, 128) 41 |@ | @latency[5701]: [0] 7 | | [1] 586 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1320 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 825 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1382 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 373 |@@@@@@@@@@@@@@ | [32, 64) 199 |@@@@@@@ | [64, 128) 16 | | @latency[6702]: [1] 10910 | | [2, 4) 7489 | | [4, 8) 17286 | | [8, 16) 1761931 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 49137 |@ | [32, 64) 33620 | | [64, 128) 727 | | [128, 256) 23 | | @latency[5702]: [0] 71 | | [1] 15544 | | [2, 4) 18113 | | [4, 8) 60917 |@ | [8, 16) 1895531 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 11185 | | [32, 64) 85 | | @latency[0]: [0] 23 | | [1] 8318 | | [2, 4) 35027 | | [4, 8) 50319 | | [8, 16) 3207480 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 243317 |@@@ | [32, 64) 226209 |@@@ | [64, 128) 11346 | | @latency[4729]: [0] 8788 | | [1] 313630 |@@@ | [2, 4) 341418 |@@@ | [4, 8) 189121 |@@ | [8, 16) 4637773 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 225522 |@@ | [32, 64) 18288 | | [64, 128) 1069 | | [128, 256) 6 | | [256, 512) 1 | | [512, 1K) 3 | | [1K, 2K) 2 | | @start[3405867]: 31327782547938761 [Sun Jan 11 02:01:17 UTC 2026] respawn: 0: stopped pid 24 with status 0 [Sun Jan 11 02:01:17 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 02:01:18 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 55 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[16408]: [16, 32) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16410]: [32, 64) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16394]: [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16396]: [16, 32) 3 |@@@@@@@@@@@ | [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16398]: [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@@@@@@@@ | @latency[16400]: [16, 32) 2 |@@@@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16402]: [16, 32) 4 |@@@@@@@@@@@@@@@@ | [32, 64) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16404]: [16, 32) 3 |@@@@@@@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16422]: [16, 32) 2 |@@@ | [32, 64) 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@@ | @latency[16418]: [16, 32) 1 |@ | [32, 64) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16414]: [16, 32) 4 |@@@@@@ | [32, 64) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16416]: [16, 32) 8 |@@@@@@@@@@@@@@@@ | [32, 64) 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@ | @latency[16424]: [4, 8) 1 |@@@ | [8, 16) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16420]: [8, 16) 1 |@@ | [16, 32) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[1984]: [4, 8) 1 |@ | [8, 16) 1 |@ | [16, 32) 14 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 36 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[53]: [2, 4) 5 |@@@@@@@@@@@@@@@@@ | [4, 8) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 5 |@@@@@@@@@@@@@@@@@ | @latency[16384]: [8, 16) 3 |@ | [16, 32) 8 |@@@@@ | [32, 64) 81 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 7 |@@@@ | @latency[16388]: [8, 16) 13 |@@@@@@@@@ | [16, 32) 17 |@@@@@@@@@@@@@ | [32, 64) 68 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16386]: [32, 64) 98 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16392]: [8, 16) 6 |@@@@ | [16, 32) 15 |@@@@@@@@@@ | [32, 64) 78 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16390]: [8, 16) 17 |@@@@@@@@@@@@@@ | [16, 32) 24 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 60 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16412]: [2, 4) 4 |@@ | [4, 8) 1 | | [8, 16) 65 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 85 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 38 |@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 | | @latency[16406]: [2, 4) 4 |@@ | [4, 8) 1 | | [8, 16) 83 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 68 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 40 |@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5705]: [0] 76 |@@ | [1] 935 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1631 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 580 |@@@@@@@@@@@@@@@@@@ | [8, 16) 515 |@@@@@@@@@@@@@@@@ | [16, 32) 5 | | @latency[5707]: [0] 67 |@ | [1] 917 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1789 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 453 |@@@@@@@@@@@@@ | [8, 16) 507 |@@@@@@@@@@@@@@ | [16, 32) 9 | | @latency[5703]: [0] 73 |@@ | [1] 783 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1632 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 711 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 547 |@@@@@@@@@@@@@@@@@ | [16, 32) 10 | | @latency[6701]: [1] 25 | | [2, 4) 854 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 515 |@@@@@@@@@@@@@@@@@@ | [8, 16) 1454 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 548 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 629 |@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 78 |@@ | @latency[5701]: [0] 12 | | [1] 1192 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2046 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 821 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1258 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 366 |@@@@@@@@@ | [32, 64) 254 |@@@@@@ | [64, 128) 33 | | @latency[5704]: [1] 6 | | [2, 4) 14 | | [4, 8) 142 |@ | [8, 16) 6067 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 14 | | [32, 64) 1 | | @latency[6702]: [1] 15554 | | [2, 4) 12816 | | [4, 8) 15633 | | [8, 16) 1573963 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 38823 |@ | [32, 64) 40082 |@ | [64, 128) 1103 | | [128, 256) 19 | | [256, 512) 1 | | [512, 1K) 1 | | @latency[5702]: [0] 279 | | [1] 34811 | | [2, 4) 20025 | | [4, 8) 61617 |@ | [8, 16) 1962985 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 12844 | | [32, 64) 149 | | [64, 128) 1 | | @latency[0]: [0] 58 | | [1] 12018 | | [2, 4) 60179 |@ | [4, 8) 47183 | | [8, 16) 2839431 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 243228 |@@@@ | [32, 64) 209987 |@@@ | [64, 128) 11204 | | @latency[4729]: [0] 24273 | | [1] 482762 |@@@@@ | [2, 4) 520234 |@@@@@ | [4, 8) 293434 |@@@ | [8, 16) 4777195 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 46066 | | [32, 64) 54225 | | [64, 128) 1839 | | [128, 256) 15 | | [256, 512) 10 | | [512, 1K) 8 | | [1K, 2K) 1 | | [2K, 4K) 1 | | [4K, 8K) 1 | | [Sun Jan 11 02:37:46 UTC 2026] respawn: 1: stopped pid 58 with status 0 [Sun Jan 11 02:37:46 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 02:37:48 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5703]: [0] 2 |@@@@@@@@@@ | [1] 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 3 |@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@ | [8, 16) 2 |@@@@@@@@@@ | @latency[5705]: [0] 2 |@@@@@@@@@@ | [1] 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1 |@@@@@ | [4, 8) 2 |@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@ | @latency[5707]: [1] 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@@@@@@ | @latency[5701]: [1] 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 7 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@@@ | [16, 32) 2 |@@@@@@ | @latency[0]: [1] 13 |@@@@@@@@@@@@@ | [2, 4) 52 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@ | [8, 16) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@ | [32, 64) 4 |@@@@ | @latency[4729]: [0] 1451 |@@@@@@ | [1] 11109 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 2439 |@@@@@@@@@@@ | [4, 8) 922 |@@@@ | [8, 16) 4237 |@@@@@@@@@@@@@@@@@@@ | [16, 32) 33 | | [32, 64) 22 | | [64, 128) 37 | | [Sun Jan 11 02:39:26 UTC 2026] respawn: 0: stopped pid 23 with status 0 [Sun Jan 11 02:39:26 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 02:39:28 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[47777]: [4, 8) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[53]: [1] 1 |@@@@@ | [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 3 |@@@@@@@@@@@@@@@@@ | [8, 16) 0 | | [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5707]: [0] 48 |@ | [1] 762 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1902 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 443 |@@@@@@@@@@@@ | [8, 16) 279 |@@@@@@@ | [16, 32) 7 | | @latency[5705]: [0] 44 |@ | [1] 716 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 1887 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 513 |@@@@@@@@@@@@@@ | [8, 16) 273 |@@@@@@@ | [16, 32) 13 | | @latency[5703]: [0] 38 |@ | [1] 777 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1774 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 538 |@@@@@@@@@@@@@@@ | [8, 16) 312 |@@@@@@@@@ | [16, 32) 21 | | @latency[5706]: [0] 1 | | [1] 368 |@@@@@@ | [2, 4) 459 |@@@@@@@@ | [4, 8) 477 |@@@@@@@@ | [8, 16) 2778 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 8 | | [32, 64) 1 | | @latency[6701]: [1] 35 |@ | [2, 4) 778 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1030 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1377 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 686 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 426 |@@@@@@@@@@@@@@@@ | [64, 128) 11 | | @latency[5701]: [0] 7 | | [1] 773 |@@@@@@@@@@@@@@@@ | [2, 4) 2390 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1240 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1483 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 383 |@@@@@@@@ | [32, 64) 149 |@@@ | [64, 128) 13 | | @latency[5708]: [0] 9 | | [1] 691 |@@@@@@@@ | [2, 4) 948 |@@@@@@@@@@@ | [4, 8) 1077 |@@@@@@@@@@@@ | [8, 16) 4464 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13 | | [32, 64) 2 | | @latency[5704]: [0] 1 | | [1] 434 |@@@ | [2, 4) 580 |@@@@@ | [4, 8) 994 |@@@@@@@@@ | [8, 16) 5667 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 15 | | [32, 64) 0 | | [64, 128) 1 | | @latency[6702]: [0] 1 | | [1] 33833 |@ | [2, 4) 39511 |@ | [4, 8) 349447 |@@@@@@@@@@@@@@@@@ | [8, 16) 1058404 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 139017 |@@@@@@ | [32, 64) 65094 |@@@ | [64, 128) 715 | | [128, 256) 69 | | [256, 512) 2 | | @latency[5702]: [0] 2059 | | [1] 186827 |@@@@@@@@@@ | [2, 4) 257425 |@@@@@@@@@@@@@@ | [4, 8) 886424 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 903443 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 8854 | | [32, 64) 152 | | [64, 128) 3 | | @latency[0]: [1] 226 | | [2, 4) 3911 | | [4, 8) 435533 |@@@@@@@@@ | [8, 16) 220786 |@@@@ | [16, 32) 2498427 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 109122 |@@ | [64, 128) 130990 |@@ | [128, 256) 10 | | @latency[4729]: [0] 19577 | | [1] 678028 |@@@@@@@@@@ | [2, 4) 1009877 |@@@@@@@@@@@@@@@ | [4, 8) 1190408 |@@@@@@@@@@@@@@@@@ | [8, 16) 3482459 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 102987 |@ | [32, 64) 37111 | | [64, 128) 1972 | | [128, 256) 3 | | [256, 512) 2 | | [512, 1K) 1 | | [Sun Jan 11 03:16:17 UTC 2026] respawn: 0: stopped pid 25 with status 0 [Sun Jan 11 03:16:17 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 03:16:18 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 55 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[6701]: [4, 8) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5703]: [1] 2 |@@ | [2, 4) 37 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 14 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 2 |@@ | @latency[5705]: [1] 3 |@@@ | [2, 4) 41 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 10 |@@@@@@@@@@@@ | [8, 16) 1 |@ | @latency[5707]: [1] 2 |@@ | [2, 4) 36 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 16 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@ | @latency[5701]: [1] 1 |@ | [2, 4) 37 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@ | [16, 32) 2 |@@ | [32, 64) 1 |@ | @latency[6702]: [1] 104 |@@@@ | [2, 4) 175 |@@@@@@@ | [4, 8) 1177 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 101 |@@@@ | [16, 32) 19 | | @latency[0]: [2, 4) 5 | | [4, 8) 2931 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 391 |@@@@@@ | [16, 32) 132 |@@ | [32, 64) 6 | | [64, 128) 1 | | @latency[5702]: [0] 942 |@@@@@@@ | [1] 5487 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 6164 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1014 |@@@@@@@@ | [8, 16) 3513 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 81 | | [32, 64) 1 | | @latency[4729]: [0] 1516 |@@@@ | [1] 6437 |@@@@@@@@@@@@@@@@@@ | [2, 4) 17663 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 10568 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4701 |@@@@@@@@@@@@@ | [16, 32) 760 |@@ | [32, 64) 487 |@ | [64, 128) 14 | | [128, 256) 1 | | [Sun Jan 11 03:16:45 UTC 2026] respawn: 1: stopped pid 58 with status 0 [Sun Jan 11 03:16:45 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 03:16:46 UTC 2026] respawn: 2: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 91 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[16388]: [4, 8) 5 |@@@@@@@@@@ | [8, 16) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16384]: [4, 8) 7 |@@@@@@@@ | [8, 16) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 41 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@ | @latency[16386]: [2, 4) 1 |@ | [4, 8) 11 |@@@@@@@@@@@@@@@@ | [8, 16) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@ | @latency[5707]: [0] 1 | | [1] 64 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 60 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 10 |@@@@@@@@ | [16, 32) 1 | | @latency[5703]: [0] 2 |@ | [1] 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 66 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 28 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 17 |@@@@@@@@@@@@@ | [16, 32) 1 | | @latency[5705]: [1] 67 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 59 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 12 |@@@@@@@@@ | @latency[6701]: [2, 4) 42 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 63 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 56 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 18 |@@@@@@@@@@@@@@ | [32, 64) 5 |@@@@ | [64, 128) 1 | | @latency[5701]: [1] 68 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 86 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 48 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 69 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 23 |@@@@@@@@@@@@@ | [32, 64) 28 |@@@@@@@@@@@@@@@@ | [64, 128) 1 | | @latency[5706]: [0] 5 |@ | [1] 79 |@@@@@@@@@@@@@@@@@@ | [2, 4) 224 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 49 |@@@@@@@@@@@ | [8, 16) 68 |@@@@@@@@@@@@@@@ | @latency[5704]: [0] 2 | | [1] 54 |@@@@@@@@@@@ | [2, 4) 254 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 49 |@@@@@@@@@@ | [8, 16) 84 |@@@@@@@@@@@@@@@@@ | @latency[5708]: [0] 2 | | [1] 104 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 218 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 76 |@@@@@@@@@@@@@@@@@@ | [8, 16) 175 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 | | [32, 64) 0 | | [64, 128) 1 | | @latency[6702]: [1] 5665 |@@@@@@@@@@ | [2, 4) 7425 |@@@@@@@@@@@@@ | [4, 8) 27892 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 23338 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 10705 |@@@@@@@@@@@@@@@@@@@ | [32, 64) 3547 |@@@@@@ | [64, 128) 89 | | [128, 256) 8 | | @latency[0]: [2, 4) 274 | | [4, 8) 65839 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 19697 |@@@@@@@@@@@@@@@ | [16, 32) 66166 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 5093 |@@@@ | [64, 128) 1842 |@ | @latency[5702]: [0] 2726 |@ | [1] 122021 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 54224 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 35093 |@@@@@@@@@@@@@@ | [8, 16) 39136 |@@@@@@@@@@@@@@@@ | [16, 32) 1184 | | [32, 64) 19 | | [64, 128) 5 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[4729]: [0] 3867 |@ | [1] 156834 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 159680 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 67694 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 117297 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6983 |@@ | [32, 64) 2970 | | [64, 128) 116 | | [128, 256) 2 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 1 | | [Sun Jan 11 03:19:58 UTC 2026] respawn: 2: stopped pid 99 with status 0 [Sun Jan 11 03:19:58 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 03:19:59 UTC 2026] respawn: 3: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 127 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[16402]: [4, 8) 2 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@ | @latency[16404]: [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16390]: [8, 16) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@ | [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16392]: [8, 16) 1 |@@@@@ | [16, 32) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16394]: [8, 16) 1 |@@@@@ | [16, 32) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16396]: [8, 16) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 1 |@@@@@@ | [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16388]: [8, 16) 3 |@@@@@@@@@@@@@@@@@ | [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16398]: [8, 16) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16416]: [4, 8) 1 |@ | [8, 16) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@ | @latency[16408]: [4, 8) 2 |@@@@@ | [8, 16) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4 |@@@@@@@@@@@ | [32, 64) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16410]: [4, 8) 3 |@@@@@@@@@@ | [8, 16) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4 |@@@@@@@@@@@@@ | [32, 64) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16412]: [8, 16) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@@@ | @latency[16418]: [2, 4) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 6 |@@@@@@@@@@@@@@@@@@ | [8, 16) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16414]: [2, 4) 4 |@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@ | [8, 16) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 4 |@@@@@@@@@@ | [32, 64) 6 |@@@@@@@@@@@@@@@@ | [64, 128) 2 |@@@@@ | @latency[1984]: [4, 8) 1 |@@ | [8, 16) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 22 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@ | @latency[16386]: [4, 8) 4 |@@@@@ | [8, 16) 37 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 17 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 38 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16384]: [2, 4) 2 |@@ | [4, 8) 19 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 43 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 20 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 12 |@@@@@@@@@@@@@@ | [64, 128) 2 |@@ | @latency[16400]: [1] 1 | | [2, 4) 16 |@@@@@@@@@@@@@@ | [4, 8) 19 |@@@@@@@@@@@@@@@@ | [8, 16) 59 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 55 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 46 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16406]: [2, 4) 19 |@@@@@@@@@@@@@@@@ | [4, 8) 17 |@@@@@@@@@@@@@@ | [8, 16) 61 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 49 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 51 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 | | @latency[6701]: [2, 4) 61 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 90 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 130 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 58 |@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 23 |@@@@@@@@@ | [64, 128) 1 | | @latency[5707]: [0] 8 | | [1] 317 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 478 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 46 |@@@@@ | [8, 16) 18 |@ | @latency[5705]: [0] 6 | | [1] 308 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 491 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 49 |@@@@@ | [8, 16) 23 |@@ | [16, 32) 1 | | @latency[5703]: [0] 3 | | [1] 318 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 492 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 57 |@@@@@@ | [8, 16) 21 |@@ | [16, 32) 2 | | @latency[5701]: [0] 4 | | [1] 345 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 504 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 158 |@@@@@@@@@@@@@@@@ | [8, 16) 96 |@@@@@@@@@ | [16, 32) 38 |@@@ | [32, 64) 7 | | [64, 128) 1 | | @latency[5706]: [0] 10 | | [1] 584 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 659 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 74 |@@@@@ | [8, 16) 140 |@@@@@@@@@@@ | [16, 32) 1 | | @latency[5708]: [0] 9 | | [1] 610 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 627 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 81 |@@@@@@ | [8, 16) 143 |@@@@@@@@@@@ | [16, 32) 1 | | @latency[5704]: [1] 549 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 715 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 57 |@@@@ | [8, 16) 156 |@@@@@@@@@@@ | [16, 32) 1 | | @latency[6702]: [1] 31848 |@@@@@@@@@@@@@@@@ | [2, 4) 28927 |@@@@@@@@@@@@@@@ | [4, 8) 100065 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 24050 |@@@@@@@@@@@@ | [16, 32) 7196 |@@@ | [32, 64) 2119 |@ | [64, 128) 44 | | [128, 256) 3 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[5702]: [0] 1771 | | [1] 182377 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 86112 |@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 23137 |@@@@@@ | [8, 16) 21392 |@@@@@@ | [16, 32) 545 | | [32, 64) 9 | | [64, 128) 1 | | @latency[0]: [1] 72 | | [2, 4) 1403 | | [4, 8) 301282 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 34266 |@@@@@ | [16, 32) 51775 |@@@@@@@@ | [32, 64) 3435 | | [64, 128) 1901 | | @latency[4729]: [0] 7493 | | [1] 323411 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 444944 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 93304 |@@@@@@@@@@ | [8, 16) 90136 |@@@@@@@@@@ | [16, 32) 8965 |@ | [32, 64) 1382 | | [64, 128) 106 | | [128, 256) 5 | | [256, 512) 2 | | [Sun Jan 11 03:26:56 UTC 2026] respawn: 3: stopped pid 130 with status 0 [Sun Jan 11 03:26:56 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 03:26:57 UTC 2026] respawn: 4: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 163 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @dport[3986246]: 0 @dport[3985945]: 4729 @dport[3986472]: 6702 @latency[53]: [1] 1 |@@@ | [2, 4) 3 |@@@@@@@@@@ | [4, 8) 1 |@@@ | [8, 16) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 6 |@@@@@@@@@@@@@@@@@@@@ | @latency[5707]: [0] 19 | | [1] 613 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1169 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 296 |@@@@@@@@@@@@@ | [8, 16) 156 |@@@@@@ | [16, 32) 3 | | [32, 64) 1 | | @latency[5705]: [0] 15 | | [1] 572 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1165 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 352 |@@@@@@@@@@@@@@@ | [8, 16) 157 |@@@@@@@ | [16, 32) 5 | | @latency[5703]: [0] 12 | | [1] 527 |@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1174 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 377 |@@@@@@@@@@@@@@@@ | [8, 16) 188 |@@@@@@@@ | [16, 32) 3 | | @latency[5706]: [1] 208 |@@@@@@ | [2, 4) 473 |@@@@@@@@@@@@@ | [4, 8) 1759 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 979 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 10 | | @latency[6701]: [1] 17 | | [2, 4) 813 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 969 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1326 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 612 |@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 309 |@@@@@@@@@@@@ | [64, 128) 18 | | @latency[5701]: [0] 6 | | [1] 648 |@@@@@@@@@@@@@@ | [2, 4) 2352 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 841 |@@@@@@@@@@@@@@@@@@ | [8, 16) 942 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 193 |@@@@ | [32, 64) 78 |@ | [64, 128) 4 | | @latency[5708]: [0] 1 | | [1] 280 |@@@@ | [2, 4) 637 |@@@@@@@@@@ | [4, 8) 3136 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 1557 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 | | @latency[5704]: [0] 8 | | [1] 706 |@@@@@@@ | [2, 4) 1428 |@@@@@@@@@@@@@@ | [4, 8) 5076 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 2469 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 15 | | [32, 64) 3 | | @latency[6702]: [1] 69439 |@@@ | [2, 4) 107736 |@@@@@ | [4, 8) 522817 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 951306 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 237827 |@@@@@@@@@@@@@ | [32, 64) 60371 |@@@ | [64, 128) 579 | | [128, 256) 69 | | [256, 512) 15 | | [512, 1K) 5 | | @latency[5702]: [0] 1818 | | [1] 304380 |@@@@@@@@@@@@ | [2, 4) 227477 |@@@@@@@@@ | [4, 8) 1294533 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 588248 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5963 | | [32, 64) 122 | | [64, 128) 8 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[0]: [0] 94 | | [1] 32487 | | [2, 4) 287822 |@@@@@ | [4, 8) 450614 |@@@@@@@@@ | [8, 16) 356563 |@@@@@@@ | [16, 32) 2563420 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 161156 |@@@ | [64, 128) 70180 |@ | @latency[4729]: [0] 8100 | | [1] 467591 |@@@@@@ | [2, 4) 1273575 |@@@@@@@@@@@@@@@@@ | [4, 8) 1042595 |@@@@@@@@@@@@@@ | [8, 16) 3746262 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 41864 | | [32, 64) 16245 | | [64, 128) 580 | | [128, 256) 11 | | [256, 512) 6 | | [512, 1K) 6 | | [1K, 2K) 1 | | [2K, 4K) 1 | | @start[3986472]: 31334046057423284 @start[3986246]: 31334046057648531 @start[3985945]: 31334046060098222 [Sun Jan 11 03:45:40 UTC 2026] respawn: 4: stopped pid 166 with status 0 [Sun Jan 11 03:45:40 UTC 2026] respawn: sleeping 1 seconds... [Sun Jan 11 03:45:41 UTC 2026] respawn: 5: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 163