[Tue Jan 6 03:30:09 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[53]: [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[5707]: [0] 12 | | [1] 500 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1261 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 574 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 447 |@@@@@@@@@@@@@@@@@@ | [16, 32) 33 |@ | @latency[5705]: [0] 10 | | [1] 466 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1163 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 676 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 487 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 26 |@ | @latency[5703]: [0] 5 | | [1] 402 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 1089 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 693 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 608 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 34 |@ | [32, 64) 1 | | @latency[5706]: [1] 1 | | [2, 4) 72 |@ | [4, 8) 120 |@ | [8, 16) 3225 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 13 | | [32, 64) 1 | | @latency[6701]: [1] 18 | | [2, 4) 879 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 699 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1352 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 859 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 450 |@@@@@@@@@@@@@@@@@ | [64, 128) 168 |@@@@@@ | [128, 256) 3 | | [256, 512) 1 | | @latency[5708]: [1] 4 | | [2, 4) 113 |@ | [4, 8) 177 |@ | [8, 16) 5435 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 49 | | [32, 64) 1 | | @latency[5701]: [0] 10 | | [1] 433 |@@@@@@@@@ | [2, 4) 2384 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1106 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1363 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 458 |@@@@@@@@@ | [32, 64) 170 |@@@ | [64, 128) 47 |@ | @latency[5704]: [1] 15 | | [2, 4) 169 | | [4, 8) 313 |@ | [8, 16) 8789 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 75 | | [32, 64) 1 | | @latency[6702]: [0] 7 | | [1] 81117 |@@ | [2, 4) 67716 |@ | [4, 8) 70180 |@ | [8, 16) 1889614 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 338382 |@@@@@@@@@ | [32, 64) 89717 |@@ | [64, 128) 15418 | | [128, 256) 145 | | [256, 512) 55 | | [512, 1K) 65 | | @latency[5702]: [0] 185 | | [1] 160617 |@@@ | [2, 4) 57929 |@ | [4, 8) 217567 |@@@@ | [8, 16) 2476877 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 20922 | | [32, 64) 196 | | [64, 128) 8 | | [128, 256) 1 | | @latency[0]: [0] 246 | | [1] 172651 |@@ | [2, 4) 190837 |@@ | [4, 8) 117500 |@ | [8, 16) 4108993 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 362282 |@@@@ | [32, 64) 96685 |@ | [64, 128) 81910 |@ | [128, 256) 1 | | @latency[4729]: [0] 5862 | | [1] 463558 |@@@ | [2, 4) 599318 |@@@@ | [4, 8) 410246 |@@@ | [8, 16) 6536262 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 130866 |@ | [32, 64) 13960 | | [64, 128) 17086 | | [128, 256) 39 | | [256, 512) 61 | | [512, 1K) 23 | | [1K, 2K) 7 | | [2K, 4K) 1 | | [Tue Jan 6 03:55:18 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Tue Jan 6 03:55:18 UTC 2026] respawn: sleeping 1 seconds... [Tue Jan 6 03:55:19 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 35 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5703]: [0] 1 |@ | [1] 12 |@@@@@@@@@@@@@@@@@@ | [2, 4) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 6 |@@@@@@@@@ | [8, 16) 5 |@@@@@@@ | [16, 32) 3 |@@@@ | @latency[5705]: [1] 12 |@@@@@@@@@@@@@@@@ | [2, 4) 37 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 4 |@@@@@ | [8, 16) 8 |@@@@@@@@@@@ | @latency[5707]: [0] 1 |@ | [1] 11 |@@@@@@@@@@@@@@ | [2, 4) 40 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@ | [8, 16) 6 |@@@@@@@ | [16, 32) 1 |@ | [32, 64) 1 |@ | @latency[5701]: [0] 1 |@ | [1] 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 7 |@@@@@@@@@@@ | [8, 16) 14 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 5 |@@@@@@@@ | [32, 64) 2 |@@@ | [64, 128) 1 |@ | @latency[0]: [2, 4) 7 |@@ | [4, 8) 150 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 50 |@@@@@@@@@@@@@@@@@ | [16, 32) 26 |@@@@@@@@@ | [32, 64) 22 |@@@@@@@ | [64, 128) 20 |@@@@@@ | @latency[5702]: [0] 6 | | [1] 1617 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1386 |@@@@@@@@@@@@@@@@@@ | [4, 8) 1513 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3867 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 152 |@@ | [32, 64) 3 | | @latency[4729]: [0] 80 | | [1] 7912 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 11300 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3533 |@@@@@@@@@@@@@@@@ | [8, 16) 7645 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 754 |@@@ | [32, 64) 490 |@@ | [64, 128) 75 | | [128, 256) 4 | | [256, 512) 1 | | [Tue Jan 6 03:55:43 UTC 2026] respawn: 1: stopped pid 38 with status 0 [Tue Jan 6 03:55:43 UTC 2026] respawn: sleeping 1 seconds... [Tue Jan 6 03:55:44 UTC 2026] respawn: 2: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 56 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[53]: [1] 1 |@@@@@ | [2, 4) 2 |@@@@@@@@@@ | [4, 8) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@@@@@@@ | [32, 64) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@@@@@@@@@ | @latency[5707]: [0] 9 | | [1] 663 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 834 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 203 |@@@@@@@@@@@@ | [8, 16) 109 |@@@@@@ | [16, 32) 3 | | @latency[5705]: [0] 8 | | [1] 614 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 879 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 200 |@@@@@@@@@@@ | [8, 16) 123 |@@@@@@@ | [16, 32) 5 | | @latency[5703]: [0] 8 | | [1] 624 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 833 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 222 |@@@@@@@@@@@@@ | [8, 16) 140 |@@@@@@@@ | [16, 32) 5 | | [32, 64) 1 | | @latency[6701]: [1] 111 |@@@@@@@@ | [2, 4) 314 |@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 705 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 535 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 380 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 123 |@@@@@@@@@ | [64, 128) 5 | | @latency[5701]: [0] 11 | | [1] 716 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1026 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 462 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 401 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 177 |@@@@@@@@ | [32, 64) 63 |@@@ | [64, 128) 6 | | [128, 256) 1 | | @latency[6702]: [1] 31292 |@@@@@@@@@ | [2, 4) 59945 |@@@@@@@@@@@@@@@@@ | [4, 8) 173622 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 73158 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 76227 |@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 15831 |@@@@ | [64, 128) 465 | | [128, 256) 42 | | [256, 512) 2 | | @latency[5702]: [0] 681 | | [1] 154973 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 222652 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 173078 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 107645 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1725 | | [32, 64) 77 | | [64, 128) 9 | | @latency[0]: [1] 1 | | [2, 4) 2505 | | [4, 8) 367619 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 112760 |@@@@@@@@@@@@@@@ | [16, 32) 354714 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 29198 |@@@@ | [64, 128) 6611 | | [128, 256) 6 | | [256, 512) 0 | | [512, 1K) 0 | | [1K, 2K) 1 | | @latency[4729]: [0] 6853 | | [1] 476146 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 629338 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 504693 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 407790 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 31210 |@@ | [32, 64) 10965 | | [64, 128) 773 | | [128, 256) 31 | | [256, 512) 75 | | [512, 1K) 13 | | [1K, 2K) 3 | | [2K, 4K) 1 | | [4K, 8K) 1 | | [Tue Jan 6 04:10:03 UTC 2026] respawn: 2: stopped pid 59 with status 0 [Tue Jan 6 04:10:03 UTC 2026] respawn: sleeping 1 seconds... [Tue Jan 6 04:10:04 UTC 2026] respawn: 3: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 77 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[16408]: [32, 64) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16410]: [8, 16) 1 |@@@@@@@ | [16, 32) 2 |@@@@@@@@@@@@@@ | [32, 64) 7 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16396]: [8, 16) 2 |@@@@@@@@ | [16, 32) 2 |@@@@@@@@ | [32, 64) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16398]: [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16400]: [16, 32) 3 |@@@@@@@@@@@ | [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16394]: [8, 16) 1 |@@@ | [16, 32) 2 |@@@@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16402]: [8, 16) 1 |@@@@ | [16, 32) 5 |@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16404]: [8, 16) 2 |@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@ | [32, 64) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[2427]: [4, 8) 1 |@@ | [8, 16) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16422]: [4, 8) 3 |@@@@@@@@@@@@ | [8, 16) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@@@@@@ | [32, 64) 13 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16418]: [8, 16) 4 |@@@@@@ | [16, 32) 0 | | [32, 64) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16416]: [4, 8) 2 |@@@@@ | [8, 16) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@@@@ | [32, 64) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16414]: [8, 16) 5 |@@@@@@@@@@ | [16, 32) 4 |@@@@@@@@ | [32, 64) 26 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16424]: [2, 4) 1 |@@@ | [4, 8) 2 |@@@@@@ | [8, 16) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 7 |@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16420]: [8, 16) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 8 |@@@@@@@@@@@@@@@@@@@@ | [32, 64) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[1984]: [8, 16) 8 |@@@@@@@@@@@@ | [16, 32) 9 |@@@@@@@@@@@@@ | [32, 64) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@ | @latency[16386]: [2, 4) 1 |@ | [4, 8) 1 |@ | [8, 16) 19 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 43 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 36 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16384]: [8, 16) 3 |@@ | [16, 32) 19 |@@@@@@@@@@@@ | [32, 64) 77 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16388]: [4, 8) 1 | | [8, 16) 17 |@@@@@@@@@@@@@@@ | [16, 32) 25 |@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 57 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16392]: [2, 4) 4 |@@@ | [4, 8) 2 |@ | [8, 16) 13 |@@@@@@@@@@ | [16, 32) 15 |@@@@@@@@@@@ | [32, 64) 67 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16390]: [4, 8) 1 | | [8, 16) 18 |@@@@@@@@@@@@@@@@@ | [16, 32) 27 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 54 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16406]: [2, 4) 5 |@@@ | [4, 8) 5 |@@@ | [8, 16) 80 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 21 |@@@@@@@@@@@@@ | [32, 64) 83 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 4 |@@ | @latency[16412]: [2, 4) 5 |@@@ | [4, 8) 6 |@@@@ | [8, 16) 67 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 46 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 71 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@ | @latency[53]: [1] 3 | | [2, 4) 523 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 259 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 70 |@@@@@@ | [16, 32) 391 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 453 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 17 |@ | @latency[6701]: [1] 132 |@@@@@@@@@@@ | [2, 4) 235 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 414 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 584 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 358 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 284 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 40 |@@@ | @latency[5707]: [0] 31 |@ | [1] 614 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1265 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 335 |@@@@@@@@@@@@@ | [8, 16) 164 |@@@@@@ | [16, 32) 17 | | @latency[5705]: [0] 18 | | [1] 588 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1194 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 436 |@@@@@@@@@@@@@@@@@@ | [8, 16) 200 |@@@@@@@@ | [16, 32) 14 | | @latency[5703]: [0] 9 | | [1] 628 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1021 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 548 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 254 |@@@@@@@@@@@@ | [16, 32) 20 |@ | @latency[5701]: [0] 27 | | [1] 761 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1427 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 608 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 586 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 227 |@@@@@@@@ | [32, 64) 148 |@@@@@ | [64, 128) 19 | | @latency[5704]: [0] 5 | | [1] 880 |@@@@@@@@@@@ | [2, 4) 345 |@@@@ | [4, 8) 844 |@@@@@@@@@@ | [8, 16) 4065 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 12 | | @latency[6702]: [1] 96274 |@@@@@@ | [2, 4) 82466 |@@@@@ | [4, 8) 762598 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 273262 |@@@@@@@@@@@@@@@@@@ | [16, 32) 144996 |@@@@@@@@@ | [32, 64) 24942 |@ | [64, 128) 360 | | [128, 256) 39 | | [256, 512) 1 | | [512, 1K) 2 | | @latency[5702]: [0] 684 | | [1] 230461 |@@@@@@@@@@@@@@@ | [2, 4) 162643 |@@@@@@@@@@ | [4, 8) 778184 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 431057 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3832 | | [32, 64) 84 | | [64, 128) 7 | | @latency[0]: [1] 18 | | [2, 4) 2666 | | [4, 8) 623206 |@@@@@@@@@@@@@@@@@ | [8, 16) 103752 |@@ | [16, 32) 1889303 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 67113 |@ | [64, 128) 103523 |@@ | [128, 256) 9 | | @latency[4729]: [0] 8342 | | [1] 818066 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 700747 |@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1358767 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1739716 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 48459 |@ | [32, 64) 24658 | | [64, 128) 1687 | | [128, 256) 33 | | [256, 512) 55 | | [512, 1K) 46 | | [1K, 2K) 6 | | [2K, 4K) 2 | | [4K, 8K) 1 | | [Tue Jan 6 04:36:24 UTC 2026] respawn: 3: stopped pid 80 with status 0 [Tue Jan 6 04:36:24 UTC 2026] respawn: sleeping 1 seconds... [Tue Jan 6 04:36:26 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[5703]: [0] 1 |@@@ | [1] 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@ | [8, 16) 5 |@@@@@@@@@@@@@@@ | @latency[5705]: [0] 1 |@@@ | [1] 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2 |@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@ | [16, 32) 1 |@@@ | @latency[5707]: [0] 2 |@@@@@ | [1] 4 |@@@@@@@@@@@ | [2, 4) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 10 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@ | @latency[5701]: [0] 3 |@@@@@ | [1] 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 5 |@@@@@@@@ | [4, 8) 13 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 5 |@@@@@@@@ | [16, 32) 4 |@@@@@@@ | @latency[0]: [1] 5 |@@@ | [2, 4) 40 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 20 |@@@@@@@@@@@@@@ | [8, 16) 70 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 14 |@@@@@@@@@@ | [32, 64) 15 |@@@@@@@@@@@ | [64, 128) 8 |@@@@@ | @latency[4729]: [0] 937 |@@@ | [1] 12510 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1054 |@@@@ | [4, 8) 543 |@@ | [8, 16) 5077 |@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 42 | | [32, 64) 20 | | [64, 128) 62 | | [128, 256) 1 | | [256, 512) 3 | | [Tue Jan 6 04:38:06 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Tue Jan 6 04:38:06 UTC 2026] respawn: sleeping 1 seconds... [Tue Jan 6 04:38:08 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. @latency[16418]: [16, 32) 1 |@@@@@@ | [32, 64) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16420]: [16, 32) 1 |@@@@@@@@ | [32, 64) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[16404]: [32, 64) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@ | @latency[16406]: [16, 32) 1 |@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@ | @latency[16410]: [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16412]: [32, 64) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16408]: [16, 32) 3 |@@@@@@@@@@ | [32, 64) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@@@ | @latency[16414]: [16, 32) 6 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 11 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@@@@@@@@ | @latency[16432]: [16, 32) 8 |@@@@@@@@@@@@@@@@ | [32, 64) 25 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16428]: [16, 32) 3 |@@@@@ | [32, 64) 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 |@ | @latency[16424]: [16, 32) 5 |@@@@@@@@ | [32, 64) 29 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16426]: [16, 32) 2 |@@@ | [32, 64) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16434]: [8, 16) 3 |@@@@@@@@ | [16, 32) 18 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 14 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 3 |@@@@@@@@ | @latency[16430]: [16, 32) 20 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 1 |@@ | @latency[1984]: [16, 32) 12 |@@@@@@@@@@@@@@@ | [32, 64) 40 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[16394]: [8, 16) 1 | | [16, 32) 10 |@@@@@ | [32, 64) 87 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 1 | | @latency[16402]: [8, 16) 9 |@@@@@@ | [16, 32) 14 |@@@@@@@@@ | [32, 64) 73 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 4 |@@ | @latency[16398]: [8, 16) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 24 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 43 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@@ | @latency[16396]: [8, 16) 1 | | [16, 32) 3 |@ | [32, 64) 94 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 2 |@ | @latency[16400]: [8, 16) 11 |@@@@@@@@ | [16, 32) 14 |@@@@@@@@@@ | [32, 64) 71 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [64, 128) 5 |@@@ | @latency[16422]: [8, 16) 23 |@@@@@@@@@@@@ | [16, 32) 98 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 71 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 2 |@ | @latency[16416]: [8, 16) 11 |@@@@@ | [16, 32) 98 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [32, 64) 87 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 2 |@ | @latency[53]: [1] 4 | | [2, 4) 357 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 95 |@@@@@@@@@@@@@ | [8, 16) 46 |@@@@@@ | [16, 32) 235 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [32, 64) 257 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 16 |@@ | [128, 256) 2 | | @latency[5707]: [0] 112 |@@ | [1] 1404 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2499 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1105 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 899 |@@@@@@@@@@@@@@@@@@ | [16, 32) 15 | | [32, 64) 1 | | @latency[5705]: [0] 64 |@ | [1] 1193 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2332 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1421 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1012 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 16 | | @latency[5703]: [0] 27 | | [1] 1161 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2010 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1612 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 1230 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 9 | | @latency[6701]: [1] 233 |@@@@@ | [2, 4) 1193 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 774 |@@@@@@@@@@@@@@@@@ | [8, 16) 2362 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 829 |@@@@@@@@@@@@@@@@@@ | [32, 64) 1178 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [64, 128) 167 |@@@ | [128, 256) 3 | | @latency[5706]: [0] 1 | | [1] 30 | | [2, 4) 38 | | [4, 8) 367 |@@ | [8, 16) 8396 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 28 | | [32, 64) 1 | | @latency[5701]: [0] 113 |@ | [1] 1898 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3323 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1607 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 2508 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 606 |@@@@@@@@@ | [32, 64) 498 |@@@@@@@ | [64, 128) 55 | | [128, 256) 1 | | @latency[5708]: [0] 1 | | [1] 29 | | [2, 4) 62 | | [4, 8) 649 |@@ | [8, 16) 14012 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 23 | | [32, 64) 2 | | @latency[5704]: [1] 109 | | [2, 4) 96 | | [4, 8) 947 |@@@ | [8, 16) 16100 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 48 | | [32, 64) 1 | | @latency[6702]: [0] 2 | | [1] 22889 | | [2, 4) 14023 | | [4, 8) 29057 | | [8, 16) 2387252 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 103158 |@@ | [32, 64) 196833 |@@@@ | [64, 128) 4602 | | [128, 256) 43 | | [256, 512) 2 | | [512, 1K) 2 | | @latency[5702]: [0] 270 | | [1] 45810 | | [2, 4) 34441 | | [4, 8) 1013048 |@@@@@@@@@@@@@@@@@ | [8, 16) 2947572 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 9004 | | [32, 64) 327 | | @latency[0]: [0] 99 | | [1] 37561 | | [2, 4) 47945 | | [4, 8) 82207 | | [8, 16) 4835925 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 169285 |@ | [32, 64) 370838 |@@@ | [64, 128) 19057 | | [128, 256) 4 | | @latency[4729]: [0] 29757 | | [1] 817441 |@@@@ | [2, 4) 674695 |@@@ | [4, 8) 603690 |@@@ | [8, 16) 8884512 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 68683 | | [32, 64) 130590 | | [64, 128) 8343 | | [128, 256) 34 | | [256, 512) 146 | | [512, 1K) 33 | | [1K, 2K) 1 | | [2K, 4K) 0 | | [4K, 8K) 1 | | [Tue Jan 6 05:43:06 UTC 2026] respawn: 0: stopped pid 17 with status 0 [Tue Jan 6 05:43:06 UTC 2026] respawn: sleeping 1 seconds... [Tue Jan 6 05:43:07 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end.