[Mon Jan 12 17:09:08 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 25 root cwd DIR 9,3 4096 13773703 /data udp_sendm 25 root rtd DIR 0,80 4096 7238994 / udp_sendm 25 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 25 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 25 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 25 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 25 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 25 root 1w FIFO W 0,13 0t0 1845023402 pipe udp_sendm 25 root 2w FIFO W 0,13 0t0 1845023403 pipe udp_sendm 25 root 10r REG LG,CX 9,3 106 13773718 /data/bpftrace/udp_sendmsg_delay.sh maps output: 562951774000-562951778000 r--p 00000000 09:03 28221037 /usr/bin/dash 562951778000-56295178b000 r-xp 00004000 09:03 28221037 /usr/bin/dash 56295178b000-562951791000 r--p 00017000 09:03 28221037 /usr/bin/dash 562951791000-562951793000 r--p 0001c000 09:03 28221037 /usr/bin/dash 562951793000-562951794000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 562951794000-562951796000 rw-p 00000000 00:00 0 562974478000-562974499000 rw-p 00000000 00:00 0 [heap] 7f620d5c7000-7f620d5ca000 rw-p 00000000 00:00 0 7f620d5ca000-7f620d5f0000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f620d5f0000-7f620d746000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f620d746000-7f620d799000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f620d799000-7f620d79d000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f620d79d000-7f620d79f000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f620d79f000-7f620d7ac000 rw-p 00000000 00:00 0 7f620d7b9000-7f620d7bb000 rw-p 00000000 00:00 0 7f620d7bb000-7f620d7bc000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f620d7bc000-7f620d7e2000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f620d7e2000-7f620d7ec000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f620d7ec000-7f620d7ee000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f620d7ee000-7f620d7f0000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fff1cc1e000-7fff1cc3f000 rw-p 00000000 00:00 0 [stack] 7fff1ccc3000-7fff1ccc7000 r--p 00000000 00:00 0 [vvar] 7fff1ccc7000-7fff1ccc9000 r-xp 00000000 00:00 0 [vdso] @latency[0]: [1] 4 | | [2, 4) 13 |@ | [4, 8) 38 |@@@ | [8, 16) 610 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 156 |@@@@@@@@@@@@@ | [32, 64) 20 |@ | @latency[5705]: [0] 58 |@ | [1] 1323 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2043 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 945 |@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 801 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 6 | | @latency[5707]: [0] 51 |@ | [1] 1334 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2231 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 783 |@@@@@@@@@@@@@@@@@@ | [8, 16) 768 |@@@@@@@@@@@@@@@@@ | [16, 32) 9 | | @latency[5703]: [0] 52 |@ | [1] 1149 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2028 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1065 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 887 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 11 | | @latency[5704]: [0] 1 | | [1] 417 |@@@ | [2, 4) 289 |@@ | [4, 8) 652 |@@@@@ | [8, 16) 6080 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 29 | | [32, 64) 1 | | @latency[5701]: [0] 23 | | [1] 1843 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 3118 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1162 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 1828 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 214 |@@@ | [32, 64) 5 | | @latency[5702]: [0] 1254 | | [1] 172632 |@@@ | [2, 4) 146843 |@@ | [4, 8) 259253 |@@@@ | [8, 16) 2765575 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 14196 | | [32, 64) 416 | | [64, 128) 15 | | @latency[4729]: [0] 23526 | | [1] 462289 |@@@ | [2, 4) 702160 |@@@@@ | [4, 8) 589617 |@@@@ | [8, 16) 6758327 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 92363 | | [32, 64) 60674 | | [64, 128) 2353 | | [128, 256) 14 | | [256, 512) 2 | | [Mon Jan 12 18:03:30 UTC 2026] respawn: 0: stopped pid 25 with status 0 [Mon Jan 12 18:03:30 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:03:31 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 67 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 77 root cwd DIR 9,3 4096 13773703 /data udp_sendm 77 root rtd DIR 0,80 4096 7238994 / udp_sendm 77 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 77 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 77 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 77 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 77 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 77 root 1w FIFO W 0,13 0t0 1845023402 pipe udp_sendm 77 root 2w FIFO W 0,13 0t0 1845023403 pipe udp_sendm 77 root 10r REG LG,CX 9,3 106 13773718 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55c87bbe0000-55c87bbe4000 r--p 00000000 09:03 28221037 /usr/bin/dash 55c87bbe4000-55c87bbf7000 r-xp 00004000 09:03 28221037 /usr/bin/dash 55c87bbf7000-55c87bbfd000 r--p 00017000 09:03 28221037 /usr/bin/dash 55c87bbfd000-55c87bbff000 r--p 0001c000 09:03 28221037 /usr/bin/dash 55c87bbff000-55c87bc00000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 55c87bc00000-55c87bc02000 rw-p 00000000 00:00 0 55c889716000-55c889737000 rw-p 00000000 00:00 0 [heap] 7f81ee344000-7f81ee347000 rw-p 00000000 00:00 0 7f81ee347000-7f81ee36d000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f81ee36d000-7f81ee4c3000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f81ee4c3000-7f81ee516000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f81ee516000-7f81ee51a000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f81ee51a000-7f81ee51c000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f81ee51c000-7f81ee529000 rw-p 00000000 00:00 0 7f81ee536000-7f81ee538000 rw-p 00000000 00:00 0 7f81ee538000-7f81ee539000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f81ee539000-7f81ee55f000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f81ee55f000-7f81ee569000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f81ee569000-7f81ee56b000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f81ee56b000-7f81ee56d000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fff2ec10000-7fff2ec31000 rw-p 00000000 00:00 0 [stack] 7fff2ecd2000-7fff2ecd6000 r--p 00000000 00:00 0 [vvar] 7fff2ecd6000-7fff2ecd8000 r-xp 00000000 00:00 0 [vdso] @latency[5703]: [1] 87 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 132 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 29 |@@@@@@@@@@@ | [8, 16) 20 |@@@@@@@ | [16, 32) 1 | | @latency[5705]: [1] 105 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 118 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 26 |@@@@@@@@@@@ | [8, 16) 20 |@@@@@@@@ | @latency[5707]: [0] 1 | | [1] 96 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 127 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 25 |@@@@@@@@@@ | [8, 16) 19 |@@@@@@@ | [16, 32) 1 | | @latency[5701]: [1] 114 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 150 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 69 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 65 |@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 10 |@@@ | [32, 64) 1 | | @latency[5702]: [0] 1193 | | [1] 134522 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 159098 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 70416 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 112705 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1048 | | [32, 64) 66 | | [64, 128) 8 | | @latency[4729]: [0] 1916 | | [1] 134544 |@@@@@@@@@@@@ | [2, 4) 551611 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 221152 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 318444 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 24512 |@@ | [32, 64) 10234 | | [64, 128) 161 | | [128, 256) 6 | | [Mon Jan 12 18:09:13 UTC 2026] respawn: 1: stopped pid 77 with status 0 [Mon Jan 12 18:09:13 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:09:14 UTC 2026] respawn: 2: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 115 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 125 root cwd DIR 9,3 4096 13773703 /data udp_sendm 125 root rtd DIR 0,80 4096 7238994 / udp_sendm 125 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 125 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 125 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 125 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 125 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 125 root 1w FIFO W 0,13 0t0 1845023402 pipe udp_sendm 125 root 2w FIFO W 0,13 0t0 1845023403 pipe udp_sendm 125 root 10r REG LG,CX 9,3 106 13773718 /data/bpftrace/udp_sendmsg_delay.sh maps output: 5643d7475000-5643d7479000 r--p 00000000 09:03 28221037 /usr/bin/dash 5643d7479000-5643d748c000 r-xp 00004000 09:03 28221037 /usr/bin/dash 5643d748c000-5643d7492000 r--p 00017000 09:03 28221037 /usr/bin/dash 5643d7492000-5643d7494000 r--p 0001c000 09:03 28221037 /usr/bin/dash 5643d7494000-5643d7495000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 5643d7495000-5643d7497000 rw-p 00000000 00:00 0 5643df594000-5643df5b5000 rw-p 00000000 00:00 0 [heap] 7ff408ede000-7ff408ee1000 rw-p 00000000 00:00 0 7ff408ee1000-7ff408f07000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7ff408f07000-7ff40905d000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7ff40905d000-7ff4090b0000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7ff4090b0000-7ff4090b4000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7ff4090b4000-7ff4090b6000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7ff4090b6000-7ff4090c3000 rw-p 00000000 00:00 0 7ff4090d0000-7ff4090d2000 rw-p 00000000 00:00 0 7ff4090d2000-7ff4090d3000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ff4090d3000-7ff4090f9000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ff4090f9000-7ff409103000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ff409103000-7ff409105000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ff409105000-7ff409107000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffdccdcf000-7ffdccdf0000 rw-p 00000000 00:00 0 [stack] 7ffdccdf5000-7ffdccdf9000 r--p 00000000 00:00 0 [vvar] 7ffdccdf9000-7ffdccdfb000 r-xp 00000000 00:00 0 [vdso] @latency[5703]: [1] 27 |@@@@@@@@@@@@@@@@ | [2, 4) 83 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 12 |@@@@@@@ | [8, 16) 2 |@ | @latency[5705]: [1] 27 |@@@@@@@@@@@@@@@ | [2, 4) 88 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 6 |@@@ | [8, 16) 3 |@ | @latency[5707]: [1] 30 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 82 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 9 |@@@@@ | [8, 16) 3 |@ | @latency[5701]: [1] 29 |@@@@@@@@@@@@@@@@@ | [2, 4) 87 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 31 |@@@@@@@@@@@@@@@@@@ | [8, 16) 14 |@@@@@@@@ | @latency[5702]: [0] 976 | | [1] 56073 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 55993 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 9754 |@@@@@@@@@ | [8, 16) 7093 |@@@@@@ | [16, 32) 59 | | [32, 64) 2 | | [64, 128) 2 | | @latency[4729]: [0] 304 | | [1] 62203 |@@@@@@@@@@@@@ | [2, 4) 232982 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 28251 |@@@@@@ | [8, 16) 21369 |@@@@ | [16, 32) 5866 |@ | [32, 64) 2110 | | [64, 128) 25 | | [128, 256) 2 | | [256, 512) 1 | | [Mon Jan 12 18:11:01 UTC 2026] respawn: 2: stopped pid 125 with status 0 [Mon Jan 12 18:11:01 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:11:02 UTC 2026] respawn: 3: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 163 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 173 root cwd DIR 9,3 4096 13773703 /data udp_sendm 173 root rtd DIR 0,80 4096 7238994 / udp_sendm 173 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 173 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 173 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 173 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 173 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 173 root 1w FIFO W 0,13 0t0 1845023402 pipe udp_sendm 173 root 2w FIFO W 0,13 0t0 1845023403 pipe udp_sendm 173 root 10r REG LG,CX 9,3 106 13773718 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55764e6ff000-55764e703000 r--p 00000000 09:03 28221037 /usr/bin/dash 55764e703000-55764e716000 r-xp 00004000 09:03 28221037 /usr/bin/dash 55764e716000-55764e71c000 r--p 00017000 09:03 28221037 /usr/bin/dash 55764e71c000-55764e71e000 r--p 0001c000 09:03 28221037 /usr/bin/dash 55764e71e000-55764e71f000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 55764e71f000-55764e721000 rw-p 00000000 00:00 0 557654cd1000-557654cf2000 rw-p 00000000 00:00 0 [heap] 7f67b1b81000-7f67b1b84000 rw-p 00000000 00:00 0 7f67b1b84000-7f67b1baa000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f67b1baa000-7f67b1d00000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f67b1d00000-7f67b1d53000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f67b1d53000-7f67b1d57000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f67b1d57000-7f67b1d59000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f67b1d59000-7f67b1d66000 rw-p 00000000 00:00 0 7f67b1d73000-7f67b1d75000 rw-p 00000000 00:00 0 7f67b1d75000-7f67b1d76000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f67b1d76000-7f67b1d9c000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f67b1d9c000-7f67b1da6000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f67b1da6000-7f67b1da8000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f67b1da8000-7f67b1daa000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fffc3541000-7fffc3562000 rw-p 00000000 00:00 0 [stack] 7fffc35ab000-7fffc35af000 r--p 00000000 00:00 0 [vvar] 7fffc35af000-7fffc35b1000 r-xp 00000000 00:00 0 [vdso] @latency[5703]: [1] 20 |@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 41 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 1 |@ | @latency[5705]: [1] 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 32 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@ | [8, 16) 1 |@ | @latency[5707]: [1] 30 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 1 |@ | @latency[5701]: [1] 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 12 |@@@@@@@@@@@@@@@@@@ | [8, 16) 1 |@ | [16, 32) 1 |@ | @latency[5702]: [0] 120 | | [1] 16541 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 4957 |@@@@@@@@@@@@@@@ | [4, 8) 1321 |@@@@ | [8, 16) 1821 |@@@@@ | [16, 32) 21 | | [32, 64) 2 | | [64, 128) 0 | | [128, 256) 1 | | @latency[4729]: [0] 228 | | [1] 19069 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 40802 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3116 |@@@ | [8, 16) 6043 |@@@@@@@ | [16, 32) 508 | | [32, 64) 151 | | [64, 128) 3 | | [128, 256) 1 | | [256, 512) 2 | | [Mon Jan 12 18:11:33 UTC 2026] respawn: 3: stopped pid 173 with status 0 [Mon Jan 12 18:11:33 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:11:34 UTC 2026] respawn: 4: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 211 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 221 root cwd DIR 9,3 4096 13773703 /data udp_sendm 221 root rtd DIR 0,80 4096 7238994 / udp_sendm 221 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 221 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 221 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 221 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 221 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 221 root 1w FIFO W 0,13 0t0 1845023402 pipe udp_sendm 221 root 2w FIFO W 0,13 0t0 1845023403 pipe udp_sendm 221 root 10r REG LG,CX 9,3 106 13773718 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55d78146c000-55d781470000 r--p 00000000 09:03 28221037 /usr/bin/dash 55d781470000-55d781483000 r-xp 00004000 09:03 28221037 /usr/bin/dash 55d781483000-55d781489000 r--p 00017000 09:03 28221037 /usr/bin/dash 55d781489000-55d78148b000 r--p 0001c000 09:03 28221037 /usr/bin/dash 55d78148b000-55d78148c000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 55d78148c000-55d78148e000 rw-p 00000000 00:00 0 55d7ba6c3000-55d7ba6e4000 rw-p 00000000 00:00 0 [heap] 7f77d5c64000-7f77d5c67000 rw-p 00000000 00:00 0 7f77d5c67000-7f77d5c8d000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f77d5c8d000-7f77d5de3000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f77d5de3000-7f77d5e36000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f77d5e36000-7f77d5e3a000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f77d5e3a000-7f77d5e3c000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f77d5e3c000-7f77d5e49000 rw-p 00000000 00:00 0 7f77d5e56000-7f77d5e58000 rw-p 00000000 00:00 0 7f77d5e58000-7f77d5e59000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f77d5e59000-7f77d5e7f000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f77d5e7f000-7f77d5e89000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f77d5e89000-7f77d5e8b000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f77d5e8b000-7f77d5e8d000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffc4f273000-7ffc4f294000 rw-p 00000000 00:00 0 [stack] 7ffc4f294000-7ffc4f298000 r--p 00000000 00:00 0 [vvar] 7ffc4f298000-7ffc4f29a000 r-xp 00000000 00:00 0 [vdso] @latency[5703]: [0] 12 |@@ | [1] 175 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 268 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 51 |@@@@@@@@@ | [8, 16) 14 |@@ | @latency[5705]: [0] 18 |@@@ | [1] 196 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 259 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 35 |@@@@@@@ | [8, 16) 12 |@@ | @latency[5707]: [0] 20 |@@@ | [1] 193 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 270 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 28 |@@@@@ | [8, 16) 9 |@ | @latency[5701]: [0] 13 |@ | [1] 227 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 529 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 217 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 52 |@@@@@ | [16, 32) 13 |@ | @latency[5702]: [0] 941 | | [1] 63319 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 27819 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 16956 |@@@@@@@@@@@@@ | [8, 16) 29146 |@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 313 | | [32, 64) 11 | | [64, 128) 2 | | @latency[4729]: [0] 4886 |@ | [1] 114604 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 177672 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 44765 |@@@@@@@@@@@@@ | [8, 16) 91859 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 4008 |@ | [32, 64) 772 | | [64, 128) 52 | | [128, 256) 1 | | [256, 512) 1 | | [Mon Jan 12 18:15:18 UTC 2026] respawn: 4: stopped pid 221 with status 0 [Mon Jan 12 18:15:18 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:15:19 UTC 2026] respawn: 5: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 211 --unsafe osmo-bts-trx [Mon Jan 12 18:15:20 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 26 root cwd DIR 9,3 4096 13773703 /data udp_sendm 26 root rtd DIR 0,62 4096 7236652 / udp_sendm 26 root txt REG 0,62 125640 28221037 /usr/bin/dash udp_sendm 26 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,62) udp_sendm 26 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,62) udp_sendm 26 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,62) udp_sendm 26 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 26 root 1w FIFO W 0,13 0t0 1845958823 pipe udp_sendm 26 root 2w FIFO W 0,13 0t0 1845958824 pipe udp_sendm 26 root 10r REG LG,CX 9,3 106 13773710 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55bd569ab000-55bd569af000 r--p 00000000 09:03 28221037 /usr/bin/dash 55bd569af000-55bd569c2000 r-xp 00004000 09:03 28221037 /usr/bin/dash 55bd569c2000-55bd569c8000 r--p 00017000 09:03 28221037 /usr/bin/dash 55bd569c8000-55bd569ca000 r--p 0001c000 09:03 28221037 /usr/bin/dash 55bd569ca000-55bd569cb000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 55bd569cb000-55bd569cd000 rw-p 00000000 00:00 0 55bd90b98000-55bd90bb9000 rw-p 00000000 00:00 0 [heap] 7f958c12b000-7f958c12e000 rw-p 00000000 00:00 0 7f958c12e000-7f958c154000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f958c154000-7f958c2aa000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f958c2aa000-7f958c2fd000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f958c2fd000-7f958c301000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f958c301000-7f958c303000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f958c303000-7f958c310000 rw-p 00000000 00:00 0 7f958c31d000-7f958c31f000 rw-p 00000000 00:00 0 7f958c31f000-7f958c320000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f958c320000-7f958c346000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f958c346000-7f958c350000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f958c350000-7f958c352000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f958c352000-7f958c354000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fff5628e000-7fff562af000 rw-p 00000000 00:00 0 [stack] 7fff562e8000-7fff562ec000 r--p 00000000 00:00 0 [vvar] 7fff562ec000-7fff562ee000 r-xp 00000000 00:00 0 [vdso] @latency[5703]: [1] 1 |@@@@@ | [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5705]: [1] 1 |@@@@@ | [2, 4) 9 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5707]: [1] 2 |@@@@@@@@@@@@@ | [2, 4) 8 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 4 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5701]: [0] 1 |@@@ | [1] 5 |@@@@@@@@@@@@@@@ | [2, 4) 3 |@@@@@@@@@ | [4, 8) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 12 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 3 |@@@@@@@@@ | @latency[4729]: [0] 1493 |@@@@@@@@@ | [1] 8361 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 5279 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2210 |@@@@@@@@@@@@@ | [8, 16) 2797 |@@@@@@@@@@@@@@@@@ | [16, 32) 72 | | [32, 64) 25 | | [64, 128) 13 | | [Mon Jan 12 18:16:58 UTC 2026] respawn: 0: stopped pid 26 with status 0 [Mon Jan 12 18:16:58 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:16:59 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 --unsafe osmo-bts-trx [Mon Jan 12 18:17:01 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 9 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 27 root cwd DIR 9,3 4096 13773703 /data udp_sendm 27 root rtd DIR 0,80 4096 7236702 / udp_sendm 27 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 27 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 27 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 27 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 27 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 27 root 1w FIFO W 0,13 0t0 1846006722 pipe udp_sendm 27 root 2w FIFO W 0,13 0t0 1846006723 pipe udp_sendm 27 root 10r REG LG,CX 9,3 106 13773726 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55b2f31ad000-55b2f31b1000 r--p 00000000 09:03 28221037 /usr/bin/dash 55b2f31b1000-55b2f31c4000 r-xp 00004000 09:03 28221037 /usr/bin/dash 55b2f31c4000-55b2f31ca000 r--p 00017000 09:03 28221037 /usr/bin/dash 55b2f31ca000-55b2f31cc000 r--p 0001c000 09:03 28221037 /usr/bin/dash 55b2f31cc000-55b2f31cd000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 55b2f31cd000-55b2f31cf000 rw-p 00000000 00:00 0 55b3176a6000-55b3176c7000 rw-p 00000000 00:00 0 [heap] 7f55966e6000-7f55966e9000 rw-p 00000000 00:00 0 7f55966e9000-7f559670f000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f559670f000-7f5596865000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f5596865000-7f55968b8000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f55968b8000-7f55968bc000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f55968bc000-7f55968be000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f55968be000-7f55968cb000 rw-p 00000000 00:00 0 7f55968d8000-7f55968da000 rw-p 00000000 00:00 0 7f55968da000-7f55968db000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f55968db000-7f5596901000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f5596901000-7f559690b000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f559690b000-7f559690d000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f559690d000-7f559690f000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffee4020000-7ffee4041000 rw-p 00000000 00:00 0 [stack] 7ffee4130000-7ffee4134000 r--p 00000000 00:00 0 [vvar] 7ffee4134000-7ffee4136000 r-xp 00000000 00:00 0 [vdso] @latency[5707]: [0] 2 | | [1] 49 |@@@@@@@@@@@@@@@ | [2, 4) 168 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 17 |@@@@@ | [8, 16) 6 |@ | [16, 32) 1 | | @latency[5705]: [0] 1 | | [1] 43 |@@@@@@@@@@@@@ | [2, 4) 172 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 20 |@@@@@@ | [8, 16) 7 |@@ | [16, 32) 1 | | @latency[5703]: [1] 46 |@@@@@@@@@@@@@@ | [2, 4) 165 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 29 |@@@@@@@@@ | [8, 16) 5 |@ | @latency[5706]: [1] 161 |@@@@@@@@@@@@@@ | [2, 4) 596 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 230 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 172 |@@@@@@@@@@@@@@@ | [16, 32) 1 | | @latency[5701]: [0] 1 | | [1] 46 |@@ | [2, 4) 919 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 419 |@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 167 |@@@@@@@@@ | [16, 32) 13 | | [32, 64) 1 | | @latency[5708]: [0] 6 | | [1] 308 |@@@@@@@@@@@@@ | [2, 4) 1176 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 403 |@@@@@@@@@@@@@@@@@ | [8, 16) 322 |@@@@@@@@@@@@@@ | [16, 32) 4 | | @latency[5704]: [0] 1 | | [1] 531 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1291 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 538 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 374 |@@@@@@@@@@@@@@@ | @latency[5702]: [0] 842 | | [1] 132276 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 179721 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 64830 |@@@@@@@@@@@@@@@@@@ | [8, 16) 60675 |@@@@@@@@@@@@@@@@@ | [16, 32) 1891 | | [32, 64) 31 | | @latency[4729]: [0] 2109 | | [1] 158677 |@@@@@@@@@@@@@@@@ | [2, 4) 509951 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 192961 |@@@@@@@@@@@@@@@@@@@ | [8, 16) 169780 |@@@@@@@@@@@@@@@@@ | [16, 32) 26788 |@@ | [32, 64) 5150 | | [64, 128) 114 | | [128, 256) 4 | | [Mon Jan 12 18:22:23 UTC 2026] respawn: 0: stopped pid 27 with status 0 [Mon Jan 12 18:22:23 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:22:24 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 67 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 77 root cwd DIR 9,3 4096 13773703 /data udp_sendm 77 root rtd DIR 0,80 4096 7236702 / udp_sendm 77 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 77 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 77 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 77 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 77 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 77 root 1w FIFO W 0,13 0t0 1846006722 pipe udp_sendm 77 root 2w FIFO W 0,13 0t0 1846006723 pipe udp_sendm 77 root 10r REG LG,CX 9,3 106 13773726 /data/bpftrace/udp_sendmsg_delay.sh maps output: 556603d74000-556603d78000 r--p 00000000 09:03 28221037 /usr/bin/dash 556603d78000-556603d8b000 r-xp 00004000 09:03 28221037 /usr/bin/dash 556603d8b000-556603d91000 r--p 00017000 09:03 28221037 /usr/bin/dash 556603d91000-556603d93000 r--p 0001c000 09:03 28221037 /usr/bin/dash 556603d93000-556603d94000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 556603d94000-556603d96000 rw-p 00000000 00:00 0 556614955000-556614976000 rw-p 00000000 00:00 0 [heap] 7fe9dbb0f000-7fe9dbb12000 rw-p 00000000 00:00 0 7fe9dbb12000-7fe9dbb38000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fe9dbb38000-7fe9dbc8e000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fe9dbc8e000-7fe9dbce1000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fe9dbce1000-7fe9dbce5000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fe9dbce5000-7fe9dbce7000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fe9dbce7000-7fe9dbcf4000 rw-p 00000000 00:00 0 7fe9dbd01000-7fe9dbd03000 rw-p 00000000 00:00 0 7fe9dbd03000-7fe9dbd04000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fe9dbd04000-7fe9dbd2a000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fe9dbd2a000-7fe9dbd34000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fe9dbd34000-7fe9dbd36000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fe9dbd36000-7fe9dbd38000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffd6ffc8000-7ffd6ffe9000 rw-p 00000000 00:00 0 [stack] 7ffd6fff7000-7ffd6fffb000 r--p 00000000 00:00 0 [vvar] 7ffd6fffb000-7ffd6fffd000 r-xp 00000000 00:00 0 [vdso] @latency[5707]: [0] 18 |@ | [1] 436 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 749 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 90 |@@@@@@ | [8, 16) 29 |@@ | [16, 32) 1 | | @latency[5705]: [0] 14 | | [1] 422 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 766 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 100 |@@@@@@ | [8, 16) 28 |@ | [16, 32) 1 | | @latency[5703]: [0] 10 | | [1] 410 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 788 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 89 |@@@@@ | [8, 16) 38 |@@ | [16, 32) 5 | | @latency[5701]: [0] 5 | | [1] 426 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 968 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 274 |@@@@@@@@@@@@@@ | [8, 16) 124 |@@@@@@ | [16, 32) 13 | | [32, 64) 1 | | @latency[5706]: [0] 3 | | [1] 816 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 832 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 117 |@@@@@@@ | [8, 16) 222 |@@@@@@@@@@@@@ | [16, 32) 2 | | @latency[5708]: [0] 10 | | [1] 874 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1388 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 142 |@@@@@ | [8, 16) 296 |@@@@@@@@@@@ | [16, 32) 3 | | @latency[5704]: [0] 13 | | [1] 1626 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 1349 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 280 |@@@@@@@@ | [8, 16) 589 |@@@@@@@@@@@@@@@@@@ | [16, 32) 2 | | @latency[5702]: [0] 5413 | | [1] 555850 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 317663 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 125795 |@@@@@@@@@@@ | [8, 16) 86995 |@@@@@@@@ | [16, 32) 2096 | | [32, 64) 53 | | [64, 128) 7 | | @latency[4729]: [0] 11747 | | [1] 629172 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 1589804 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 267441 |@@@@@@@@ | [8, 16) 364585 |@@@@@@@@@@@ | [16, 32) 22733 | | [32, 64) 3688 | | [64, 128) 157 | | [128, 256) 4 | | [256, 512) 1 | | [512, 1K) 1 | | [1K, 2K) 1 | | [Mon Jan 12 18:38:30 UTC 2026] respawn: 1: stopped pid 77 with status 0 [Mon Jan 12 18:38:30 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:38:31 UTC 2026] respawn: 2: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 115 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 125 root cwd DIR 9,3 4096 13773703 /data udp_sendm 125 root rtd DIR 0,80 4096 7236702 / udp_sendm 125 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 125 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 125 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 125 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 125 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 125 root 1w FIFO W 0,13 0t0 1846006722 pipe udp_sendm 125 root 2w FIFO W 0,13 0t0 1846006723 pipe udp_sendm 125 root 10r REG LG,CX 9,3 106 13773726 /data/bpftrace/udp_sendmsg_delay.sh maps output: 5635ab540000-5635ab544000 r--p 00000000 09:03 28221037 /usr/bin/dash 5635ab544000-5635ab557000 r-xp 00004000 09:03 28221037 /usr/bin/dash 5635ab557000-5635ab55d000 r--p 00017000 09:03 28221037 /usr/bin/dash 5635ab55d000-5635ab55f000 r--p 0001c000 09:03 28221037 /usr/bin/dash 5635ab55f000-5635ab560000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 5635ab560000-5635ab562000 rw-p 00000000 00:00 0 5635dd1d9000-5635dd1fa000 rw-p 00000000 00:00 0 [heap] 7f4fcbd73000-7f4fcbd76000 rw-p 00000000 00:00 0 7f4fcbd76000-7f4fcbd9c000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f4fcbd9c000-7f4fcbef2000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f4fcbef2000-7f4fcbf45000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f4fcbf45000-7f4fcbf49000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f4fcbf49000-7f4fcbf4b000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f4fcbf4b000-7f4fcbf58000 rw-p 00000000 00:00 0 7f4fcbf65000-7f4fcbf67000 rw-p 00000000 00:00 0 7f4fcbf67000-7f4fcbf68000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f4fcbf68000-7f4fcbf8e000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f4fcbf8e000-7f4fcbf98000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f4fcbf98000-7f4fcbf9a000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f4fcbf9a000-7f4fcbf9c000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffe3da97000-7ffe3dab8000 rw-p 00000000 00:00 0 [stack] 7ffe3db2d000-7ffe3db31000 r--p 00000000 00:00 0 [vvar] 7ffe3db31000-7ffe3db33000 r-xp 00000000 00:00 0 [vdso] @latency[5706]: [2, 4) 5 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 0 | | [8, 16) 1 |@@@@@@@@@@ | @latency[5707]: [0] 2 | | [1] 205 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 342 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 26 |@@@ | [8, 16) 4 | | @latency[5705]: [0] 4 | | [1] 188 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 359 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 27 |@@@ | [8, 16) 4 | | @latency[5703]: [0] 6 | | [1] 194 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 338 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 39 |@@@@@@ | [8, 16) 5 | | [16, 32) 1 | | @latency[5701]: [0] 1 | | [1] 198 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 382 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 103 |@@@@@@@@@@@@@@ | [8, 16) 11 |@ | [16, 32) 4 | | @latency[5702]: [0] 1007 | | [1] 134614 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 67948 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 9976 |@@@ | [8, 16) 9131 |@@@ | [16, 32) 903 | | [32, 64) 10 | | [64, 128) 3 | | @latency[4729]: [0] 2428 | | [1] 163910 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 322432 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 28466 |@@@@ | [8, 16) 25713 |@@@@ | [16, 32) 2457 | | [32, 64) 980 | | [64, 128) 42 | | [Mon Jan 12 18:43:09 UTC 2026] respawn: 2: stopped pid 125 with status 0 [Mon Jan 12 18:43:09 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:43:10 UTC 2026] respawn: 3: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 163 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 167 root cwd DIR 9,3 4096 13773703 /data udp_sendm 167 root rtd DIR 0,80 4096 7236702 / udp_sendm 167 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 167 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 167 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 167 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 167 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 167 root 1w FIFO W 0,13 0t0 1846006722 pipe udp_sendm 167 root 2w FIFO W 0,13 0t0 1846006723 pipe udp_sendm 167 root 10r REG LG,CX 9,3 106 13773726 /data/bpftrace/udp_sendmsg_delay.sh maps output: 5564f03a6000-5564f03aa000 r--p 00000000 09:03 28221037 /usr/bin/dash 5564f03aa000-5564f03bd000 r-xp 00004000 09:03 28221037 /usr/bin/dash 5564f03bd000-5564f03c3000 r--p 00017000 09:03 28221037 /usr/bin/dash 5564f03c3000-5564f03c5000 r--p 0001c000 09:03 28221037 /usr/bin/dash 5564f03c5000-5564f03c6000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 5564f03c6000-5564f03c8000 rw-p 00000000 00:00 0 556503a49000-556503a6a000 rw-p 00000000 00:00 0 [heap] 7f7a9963d000-7f7a99640000 rw-p 00000000 00:00 0 7f7a99640000-7f7a99666000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7a99666000-7f7a997bc000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7a997bc000-7f7a9980f000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7a9980f000-7f7a99813000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7a99813000-7f7a99815000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7a99815000-7f7a99822000 rw-p 00000000 00:00 0 7f7a9982f000-7f7a99831000 rw-p 00000000 00:00 0 7f7a99831000-7f7a99832000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7a99832000-7f7a99858000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7a99858000-7f7a99862000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7a99862000-7f7a99864000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7a99864000-7f7a99866000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffd5dc2e000-7ffd5dc4f000 rw-p 00000000 00:00 0 [stack] 7ffd5ddbb000-7ffd5ddbf000 r--p 00000000 00:00 0 [vvar] 7ffd5ddbf000-7ffd5ddc1000 r-xp 00000000 00:00 0 [vdso] @latency[5706]: [16, 32) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[5708]: [32, 64) 1 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[5704]: [8, 16) 3 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 2 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | @latency[5707]: [0] 2 | | [1] 144 |@@@@@@@@@@@@@ | [2, 4) 560 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 86 |@@@@@@@ | [8, 16) 7 | | [16, 32) 1 | | @latency[5705]: [1] 119 |@@@@@@@@@@ | [2, 4) 577 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 95 |@@@@@@@@ | [8, 16) 10 | | @latency[5703]: [1] 147 |@@@@@@@@@@@@@@ | [2, 4) 538 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 104 |@@@@@@@@@@ | [8, 16) 11 |@ | [16, 32) 3 | | @latency[5701]: [0] 1 | | [1] 143 |@@@@@@@@@@@@ | [2, 4) 573 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 235 |@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 57 |@@@@@ | [16, 32) 9 | | [32, 64) 2 | | @latency[5702]: [0] 258 | | [1] 46726 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 88974 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 15875 |@@@@@@@@@ | [8, 16) 5781 |@@@ | [16, 32) 334 | | [32, 64) 3 | | [64, 128) 1 | | @latency[4729]: [0] 1415 | | [1] 87101 |@@@@@@@@@@@@@@@@ | [2, 4) 281872 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 68044 |@@@@@@@@@@@@ | [8, 16) 21691 |@@@@ | [16, 32) 4888 | | [32, 64) 1317 | | [64, 128) 32 | | [Mon Jan 12 18:48:14 UTC 2026] respawn: 3: stopped pid 167 with status 0 [Mon Jan 12 18:48:14 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:48:15 UTC 2026] respawn: 4: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 211 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 221 root cwd DIR 9,3 4096 13773703 /data udp_sendm 221 root rtd DIR 0,80 4096 7236702 / udp_sendm 221 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 221 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 221 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 221 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 221 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 221 root 1w FIFO W 0,13 0t0 1846006722 pipe udp_sendm 221 root 2w FIFO W 0,13 0t0 1846006723 pipe udp_sendm 221 root 10r REG LG,CX 9,3 106 13773726 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55f15da68000-55f15da6c000 r--p 00000000 09:03 28221037 /usr/bin/dash 55f15da6c000-55f15da7f000 r-xp 00004000 09:03 28221037 /usr/bin/dash 55f15da7f000-55f15da85000 r--p 00017000 09:03 28221037 /usr/bin/dash 55f15da85000-55f15da87000 r--p 0001c000 09:03 28221037 /usr/bin/dash 55f15da87000-55f15da88000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 55f15da88000-55f15da8a000 rw-p 00000000 00:00 0 55f18131d000-55f18133e000 rw-p 00000000 00:00 0 [heap] 7fc28373c000-7fc28373f000 rw-p 00000000 00:00 0 7fc28373f000-7fc283765000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fc283765000-7fc2838bb000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fc2838bb000-7fc28390e000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fc28390e000-7fc283912000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fc283912000-7fc283914000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fc283914000-7fc283921000 rw-p 00000000 00:00 0 7fc28392e000-7fc283930000 rw-p 00000000 00:00 0 7fc283930000-7fc283931000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fc283931000-7fc283957000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fc283957000-7fc283961000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fc283961000-7fc283963000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fc283963000-7fc283965000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fff28c18000-7fff28c39000 rw-p 00000000 00:00 0 [stack] 7fff28cf2000-7fff28cf6000 r--p 00000000 00:00 0 [vvar] 7fff28cf6000-7fff28cf8000 r-xp 00000000 00:00 0 [vdso] @latency[0]: [1] 38 |@@@@ | [2, 4) 261 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 399 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 60 |@@@@@@@ | [16, 32) 1 | | @latency[5707]: [0] 6 | | [1] 228 |@@@@@@@@@@@@@@@@@ | [2, 4) 692 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 39 |@@ | [8, 16) 9 | | [16, 32) 1 | | @latency[5705]: [0] 2 | | [1] 201 |@@@@@@@@@@@@@@ | [2, 4) 706 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 59 |@@@@ | [8, 16) 9 | | @latency[5703]: [0] 5 | | [1] 200 |@@@@@@@@@@@@@@@ | [2, 4) 683 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 75 |@@@@@ | [8, 16) 12 | | [16, 32) 3 | | @latency[5706]: [0] 1 | | [1] 379 |@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 802 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 63 |@@@@ | [8, 16) 65 |@@@@ | [16, 32) 2 | | @latency[5704]: [0] 1 | | [1] 378 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 878 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 55 |@@@ | [8, 16) 103 |@@@@@@ | [16, 32) 2 | | @latency[5701]: [0] 2 | | [1] 206 |@@@@@@@@@@@@ | [2, 4) 888 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 291 |@@@@@@@@@@@@@@@@@ | [8, 16) 80 |@@@@ | [16, 32) 7 | | @latency[5708]: [0] 2 | | [1] 528 |@@@@@@@@@@@@@@@@ | [2, 4) 1699 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 155 |@@@@ | [8, 16) 260 |@@@@@@@ | [16, 32) 3 | | @latency[5702]: [0] 1309 | | [1] 249412 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 209502 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 40530 |@@@@@@@@ | [8, 16) 49036 |@@@@@@@@@@ | [16, 32) 2240 | | [32, 64) 19 | | @latency[4729]: [0] 3395 | | [1] 298630 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 723141 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 100943 |@@@@@@@ | [8, 16) 113374 |@@@@@@@@ | [16, 32) 12858 | | [32, 64) 3118 | | [64, 128) 219 | | [128, 256) 1 | | [Mon Jan 12 18:57:47 UTC 2026] respawn: 4: stopped pid 221 with status 0 [Mon Jan 12 18:57:47 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:57:48 UTC 2026] respawn: 5: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 259 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 263 root cwd DIR 9,3 4096 13773703 /data udp_sendm 263 root rtd DIR 0,80 4096 7236702 / udp_sendm 263 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 263 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 263 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 263 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 263 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 263 root 1w FIFO W 0,13 0t0 1846006722 pipe udp_sendm 263 root 2w FIFO W 0,13 0t0 1846006723 pipe udp_sendm 263 root 10r REG LG,CX 9,3 106 13773726 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55febe157000-55febe15b000 r--p 00000000 09:03 28221037 /usr/bin/dash 55febe15b000-55febe16e000 r-xp 00004000 09:03 28221037 /usr/bin/dash 55febe16e000-55febe174000 r--p 00017000 09:03 28221037 /usr/bin/dash 55febe174000-55febe176000 r--p 0001c000 09:03 28221037 /usr/bin/dash 55febe176000-55febe177000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 55febe177000-55febe179000 rw-p 00000000 00:00 0 55fec0bb8000-55fec0bd9000 rw-p 00000000 00:00 0 [heap] 7fc7d2311000-7fc7d2314000 rw-p 00000000 00:00 0 7fc7d2314000-7fc7d233a000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fc7d233a000-7fc7d2490000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fc7d2490000-7fc7d24e3000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fc7d24e3000-7fc7d24e7000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fc7d24e7000-7fc7d24e9000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fc7d24e9000-7fc7d24f6000 rw-p 00000000 00:00 0 7fc7d2503000-7fc7d2505000 rw-p 00000000 00:00 0 7fc7d2505000-7fc7d2506000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fc7d2506000-7fc7d252c000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fc7d252c000-7fc7d2536000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fc7d2536000-7fc7d2538000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fc7d2538000-7fc7d253a000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffcd0a24000-7ffcd0a45000 rw-p 00000000 00:00 0 [stack] 7ffcd0bf3000-7ffcd0bf7000 r--p 00000000 00:00 0 [vvar] 7ffcd0bf7000-7ffcd0bf9000 r-xp 00000000 00:00 0 [vdso] @latency[0]: [2, 4) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 1 |@ | @latency[5707]: [1] 29 |@@@@@@@@@@@@@@@@ | [2, 4) 92 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 21 |@@@@@@@@@@@ | [8, 16) 4 |@@ | @latency[5705]: [1] 27 |@@@@@@@@@@@@@@ | [2, 4) 94 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 22 |@@@@@@@@@@@@ | [8, 16) 5 |@@ | @latency[5703]: [1] 30 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 82 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 32 |@@@@@@@@@@@@@@@@@@@@ | [8, 16) 6 |@@@ | [16, 32) 2 |@ | @latency[5701]: [1] 24 |@@@@@@@@@@@@@ | [2, 4) 92 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 47 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 13 |@@@@@@@ | [16, 32) 4 |@@ | @latency[5706]: [1] 103 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 204 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 51 |@@@@@@@@@@@@@ | [8, 16) 80 |@@@@@@@@@@@@@@@@@@@@ | @latency[5708]: [0] 2 | | [1] 114 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 187 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 65 |@@@@@@@@@@@@@@@@@@ | [8, 16) 72 |@@@@@@@@@@@@@@@@@@@@ | @latency[5704]: [1] 111 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 206 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 57 |@@@@@@@@@@@@@@ | [8, 16) 74 |@@@@@@@@@@@@@@@@@@ | [16, 32) 1 | | @latency[5702]: [0] 59 | | [1] 17429 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 15994 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 4762 |@@@@@@@@@@@@@@ | [8, 16) 5265 |@@@@@@@@@@@@@@@ | [16, 32) 256 | | [32, 64) 3 | | @latency[4729]: [0] 53 | | [1] 24514 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 44056 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 11195 |@@@@@@@@@@@@@ | [8, 16) 12215 |@@@@@@@@@@@@@@ | [16, 32) 1482 |@ | [32, 64) 516 | | [64, 128) 59 | | [Mon Jan 12 18:58:52 UTC 2026] respawn: 5: stopped pid 263 with status 0 [Mon Jan 12 18:58:52 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 18:58:53 UTC 2026] respawn: 6: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 307 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 317 root cwd DIR 9,3 4096 13773703 /data udp_sendm 317 root rtd DIR 0,80 4096 7236702 / udp_sendm 317 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 317 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 317 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 317 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 317 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 317 root 1w FIFO W 0,13 0t0 1846006722 pipe udp_sendm 317 root 2w FIFO W 0,13 0t0 1846006723 pipe udp_sendm 317 root 10r REG LG,CX 9,3 106 13773726 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55f379436000-55f37943a000 r--p 00000000 09:03 28221037 /usr/bin/dash 55f37943a000-55f37944d000 r-xp 00004000 09:03 28221037 /usr/bin/dash 55f37944d000-55f379453000 r--p 00017000 09:03 28221037 /usr/bin/dash 55f379453000-55f379455000 r--p 0001c000 09:03 28221037 /usr/bin/dash 55f379455000-55f379456000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 55f379456000-55f379458000 rw-p 00000000 00:00 0 55f37d8b8000-55f37d8d9000 rw-p 00000000 00:00 0 [heap] 7f3a34db0000-7f3a34db3000 rw-p 00000000 00:00 0 7f3a34db3000-7f3a34dd9000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f3a34dd9000-7f3a34f2f000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f3a34f2f000-7f3a34f82000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f3a34f82000-7f3a34f86000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f3a34f86000-7f3a34f88000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f3a34f88000-7f3a34f95000 rw-p 00000000 00:00 0 7f3a34fa2000-7f3a34fa4000 rw-p 00000000 00:00 0 7f3a34fa4000-7f3a34fa5000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f3a34fa5000-7f3a34fcb000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f3a34fcb000-7f3a34fd5000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f3a34fd5000-7f3a34fd7000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f3a34fd7000-7f3a34fd9000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffe34867000-7ffe34888000 rw-p 00000000 00:00 0 [stack] 7ffe348d0000-7ffe348d4000 r--p 00000000 00:00 0 [vvar] 7ffe348d4000-7ffe348d6000 r-xp 00000000 00:00 0 [vdso] @latency[5707]: [1] 44 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 120 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 27 |@@@@@@@@@@@ | [8, 16) 5 |@@ | @latency[5705]: [0] 2 | | [1] 40 |@@@@@@@@@@@@@@@@ | [2, 4) 128 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 23 |@@@@@@@@@ | [8, 16) 4 |@ | [16, 32) 1 | | @latency[5703]: [0] 1 | | [1] 47 |@@@@@@@@@@@@@@@@@@ | [2, 4) 129 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 23 |@@@@@@@@@ | [8, 16) 4 |@ | @latency[5701]: [0] 1 | | [1] 44 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 118 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 36 |@@@@@@@@@@@@@@@ | [8, 16) 22 |@@@@@@@@@ | [16, 32) 1 | | @latency[5704]: [1] 3 | | [2, 4) 397 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 12 |@ | [8, 16) 1 | | @latency[5708]: [1] 3 | | [2, 4) 405 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 6 | | @latency[5706]: [1] 5 | | [2, 4) 403 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 8 |@ | @latency[5702]: [0] 67 | | [1] 22796 |@@@@@@@@@@@@@@@@ | [2, 4) 71072 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 7296 |@@@@@ | [8, 16) 4714 |@@@ | [16, 32) 55 | | [32, 64) 0 | | [64, 128) 1 | | [128, 256) 0 | | [256, 512) 1 | | @latency[4729]: [0] 145 | | [1] 24111 |@@@@@@@@ | [2, 4) 155614 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 17355 |@@@@@ | [8, 16) 7773 |@@ | [16, 32) 5431 |@ | [32, 64) 2493 | | [64, 128) 13 | | [128, 256) 2 | | [Mon Jan 12 19:00:48 UTC 2026] respawn: 6: stopped pid 317 with status 0 [Mon Jan 12 19:00:48 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 19:00:49 UTC 2026] respawn: 7: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 355 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 365 root cwd DIR 9,3 4096 13773703 /data udp_sendm 365 root rtd DIR 0,80 4096 7236702 / udp_sendm 365 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 365 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 365 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 365 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 365 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 365 root 1w FIFO W 0,13 0t0 1846006722 pipe udp_sendm 365 root 2w FIFO W 0,13 0t0 1846006723 pipe udp_sendm 365 root 10r REG LG,CX 9,3 106 13773726 /data/bpftrace/udp_sendmsg_delay.sh maps output: 565061f96000-565061f9a000 r--p 00000000 09:03 28221037 /usr/bin/dash 565061f9a000-565061fad000 r-xp 00004000 09:03 28221037 /usr/bin/dash 565061fad000-565061fb3000 r--p 00017000 09:03 28221037 /usr/bin/dash 565061fb3000-565061fb5000 r--p 0001c000 09:03 28221037 /usr/bin/dash 565061fb5000-565061fb6000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 565061fb6000-565061fb8000 rw-p 00000000 00:00 0 565073937000-565073958000 rw-p 00000000 00:00 0 [heap] 7f922c8f2000-7f922c8f5000 rw-p 00000000 00:00 0 7f922c8f5000-7f922c91b000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f922c91b000-7f922ca71000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f922ca71000-7f922cac4000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f922cac4000-7f922cac8000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f922cac8000-7f922caca000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f922caca000-7f922cad7000 rw-p 00000000 00:00 0 7f922cae4000-7f922cae6000 rw-p 00000000 00:00 0 7f922cae6000-7f922cae7000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f922cae7000-7f922cb0d000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f922cb0d000-7f922cb17000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f922cb17000-7f922cb19000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f922cb19000-7f922cb1b000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffc500d5000-7ffc500f6000 rw-p 00000000 00:00 0 [stack] 7ffc501b1000-7ffc501b5000 r--p 00000000 00:00 0 [vvar] 7ffc501b5000-7ffc501b7000 r-xp 00000000 00:00 0 [vdso] @latency[5707]: [0] 7 | | [1] 248 |@@@@@@@@@@@@@@@@ | [2, 4) 798 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 625 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 122 |@@@@@@@ | [16, 32) 12 | | @latency[5705]: [0] 7 | | [1] 224 |@@@@@@@@@@@@@@ | [2, 4) 798 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 673 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 123 |@@@@@@@@ | [16, 32) 4 | | @latency[5703]: [0] 4 | | [1] 226 |@@@@@@@@@@@@@@@ | [2, 4) 777 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 725 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 104 |@@@@@@ | [16, 32) 5 | | @latency[5701]: [1] 239 |@@@@@@@@@@@@@@@ | [2, 4) 819 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 796 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 774 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [16, 32) 81 |@@@@@ | [32, 64) 1 | | @latency[5706]: [0] 1 | | [1] 127 |@@ | [2, 4) 1050 |@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 2490 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 192 |@@@@ | [16, 32) 17 | | [32, 64) 1 | | @latency[5708]: [0] 6 | | [1] 175 |@@ | [2, 4) 1235 |@@@@@@@@@@@@@@ | [4, 8) 4326 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 270 |@@@ | [16, 32) 16 | | @latency[5704]: [0] 10 | | [1] 575 |@@@@ | [2, 4) 2804 |@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 6359 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 416 |@@@ | [16, 32) 10 | | @latency[5702]: [0] 3126 | | [1] 217614 |@@@@@@@@@@@@@@@ | [2, 4) 724616 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 311451 |@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 120425 |@@@@@@@@ | [16, 32) 21928 |@ | [32, 64) 1486 | | [64, 128) 2 | | @latency[4729]: [0] 7040 | | [1] 241014 |@@@@@@@@@ | [2, 4) 1349993 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 1388765 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 199850 |@@@@@@@ | [16, 32) 83069 |@@@ | [32, 64) 90482 |@@@ | [64, 128) 15842 | | [128, 256) 812 | | [256, 512) 1 | | [512, 1K) 2 | | [Mon Jan 12 19:22:18 UTC 2026] respawn: 7: stopped pid 365 with status 0 [Mon Jan 12 19:22:18 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 19:22:19 UTC 2026] respawn: 8: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 403 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 413 root cwd DIR 9,3 4096 13773703 /data udp_sendm 413 root rtd DIR 0,80 4096 7236702 / udp_sendm 413 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 413 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 413 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 413 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 413 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 413 root 1w FIFO W 0,13 0t0 1846006722 pipe udp_sendm 413 root 2w FIFO W 0,13 0t0 1846006723 pipe udp_sendm 413 root 10r REG LG,CX 9,3 106 13773726 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55e6cda93000-55e6cda97000 r--p 00000000 09:03 28221037 /usr/bin/dash 55e6cda97000-55e6cdaaa000 r-xp 00004000 09:03 28221037 /usr/bin/dash 55e6cdaaa000-55e6cdab0000 r--p 00017000 09:03 28221037 /usr/bin/dash 55e6cdab0000-55e6cdab2000 r--p 0001c000 09:03 28221037 /usr/bin/dash 55e6cdab2000-55e6cdab3000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 55e6cdab3000-55e6cdab5000 rw-p 00000000 00:00 0 55e7053eb000-55e70540c000 rw-p 00000000 00:00 0 [heap] 7f49d157e000-7f49d1581000 rw-p 00000000 00:00 0 7f49d1581000-7f49d15a7000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f49d15a7000-7f49d16fd000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f49d16fd000-7f49d1750000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f49d1750000-7f49d1754000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f49d1754000-7f49d1756000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7f49d1756000-7f49d1763000 rw-p 00000000 00:00 0 7f49d1770000-7f49d1772000 rw-p 00000000 00:00 0 7f49d1772000-7f49d1773000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f49d1773000-7f49d1799000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f49d1799000-7f49d17a3000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f49d17a3000-7f49d17a5000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f49d17a5000-7f49d17a7000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffc5f134000-7ffc5f155000 rw-p 00000000 00:00 0 [stack] 7ffc5f1bc000-7ffc5f1c0000 r--p 00000000 00:00 0 [vvar] 7ffc5f1c0000-7ffc5f1c2000 r-xp 00000000 00:00 0 [vdso] @latency[5703]: [2, 4) 17 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[5705]: [1] 1 |@@@ | [2, 4) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1 |@@@ | @latency[5707]: [2, 4) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@@@@@@ | @latency[5701]: [1] 1 |@@@ | [2, 4) 15 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@@@@@@@ | @latency[5704]: [0] 1 |@ | [1] 10 |@@@@@@@@@@@@@@@ | [2, 4) 33 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@@ | @latency[5702]: [0] 405 |@@@@ | [1] 4856 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 3688 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 86 | | [8, 16) 5 | | @latency[4729]: [0] 376 |@ | [1] 4194 |@@@@@@@@@@@@ | [2, 4) 17354 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 753 |@@ | [8, 16) 433 |@ | [16, 32) 44 | | [Mon Jan 12 19:22:29 UTC 2026] respawn: 8: stopped pid 413 with status 0 [Mon Jan 12 19:22:29 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 19:22:30 UTC 2026] respawn: 9: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 451 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 461 root cwd DIR 9,3 4096 13773703 /data udp_sendm 461 root rtd DIR 0,80 4096 7236702 / udp_sendm 461 root txt REG 0,80 125640 28221037 /usr/bin/dash udp_sendm 461 root mem REG 9,3 28221037 /usr/bin/dash (path dev=0,80) udp_sendm 461 root mem REG 9,3 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,80) udp_sendm 461 root mem REG 9,3 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,80) udp_sendm 461 root 0r CHR LG 1,3 0t0 17 /dev/null udp_sendm 461 root 1w FIFO W 0,13 0t0 1846006722 pipe udp_sendm 461 root 2w FIFO W 0,13 0t0 1846006723 pipe udp_sendm 461 root 10r REG LG,CX 9,3 106 13773726 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55a6145c1000-55a6145c5000 r--p 00000000 09:03 28221037 /usr/bin/dash 55a6145c5000-55a6145d8000 r-xp 00004000 09:03 28221037 /usr/bin/dash 55a6145d8000-55a6145de000 r--p 00017000 09:03 28221037 /usr/bin/dash 55a6145de000-55a6145e0000 r--p 0001c000 09:03 28221037 /usr/bin/dash 55a6145e0000-55a6145e1000 rw-p 0001e000 09:03 28221037 /usr/bin/dash 55a6145e1000-55a6145e3000 rw-p 00000000 00:00 0 55a626c76000-55a626c97000 rw-p 00000000 00:00 0 [heap] 7fec34f15000-7fec34f18000 rw-p 00000000 00:00 0 7fec34f18000-7fec34f3e000 r--p 00000000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fec34f3e000-7fec35094000 r-xp 00026000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fec35094000-7fec350e7000 r--p 0017c000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fec350e7000-7fec350eb000 r--p 001cf000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fec350eb000-7fec350ed000 rw-p 001d3000 09:03 28221698 /usr/lib/x86_64-linux-gnu/libc.so.6 7fec350ed000-7fec350fa000 rw-p 00000000 00:00 0 7fec35107000-7fec35109000 rw-p 00000000 00:00 0 7fec35109000-7fec3510a000 r--p 00000000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fec3510a000-7fec35130000 r-xp 00001000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fec35130000-7fec3513a000 r--p 00027000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fec3513a000-7fec3513c000 r--p 00031000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fec3513c000-7fec3513e000 rw-p 00033000 09:03 28221680 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7ffc9fcaa000-7ffc9fccb000 rw-p 00000000 00:00 0 [stack] 7ffc9fdc4000-7ffc9fdc8000 r--p 00000000 00:00 0 [vvar] 7ffc9fdc8000-7ffc9fdca000 r-xp 00000000 00:00 0 [vdso] @latency[5707]: [0] 1 |@ | [1] 38 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 50 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@@ | @latency[5703]: [0] 1 | | [1] 34 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 55 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@ | [8, 16) 0 | | [16, 32) 1 | | @latency[5705]: [0] 2 |@ | [1] 36 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 53 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@ | @latency[5701]: [0] 2 |@ | [1] 39 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 62 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 11 |@@@@@@@@@ | [8, 16) 1 | | @latency[5704]: [1] 20 |@@@@@@@ | [2, 4) 138 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 8 |@@@ | @latency[5702]: [0] 168 | | [1] 14486 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 16183 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1714 |@@@@@ | [8, 16) 333 |@ | [16, 32) 4 | | @latency[4729]: [0] 681 | | [1] 16031 |@@@@@@@@@@@@ | [2, 4) 68429 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5367 |@@@@ | [8, 16) 3319 |@@ | [16, 32) 581 | | [32, 64) 38 | | [64, 128) 3 | | [Mon Jan 12 19:23:21 UTC 2026] respawn: 9: stopped pid 461 with status 0 [Mon Jan 12 19:23:21 UTC 2026] respawn: sleeping 1 seconds... [Mon Jan 12 19:23:22 UTC 2026] respawn: 10: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -p 451 --unsafe osmo-bts-trx Attaching 3 probes... Tracing udp_sendmsg() latency... Hit Ctrl-C to end.