[Wed Jan 21 09:31:13 UTC 2026] respawn: 0: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -v -p 9 osmo-bts-trx Attaching 'begin' probe Trying to attach probe: kretprobe:udp_sendmsg Trying to attach probe: kprobe:udp_sendmsg Attached 3 probes Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 25 root cwd DIR 9,3 4096 13773873 /data udp_sendm 25 root rtd DIR 0,159 4096 19026470 / udp_sendm 25 root txt REG 0,159 129736 7647243 /usr/bin/dash udp_sendm 25 root mem REG 9,3 7647243 /usr/bin/dash (path dev=0,159) udp_sendm 25 root mem REG 9,3 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,159) udp_sendm 25 root mem REG 9,3 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,159) udp_sendm 25 root 0r CHR LG 1,3 0t0 15 /dev/null udp_sendm 25 root 1w FIFO W 0,13 0t0 19557072 pipe udp_sendm 25 root 2w FIFO W 0,13 0t0 19557073 pipe udp_sendm 25 root 10r REG LG,CX 9,3 100 13773941 /data/bpftrace/udp_sendmsg_delay.sh maps output: 559720009000-55972000d000 r--p 00000000 09:03 7647243 /usr/bin/dash 55972000d000-559720021000 r-xp 00004000 09:03 7647243 /usr/bin/dash 559720021000-559720027000 r--p 00018000 09:03 7647243 /usr/bin/dash 559720027000-559720029000 r--p 0001d000 09:03 7647243 /usr/bin/dash 559720029000-55972002a000 rw-p 0001f000 09:03 7647243 /usr/bin/dash 55972002a000-55972002c000 rw-p 00000000 00:00 0 5597345ce000-5597345ef000 rw-p 00000000 00:00 0 [heap] 7f7dee6bf000-7f7dee6c2000 rw-p 00000000 00:00 0 7f7dee6c2000-7f7dee6ea000 r--p 00000000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7dee6ea000-7f7dee84e000 r-xp 00028000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7dee84e000-7f7dee8a4000 r--p 0018c000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7dee8a4000-7f7dee8a8000 r--p 001e1000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7dee8a8000-7f7dee8aa000 rw-p 001e5000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7dee8aa000-7f7dee8b7000 rw-p 00000000 00:00 0 7f7dee8c5000-7f7dee8c7000 rw-p 00000000 00:00 0 7f7dee8c7000-7f7dee8c8000 r--p 00000000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7dee8c8000-7f7dee8f0000 r-xp 00001000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7dee8f0000-7f7dee8fb000 r--p 00029000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7dee8fb000-7f7dee8fd000 r--p 00034000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7dee8fd000-7f7dee8fe000 rw-p 00036000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7dee8fe000-7f7dee8ff000 rw-p 00000000 00:00 0 7fff617c9000-7fff617ea000 rw-p 00000000 00:00 0 [stack] 7fff617f5000-7fff617f9000 r--p 00000000 00:00 0 [vvar] 7fff617f9000-7fff617fb000 r-xp 00000000 00:00 0 [vdso] @latency[5703]: [0] 2 | | [1] 48 |@@@@@@@@@@@@@@@@@@ | [2, 4) 137 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 18 |@@@@@@ | [8, 16) 8 |@@@ | @latency[5705]: [0] 2 | | [1] 69 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 122 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 10 |@@@@ | [8, 16) 9 |@@@ | [16, 32) 1 | | @latency[5707]: [0] 2 | | [1] 68 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 130 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 8 |@@@ | [8, 16) 5 |@@ | @latency[5701]: [0] 3 | | [1] 87 |@@@ | [2, 4) 1247 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 94 |@@@ | [8, 16) 51 |@@ | [16, 32) 5 | | @latency[5702]: [0] 1643 | | [1] 146601 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 78539 |@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 15885 |@@@@@ | [8, 16) 23978 |@@@@@@@@ | [16, 32) 391 | | [32, 64) 18 | | [64, 128) 0 | | [128, 256) 1 | | @latency[4729]: [0] 2343 | | [1] 85337 |@@@@@@@@ | [2, 4) 505694 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 46955 |@@@@ | [8, 16) 72549 |@@@@@@@ | [16, 32) 4401 | | [32, 64) 1117 | | [64, 128) 88 | | [128, 256) 0 | | [256, 512) 1 | | [512, 1K) 0 | | [1K, 2K) 1 | | [Wed Jan 21 09:34:41 UTC 2026] respawn: 0: stopped pid 25 with status 0 [Wed Jan 21 09:34:41 UTC 2026] respawn: sleeping 1 seconds... [Wed Jan 21 09:34:42 UTC 2026] respawn: 1: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -v -p 61 osmo-bts-trx Attaching 'begin' probe Trying to attach probe: kretprobe:udp_sendmsg Trying to attach probe: kprobe:udp_sendmsg Attached 3 probes Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 77 root cwd DIR 9,3 4096 13773873 /data udp_sendm 77 root rtd DIR 0,159 4096 19026470 / udp_sendm 77 root txt REG 0,159 129736 7647243 /usr/bin/dash udp_sendm 77 root mem REG 9,3 7647243 /usr/bin/dash (path dev=0,159) udp_sendm 77 root mem REG 9,3 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,159) udp_sendm 77 root mem REG 9,3 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,159) udp_sendm 77 root 0r CHR LG 1,3 0t0 15 /dev/null udp_sendm 77 root 1w FIFO W 0,13 0t0 19557072 pipe udp_sendm 77 root 2w FIFO W 0,13 0t0 19557073 pipe udp_sendm 77 root 10r REG LG,CX 9,3 100 13773941 /data/bpftrace/udp_sendmsg_delay.sh maps output: 5654d68c5000-5654d68c9000 r--p 00000000 09:03 7647243 /usr/bin/dash 5654d68c9000-5654d68dd000 r-xp 00004000 09:03 7647243 /usr/bin/dash 5654d68dd000-5654d68e3000 r--p 00018000 09:03 7647243 /usr/bin/dash 5654d68e3000-5654d68e5000 r--p 0001d000 09:03 7647243 /usr/bin/dash 5654d68e5000-5654d68e6000 rw-p 0001f000 09:03 7647243 /usr/bin/dash 5654d68e6000-5654d68e8000 rw-p 00000000 00:00 0 565514240000-565514261000 rw-p 00000000 00:00 0 [heap] 7f7385daf000-7f7385db2000 rw-p 00000000 00:00 0 7f7385db2000-7f7385dda000 r--p 00000000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7385dda000-7f7385f3e000 r-xp 00028000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7385f3e000-7f7385f94000 r--p 0018c000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7385f94000-7f7385f98000 r--p 001e1000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7385f98000-7f7385f9a000 rw-p 001e5000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f7385f9a000-7f7385fa7000 rw-p 00000000 00:00 0 7f7385fb5000-7f7385fb7000 rw-p 00000000 00:00 0 7f7385fb7000-7f7385fb8000 r--p 00000000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7385fb8000-7f7385fe0000 r-xp 00001000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7385fe0000-7f7385feb000 r--p 00029000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7385feb000-7f7385fed000 r--p 00034000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7385fed000-7f7385fee000 rw-p 00036000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f7385fee000-7f7385fef000 rw-p 00000000 00:00 0 7fff39f3d000-7fff39f5e000 rw-p 00000000 00:00 0 [stack] 7fff39f85000-7fff39f89000 r--p 00000000 00:00 0 [vvar] 7fff39f89000-7fff39f8b000 r-xp 00000000 00:00 0 [vdso] @latency[5703]: [1] 9 |@@@@@@@@@@@@@@@ | [2, 4) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[5705]: [1] 12 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 28 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[5707]: [1] 9 |@@@@@@@@@@@@@@@ | [2, 4) 31 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| @latency[5701]: [1] 19 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 21 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 16 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 3 |@@@@@@@ | @latency[5702]: [0] 38 | | [1] 11906 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 29947 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5099 |@@@@@@@@ | [8, 16) 3942 |@@@@@@ | [16, 32) 56 | | [32, 64) 4 | | @latency[4729]: [0] 366 | | [1] 10849 |@@@@@@ | [2, 4) 89701 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 20112 |@@@@@@@@@@@ | [8, 16) 9693 |@@@@@ | [16, 32) 3359 |@ | [32, 64) 1580 | | [64, 128) 9 | | [128, 256) 1 | | [Wed Jan 21 09:35:21 UTC 2026] respawn: 1: stopped pid 77 with status 0 [Wed Jan 21 09:35:21 UTC 2026] respawn: sleeping 1 seconds... [Wed Jan 21 09:35:22 UTC 2026] respawn: 2: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -v -p 109 osmo-bts-trx Attaching 'begin' probe Trying to attach probe: kretprobe:udp_sendmsg Trying to attach probe: kprobe:udp_sendmsg Attached 3 probes Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 125 root cwd DIR 9,3 4096 13773873 /data udp_sendm 125 root rtd DIR 0,159 4096 19026470 / udp_sendm 125 root txt REG 0,159 129736 7647243 /usr/bin/dash udp_sendm 125 root mem REG 9,3 7647243 /usr/bin/dash (path dev=0,159) udp_sendm 125 root mem REG 9,3 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,159) udp_sendm 125 root mem REG 9,3 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,159) udp_sendm 125 root 0r CHR LG 1,3 0t0 15 /dev/null udp_sendm 125 root 1w FIFO W 0,13 0t0 19557072 pipe udp_sendm 125 root 2w FIFO W 0,13 0t0 19557073 pipe udp_sendm 125 root 10r REG LG,CX 9,3 100 13773941 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55ecc9f9a000-55ecc9f9e000 r--p 00000000 09:03 7647243 /usr/bin/dash 55ecc9f9e000-55ecc9fb2000 r-xp 00004000 09:03 7647243 /usr/bin/dash 55ecc9fb2000-55ecc9fb8000 r--p 00018000 09:03 7647243 /usr/bin/dash 55ecc9fb8000-55ecc9fba000 r--p 0001d000 09:03 7647243 /usr/bin/dash 55ecc9fba000-55ecc9fbb000 rw-p 0001f000 09:03 7647243 /usr/bin/dash 55ecc9fbb000-55ecc9fbd000 rw-p 00000000 00:00 0 55ece3718000-55ece3739000 rw-p 00000000 00:00 0 [heap] 7fab26ef6000-7fab26ef9000 rw-p 00000000 00:00 0 7fab26ef9000-7fab26f21000 r--p 00000000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7fab26f21000-7fab27085000 r-xp 00028000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7fab27085000-7fab270db000 r--p 0018c000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7fab270db000-7fab270df000 r--p 001e1000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7fab270df000-7fab270e1000 rw-p 001e5000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7fab270e1000-7fab270ee000 rw-p 00000000 00:00 0 7fab270fc000-7fab270fe000 rw-p 00000000 00:00 0 7fab270fe000-7fab270ff000 r--p 00000000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fab270ff000-7fab27127000 r-xp 00001000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fab27127000-7fab27132000 r--p 00029000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fab27132000-7fab27134000 r--p 00034000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fab27134000-7fab27135000 rw-p 00036000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fab27135000-7fab27136000 rw-p 00000000 00:00 0 7fff04b50000-7fff04b71000 rw-p 00000000 00:00 0 [stack] 7fff04b93000-7fff04b97000 r--p 00000000 00:00 0 [vvar] 7fff04b97000-7fff04b99000 r-xp 00000000 00:00 0 [vdso] @latency[5703]: [1] 17 |@@@@@@@@@@@@@ | [2, 4) 66 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 5 |@@@ | @latency[5705]: [1] 24 |@@@@@@@@@@@@@@@@@@@@ | [2, 4) 61 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 3 |@@ | @latency[5707]: [1] 17 |@@@@@@@@@@@@ | [2, 4) 69 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 2 |@ | @latency[5701]: [1] 23 |@@@@@@@@ | [2, 4) 136 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 28 |@@@@@@@@@@ | [8, 16) 7 |@@ | [16, 32) 2 | | @latency[5702]: [0] 1694 |@ | [1] 81076 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 41332 |@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 8935 |@@@@@ | [8, 16) 10821 |@@@@@@ | [16, 32) 145 | | [32, 64) 12 | | [64, 128) 2 | | @latency[4729]: [0] 2887 | | [1] 45670 |@@@@@@@@ | [2, 4) 278932 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 24566 |@@@@ | [8, 16) 33344 |@@@@@@ | [16, 32) 2737 | | [32, 64) 442 | | [64, 128) 12 | | [128, 256) 1 | | [256, 512) 0 | | [512, 1K) 1 | | [Wed Jan 21 09:37:08 UTC 2026] respawn: 2: stopped pid 125 with status 0 [Wed Jan 21 09:37:08 UTC 2026] respawn: sleeping 1 seconds... [Wed Jan 21 09:37:09 UTC 2026] respawn: 3: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -v -p 163 osmo-bts-trx Attaching 'begin' probe Trying to attach probe: kretprobe:udp_sendmsg Trying to attach probe: kprobe:udp_sendmsg Attached 3 probes Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 167 root cwd DIR 9,3 4096 13773873 /data udp_sendm 167 root rtd DIR 0,159 4096 19026470 / udp_sendm 167 root txt REG 0,159 129736 7647243 /usr/bin/dash udp_sendm 167 root mem REG 9,3 7647243 /usr/bin/dash (path dev=0,159) udp_sendm 167 root mem REG 9,3 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,159) udp_sendm 167 root mem REG 9,3 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,159) udp_sendm 167 root 0r CHR LG 1,3 0t0 15 /dev/null udp_sendm 167 root 1w FIFO W 0,13 0t0 19557072 pipe udp_sendm 167 root 2w FIFO W 0,13 0t0 19557073 pipe udp_sendm 167 root 10r REG LG,CX 9,3 100 13773941 /data/bpftrace/udp_sendmsg_delay.sh maps output: 56099d053000-56099d057000 r--p 00000000 09:03 7647243 /usr/bin/dash 56099d057000-56099d06b000 r-xp 00004000 09:03 7647243 /usr/bin/dash 56099d06b000-56099d071000 r--p 00018000 09:03 7647243 /usr/bin/dash 56099d071000-56099d073000 r--p 0001d000 09:03 7647243 /usr/bin/dash 56099d073000-56099d074000 rw-p 0001f000 09:03 7647243 /usr/bin/dash 56099d074000-56099d076000 rw-p 00000000 00:00 0 5609bfe46000-5609bfe67000 rw-p 00000000 00:00 0 [heap] 7fe5602d2000-7fe5602d5000 rw-p 00000000 00:00 0 7fe5602d5000-7fe5602fd000 r--p 00000000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7fe5602fd000-7fe560461000 r-xp 00028000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7fe560461000-7fe5604b7000 r--p 0018c000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7fe5604b7000-7fe5604bb000 r--p 001e1000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7fe5604bb000-7fe5604bd000 rw-p 001e5000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7fe5604bd000-7fe5604ca000 rw-p 00000000 00:00 0 7fe5604d8000-7fe5604da000 rw-p 00000000 00:00 0 7fe5604da000-7fe5604db000 r--p 00000000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fe5604db000-7fe560503000 r-xp 00001000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fe560503000-7fe56050e000 r--p 00029000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fe56050e000-7fe560510000 r--p 00034000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fe560510000-7fe560511000 rw-p 00036000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7fe560511000-7fe560512000 rw-p 00000000 00:00 0 7fff885a0000-7fff885c1000 rw-p 00000000 00:00 0 [stack] 7fff885d6000-7fff885da000 r--p 00000000 00:00 0 [vvar] 7fff885da000-7fff885dc000 r-xp 00000000 00:00 0 [vdso] @latency[5704]: [1] 321 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 200 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 5 | | [8, 16) 2 | | @latency[5705]: [0] 2 | | [1] 132 |@@@@@@@@@@@@@@ | [2, 4) 382 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 460 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 20 |@@ | [16, 32) 4 | | @latency[5707]: [0] 3 | | [1] 139 |@@@@@@@@@@@@@@@@@ | [2, 4) 415 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 416 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 23 |@@ | [16, 32) 4 | | @latency[5703]: [1] 109 |@@@@@@@@@@@@ | [2, 4) 395 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 469 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 29 |@@@ | [16, 32) 4 | | @latency[5701]: [0] 1 | | [1] 138 |@@@@@@@@@@@ | [2, 4) 420 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 635 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [8, 16) 124 |@@@@@@@@@@ | [16, 32) 17 |@ | @latency[5702]: [0] 2003 | | [1] 290993 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [2, 4) 241659 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [4, 8) 211463 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 34710 |@@@@@@ | [16, 32) 10383 |@ | [32, 64) 52 | | [64, 128) 6 | | @latency[4729]: [0] 14215 | | [1] 283371 |@@@@@@@@@@@@@@ | [2, 4) 1042993 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 680300 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ | [8, 16) 128186 |@@@@@@ | [16, 32) 45461 |@@ | [32, 64) 5082 | | [64, 128) 216 | | [128, 256) 7 | | [Wed Jan 21 09:48:58 UTC 2026] respawn: 3: stopped pid 167 with status 0 [Wed Jan 21 09:48:58 UTC 2026] respawn: sleeping 1 seconds... [Wed Jan 21 09:48:59 UTC 2026] respawn: 4: starting: /data/bpftrace/udp_sendmsg_delay.sh + pidof osmo-bts-trx + bpftrace /data/bpftrace/udp_sendmsg_delay.bt -v -p 205 osmo-bts-trx Attaching 'begin' probe Trying to attach probe: kretprobe:udp_sendmsg Trying to attach probe: kprobe:udp_sendmsg Attached 3 probes Tracing udp_sendmsg() latency... Hit Ctrl-C to end. lsof output: COMMAND PID USER FD TYPE FILE-FLAG DEVICE SIZE/OFF NODE NAME udp_sendm 221 root cwd DIR 9,3 4096 13773873 /data udp_sendm 221 root rtd DIR 0,159 4096 19026470 / udp_sendm 221 root txt REG 0,159 129736 7647243 /usr/bin/dash udp_sendm 221 root mem REG 9,3 7647243 /usr/bin/dash (path dev=0,159) udp_sendm 221 root mem REG 9,3 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 (path dev=0,159) udp_sendm 221 root mem REG 9,3 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 (path dev=0,159) udp_sendm 221 root 0r CHR LG 1,3 0t0 15 /dev/null udp_sendm 221 root 1w FIFO W 0,13 0t0 19557072 pipe udp_sendm 221 root 2w FIFO W 0,13 0t0 19557073 pipe udp_sendm 221 root 10r REG LG,CX 9,3 100 13773941 /data/bpftrace/udp_sendmsg_delay.sh maps output: 55a875366000-55a87536a000 r--p 00000000 09:03 7647243 /usr/bin/dash 55a87536a000-55a87537e000 r-xp 00004000 09:03 7647243 /usr/bin/dash 55a87537e000-55a875384000 r--p 00018000 09:03 7647243 /usr/bin/dash 55a875384000-55a875386000 r--p 0001d000 09:03 7647243 /usr/bin/dash 55a875386000-55a875387000 rw-p 0001f000 09:03 7647243 /usr/bin/dash 55a875387000-55a875389000 rw-p 00000000 00:00 0 55a88c6aa000-55a88c6cb000 rw-p 00000000 00:00 0 [heap] 7f396552b000-7f396552e000 rw-p 00000000 00:00 0 7f396552e000-7f3965556000 r--p 00000000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f3965556000-7f39656ba000 r-xp 00028000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f39656ba000-7f3965710000 r--p 0018c000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f3965710000-7f3965714000 r--p 001e1000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f3965714000-7f3965716000 rw-p 001e5000 09:03 7647837 /usr/lib/x86_64-linux-gnu/libc.so.6 7f3965716000-7f3965723000 rw-p 00000000 00:00 0 7f3965731000-7f3965733000 rw-p 00000000 00:00 0 7f3965733000-7f3965734000 r--p 00000000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f3965734000-7f396575c000 r-xp 00001000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f396575c000-7f3965767000 r--p 00029000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f3965767000-7f3965769000 r--p 00034000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f3965769000-7f396576a000 rw-p 00036000 09:03 7647817 /usr/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2 7f396576a000-7f396576b000 rw-p 00000000 00:00 0 7ffca9acc000-7ffca9aed000 rw-p 00000000 00:00 0 [stack] 7ffca9b65000-7ffca9b69000 r--p 00000000 00:00 0 [vvar] 7ffca9b69000-7ffca9b6b000 r-xp 00000000 00:00 0 [vdso] @latency[0]: [1] 1 | | [2, 4) 7 | | [4, 8) 26 |@@ | [8, 16) 625 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 170 |@@@@@@@@@@@@@@ | [32, 64) 17 |@ | @latency[5707]: [0] 39 | | [1] 1178 |@@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2710 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 394 |@@@@@@@ | [8, 16) 463 |@@@@@@@@ | [16, 32) 29 | | @latency[5705]: [0] 39 | | [1] 1100 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2641 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 555 |@@@@@@@@@@ | [8, 16) 452 |@@@@@@@@ | [16, 32) 29 | | @latency[5703]: [0] 34 | | [1] 976 |@@@@@@@@@@@@@@@@@@@ | [2, 4) 2665 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 599 |@@@@@@@@@@@ | [8, 16) 523 |@@@@@@@@@@ | [16, 32) 30 | | [32, 64) 2 | | @latency[5701]: [0] 11 | | [1] 1263 |@@@@@@@@@@@@@@@@@@@@@ | [2, 4) 2998 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [4, 8) 1091 |@@@@@@@@@@@@@@@@@@ | [8, 16) 1202 |@@@@@@@@@@@@@@@@@@@@ | [16, 32) 181 |@@@ | [32, 64) 1 | | @latency[5704]: [0] 1 | | [1] 57 | | [2, 4) 167 |@ | [4, 8) 423 |@@@ | [8, 16) 6637 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 55 | | @latency[5702]: [0] 2082 | | [1] 271949 |@@@@@@@ | [2, 4) 281109 |@@@@@@@ | [4, 8) 183873 |@@@@ | [8, 16) 1980689 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 18049 | | [32, 64) 259 | | [64, 128) 7 | | [128, 256) 0 | | [256, 512) 0 | | [512, 1K) 1 | | @latency[4729]: [0] 17150 | | [1] 420612 |@@@@ | [2, 4) 1291828 |@@@@@@@@@@@@@@ | [4, 8) 430876 |@@@@ | [8, 16) 4623204 |@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@| [16, 32) 194585 |@@ | [32, 64) 52928 | | [64, 128) 2677 | | [128, 256) 16 | | [256, 512) 1 | | [512, 1K) 1 | | [Wed Jan 21 10:35:39 UTC 2026] respawn: 4: stopped pid 221 with status 0 [Wed Jan 21 10:35:39 UTC 2026] respawn: sleeping 1 seconds...