Google Groups no longer supports new Usenet posts or subscriptions. Historical content remains viewable.
Dismiss
Hilfe beim Kernel-Trace-Lesen
11 views
Skip to first unread message
Marc Haber
Nov 26, 2023, 5:07:17 AM11/26/23
to
Hallo,
mag mir mal jemand beim Lesen eines Kernel-Traces helfen? Der Patient
ist ein Banana Pi mit Debian unstable, der seit etwa einer Woche nicht
mehr stabil läuft. Das sympton ist, dass man sich ab etwa zehn bis
dreißig Stunden nach Systemstart nicht mehr per ssh einloggen kann,
nach weiteren zehn bis dreißig Stunden ist die Kiste auch nicht mehr
anpingbar, auf der seriellen Konsole gibt es einen "Login:"-Prompt an
dem man auch etwas eingeben kann, aber zum "Password:"-Prompt kommt es
dann nicht mehr. Laut syslog läuft die Kiste aber ganz normal weiter
und es werden regelmäßig Kerneltraces geloggt.
Hier die ersten paar Traces von heute nacht nachdem die Maschine seit
gestern Mittag normal gelaufen ist.
|Nov 26 02:44:19 banana kernel: [104133.414622] sched: RT throttling activated
|Nov 26 02:44:40 banana kernel: [104154.080074] rcu: INFO: rcu_sched self-detected stall on CPU
|Nov 26 02:44:40 banana kernel: [104154.085788] rcu: 0-....: (5249 ticks this GP) idle=b324/1/0x40000002 softirq=551761/551761 fqs=2622
|Nov 26 02:44:40 banana kernel: [104154.095016] rcu: (t=5250 jiffies g=954129 q=64 ncpus=2)
|Nov 26 02:44:40 banana kernel: [104154.100425] CPU: 0 PID: 457 Comm: ntpd Not tainted 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:44:40 banana kernel: [104154.100443] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:44:40 banana kernel: [104154.100454] PC is at stmmac_get_stats64+0x54/0x20c [stmmac]
|Nov 26 02:44:40 banana kernel: [104154.100586] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:44:40 banana kernel: [104154.100612] pc : [<bf120da0>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:44:40 banana kernel: [104154.100624] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:44:40 banana kernel: [104154.100636] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:44:40 banana kernel: [104154.100647] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:44:40 banana kernel: [104154.100658] r3 : 0005061b r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:44:40 banana kernel: [104154.100671] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:44:40 banana kernel: [104154.100686] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:44:40 banana kernel: [104154.100706] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:44:40 banana kernel: [104154.100782] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:44:40 banana kernel: [104154.100814] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:44:40 banana kernel: [104154.100841] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:44:40 banana kernel: [104154.100862] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:44:40 banana kernel: [104154.100888] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:44:40 banana kernel: [104154.100914] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:44:40 banana kernel: [104154.100943] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:44:40 banana kernel: [104154.100974] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:44:40 banana kernel: [104154.101001] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:44:40 banana kernel: [104154.101027] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:44:40 banana kernel: [104154.101053] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:44:40 banana kernel: [104154.101077] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:44:40 banana kernel: [104154.101102] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:44:40 banana kernel: [104154.101120] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:44:40 banana kernel: [104154.101138] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:44:40 banana kernel: [104154.101152] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 02:45:05 banana kernel: [104179.361848] watchdog: BUG: soft lockup - CPU#0 stuck for 45s! [ntpd:457]
|Nov 26 02:45:05 banana kernel: [104179.368688] Modules linked in: nft_fib_ipv6 nft_masq nft_nat nft_fib_ipv4 nft_fib nft_chain_nat nf_nat nf_conntrack nf_defrag_ipv6 nf_defrag_ipv4 nf_tables libcrc32c des_generic binfmt_misc nvmem_sunxi_sid sun4i_ts sunxi_wdt sun4i_ss libdes sun4i_dma leds_gpio cpufreq_dt sg loop configfs
nfnetlink ip_tables x_tables autofs4 ext4 crc32c_generic crc16 mbcache jbd2 dm_mod dax sd_mod t10_pi axp20x_usb_power axp20x_regulator realtek ahci_sunxi libahci_platform dwmac_sunxi stmmac_platform stmmac libahci pcs_xpcs phylink libata scsi_mod i2c_mv64xxx ohci_platform sun4i_gpadc scsi_common ohci_hcd ehci_platform ehci_hcd
phy_sun4i_usb sunxi_mmc
|Nov 26 02:45:05 banana kernel: [104179.369144] CPU: 0 PID: 457 Comm: ntpd Not tainted 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:45:05 banana kernel: [104179.369164] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:45:05 banana kernel: [104179.369174] PC is at stmmac_get_stats64+0x5c/0x20c [stmmac]
|Nov 26 02:45:05 banana kernel: [104179.369303] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:45:05 banana kernel: [104179.369329] pc : [<bf120da8>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:45:05 banana kernel: [104179.369341] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:45:05 banana kernel: [104179.369352] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:45:05 banana kernel: [104179.369363] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:45:05 banana kernel: [104179.369375] r3 : 00050675 r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:45:05 banana kernel: [104179.369388] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:45:05 banana kernel: [104179.369402] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:45:05 banana kernel: [104179.369422] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:45:05 banana kernel: [104179.369498] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:45:05 banana kernel: [104179.369529] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:45:05 banana kernel: [104179.369555] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:45:05 banana kernel: [104179.369576] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:45:05 banana kernel: [104179.369601] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:45:05 banana kernel: [104179.369627] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:45:05 banana kernel: [104179.369656] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:45:05 banana kernel: [104179.369686] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:45:05 banana kernel: [104179.369712] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:45:05 banana kernel: [104179.369737] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:45:05 banana kernel: [104179.369763] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:45:05 banana kernel: [104179.369785] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:45:05 banana kernel: [104179.369810] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:45:05 banana kernel: [104179.369828] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:45:05 banana kernel: [104179.369846] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:45:05 banana kernel: [104179.369860] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 02:50:51 banana kernel: [104525.370171] rcu: INFO: rcu_sched self-detected stall on CPU
|Nov 26 02:50:51 banana kernel: [104525.375883] rcu: 0-....: (5249 ticks this GP) idle=3d2c/1/0x40000002 softirq=552484/552484 fqs=2622
|Nov 26 02:50:51 banana kernel: [104525.385110] rcu: (t=5250 jiffies g=955677 q=87 ncpus=2)
|Nov 26 02:50:51 banana kernel: [104525.390518] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:50:51 banana kernel: [104525.390536] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:50:51 banana kernel: [104525.390548] PC is at stmmac_get_stats64+0x40/0x20c [stmmac]
|Nov 26 02:50:51 banana kernel: [104525.390678] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:50:51 banana kernel: [104525.390705] pc : [<bf120d8c>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:50:51 banana kernel: [104525.390717] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:50:51 banana kernel: [104525.390729] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:50:51 banana kernel: [104525.390739] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:50:51 banana kernel: [104525.390751] r3 : 00050a47 r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:50:51 banana kernel: [104525.390764] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:50:51 banana kernel: [104525.390779] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:50:51 banana kernel: [104525.390798] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:50:51 banana kernel: [104525.390873] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:50:51 banana kernel: [104525.390904] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:50:51 banana kernel: [104525.390930] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:50:51 banana kernel: [104525.390951] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:50:51 banana kernel: [104525.390976] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:50:51 banana kernel: [104525.391001] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:50:51 banana kernel: [104525.391031] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:50:51 banana kernel: [104525.391061] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:50:51 banana kernel: [104525.391087] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:50:51 banana kernel: [104525.391113] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:50:51 banana kernel: [104525.391138] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:50:51 banana kernel: [104525.391161] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:50:51 banana kernel: [104525.391186] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:50:51 banana kernel: [104525.391205] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:50:51 banana kernel: [104525.391223] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:50:51 banana kernel: [104525.391237] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 02:58:14 banana kernel: [104968.733335] rcu: INFO: rcu_sched self-detected stall on CPU
|Nov 26 02:58:14 banana kernel: [104968.739048] rcu: 0-....: (5249 ticks this GP) idle=c3f4/1/0x40000002 softirq=553347/553347 fqs=2624
|Nov 26 02:58:14 banana kernel: [104968.748276] rcu: (t=5250 jiffies g=957345 q=52 ncpus=2)
|Nov 26 02:58:14 banana kernel: [104968.753685] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:58:14 banana kernel: [104968.753703] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:58:14 banana kernel: [104968.753714] PC is at stmmac_get_stats64+0x64/0x20c [stmmac]
|Nov 26 02:58:14 banana kernel: [104968.753842] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:58:14 banana kernel: [104968.753868] pc : [<bf120db0>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:58:14 banana kernel: [104968.753880] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:58:14 banana kernel: [104968.753891] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:58:14 banana kernel: [104968.753901] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:58:14 banana kernel: [104968.753913] r3 : 00050ed5 r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:58:14 banana kernel: [104968.753926] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:58:14 banana kernel: [104968.753941] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:58:14 banana kernel: [104968.753961] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:58:14 banana kernel: [104968.754036] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:58:14 banana kernel: [104968.754068] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:58:14 banana kernel: [104968.754095] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:58:14 banana kernel: [104968.754115] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:58:14 banana kernel: [104968.754141] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:58:14 banana kernel: [104968.754166] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:58:14 banana kernel: [104968.754195] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:58:14 banana kernel: [104968.754225] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:58:14 banana kernel: [104968.754252] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:58:14 banana kernel: [104968.754277] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:58:14 banana kernel: [104968.754303] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:58:14 banana kernel: [104968.754325] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:58:14 banana kernel: [104968.754350] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:58:14 banana kernel: [104968.754369] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:58:14 banana kernel: [104968.754387] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:58:14 banana kernel: [104968.754401] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 02:59:22 banana kernel: [105036.430093] rcu: INFO: rcu_sched self-detected stall on CPU
|Nov 26 02:59:22 banana kernel: [105036.435801] rcu: 0-....: (5249 ticks this GP) idle=cd9c/1/0x40000002 softirq=553509/553509 fqs=2623
|Nov 26 02:59:22 banana kernel: [105036.445028] rcu: (t=5250 jiffies g=957669 q=104 ncpus=2)
|Nov 26 02:59:22 banana kernel: [105036.450523] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:59:22 banana kernel: [105036.450540] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:59:22 banana kernel: [105036.450551] PC is at stmmac_get_stats64+0x54/0x20c [stmmac]
|Nov 26 02:59:22 banana kernel: [105036.450680] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:59:22 banana kernel: [105036.450707] pc : [<bf120da0>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:59:22 banana kernel: [105036.450719] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:59:22 banana kernel: [105036.450730] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:59:22 banana kernel: [105036.450741] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:59:22 banana kernel: [105036.450752] r3 : 00050f8f r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:59:22 banana kernel: [105036.450766] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:59:22 banana kernel: [105036.450781] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:59:22 banana kernel: [105036.450802] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:59:22 banana kernel: [105036.450879] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:59:22 banana kernel: [105036.450911] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:59:22 banana kernel: [105036.450937] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:59:22 banana kernel: [105036.450958] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:59:22 banana kernel: [105036.450984] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:59:22 banana kernel: [105036.451010] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:59:22 banana kernel: [105036.451039] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:59:22 banana kernel: [105036.451069] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:59:22 banana kernel: [105036.451095] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:59:22 banana kernel: [105036.451121] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:59:22 banana kernel: [105036.451147] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:59:22 banana kernel: [105036.451171] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:59:22 banana kernel: [105036.451195] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:59:22 banana kernel: [105036.451214] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:59:22 banana kernel: [105036.451232] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:59:22 banana kernel: [105036.451246] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 02:59:49 banana kernel: [105063.423987] watchdog: BUG: soft lockup - CPU#0 stuck for 48s! [ntpd:457]
|Nov 26 02:59:49 banana kernel: [105063.430828] Modules linked in: nft_fib_ipv6 nft_masq nft_nat nft_fib_ipv4 nft_fib nft_chain_nat nf_nat nf_conntrack nf_defrag_ipv6 nf_defrag_ipv4 nf_tables libcrc32c des_generic binfmt_misc nvmem_sunxi_sid sun4i_ts sunxi_wdt sun4i_ss libdes sun4i_dma leds_gpio cpufreq_dt sg loop configfs
nfnetlink ip_tables x_tables autofs4 ext4 crc32c_generic crc16 mbcache jbd2 dm_mod dax sd_mod t10_pi axp20x_usb_power axp20x_regulator realtek ahci_sunxi libahci_platform dwmac_sunxi stmmac_platform stmmac libahci pcs_xpcs phylink libata scsi_mod i2c_mv64xxx ohci_platform sun4i_gpadc scsi_common ohci_hcd ehci_platform ehci_hcd
phy_sun4i_usb sunxi_mmc
|Nov 26 02:59:49 banana kernel: [105063.431281] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:59:49 banana kernel: [105063.431300] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:59:49 banana kernel: [105063.431311] PC is at stmmac_get_stats64+0x38/0x20c [stmmac]
|Nov 26 02:59:49 banana kernel: [105063.431440] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:59:49 banana kernel: [105063.431466] pc : [<bf120d84>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:59:49 banana kernel: [105063.431478] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:59:49 banana kernel: [105063.431489] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:59:49 banana kernel: [105063.431500] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:59:49 banana kernel: [105063.431512] r3 : 00050fd1 r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:59:49 banana kernel: [105063.431525] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:59:49 banana kernel: [105063.431539] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:59:49 banana kernel: [105063.431562] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:59:49 banana kernel: [105063.431638] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:59:49 banana kernel: [105063.431671] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:59:49 banana kernel: [105063.431698] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:59:49 banana kernel: [105063.431719] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:59:49 banana kernel: [105063.431745] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:59:49 banana kernel: [105063.431771] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:59:49 banana kernel: [105063.431800] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:59:49 banana kernel: [105063.431830] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:59:49 banana kernel: [105063.431856] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:59:49 banana kernel: [105063.431882] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:59:49 banana kernel: [105063.431908] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:59:49 banana kernel: [105063.431931] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:59:49 banana kernel: [105063.431956] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:59:49 banana kernel: [105063.431974] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:59:49 banana kernel: [105063.431992] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:59:49 banana kernel: [105063.432006] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 03:00:17 banana kernel: [105091.425955] watchdog: BUG: soft lockup - CPU#0 stuck for 75s! [ntpd:457]
|Nov 26 03:00:17 banana kernel: [105091.432793] Modules linked in: nft_fib_ipv6 nft_masq nft_nat nft_fib_ipv4 nft_fib nft_chain_nat nf_nat nf_conntrack nf_defrag_ipv6 nf_defrag_ipv4 nf_tables libcrc32c des_generic binfmt_misc nvmem_sunxi_sid sun4i_ts sunxi_wdt sun4i_ss libdes sun4i_dma leds_gpio cpufreq_dt sg loop configfs
nfnetlink ip_tables x_tables autofs4 ext4 crc32c_generic crc16 mbcache jbd2 dm_mod dax sd_mod t10_pi axp20x_usb_power axp20x_regulator realtek ahci_sunxi libahci_platform dwmac_sunxi stmmac_platform stmmac libahci pcs_xpcs phylink libata scsi_mod i2c_mv64xxx ohci_platform sun4i_gpadc scsi_common ohci_hcd ehci_platform ehci_hcd
phy_sun4i_usb sunxi_mmc
|Nov 26 03:00:17 banana kernel: [105091.433245] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 03:00:17 banana kernel: [105091.433264] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 03:00:17 banana kernel: [105091.433276] PC is at stmmac_get_stats64+0x4c/0x20c [stmmac]
|Nov 26 03:00:17 banana kernel: [105091.433406] LR is at dev_get_stats+0x44/0x144
|Nov 26 03:00:17 banana kernel: [105091.433432] pc : [<bf120d98>] lr : [<c0952d98>] psr: 20000013
|Nov 26 03:00:17 banana kernel: [105091.433444] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 03:00:17 banana kernel: [105091.433456] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 03:00:17 banana kernel: [105091.433466] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 03:00:17 banana kernel: [105091.433478] r3 : 00051073 r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 03:00:17 banana kernel: [105091.433491] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 03:00:17 banana kernel: [105091.433505] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 03:00:17 banana kernel: [105091.433525] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 03:00:17 banana kernel: [105091.433599] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 03:00:17 banana kernel: [105091.433632] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 03:00:17 banana kernel: [105091.433658] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 03:00:17 banana kernel: [105091.433679] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 03:00:17 banana kernel: [105091.433704] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 03:00:17 banana kernel: [105091.433730] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 03:00:17 banana kernel: [105091.433759] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 03:00:17 banana kernel: [105091.433789] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 03:00:17 banana kernel: [105091.433815] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 03:00:17 banana kernel: [105091.433840] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 03:00:17 banana kernel: [105091.433866] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 03:00:17 banana kernel: [105091.433889] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 03:00:17 banana kernel: [105091.433914] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 03:00:17 banana kernel: [105091.433932] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 03:00:17 banana kernel: [105091.433950] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 03:00:17 banana kernel: [105091.433964] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 03:00:25 banana kernel: [105099.466524] rcu: INFO: rcu_sched self-detected stall on CPU
|Nov 26 03:00:25 banana kernel: [105099.472236] rcu: 0-....: (20999 ticks this GP) idle=cd9c/1/0x40000002 softirq=553509/553509 fqs=10429
|Nov 26 03:00:25 banana kernel: [105099.481638] rcu: (t=21008 jiffies g=957669 q=902 ncpus=2)
|Nov 26 03:00:25 banana kernel: [105099.487219] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 03:00:25 banana kernel: [105099.487237] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 03:00:25 banana kernel: [105099.487248] PC is at stmmac_get_stats64+0x34/0x20c [stmmac]
|Nov 26 03:00:25 banana kernel: [105099.487373] LR is at dev_get_stats+0x44/0x144
|Nov 26 03:00:25 banana kernel: [105099.487399] pc : [<bf120d80>] lr : [<c0952d98>] psr: 20000013
|Nov 26 03:00:25 banana kernel: [105099.487411] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 03:00:25 banana kernel: [105099.487423] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 03:00:25 banana kernel: [105099.487433] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 03:00:25 banana kernel: [105099.487445] r3 : 0005107f r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 03:00:25 banana kernel: [105099.487459] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 03:00:25 banana kernel: [105099.487473] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 03:00:25 banana kernel: [105099.487492] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 03:00:25 banana kernel: [105099.487567] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 03:00:25 banana kernel: [105099.487598] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 03:00:25 banana kernel: [105099.487624] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 03:00:25 banana kernel: [105099.487645] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 03:00:25 banana kernel: [105099.487671] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 03:00:25 banana kernel: [105099.487696] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 03:00:25 banana kernel: [105099.487726] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 03:00:25 banana kernel: [105099.487757] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 03:00:25 banana kernel: [105099.487784] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 03:00:25 banana kernel: [105099.487809] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 03:00:25 banana kernel: [105099.487835] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 03:00:25 banana kernel: [105099.487858] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 03:00:25 banana kernel: [105099.487882] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 03:00:25 banana kernel: [105099.487901] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 03:00:25 banana kernel: [105099.487919] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 03:00:25 banana kernel: [105099.487933] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
Kann mir jemand von Euch erklären, was da passiert, wie man diese
Infos "richtig" liest, ob man die offensichtlichen Auszüge aus dem
Call-Stack von oben oder von unten lesen muss etc bla?
Grüße
Marc
--
-------------------------------------- !! No courtesy copies, please !! -----
Marc Haber | " Questions are the | Mailadresse im Header
Mannheim, Germany | Beginning of Wisdom " |
Nordisch by Nature | Lt. Worf, TNG "Rightful Heir" | Fon: *49 621 72739834
mag mir mal jemand beim Lesen eines Kernel-Traces helfen? Der Patient
ist ein Banana Pi mit Debian unstable, der seit etwa einer Woche nicht
mehr stabil läuft. Das sympton ist, dass man sich ab etwa zehn bis
dreißig Stunden nach Systemstart nicht mehr per ssh einloggen kann,
nach weiteren zehn bis dreißig Stunden ist die Kiste auch nicht mehr
anpingbar, auf der seriellen Konsole gibt es einen "Login:"-Prompt an
dem man auch etwas eingeben kann, aber zum "Password:"-Prompt kommt es
dann nicht mehr. Laut syslog läuft die Kiste aber ganz normal weiter
und es werden regelmäßig Kerneltraces geloggt.
Hier die ersten paar Traces von heute nacht nachdem die Maschine seit
gestern Mittag normal gelaufen ist.
|Nov 26 02:44:19 banana kernel: [104133.414622] sched: RT throttling activated
|Nov 26 02:44:40 banana kernel: [104154.080074] rcu: INFO: rcu_sched self-detected stall on CPU
|Nov 26 02:44:40 banana kernel: [104154.085788] rcu: 0-....: (5249 ticks this GP) idle=b324/1/0x40000002 softirq=551761/551761 fqs=2622
|Nov 26 02:44:40 banana kernel: [104154.095016] rcu: (t=5250 jiffies g=954129 q=64 ncpus=2)
|Nov 26 02:44:40 banana kernel: [104154.100425] CPU: 0 PID: 457 Comm: ntpd Not tainted 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:44:40 banana kernel: [104154.100443] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:44:40 banana kernel: [104154.100454] PC is at stmmac_get_stats64+0x54/0x20c [stmmac]
|Nov 26 02:44:40 banana kernel: [104154.100586] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:44:40 banana kernel: [104154.100612] pc : [<bf120da0>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:44:40 banana kernel: [104154.100624] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:44:40 banana kernel: [104154.100636] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:44:40 banana kernel: [104154.100647] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:44:40 banana kernel: [104154.100658] r3 : 0005061b r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:44:40 banana kernel: [104154.100671] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:44:40 banana kernel: [104154.100686] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:44:40 banana kernel: [104154.100706] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:44:40 banana kernel: [104154.100782] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:44:40 banana kernel: [104154.100814] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:44:40 banana kernel: [104154.100841] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:44:40 banana kernel: [104154.100862] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:44:40 banana kernel: [104154.100888] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:44:40 banana kernel: [104154.100914] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:44:40 banana kernel: [104154.100943] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:44:40 banana kernel: [104154.100974] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:44:40 banana kernel: [104154.101001] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:44:40 banana kernel: [104154.101027] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:44:40 banana kernel: [104154.101053] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:44:40 banana kernel: [104154.101077] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:44:40 banana kernel: [104154.101102] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:44:40 banana kernel: [104154.101120] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:44:40 banana kernel: [104154.101138] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:44:40 banana kernel: [104154.101152] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 02:45:05 banana kernel: [104179.361848] watchdog: BUG: soft lockup - CPU#0 stuck for 45s! [ntpd:457]
|Nov 26 02:45:05 banana kernel: [104179.368688] Modules linked in: nft_fib_ipv6 nft_masq nft_nat nft_fib_ipv4 nft_fib nft_chain_nat nf_nat nf_conntrack nf_defrag_ipv6 nf_defrag_ipv4 nf_tables libcrc32c des_generic binfmt_misc nvmem_sunxi_sid sun4i_ts sunxi_wdt sun4i_ss libdes sun4i_dma leds_gpio cpufreq_dt sg loop configfs
nfnetlink ip_tables x_tables autofs4 ext4 crc32c_generic crc16 mbcache jbd2 dm_mod dax sd_mod t10_pi axp20x_usb_power axp20x_regulator realtek ahci_sunxi libahci_platform dwmac_sunxi stmmac_platform stmmac libahci pcs_xpcs phylink libata scsi_mod i2c_mv64xxx ohci_platform sun4i_gpadc scsi_common ohci_hcd ehci_platform ehci_hcd
phy_sun4i_usb sunxi_mmc
|Nov 26 02:45:05 banana kernel: [104179.369144] CPU: 0 PID: 457 Comm: ntpd Not tainted 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:45:05 banana kernel: [104179.369164] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:45:05 banana kernel: [104179.369174] PC is at stmmac_get_stats64+0x5c/0x20c [stmmac]
|Nov 26 02:45:05 banana kernel: [104179.369303] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:45:05 banana kernel: [104179.369329] pc : [<bf120da8>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:45:05 banana kernel: [104179.369341] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:45:05 banana kernel: [104179.369352] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:45:05 banana kernel: [104179.369363] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:45:05 banana kernel: [104179.369375] r3 : 00050675 r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:45:05 banana kernel: [104179.369388] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:45:05 banana kernel: [104179.369402] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:45:05 banana kernel: [104179.369422] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:45:05 banana kernel: [104179.369498] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:45:05 banana kernel: [104179.369529] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:45:05 banana kernel: [104179.369555] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:45:05 banana kernel: [104179.369576] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:45:05 banana kernel: [104179.369601] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:45:05 banana kernel: [104179.369627] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:45:05 banana kernel: [104179.369656] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:45:05 banana kernel: [104179.369686] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:45:05 banana kernel: [104179.369712] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:45:05 banana kernel: [104179.369737] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:45:05 banana kernel: [104179.369763] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:45:05 banana kernel: [104179.369785] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:45:05 banana kernel: [104179.369810] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:45:05 banana kernel: [104179.369828] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:45:05 banana kernel: [104179.369846] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:45:05 banana kernel: [104179.369860] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 02:50:51 banana kernel: [104525.370171] rcu: INFO: rcu_sched self-detected stall on CPU
|Nov 26 02:50:51 banana kernel: [104525.375883] rcu: 0-....: (5249 ticks this GP) idle=3d2c/1/0x40000002 softirq=552484/552484 fqs=2622
|Nov 26 02:50:51 banana kernel: [104525.385110] rcu: (t=5250 jiffies g=955677 q=87 ncpus=2)
|Nov 26 02:50:51 banana kernel: [104525.390518] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:50:51 banana kernel: [104525.390536] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:50:51 banana kernel: [104525.390548] PC is at stmmac_get_stats64+0x40/0x20c [stmmac]
|Nov 26 02:50:51 banana kernel: [104525.390678] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:50:51 banana kernel: [104525.390705] pc : [<bf120d8c>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:50:51 banana kernel: [104525.390717] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:50:51 banana kernel: [104525.390729] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:50:51 banana kernel: [104525.390739] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:50:51 banana kernel: [104525.390751] r3 : 00050a47 r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:50:51 banana kernel: [104525.390764] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:50:51 banana kernel: [104525.390779] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:50:51 banana kernel: [104525.390798] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:50:51 banana kernel: [104525.390873] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:50:51 banana kernel: [104525.390904] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:50:51 banana kernel: [104525.390930] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:50:51 banana kernel: [104525.390951] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:50:51 banana kernel: [104525.390976] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:50:51 banana kernel: [104525.391001] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:50:51 banana kernel: [104525.391031] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:50:51 banana kernel: [104525.391061] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:50:51 banana kernel: [104525.391087] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:50:51 banana kernel: [104525.391113] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:50:51 banana kernel: [104525.391138] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:50:51 banana kernel: [104525.391161] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:50:51 banana kernel: [104525.391186] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:50:51 banana kernel: [104525.391205] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:50:51 banana kernel: [104525.391223] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:50:51 banana kernel: [104525.391237] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 02:58:14 banana kernel: [104968.733335] rcu: INFO: rcu_sched self-detected stall on CPU
|Nov 26 02:58:14 banana kernel: [104968.739048] rcu: 0-....: (5249 ticks this GP) idle=c3f4/1/0x40000002 softirq=553347/553347 fqs=2624
|Nov 26 02:58:14 banana kernel: [104968.748276] rcu: (t=5250 jiffies g=957345 q=52 ncpus=2)
|Nov 26 02:58:14 banana kernel: [104968.753685] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:58:14 banana kernel: [104968.753703] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:58:14 banana kernel: [104968.753714] PC is at stmmac_get_stats64+0x64/0x20c [stmmac]
|Nov 26 02:58:14 banana kernel: [104968.753842] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:58:14 banana kernel: [104968.753868] pc : [<bf120db0>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:58:14 banana kernel: [104968.753880] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:58:14 banana kernel: [104968.753891] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:58:14 banana kernel: [104968.753901] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:58:14 banana kernel: [104968.753913] r3 : 00050ed5 r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:58:14 banana kernel: [104968.753926] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:58:14 banana kernel: [104968.753941] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:58:14 banana kernel: [104968.753961] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:58:14 banana kernel: [104968.754036] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:58:14 banana kernel: [104968.754068] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:58:14 banana kernel: [104968.754095] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:58:14 banana kernel: [104968.754115] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:58:14 banana kernel: [104968.754141] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:58:14 banana kernel: [104968.754166] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:58:14 banana kernel: [104968.754195] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:58:14 banana kernel: [104968.754225] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:58:14 banana kernel: [104968.754252] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:58:14 banana kernel: [104968.754277] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:58:14 banana kernel: [104968.754303] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:58:14 banana kernel: [104968.754325] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:58:14 banana kernel: [104968.754350] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:58:14 banana kernel: [104968.754369] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:58:14 banana kernel: [104968.754387] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:58:14 banana kernel: [104968.754401] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 02:59:22 banana kernel: [105036.430093] rcu: INFO: rcu_sched self-detected stall on CPU
|Nov 26 02:59:22 banana kernel: [105036.435801] rcu: 0-....: (5249 ticks this GP) idle=cd9c/1/0x40000002 softirq=553509/553509 fqs=2623
|Nov 26 02:59:22 banana kernel: [105036.445028] rcu: (t=5250 jiffies g=957669 q=104 ncpus=2)
|Nov 26 02:59:22 banana kernel: [105036.450523] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:59:22 banana kernel: [105036.450540] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:59:22 banana kernel: [105036.450551] PC is at stmmac_get_stats64+0x54/0x20c [stmmac]
|Nov 26 02:59:22 banana kernel: [105036.450680] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:59:22 banana kernel: [105036.450707] pc : [<bf120da0>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:59:22 banana kernel: [105036.450719] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:59:22 banana kernel: [105036.450730] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:59:22 banana kernel: [105036.450741] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:59:22 banana kernel: [105036.450752] r3 : 00050f8f r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:59:22 banana kernel: [105036.450766] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:59:22 banana kernel: [105036.450781] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:59:22 banana kernel: [105036.450802] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:59:22 banana kernel: [105036.450879] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:59:22 banana kernel: [105036.450911] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:59:22 banana kernel: [105036.450937] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:59:22 banana kernel: [105036.450958] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:59:22 banana kernel: [105036.450984] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:59:22 banana kernel: [105036.451010] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:59:22 banana kernel: [105036.451039] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:59:22 banana kernel: [105036.451069] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:59:22 banana kernel: [105036.451095] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:59:22 banana kernel: [105036.451121] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:59:22 banana kernel: [105036.451147] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:59:22 banana kernel: [105036.451171] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:59:22 banana kernel: [105036.451195] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:59:22 banana kernel: [105036.451214] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:59:22 banana kernel: [105036.451232] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:59:22 banana kernel: [105036.451246] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 02:59:49 banana kernel: [105063.423987] watchdog: BUG: soft lockup - CPU#0 stuck for 48s! [ntpd:457]
|Nov 26 02:59:49 banana kernel: [105063.430828] Modules linked in: nft_fib_ipv6 nft_masq nft_nat nft_fib_ipv4 nft_fib nft_chain_nat nf_nat nf_conntrack nf_defrag_ipv6 nf_defrag_ipv4 nf_tables libcrc32c des_generic binfmt_misc nvmem_sunxi_sid sun4i_ts sunxi_wdt sun4i_ss libdes sun4i_dma leds_gpio cpufreq_dt sg loop configfs
nfnetlink ip_tables x_tables autofs4 ext4 crc32c_generic crc16 mbcache jbd2 dm_mod dax sd_mod t10_pi axp20x_usb_power axp20x_regulator realtek ahci_sunxi libahci_platform dwmac_sunxi stmmac_platform stmmac libahci pcs_xpcs phylink libata scsi_mod i2c_mv64xxx ohci_platform sun4i_gpadc scsi_common ohci_hcd ehci_platform ehci_hcd
phy_sun4i_usb sunxi_mmc
|Nov 26 02:59:49 banana kernel: [105063.431281] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 02:59:49 banana kernel: [105063.431300] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 02:59:49 banana kernel: [105063.431311] PC is at stmmac_get_stats64+0x38/0x20c [stmmac]
|Nov 26 02:59:49 banana kernel: [105063.431440] LR is at dev_get_stats+0x44/0x144
|Nov 26 02:59:49 banana kernel: [105063.431466] pc : [<bf120d84>] lr : [<c0952d98>] psr: 20000013
|Nov 26 02:59:49 banana kernel: [105063.431478] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 02:59:49 banana kernel: [105063.431489] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 02:59:49 banana kernel: [105063.431500] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 02:59:49 banana kernel: [105063.431512] r3 : 00050fd1 r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 02:59:49 banana kernel: [105063.431525] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 02:59:49 banana kernel: [105063.431539] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 02:59:49 banana kernel: [105063.431562] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 02:59:49 banana kernel: [105063.431638] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 02:59:49 banana kernel: [105063.431671] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 02:59:49 banana kernel: [105063.431698] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 02:59:49 banana kernel: [105063.431719] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 02:59:49 banana kernel: [105063.431745] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 02:59:49 banana kernel: [105063.431771] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 02:59:49 banana kernel: [105063.431800] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 02:59:49 banana kernel: [105063.431830] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 02:59:49 banana kernel: [105063.431856] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 02:59:49 banana kernel: [105063.431882] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 02:59:49 banana kernel: [105063.431908] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 02:59:49 banana kernel: [105063.431931] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 02:59:49 banana kernel: [105063.431956] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 02:59:49 banana kernel: [105063.431974] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 02:59:49 banana kernel: [105063.431992] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 02:59:49 banana kernel: [105063.432006] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 03:00:17 banana kernel: [105091.425955] watchdog: BUG: soft lockup - CPU#0 stuck for 75s! [ntpd:457]
|Nov 26 03:00:17 banana kernel: [105091.432793] Modules linked in: nft_fib_ipv6 nft_masq nft_nat nft_fib_ipv4 nft_fib nft_chain_nat nf_nat nf_conntrack nf_defrag_ipv6 nf_defrag_ipv4 nf_tables libcrc32c des_generic binfmt_misc nvmem_sunxi_sid sun4i_ts sunxi_wdt sun4i_ss libdes sun4i_dma leds_gpio cpufreq_dt sg loop configfs
nfnetlink ip_tables x_tables autofs4 ext4 crc32c_generic crc16 mbcache jbd2 dm_mod dax sd_mod t10_pi axp20x_usb_power axp20x_regulator realtek ahci_sunxi libahci_platform dwmac_sunxi stmmac_platform stmmac libahci pcs_xpcs phylink libata scsi_mod i2c_mv64xxx ohci_platform sun4i_gpadc scsi_common ohci_hcd ehci_platform ehci_hcd
phy_sun4i_usb sunxi_mmc
|Nov 26 03:00:17 banana kernel: [105091.433245] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 03:00:17 banana kernel: [105091.433264] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 03:00:17 banana kernel: [105091.433276] PC is at stmmac_get_stats64+0x4c/0x20c [stmmac]
|Nov 26 03:00:17 banana kernel: [105091.433406] LR is at dev_get_stats+0x44/0x144
|Nov 26 03:00:17 banana kernel: [105091.433432] pc : [<bf120d98>] lr : [<c0952d98>] psr: 20000013
|Nov 26 03:00:17 banana kernel: [105091.433444] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 03:00:17 banana kernel: [105091.433456] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 03:00:17 banana kernel: [105091.433466] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 03:00:17 banana kernel: [105091.433478] r3 : 00051073 r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 03:00:17 banana kernel: [105091.433491] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 03:00:17 banana kernel: [105091.433505] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 03:00:17 banana kernel: [105091.433525] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 03:00:17 banana kernel: [105091.433599] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 03:00:17 banana kernel: [105091.433632] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 03:00:17 banana kernel: [105091.433658] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 03:00:17 banana kernel: [105091.433679] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 03:00:17 banana kernel: [105091.433704] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 03:00:17 banana kernel: [105091.433730] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 03:00:17 banana kernel: [105091.433759] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 03:00:17 banana kernel: [105091.433789] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 03:00:17 banana kernel: [105091.433815] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 03:00:17 banana kernel: [105091.433840] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 03:00:17 banana kernel: [105091.433866] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 03:00:17 banana kernel: [105091.433889] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 03:00:17 banana kernel: [105091.433914] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 03:00:17 banana kernel: [105091.433932] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 03:00:17 banana kernel: [105091.433950] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 03:00:17 banana kernel: [105091.433964] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
|Nov 26 03:00:25 banana kernel: [105099.466524] rcu: INFO: rcu_sched self-detected stall on CPU
|Nov 26 03:00:25 banana kernel: [105099.472236] rcu: 0-....: (20999 ticks this GP) idle=cd9c/1/0x40000002 softirq=553509/553509 fqs=10429
|Nov 26 03:00:25 banana kernel: [105099.481638] rcu: (t=21008 jiffies g=957669 q=902 ncpus=2)
|Nov 26 03:00:25 banana kernel: [105099.487219] CPU: 0 PID: 457 Comm: ntpd Tainted: G L 6.6.2-zgbpi-armmp-lpae #1
|Nov 26 03:00:25 banana kernel: [105099.487237] Hardware name: Allwinner sun7i (A20) Family
|Nov 26 03:00:25 banana kernel: [105099.487248] PC is at stmmac_get_stats64+0x34/0x20c [stmmac]
|Nov 26 03:00:25 banana kernel: [105099.487373] LR is at dev_get_stats+0x44/0x144
|Nov 26 03:00:25 banana kernel: [105099.487399] pc : [<bf120d80>] lr : [<c0952d98>] psr: 20000013
|Nov 26 03:00:25 banana kernel: [105099.487411] sp : f0c459a0 ip : c1a77780 fp : c2be0000
|Nov 26 03:00:25 banana kernel: [105099.487423] r10: 00000000 r9 : c1a7758c r8 : 00000000
|Nov 26 03:00:25 banana kernel: [105099.487433] r7 : 00000001 r6 : 00000000 r5 : c2be3000 r4 : 00000001
|Nov 26 03:00:25 banana kernel: [105099.487445] r3 : 0005107f r2 : c2be2e48 r1 : c1a776b8 r0 : c2be0000
|Nov 26 03:00:25 banana kernel: [105099.487459] Flags: nzCv IRQs on FIQs on Mode SVC_32 ISA ARM Segment user
|Nov 26 03:00:25 banana kernel: [105099.487473] Control: 30c5387d Table: 42c7e140 DAC: fffffffd
|Nov 26 03:00:25 banana kernel: [105099.487492] stmmac_get_stats64 [stmmac] from dev_get_stats+0x44/0x144
|Nov 26 03:00:25 banana kernel: [105099.487567] dev_get_stats from rtnl_fill_stats+0x38/0x148
|Nov 26 03:00:25 banana kernel: [105099.487598] rtnl_fill_stats from rtnl_fill_ifinfo+0x758/0x1330
|Nov 26 03:00:25 banana kernel: [105099.487624] rtnl_fill_ifinfo from rtnl_dump_ifinfo+0x338/0x6c4
|Nov 26 03:00:25 banana kernel: [105099.487645] rtnl_dump_ifinfo from netlink_dump+0x188/0x368
|Nov 26 03:00:25 banana kernel: [105099.487671] netlink_dump from __netlink_dump_start+0x170/0x2b0
|Nov 26 03:00:25 banana kernel: [105099.487696] __netlink_dump_start from rtnetlink_rcv_msg+0xfc/0x308
|Nov 26 03:00:25 banana kernel: [105099.487726] rtnetlink_rcv_msg from netlink_rcv_skb+0xc0/0x130
|Nov 26 03:00:25 banana kernel: [105099.487757] netlink_rcv_skb from netlink_unicast+0x218/0x2f0
|Nov 26 03:00:25 banana kernel: [105099.487784] netlink_unicast from netlink_sendmsg+0x20c/0x4a4
|Nov 26 03:00:25 banana kernel: [105099.487809] netlink_sendmsg from __sock_sendmsg+0x58/0xb4
|Nov 26 03:00:25 banana kernel: [105099.487835] __sock_sendmsg from __sys_sendto+0x118/0x170
|Nov 26 03:00:25 banana kernel: [105099.487858] __sys_sendto from ret_fast_syscall+0x0/0x4c
|Nov 26 03:00:25 banana kernel: [105099.487882] Exception stack(0xf0c45fa8 to 0xf0c45ff0)
|Nov 26 03:00:25 banana kernel: [105099.487901] 5fa0: bedcb814 0000000c 00000004 bedcb830 00000014 00000000
|Nov 26 03:00:25 banana kernel: [105099.487919] 5fc0: bedcb814 0000000c 00000000 00000122 bedcb830 b6ec9a40 bedcb814 bedcd964
|Nov 26 03:00:25 banana kernel: [105099.487933] 5fe0: 00000122 bedca7c0 b6b9eaf1 b6b07b06
Kann mir jemand von Euch erklären, was da passiert, wie man diese
Infos "richtig" liest, ob man die offensichtlichen Auszüge aus dem
Call-Stack von oben oder von unten lesen muss etc bla?
Grüße
Marc
--
-------------------------------------- !! No courtesy copies, please !! -----
Marc Haber | " Questions are the | Mailadresse im Header
Mannheim, Germany | Beginning of Wisdom " |
Nordisch by Nature | Lt. Worf, TNG "Rightful Heir" | Fon: *49 621 72739834
Enrik Berkhan
Nov 26, 2023, 6:13:07 AM11/26/23
to
Marc Haber <mh+usene...@zugschl.us> wrote:
> mag mir mal jemand beim Lesen eines Kernel-Traces helfen? Der Patient
> ist ein Banana Pi mit Debian unstable, der seit etwa einer Woche nicht
> mehr stabil läuft. Das sympton ist, dass man sich ab etwa zehn bis
> dreißig Stunden nach Systemstart nicht mehr per ssh einloggen kann,
> nach weiteren zehn bis dreißig Stunden ist die Kiste auch nicht mehr
> anpingbar, auf der seriellen Konsole gibt es einen "Login:"-Prompt an
> dem man auch etwas eingeben kann, aber zum "Password:"-Prompt kommt es
> dann nicht mehr. Laut syslog läuft die Kiste aber ganz normal weiter
> und es werden regelmäßig Kerneltraces geloggt.
>
> Hier die ersten paar Traces von heute nacht nachdem die Maschine seit
> gestern Mittag normal gelaufen ist.
>
> [... trace ]
> mag mir mal jemand beim Lesen eines Kernel-Traces helfen? Der Patient
> ist ein Banana Pi mit Debian unstable, der seit etwa einer Woche nicht
> mehr stabil läuft. Das sympton ist, dass man sich ab etwa zehn bis
> dreißig Stunden nach Systemstart nicht mehr per ssh einloggen kann,
> nach weiteren zehn bis dreißig Stunden ist die Kiste auch nicht mehr
> anpingbar, auf der seriellen Konsole gibt es einen "Login:"-Prompt an
> dem man auch etwas eingeben kann, aber zum "Password:"-Prompt kommt es
> dann nicht mehr. Laut syslog läuft die Kiste aber ganz normal weiter
> und es werden regelmäßig Kerneltraces geloggt.
>
> Hier die ersten paar Traces von heute nacht nachdem die Maschine seit
> gestern Mittag normal gelaufen ist.
>
>
> Kann mir jemand von Euch erklären, was da passiert, wie man diese
> Infos "richtig" liest, ob man die offensichtlichen Auszüge aus dem
> Call-Stack von oben oder von unten lesen muss etc bla?
Von oben nach unten. Sieht so aus, als ob der Netzwerk-Treiber ein
> Kann mir jemand von Euch erklären, was da passiert, wie man diese
> Infos "richtig" liest, ob man die offensichtlichen Auszüge aus dem
> Call-Stack von oben oder von unten lesen muss etc bla?
Problem hat, wenn die Fehlerstatistiken aus dem lowlevel-Treiber
(stmmac?) gelesen werden sollen.
Wenn du Symbole hast, könntest du die Adressen noch auflösen (siehe
scripts/decode_stackstrace.sh im Kernel source).
Hast du denn "vor etwa einer Woche" den Kernel upgedated? Wenn ja, würde
ich als erstes mal mit dem von "davor" gegentesten.
Gruß,
Enrik
Marc Haber
Nov 26, 2023, 7:51:08 AM11/26/23
to
Enrik Berkhan <Enrik....@inka.de> wrote:
>Marc Haber <mh+usene...@zugschl.us> wrote:
>> mag mir mal jemand beim Lesen eines Kernel-Traces helfen? Der Patient
>> ist ein Banana Pi mit Debian unstable, der seit etwa einer Woche nicht
>> mehr stabil läuft. Das sympton ist, dass man sich ab etwa zehn bis
>> dreißig Stunden nach Systemstart nicht mehr per ssh einloggen kann,
>> nach weiteren zehn bis dreißig Stunden ist die Kiste auch nicht mehr
>> anpingbar, auf der seriellen Konsole gibt es einen "Login:"-Prompt an
>> dem man auch etwas eingeben kann, aber zum "Password:"-Prompt kommt es
>> dann nicht mehr. Laut syslog läuft die Kiste aber ganz normal weiter
>> und es werden regelmäßig Kerneltraces geloggt.
>>
>> Hier die ersten paar Traces von heute nacht nachdem die Maschine seit
>> gestern Mittag normal gelaufen ist.
>>
>> [... trace ]
>>
>> Kann mir jemand von Euch erklären, was da passiert, wie man diese
>> Infos "richtig" liest, ob man die offensichtlichen Auszüge aus dem
>> Call-Stack von oben oder von unten lesen muss etc bla?
>
>Von oben nach unten.
Oben steht also die letzte gerufene Funktion und je weiter man nach
>Marc Haber <mh+usene...@zugschl.us> wrote:
>> mag mir mal jemand beim Lesen eines Kernel-Traces helfen? Der Patient
>> ist ein Banana Pi mit Debian unstable, der seit etwa einer Woche nicht
>> mehr stabil läuft. Das sympton ist, dass man sich ab etwa zehn bis
>> dreißig Stunden nach Systemstart nicht mehr per ssh einloggen kann,
>> nach weiteren zehn bis dreißig Stunden ist die Kiste auch nicht mehr
>> anpingbar, auf der seriellen Konsole gibt es einen "Login:"-Prompt an
>> dem man auch etwas eingeben kann, aber zum "Password:"-Prompt kommt es
>> dann nicht mehr. Laut syslog läuft die Kiste aber ganz normal weiter
>> und es werden regelmäßig Kerneltraces geloggt.
>>
>> Hier die ersten paar Traces von heute nacht nachdem die Maschine seit
>> gestern Mittag normal gelaufen ist.
>>
>> [... trace ]
>>
>> Kann mir jemand von Euch erklären, was da passiert, wie man diese
>> Infos "richtig" liest, ob man die offensichtlichen Auszüge aus dem
>> Call-Stack von oben oder von unten lesen muss etc bla?
>
>Von oben nach unten.
unten geht desto näher kommt man an das was die Applikation aufgerufen
hat?
>Sieht so aus, als ob der Netzwerk-Treiber ein
>Problem hat, wenn die Fehlerstatistiken aus dem lowlevel-Treiber
>(stmmac?) gelesen werden sollen.
von "ntpd"?
>Wenn du Symbole hast, könntest du die Adressen noch auflösen (siehe
>scripts/decode_stackstrace.sh im Kernel source).
>Hast du denn "vor etwa einer Woche" den Kernel upgedated? Wenn ja, würde
>ich als erstes mal mit dem von "davor" gegentesten.
6.5.9 von vorher.
Zwei andere Banana Pis laufen (mit Debian stable) und diesem Kernel
aber stabiler.
Enrik Berkhan
Nov 26, 2023, 8:53:06 AM11/26/23
to
Marc Haber <mh+usene...@zugschl.us> wrote:
immer ein syscall stehen (hier: sendto()).
>>Sieht so aus, als ob der Netzwerk-Treiber ein
>>Problem hat, wenn die Fehlerstatistiken aus dem lowlevel-Treiber
>>(stmmac?) gelesen werden sollen.
>
> Und wer liest die von dort? Und warum steht an anderer stelle etwas
> von "ntpd"?
Der Prozess, der das ganze auslöst, und eben sendto() aufgerufen hat,
heißt "ntpd".
>>Wenn du Symbole hast, könntest du die Adressen noch auflösen (siehe
>>scripts/decode_stackstrace.sh im Kernel source).
>
> Habe ich vermutlich irgendwo, aber ich weiß nicht wo.
Hast du den Kernel selbst gebaut? Notfalls nochmal machen ;-)
Sonst halt mal in der lkml nach ähnlichen Problemen suchen, oder im
Kernel git. Falls da nicht vanilla Sachen drin sind, würde ich bei denen
anfangen.
>>Hast du denn "vor etwa einer Woche" den Kernel upgedated? Wenn ja, würde
>>ich als erstes mal mit dem von "davor" gegentesten.
>
> Ja, das war der Wechsel auf 6.6.2, und jetzt läuft erstmal wieder der
> 6.5.9 von vorher.
>
> Zwei andere Banana Pis laufen (mit Debian stable) und diesem Kernel
> aber stabiler.
Läuft auf denen evtl. kein ntpd oder irgendein anderer signifikanter
Netzwerk-relevanter Unterschied?
Im dümmsten Fall kann das natürlich auch mit was ganz anderem
zusammenhängen und nur eine indirekte Folge sein, was direkt zu der
Frage führt: was ist bei dem betroffenen Gerät anders als bei den
anderen?
Gruß,
Enrik
> Enrik Berkhan <Enrik....@inka.de> wrote:
>>> Hier die ersten paar Traces von heute nacht nachdem die Maschine seit
>>> gestern Mittag normal gelaufen ist.
>>>
>>> [... trace ]
>>>
>>> Kann mir jemand von Euch erklären, was da passiert, wie man diese
>>> Infos "richtig" liest, ob man die offensichtlichen Auszüge aus dem
>>> Call-Stack von oben oder von unten lesen muss etc bla?
>>
>>Von oben nach unten.
>
> Oben steht also die letzte gerufene Funktion und je weiter man nach
> unten geht desto näher kommt man an das was die Applikation aufgerufen
> hat?
Ja, genau. Wenn es ein Aufruf aus dem Userspace ist, sollte ganz unten
>>> Hier die ersten paar Traces von heute nacht nachdem die Maschine seit
>>> gestern Mittag normal gelaufen ist.
>>>
>>> [... trace ]
>>>
>>> Kann mir jemand von Euch erklären, was da passiert, wie man diese
>>> Infos "richtig" liest, ob man die offensichtlichen Auszüge aus dem
>>> Call-Stack von oben oder von unten lesen muss etc bla?
>>
>>Von oben nach unten.
>
> Oben steht also die letzte gerufene Funktion und je weiter man nach
> unten geht desto näher kommt man an das was die Applikation aufgerufen
> hat?
immer ein syscall stehen (hier: sendto()).
>>Sieht so aus, als ob der Netzwerk-Treiber ein
>>Problem hat, wenn die Fehlerstatistiken aus dem lowlevel-Treiber
>>(stmmac?) gelesen werden sollen.
>
> Und wer liest die von dort? Und warum steht an anderer stelle etwas
> von "ntpd"?
heißt "ntpd".
>>Wenn du Symbole hast, könntest du die Adressen noch auflösen (siehe
>>scripts/decode_stackstrace.sh im Kernel source).
>
> Habe ich vermutlich irgendwo, aber ich weiß nicht wo.
Sonst halt mal in der lkml nach ähnlichen Problemen suchen, oder im
Kernel git. Falls da nicht vanilla Sachen drin sind, würde ich bei denen
anfangen.
>>Hast du denn "vor etwa einer Woche" den Kernel upgedated? Wenn ja, würde
>>ich als erstes mal mit dem von "davor" gegentesten.
>
> Ja, das war der Wechsel auf 6.6.2, und jetzt läuft erstmal wieder der
> 6.5.9 von vorher.
>
> Zwei andere Banana Pis laufen (mit Debian stable) und diesem Kernel
> aber stabiler.
Netzwerk-relevanter Unterschied?
Im dümmsten Fall kann das natürlich auch mit was ganz anderem
zusammenhängen und nur eine indirekte Folge sein, was direkt zu der
Frage führt: was ist bei dem betroffenen Gerät anders als bei den
anderen?
Gruß,
Enrik
Enrik Berkhan
Nov 27, 2023, 7:13:07 AM11/27/23
to
Andreas Kohlbach <a...@spamfence.net> wrote:
> Neueste steht unten...
Die Leserichtung bezog sich auf die einzelnen Stacktraces für sich
betrachtet, nicht das gesamte Log.
Gruß,
Enrik
> On Sun, 26 Nov 2023 13:33:32 -0000 (UTC), Enrik Berkhan wrote:
>> Marc Haber <mh+usene...@zugschl.us> wrote:
>>> Enrik Berkhan <Enrik....@inka.de> wrote:
>>>>>
>>>>> Kann mir jemand von Euch erklären, was da passiert, wie man diese
>>>>> Infos "richtig" liest, ob man die offensichtlichen Auszüge aus dem
>>>>> Call-Stack von oben oder von unten lesen muss etc bla?
>>>>
>>>>Von oben nach unten.
>>>
>>> Oben steht also die letzte gerufene Funktion und je weiter man nach
>>> unten geht desto näher kommt man an das was die Applikation aufgerufen
>>> hat?
>>
>> Ja, genau. Wenn es ein Aufruf aus dem Userspace ist, sollte ganz unten
>> immer ein syscall stehen (hier: sendto()).
>
> Marcs Log hat, wie auch hier, fortschreitende Zeitstempel. Also das
>> Marc Haber <mh+usene...@zugschl.us> wrote:
>>> Enrik Berkhan <Enrik....@inka.de> wrote:
>>>>>
>>>>> Kann mir jemand von Euch erklären, was da passiert, wie man diese
>>>>> Infos "richtig" liest, ob man die offensichtlichen Auszüge aus dem
>>>>> Call-Stack von oben oder von unten lesen muss etc bla?
>>>>
>>>>Von oben nach unten.
>>>
>>> Oben steht also die letzte gerufene Funktion und je weiter man nach
>>> unten geht desto näher kommt man an das was die Applikation aufgerufen
>>> hat?
>>
>> Ja, genau. Wenn es ein Aufruf aus dem Userspace ist, sollte ganz unten
>> immer ein syscall stehen (hier: sendto()).
>
> Neueste steht unten...
Die Leserichtung bezog sich auf die einzelnen Stacktraces für sich
betrachtet, nicht das gesamte Log.
Gruß,
Enrik
Marc Haber
Jan 4, 2024, 9:02:20 AM1/4/24
to
Enrik Berkhan <Enrik....@inka.de> wrote:
>Hast du den Kernel selbst gebaut? Notfalls nochmal machen ;-)
Das Problem tritt auch mit dem aktuellen Distributionskernel auf.
>Hast du den Kernel selbst gebaut? Notfalls nochmal machen ;-)
>Sonst halt mal in der lkml nach ähnlichen Problemen suchen, oder im
>Kernel git. Falls da nicht vanilla Sachen drin sind, würde ich bei denen
>anfangen.
genommen die Entwickler zu belästigen.
Meine übliche Vorgehensweise, das in Verdacht stehende
Unterverzeichnis einfach gegen die Version aus einem "known good"
Kernel Tree zu transplantieren, funktioniert hier nicht, der Kernel
baut dann nicht.
Ich bisecte seit vor Weihnachten, allerdings ist das lästig, weil ein
"gut" Fall bis hin zum guten gewissens zwei bis drei Tage dauert.
>> Zwei andere Banana Pis laufen (mit Debian stable) und diesem Kernel
>> aber stabiler.
>
>Läuft auf denen evtl. kein ntpd oder irgendein anderer signifikanter
>Netzwerk-relevanter Unterschied?
Debian stable als Betriebssystem. Und auch auf diesen tritt das
Problem auf, allerdings nicht so oft.
Der Pi stürzt übrigens nicht ab, er netzt nur nicht mehr, über die
serielle Schnittstelle bleibt er ansprechbar, und manchmal kehrt er
auch nach ein paar Stunden wieder in den Normalbetrieb zurück, wenn
man nur lange genug wartet.
Dummerweise hat die serielle Schnittstelle noch andere Issues und
verfälscht in Empfangsrichtung (also das, was der Pi auf die serielle
Konsole schreibt) so etwa jedes dritte Zeichen; so wirkliches
Vertrauen habe ich in diese Schnittstelle nicht. Um den Boot
aufzuhalten und das richtige "setenv fk_kvers
'6.6.x-foo-bar-armmp-lpae'" hineinzuschreiben, reicht es aber. Ich mag
da ungerne hinfassen weil ich angst habe mir die Testumgebung
kaputtzumachen.
>Im dümmsten Fall kann das natürlich auch mit was ganz anderem
>zusammenhängen und nur eine indirekte Folge sein, was direkt zu der
>Frage führt: was ist bei dem betroffenen Gerät anders als bei den
>anderen?
die anderen sind in Produktion.
0 new messages