* Re: [Request for help] Kernel Panic in __nf_conntrack_find_get
[not found] <20160509101318.GB26005@pimeys.fr>
@ 2016-05-11 6:45 ` Pierre-Elliott Bécue
0 siblings, 0 replies; only message in thread
From: Pierre-Elliott Bécue @ 2016-05-11 6:45 UTC (permalink / raw)
To: netfilter-devel
Le lundi 09 mai 2016 à 12:13:18+0200, Pierre-Elliott Bécue a écrit :
> Dear Linux developers,
>
> At first, I'd like to apologize if this mailing list is not the appropriate
> one to ask for help about a kernel panic, but I'm a bit confused about who
> to ask for some help.
>
> I'm not sure this one is a bug in the kernel or elsewhere, but I've
> exhausted a lot of things in trying to identify what's happening, and I'm
> not sure to be able to understand further what is happening.
>
> Basically, I have a Debian 8 router under 3.16.7 patched by canonical kernel
> team. This router has periodic kernel panics which are caused by SWAPPER.
>
> I put a kexec/kdump setup to get crash logs, and this is what I get :
>
> KERNEL: /var/crash/201605082314/kernel_link
> DUMPFILE: /var/crash/201605082314/dump.201605082314 [PARTIAL DUMP]
> CPUS: 12
> DATE: Sun May 8 23:14:31 2016
> UPTIME: 3 days, 10:44:11
> LOAD AVERAGE: 0.85, 1.00, 1.10
> TASKS: 264
> NODENAME: odlyd
> RELEASE: 3.16.0-4-amd64
> VERSION: #1 SMP Debian 3.16.7-ckt25-2 (2016-04-08)
> MACHINE: x86_64 (2593 Mhz)
> MEMORY: 16 GB
> PANIC: ""
> PID: 0
> COMMAND: "swapper/0"
> TASK: ffffffff8181a460 (1 of 12) [THREAD_INFO: ffffffff81800000]
> CPU: 0
> STATE: TASK_RUNNING (PANIC)
>
> A backtrace gives me that :
>
> PID: 0 TASK: ffffffff8181a460 CPU: 0 COMMAND: "swapper/0"
> #0 [ffff88043f4039b0] machine_kexec at ffffffff8104c0a2
> #1 [ffff88043f403a00] crash_kexec at ffffffff810df7da
> #2 [ffff88043f403ac0] oops_end at ffffffff81016228
> #3 [ffff88043f403ae0] general_protection at ffffffff815169c8
> [exception RIP: __nf_conntrack_find_get+111]
> RIP: ffffffffa0233e4f RSP: ffff88043f403b90 RFLAGS: 00010246
> RAX: 000060fbc02020e0 RBX: ffb00504023b9dc0 RCX: 0000000000002ad2
> RDX: ffff88043f403c00 RSI: 0000000000015690 RDI: 0000000005e6ab45
> RBP: ffff88043f403c00 R8: 0000000000000000 R9: 00000000ea00da68
> R10: ffff88043f403c18 R11: 0000000000000010 R12: ffffffff818ba200
> R13: 00000000ab4bdd82 R14: 0000000000000000 R15: 0000000000000000
> ORIG_RAX: ffffffffffffffff CS: 0010 SS: 0018
> #4 [ffff88043f403bb8] nf_conntrack_in at ffffffffa0235833 [nf_conntrack]
> #5 [ffff88043f403c88] nf_iterate at ffffffff8144fb65
> #6 [ffff88043f403cc8] nf_hook_slow at ffffffff8144fc16
> #7 [ffff88043f403d28] ip_rcv at ffffffff8145677d
> #8 [ffff88043f403d50] __netif_receive_skb_core at ffffffff8141f1a3
> #9 [ffff88043f403da0] netif_receive_skb_internal at ffffffff8141f42f
> #10 [ffff88043f403dc0] napi_gro_receive at ffffffff8141ff00
> #11 [ffff88043f403de0] tg3_poll_work at ffffffffa026589f [tg3]
> #12 [ffff88043f403e60] napi_gro_flush at ffffffff8141f615
> #13 [ffff88043f403e98] tg3_poll_msix at ffffffffa0265b85 [tg3]
> #14 [ffff88043f403ed0] net_rx_action at ffffffff8141f7b0
> #15 [ffff88043f403f20] __do_softirq at ffffffff8106c6a1
> #16 [ffff88043f403f78] irq_exit at ffffffff8106ca75
> #17 [ffff88043f403f80] do_IRQ at ffffffff81517822
> --- <IRQ stack> ---
> #18 [ffffffff81803e28] ret_from_intr at ffffffff8151566d
> [exception RIP: cpuidle_enter_state+82]
> RIP: ffffffff813e0122 RSP: ffffffff81803ed8 RFLAGS: 00000202
> RAX: 00010ee477267826 RBX: ffffffff81074ae6 RCX: 0000000000000018
> RDX: 0000000225c17d03 RSI: ffffffff81803fd8 RDI: 00010ee477267826
> RBP: ffffffff81803f00 R8: 00000000ffffffff R9: 00000000000014a1
> R10: 0000000000000030 R11: 0000000000000008 R12: 00000001046f0f95
> R13: 00000001046f0f94 R14: 00000001046f0f94 R15: ffffffff81803ea0
> ORIG_RAX: ffffffffffffff7b CS: 0010 SS: 0018
> #19 [ffffffff81803f08] cpu_startup_entry at ffffffff810a8398
> #20 [ffffffff81803f68] start_kernel at ffffffff81903076
> #21 [ffffffff81803fa0] x86_64_start_kernel at ffffffff8190271f
>
> So I guess the exception that raised a general protection fault is caused by
> __nf_conntrack_find_get+111.
>
> I had some troubles having something more readable (by me) than assembly, but
> here is the __nf_conntrack_find_get disassembled by crash:
>
> 0xffffffffa0233de0 <__nf_conntrack_find_get>: nopl 0x0(%rax,%rax,1) [FTRACE NOP]
> 0xffffffffa0233de5 <__nf_conntrack_find_get+5>: push %r14
> 0xffffffffa0233de7 <__nf_conntrack_find_get+7>: mov %esi,%r14d
> 0xffffffffa0233dea <__nf_conntrack_find_get+10>: push %r13
> 0xffffffffa0233dec <__nf_conntrack_find_get+12>: push %r12
> 0xffffffffa0233dee <__nf_conntrack_find_get+14>: mov %rdi,%r12
> 0xffffffffa0233df1 <__nf_conntrack_find_get+17>: push %rbp
> 0xffffffffa0233df2 <__nf_conntrack_find_get+18>: mov %rdx,%rbp
> 0xffffffffa0233df5 <__nf_conntrack_find_get+21>: push %rbx
> 0xffffffffa0233df6 <__nf_conntrack_find_get+22>: mov %ecx,%r13d
> 0xffffffffa0233df9 <__nf_conntrack_find_get+25>: mov 0xaf0(%r12),%ecx
> 0xffffffffa0233e01 <__nf_conntrack_find_get+33>: addl $0x200,%gs:0xb860
> 0xffffffffa0233e0d <__nf_conntrack_find_get+45>: imul %r13,%rcx
> 0xffffffffa0233e11 <__nf_conntrack_find_get+49>: shr $0x20,%rcx
> 0xffffffffa0233e15 <__nf_conntrack_find_get+53>: lea 0x0(,%rcx,8),%rsi
> 0xffffffffa0233e1d <__nf_conntrack_find_get+61>: mov %rsi,%rax
> 0xffffffffa0233e20 <__nf_conntrack_find_get+64>: add 0xb00(%r12),%rax
> 0xffffffffa0233e28 <__nf_conntrack_find_get+72>: mov (%rax),%rbx
> 0xffffffffa0233e2b <__nf_conntrack_find_get+75>: test $0x1,%bl
> 0xffffffffa0233e2e <__nf_conntrack_find_get+78>: je 0xffffffffa0233e4f
> 0xffffffffa0233e30 <__nf_conntrack_find_get+80>: jmpq 0xffffffffa0233f90
> 0xffffffffa0233e35 <__nf_conntrack_find_get+85>: nopl (%rax)
> 0xffffffffa0233e38 <__nf_conntrack_find_get+88>: mov 0xb18(%r12),%rax
> 0xffffffffa0233e40 <__nf_conntrack_find_get+96>: incl %gs:(%rax)
> 0xffffffffa0233e43 <__nf_conntrack_find_get+99>: mov (%rbx),%rbx
> 0xffffffffa0233e46 <__nf_conntrack_find_get+102>: test $0x1,%bl
> 0xffffffffa0233e49 <__nf_conntrack_find_get+105>: jne 0xffffffffa0233f90
> 0xffffffffa0233e4f <__nf_conntrack_find_get+111>: mov 0x10(%rbx),%edi
> 0xffffffffa0233e52 <__nf_conntrack_find_get+114>: cmp %edi,0x0(%rbp)
> 0xffffffffa0233e55 <__nf_conntrack_find_get+117>: movzbl 0x37(%rbx),%eax
> 0xffffffffa0233e59 <__nf_conntrack_find_get+121>: jne 0xffffffffa0233e38
> 0xffffffffa0233e5b <__nf_conntrack_find_get+123>: mov 0x14(%rbx),%edx
> 0xffffffffa0233e5e <__nf_conntrack_find_get+126>: cmp %edx,0x4(%rbp)
> 0xffffffffa0233e61 <__nf_conntrack_find_get+129>: jne 0xffffffffa0233e38
> 0xffffffffa0233e63 <__nf_conntrack_find_get+131>: mov 0x18(%rbx),%edi
> 0xffffffffa0233e66 <__nf_conntrack_find_get+134>: cmp %edi,0x8(%rbp)
> 0xffffffffa0233e69 <__nf_conntrack_find_get+137>: jne 0xffffffffa0233e38
> 0xffffffffa0233e6b <__nf_conntrack_find_get+139>: mov 0x1c(%rbx),%edx
> 0xffffffffa0233e6e <__nf_conntrack_find_get+142>: cmp %edx,0xc(%rbp)
> 0xffffffffa0233e71 <__nf_conntrack_find_get+145>: jne 0xffffffffa0233e38
> 0xffffffffa0233e73 <__nf_conntrack_find_get+147>: mov 0x20(%rbx),%edx
> 0xffffffffa0233e76 <__nf_conntrack_find_get+150>: cmp %edx,0x10(%rbp)
> 0xffffffffa0233e79 <__nf_conntrack_find_get+153>: jne 0xffffffffa0233e38
> 0xffffffffa0233e7b <__nf_conntrack_find_get+155>: mov 0x24(%rbx),%edi
> 0xffffffffa0233e7e <__nf_conntrack_find_get+158>: cmp %edi,0x14(%rbp)
> 0xffffffffa0233e81 <__nf_conntrack_find_get+161>: jne 0xffffffffa0233e38
> 0xffffffffa0233e83 <__nf_conntrack_find_get+163>: mov 0x28(%rbx),%edx
> 0xffffffffa0233e86 <__nf_conntrack_find_get+166>: cmp %edx,0x18(%rbp)
> 0xffffffffa0233e89 <__nf_conntrack_find_get+169>: jne 0xffffffffa0233e38
> 0xffffffffa0233e8b <__nf_conntrack_find_get+171>: mov 0x2c(%rbx),%edx
> 0xffffffffa0233e8e <__nf_conntrack_find_get+174>: cmp %edx,0x1c(%rbp)
> 0xffffffffa0233e91 <__nf_conntrack_find_get+177>: jne 0xffffffffa0233e38
> 0xffffffffa0233e93 <__nf_conntrack_find_get+179>: mov 0x30(%rbx),%edx
> 0xffffffffa0233e96 <__nf_conntrack_find_get+182>: cmp %edx,0x20(%rbp)
> 0xffffffffa0233e99 <__nf_conntrack_find_get+185>: jne 0xffffffffa0233e38
> 0xffffffffa0233e9b <__nf_conntrack_find_get+187>: mov 0x24(%rbp),%edi
> 0xffffffffa0233e9e <__nf_conntrack_find_get+190>: mov 0x34(%rbx),%edx
> 0xffffffffa0233ea1 <__nf_conntrack_find_get+193>: and $0xffffff,%edi
> 0xffffffffa0233ea7 <__nf_conntrack_find_get+199>: and $0xffffff,%edx
> 0xffffffffa0233ead <__nf_conntrack_find_get+205>: cmp %edx,%edi
> 0xffffffffa0233eaf <__nf_conntrack_find_get+207>: jne 0xffffffffa0233e38
> 0xffffffffa0233eb1 <__nf_conntrack_find_get+209>: lea 0x0(,%rax,8),%rdx
> 0xffffffffa0233eb9 <__nf_conntrack_find_get+217>: shl $0x6,%rax
> 0xffffffffa0233ebd <__nf_conntrack_find_get+221>: mov %rbx,%rdi
> 0xffffffffa0233ec0 <__nf_conntrack_find_get+224>: sub %rdx,%rax
> 0xffffffffa0233ec3 <__nf_conntrack_find_get+227>: add $0x10,%rax
> 0xffffffffa0233ec7 <__nf_conntrack_find_get+231>: sub %rax,%rdi
> 0xffffffffa0233eca <__nf_conntrack_find_get+234>: mov 0xe8(%rdi),%rdx
> 0xffffffffa0233ed1 <__nf_conntrack_find_get+241>: test %rdx,%rdx
> 0xffffffffa0233ed4 <__nf_conntrack_find_get+244>: je 0xffffffffa023405e
> 0xffffffffa0233eda <__nf_conntrack_find_get+250>: movzwl 0x1a(%rdx),%eax
> 0xffffffffa0233ede <__nf_conntrack_find_get+254>: test %ax,%ax
> 0xffffffffa0233ee1 <__nf_conntrack_find_get+257>: je 0xffffffffa0233eef
> 0xffffffffa0233ee3 <__nf_conntrack_find_get+259>: add %rax,%rdx
> 0xffffffffa0233ee6 <__nf_conntrack_find_get+262>: je 0xffffffffa023405e
> 0xffffffffa0233eec <__nf_conntrack_find_get+268>: movzwl (%rdx),%eax
> 0xffffffffa0233eef <__nf_conntrack_find_get+271>: cmp %ax,%r14w
> 0xffffffffa0233ef3 <__nf_conntrack_find_get+275>: jne 0xffffffffa0233e38
> 0xffffffffa0233ef9 <__nf_conntrack_find_get+281>: mov 0x80(%rdi),%rax
> 0xffffffffa0233f00 <__nf_conntrack_find_get+288>: test $0x8,%al
> 0xffffffffa0233f02 <__nf_conntrack_find_get+290>: je 0xffffffffa0233e38
> 0xffffffffa0233f08 <__nf_conntrack_find_get+296>: mov $0x200,%esi
> 0xffffffffa0233f0d <__nf_conntrack_find_get+301>: mov $0xffffffffa0233f08,%rdi
> 0xffffffffa0233f14 <__nf_conntrack_find_get+308>: mov 0xb18(%r12),%rax
> 0xffffffffa0233f1c <__nf_conntrack_find_get+316>: incl %gs:0x4(%rax)
> 0xffffffffa0233f20 <__nf_conntrack_find_get+320>: callq 0xffffffff8106c8f0 <__local_bh_enable_ip>
> 0xffffffffa0233f25 <__nf_conntrack_find_get+325>: test %rbx,%rbx
> 0xffffffffa0233f28 <__nf_conntrack_find_get+328>: je 0xffffffffa0234076
> 0xffffffffa0233f2e <__nf_conntrack_find_get+334>: movzbl 0x37(%rbx),%eax
> 0xffffffffa0233f32 <__nf_conntrack_find_get+338>: mov %rbx,%rdi
> 0xffffffffa0233f35 <__nf_conntrack_find_get+341>: lea 0x0(,%rax,8),%rdx
> 0xffffffffa0233f3d <__nf_conntrack_find_get+349>: shl $0x6,%rax
> 0xffffffffa0233f41 <__nf_conntrack_find_get+353>: sub %rdx,%rax
> 0xffffffffa0233f44 <__nf_conntrack_find_get+356>: add $0x10,%rax
> 0xffffffffa0233f48 <__nf_conntrack_find_get+360>: sub %rax,%rdi
> 0xffffffffa0233f4b <__nf_conntrack_find_get+363>: mov 0x80(%rdi),%rax
> 0xffffffffa0233f52 <__nf_conntrack_find_get+370>: test $0x2,%ah
> 0xffffffffa0233f55 <__nf_conntrack_find_get+373>: jne 0xffffffffa0234076
> 0xffffffffa0233f5b <__nf_conntrack_find_get+379>: mov (%rdi),%edx
> 0xffffffffa0233f5d <__nf_conntrack_find_get+381>: test %edx,%edx
> 0xffffffffa0233f5f <__nf_conntrack_find_get+383>: je 0xffffffffa0234076
> 0xffffffffa0233f65 <__nf_conntrack_find_get+389>: lea 0x1(%rdx),%ecx
> 0xffffffffa0233f68 <__nf_conntrack_find_get+392>: mov %edx,%eax
> 0xffffffffa0233f6a <__nf_conntrack_find_get+394>: lock cmpxchg %ecx,(%rdi)
> 0xffffffffa0233f6e <__nf_conntrack_find_get+398>: cmp %eax,%edx
> 0xffffffffa0233f70 <__nf_conntrack_find_get+400>: mov %eax,%ecx
> 0xffffffffa0233f72 <__nf_conntrack_find_get+402>: jne 0xffffffffa023407e
> 0xffffffffa0233f78 <__nf_conntrack_find_get+408>: mov 0x10(%rbx),%esi
> 0xffffffffa0233f7b <__nf_conntrack_find_get+411>: cmp %esi,0x0(%rbp)
> 0xffffffffa0233f7e <__nf_conntrack_find_get+414>: movzbl 0x37(%rbx),%eax
> 0xffffffffa0233f82 <__nf_conntrack_find_get+418>: je 0xffffffffa0233fad
> 0xffffffffa0233f84 <__nf_conntrack_find_get+420>: callq 0xffffffffa0233240 <nf_conntrack_put>
> 0xffffffffa0233f89 <__nf_conntrack_find_get+425>: jmpq 0xffffffffa0233df9
> 0xffffffffa0233f8e <__nf_conntrack_find_get+430>: xchg %ax,%ax
> 0xffffffffa0233f90 <__nf_conntrack_find_get+432>: shr %rbx
> 0xffffffffa0233f93 <__nf_conntrack_find_get+435>: cmp %rbx,%rcx
> 0xffffffffa0233f96 <__nf_conntrack_find_get+438>: je 0xffffffffa0234065
> 0xffffffffa0233f9c <__nf_conntrack_find_get+444>: mov 0xb18(%r12),%rax
> 0xffffffffa0233fa4 <__nf_conntrack_find_get+452>: incl %gs:0x3c(%rax)
> 0xffffffffa0233fa8 <__nf_conntrack_find_get+456>: jmpq 0xffffffffa0233e1d
> 0xffffffffa0233fad <__nf_conntrack_find_get+461>: mov 0x14(%rbx),%esi
> 0xffffffffa0233fb0 <__nf_conntrack_find_get+464>: cmp %esi,0x4(%rbp)
> 0xffffffffa0233fb3 <__nf_conntrack_find_get+467>: jne 0xffffffffa0233f84
> 0xffffffffa0233fb5 <__nf_conntrack_find_get+469>: mov 0x18(%rbx),%esi
> 0xffffffffa0233fb8 <__nf_conntrack_find_get+472>: cmp %esi,0x8(%rbp)
> 0xffffffffa0233fbb <__nf_conntrack_find_get+475>: jne 0xffffffffa0233f84
> 0xffffffffa0233fbd <__nf_conntrack_find_get+477>: mov 0x1c(%rbx),%esi
> 0xffffffffa0233fc0 <__nf_conntrack_find_get+480>: cmp %esi,0xc(%rbp)
> 0xffffffffa0233fc3 <__nf_conntrack_find_get+483>: jne 0xffffffffa0233f84
> 0xffffffffa0233fc5 <__nf_conntrack_find_get+485>: mov 0x20(%rbx),%esi
> 0xffffffffa0233fc8 <__nf_conntrack_find_get+488>: cmp %esi,0x10(%rbp)
> 0xffffffffa0233fcb <__nf_conntrack_find_get+491>: jne 0xffffffffa0233f84
> 0xffffffffa0233fcd <__nf_conntrack_find_get+493>: mov 0x24(%rbx),%esi
> 0xffffffffa0233fd0 <__nf_conntrack_find_get+496>: cmp %esi,0x14(%rbp)
> 0xffffffffa0233fd3 <__nf_conntrack_find_get+499>: jne 0xffffffffa0233f84
> 0xffffffffa0233fd5 <__nf_conntrack_find_get+501>: mov 0x28(%rbx),%esi
> 0xffffffffa0233fd8 <__nf_conntrack_find_get+504>: cmp %esi,0x18(%rbp)
> 0xffffffffa0233fdb <__nf_conntrack_find_get+507>: jne 0xffffffffa0233f84
> 0xffffffffa0233fdd <__nf_conntrack_find_get+509>: mov 0x2c(%rbx),%esi
> 0xffffffffa0233fe0 <__nf_conntrack_find_get+512>: cmp %esi,0x1c(%rbp)
> 0xffffffffa0233fe3 <__nf_conntrack_find_get+515>: jne 0xffffffffa0233f84
> 0xffffffffa0233fe5 <__nf_conntrack_find_get+517>: mov 0x30(%rbx),%esi
> 0xffffffffa0233fe8 <__nf_conntrack_find_get+520>: cmp %esi,0x20(%rbp)
> 0xffffffffa0233feb <__nf_conntrack_find_get+523>: jne 0xffffffffa0233f84
> 0xffffffffa0233fed <__nf_conntrack_find_get+525>: mov 0x24(%rbp),%ecx
> 0xffffffffa0233ff0 <__nf_conntrack_find_get+528>: mov 0x34(%rbx),%edx
> 0xffffffffa0233ff3 <__nf_conntrack_find_get+531>: and $0xffffff,%ecx
> 0xffffffffa0233ff9 <__nf_conntrack_find_get+537>: and $0xffffff,%edx
> 0xffffffffa0233fff <__nf_conntrack_find_get+543>: cmp %edx,%ecx
> 0xffffffffa0234001 <__nf_conntrack_find_get+545>: jne 0xffffffffa0233f84
> 0xffffffffa0234003 <__nf_conntrack_find_get+547>: lea 0x0(,%rax,8),%rdx
> 0xffffffffa023400b <__nf_conntrack_find_get+555>: shl $0x6,%rax
> 0xffffffffa023400f <__nf_conntrack_find_get+559>: mov %rbx,%rcx
> 0xffffffffa0234012 <__nf_conntrack_find_get+562>: sub %rdx,%rax
> 0xffffffffa0234015 <__nf_conntrack_find_get+565>: add $0x10,%rax
> 0xffffffffa0234019 <__nf_conntrack_find_get+569>: sub %rax,%rcx
> 0xffffffffa023401c <__nf_conntrack_find_get+572>: mov 0xe8(%rcx),%rdx
> 0xffffffffa0234023 <__nf_conntrack_find_get+579>: test %rdx,%rdx
> 0xffffffffa0234026 <__nf_conntrack_find_get+582>: je 0xffffffffa023407a
> 0xffffffffa0234028 <__nf_conntrack_find_get+584>: movzwl 0x1a(%rdx),%eax
> 0xffffffffa023402c <__nf_conntrack_find_get+588>: test %ax,%ax
> 0xffffffffa023402f <__nf_conntrack_find_get+591>: je 0xffffffffa0234039
> 0xffffffffa0234031 <__nf_conntrack_find_get+593>: add %rdx,%rax
> 0xffffffffa0234034 <__nf_conntrack_find_get+596>: je 0xffffffffa023407a
> 0xffffffffa0234036 <__nf_conntrack_find_get+598>: movzwl (%rax),%eax
> 0xffffffffa0234039 <__nf_conntrack_find_get+601>: cmp %ax,%r14w
> 0xffffffffa023403d <__nf_conntrack_find_get+605>: jne 0xffffffffa0233f84
> 0xffffffffa0234043 <__nf_conntrack_find_get+611>: mov 0x80(%rcx),%rax
> 0xffffffffa023404a <__nf_conntrack_find_get+618>: test $0x8,%al
> 0xffffffffa023404c <__nf_conntrack_find_get+620>: je 0xffffffffa0233f84
> 0xffffffffa0234052 <__nf_conntrack_find_get+626>: mov %rbx,%rax
> 0xffffffffa0234055 <__nf_conntrack_find_get+629>: pop %rbx
> 0xffffffffa0234056 <__nf_conntrack_find_get+630>: pop %rbp
> 0xffffffffa0234057 <__nf_conntrack_find_get+631>: pop %r12
> 0xffffffffa0234059 <__nf_conntrack_find_get+633>: pop %r13
> 0xffffffffa023405b <__nf_conntrack_find_get+635>: pop %r14
> 0xffffffffa023405d <__nf_conntrack_find_get+637>: retq
> 0xffffffffa023405e <__nf_conntrack_find_get+638>: xor %eax,%eax
> 0xffffffffa0234060 <__nf_conntrack_find_get+640>: jmpq 0xffffffffa0233eef
> 0xffffffffa0234065 <__nf_conntrack_find_get+645>: mov $0x200,%esi
> 0xffffffffa023406a <__nf_conntrack_find_get+650>: mov $0xffffffffa0234065,%rdi
> 0xffffffffa0234071 <__nf_conntrack_find_get+657>: callq 0xffffffff8106c8f0 <__local_bh_enable_ip>
> 0xffffffffa0234076 <__nf_conntrack_find_get+662>: xor %ebx,%ebx
> 0xffffffffa0234078 <__nf_conntrack_find_get+664>: jmp 0xffffffffa0234052
> 0xffffffffa023407a <__nf_conntrack_find_get+666>: xor %eax,%eax
> 0xffffffffa023407c <__nf_conntrack_find_get+668>: jmp 0xffffffffa0234039
> 0xffffffffa023407e <__nf_conntrack_find_get+670>: test %ecx,%ecx
> 0xffffffffa0234080 <__nf_conntrack_find_get+672>: je 0xffffffffa0234076
> 0xffffffffa0234082 <__nf_conntrack_find_get+674>: lea 0x1(%rcx),%edx
> 0xffffffffa0234085 <__nf_conntrack_find_get+677>: mov %ecx,%eax
> 0xffffffffa0234087 <__nf_conntrack_find_get+679>: lock cmpxchg %edx,(%rdi)
> 0xffffffffa023408b <__nf_conntrack_find_get+683>: cmp %ecx,%eax
> 0xffffffffa023408d <__nf_conntrack_find_get+685>: je 0xffffffffa0233f78
> 0xffffffffa0234093 <__nf_conntrack_find_get+691>: mov %eax,%ecx
> 0xffffffffa0234095 <__nf_conntrack_find_get+693>: jmp 0xffffffffa023407e
> 0xffffffffa0234097 <__nf_conntrack_find_get+695>: nopw 0x0(%rax,%rax,1)
>
> I could not directly find the source file of this function, but a little
> digging in kernel sources of the debian package led me to
> net/netfilter/nf_conntrack_core.c
>
> I compiled it with the .config used by debian to build the kernel, and with GDB
> I tracked down the code with list at the good offset address, even if the dumps
> don't look exactly the same (the offset of the assembly code that triggers
> general protection fault seems to be the same)
>
> (gdb) disassemble __nf_conntrack_find_get
> Dump of assembler code for function __nf_conntrack_find_get:
> 0x00000000000022a0 <+0>: callq 0x22a5 <__nf_conntrack_find_get+5>
> 0x00000000000022a5 <+5>: push %r14
> 0x00000000000022a7 <+7>: mov %esi,%r14d
> 0x00000000000022aa <+10>: push %r13
> 0x00000000000022ac <+12>: mov %rdx,%r13
> 0x00000000000022af <+15>: push %r12
> 0x00000000000022b1 <+17>: mov %rdi,%r12
> 0x00000000000022b4 <+20>: push %rbp
> 0x00000000000022b5 <+21>: push %rbx
> 0x00000000000022b6 <+22>: mov %ecx,%ebp
> 0x00000000000022b8 <+24>: mov 0xaf0(%r12),%edx
> 0x00000000000022c0 <+32>: addl $0x200,%gs:0x0
> 0x00000000000022cc <+44>: imul %rbp,%rdx
> 0x00000000000022d0 <+48>: shr $0x20,%rdx
> 0x00000000000022d4 <+52>: lea 0x0(,%rdx,8),%rcx
> 0x00000000000022dc <+60>: mov %rcx,%rax
> 0x00000000000022df <+63>: add 0xb00(%r12),%rax
> 0x00000000000022e7 <+71>: mov (%rax),%rbx
> 0x00000000000022ea <+74>: test $0x1,%bl
> 0x00000000000022ed <+77>: je 0x230f <__nf_conntrack_find_get+111>
> 0x00000000000022ef <+79>: jmpq 0x2470 <__nf_conntrack_find_get+464>
> 0x00000000000022f4 <+84>: nopl 0x0(%rax)
> 0x00000000000022f8 <+88>: mov 0xb18(%r12),%rax
> 0x0000000000002300 <+96>: incl %gs:(%rax)
> 0x0000000000002303 <+99>: mov (%rbx),%rbx
> 0x0000000000002306 <+102>: test $0x1,%bl
> 0x0000000000002309 <+105>: jne 0x2470 <__nf_conntrack_find_get+464>
> 0x000000000000230f <+111>: mov 0x10(%rbx),%edi
> 0x0000000000002312 <+114>: cmp %edi,0x0(%r13)
> 0x0000000000002316 <+118>: movzbl 0x37(%rbx),%eax
> 0x000000000000231a <+122>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x000000000000231c <+124>: mov 0x14(%rbx),%esi
> 0x000000000000231f <+127>: cmp %esi,0x4(%r13)
> 0x0000000000002323 <+131>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x0000000000002325 <+133>: mov 0x18(%rbx),%esi
> 0x0000000000002328 <+136>: cmp %esi,0x8(%r13)
> 0x000000000000232c <+140>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x000000000000232e <+142>: mov 0x1c(%rbx),%esi
> 0x0000000000002331 <+145>: cmp %esi,0xc(%r13)
> 0x0000000000002335 <+149>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x0000000000002337 <+151>: mov 0x20(%rbx),%esi
> 0x000000000000233a <+154>: cmp %esi,0x10(%r13)
> 0x000000000000233e <+158>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x0000000000002340 <+160>: mov 0x24(%rbx),%esi
> 0x0000000000002343 <+163>: cmp %esi,0x14(%r13)
> 0x0000000000002347 <+167>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x0000000000002349 <+169>: mov 0x28(%rbx),%esi
> 0x000000000000234c <+172>: cmp %esi,0x18(%r13)
> 0x0000000000002350 <+176>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x0000000000002352 <+178>: mov 0x2c(%rbx),%esi
> 0x0000000000002355 <+181>: cmp %esi,0x1c(%r13)
> 0x0000000000002359 <+185>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x000000000000235b <+187>: mov 0x30(%rbx),%esi
> 0x000000000000235e <+190>: cmp %esi,0x20(%r13)
> 0x0000000000002362 <+194>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x0000000000002364 <+196>: mov 0x24(%r13),%edi
> 0x0000000000002368 <+200>: mov 0x34(%rbx),%esi
> 0x000000000000236b <+203>: and $0xffffff,%edi
> 0x0000000000002371 <+209>: and $0xffffff,%esi
> 0x0000000000002377 <+215>: cmp %esi,%edi
> 0x0000000000002379 <+217>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x000000000000237f <+223>: lea 0x0(,%rax,8),%rsi
> 0x0000000000002387 <+231>: shl $0x6,%rax
> 0x000000000000238b <+235>: mov %rbx,%rdi
> 0x000000000000238e <+238>: sub %rsi,%rax
> 0x0000000000002391 <+241>: add $0x10,%rax
> 0x0000000000002395 <+245>: sub %rax,%rdi
> 0x0000000000002398 <+248>: mov 0xe8(%rdi),%rsi
> 0x000000000000239f <+255>: test %rsi,%rsi
> 0x00000000000023a2 <+258>: je 0x24b0 <__nf_conntrack_find_get+528>
> 0x00000000000023a8 <+264>: movzwl 0x1a(%rsi),%eax
> 0x00000000000023ac <+268>: test %ax,%ax
> 0x00000000000023af <+271>: je 0x23bd <__nf_conntrack_find_get+285>
> 0x00000000000023b1 <+273>: add %rsi,%rax
> 0x00000000000023b4 <+276>: je 0x24b0 <__nf_conntrack_find_get+528>
> 0x00000000000023ba <+282>: movzwl (%rax),%eax
> 0x00000000000023bd <+285>: cmp %ax,%r14w
> 0x00000000000023c1 <+289>: jne 0x22f8 <__nf_conntrack_find_get+88>
> 0x00000000000023c7 <+295>: mov 0x80(%rdi),%rax
> 0x00000000000023ce <+302>: test $0x8,%al
> 0x00000000000023d0 <+304>: je 0x22f8 <__nf_conntrack_find_get+88>
> 0x00000000000023d6 <+310>: mov $0x200,%esi
> 0x00000000000023db <+315>: mov $0x0,%rdi
> 0x00000000000023e2 <+322>: mov 0xb18(%r12),%rax
> 0x00000000000023ea <+330>: incl %gs:0x4(%rax)
> 0x00000000000023ee <+334>: callq 0x23f3 <__nf_conntrack_find_get+339>
> 0x00000000000023f3 <+339>: test %rbx,%rbx
> 0x00000000000023f6 <+342>: je 0x2590 <__nf_conntrack_find_get+752>
> 0x00000000000023fc <+348>: movzbl 0x37(%rbx),%eax
> 0x0000000000002400 <+352>: mov %rbx,%rdi
> 0x0000000000002403 <+355>: lea 0x0(,%rax,8),%rdx
> 0x000000000000240b <+363>: shl $0x6,%rax
> 0x000000000000240f <+367>: sub %rdx,%rax
> 0x0000000000002412 <+370>: add $0x10,%rax
> 0x0000000000002416 <+374>: sub %rax,%rdi
> 0x0000000000002419 <+377>: mov 0x80(%rdi),%rax
> 0x0000000000002420 <+384>: test $0x2,%ah
> 0x0000000000002423 <+387>: jne 0x2590 <__nf_conntrack_find_get+752>
> 0x0000000000002429 <+393>: mov (%rdi),%ecx
> 0x000000000000242b <+395>: test %ecx,%ecx
> 0x000000000000242d <+397>: je 0x2590 <__nf_conntrack_find_get+752>
> 0x0000000000002433 <+403>: lea 0x1(%rcx),%edx
> 0x0000000000002436 <+406>: mov %ecx,%eax
> 0x0000000000002438 <+408>: lock cmpxchg %edx,(%rdi)
> 0x000000000000243c <+412>: cmp %eax,%ecx
> 0x000000000000243e <+414>: mov %eax,%edx
> 0x0000000000002440 <+416>: jne 0x248f <__nf_conntrack_find_get+495>
> 0x0000000000002442 <+418>: mov 0x10(%rbx),%ecx
> 0x0000000000002445 <+421>: cmp %ecx,0x0(%r13)
> 0x0000000000002449 <+425>: movzbl 0x37(%rbx),%eax
> 0x000000000000244d <+429>: je 0x24c0 <__nf_conntrack_find_get+544>
> 0x000000000000244f <+431>: test %rdi,%rdi
> 0x0000000000002452 <+434>: je 0x22b8 <__nf_conntrack_find_get+24>
> 0x0000000000002458 <+440>: lock decl (%rdi)
> 0x000000000000245b <+443>: je 0x25b3 <__nf_conntrack_find_get+787>
> 0x0000000000002461 <+449>: jmpq 0x22b8 <__nf_conntrack_find_get+24>
> 0x0000000000002466 <+454>: nopw %cs:0x0(%rax,%rax,1)
> 0x0000000000002470 <+464>: shr %rbx
> 0x0000000000002473 <+467>: cmp %rbx,%rdx
> 0x0000000000002476 <+470>: je 0x259e <__nf_conntrack_find_get+766>
> 0x000000000000247c <+476>: mov 0xb18(%r12),%rax
> 0x0000000000002484 <+484>: incl %gs:0x3c(%rax)
> 0x0000000000002488 <+488>: jmpq 0x22dc <__nf_conntrack_find_get+60>
> 0x000000000000248d <+493>: mov %eax,%edx
> 0x000000000000248f <+495>: test %edx,%edx
> 0x0000000000002491 <+497>: je 0x2590 <__nf_conntrack_find_get+752>
> 0x0000000000002497 <+503>: lea 0x1(%rdx),%ecx
> 0x000000000000249a <+506>: mov %edx,%eax
> 0x000000000000249c <+508>: lock cmpxchg %ecx,(%rdi)
> 0x00000000000024a0 <+512>: cmp %edx,%eax
> 0x00000000000024a2 <+514>: je 0x2442 <__nf_conntrack_find_get+418>
> 0x00000000000024a4 <+516>: jmp 0x248d <__nf_conntrack_find_get+493>
> 0x00000000000024a6 <+518>: nopw %cs:0x0(%rax,%rax,1)
> 0x00000000000024b0 <+528>: xor %eax,%eax
> 0x00000000000024b2 <+530>: jmpq 0x23bd <__nf_conntrack_find_get+285>
> 0x00000000000024b7 <+535>: nopw 0x0(%rax,%rax,1)
> 0x00000000000024c0 <+544>: mov 0x14(%rbx),%ecx
> 0x00000000000024c3 <+547>: cmp %ecx,0x4(%r13)
> 0x00000000000024c7 <+551>: jne 0x244f <__nf_conntrack_find_get+431>
> 0x00000000000024c9 <+553>: mov 0x18(%rbx),%ecx
> 0x00000000000024cc <+556>: cmp %ecx,0x8(%r13)
> 0x00000000000024d0 <+560>: jne 0x244f <__nf_conntrack_find_get+431>
> 0x00000000000024d6 <+566>: mov 0x1c(%rbx),%ecx
> 0x00000000000024d9 <+569>: cmp %ecx,0xc(%r13)
> 0x00000000000024dd <+573>: jne 0x244f <__nf_conntrack_find_get+431>
> 0x00000000000024e3 <+579>: mov 0x20(%rbx),%ecx
> 0x00000000000024e6 <+582>: cmp %ecx,0x10(%r13)
> 0x00000000000024ea <+586>: jne 0x244f <__nf_conntrack_find_get+431>
> 0x00000000000024f0 <+592>: mov 0x24(%rbx),%ecx
> 0x00000000000024f3 <+595>: cmp %ecx,0x14(%r13)
> 0x00000000000024f7 <+599>: jne 0x244f <__nf_conntrack_find_get+431>
> 0x00000000000024fd <+605>: mov 0x28(%rbx),%ecx
> 0x0000000000002500 <+608>: cmp %ecx,0x18(%r13)
> 0x0000000000002504 <+612>: jne 0x244f <__nf_conntrack_find_get+431>
> 0x000000000000250a <+618>: mov 0x2c(%rbx),%ecx
> 0x000000000000250d <+621>: cmp %ecx,0x1c(%r13)
> 0x0000000000002511 <+625>: jne 0x244f <__nf_conntrack_find_get+431>
> 0x0000000000002517 <+631>: mov 0x30(%rbx),%ecx
> 0x000000000000251a <+634>: cmp %ecx,0x20(%r13)
> 0x000000000000251e <+638>: jne 0x244f <__nf_conntrack_find_get+431>
> 0x0000000000002524 <+644>: mov 0x24(%r13),%ecx
> 0x0000000000002528 <+648>: mov 0x34(%rbx),%edx
> 0x000000000000252b <+651>: and $0xffffff,%ecx
> 0x0000000000002531 <+657>: and $0xffffff,%edx
> 0x0000000000002537 <+663>: cmp %edx,%ecx
> 0x0000000000002539 <+665>: jne 0x244f <__nf_conntrack_find_get+431>
> 0x000000000000253f <+671>: lea 0x0(,%rax,8),%rdx
> 0x0000000000002547 <+679>: shl $0x6,%rax
> 0x000000000000254b <+683>: mov %rbx,%rcx
> 0x000000000000254e <+686>: sub %rdx,%rax
> 0x0000000000002551 <+689>: add $0x10,%rax
> 0x0000000000002555 <+693>: sub %rax,%rcx
> 0x0000000000002558 <+696>: mov 0xe8(%rcx),%rdx
> 0x000000000000255f <+703>: test %rdx,%rdx
> 0x0000000000002562 <+706>: je 0x25bd <__nf_conntrack_find_get+797>
> 0x0000000000002564 <+708>: movzwl 0x1a(%rdx),%eax
> 0x0000000000002568 <+712>: test %ax,%ax
> 0x000000000000256b <+715>: je 0x2575 <__nf_conntrack_find_get+725>
> 0x000000000000256d <+717>: add %rdx,%rax
> 0x0000000000002570 <+720>: je 0x25bd <__nf_conntrack_find_get+797>
> 0x0000000000002572 <+722>: movzwl (%rax),%eax
> 0x0000000000002575 <+725>: cmp %ax,%r14w
> 0x0000000000002579 <+729>: jne 0x244f <__nf_conntrack_find_get+431>
> 0x000000000000257f <+735>: mov 0x80(%rcx),%rax
> 0x0000000000002586 <+742>: test $0x8,%al
> 0x0000000000002588 <+744>: je 0x244f <__nf_conntrack_find_get+431>
> 0x000000000000258e <+750>: jmp 0x2592 <__nf_conntrack_find_get+754>
> 0x0000000000002590 <+752>: xor %ebx,%ebx
> 0x0000000000002592 <+754>: mov %rbx,%rax
> 0x0000000000002595 <+757>: pop %rbx
> 0x0000000000002596 <+758>: pop %rbp
> 0x0000000000002597 <+759>: pop %r12
> 0x0000000000002599 <+761>: pop %r13
> 0x000000000000259b <+763>: pop %r14
> 0x000000000000259d <+765>: retq
> 0x000000000000259e <+766>: mov $0x200,%esi
> 0x00000000000025a3 <+771>: mov $0x0,%rdi
> 0x00000000000025aa <+778>: xor %ebx,%ebx
> 0x00000000000025ac <+780>: callq 0x25b1 <__nf_conntrack_find_get+785>
> 0x00000000000025b1 <+785>: jmp 0x2592 <__nf_conntrack_find_get+754>
> 0x00000000000025b3 <+787>: callq 0x25b8 <__nf_conntrack_find_get+792>
> 0x00000000000025b8 <+792>: jmpq 0x22b8 <__nf_conntrack_find_get+24>
> 0x00000000000025bd <+797>: xor %eax,%eax
> 0x00000000000025bf <+799>: jmp 0x2575 <__nf_conntrack_find_get+725>
> End of assembler dump.
>
> (gdb) list *0x000000000000230f
> 0x230f is in __nf_conntrack_find_get (include/linux/netfilter.h:24).
> 19 static inline int nf_inet_addr_cmp(const union nf_inet_addr *a1,
> 20 const union nf_inet_addr *a2)
> 21 {
> 22 return a1->all[0] == a2->all[0] &&
> 23 a1->all[1] == a2->all[1] &&
> 24 a1->all[2] == a2->all[2] &&
> 25 a1->all[3] == a2->all[3];
> 26 }
> 27
> 28 static inline void nf_inet_addr_mask(const union nf_inet_addr *a1,
>
> Basically, I have two questions :
>
> * Did I understand correctly the backtrace, and did I dig at the good
> place? (okay, that's already two questions)
> * Admitting I'm good in my research, the only way this code would crash
> would be if a1 or a2 is a pointer to a NULL or non-dereferencable
> address. I guess that'd mean no IP address has been provided in a1 or a2.
> Would it be a bug in the kernel or a bug in a software that propagates to
> the kernel?
>
> How could I investigate further more?
>
> Thanks for your help, and in advance, I apologize for the noise.
Dear netfilter developers,
May I ask you for some help regarding a kernel panic backtracking that I
submitted on linux-kernel mailing list two days ago, but which should
probably have been sent directly to you?
Thanks in advance for your help.
--
PEB
--
To unsubscribe from this list: send the line "unsubscribe netfilter-devel" in
the body of a message to majordomo@vger.kernel.org
More majordomo info at http://vger.kernel.org/majordomo-info.html
^ permalink raw reply [flat|nested] only message in thread