netdev.vger.kernel.org archive mirror
 help / color / mirror / Atom feed
* Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
@ 2013-10-01 16:39 Wolfgang Walter
  2013-10-01 18:57 ` Brian Haley
                   ` (2 more replies)
  0 siblings, 3 replies; 22+ messages in thread
From: Wolfgang Walter @ 2013-10-01 16:39 UTC (permalink / raw)
  To: netdev

Hello,

I tried to upgrade one of our routers to 3.10.13 from 3.4.63 and I see a 
dramatic performance loss. I tried 3.11.2 and it is still there.

*** Symptoms:

All network traffic over the router become slow and sluggish. If one pings the 
router there is a packet loss. After about 2 minutes the traffic completely 
stalls for about 1 minute. Then it works again as in the beginning to then 
stall again. And so on.

This happens even with rather moderate traffic. While still routing the CPU 
utilization is higher than it is with 3.4.63 but only moderately.

When it stalls no network traffic seems possible (but to loopback). If one 
tries to ping from the router any target (even if it is on a interface with no 
traffic at all) one gets:

	ping: sendmsg: No buffer space available

As the router has about 15G free memory this probably means that an internal 
table is full.

The CPU-utilization is low within that period.


I can trigger it easily when I copy about 50 big files per scp over 50 
different ipsec-tunnels:

* boot router

* wait until all ipsec tunnels are established

* start copying:

H <--1G--> Router <---1G--->.......<-- >=100MBit --> Xn <---100Mbit----> Rn

So there is a ipsec tunnel between Router and Xn for all n=1 to 50. I copy 
files from Rn to H. I start the copy from H, so the tcp-connections get 
established from H to Rn.

The same test works just fine with 3.4.63. All cores are used but no one 
reaches its limit. The router does neither drop pings nor does it have 
problems pinging other targets.

I tested 3.8.13 It seems not to have this issue if I increase

	net.ipv4.inet_peer_threshold

(I tried 6566400, didn't try smaller values beside the default one).

If I use the default one 3.8.13 behaves badly.

But 3.8.13 seems to have other issues. Basically: routing stalls later much 
longer (up to 6 minutes or so).



*** Environment:

It's a 8 core machine (with AES-NI). It establishes a lot of ipsec-tunnels. It 
uses statefull packet filtering (but no NAT). The network-cards are intel 
cards (driver: igb and ixgbe). No IPv6. No ethernet flow control enabled (but 
doesn't matter). No traffic shaping (that is tc). igb/ixgbe interfaces: 
nothing modified with ethtool but flow control (autoneg off tx off rx off).


Any idea?


Regards,
-- 
Wolfgang Walter
Studentenwerk München
Anstalt des öffentlichen Rechts

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-01 16:39 Big performance loss from 3.4.63 to 3.10.13 when routing ipv4 Wolfgang Walter
@ 2013-10-01 18:57 ` Brian Haley
  2013-10-01 19:44   ` Wolfgang Walter
  2013-10-01 22:20 ` Hannes Frederic Sowa
       [not found] ` <3169911.kTmZ0BZVVr@h2o.as.studentenwerk.mhn.de>
  2 siblings, 1 reply; 22+ messages in thread
From: Brian Haley @ 2013-10-01 18:57 UTC (permalink / raw)
  To: Wolfgang Walter, netdev

On 10/01/2013 12:39 PM, Wolfgang Walter wrote:
> Hello,
> 
> I tried to upgrade one of our routers to 3.10.13 from 3.4.63 and I see a 
> dramatic performance loss. I tried 3.11.2 and it is still there.
> 
> *** Symptoms:
> 
> All network traffic over the router become slow and sluggish. If one pings the 
> router there is a packet loss. After about 2 minutes the traffic completely 
> stalls for about 1 minute. Then it works again as in the beginning to then 
> stall again. And so on.
> 
> This happens even with rather moderate traffic. While still routing the CPU 
> utilization is higher than it is with 3.4.63 but only moderately.
> 
> When it stalls no network traffic seems possible (but to loopback). If one 
> tries to ping from the router any target (even if it is on a interface with no 
> traffic at all) one gets:
> 
> 	ping: sendmsg: No buffer space available

dmesg show anything?  I've seen this happen when the neighbour table is full,
but that's not a typical occurence.

-Brian

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-01 18:57 ` Brian Haley
@ 2013-10-01 19:44   ` Wolfgang Walter
  0 siblings, 0 replies; 22+ messages in thread
From: Wolfgang Walter @ 2013-10-01 19:44 UTC (permalink / raw)
  To: Brian Haley; +Cc: netdev

Am Dienstag, 1. Oktober 2013, 14:57:33 schrieb Brian Haley:
> On 10/01/2013 12:39 PM, Wolfgang Walter wrote:
> > Hello,
> > 
> > I tried to upgrade one of our routers to 3.10.13 from 3.4.63 and I see a
> > dramatic performance loss. I tried 3.11.2 and it is still there.
> > 
> > *** Symptoms:
> > 
> > All network traffic over the router become slow and sluggish. If one pings
> > the router there is a packet loss. After about 2 minutes the traffic
> > completely stalls for about 1 minute. Then it works again as in the
> > beginning to then stall again. And so on.
> > 
> > This happens even with rather moderate traffic. While still routing the
> > CPU
> > utilization is higher than it is with 3.4.63 but only moderately.
> > 
> > When it stalls no network traffic seems possible (but to loopback). If one
> > tries to ping from the router any target (even if it is on a interface
> > with no> 
> > traffic at all) one gets:
> > 	ping: sendmsg: No buffer space available
> 
> dmesg show anything?  I've seen this happen when the neighbour table is
> full, but that's not a typical occurence.
> 

Nothing is logged.

No, the neighbour table is not full. At least is does not contain more entries 
then usually and not more then under 3.4 (maybe 100 or so).

I also checked the number of entries in the conntrack table and things like 
that: all normal.

Regards,
-- 
Wolfgang Walter
Studentenwerk München
Anstalt des öffentlichen Rechts

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-01 16:39 Big performance loss from 3.4.63 to 3.10.13 when routing ipv4 Wolfgang Walter
  2013-10-01 18:57 ` Brian Haley
@ 2013-10-01 22:20 ` Hannes Frederic Sowa
  2013-10-22 19:07   ` Wolfgang Walter
       [not found] ` <3169911.kTmZ0BZVVr@h2o.as.studentenwerk.mhn.de>
  2 siblings, 1 reply; 22+ messages in thread
From: Hannes Frederic Sowa @ 2013-10-01 22:20 UTC (permalink / raw)
  To: Wolfgang Walter; +Cc: netdev

On Tue, Oct 01, 2013 at 06:39:32PM +0200, Wolfgang Walter wrote:
> All network traffic over the router become slow and sluggish. If one pings the 
> router there is a packet loss. After about 2 minutes the traffic completely 
> stalls for about 1 minute. Then it works again as in the beginning to then 
> stall again. And so on.

Maybe dropwatch can give a first hint?

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-01 22:20 ` Hannes Frederic Sowa
@ 2013-10-22 19:07   ` Wolfgang Walter
  2013-10-22 19:46     ` David Miller
  0 siblings, 1 reply; 22+ messages in thread
From: Wolfgang Walter @ 2013-10-22 19:07 UTC (permalink / raw)
  To: Hannes Frederic Sowa; +Cc: netdev

Am Mittwoch, 2. Oktober 2013, 00:20:02 schrieb Hannes Frederic Sowa:
> On Tue, Oct 01, 2013 at 06:39:32PM +0200, Wolfgang Walter wrote:
> > All network traffic over the router become slow and sluggish. If one pings
> > the router there is a packet loss. After about 2 minutes the traffic
> > completely stalls for about 1 minute. Then it works again as in the
> > beginning to then stall again. And so on.
> 
> Maybe dropwatch can give a first hint?
> 

I finally found the problem:

In 3.10.x and 3.11.x the value of /proc/sys/net/ipv4/xfrm4_gc_thresh is 1024.

It is much higher in 3.4.x. If I increase this value in 3.10.x to the one I 
see on 3.4.x all works fine with 3.10.x

Regards,
-- 
Wolfgang Walter
Studentenwerk München
Anstalt des öffentlichen Rechts

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-22 19:07   ` Wolfgang Walter
@ 2013-10-22 19:46     ` David Miller
  2013-10-23  8:12       ` Steffen Klassert
  0 siblings, 1 reply; 22+ messages in thread
From: David Miller @ 2013-10-22 19:46 UTC (permalink / raw)
  To: linux; +Cc: hannes, netdev, klassert

From: Wolfgang Walter <linux@stwm.de>
Date: Tue, 22 Oct 2013 21:07:41 +0200

> Am Mittwoch, 2. Oktober 2013, 00:20:02 schrieb Hannes Frederic Sowa:
>> On Tue, Oct 01, 2013 at 06:39:32PM +0200, Wolfgang Walter wrote:
>> > All network traffic over the router become slow and sluggish. If one pings
>> > the router there is a packet loss. After about 2 minutes the traffic
>> > completely stalls for about 1 minute. Then it works again as in the
>> > beginning to then stall again. And so on.
>> 
>> Maybe dropwatch can give a first hint?
>> 
> 
> I finally found the problem:
> 
> In 3.10.x and 3.11.x the value of /proc/sys/net/ipv4/xfrm4_gc_thresh is 1024.
> 
> It is much higher in 3.4.x. If I increase this value in 3.10.x to the one I 
> see on 3.4.x all works fine with 3.10.x

Steffen, here is yet another report about this issue.

I think we should resolve this soon, even bumping it to 2048 or 4096
and leaving it at that would be I think acceptable.

Thanks.

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-22 19:46     ` David Miller
@ 2013-10-23  8:12       ` Steffen Klassert
  2013-10-23 11:33         ` Wolfgang Walter
  0 siblings, 1 reply; 22+ messages in thread
From: Steffen Klassert @ 2013-10-23  8:12 UTC (permalink / raw)
  To: David Miller; +Cc: linux, hannes, netdev, klassert

On Tue, Oct 22, 2013 at 03:46:38PM -0400, David Miller wrote:
> From: Wolfgang Walter <linux@stwm.de>
> Date: Tue, 22 Oct 2013 21:07:41 +0200
> 
> > Am Mittwoch, 2. Oktober 2013, 00:20:02 schrieb Hannes Frederic Sowa:
> >> On Tue, Oct 01, 2013 at 06:39:32PM +0200, Wolfgang Walter wrote:
> >> > All network traffic over the router become slow and sluggish. If one pings
> >> > the router there is a packet loss. After about 2 minutes the traffic
> >> > completely stalls for about 1 minute. Then it works again as in the
> >> > beginning to then stall again. And so on.
> >> 
> >> Maybe dropwatch can give a first hint?
> >> 
> > 
> > I finally found the problem:
> > 
> > In 3.10.x and 3.11.x the value of /proc/sys/net/ipv4/xfrm4_gc_thresh is 1024.
> > 
> > It is much higher in 3.4.x. If I increase this value in 3.10.x to the one I 
> > see on 3.4.x all works fine with 3.10.x
> 
> Steffen, here is yet another report about this issue.
> 
> I think we should resolve this soon, even bumping it to 2048 or 4096
> and leaving it at that would be I think acceptable.
> 

Yes, of course. Let's use 4096 as the default for ipv4 and ipv6.
I'll take care of it next week.

Thanks!

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-23  8:12       ` Steffen Klassert
@ 2013-10-23 11:33         ` Wolfgang Walter
  2013-10-23 12:00           ` Eric Dumazet
  2013-10-23 12:04           ` Steffen Klassert
  0 siblings, 2 replies; 22+ messages in thread
From: Wolfgang Walter @ 2013-10-23 11:33 UTC (permalink / raw)
  To: Steffen Klassert; +Cc: David Miller, hannes, netdev, klassert

Am Mittwoch, 23. Oktober 2013, 10:12:55 schrieb Steffen Klassert:
> On Tue, Oct 22, 2013 at 03:46:38PM -0400, David Miller wrote:
> > From: Wolfgang Walter <linux@stwm.de>
> > Date: Tue, 22 Oct 2013 21:07:41 +0200
> > 
> > > Am Mittwoch, 2. Oktober 2013, 00:20:02 schrieb Hannes Frederic Sowa:
> > >> On Tue, Oct 01, 2013 at 06:39:32PM +0200, Wolfgang Walter wrote:
> > >> > All network traffic over the router become slow and sluggish. If one
> > >> > pings
> > >> > the router there is a packet loss. After about 2 minutes the traffic
> > >> > completely stalls for about 1 minute. Then it works again as in the
> > >> > beginning to then stall again. And so on.
> > >> 
> > >> Maybe dropwatch can give a first hint?
> > > 
> > > I finally found the problem:
> > > 
> > > In 3.10.x and 3.11.x the value of /proc/sys/net/ipv4/xfrm4_gc_thresh is
> > > 1024.
> > > 
> > > It is much higher in 3.4.x. If I increase this value in 3.10.x to the
> > > one I
> > > see on 3.4.x all works fine with 3.10.x
> > 
> > Steffen, here is yet another report about this issue.
> > 
> > I think we should resolve this soon, even bumping it to 2048 or 4096
> > and leaving it at that would be I think acceptable.
> 
> Yes, of course. Let's use 4096 as the default for ipv4 and ipv6.
> I'll take care of it next week.
> 

I don't know what this value actually means. But on 3.4.x it is much higher. 
On a machine with 512MB ram it is 32768, on a machine with 1GB ram it is 
262144 and with 16GB ram it is 4194304.

Regards,
-- 
Wolfgang Walter
Studentenwerk München
Anstalt des öffentlichen Rechts

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-23 11:33         ` Wolfgang Walter
@ 2013-10-23 12:00           ` Eric Dumazet
  2013-10-23 12:26             ` Steffen Klassert
  2013-10-23 15:57             ` Wolfgang Walter
  2013-10-23 12:04           ` Steffen Klassert
  1 sibling, 2 replies; 22+ messages in thread
From: Eric Dumazet @ 2013-10-23 12:00 UTC (permalink / raw)
  To: Wolfgang Walter; +Cc: Steffen Klassert, David Miller, hannes, netdev, klassert

On Wed, 2013-10-23 at 13:33 +0200, Wolfgang Walter wrote:

> I don't know what this value actually means. But on 3.4.x it is much higher. 
> On a machine with 512MB ram it is 32768, on a machine with 1GB ram it is 
> 262144 and with 16GB ram it is 4194304.
> 

Such huge values should not be needed. We should have at most one dst
per packet in flight.

On a loaded router, a NIC not using BQL could queue around 16,000
packets.

Of course, Qdisc layers could also store a lot of packets, but using the
default pfifo_fast is only adding 1000 packets per interface.

I guess using 65536 as the default value should be safe and reasonable

Have you tried using 32768 or 65536 ?

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-23 11:33         ` Wolfgang Walter
  2013-10-23 12:00           ` Eric Dumazet
@ 2013-10-23 12:04           ` Steffen Klassert
  2013-10-23 16:05             ` Wolfgang Walter
  1 sibling, 1 reply; 22+ messages in thread
From: Steffen Klassert @ 2013-10-23 12:04 UTC (permalink / raw)
  To: Wolfgang Walter; +Cc: David Miller, hannes, netdev, klassert

On Wed, Oct 23, 2013 at 01:33:14PM +0200, Wolfgang Walter wrote:
> Am Mittwoch, 23. Oktober 2013, 10:12:55 schrieb Steffen Klassert:
> > On Tue, Oct 22, 2013 at 03:46:38PM -0400, David Miller wrote:
> > > 
> > > I think we should resolve this soon, even bumping it to 2048 or 4096
> > > and leaving it at that would be I think acceptable.
> > 
> > Yes, of course. Let's use 4096 as the default for ipv4 and ipv6.
> > I'll take care of it next week.
> > 
> 
> I don't know what this value actually means. But on 3.4.x it is much higher. 
> On a machine with 512MB ram it is 32768, on a machine with 1GB ram it is 
> 262144 and with 16GB ram it is 4194304.
> 

Before  we removed the routing cache, the gc threshold was scaled along
with the maximum routing cache size (ip_rt_max_size). With the routing
cache removal, we lost the possibility to scale with ip_rt_max_size
and we had to choose a static default. Maybe we can try to tweak the
gc threshold again with the available memory somehow later. But to fix
it now, we need to find a reasonable default value. Would a default of
4096 meet your requirements?

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-23 12:00           ` Eric Dumazet
@ 2013-10-23 12:26             ` Steffen Klassert
  2013-10-23 15:57             ` Wolfgang Walter
  1 sibling, 0 replies; 22+ messages in thread
From: Steffen Klassert @ 2013-10-23 12:26 UTC (permalink / raw)
  To: Eric Dumazet; +Cc: Wolfgang Walter, David Miller, hannes, netdev, klassert

On Wed, Oct 23, 2013 at 05:00:01AM -0700, Eric Dumazet wrote:
> On Wed, 2013-10-23 at 13:33 +0200, Wolfgang Walter wrote:
> 
> > I don't know what this value actually means. But on 3.4.x it is much higher. 
> > On a machine with 512MB ram it is 32768, on a machine with 1GB ram it is 
> > 262144 and with 16GB ram it is 4194304.
> > 
> 
> Such huge values should not be needed. We should have at most one dst
> per packet in flight.

We have one cache entry for each packet flow we have already seen.
So a static value should be not too high, because remote entities
can control how many cache entries we have, similar to the routing
cache.

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-23 12:00           ` Eric Dumazet
  2013-10-23 12:26             ` Steffen Klassert
@ 2013-10-23 15:57             ` Wolfgang Walter
  1 sibling, 0 replies; 22+ messages in thread
From: Wolfgang Walter @ 2013-10-23 15:57 UTC (permalink / raw)
  To: Eric Dumazet; +Cc: Steffen Klassert, David Miller, hannes, netdev, klassert

Am Mittwoch, 23. Oktober 2013, 05:00:01 schrieb Eric Dumazet:
> On Wed, 2013-10-23 at 13:33 +0200, Wolfgang Walter wrote:
> > I don't know what this value actually means. But on 3.4.x it is much
> > higher. On a machine with 512MB ram it is 32768, on a machine with 1GB
> > ram it is 262144 and with 16GB ram it is 4194304.
> 
> Such huge values should not be needed. We should have at most one dst
> per packet in flight.
> 
> On a loaded router, a NIC not using BQL could queue around 16,000
> packets.
> 
> Of course, Qdisc layers could also store a lot of packets, but using the
> default pfifo_fast is only adding 1000 packets per interface.
> 
> I guess using 65536 as the default value should be safe and reasonable
> 
> Have you tried using 32768 or 65536 ?

I use 32768 on routers with 512MB. They usually have around 50 ipsec-tunnels 
and only about 10 interfaces including vlan-interfaces.

On larger ones I set the bigger values from 3.4.x. That one with 16GB has 
about 2000 ipsec-tunnels. It has about 80 interfaces (inlcuding vlan-
interfaces). Physically it has 8 interfaces with together about 30 hardware- 
queues.

Regards,
-- 
Wolfgang Walter
Studentenwerk München
Anstalt des öffentlichen Rechts

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-23 12:04           ` Steffen Klassert
@ 2013-10-23 16:05             ` Wolfgang Walter
  0 siblings, 0 replies; 22+ messages in thread
From: Wolfgang Walter @ 2013-10-23 16:05 UTC (permalink / raw)
  To: Steffen Klassert; +Cc: David Miller, hannes, netdev, klassert

Am Mittwoch, 23. Oktober 2013, 14:04:34 schrieb Steffen Klassert:
> On Wed, Oct 23, 2013 at 01:33:14PM +0200, Wolfgang Walter wrote:
> > Am Mittwoch, 23. Oktober 2013, 10:12:55 schrieb Steffen Klassert:
> > > On Tue, Oct 22, 2013 at 03:46:38PM -0400, David Miller wrote:
> > > > I think we should resolve this soon, even bumping it to 2048 or 4096
> > > > and leaving it at that would be I think acceptable.
> > > 
> > > Yes, of course. Let's use 4096 as the default for ipv4 and ipv6.
> > > I'll take care of it next week.
> > 
> > I don't know what this value actually means. But on 3.4.x it is much
> > higher. On a machine with 512MB ram it is 32768, on a machine with 1GB
> > ram it is 262144 and with 16GB ram it is 4194304.
> 
> Before  we removed the routing cache, the gc threshold was scaled along
> with the maximum routing cache size (ip_rt_max_size). With the routing
> cache removal, we lost the possibility to scale with ip_rt_max_size
> and we had to choose a static default. Maybe we can try to tweak the
> gc threshold again with the available memory somehow later. But to fix
> it now, we need to find a reasonable default value. Would a default of
> 4096 meet your requirements?

Can't say that at the moment. I can test it tonight. I assume that I don't 
need more than 262144 even on the large router as it worked on older hardware 
with less memory (with 3.4.x kernels). No router of us had a value less then 
32768 with 3.4.x.

Regards,
-- 
Wolfgang Walter
Studentenwerk München
Anstalt des öffentlichen Rechts

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
       [not found]   ` <1382547992.7572.31.camel@edumazet-glaptop.roam.corp.google.com>
@ 2013-10-23 22:52     ` Wolfgang Walter
  2013-10-25  8:01       ` Steffen Klassert
  2013-10-24 11:07     ` Wolfgang Walter
  1 sibling, 1 reply; 22+ messages in thread
From: Wolfgang Walter @ 2013-10-23 22:52 UTC (permalink / raw)
  To: Eric Dumazet; +Cc: David Miller, hannes, netdev, klassert

On Wednesday 23 October 2013 10:06:32 Eric Dumazet wrote:
> On Wed, 2013-10-23 at 18:59 +0200, Wolfgang Walter wrote:
> > Ah, ok. I use SLUB, but SLABINFO=y.
> > 
> > Without much traffic it is:
> > 
> > # grep dst /proc/slabinfo
> > xfrm_dst_cache      4435   4608    448   36    4 : tunables    0    0    0
> > : slabdata    128    128      0
> > 
> > on the big one.
> > 
> > I can recompile the kernels with SLAB instead of SLUB if SLAB gives more
> > usefull infos.
> Not needed, because it seems we do not merge this SLUB cache with
> another one.

Ok. I can't see xfrm_dst_cache on 32bit-systems, though.

> 
> So please post this information, because I believe the default should be
> 65536, not 1024 or 4096
> 

Indeed I already saw higher values, at the moment I see:

# while true; do grep dst /proc/slabinfo ; sleep 1; done
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0
xfrm_dst_cache     12708  12708    448   36    4 : tunables    0    0    0 : slabdata    353    353      0
xfrm_dst_cache     11529  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11599  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11599  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11599  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11599  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11599  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11599  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11599  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11599  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11599  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11599  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11633  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11633  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11633  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11700  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11763  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11798  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     11964  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     12139  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     12244  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     12312  12312    448   36    4 : tunables    0    0    0 : slabdata    342    342      0
xfrm_dst_cache     12492  12492    448   36    4 : tunables    0    0    0 : slabdata    347    347      0



Regards,
-- 
Wolfgang Walter
Studentenwerk München
Anstalt des öffentlichen Rechts

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
       [not found]   ` <1382547992.7572.31.camel@edumazet-glaptop.roam.corp.google.com>
  2013-10-23 22:52     ` Wolfgang Walter
@ 2013-10-24 11:07     ` Wolfgang Walter
  1 sibling, 0 replies; 22+ messages in thread
From: Wolfgang Walter @ 2013-10-24 11:07 UTC (permalink / raw)
  To: Eric Dumazet; +Cc: Steffen Klassert, David Miller, hannes, netdev, klassert

Am Mittwoch, 23. Oktober 2013, 10:06:32 schrieb Eric Dumazet:
> On Wed, 2013-10-23 at 18:59 +0200, Wolfgang Walter wrote:
> > Ah, ok. I use SLUB, but SLABINFO=y.
> > 
> > Without much traffic it is:
> > 
> > # grep dst /proc/slabinfo
> > xfrm_dst_cache      4435   4608    448   36    4 : tunables    0    0    0
> > : slabdata    128    128      0
> > 
> > on the big one.
> > 
> > I can recompile the kernels with SLAB instead of SLUB if SLAB gives more
> > usefull infos.
> Not needed, because it seems we do not merge this SLUB cache with
> another one.
> 
> So please post this information, because I believe the default should be
> 65536, not 1024 or 4096
> 
> Thanks

Here some more values when there is more activity. maximum I saw was:
xfrm_dst_cache     18180  18180    448   36    4 : tunables    0    0    0 : slabdata    505    505      0



# while true; do grep dst /proc/slabinfo ; sleep 1; done
xfrm_dst_cache      8234  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8234  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8328  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8428  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8505  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8505  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8540  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8609  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8609  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8633  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8633  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8680  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8680  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8706  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8706  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8706  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8724  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8724  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8751  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8751  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8786  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8829  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8829  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8829  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8829  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8829  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8829  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8829  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8864  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8864  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8864  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8922  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8922  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8945  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      8945  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      9094  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      9249  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      9308  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      9332  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      9495  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      9530  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      9593  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache      1908   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      1908   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      1908   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      1908   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      1908   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      1944   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      1944   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      1980   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      1980   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      2016   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      2016   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      2016   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      2016   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      2016   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      2052   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      2052   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      2052   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      2088   2088    448   36    4 : tunables    0    0    0 : slabdata     58     58      0
xfrm_dst_cache      2124   2124    448   36    4 : tunables    0    0    0 : slabdata     59     59      0
xfrm_dst_cache      2124   2124    448   36    4 : tunables    0    0    0 : slabdata     59     59      0
xfrm_dst_cache      2160   2160    448   36    4 : tunables    0    0    0 : slabdata     60     60      0
xfrm_dst_cache      2196   2196    448   36    4 : tunables    0    0    0 : slabdata     61     61      0
xfrm_dst_cache      2196   2196    448   36    4 : tunables    0    0    0 : slabdata     61     61      0
xfrm_dst_cache      2196   2196    448   36    4 : tunables    0    0    0 : slabdata     61     61      0
xfrm_dst_cache      2232   2232    448   36    4 : tunables    0    0    0 : slabdata     62     62      0
xfrm_dst_cache      2232   2232    448   36    4 : tunables    0    0    0 : slabdata     62     62      0
xfrm_dst_cache      2268   2268    448   36    4 : tunables    0    0    0 : slabdata     63     63      0
xfrm_dst_cache      2304   2304    448   36    4 : tunables    0    0    0 : slabdata     64     64      0
xfrm_dst_cache      2340   2340    448   36    4 : tunables    0    0    0 : slabdata     65     65      0
xfrm_dst_cache      2340   2340    448   36    4 : tunables    0    0    0 : slabdata     65     65      0
xfrm_dst_cache      2340   2340    448   36    4 : tunables    0    0    0 : slabdata     65     65      0
xfrm_dst_cache      2340   2340    448   36    4 : tunables    0    0    0 : slabdata     65     65      0
xfrm_dst_cache      2376   2376    448   36    4 : tunables    0    0    0 : slabdata     66     66      0
xfrm_dst_cache      2376   2376    448   36    4 : tunables    0    0    0 : slabdata     66     66      0
xfrm_dst_cache      2412   2412    448   36    4 : tunables    0    0    0 : slabdata     67     67      0
xfrm_dst_cache      2412   2412    448   36    4 : tunables    0    0    0 : slabdata     67     67      0
xfrm_dst_cache      2484   2484    448   36    4 : tunables    0    0    0 : slabdata     69     69      0
xfrm_dst_cache      2556   2556    448   36    4 : tunables    0    0    0 : slabdata     71     71      0
xfrm_dst_cache      2736   2736    448   36    4 : tunables    0    0    0 : slabdata     76     76      0
xfrm_dst_cache      2736   2736    448   36    4 : tunables    0    0    0 : slabdata     76     76      0
xfrm_dst_cache      2844   2844    448   36    4 : tunables    0    0    0 : slabdata     79     79      0
xfrm_dst_cache      2916   2916    448   36    4 : tunables    0    0    0 : slabdata     81     81      0
xfrm_dst_cache      2916   2916    448   36    4 : tunables    0    0    0 : slabdata     81     81      0
xfrm_dst_cache      2988   2988    448   36    4 : tunables    0    0    0 : slabdata     83     83      0
xfrm_dst_cache      2988   2988    448   36    4 : tunables    0    0    0 : slabdata     83     83      0
xfrm_dst_cache      3060   3060    448   36    4 : tunables    0    0    0 : slabdata     85     85      0
xfrm_dst_cache      3060   3060    448   36    4 : tunables    0    0    0 : slabdata     85     85      0
xfrm_dst_cache      3096   3096    448   36    4 : tunables    0    0    0 : slabdata     86     86      0
xfrm_dst_cache      3096   3096    448   36    4 : tunables    0    0    0 : slabdata     86     86      0
xfrm_dst_cache      3204   3204    448   36    4 : tunables    0    0    0 : slabdata     89     89      0
xfrm_dst_cache      3204   3204    448   36    4 : tunables    0    0    0 : slabdata     89     89      0
xfrm_dst_cache      3204   3204    448   36    4 : tunables    0    0    0 : slabdata     89     89      0
xfrm_dst_cache      3240   3240    448   36    4 : tunables    0    0    0 : slabdata     90     90      0
xfrm_dst_cache      3348   3348    448   36    4 : tunables    0    0    0 : slabdata     93     93      0
xfrm_dst_cache      3384   3384    448   36    4 : tunables    0    0    0 : slabdata     94     94      0
xfrm_dst_cache      3420   3420    448   36    4 : tunables    0    0    0 : slabdata     95     95      0
xfrm_dst_cache      3528   3528    448   36    4 : tunables    0    0    0 : slabdata     98     98      0
xfrm_dst_cache      3564   3564    448   36    4 : tunables    0    0    0 : slabdata     99     99      0
xfrm_dst_cache      3672   3672    448   36    4 : tunables    0    0    0 : slabdata    102    102      0
xfrm_dst_cache      3672   3672    448   36    4 : tunables    0    0    0 : slabdata    102    102      0
xfrm_dst_cache      3708   3708    448   36    4 : tunables    0    0    0 : slabdata    103    103      0
xfrm_dst_cache      3708   3708    448   36    4 : tunables    0    0    0 : slabdata    103    103      0
xfrm_dst_cache      3744   3744    448   36    4 : tunables    0    0    0 : slabdata    104    104      0
xfrm_dst_cache      3780   3780    448   36    4 : tunables    0    0    0 : slabdata    105    105      0
xfrm_dst_cache      3816   3816    448   36    4 : tunables    0    0    0 : slabdata    106    106      0
xfrm_dst_cache      3816   3816    448   36    4 : tunables    0    0    0 : slabdata    106    106      0
xfrm_dst_cache      3816   3816    448   36    4 : tunables    0    0    0 : slabdata    106    106      0
xfrm_dst_cache      3816   3816    448   36    4 : tunables    0    0    0 : slabdata    106    106      0
xfrm_dst_cache      3816   3816    448   36    4 : tunables    0    0    0 : slabdata    106    106      0
xfrm_dst_cache      3888   3888    448   36    4 : tunables    0    0    0 : slabdata    108    108      0
xfrm_dst_cache      3924   3924    448   36    4 : tunables    0    0    0 : slabdata    109    109      0
xfrm_dst_cache      3960   3960    448   36    4 : tunables    0    0    0 : slabdata    110    110      0
xfrm_dst_cache      3960   3960    448   36    4 : tunables    0    0    0 : slabdata    110    110      0
xfrm_dst_cache      3960   3960    448   36    4 : tunables    0    0    0 : slabdata    110    110      0
xfrm_dst_cache      3996   3996    448   36    4 : tunables    0    0    0 : slabdata    111    111      0
xfrm_dst_cache      4032   4032    448   36    4 : tunables    0    0    0 : slabdata    112    112      0
xfrm_dst_cache      4104   4104    448   36    4 : tunables    0    0    0 : slabdata    114    114      0
xfrm_dst_cache      4104   4104    448   36    4 : tunables    0    0    0 : slabdata    114    114      0
xfrm_dst_cache      4104   4104    448   36    4 : tunables    0    0    0 : slabdata    114    114      0
xfrm_dst_cache      4104   4104    448   36    4 : tunables    0    0    0 : slabdata    114    114      0
xfrm_dst_cache      4176   4176    448   36    4 : tunables    0    0    0 : slabdata    116    116      0
xfrm_dst_cache      4320   4320    448   36    4 : tunables    0    0    0 : slabdata    120    120      0
xfrm_dst_cache      4392   4392    448   36    4 : tunables    0    0    0 : slabdata    122    122      0
xfrm_dst_cache      4608   4608    448   36    4 : tunables    0    0    0 : slabdata    128    128      0
xfrm_dst_cache      4716   4716    448   36    4 : tunables    0    0    0 : slabdata    131    131      0
xfrm_dst_cache      4860   4860    448   36    4 : tunables    0    0    0 : slabdata    135    135      0
xfrm_dst_cache      5004   5004    448   36    4 : tunables    0    0    0 : slabdata    139    139      0
xfrm_dst_cache      5112   5112    448   36    4 : tunables    0    0    0 : slabdata    142    142      0
xfrm_dst_cache      5256   5256    448   36    4 : tunables    0    0    0 : slabdata    146    146      0
xfrm_dst_cache      5436   5436    448   36    4 : tunables    0    0    0 : slabdata    151    151      0
xfrm_dst_cache      5580   5580    448   36    4 : tunables    0    0    0 : slabdata    155    155      0
xfrm_dst_cache      5688   5688    448   36    4 : tunables    0    0    0 : slabdata    158    158      0
xfrm_dst_cache      5904   5904    448   36    4 : tunables    0    0    0 : slabdata    164    164      0
xfrm_dst_cache      6048   6048    448   36    4 : tunables    0    0    0 : slabdata    168    168      0
xfrm_dst_cache      6120   6120    448   36    4 : tunables    0    0    0 : slabdata    170    170      0
xfrm_dst_cache      6228   6228    448   36    4 : tunables    0    0    0 : slabdata    173    173      0
xfrm_dst_cache      6660   6660    448   36    4 : tunables    0    0    0 : slabdata    185    185      0
xfrm_dst_cache      6768   6768    448   36    4 : tunables    0    0    0 : slabdata    188    188      0
xfrm_dst_cache      6876   6876    448   36    4 : tunables    0    0    0 : slabdata    191    191      0
xfrm_dst_cache      6984   6984    448   36    4 : tunables    0    0    0 : slabdata    194    194      0
xfrm_dst_cache      7164   7164    448   36    4 : tunables    0    0    0 : slabdata    199    199      0
xfrm_dst_cache      7272   7272    448   36    4 : tunables    0    0    0 : slabdata    202    202      0
xfrm_dst_cache      7344   7344    448   36    4 : tunables    0    0    0 : slabdata    204    204      0
xfrm_dst_cache      7452   7452    448   36    4 : tunables    0    0    0 : slabdata    207    207      0
xfrm_dst_cache      7560   7560    448   36    4 : tunables    0    0    0 : slabdata    210    210      0
xfrm_dst_cache      7668   7668    448   36    4 : tunables    0    0    0 : slabdata    213    213      0
xfrm_dst_cache      7740   7740    448   36    4 : tunables    0    0    0 : slabdata    215    215      0
xfrm_dst_cache      7848   7848    448   36    4 : tunables    0    0    0 : slabdata    218    218      0
xfrm_dst_cache      7956   7956    448   36    4 : tunables    0    0    0 : slabdata    221    221      0
xfrm_dst_cache      8028   8028    448   36    4 : tunables    0    0    0 : slabdata    223    223      0
xfrm_dst_cache      8172   8172    448   36    4 : tunables    0    0    0 : slabdata    227    227      0
xfrm_dst_cache      8316   8316    448   36    4 : tunables    0    0    0 : slabdata    231    231      0
xfrm_dst_cache      8712   8712    448   36    4 : tunables    0    0    0 : slabdata    242    242      0
xfrm_dst_cache      8820   8820    448   36    4 : tunables    0    0    0 : slabdata    245    245      0
xfrm_dst_cache      9144   9144    448   36    4 : tunables    0    0    0 : slabdata    254    254      0
xfrm_dst_cache      9288   9288    448   36    4 : tunables    0    0    0 : slabdata    258    258      0
xfrm_dst_cache      9432   9432    448   36    4 : tunables    0    0    0 : slabdata    262    262      0
xfrm_dst_cache      9540   9540    448   36    4 : tunables    0    0    0 : slabdata    265    265      0
xfrm_dst_cache      9612   9612    448   36    4 : tunables    0    0    0 : slabdata    267    267      0
xfrm_dst_cache      9720   9720    448   36    4 : tunables    0    0    0 : slabdata    270    270      0
xfrm_dst_cache      9792   9792    448   36    4 : tunables    0    0    0 : slabdata    272    272      0
xfrm_dst_cache     10044  10044    448   36    4 : tunables    0    0    0 : slabdata    279    279      0
xfrm_dst_cache     10152  10152    448   36    4 : tunables    0    0    0 : slabdata    282    282      0
xfrm_dst_cache     10332  10332    448   36    4 : tunables    0    0    0 : slabdata    287    287      0
xfrm_dst_cache     10440  10440    448   36    4 : tunables    0    0    0 : slabdata    290    290      0
xfrm_dst_cache     10512  10512    448   36    4 : tunables    0    0    0 : slabdata    292    292      0
xfrm_dst_cache     10620  10620    448   36    4 : tunables    0    0    0 : slabdata    295    295      0
xfrm_dst_cache     10764  10764    448   36    4 : tunables    0    0    0 : slabdata    299    299      0
xfrm_dst_cache     11016  11016    448   36    4 : tunables    0    0    0 : slabdata    306    306      0
xfrm_dst_cache     11088  11088    448   36    4 : tunables    0    0    0 : slabdata    308    308      0
xfrm_dst_cache     11232  11232    448   36    4 : tunables    0    0    0 : slabdata    312    312      0
xfrm_dst_cache     11304  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache     11448  11448    448   36    4 : tunables    0    0    0 : slabdata    318    318      0
xfrm_dst_cache     11520  11520    448   36    4 : tunables    0    0    0 : slabdata    320    320      0
xfrm_dst_cache     11700  11700    448   36    4 : tunables    0    0    0 : slabdata    325    325      0
xfrm_dst_cache     11952  11952    448   36    4 : tunables    0    0    0 : slabdata    332    332      0
xfrm_dst_cache     12348  12348    448   36    4 : tunables    0    0    0 : slabdata    343    343      0
xfrm_dst_cache     12672  12672    448   36    4 : tunables    0    0    0 : slabdata    352    352      0
xfrm_dst_cache     12816  12816    448   36    4 : tunables    0    0    0 : slabdata    356    356      0
xfrm_dst_cache     12996  12996    448   36    4 : tunables    0    0    0 : slabdata    361    361      0
xfrm_dst_cache     13104  13104    448   36    4 : tunables    0    0    0 : slabdata    364    364      0
xfrm_dst_cache     13284  13284    448   36    4 : tunables    0    0    0 : slabdata    369    369      0
xfrm_dst_cache     13356  13356    448   36    4 : tunables    0    0    0 : slabdata    371    371      0
xfrm_dst_cache     13536  13536    448   36    4 : tunables    0    0    0 : slabdata    376    376      0
xfrm_dst_cache     13608  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     13752  13752    448   36    4 : tunables    0    0    0 : slabdata    382    382      0
xfrm_dst_cache     11642  12348    448   36    4 : tunables    0    0    0 : slabdata    343    343      0
xfrm_dst_cache     11698  12348    448   36    4 : tunables    0    0    0 : slabdata    343    343      0
xfrm_dst_cache     11811  12348    448   36    4 : tunables    0    0    0 : slabdata    343    343      0
xfrm_dst_cache     11905  12348    448   36    4 : tunables    0    0    0 : slabdata    343    343      0
xfrm_dst_cache     12040  12348    448   36    4 : tunables    0    0    0 : slabdata    343    343      0
xfrm_dst_cache     12098  12348    448   36    4 : tunables    0    0    0 : slabdata    343    343      0
xfrm_dst_cache     12219  12348    448   36    4 : tunables    0    0    0 : slabdata    343    343      0
xfrm_dst_cache     12420  12420    448   36    4 : tunables    0    0    0 : slabdata    345    345      0
xfrm_dst_cache     10092  10872    448   36    4 : tunables    0    0    0 : slabdata    302    302      0
xfrm_dst_cache     10123  10872    448   36    4 : tunables    0    0    0 : slabdata    302    302      0
xfrm_dst_cache     10222  10872    448   36    4 : tunables    0    0    0 : slabdata    302    302      0
xfrm_dst_cache     10303  10872    448   36    4 : tunables    0    0    0 : slabdata    302    302      0
xfrm_dst_cache     10371  10872    448   36    4 : tunables    0    0    0 : slabdata    302    302      0
xfrm_dst_cache     10440  10872    448   36    4 : tunables    0    0    0 : slabdata    302    302      0
xfrm_dst_cache     10686  10872    448   36    4 : tunables    0    0    0 : slabdata    302    302      0
xfrm_dst_cache     10829  10872    448   36    4 : tunables    0    0    0 : slabdata    302    302      0
xfrm_dst_cache     10908  10908    448   36    4 : tunables    0    0    0 : slabdata    303    303      0
xfrm_dst_cache     11016  11016    448   36    4 : tunables    0    0    0 : slabdata    306    306      0
xfrm_dst_cache     11160  11160    448   36    4 : tunables    0    0    0 : slabdata    310    310      0
xfrm_dst_cache     11556  11556    448   36    4 : tunables    0    0    0 : slabdata    321    321      0
xfrm_dst_cache     11628  11628    448   36    4 : tunables    0    0    0 : slabdata    323    323      0
xfrm_dst_cache     11700  11700    448   36    4 : tunables    0    0    0 : slabdata    325    325      0
xfrm_dst_cache     11916  11916    448   36    4 : tunables    0    0    0 : slabdata    331    331      0
xfrm_dst_cache     12240  12240    448   36    4 : tunables    0    0    0 : slabdata    340    340      0
xfrm_dst_cache     12384  12384    448   36    4 : tunables    0    0    0 : slabdata    344    344      0
xfrm_dst_cache     12384  12384    448   36    4 : tunables    0    0    0 : slabdata    344    344      0
xfrm_dst_cache     12816  12816    448   36    4 : tunables    0    0    0 : slabdata    356    356      0
xfrm_dst_cache     13176  13176    448   36    4 : tunables    0    0    0 : slabdata    366    366      0
xfrm_dst_cache     13608  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     13932  13932    448   36    4 : tunables    0    0    0 : slabdata    387    387      0
xfrm_dst_cache     14220  14220    448   36    4 : tunables    0    0    0 : slabdata    395    395      0
xfrm_dst_cache     14364  14364    448   36    4 : tunables    0    0    0 : slabdata    399    399      0
xfrm_dst_cache     12351  12924    448   36    4 : tunables    0    0    0 : slabdata    359    359      0
xfrm_dst_cache     12485  12924    448   36    4 : tunables    0    0    0 : slabdata    359    359      0
xfrm_dst_cache     12610  12924    448   36    4 : tunables    0    0    0 : slabdata    359    359      0
xfrm_dst_cache     12762  12924    448   36    4 : tunables    0    0    0 : slabdata    359    359      0
xfrm_dst_cache     12872  12924    448   36    4 : tunables    0    0    0 : slabdata    359    359      0
xfrm_dst_cache     12996  12996    448   36    4 : tunables    0    0    0 : slabdata    361    361      0
xfrm_dst_cache     13140  13140    448   36    4 : tunables    0    0    0 : slabdata    365    365      0
xfrm_dst_cache     13284  13284    448   36    4 : tunables    0    0    0 : slabdata    369    369      0
xfrm_dst_cache     13428  13428    448   36    4 : tunables    0    0    0 : slabdata    373    373      0
xfrm_dst_cache     13572  13572    448   36    4 : tunables    0    0    0 : slabdata    377    377      0
xfrm_dst_cache     13716  13716    448   36    4 : tunables    0    0    0 : slabdata    381    381      0
xfrm_dst_cache     13824  13824    448   36    4 : tunables    0    0    0 : slabdata    384    384      0
xfrm_dst_cache     14076  14076    448   36    4 : tunables    0    0    0 : slabdata    391    391      0
xfrm_dst_cache     14184  14184    448   36    4 : tunables    0    0    0 : slabdata    394    394      0
xfrm_dst_cache     14328  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14436  14436    448   36    4 : tunables    0    0    0 : slabdata    401    401      0
xfrm_dst_cache     14544  14544    448   36    4 : tunables    0    0    0 : slabdata    404    404      0
xfrm_dst_cache     14688  14688    448   36    4 : tunables    0    0    0 : slabdata    408    408      0
xfrm_dst_cache     14832  14832    448   36    4 : tunables    0    0    0 : slabdata    412    412      0
xfrm_dst_cache     14940  14940    448   36    4 : tunables    0    0    0 : slabdata    415    415      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15120  15120    448   36    4 : tunables    0    0    0 : slabdata    420    420      0
xfrm_dst_cache     15264  15264    448   36    4 : tunables    0    0    0 : slabdata    424    424      0
xfrm_dst_cache     13223  14256    448   36    4 : tunables    0    0    0 : slabdata    396    396      0
xfrm_dst_cache     13294  14256    448   36    4 : tunables    0    0    0 : slabdata    396    396      0
xfrm_dst_cache     13422  14256    448   36    4 : tunables    0    0    0 : slabdata    396    396      0
xfrm_dst_cache     13846  14256    448   36    4 : tunables    0    0    0 : slabdata    396    396      0
xfrm_dst_cache     14122  14256    448   36    4 : tunables    0    0    0 : slabdata    396    396      0
xfrm_dst_cache     14328  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14436  14436    448   36    4 : tunables    0    0    0 : slabdata    401    401      0
xfrm_dst_cache     14544  14544    448   36    4 : tunables    0    0    0 : slabdata    404    404      0
xfrm_dst_cache     14616  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     12563  13968    448   36    4 : tunables    0    0    0 : slabdata    388    388      0
xfrm_dst_cache     12717  13968    448   36    4 : tunables    0    0    0 : slabdata    388    388      0
xfrm_dst_cache     13022  13968    448   36    4 : tunables    0    0    0 : slabdata    388    388      0
xfrm_dst_cache     13105  13968    448   36    4 : tunables    0    0    0 : slabdata    388    388      0
xfrm_dst_cache     13290  13968    448   36    4 : tunables    0    0    0 : slabdata    388    388      0
xfrm_dst_cache     13398  13968    448   36    4 : tunables    0    0    0 : slabdata    388    388      0
xfrm_dst_cache     13596  13968    448   36    4 : tunables    0    0    0 : slabdata    388    388      0
xfrm_dst_cache     13749  13968    448   36    4 : tunables    0    0    0 : slabdata    388    388      0
xfrm_dst_cache     12052  12780    448   36    4 : tunables    0    0    0 : slabdata    355    355      0
xfrm_dst_cache     12133  12780    448   36    4 : tunables    0    0    0 : slabdata    355    355      0
xfrm_dst_cache     12193  12780    448   36    4 : tunables    0    0    0 : slabdata    355    355      0
xfrm_dst_cache     12422  12780    448   36    4 : tunables    0    0    0 : slabdata    355    355      0
xfrm_dst_cache     12780  12780    448   36    4 : tunables    0    0    0 : slabdata    355    355      0
xfrm_dst_cache     12852  12852    448   36    4 : tunables    0    0    0 : slabdata    357    357      0
xfrm_dst_cache     12996  12996    448   36    4 : tunables    0    0    0 : slabdata    361    361      0
xfrm_dst_cache     13068  13068    448   36    4 : tunables    0    0    0 : slabdata    363    363      0
xfrm_dst_cache     13140  13140    448   36    4 : tunables    0    0    0 : slabdata    365    365      0
xfrm_dst_cache     13284  13284    448   36    4 : tunables    0    0    0 : slabdata    369    369      0
xfrm_dst_cache     13356  13356    448   36    4 : tunables    0    0    0 : slabdata    371    371      0
xfrm_dst_cache     13428  13428    448   36    4 : tunables    0    0    0 : slabdata    373    373      0
xfrm_dst_cache     13572  13572    448   36    4 : tunables    0    0    0 : slabdata    377    377      0
xfrm_dst_cache     13644  13644    448   36    4 : tunables    0    0    0 : slabdata    379    379      0
xfrm_dst_cache     13788  13788    448   36    4 : tunables    0    0    0 : slabdata    383    383      0
xfrm_dst_cache     13860  13860    448   36    4 : tunables    0    0    0 : slabdata    385    385      0
xfrm_dst_cache     14004  14004    448   36    4 : tunables    0    0    0 : slabdata    389    389      0
xfrm_dst_cache     14328  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     12166  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12233  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12327  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12388  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12429  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12498  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12518  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12518  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12518  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12518  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12518  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12539  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12539  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12539  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12632  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12697  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12763  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12912  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     12984  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     13050  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     13126  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     13262  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     13331  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     13399  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     13554  13608    448   36    4 : tunables    0    0    0 : slabdata    378    378      0
xfrm_dst_cache     13716  13716    448   36    4 : tunables    0    0    0 : slabdata    381    381      0
xfrm_dst_cache     13716  13716    448   36    4 : tunables    0    0    0 : slabdata    381    381      0
xfrm_dst_cache     13716  13716    448   36    4 : tunables    0    0    0 : slabdata    381    381      0
xfrm_dst_cache     13716  13716    448   36    4 : tunables    0    0    0 : slabdata    381    381      0
xfrm_dst_cache     13716  13716    448   36    4 : tunables    0    0    0 : slabdata    381    381      0
xfrm_dst_cache     13752  13752    448   36    4 : tunables    0    0    0 : slabdata    382    382      0
xfrm_dst_cache     13824  13824    448   36    4 : tunables    0    0    0 : slabdata    384    384      0
xfrm_dst_cache     13896  13896    448   36    4 : tunables    0    0    0 : slabdata    386    386      0
xfrm_dst_cache     13968  13968    448   36    4 : tunables    0    0    0 : slabdata    388    388      0
xfrm_dst_cache     14040  14040    448   36    4 : tunables    0    0    0 : slabdata    390    390      0
xfrm_dst_cache     14184  14184    448   36    4 : tunables    0    0    0 : slabdata    394    394      0
xfrm_dst_cache     14256  14256    448   36    4 : tunables    0    0    0 : slabdata    396    396      0
xfrm_dst_cache     14328  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     11782  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     11835  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     11913  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     11980  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12057  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12148  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12210  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12266  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12393  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12449  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12523  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12603  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12653  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12744  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12780  12780    448   36    4 : tunables    0    0    0 : slabdata    355    355      0
xfrm_dst_cache     12816  12816    448   36    4 : tunables    0    0    0 : slabdata    356    356      0
xfrm_dst_cache     12816  12816    448   36    4 : tunables    0    0    0 : slabdata    356    356      0
xfrm_dst_cache     12852  12852    448   36    4 : tunables    0    0    0 : slabdata    357    357      0
xfrm_dst_cache     12888  12888    448   36    4 : tunables    0    0    0 : slabdata    358    358      0
xfrm_dst_cache     12888  12888    448   36    4 : tunables    0    0    0 : slabdata    358    358      0
xfrm_dst_cache     12924  12924    448   36    4 : tunables    0    0    0 : slabdata    359    359      0
xfrm_dst_cache     12924  12924    448   36    4 : tunables    0    0    0 : slabdata    359    359      0
xfrm_dst_cache     12960  12960    448   36    4 : tunables    0    0    0 : slabdata    360    360      0
xfrm_dst_cache     12960  12960    448   36    4 : tunables    0    0    0 : slabdata    360    360      0
xfrm_dst_cache     12960  12960    448   36    4 : tunables    0    0    0 : slabdata    360    360      0
xfrm_dst_cache     12996  12996    448   36    4 : tunables    0    0    0 : slabdata    361    361      0
xfrm_dst_cache     12996  12996    448   36    4 : tunables    0    0    0 : slabdata    361    361      0
xfrm_dst_cache     12996  12996    448   36    4 : tunables    0    0    0 : slabdata    361    361      0
xfrm_dst_cache     12996  12996    448   36    4 : tunables    0    0    0 : slabdata    361    361      0
xfrm_dst_cache     13104  13104    448   36    4 : tunables    0    0    0 : slabdata    364    364      0
xfrm_dst_cache     13104  13104    448   36    4 : tunables    0    0    0 : slabdata    364    364      0
xfrm_dst_cache     13104  13104    448   36    4 : tunables    0    0    0 : slabdata    364    364      0
xfrm_dst_cache     13104  13104    448   36    4 : tunables    0    0    0 : slabdata    364    364      0
xfrm_dst_cache     13104  13104    448   36    4 : tunables    0    0    0 : slabdata    364    364      0
xfrm_dst_cache     13104  13104    448   36    4 : tunables    0    0    0 : slabdata    364    364      0
xfrm_dst_cache     13104  13104    448   36    4 : tunables    0    0    0 : slabdata    364    364      0
xfrm_dst_cache     13104  13104    448   36    4 : tunables    0    0    0 : slabdata    364    364      0
xfrm_dst_cache     13140  13140    448   36    4 : tunables    0    0    0 : slabdata    365    365      0
xfrm_dst_cache     13176  13176    448   36    4 : tunables    0    0    0 : slabdata    366    366      0
xfrm_dst_cache     13176  13176    448   36    4 : tunables    0    0    0 : slabdata    366    366      0
xfrm_dst_cache     13176  13176    448   36    4 : tunables    0    0    0 : slabdata    366    366      0
xfrm_dst_cache     13212  13212    448   36    4 : tunables    0    0    0 : slabdata    367    367      0
xfrm_dst_cache     13356  13356    448   36    4 : tunables    0    0    0 : slabdata    371    371      0
xfrm_dst_cache     13428  13428    448   36    4 : tunables    0    0    0 : slabdata    373    373      0
xfrm_dst_cache     13536  13536    448   36    4 : tunables    0    0    0 : slabdata    376    376      0
xfrm_dst_cache     13572  13572    448   36    4 : tunables    0    0    0 : slabdata    377    377      0
xfrm_dst_cache     13572  13572    448   36    4 : tunables    0    0    0 : slabdata    377    377      0
xfrm_dst_cache     13572  13572    448   36    4 : tunables    0    0    0 : slabdata    377    377      0
xfrm_dst_cache     13680  13680    448   36    4 : tunables    0    0    0 : slabdata    380    380      0
xfrm_dst_cache     13752  13752    448   36    4 : tunables    0    0    0 : slabdata    382    382      0
xfrm_dst_cache     13788  13788    448   36    4 : tunables    0    0    0 : slabdata    383    383      0
xfrm_dst_cache     13824  13824    448   36    4 : tunables    0    0    0 : slabdata    384    384      0
xfrm_dst_cache     13824  13824    448   36    4 : tunables    0    0    0 : slabdata    384    384      0
xfrm_dst_cache     13860  13860    448   36    4 : tunables    0    0    0 : slabdata    385    385      0
xfrm_dst_cache     13860  13860    448   36    4 : tunables    0    0    0 : slabdata    385    385      0
xfrm_dst_cache     13860  13860    448   36    4 : tunables    0    0    0 : slabdata    385    385      0
xfrm_dst_cache     13860  13860    448   36    4 : tunables    0    0    0 : slabdata    385    385      0
xfrm_dst_cache     13860  13860    448   36    4 : tunables    0    0    0 : slabdata    385    385      0
xfrm_dst_cache     13896  13896    448   36    4 : tunables    0    0    0 : slabdata    386    386      0
xfrm_dst_cache     13896  13896    448   36    4 : tunables    0    0    0 : slabdata    386    386      0
xfrm_dst_cache     13968  13968    448   36    4 : tunables    0    0    0 : slabdata    388    388      0
xfrm_dst_cache     14112  14112    448   36    4 : tunables    0    0    0 : slabdata    392    392      0
xfrm_dst_cache     14112  14112    448   36    4 : tunables    0    0    0 : slabdata    392    392      0
xfrm_dst_cache     14112  14112    448   36    4 : tunables    0    0    0 : slabdata    392    392      0
xfrm_dst_cache     14112  14112    448   36    4 : tunables    0    0    0 : slabdata    392    392      0
xfrm_dst_cache     14112  14112    448   36    4 : tunables    0    0    0 : slabdata    392    392      0
xfrm_dst_cache     14112  14112    448   36    4 : tunables    0    0    0 : slabdata    392    392      0
xfrm_dst_cache     14112  14112    448   36    4 : tunables    0    0    0 : slabdata    392    392      0
xfrm_dst_cache     14184  14184    448   36    4 : tunables    0    0    0 : slabdata    394    394      0
xfrm_dst_cache     14220  14220    448   36    4 : tunables    0    0    0 : slabdata    395    395      0
xfrm_dst_cache     14220  14220    448   36    4 : tunables    0    0    0 : slabdata    395    395      0
xfrm_dst_cache     14220  14220    448   36    4 : tunables    0    0    0 : slabdata    395    395      0
xfrm_dst_cache     14328  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14328  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14328  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14328  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14400  14400    448   36    4 : tunables    0    0    0 : slabdata    400    400      0
xfrm_dst_cache     14400  14400    448   36    4 : tunables    0    0    0 : slabdata    400    400      0
xfrm_dst_cache     12778  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     12817  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     12949  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     12972  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13026  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13112  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13168  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13237  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13303  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13303  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13303  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13303  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13303  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13311  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13346  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13365  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13365  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13462  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13522  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13522  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13557  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13567  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13567  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13567  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13593  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13623  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13623  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13686  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13731  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13731  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13731  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13731  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13799  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13799  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13883  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13906  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13906  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13906  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13906  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13941  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13974  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13974  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     13974  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14001  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14001  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14020  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14046  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14060  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14060  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14074  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14074  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14074  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14223  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14242  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14257  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14265  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14328  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     14364  14364    448   36    4 : tunables    0    0    0 : slabdata    399    399      0
xfrm_dst_cache     14364  14364    448   36    4 : tunables    0    0    0 : slabdata    399    399      0
xfrm_dst_cache     14400  14400    448   36    4 : tunables    0    0    0 : slabdata    400    400      0
xfrm_dst_cache     14436  14436    448   36    4 : tunables    0    0    0 : slabdata    401    401      0
xfrm_dst_cache     14544  14544    448   36    4 : tunables    0    0    0 : slabdata    404    404      0
xfrm_dst_cache     14544  14544    448   36    4 : tunables    0    0    0 : slabdata    404    404      0
xfrm_dst_cache     14580  14580    448   36    4 : tunables    0    0    0 : slabdata    405    405      0
xfrm_dst_cache     14580  14580    448   36    4 : tunables    0    0    0 : slabdata    405    405      0
xfrm_dst_cache     14580  14580    448   36    4 : tunables    0    0    0 : slabdata    405    405      0
xfrm_dst_cache     14580  14580    448   36    4 : tunables    0    0    0 : slabdata    405    405      0
xfrm_dst_cache     14580  14580    448   36    4 : tunables    0    0    0 : slabdata    405    405      0
xfrm_dst_cache     14580  14580    448   36    4 : tunables    0    0    0 : slabdata    405    405      0
xfrm_dst_cache     14580  14580    448   36    4 : tunables    0    0    0 : slabdata    405    405      0
xfrm_dst_cache     14688  14688    448   36    4 : tunables    0    0    0 : slabdata    408    408      0
xfrm_dst_cache     14724  14724    448   36    4 : tunables    0    0    0 : slabdata    409    409      0
xfrm_dst_cache     14724  14724    448   36    4 : tunables    0    0    0 : slabdata    409    409      0
xfrm_dst_cache     14760  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14796  14796    448   36    4 : tunables    0    0    0 : slabdata    411    411      0
xfrm_dst_cache     14832  14832    448   36    4 : tunables    0    0    0 : slabdata    412    412      0
xfrm_dst_cache     14832  14832    448   36    4 : tunables    0    0    0 : slabdata    412    412      0
xfrm_dst_cache     14832  14832    448   36    4 : tunables    0    0    0 : slabdata    412    412      0
xfrm_dst_cache     14832  14832    448   36    4 : tunables    0    0    0 : slabdata    412    412      0
xfrm_dst_cache     14832  14832    448   36    4 : tunables    0    0    0 : slabdata    412    412      0
xfrm_dst_cache     14868  14868    448   36    4 : tunables    0    0    0 : slabdata    413    413      0
xfrm_dst_cache     14868  14868    448   36    4 : tunables    0    0    0 : slabdata    413    413      0
xfrm_dst_cache     14904  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     14904  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     14940  14940    448   36    4 : tunables    0    0    0 : slabdata    415    415      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15048  15048    448   36    4 : tunables    0    0    0 : slabdata    418    418      0
xfrm_dst_cache     15084  15084    448   36    4 : tunables    0    0    0 : slabdata    419    419      0
xfrm_dst_cache     15084  15084    448   36    4 : tunables    0    0    0 : slabdata    419    419      0
xfrm_dst_cache     15120  15120    448   36    4 : tunables    0    0    0 : slabdata    420    420      0
xfrm_dst_cache     15120  15120    448   36    4 : tunables    0    0    0 : slabdata    420    420      0
xfrm_dst_cache     15228  15228    448   36    4 : tunables    0    0    0 : slabdata    423    423      0
xfrm_dst_cache     12883  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12883  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12883  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12883  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12883  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12883  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12883  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12895  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12895  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12895  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12895  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12895  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12895  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12895  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12930  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12930  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12930  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12930  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12930  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12963  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13021  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13021  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13039  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13039  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13039  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13039  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13039  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13074  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13074  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13074  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13074  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13074  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13074  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13074  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13108  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13108  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13108  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13108  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13141  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13179  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13179  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13179  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13214  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13214  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13258  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13307  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13360  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13360  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13461  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13529  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13598  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13598  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13598  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13675  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13675  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13675  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13675  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13675  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13709  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13744  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13777  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13777  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13843  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13947  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13947  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13947  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13999  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13999  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14064  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14136  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14221  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14264  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14381  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14472  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14526  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14609  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14721  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14796  14796    448   36    4 : tunables    0    0    0 : slabdata    411    411      0
xfrm_dst_cache     14868  14868    448   36    4 : tunables    0    0    0 : slabdata    413    413      0
xfrm_dst_cache     14940  14940    448   36    4 : tunables    0    0    0 : slabdata    415    415      0
xfrm_dst_cache     15048  15048    448   36    4 : tunables    0    0    0 : slabdata    418    418      0
xfrm_dst_cache     15192  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     13498  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     13613  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     13705  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     13830  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     14003  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     14083  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     14224  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     14369  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     14480  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     14561  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     12620  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12715  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12796  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12835  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12868  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12868  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12868  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12929  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12953  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12953  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12961  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12987  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     12987  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13017  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13017  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13017  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13088  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13088  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13088  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13088  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13088  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13088  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13088  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13088  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13098  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13117  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13183  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13281  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13311  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13346  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13346  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13346  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13346  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13346  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     13346  14904    448   36    4 : tunables    0    0    0 : slabdata    414    414      0
xfrm_dst_cache     11183  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11183  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11195  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11453  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11485  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11503  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11503  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11567  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11642  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11702  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11780  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     11938  14616    448   36    4 : tunables    0    0    0 : slabdata    406    406      0
xfrm_dst_cache     10077  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     10165  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache     10284  14328    448   36    4 : tunables    0    0    0 : slabdata    398    398      0
xfrm_dst_cache      9119  14076    448   36    4 : tunables    0    0    0 : slabdata    391    391      0
xfrm_dst_cache      7707  13932    448   36    4 : tunables    0    0    0 : slabdata    387    387      0
xfrm_dst_cache      7778  13932    448   36    4 : tunables    0    0    0 : slabdata    387    387      0
xfrm_dst_cache      7936  13932    448   36    4 : tunables    0    0    0 : slabdata    387    387      0
xfrm_dst_cache      7969  13932    448   36    4 : tunables    0    0    0 : slabdata    387    387      0
xfrm_dst_cache      7988  13932    448   36    4 : tunables    0    0    0 : slabdata    387    387      0
xfrm_dst_cache      8020  13932    448   36    4 : tunables    0    0    0 : slabdata    387    387      0
xfrm_dst_cache      1980   2160    448   36    4 : tunables    0    0    0 : slabdata     60     60      0
xfrm_dst_cache      1980   2160    448   36    4 : tunables    0    0    0 : slabdata     60     60      0
xfrm_dst_cache      1980   2160    448   36    4 : tunables    0    0    0 : slabdata     60     60      0
xfrm_dst_cache      1980   2160    448   36    4 : tunables    0    0    0 : slabdata     60     60      0
xfrm_dst_cache      1980   2160    448   36    4 : tunables    0    0    0 : slabdata     60     60      0
xfrm_dst_cache      1980   2160    448   36    4 : tunables    0    0    0 : slabdata     60     60      0
xfrm_dst_cache      2016   2160    448   36    4 : tunables    0    0    0 : slabdata     60     60      0
xfrm_dst_cache      2088   2160    448   36    4 : tunables    0    0    0 : slabdata     60     60      0
xfrm_dst_cache      2160   2160    448   36    4 : tunables    0    0    0 : slabdata     60     60      0
xfrm_dst_cache      2232   2232    448   36    4 : tunables    0    0    0 : slabdata     62     62      0
xfrm_dst_cache      2304   2304    448   36    4 : tunables    0    0    0 : slabdata     64     64      0
xfrm_dst_cache      2376   2376    448   36    4 : tunables    0    0    0 : slabdata     66     66      0
xfrm_dst_cache      2412   2412    448   36    4 : tunables    0    0    0 : slabdata     67     67      0
xfrm_dst_cache      2412   2412    448   36    4 : tunables    0    0    0 : slabdata     67     67      0
xfrm_dst_cache      2412   2412    448   36    4 : tunables    0    0    0 : slabdata     67     67      0
xfrm_dst_cache      2412   2412    448   36    4 : tunables    0    0    0 : slabdata     67     67      0
xfrm_dst_cache      2484   2484    448   36    4 : tunables    0    0    0 : slabdata     69     69      0
xfrm_dst_cache      2484   2484    448   36    4 : tunables    0    0    0 : slabdata     69     69      0
xfrm_dst_cache      2484   2484    448   36    4 : tunables    0    0    0 : slabdata     69     69      0
xfrm_dst_cache      2520   2520    448   36    4 : tunables    0    0    0 : slabdata     70     70      0
xfrm_dst_cache      2520   2520    448   36    4 : tunables    0    0    0 : slabdata     70     70      0
xfrm_dst_cache      2520   2520    448   36    4 : tunables    0    0    0 : slabdata     70     70      0
xfrm_dst_cache      2556   2556    448   36    4 : tunables    0    0    0 : slabdata     71     71      0
xfrm_dst_cache      2664   2664    448   36    4 : tunables    0    0    0 : slabdata     74     74      0
xfrm_dst_cache      2736   2736    448   36    4 : tunables    0    0    0 : slabdata     76     76      0
xfrm_dst_cache      2844   2844    448   36    4 : tunables    0    0    0 : slabdata     79     79      0
xfrm_dst_cache      3024   3024    448   36    4 : tunables    0    0    0 : slabdata     84     84      0
xfrm_dst_cache      3096   3096    448   36    4 : tunables    0    0    0 : slabdata     86     86      0
xfrm_dst_cache      3204   3204    448   36    4 : tunables    0    0    0 : slabdata     89     89      0
xfrm_dst_cache      3348   3348    448   36    4 : tunables    0    0    0 : slabdata     93     93      0
xfrm_dst_cache      3456   3456    448   36    4 : tunables    0    0    0 : slabdata     96     96      0
xfrm_dst_cache      3636   3636    448   36    4 : tunables    0    0    0 : slabdata    101    101      0
xfrm_dst_cache      3780   3780    448   36    4 : tunables    0    0    0 : slabdata    105    105      0
xfrm_dst_cache      3852   3852    448   36    4 : tunables    0    0    0 : slabdata    107    107      0
xfrm_dst_cache      4068   4068    448   36    4 : tunables    0    0    0 : slabdata    113    113      0
xfrm_dst_cache      4248   4248    448   36    4 : tunables    0    0    0 : slabdata    118    118      0
xfrm_dst_cache      4356   4356    448   36    4 : tunables    0    0    0 : slabdata    121    121      0
xfrm_dst_cache      4464   4464    448   36    4 : tunables    0    0    0 : slabdata    124    124      0
xfrm_dst_cache      4608   4608    448   36    4 : tunables    0    0    0 : slabdata    128    128      0
xfrm_dst_cache      4716   4716    448   36    4 : tunables    0    0    0 : slabdata    131    131      0
xfrm_dst_cache      4824   4824    448   36    4 : tunables    0    0    0 : slabdata    134    134      0
xfrm_dst_cache      5004   5004    448   36    4 : tunables    0    0    0 : slabdata    139    139      0
xfrm_dst_cache      5220   5220    448   36    4 : tunables    0    0    0 : slabdata    145    145      0
xfrm_dst_cache      5400   5400    448   36    4 : tunables    0    0    0 : slabdata    150    150      0
xfrm_dst_cache      5616   5616    448   36    4 : tunables    0    0    0 : slabdata    156    156      0
xfrm_dst_cache      5724   5724    448   36    4 : tunables    0    0    0 : slabdata    159    159      0
xfrm_dst_cache      5904   5904    448   36    4 : tunables    0    0    0 : slabdata    164    164      0
xfrm_dst_cache      5976   5976    448   36    4 : tunables    0    0    0 : slabdata    166    166      0
xfrm_dst_cache      6084   6084    448   36    4 : tunables    0    0    0 : slabdata    169    169      0
xfrm_dst_cache      6228   6228    448   36    4 : tunables    0    0    0 : slabdata    173    173      0
xfrm_dst_cache      6336   6336    448   36    4 : tunables    0    0    0 : slabdata    176    176      0
xfrm_dst_cache      6408   6408    448   36    4 : tunables    0    0    0 : slabdata    178    178      0
xfrm_dst_cache      6516   6516    448   36    4 : tunables    0    0    0 : slabdata    181    181      0
xfrm_dst_cache      6624   6624    448   36    4 : tunables    0    0    0 : slabdata    184    184      0
xfrm_dst_cache      6912   6912    448   36    4 : tunables    0    0    0 : slabdata    192    192      0
xfrm_dst_cache      7200   7200    448   36    4 : tunables    0    0    0 : slabdata    200    200      0
xfrm_dst_cache      7308   7308    448   36    4 : tunables    0    0    0 : slabdata    203    203      0
xfrm_dst_cache      7560   7560    448   36    4 : tunables    0    0    0 : slabdata    210    210      0
xfrm_dst_cache      7668   7668    448   36    4 : tunables    0    0    0 : slabdata    213    213      0
xfrm_dst_cache      7812   7812    448   36    4 : tunables    0    0    0 : slabdata    217    217      0
xfrm_dst_cache      7920   7920    448   36    4 : tunables    0    0    0 : slabdata    220    220      0
xfrm_dst_cache      8028   8028    448   36    4 : tunables    0    0    0 : slabdata    223    223      0
xfrm_dst_cache      8100   8100    448   36    4 : tunables    0    0    0 : slabdata    225    225      0
xfrm_dst_cache      8136   8136    448   36    4 : tunables    0    0    0 : slabdata    226    226      0
xfrm_dst_cache      8460   8460    448   36    4 : tunables    0    0    0 : slabdata    235    235      0
xfrm_dst_cache      8568   8568    448   36    4 : tunables    0    0    0 : slabdata    238    238      0
xfrm_dst_cache      8712   8712    448   36    4 : tunables    0    0    0 : slabdata    242    242      0
xfrm_dst_cache      8820   8820    448   36    4 : tunables    0    0    0 : slabdata    245    245      0
xfrm_dst_cache      8892   8892    448   36    4 : tunables    0    0    0 : slabdata    247    247      0
xfrm_dst_cache      9000   9000    448   36    4 : tunables    0    0    0 : slabdata    250    250      0
xfrm_dst_cache      9072   9072    448   36    4 : tunables    0    0    0 : slabdata    252    252      0
xfrm_dst_cache      9324   9324    448   36    4 : tunables    0    0    0 : slabdata    259    259      0
xfrm_dst_cache      9468   9468    448   36    4 : tunables    0    0    0 : slabdata    263    263      0
xfrm_dst_cache      9612   9612    448   36    4 : tunables    0    0    0 : slabdata    267    267      0
xfrm_dst_cache      9684   9684    448   36    4 : tunables    0    0    0 : slabdata    269    269      0
xfrm_dst_cache      9900   9900    448   36    4 : tunables    0    0    0 : slabdata    275    275      0
xfrm_dst_cache     10044  10044    448   36    4 : tunables    0    0    0 : slabdata    279    279      0
xfrm_dst_cache     10188  10188    448   36    4 : tunables    0    0    0 : slabdata    283    283      0
xfrm_dst_cache     10548  10548    448   36    4 : tunables    0    0    0 : slabdata    293    293      0
xfrm_dst_cache     10908  10908    448   36    4 : tunables    0    0    0 : slabdata    303    303      0
xfrm_dst_cache     11232  11232    448   36    4 : tunables    0    0    0 : slabdata    312    312      0
xfrm_dst_cache     11304  11304    448   36    4 : tunables    0    0    0 : slabdata    314    314      0
xfrm_dst_cache     11520  11520    448   36    4 : tunables    0    0    0 : slabdata    320    320      0
xfrm_dst_cache     11592  11592    448   36    4 : tunables    0    0    0 : slabdata    322    322      0
xfrm_dst_cache     11844  11844    448   36    4 : tunables    0    0    0 : slabdata    329    329      0
xfrm_dst_cache     11952  11952    448   36    4 : tunables    0    0    0 : slabdata    332    332      0
xfrm_dst_cache     12060  12060    448   36    4 : tunables    0    0    0 : slabdata    335    335      0
xfrm_dst_cache     12132  12132    448   36    4 : tunables    0    0    0 : slabdata    337    337      0
xfrm_dst_cache     12276  12276    448   36    4 : tunables    0    0    0 : slabdata    341    341      0
xfrm_dst_cache     12348  12348    448   36    4 : tunables    0    0    0 : slabdata    343    343      0
xfrm_dst_cache     12420  12420    448   36    4 : tunables    0    0    0 : slabdata    345    345      0
xfrm_dst_cache     12564  12564    448   36    4 : tunables    0    0    0 : slabdata    349    349      0
xfrm_dst_cache     12672  12672    448   36    4 : tunables    0    0    0 : slabdata    352    352      0
xfrm_dst_cache     12744  12744    448   36    4 : tunables    0    0    0 : slabdata    354    354      0
xfrm_dst_cache     12816  12816    448   36    4 : tunables    0    0    0 : slabdata    356    356      0
xfrm_dst_cache     12888  12888    448   36    4 : tunables    0    0    0 : slabdata    358    358      0
xfrm_dst_cache     13068  13068    448   36    4 : tunables    0    0    0 : slabdata    363    363      0
xfrm_dst_cache     13392  13392    448   36    4 : tunables    0    0    0 : slabdata    372    372      0
xfrm_dst_cache     13536  13536    448   36    4 : tunables    0    0    0 : slabdata    376    376      0
xfrm_dst_cache     13572  13572    448   36    4 : tunables    0    0    0 : slabdata    377    377      0
xfrm_dst_cache     13716  13716    448   36    4 : tunables    0    0    0 : slabdata    381    381      0
xfrm_dst_cache     13788  13788    448   36    4 : tunables    0    0    0 : slabdata    383    383      0
xfrm_dst_cache     13860  13860    448   36    4 : tunables    0    0    0 : slabdata    385    385      0
xfrm_dst_cache     14148  14148    448   36    4 : tunables    0    0    0 : slabdata    393    393      0
xfrm_dst_cache     14256  14256    448   36    4 : tunables    0    0    0 : slabdata    396    396      0
xfrm_dst_cache     14364  14364    448   36    4 : tunables    0    0    0 : slabdata    399    399      0
xfrm_dst_cache     14436  14436    448   36    4 : tunables    0    0    0 : slabdata    401    401      0
xfrm_dst_cache     14688  14688    448   36    4 : tunables    0    0    0 : slabdata    408    408      0
xfrm_dst_cache     14976  14976    448   36    4 : tunables    0    0    0 : slabdata    416    416      0
xfrm_dst_cache     15228  15228    448   36    4 : tunables    0    0    0 : slabdata    423    423      0
xfrm_dst_cache     15264  15264    448   36    4 : tunables    0    0    0 : slabdata    424    424      0
xfrm_dst_cache     15552  15552    448   36    4 : tunables    0    0    0 : slabdata    432    432      0
xfrm_dst_cache     15804  15804    448   36    4 : tunables    0    0    0 : slabdata    439    439      0
xfrm_dst_cache     16056  16056    448   36    4 : tunables    0    0    0 : slabdata    446    446      0
xfrm_dst_cache     16344  16344    448   36    4 : tunables    0    0    0 : slabdata    454    454      0
xfrm_dst_cache     14181  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14499  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14940  14940    448   36    4 : tunables    0    0    0 : slabdata    415    415      0
xfrm_dst_cache     13216  14184    448   36    4 : tunables    0    0    0 : slabdata    394    394      0
xfrm_dst_cache     13420  14184    448   36    4 : tunables    0    0    0 : slabdata    394    394      0
xfrm_dst_cache     13546  14184    448   36    4 : tunables    0    0    0 : slabdata    394    394      0
xfrm_dst_cache     13623  14184    448   36    4 : tunables    0    0    0 : slabdata    394    394      0
xfrm_dst_cache     13783  14184    448   36    4 : tunables    0    0    0 : slabdata    394    394      0
xfrm_dst_cache     13912  14184    448   36    4 : tunables    0    0    0 : slabdata    394    394      0
xfrm_dst_cache     14030  14184    448   36    4 : tunables    0    0    0 : slabdata    394    394      0
xfrm_dst_cache     14400  14400    448   36    4 : tunables    0    0    0 : slabdata    400    400      0
xfrm_dst_cache     14472  14472    448   36    4 : tunables    0    0    0 : slabdata    402    402      0
xfrm_dst_cache     14544  14544    448   36    4 : tunables    0    0    0 : slabdata    404    404      0
xfrm_dst_cache     14652  14652    448   36    4 : tunables    0    0    0 : slabdata    407    407      0
xfrm_dst_cache     14688  14688    448   36    4 : tunables    0    0    0 : slabdata    408    408      0
xfrm_dst_cache     14688  14688    448   36    4 : tunables    0    0    0 : slabdata    408    408      0
xfrm_dst_cache     14760  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14832  14832    448   36    4 : tunables    0    0    0 : slabdata    412    412      0
xfrm_dst_cache     14832  14832    448   36    4 : tunables    0    0    0 : slabdata    412    412      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15120  15120    448   36    4 : tunables    0    0    0 : slabdata    420    420      0
xfrm_dst_cache     15192  15192    448   36    4 : tunables    0    0    0 : slabdata    422    422      0
xfrm_dst_cache     15300  15300    448   36    4 : tunables    0    0    0 : slabdata    425    425      0
xfrm_dst_cache     15444  15444    448   36    4 : tunables    0    0    0 : slabdata    429    429      0
xfrm_dst_cache     15552  15552    448   36    4 : tunables    0    0    0 : slabdata    432    432      0
xfrm_dst_cache     15660  15660    448   36    4 : tunables    0    0    0 : slabdata    435    435      0
xfrm_dst_cache     15768  15768    448   36    4 : tunables    0    0    0 : slabdata    438    438      0
xfrm_dst_cache     15984  15984    448   36    4 : tunables    0    0    0 : slabdata    444    444      0
xfrm_dst_cache     16092  16092    448   36    4 : tunables    0    0    0 : slabdata    447    447      0
xfrm_dst_cache     16236  16236    448   36    4 : tunables    0    0    0 : slabdata    451    451      0
xfrm_dst_cache     16344  16344    448   36    4 : tunables    0    0    0 : slabdata    454    454      0
xfrm_dst_cache     16488  16488    448   36    4 : tunables    0    0    0 : slabdata    458    458      0
xfrm_dst_cache     16596  16596    448   36    4 : tunables    0    0    0 : slabdata    461    461      0
xfrm_dst_cache     16668  16668    448   36    4 : tunables    0    0    0 : slabdata    463    463      0
xfrm_dst_cache     16848  16848    448   36    4 : tunables    0    0    0 : slabdata    468    468      0
xfrm_dst_cache     16920  16920    448   36    4 : tunables    0    0    0 : slabdata    470    470      0
xfrm_dst_cache     16920  16920    448   36    4 : tunables    0    0    0 : slabdata    470    470      0
xfrm_dst_cache     17028  17028    448   36    4 : tunables    0    0    0 : slabdata    473    473      0
xfrm_dst_cache     17028  17028    448   36    4 : tunables    0    0    0 : slabdata    473    473      0
xfrm_dst_cache     17064  17064    448   36    4 : tunables    0    0    0 : slabdata    474    474      0
xfrm_dst_cache     17100  17100    448   36    4 : tunables    0    0    0 : slabdata    475    475      0
xfrm_dst_cache     17136  17136    448   36    4 : tunables    0    0    0 : slabdata    476    476      0
xfrm_dst_cache     17172  17172    448   36    4 : tunables    0    0    0 : slabdata    477    477      0
xfrm_dst_cache     17172  17172    448   36    4 : tunables    0    0    0 : slabdata    477    477      0
xfrm_dst_cache     14707  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     14985  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     15010  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     15039  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     15137  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     15268  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     15440  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     15560  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     15687  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     15782  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     15919  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     16148  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     16215  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     16308  16308    448   36    4 : tunables    0    0    0 : slabdata    453    453      0
xfrm_dst_cache     16452  16452    448   36    4 : tunables    0    0    0 : slabdata    457    457      0
xfrm_dst_cache     16560  16560    448   36    4 : tunables    0    0    0 : slabdata    460    460      0
xfrm_dst_cache     16704  16704    448   36    4 : tunables    0    0    0 : slabdata    464    464      0
xfrm_dst_cache     16848  16848    448   36    4 : tunables    0    0    0 : slabdata    468    468      0
xfrm_dst_cache     16884  16884    448   36    4 : tunables    0    0    0 : slabdata    469    469      0
xfrm_dst_cache     17064  17064    448   36    4 : tunables    0    0    0 : slabdata    474    474      0
xfrm_dst_cache     17136  17136    448   36    4 : tunables    0    0    0 : slabdata    476    476      0
xfrm_dst_cache     17172  17172    448   36    4 : tunables    0    0    0 : slabdata    477    477      0
xfrm_dst_cache     14918  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15003  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15057  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15066  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15112  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15174  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15174  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15174  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15174  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15174  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15195  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15245  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15279  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15279  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15301  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15379  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15486  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15516  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15588  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15658  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15880  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     15932  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     16020  16020    448   36    4 : tunables    0    0    0 : slabdata    445    445      0
xfrm_dst_cache     16056  16056    448   36    4 : tunables    0    0    0 : slabdata    446    446      0
xfrm_dst_cache     16164  16164    448   36    4 : tunables    0    0    0 : slabdata    449    449      0
xfrm_dst_cache     16164  16164    448   36    4 : tunables    0    0    0 : slabdata    449    449      0
xfrm_dst_cache     16380  16380    448   36    4 : tunables    0    0    0 : slabdata    455    455      0
xfrm_dst_cache     16452  16452    448   36    4 : tunables    0    0    0 : slabdata    457    457      0
xfrm_dst_cache     16488  16488    448   36    4 : tunables    0    0    0 : slabdata    458    458      0
xfrm_dst_cache     16560  16560    448   36    4 : tunables    0    0    0 : slabdata    460    460      0
xfrm_dst_cache     16704  16704    448   36    4 : tunables    0    0    0 : slabdata    464    464      0
xfrm_dst_cache     16740  16740    448   36    4 : tunables    0    0    0 : slabdata    465    465      0
xfrm_dst_cache     16776  16776    448   36    4 : tunables    0    0    0 : slabdata    466    466      0
xfrm_dst_cache     16992  16992    448   36    4 : tunables    0    0    0 : slabdata    472    472      0
xfrm_dst_cache     17208  17208    448   36    4 : tunables    0    0    0 : slabdata    478    478      0
xfrm_dst_cache     17316  17316    448   36    4 : tunables    0    0    0 : slabdata    481    481      0
xfrm_dst_cache     17388  17388    448   36    4 : tunables    0    0    0 : slabdata    483    483      0
xfrm_dst_cache     17460  17460    448   36    4 : tunables    0    0    0 : slabdata    485    485      0
xfrm_dst_cache     17568  17568    448   36    4 : tunables    0    0    0 : slabdata    488    488      0
xfrm_dst_cache     17676  17676    448   36    4 : tunables    0    0    0 : slabdata    491    491      0
xfrm_dst_cache     17928  17928    448   36    4 : tunables    0    0    0 : slabdata    498    498      0
xfrm_dst_cache     17964  17964    448   36    4 : tunables    0    0    0 : slabdata    499    499      0
xfrm_dst_cache     18072  18072    448   36    4 : tunables    0    0    0 : slabdata    502    502      0
xfrm_dst_cache     18108  18108    448   36    4 : tunables    0    0    0 : slabdata    503    503      0
xfrm_dst_cache     18180  18180    448   36    4 : tunables    0    0    0 : slabdata    505    505      0
xfrm_dst_cache     16109  17676    448   36    4 : tunables    0    0    0 : slabdata    491    491      0
xfrm_dst_cache     16227  17676    448   36    4 : tunables    0    0    0 : slabdata    491    491      0
xfrm_dst_cache     16381  17676    448   36    4 : tunables    0    0    0 : slabdata    491    491      0
xfrm_dst_cache     16381  17676    448   36    4 : tunables    0    0    0 : slabdata    491    491      0
xfrm_dst_cache     16412  17676    448   36    4 : tunables    0    0    0 : slabdata    491    491      0
xfrm_dst_cache     14418  16560    448   36    4 : tunables    0    0    0 : slabdata    460    460      0
xfrm_dst_cache     14529  16560    448   36    4 : tunables    0    0    0 : slabdata    460    460      0
xfrm_dst_cache     14529  16560    448   36    4 : tunables    0    0    0 : slabdata    460    460      0
xfrm_dst_cache     14586  16560    448   36    4 : tunables    0    0    0 : slabdata    460    460      0
xfrm_dst_cache     14696  16560    448   36    4 : tunables    0    0    0 : slabdata    460    460      0
xfrm_dst_cache     14757  16560    448   36    4 : tunables    0    0    0 : slabdata    460    460      0
xfrm_dst_cache     14909  16560    448   36    4 : tunables    0    0    0 : slabdata    460    460      0
xfrm_dst_cache     12434  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12534  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12619  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12749  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12881  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     12952  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13110  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13223  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13348  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13536  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13664  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13798  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     13928  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14063  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14212  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14422  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14588  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14668  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14668  14760    448   36    4 : tunables    0    0    0 : slabdata    410    410      0
xfrm_dst_cache     14796  14796    448   36    4 : tunables    0    0    0 : slabdata    411    411      0
xfrm_dst_cache     14796  14796    448   36    4 : tunables    0    0    0 : slabdata    411    411      0
xfrm_dst_cache     14832  14832    448   36    4 : tunables    0    0    0 : slabdata    412    412      0
xfrm_dst_cache     14868  14868    448   36    4 : tunables    0    0    0 : slabdata    413    413      0
xfrm_dst_cache     15012  15012    448   36    4 : tunables    0    0    0 : slabdata    417    417      0
xfrm_dst_cache     15048  15048    448   36    4 : tunables    0    0    0 : slabdata    418    418      0
xfrm_dst_cache     15084  15084    448   36    4 : tunables    0    0    0 : slabdata    419    419      0
xfrm_dst_cache     15120  15120    448   36    4 : tunables    0    0    0 : slabdata    420    420      0
xfrm_dst_cache     15228  15228    448   36    4 : tunables    0    0    0 : slabdata    423    423      0
xfrm_dst_cache     15336  15336    448   36    4 : tunables    0    0    0 : slabdata    426    426      0
xfrm_dst_cache     15408  15408    448   36    4 : tunables    0    0    0 : slabdata    428    428      0
xfrm_dst_cache     15444  15444    448   36    4 : tunables    0    0    0 : slabdata    429    429      0
xfrm_dst_cache     15480  15480    448   36    4 : tunables    0    0    0 : slabdata    430    430      0
xfrm_dst_cache     15552  15552    448   36    4 : tunables    0    0    0 : slabdata    432    432      0
xfrm_dst_cache     15588  15588    448   36    4 : tunables    0    0    0 : slabdata    433    433      0
xfrm_dst_cache     15768  15768    448   36    4 : tunables    0    0    0 : slabdata    438    438      0
xfrm_dst_cache     15804  15804    448   36    4 : tunables    0    0    0 : slabdata    439    439      0
xfrm_dst_cache     15840  15840    448   36    4 : tunables    0    0    0 : slabdata    440    440      0
xfrm_dst_cache     15912  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     13590  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     13709  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     13791  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14053  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14062  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14062  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14166  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14230  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14230  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14250  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14520  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14754  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14866  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     14893  15912    448   36    4 : tunables    0    0    0 : slabdata    442    442      0
xfrm_dst_cache     12892  14796    448   36    4 : tunables    0    0    0 : slabdata    411    411      0
xfrm_dst_cache     13033  14796    448   36    4 : tunables    0    0    0 : slabdata    411    411      0
xfrm_dst_cache     13092  14796    448   36    4 : tunables    0    0    0 : slabdata    411    411      0


Regards,
-- 
Wolfgang Walter
Studentenwerk München
Anstalt des öffentlichen Rechts

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-23 22:52     ` Wolfgang Walter
@ 2013-10-25  8:01       ` Steffen Klassert
  2013-10-25  8:50         ` Eric Dumazet
  2013-10-25  9:33         ` Wolfgang Walter
  0 siblings, 2 replies; 22+ messages in thread
From: Steffen Klassert @ 2013-10-25  8:01 UTC (permalink / raw)
  To: Wolfgang Walter; +Cc: Eric Dumazet, David Miller, hannes, netdev, klassert

On Thu, Oct 24, 2013 at 12:52:58AM +0200, Wolfgang Walter wrote:
> On Wednesday 23 October 2013 10:06:32 Eric Dumazet wrote:
> > On Wed, 2013-10-23 at 18:59 +0200, Wolfgang Walter wrote:
> > > Ah, ok. I use SLUB, but SLABINFO=y.
> > > 
> > > Without much traffic it is:
> > > 
> > > # grep dst /proc/slabinfo
> > > xfrm_dst_cache      4435   4608    448   36    4 : tunables    0    0    0
> > > : slabdata    128    128      0
> > > 
> > > on the big one.
> > > 
> > > I can recompile the kernels with SLAB instead of SLUB if SLAB gives more
> > > usefull infos.
> > Not needed, because it seems we do not merge this SLUB cache with
> > another one.
> 
> Ok. I can't see xfrm_dst_cache on 32bit-systems, though.
> 
> > 
> > So please post this information, because I believe the default should be
> > 65536, not 1024 or 4096
> > 
> 
> Indeed I already saw higher values, at the moment I see:
> 
> # while true; do grep dst /proc/slabinfo ; sleep 1; done
> xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0 : slabdata    351    351      0

We currently start the garbage collector if we have more than gc_thresh
(1024) dst entries allocated and refuse new allocations at 2 * gc_thresh.

So maybe we should set gc_thresh to 32768. Than we can have 65536 dst
entries in the system (cache + packets in flight) before we refuse
new allocations. In paticular we can still cache another 32768 dst
entries after the garbage collector was started. It looks like you
had never more than 15000 dst entries cached, so a default of 32768
looks reasonable and should also keep smaller embedded routers happy.

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-25  8:01       ` Steffen Klassert
@ 2013-10-25  8:50         ` Eric Dumazet
  2013-10-25  9:20           ` Steffen Klassert
  2013-10-25  9:33         ` Wolfgang Walter
  1 sibling, 1 reply; 22+ messages in thread
From: Eric Dumazet @ 2013-10-25  8:50 UTC (permalink / raw)
  To: Steffen Klassert; +Cc: Wolfgang Walter, David Miller, hannes, netdev, klassert

On Fri, 2013-10-25 at 10:01 +0200, Steffen Klassert wrote:

> We currently start the garbage collector if we have more than gc_thresh
> (1024) dst entries allocated and refuse new allocations at 2 * gc_thresh.
> 
> So maybe we should set gc_thresh to 32768. Than we can have 65536 dst
> entries in the system (cache + packets in flight) before we refuse
> new allocations. In paticular we can still cache another 32768 dst
> entries after the garbage collector was started. It looks like you
> had never more than 15000 dst entries cached, so a default of 32768
> looks reasonable and should also keep smaller embedded routers happy.


32768 as the default seems fine to me

448 bytes per dst -> thats less than 30 Mbytes of memory if we hit 65536
dst.

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-25  8:50         ` Eric Dumazet
@ 2013-10-25  9:20           ` Steffen Klassert
  2013-10-28  4:43             ` David Miller
  2013-10-28  6:17             ` Eric Dumazet
  0 siblings, 2 replies; 22+ messages in thread
From: Steffen Klassert @ 2013-10-25  9:20 UTC (permalink / raw)
  To: Eric Dumazet; +Cc: Wolfgang Walter, David Miller, hannes, netdev, klassert

On Fri, Oct 25, 2013 at 01:50:28AM -0700, Eric Dumazet wrote:
> 
> 32768 as the default seems fine to me
> 
> 448 bytes per dst -> thats less than 30 Mbytes of memory if we hit 65536
> dst.
> 

Ok, I'll add the patch below to to the ipsec tree if everyone is fine
with that threshold.

Subject: [PATCH RFC] xfrm: Increase the garbage collector threshold

With the removal of the routing cache, we lost the
option to tweak the garbage collector threshold
along with the maximum routing cache size. So git
commit 703fb94ec ("xfrm: Fix the gc threshold value
for ipv4") moved back to a static threshold.

It turned out that the current threshold before we
start garbage collecting is much to small for some
workloads, so increase it from 1024 to 32768. This
means that we start the garbage collector if we have
more than 32768 dst entries in the system and refuse
new allocations if we are above 65536.

Signed-off-by: Steffen Klassert <steffen.klassert@secunet.com>
---
 net/ipv4/xfrm4_policy.c |    2 +-
 net/ipv6/xfrm6_policy.c |    2 +-
 2 files changed, 2 insertions(+), 2 deletions(-)

diff --git a/net/ipv4/xfrm4_policy.c b/net/ipv4/xfrm4_policy.c
index ccde542..4764ee4 100644
--- a/net/ipv4/xfrm4_policy.c
+++ b/net/ipv4/xfrm4_policy.c
@@ -236,7 +236,7 @@ static struct dst_ops xfrm4_dst_ops = {
 	.destroy =		xfrm4_dst_destroy,
 	.ifdown =		xfrm4_dst_ifdown,
 	.local_out =		__ip_local_out,
-	.gc_thresh =		1024,
+	.gc_thresh =		32768,
 };
 
 static struct xfrm_policy_afinfo xfrm4_policy_afinfo = {
diff --git a/net/ipv6/xfrm6_policy.c b/net/ipv6/xfrm6_policy.c
index 08ed277..dd503a3 100644
--- a/net/ipv6/xfrm6_policy.c
+++ b/net/ipv6/xfrm6_policy.c
@@ -285,7 +285,7 @@ static struct dst_ops xfrm6_dst_ops = {
 	.destroy =		xfrm6_dst_destroy,
 	.ifdown =		xfrm6_dst_ifdown,
 	.local_out =		__ip6_local_out,
-	.gc_thresh =		1024,
+	.gc_thresh =		32768,
 };
 
 static struct xfrm_policy_afinfo xfrm6_policy_afinfo = {
-- 
1.7.9.5

^ permalink raw reply related	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-25  8:01       ` Steffen Klassert
  2013-10-25  8:50         ` Eric Dumazet
@ 2013-10-25  9:33         ` Wolfgang Walter
  1 sibling, 0 replies; 22+ messages in thread
From: Wolfgang Walter @ 2013-10-25  9:33 UTC (permalink / raw)
  To: Steffen Klassert; +Cc: Eric Dumazet, David Miller, hannes, netdev, klassert

Am Freitag, 25. Oktober 2013, 10:01:58 schrieb Steffen Klassert:
> On Thu, Oct 24, 2013 at 12:52:58AM +0200, Wolfgang Walter wrote:
> > On Wednesday 23 October 2013 10:06:32 Eric Dumazet wrote:
> > > On Wed, 2013-10-23 at 18:59 +0200, Wolfgang Walter wrote:
> > > > Ah, ok. I use SLUB, but SLABINFO=y.
> > > > 
> > > > Without much traffic it is:
> > > > 
> > > > # grep dst /proc/slabinfo
> > > > xfrm_dst_cache      4435   4608    448   36    4 : tunables    0    0 
> > > >   0
> > > > 
> > > > : slabdata    128    128      0
> > > > 
> > > > on the big one.
> > > > 
> > > > I can recompile the kernels with SLAB instead of SLUB if SLAB gives
> > > > more
> > > > usefull infos.
> > > 
> > > Not needed, because it seems we do not merge this SLUB cache with
> > > another one.
> > 
> > Ok. I can't see xfrm_dst_cache on 32bit-systems, though.
> > 
> > > So please post this information, because I believe the default should be
> > > 65536, not 1024 or 4096
> > 
> > Indeed I already saw higher values, at the moment I see:
> > 
> > # while true; do grep dst /proc/slabinfo ; sleep 1; done
> > xfrm_dst_cache     12636  12636    448   36    4 : tunables    0    0    0
> > : slabdata    351    351      0
> We currently start the garbage collector if we have more than gc_thresh
> (1024) dst entries allocated and refuse new allocations at 2 * gc_thresh.
> 
> So maybe we should set gc_thresh to 32768. Than we can have 65536 dst
> entries in the system (cache + packets in flight) before we refuse
> new allocations. In paticular we can still cache another 32768 dst
> entries after the garbage collector was started. It looks like you
> had never more than 15000 dst entries cached, so a default of 32768
> looks reasonable and should also keep smaller embedded routers happy.

The maximum I saw was 18000. I think 32768 is a good value especially as this 
seems to be the minimum on 3.4.x if you have 512MB ram.

Is it possible to log a warning the first time one hits the limit? Something 
like "xfrm_dst_cache full, consider increasing net.ipv4.xfrm4_gc_thresh and/or 
net.ipv6.xfrm6_gc_thresh"?

Regards,
-- 
Wolfgang Walter
Studentenwerk München
Anstalt des öffentlichen Rechts

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-25  9:20           ` Steffen Klassert
@ 2013-10-28  4:43             ` David Miller
  2013-10-28  6:17             ` Eric Dumazet
  1 sibling, 0 replies; 22+ messages in thread
From: David Miller @ 2013-10-28  4:43 UTC (permalink / raw)
  To: steffen.klassert; +Cc: eric.dumazet, linux, hannes, netdev, klassert

From: Steffen Klassert <steffen.klassert@secunet.com>
Date: Fri, 25 Oct 2013 11:20:43 +0200

> On Fri, Oct 25, 2013 at 01:50:28AM -0700, Eric Dumazet wrote:
>> 
>> 32768 as the default seems fine to me
>> 
>> 448 bytes per dst -> thats less than 30 Mbytes of memory if we hit 65536
>> dst.
>> 
> 
> Ok, I'll add the patch below to to the ipsec tree if everyone is fine
> with that threshold.

No objections from me.

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-25  9:20           ` Steffen Klassert
  2013-10-28  4:43             ` David Miller
@ 2013-10-28  6:17             ` Eric Dumazet
  2013-10-28 11:30               ` Steffen Klassert
  1 sibling, 1 reply; 22+ messages in thread
From: Eric Dumazet @ 2013-10-28  6:17 UTC (permalink / raw)
  To: Steffen Klassert; +Cc: Wolfgang Walter, David Miller, hannes, netdev, klassert

On Fri, 2013-10-25 at 11:20 +0200, Steffen Klassert wrote:
> On Fri, Oct 25, 2013 at 01:50:28AM -0700, Eric Dumazet wrote:
> > 
> > 32768 as the default seems fine to me
> > 
> > 448 bytes per dst -> thats less than 30 Mbytes of memory if we hit 65536
> > dst.
> > 
> 
> Ok, I'll add the patch below to to the ipsec tree if everyone is fine
> with that threshold.
> 
> Subject: [PATCH RFC] xfrm: Increase the garbage collector threshold
> 
> With the removal of the routing cache, we lost the
> option to tweak the garbage collector threshold
> along with the maximum routing cache size. So git
> commit 703fb94ec ("xfrm: Fix the gc threshold value
> for ipv4") moved back to a static threshold.
> 
> It turned out that the current threshold before we
> start garbage collecting is much to small for some
> workloads, so increase it from 1024 to 32768. This
> means that we start the garbage collector if we have
> more than 32768 dst entries in the system and refuse
> new allocations if we are above 65536.
> 
> Signed-off-by: Steffen Klassert <steffen.klassert@secunet.com>
> ---

Sure please add :

Reported-by: Wolfgang Walter <linux@stwm.de>

Thanks !

^ permalink raw reply	[flat|nested] 22+ messages in thread

* Re: Big performance loss from 3.4.63 to 3.10.13 when routing ipv4
  2013-10-28  6:17             ` Eric Dumazet
@ 2013-10-28 11:30               ` Steffen Klassert
  0 siblings, 0 replies; 22+ messages in thread
From: Steffen Klassert @ 2013-10-28 11:30 UTC (permalink / raw)
  To: Eric Dumazet; +Cc: Wolfgang Walter, David Miller, hannes, netdev, klassert

On Sun, Oct 27, 2013 at 11:17:31PM -0700, Eric Dumazet wrote:
> On Fri, 2013-10-25 at 11:20 +0200, Steffen Klassert wrote:
> > On Fri, Oct 25, 2013 at 01:50:28AM -0700, Eric Dumazet wrote:
> > > 
> > > 32768 as the default seems fine to me
> > > 
> > > 448 bytes per dst -> thats less than 30 Mbytes of memory if we hit 65536
> > > dst.
> > > 
> > 
> > Ok, I'll add the patch below to to the ipsec tree if everyone is fine
> > with that threshold.
> > 
> > Subject: [PATCH RFC] xfrm: Increase the garbage collector threshold
> > 
> > With the removal of the routing cache, we lost the
> > option to tweak the garbage collector threshold
> > along with the maximum routing cache size. So git
> > commit 703fb94ec ("xfrm: Fix the gc threshold value
> > for ipv4") moved back to a static threshold.
> > 
> > It turned out that the current threshold before we
> > start garbage collecting is much to small for some
> > workloads, so increase it from 1024 to 32768. This
> > means that we start the garbage collector if we have
> > more than 32768 dst entries in the system and refuse
> > new allocations if we are above 65536.
> > 
> > Signed-off-by: Steffen Klassert <steffen.klassert@secunet.com>
> > ---
> 
> Sure please add :
> 
> Reported-by: Wolfgang Walter <linux@stwm.de>

Done.

Now applied to the ipsec tree, thanks everyone!

^ permalink raw reply	[flat|nested] 22+ messages in thread

end of thread, other threads:[~2013-10-28 11:30 UTC | newest]

Thread overview: 22+ messages (download: mbox.gz follow: Atom feed
-- links below jump to the message on this page --
2013-10-01 16:39 Big performance loss from 3.4.63 to 3.10.13 when routing ipv4 Wolfgang Walter
2013-10-01 18:57 ` Brian Haley
2013-10-01 19:44   ` Wolfgang Walter
2013-10-01 22:20 ` Hannes Frederic Sowa
2013-10-22 19:07   ` Wolfgang Walter
2013-10-22 19:46     ` David Miller
2013-10-23  8:12       ` Steffen Klassert
2013-10-23 11:33         ` Wolfgang Walter
2013-10-23 12:00           ` Eric Dumazet
2013-10-23 12:26             ` Steffen Klassert
2013-10-23 15:57             ` Wolfgang Walter
2013-10-23 12:04           ` Steffen Klassert
2013-10-23 16:05             ` Wolfgang Walter
     [not found] ` <3169911.kTmZ0BZVVr@h2o.as.studentenwerk.mhn.de>
     [not found]   ` <1382547992.7572.31.camel@edumazet-glaptop.roam.corp.google.com>
2013-10-23 22:52     ` Wolfgang Walter
2013-10-25  8:01       ` Steffen Klassert
2013-10-25  8:50         ` Eric Dumazet
2013-10-25  9:20           ` Steffen Klassert
2013-10-28  4:43             ` David Miller
2013-10-28  6:17             ` Eric Dumazet
2013-10-28 11:30               ` Steffen Klassert
2013-10-25  9:33         ` Wolfgang Walter
2013-10-24 11:07     ` Wolfgang Walter

This is a public inbox, see mirroring instructions
for how to clone and mirror all data and code used for this inbox;
as well as URLs for NNTP newsgroup(s).