SLUB: Fix __GFP_ZERO unlikely() annotation
authorPekka Enberg <penberg@cs.helsinki.fi>
Wed, 25 Nov 2009 18:14:48 +0000 (20:14 +0200)
committerPekka Enberg <penberg@cs.helsinki.fi>
Sun, 29 Nov 2009 07:01:59 +0000 (09:01 +0200)
The unlikely() annotation in slab_alloc() covers too much of the expression.
It's actually very likely that the object is not NULL so use unlikely() only
for the __GFP_ZERO expression like SLAB does.

The patch reduces kernel text by 29 bytes on x86-64:

   text    data     bss     dec     hex filename
  24185    8560     176   32921    8099 mm/slub.o.orig
  24156    8560     176   32892    807c mm/slub.o

Acked-by: Christoph Lameter <cl@linux-foundation.org>
Signed-off-by: Pekka Enberg <penberg@cs.helsinki.fi>
mm/slub.c

index 4996fc7..0956396 100644 (file)
--- a/mm/slub.c
+++ b/mm/slub.c
@@ -1735,7 +1735,7 @@ static __always_inline void *slab_alloc(struct kmem_cache *s,
        }
        local_irq_restore(flags);
 
-       if (unlikely((gfpflags & __GFP_ZERO) && object))
+       if (unlikely(gfpflags & __GFP_ZERO) && object)
                memset(object, 0, objsize);
 
        kmemcheck_slab_alloc(s, gfpflags, object, c->objsize);