Cuando tenemos un Load Balancer adelante de un servidor Apache es necesario configurar correctamente Apache para poder obtener la IP del cliente (y no las internas de nuesto Load Balancer) para luego aplicar el filtro. Les dejo la configuración para que puedan realizarlo:
SetEnvIf X-Forwarded-For ^XXX\.XXX\.XXX\.XXX proxy_env
Order allow,deny
Satisfy Any
Allow from env=proxy_env