http://varnish-cache.org/wiki/FAQ#HowdoIregulatehowmuchmemoryVarnishwilluseforcaching
Который перенаправляет Вас к здесь: http://varnish-cache.org/wiki/ArchitectNotes
Существует много ловушек конфигурации, в которые можно упасть при использовании mod_pagespeed на сервере бэкэнда, который получает различные URL, чем конечный пользователь будет видеть.
Ваши ответы оба имеют X-Mod-Pagespeed: заголовки, таким образом, mod_pagespeed работает на каждом из них, однако, возможно, что он не может загрузить подресурсы (CSS, JS, изображения) и так не переписывает ни одного из них.
Продолжите по mod-pagespeed-discuss@googlegroups.com, и мы можем помочь Вам диагностировать это.