Yo he utilizado 3 de los 4 mencionados arriba, wp super cache, w3 total cache y quick cache y tengo estas 3 opiniones:
WP Super Cache. Hace rato dejó de actualizarse, tira error con nuevos themes y ultima version de WP y además se han encontrado bugs desde la ultima actualizacion que no fueron arreglados.
W3 Total Cache. Lo puse solo una vez junto a JetPack, All in One Seo pack y dos o tres plugins mas y me rompio la bd de un blog de 1 año de vida.
Quick Cache. Es el plugin mas liviando que además actualiza el cache automaticamente cuando editas un post, cambias algo de un theme o modificas alguna otra opcion. Ademas cuenta con la opcion Clear Cache en la parte superior derecha que en todo momento te permite limpiar el cache para ver modificaciones menores.