Por si te sirve de pista:
Los problemas en sitios warez (generalmente de películas) en lo que refiere a rendimiento en wordpress (supongo que es wordpress), suele ser a causa de query relacionadas a contadores de visitas (top de más vistos, por ej.) y generación de listas aleatorias. El problema se suele ir agravando a medida que hay más y más post, por ello al principio es normal que no se note y que vaya empeorando poco a poco.
Lo digo con conocimiento de causa: Ese tipo de problemas lo he visto muchas veces en themes (soy programador, y hago de sysadmin cuando es necesario). El peor que vi fue un sitio de noticias virales que tenía un cronjob que renovaba los "tops" y cuando el sitio superaba los 5mil post, ni el server más grande de google cloud aguantaba sin caerse.
kj