En las plantillas actualizadas de wordpress ya vienen divididos los comentarios, yo tambien tengo blogs donde tengo bastantes posts con más de 1,000 comentarios .. hasta 3,000 y es sencillo tener divididos los comentarios por los últimos 50, de modo que no cargue todos, y de esa manera será igual de rápido.
Lo que recomiendo para estos sitios es el plugin "suscribe to comments" ya que si los temas son populares los usuarios toman tu topic como una "comunidad", en donde comentan sobre cada nuevo comentario y actualización, ya sea para maltratarse y sacarse la madre o para ayudarse entre ellos, dependiendo si el tema es sobre cholos o sobre rupturas amorosas (un ejemplo)
Saludos :beer: