verifica en esas que tardan mucho en cargar, en caso que sean Wordpress, si tienes plugins y themes inactivos, borrarlos, Y los activos, trata de reducir la cantidad que tienes.
También si puedes activa cache, comprimes imágenes (antes ó después de subirlas) de manera tal, que ocupen menos espacio y te carguen mas rápido los sitios.
Hay muchos otros factores que pueden ser recomendados como CDN, carga diferida y demás, que pueden ayudarte; según tu conocimiento, herramientas y presupuesto.
Tengo un producto llamado
OptimizWP que te hace la optimización TODO EN UNO, que te facilita el trabajo, ahorra tiempo y dinero que puedes revisar; tanto si decides hacerlo tu mismo ó dejar que el sistema lo haga por ti.