além dos plugins de reduzir o tamanho das imagens, existem outras opções?
Sou... fui? um pouco obcecado pela otimização de velocidade, para que os usuários dissessem "
what? já carregou tudo? wow...", eventualmente por ser programador, incorporei no meu próprio CMS e depois no meu próprio framework a otimização de cada imagem que eu subia, e assim resolvi, não gosto de depender de ferramentas se posso criar e otimizar ao meu gosto, essa é a pura explicação técnica e pessoal.
Fora isso, para a etapa em que ainda não tinha essa solução, exatamente como na sua situação atual, o que fiz foi baixar uma cópia comprimida do meu site e, localmente, experimentei com algumas ferramentas, várias... não me lembro de todas, uma delas foi o XnConvert. Lá encontrei vários tipos de otimização e fiquei com a melhor versão de cada imagem. Te devo os nomes específicos, mas lembro que havia uma opção em que se comparava o tamanho da versão original e a otimizada, e se não fosse melhor, não era usada. Assim mantive todos os arquivos com seus nomes e extensões originais (porque as imagens também se posicionaram).
Se não se importa em mudar de formato/extensão, poderia recorrer a outras ferramentas com compressão mais agressiva que passam seus arquivos para outro formato.
Outra coisa que fiz (não sei se o WordPress faz automático, ou se existem opções), foi uma limpeza completa: se o site não utilizava a imagem, ela era eliminada, assim removi qualquer imagem órfã, os ganhos em otimização foram excelentes. Durante a conversão também pode eliminar thumbnails, exif data, extra fields, etc.
O que toma um pouco de tempo é baixar o site e depois definir as configurações de conversão que mais gostar, o resto fica trabalhando enquanto você dorme (é processado em batch) e depois é só subir de novo. Pronto.