1) Prueba usar otros navegadores (y si puedes acceder a otro PC aún mejor) para ver si sucede en todos los casos, y descartar que no sea tu PC el infectado.
Si sigue apareciendo en otros dispositivos:
2) Visita tu web, presiona Control + U para ver el código fuente, y revisas qué archivos JS está cargando tu página. Generalmente ese es el modo de cargar los popups publicitarios.
3) Borra el código malicioso.
En caso de que a tu sitio le hayan puesto publicidad indeseada y no sepas editar los archivos necesarios de WP, te conviene pedirle a algún webmaster de tu confianza que lo revise. Si está familiarizado con el código podrá encontrar y borrar el popup en minutos.
Saludos!