Puede ser por clicks accidentales. Algunos detalles en el diseño de tu webiste que (sin que lo hayas hecho adrede) hagan que los visitantes hayan querido hacer click en algo y terminen haciéndolo en un anuncio de adsense por lo que de inmediato cierran la página que se abre.
Revisa que en tu site no tengas la publicidad muy cerca de otros textos con vínculos.
Revisa además que algún elemento (codigo, plugin, imagen, menu) al cargar no desplace u oculte momentáneamente algún anuncio/enlaces.
A mi me pasó una vez haciendo pruebas cuando instale un pluggin social que no sabía que tenia una opción que al hacer rollover desplegaba una ventana y ocultaba parte de un anuncio de Adense. Por suerte me di cuenta y lo arreglé porque eso va en contra de las TOS de Adense.
Finalmente, puede que tengas algún anuncio o bloque de vínculos que este muy integrado al diseño y los visitantes lo confundan como parte del contenido y no como publicidad e involuntariamente induzca al error.
