la imagen puede ser png, jpg o gif si lo quieres
por ejemplo si es gif abres el header.php de tu wordpress e introduces el codigo:
<link href="imagen.gif" rel="shortcut icon" />
donde imagen.gif es lo que cambiarás por la url de tu imágen, cabe destacar que debes usar imágenes pequeñas para este fin con 32x32 px basta , cuando mucho 48x48 px