¿Externos en qué forma? ¿De tu sitio hacia afuera o de alguna publicación en otro lugar hacia tu sitio?
Si estás escribiendo artículos y enlazas fuentes coherentes de otros sitios (puedes hacerlo con el atributo nofollow si lo deseas) te ayudará y mucho. Con esto no quiero decir que entre más enlaces salgan de tu sitio, te ayudará más. Sin embargo, te garantizará un vínculo de confiabilidad ante el buscador y lo más importante, los usuarios.
Ahora, si lo que quieres decir es que existen varios sitios apuntando al tuyo, depende mucho de las principales preguntas a hacerse: ¿Qué tipos de enlaces son (contextuales, fotografía...)? ¿Son de la temática de mi sitio o afines? ¿Posee un PA y DA decente (mayor de 30)? ¿Qué contenía el dominio en el pasado (puedes hacerlo con archive.org)?, entre otras que encuentres relevantes. Como por ejemplo, las visitas que posea ese sitio o la sección donde se encuentra (header, en un artículo, footer...). Cada enlace es un voto con un valor (positivo o negativo) hacia tu sitio.
