Ahi Gasper te dejo una imagen perfecta, en el menu desplegable tienes las configuraciones que vienen por defecto en vbseo y debajo donde te marco el recuadro ahi dando clic al + ingresas a setear las configuraciones a tu gusto, encontraras muchisimas opciones y seguramente si quieres sacar el .html de todas tendras que cambiarlas una por una.
Como te decia, tienes que estar seguro de saber lo que estas haciendo, sino es preferible dejar uno de los formatos que vienen prestablecidos. El .html no afecta para nada en la indexacion, al contrario, algunos sostienen que es beneficioso.