Cambiar iconos de archivos html y htm

Abra una carpeta al azar, seleccione "Herramientas" - "Opciones de carpeta" - "Tipos de archivo" en el menú y vuelva a asociar los archivos htm y html al navegador.

Existe un método más simple:

Haga clic derecho en el archivo, seleccione "Abrir con", seleccione IE u otro navegador predeterminado como programa de apertura, haga clic en "Siempre" Verifique el casilla junto a "Usar este programa para abrir archivos de este tipo" y haga clic en Aceptar.