Algoritmo ID3

• Interpretación de los parámetros

  • Entropia: nº de bits necesarios para codificar un suceso. Cuanto más bits más información menos probable es un suceso. Es decir, al aparecer más cuando aparece aporta menos información al conjunto que cuando aparece un suceso más raro.
  • Ganancia: Información del conjunto menos la que aporta el atributo X. Cuanto mayor sea menor es la cantidad de información que aporta X, es decir, es un suceso muy probable lo que implica que sea un buen candidato como atributo representativo del conjunto.

Notas: