La media ponderada de la ley de potencias es un tipo de media . Para un conjunto de números reales positivos con un parámetro y pesos no negativos , se define como
.Si los pesos se normalizan a uno (es decir, su suma es igual a uno), entonces la expresión del promedio ponderado de la ley de potencias toma la forma
.La entropía de la información de un determinado sistema se puede definir como el logaritmo del número de estados disponibles del sistema (o su número efectivo si los estados no son igualmente probables). Tengamos en cuenta que las probabilidades de que el sistema se encuentre en el estado con el número ( ) están normalizadas a . Si los estados del sistema son equiprobables y tienen probabilidad , entonces . En el caso de diferentes probabilidades de estado, definimos el número efectivo de estados como un promedio ponderado de valores de ley de potencia con pesos y un parámetro (donde ):
.De aquí obtenemos la expresión para la entropía
,coincidiendo con la expresión para la entropía de Rényi [1] . Es fácil ver que en el límite en (o ) la entropía de Renyi converge a la entropía de Shannon (a pesar de que la media ponderada de la ley de potencias converge a la media geométrica ponderada ). De acuerdo con la definición de entropía de Rényi , se debe observar una restricción adicional (o ).
Significar | |
---|---|
Matemáticas | Potencia media ( ponderada ) Significado armonico ponderado significado geometrico ponderado Promedio ponderado media cuadrática cúbico promedio media móvil Media aritmético-geométrica Función Media media de Kolmogorov |
Geometría | |
Teoría de la probabilidad y estadística matemática | |
Tecnologías de la información | |
teoremas | |
Otro |