La entropía se refiere a la desorganización y distribución uniforme de los elementos de un sistema. En termodinámica, la entropía mide la parte de la energía que no puede usarse para producir trabajo. En teoría de sistemas, la entropía representa el desgaste de un sistema debido al tiempo o su funcionamiento, y los sistemas tienden a alcanzar un estado más estable y caótico de máxima entropía. En teoría de la comunicación, la entropía cuantifica la cantidad de información en bits recibida para

1. TEORÍA DE LA INFORMACIÓN Y DE LA COMUNICACIÓN
Nombre: Gloria Vásquez
Fecha: 16/10/2017
ENTROPÍA DE LA INFORMACIÓN
Entropía
• Física Termodinámica
En termodinámica, la entropía es una magnitud física que, mediante cálculo, permite
determinar la parte de la energía que no puede utilizarse para producir trabajo. La
función termodinámica entropía es central para la segunda Ley de la Termodinámica.
La entropía puede interpretarse como una medida de la distribución aleatoria de un
sistema. Se dice que un sistema altamente distribuido al azar tiene alta entropía.
Una magnitud es una función de estado si, y sólo si, su cambio de valor entre dos
estados es independiente del proceso seguido para llegar de un estado a otro. Esa
caracterización de función de estado es fundamental a la hora de definir la variación de
entropía.
• Teoría de Sistemas
La entropía él es desgaste del sistema principalmente originado por el transcurso del
tiempo o por el mismo funcionamiento del sistema. La entropía es un concepto usado
hacia la desorganización y también la distribución uniforme de los elementos del
sistema.Los sistemas tienden a buscar su estado más probable, es decir, busca un nivel
más estable que tiende a ser lo más caótico. Se llama estado de máxima entropía en el
preciso instante cuando el sistemaesté a punto de cambiar de un estado “e” a un estado
“e+1”. La entropía está relacionada con la tendencia natural de los objetos a caer en un
estado de desorden. Todos los sistemas no vivos tienden hacia el desorden; si los deja
aislados, perderán con el tiempo todo movimiento y degenerarán, convirtiéndose en una
masa inerte.
• Teoría de la Comunicación
Formulas

2. Propiedades de la Entropía
La entropía tiene las siguientes propiedades:
Calcular la cantidad de bits recibidos en los siguientes eventos
• Conocer en día de la semana estamos
13,3 bits
• Conocer en qué mes del año estamos
14,07 bits
• Conocer en qué minutos se encuentra un partido de fútbol
6,05 bits