Claude Shannon

Entropie de Shannon

L’entropie de Shannon, c’est giga stylé !! J’espère vous plonger dans le même enthousiasme que le mien à la lecture de ceci. Introduction Claude Shannon s’intéressait d’abord à la transmission d’information et a eu l’idée géniale d’introduire le concept d’entropie en informatique. Comme il est détaillé dans mon premier article sur une introduction générale au hasard, l’entropie avait déjà vu le jour en physique et avait déjà eu l’occasion d’engager de vifs débats, notamment entre Albert Einstein et Niels Bohr au congrès de Solvay de 1927. ...

June 1, 2025

Le hasard

C’est un titre sobre qui en cache beaucoup ! Définition du hasard Historique Cournot D’abord, Cournot définissait le hasard comme la rencontre incongrue de deux séries causales bien déterminées. On peut y avoir une peur du hasard dans le sens où celui-ci échappe à la compréhension de certains, mais pas des malins comme Cournot ! En effet, puisqu’il s’agit d’un évènement de l’univers, alors il doit bien être déterminé par une cause. Celle-ci étant elle-même déterminée par une autre cause et ainsi de suite. C’est l’idée des séries causales. Et d’après Cournot, c’est lorsque deux séries causales qui n’avaient rien à voir se rencontrent que le hasard naît. Par exemple, la série causale dans laquelle vous réfléchissez à ce que vous allez manger ce soir en marchant dans la rue et d’un coup, en tournant au bout de celle-ci apparait dans votre champ de vision une magnifique boutique de pâtisseries tunisiennes. C’est absurde de ne manger que ça pour le dîner mais si c’est apparu comme ceci c’est alors qu’il y a une raison… ...

June 1, 2025