情報エントロピー

情報エントロピーとは

情報量（じょうほうりょう、エントロピーとも）は、情報理論の概念で、あるできごと（事象）が起きた際、それがどれほど起こりにくいかを表す尺度である。頻繁に起こるできごと（たとえば「犬が人を噛む」）が起こったことを知ってもそれはたいした「情報」にはならないが、逆に滅多に起こらないできごと（たとえば「人が犬を噛む」）が起これば、それはより多くの「情報」を含んでいると考えられる。(情報量より引用)

• 出典: フリー百科事典『ウィキペディア（Wikipedia）』
• [ 情報エントロピーの改定履歴 ]