一文总结机器学习中的熵——宇宙的终极演化定律

本文从宇宙演化的终极定律熵增定律出发，讲解什么是熵？熵与机器学习的关系——最大熵原理，并引出相对熵、交叉熵、条件熵、互信息等常见概念