情報理論

AI社会を生き抜くための基礎知識である情報理論。本書は微分積分・線形代数・確率論などの大学初年級で学ぶ数学をベースに、エントロピー理論と符号化定理を中心に解説した入門的テキスト。詳細な証明や計算が必要なため、重要事項だが他書では割愛されるような内容も、本書では丁寧に取り上げる。また、情報理論における三大定理のうちの2つ「情報源符号化定理」「通信路符号化定理」の詳細を解説し、「エントロピーの一意性定理」についてもその概略を紹介する。