David MacKay著Information Theory, Inference, and Learning Algorithmsという本があります（著者のサイトで全文ダウンロードできます）。情報理論の基礎からベイズ統計学やニューラル・ネットワークやグラフ理論までを幅広くカバーしていて、かつ文章も平…