他の質問でも言いましたが、 貴方の質問で聞いている科目は全て「通信工学」の範疇に入る内容です。 まずは情報理論の勉強をしてください。 http://eprints.lib.hokudai.ac.jp/dspace/handle/2115/374