yirminci yüzyılın, Shannon kırklı tanıtılan teorisinin temel kavramları.Bilgi Kuramı - iletim, depolama ve doğal, teknik ve sosyal sistemlerde veri alma süreçlerinin çalışmadır.Bilgisayar bilimleri, dilbilim, kriptografi, kontrol teori, görüntü işleme, genetik, psikoloji, ekonomi, üretim yöntemleri organizasyonu gibi birçok uygulamalı bilimsel alanlarda bu bilimi kullanılmaktadır.
Modern koşullarda bilgi teorisi, çok sıkı, kodlama teorisine bağlı nicelemeyi çalışmaları ve bunların sinyalleri yanı sıra spektral ve korelasyon analizi geri sinyal ve mesaj ve sinyal işleme teorisi arasındaki yazışma en yaygın sorunları tartışıyor edilir.
Bilgi Kuramı dikkate değerini almadan kantitatif çoğunlukla "bilgi", temel kavram inceler ve bazen de seziyorum.Bu yaklaşımla, metin sayfası verilerinin aynı miktarda sadece işaret ve sembollerin sayısına göre belirlenir yaklaşık içerecektir ve bazı semboller anlamsız ve kaotik set kesinlikle olsa bile, kesinlikle konuşma, orada basılır, gerçeğine bağlı değildir.Onlar doğru karakterler ve semboller herhangi bir set ile temsil edilebilir iletişim kanalları yoluyla bilgi iletmek zorunda
Bu yaklaşım, haklı, ancak iletişim sistemlerinin simülasyonu için bir.Bu hesaba verinin değerini ve anlamını almak gerektiğinde, sonra bir nicel bir yaklaşım kabul edilemez.Bu tür durumlar, bu teorinin olası uygulama alanları önemli kısıtlamalar empoze.Bilgi teorisi
Temelleri doğrudan veri iletimi ve alımı ile ilgili olanlar da dahil olmak üzere çeşitli konularda, dikkate alınmasını gerektirir.Aşağıdaki gibi öğretiler görülür iletişimin temel düzeni.Bilgi Kuramı ve Kodlama bunlar bir kelime veya kelime yazılı alfabenin bazı harflerin ayarlanır mesajların kaynağı olduğuna inanmaktadır.Iletinin kaynak harf dizisi oluşturarak, herhangi bir doğal ya da yapay dilde metin, insan konuşma, veri tabanı ve bazı matematiksel modeller olabilir.Sinyal iletimi için bir araç - verici iletişim kanalının fiziksel doğasına tekabül eden bir sinyali halinde Mesaj dönüştürür.Böyle geçişi sırasında bilgi parametrelerinin değeri çarpıtmalar tanıtmak girişime tabidir.Alıcı alınan bozuk sinyalden orijinal mesajı kurtarır.Bazı kişi veya teknik cihazlarla - azaltılmış formu mesaj muhataba geliyor.Her Mesajın görünümü belirli bir olasılık tarafından belirlenir, yani
Kaynak, istatistiksel doğa nakleder.Bilgi Kuramı Shannon mesajın olasılığı birlik ise, önemli ölçüde onun görünümünü, ve hiçbir belirsizlik yoktur, herhangi bir bilgi taşımıyor düşünün inanıyor.
bilgi teorisinin önemli sorunlardan biri iletişim kanalının koordinasyon ve bilgi mesajlarının kaynağının özelliklerini dikkate alır.Üretilen saniyede 1 bit birimi tanımlanmıştır.
iletişim sistemleriyle ilgili bir sorun, istenen sinyal yoluna etkileşimidir.Shannon, ne yazık ki, bize o ile başa çıkmak için özel yöntemler vermez.En kolay yöntem bilgileri aktarmak için zaman alıcı çünkü tekrarlanan birçok kez mesaj çok etkili değildir, hangi ortadan kaldırmak için.Çok daha fazla verim algılamak ve doğru iletim hataları bilgi sağlayan kodlar kullanımına izin verir.