انتقل إلى المحتوى

مصدر المعلومات (رياضيات)

هذه المقالة يتيمة. ساعد بإضافة وصلة إليها في مقالة متعلقة بها
يفتقر محتوى هذه المقالة إلى مصادر موثوقة.
من ويكيبيديا، الموسوعة الحرة

في الرياضيات تكون مصدر المعلومات عبارة عن متسلسلة للمتغيرات العشوائية تتراوح في الأبجدية المحدودة للحرف Γ, ممتلكةً للتوزيعات المحطية stationary distribution.

إن عدمية اليقين, أو معدل الإنتروبية, entropy rate لمصدر المعلومات تعرف بالطريقة التالية

حيث أن

هي متسلسلة لمتغير عشوائي تعرف بمصدر المعلومات , و

هي إنتروبية المعلومات الشرطية information entropy لمتسلسلة المتغير العشوائي. و بشكل متكافئ, تكون واحدة منها

المراجع[عدل]

  • روبرت بي. آش، نظرية المعلومات, (1965) منشورات دوفر. ISBN 0-486-66521-6