תורת האינפורמציה – הבדלי גרסאות

תוכן שנמחק תוכן שנוסף
Falcor84 (שיחה | תרומות)
←‏התייחסות למושג המידע: מחקתי דוגמא לא מתאימה
מ אחידות במיקום הערות שוליים ביחס לסימני פיסוק
שורה 6:
לתורת האינפורמציה השלכות רבות ב[[מדעי המחשב]] ו[[הנדסת חשמל]]: התורה עוסקת ב[[מערכת תקשורת|מערכות תקשורת]], [[שידור נתונים]], [[דחיסת נתונים]], [[הצפנה]], [[תורת הדגימה (עיבוד אותות)|תורת הדגימה]], [[תיקון שגיאות]] ב[[קידוד נתונים]] ועוד.
 
==היסטוריה==
תורת האינפורמציה פותחה בתגובה לקשיים שבהם נתקלו [[הנדסת מערכות תקשורת|מהנדסי מערכות תקשורת]], אשר השתמשו במכשירים כמו [[טלפון]] ו[[מודם]]{{הערה|שם=מקדונל|Mcdonnell, M. D., Ikeda, S., & Manton, J. H. (2011). An introductory review of information theory in the context of computational neuroscience. Biological Cybernetics, 105(1), 55-70.}}.
 
האדם שנחשב אבי תורת האינפורמציה הוא [[קלוד שאנון|קלוד אלווד שאנון]]. ב-1948 פרסם מאמר הסוקר את הבסיס המתמטי עבור [[מערכת תקשורת|מערכות תקשורת]]. במאמר זה הגדיר שנון את יחידת ה[[ביט]] ואת מושג ה[[אנטרופיה (סטטיסטיקה)|אנטרופיה]] המתקשר לכמות הביטים המינימלית הנדרשת כדי לשמור או לשדר פיסת מידע מסוימת.{{הערה|C.E. Shannon, "[http://cm.bell-labs.com/cm/ms/what/shannonday/shannon1948.pdf A Mathematical Theory of Communication]", '''Bell System Technical Journal''', vol. 27, pp. 379–423, 623-656, July, October, 1948}}. עבודה זו בעלת השפעה רבה ביותר על המדע במאה ה-20, ומצוטטת מעל 45 אלף פעמים במאמרים אקדמאים שונים{{הערה|נכון ל-2011, לפי [[Google Scholar]]}}.
 
רוב ה[[מחקר]] שעסק בתורת האינפורמציה נערך מנקודת מבט [[הנדסה|הנדסית]]{{הערה|שם=מקדונל}}.