تباعد كولباك - ليبلير: الفرق بين النسختين

تم إضافة 32 بايت ، ‏ قبل سنتين
ط
بوت:إضافة وسم مراجع مفقود
(أُنشئَت بترجمة الصفحة "Kullback–Leibler divergence")
 
ط (بوت:إضافة وسم مراجع مفقود)
 
في [[إحصاء رياضي|الاحصاء الرياضي]] ، فإن '''تباعد''' '''كولباك - ليبلير''' (وتسمى أيضا '''الانتروبية النسبية)''' هو مقياس لمدى اختلاف<nowiki/>[[توزيع احتمال|توزيع احتمالي]] واحد عن توزيع احتمالي مرجعي آخر<ref>{{Cite journal|last=Kullback|first=S.|last2=Leibler|first2=R.A.|year=1951|title=On information and sufficiency|journal=[[Annals of Mathematical Statistics]]|volume=22|issue=1|pages=79–86|DOI=10.1214/aoms/1177729694|mr=39968}}</ref> <ref name="Kullback">{{Citation|last=Kullback|first=S.|title=Information Theory and Statistics|date=1959|publisher=[[John Wiley & Sons]]}}. Republished by [[Dover Publications]] in 1968; reprinted in 1978: {{ردمك|0-8446-5625-9}}.</ref>. تتضمن تطبيقات تباعد كولباك - ليبلير توصيف [[اعتلاج (معلومات)|'''اعتلاج شانون''' (Shannon)]] '''النسبي''' في نظم المعلومات ، '''والعشوائية''' في [[متسلسلة زمنية|السلاسل الزمنية]] المستمرة ، '''واكتساب المعلومات''' عند مقارنة النماذج الإحصائية [[استدلال (بحث علمي)|للاستدلال]]. على النقيض من تباين المعلومات، فإن تباعد كولباك - ليبلير هو مقياس ''غير'' متساوي من حيث التوزيع وبالتالي فهو غير مؤهل ''كمقياس'' إحصائي للانتشار. في الحالة البسيطة ، يشير تباعد كولباك - ليبلير ذو القيمة 0 إلى أن التوزيعتين المعنيتين متطابقتان. وهو يبقى مقياس مهم بالنسبة لتطبيقات عديدة مثل الإحصاءات التطبيقية، [[ميكانيكا الموائع]]، [[علوم عصبية|علم الأعصاب]] [[تعلم آلي|والتعلم الآلي]] .
 
== أصل الكلمة ==
تم تقديم تباعد كولباك - ليبلير بواسطة سولومون كولباك (Solomon Kullback) وريتشارد ليبلير (Richard Leibler) في عام 1951 باعتباره '''اختلافاً موجهاً''' بين '''توزيعتين'''؛ يفضل كولباك مصطلح '''معلومات التمييز'''. <ref>{{Cite journal|first=S.|last=Kullback|author-link=Solomon Kullback|year=1987|title=Letter to the Editor: The Kullback–Leibler distance|journal=[[The American Statistician]]|volume=41|issue=4|pages=340–341|jstor=2684769|DOI=10.1080/00031305.1987.10475510}}</ref> وقد تمت مناقشة الاختلاف في كتاب كولباك لعام 1959 ، ''نظرية المعلومات والإحصاء'' . <ref name="Kullback">{{Citation|last=Kullback|first=S.|title=Information Theory and Statistics|date=1959|publisher=[[John Wiley & Sons]]}}. Republished by [[Dover Publications]] in 1968; reprinted in 1978: {{ردمك|0-8446-5625-9}}.</ref>
 
== مراجع ==
{{مراجع}}
 
[[تصنيف:ديناميكا حرارية]]
[[تصنيف:هندسة المعلومات]]