د. مصطفى أبوصلاح الاعتلاج (إنتروبي – entropy) في علم البيانات يستخدم كَمِقياس للنقاء (الخَلل) في عينة معينة. ابتكر هذا المفهوم أحد رواد المعلومات النظرية، ويدعى كلود شانون (1). تخيل أن لدينا مجموعة تحتوي على كرات، ولكل كرة لون. ربما يكون في المجموعة أكثر من لون لهذه الكرات، تتطابق صفة أعضاء المجموعة (الكرات) إذا كانت تمتلك ..