داتا ماينينج · CSC213

خطوات الـ KDD: عملية اكتشاف المعرفة من قواعد البيانات

داتا ماينينج شروحات ومراجعات

الـ KDD (knowledge discovery in databases) هو العملية الكاملة لتحويل البيانات الخام لمعرفة، والـ data mining هو خطوة اكتشاف الأنماط جواها.

خطوات الـ KDD المعتادة بالترتيب: data cleaning (شيل الـ noise والبيانات المتناقضة)، data integration (دمج أكتر من مصدر بيانات)، data selection (استرجاع البيانات المهمة للتحليل)، data transformation (تحويل أو تجميع البيانات لشكل مناسب للتنقيب زي الـ aggregation)، data mining (تطبيق طرق ذكية لاستخراج الأنماط)، pattern evaluation (تحديد الأنماط المفيدة فعلًا)، وknowledge presentation (عرض المعرفة للمستخدم بالـ visualization).

أول الخطوات كلها تجهيز. الـ cleaning والـ integration غالبًا بيخدوا معظم المجهود في أي مشروع حقيقي لأن خوارزميات التنقيب على قد البيانات اللي بتتدّيها. والـ data mining نفسه خطوة واحدة من العملية، مع إن الناس بتستخدم الاسم للعملية كلها.

والـ data warehouse غالبًا بيبقى ورا خطوة الـ integration: مصادر كتير بتتجمع في مخزن واحد متسق قبل الـ selection.

أهم النقاط

  • الترتيب: cleaning ثم integration ثم selection ثم transformation ثم mining ثم evaluation ثم presentation.
  • الـ integration = دمج مصادر بيانات متعددة.
  • الـ transformation = توحيد البيانات في شكل مناسب للتنقيب.
  • الـ data mining خطوة واحدة من الـ KDD.
  • الـ pattern evaluation بتحتفظ بالأنماط المفيدة بس.

مثال محلول

متجر عنده المبيعات في database والعملاء في database تانية. بينضف الأخطاء والتكرار، ويدمج الاتنين بالـ customer ID، ويختار آخر سنة، ويجمّع مشتريات كل عميل، ويعمل mining لشرايح العملاء، ويقيّم أنهي شريحة مفيدة، ويعرض النتيجة في رسومات.

أسئلة شائعة

KDD اختصار لإيه؟

Knowledge discovery in databases.

هل الـ data mining هو نفسه الـ KDD؟

الـ data mining هو الخطوة الأساسية في الـ KDD مش العملية كلها.

أسئلة تدريب على الموضوع ده

جرّبها بنفسك، وبعدين افتح التطبيق وشوف الإجابة والشرح.

  1. Multiple numbers of data sources get combined in which step of the Knowledge Discovery?
    • A. Data Cleaning
    • B. Data Integration
    • C. Data Selection
    • D. Data Transformation
  2. The knowledge discovery process in which several data are combined ______.
    • A. Data cleaning
    • B. Data integration
    • C. Date selection
    • D. None of the above
  3. Where data are transformed or consolidated into forms appropriate for mining by performing summary or aggregation operations
    • A. Data transformation
    • B. Data mining
    • C. Data knowledge
    • D. Data integration
  4. The initial steps concerned in the process of knowledge discovery is:
    • A. Data Transformation
    • B. Knowledge presentation
    • C. Data Integration
    • D. Data Cleaning
  5. The correct order in which all sub-processes of data mining execute is:
    • A. Infrastructure, Preprocessing, data mining, evaluation, Knowledge presentation.
    • B. Infrastructure, Preprocessing, Knowledge presentation, data mining, evaluation
    • C. data mining, Preprocessing, evaluation, Knowledge presentation
  6. Which of the following is NOT a step in the typical Knowledge Discovery (KDD) process?
    • A. Post-Processing (Pattern evaluation, visualization)
    • B. Data Pre-Processing
    • C. Data Mining
    • D. Initial Data Generation