תוכן עניינים:
הגדרה - מה המשמעות של עיבוד נתונים מראש?
עיבוד מוקדם של נתונים הוא טכניקת כריית נתונים הכוללת הפיכת נתונים גולמיים לפורמט מובן. נתונים מהעולם האמיתי הם לרוב לא שלמים, לא עקביים ו / או חסרים התנהגויות או מגמות מסוימים, וככל הנראה מכילים שגיאות רבות. עיבוד מראש של נתונים הוא שיטה מוכחת לפיתרון בעיות מסוג זה. עיבוד נתונים מראש מכין נתונים גולמיים להמשך העיבוד.
עיבוד מוקדם של נתונים משמש ביישומים המונעים על בסיס מסד נתונים כגון ניהול קשרי לקוחות ויישומים מבוססי כללים (כמו רשתות עצביות).
Techopedia מסביר עיבוד נתונים מראש
הנתונים עוברים סדרת שלבים במהלך עיבוד מוקדם:
- ניקוי נתונים: הנתונים מנקים באמצעות תהליכים כמו מילוי ערכים חסרים, החלקת הנתונים הרועשים או פתרון אי התאמות בנתונים.
- שילוב נתונים: נתונים עם ייצוגים שונים מורכבים וקונפליקטים בתוך הנתונים נפתרים.
- טרנספורמציית נתונים: הנתונים מנורמלים, מצטברים ומוכללים.
- הפחתת נתונים: שלב זה נועד להציג ייצוג מופחת של הנתונים במחסן נתונים.
- שיקול נתונים: כרוך בצמצום של מספר ערכים של תכונה רציפה על ידי חלוקת טווחי מרווחי התכונות.
