תוכן עניינים:
הגדרה - מה המשמעות של ביג דאטה?
נתונים גדולים מתייחסים לתהליך המשמש כאשר טכניקות כריית נתונים וטיפול מסורתיות אינן יכולות לחשוף את התובנות והמשמעות של הנתונים הבסיסיים. נתונים שאינם מובנים או רגישים לזמן או פשוט גדולים מאוד אינם יכולים להיות מעובדים על ידי מנועי מסד נתונים יחסיים. נתונים מסוג זה דורשים גישה עיבוד שונה הנקראת big data, המשתמשת במקביליות מאסיבית בחומרה זמינה.
Techopedia מסביר את Big Data
בפשטות, נתונים גדולים משקפים את העולם המשתנה בו אנו חיים. ככל שהדברים משתנים, כך נלכדים השינויים ומתועדים כנתונים. קח דוגמא מזג אוויר. עבור חזאי מזג אוויר, כמות הנתונים שנאספת ברחבי העולם על תנאים מקומיים היא משמעותית. מבחינה הגיונית, יהיה זה הגיוני שהסביבות המקומיות מכתיבות השפעות אזוריות וההשפעות האזוריות מכתיבות את ההשפעות הגלובליות, אך יכול להיות שזה הפוך. כך או אחרת, נתוני מזג האוויר הללו משקפים את התכונות של נתונים גדולים, שם נדרש עיבוד בזמן אמת לכמות אדירה של נתונים, ושם ניתן לייצר את המספר הגדול של התשומות במכונה, תצפיות אישיות או כוחות חיצוניים כמו כתמי שמש.
עיבוד מידע כזה ממחיש מדוע נתונים גדולים הפכו חשובים כל כך:
- מרבית הנתונים שנאספים כעת אינם מובנים ומחייבים אחסון ועיבוד שונים מזה שנמצא במאגרי מידע יחסיים מסורתיים.
- כוח חישובי זמין הוא טיל שמיים, כלומר יש יותר הזדמנויות לעבד נתונים גדולים.
- האינטרנט דמוקרטיזציה של נתונים, והגדיל בהתמדה את הנתונים הזמינים תוך הפקת יותר ויותר נתונים גולמיים.
לנתונים בצורתם הגולמית אין ערך. יש לעבד נתונים כדי להיות בעלי ערך. עם זאת, כאן טמונה הבעיה המובנית של נתונים גדולים. האם עיבוד נתונים מתבנית אובייקטים מקוריים לתובנה שמישה שווה את עלות ההון העצומה של כך? או שיש פשוט יותר מדי נתונים עם ערכים לא ידועים כדי להצדיק את ההימור של עיבודם בעזרת כלי נתונים גדולים? רובנו מסכימים שליכולת לחזות את מזג האוויר יהיה ערך, השאלה היא האם ערך זה יכול לעלות על עלויות הפיצוץ של כל הנתונים בזמן אמת לדוח מזג אוויר שאפשר לסמוך עליו.
