אנחנו רואים את זה בכל מקום
זרם גדול של נתונים
אפילו אצל משתמשים ביתיים
אותם שלפני שנים ספורות עדיין שאלו "מי צריך מחשב" ו"מה לעשות עם זה"
ואולי דווקא הם הפגיעים ביותר.
לא ערכתי סקר בענין, אך להרגשתי,
משתמשים חדשים ברשת עושים את הקפיצה הגדולה ביותר בכמויות מידע,
בגלל הרגלי צריכת המדיה שלהם, שכוללים סרטים וסדרות טלויזיה,
אשר אותם הם רגילים (עדיין) לשמור.
בקיצור, אף אחד לא פטור מענשו של שטפון המידע.
עליית נפחי המידע היא בתאוצת גידול.
אפשר לחשוב על מספר סיבות לכך:
נתונים אוטומטיים
העובדה שצרכני מידע הפכו גם ליצרני מידע
הפצה אלקטרונית זמינה לכל אחד
חיבור בין מחשבים לתקשורת
קצב השתכללות כלי כריית נתונים לא מדביק את ההתפתחות הזאת.
התוצאה היא שאחוז הנתונים המוסברים הולכת וקטנה,
ושמישות מאגרי המידע יורדת.
לפני 7 שנים שמעתי הערכת מומחים,
כי רק 1% מהמידע בנתונים מנוצל.
בלי להכנס לשאלה המענינת בפני עצמה "איך מודדים את הניצול?"
יש להניח שהיום שיעור הניצול נמוך בהרבה יותר.
זה מוביל אותי למסקנה: צריך כללים חדשים להתיחסות לנתונים,
אחרת הטכנולוגיה הטובה תביא אותנו בסופו של ענין לאבסורד.
בין הכללים החדשים, החשוב ביותר לדעתי הוא הכלל של שימוש בנתונים לא-דגומים unsupervised data.
הכלל השני, להבנתי, וראוי לדבר עליו בנפרד ובהרחבה,
הוא "זיהוי דפוסי התנהגות בצורה ממוחשבת".
