Star inactiveStar inactiveStar inactiveStar inactiveStar inactive
 

על אף העובדה כי קבלת החלטות על בסיס נתונים היא גורם מכריע להצלחת עסקים בימינו, מחקר בינלאומי חדש שבוצע על ידי Dimensional Research מטעם ספקית אינטגרציית הנתונים Fivetran חושף שככלל ארגונים מתקשים למנף את כמות הנתונים העומדת לרשותם.

על פי המחקר, 44 אחוזים מהמשיבים ציינו שנתוני מפתח עדיין אינם זמינים לשימוש לצורך קבלת החלטות, ו-68 אחוזים אמרו כי היו יכולים לחלץ תובנות עסקיות נוספות מהנתונים הקיימים, לו רק היה להם יותר זמן. הסיבה לכך מיוחסת ברובה לבעיות הקשורות לחוסר יעילות בתחזוקת הנתונים עמן מתמודדים המהנדסים שאחראיים על המרה של נתוני הארגון לפורמט קל לניתוח.

המחקר נערך באופן מקוון בקרב 543 מקצועני נתונים בחמש יבשות ו-Fivetran, המובילה במתן פתרונות אוטומטיים מנוהלים לאינטגרציית נתונים בענן, תשתף תובנות וממצאים נוספים שעלו ממנו במהלך Data Engineer Appreciation Day, אירוע מקוון שהתכנסו מהנדסים ואנשי מקצוע מרחבי העולם לדון במצב התעשייה, לחלוק תובנות ולציין את פעילותם החשובה של מהנדסי הנתונים.

על פי המחקר, הסיבות המיוחסות לחוסר היעילות של מהנדסי הנתונים קשורות לצינורות עיבוד הנתונים (Pipelines), כאשר 98 אחוזים מהמשיבים העידו כי חוו קושי בבניית צינורות עיבוד נתונים לצורך גישה לנתונים. יתרה מכך כ-98 אחוזים אף ציינו שאותם צינורות העיבוד קורסים, ומחצית מהנשאלים (51%) אמרו שזה קורה בתדירות של למעלה מפעם בחודש. המשיבים שדיווחו על קריסה יומיומית של צינורות העיבוד ציינו שנגישות מקורות נתונים ושינויי סכימה הן הסיבות המובילות לקריסתם.

בשל העובדה שמהנדסי הנתונים מבזבזים זמן יקר בתיקון ובתחזוקת צינורות העיבוד במקום להתמקד במשימות בעלות ערך, העסק סובל ופעילותו עלולה להיפגע. לראייה, ממצאי הדוח מצביעים על כך ש-66 אחוזים מהנשאלים דיווחו על יעילות תפעולית מופחתת ו-59 אחוזים מהנשאלים דיווחו על החלטות שנדחו או הזדמנויות שפוספסו בגלל פעילות תקולה של צינורות העיבוד.  

"מהנדסי הנתונים הם למעשה הכוח המניע מאחורי קבלת החלטות המייצרות הכנסות, אולם הם עדיין נאלצים להתמודד עם צינורות עיבוד נתונים שבירים וקשים לתחזוקה. על הארגונים להיות מודעים לאתגרים עמם מתמודדים אנשי הדאטה, על מנת שיוכלו לספק להם נתונים מהימנים בצורה קלה יותר", אמר ג'ורג' פרייזר, מנכ"ל Fivetran. "Fivetran מספקת גישה מהימנה לנתונים באמצעות צינורות עיבוד נתונים מנוהלים במלואם והמרות ל-SQL – עם 99.9 אחוזי זמינות מובטחת. מה שמאפשר לעסקים להפעיל את הנתונים שלהם ולקבל החלטות באופן מהיר יותר, במקום לשרוף משאבים יקרים על בנייה ותחזוקה של הצינורות בעצמם".

בארגונים גדולים כמו בעסקים קטנים ובינוניים, גישה מיידית ומהימנה לנתונים היא גורם קריטי בקבלת החלטות. המחקר מראה שבעיות בצינורות עיבוד הנתונים ממשיכות להכביד על התהליך, וכתוצאה מכך הארגונים מחמיצים תובנות רבות-ערך.

מבין הממצאים הנוספים של המחקר: 79 אחוזים מהארגונים מתכננים לגייס מהנדסי נתונים נוספים בשנה הקרובה; 72 אחוזים מהארגונים משנעים את נתוני המקור באופן יומי או בתדירות גבוהה יותר; 59 אחוזים מהארגונים עושים שימוש ב-11 מקורות נתונים ומעלה; 91 אחוזים אומרים שבעיות עם זמינות המקור היא הסיבה לקריסה יומיומית של צינורות עיבוד הנתונים; 55 אחוזים מדווחים שדרוש יותר מיום עסקים אחד כדי לתקן צינור עיבוד תקול; 86 אחוזים משתמשים בפתרונות מרובים לבניית צינורות עיבוד נתונים חדשים; 41 אחוזים אומרים שהיעדר אסטרטגיית נתונים (מדיניות, תהליכים, טכנולוגיה) היא אתגר הנתונים הגדול ביותר עמו מתמודד הארגון שלהם.

הדף שלנו בפייסבוק

מעניין? שתפו דף זה באמצעות הטלפון הנייד

מאמרים

מגמות של ביג דאטה בעולם הביטוח
CA Technologies
SSIS - Buffer Size Optimization
קטגוריה ראשית
בדיקות BI ו-DWH לעומת הבדיקות בתחומים אחרים
קטגוריה ראשית
איסוף דרישות לפרויקטי BI
קטגוריה ראשית
כח המידע במיקוד
קטגוריה ראשית
0

Microsoft

Oracle

IBM

Informatica

Sap

SAS

Qlikview

Cloudera

Machine Learning