אנשי מקצוע בתחום הנתונים, המתמודדים עם בעיות תשתית באופן קבוע, מתקשים לעמוד בדרישות העסקיות של הארגון
פורסם: 14.3.21 צילום: Fivetran
אוקלנד, קליפורניה, במארס 2021: על אף העובדה כי קבלת החלטות על בסיס נתונים היא גורם מכריע להצלחת עסקים בימינו, מחקר בינלאומי חדש שבוצע על ידי Dimensional Research מטעם ספקית אינטגרציית הנתונים המובילה Fivetran חושף שככלל ארגונים מתקשים למנף את כמות הנתונים העומדת לרשותם. על פי המחקר, 44 אחוזים מהמשיבים ציינו שנתוני מפתח עדיין אינם זמינים לשימוש לצורך קבלת החלטות, ו-68 אחוזים אמרו כי היו יכולים לחלץ תובנות עסקיות נוספות מהנתונים הקיימים, לו רק היה להם יותר זמן. הסיבה לכך מיוחסת ברובה לבעיות הקשורות לחוסר יעילות בתחזוקת הנתונים עמן מתמודדים המהנדסים שאחראיים על המרה של נתוני הארגון לפורמט קל לניתוח.
המחקר נערך באופן מקוון בקרב 543 מקצועני נתונים בחמש יבשות ו-Fivetran, המובילה במתן פתרונות אוטומטיים מנוהלים לאינטגרציית נתונים בענן, תשתף תובנות וממצאים נוספים שעלו ממנו במהלך Data Engineer Appreciation Day, אירוע מקוון שעתיד להתקיים היום, 11 במארס 2021. באירוע יתכנסו מהנדסים ואנשי מקצוע מרחבי העולם לדון במצב התעשייה, לחלוק תובנות ולציין את פעילותם החשובה של מהנדסי הנתונים.
על פי המחקר, הסיבות המיוחסות לחוסר היעילות של מהנדסי הנתונים קשורות לצינורות עיבוד הנתונים (Pipelines), כאשר 98 אחוזים מהמשיבים העידו כי חוו קושי בבניית צינורות עיבוד נתונים לצורך גישה לנתונים. יתרה מכך כ-98 אחוזים אף ציינו שאותם צינורות העיבוד קורסים, ומחצית מהנשאלים (51%) אמרו שזה קורה בתדירות של למעלה מפעם בחודש. המשיבים שדיווחו על קריסה יומיומית של צינורות העיבוד ציינו שנגישות מקורות נתונים ושינויי סכימה הן הסיבות המובילות לקריסתם.
בשל העובדה שמהנדסי הנתונים מבזבזים זמן יקר בתיקון ובתחזוקת צינורות העיבוד במקום להתמקד במשימות בעלות ערך, העסק סובל ופעילותו עלולה להיפגע. לראייה, ממצאי הדוח מצביעים על כך ש-66 אחוזים מהנשאלים דיווחו על יעילות תפעולית מופחתת ו-59 אחוזים מהנשאלים דיווחו על החלטות שנדחו או הזדמנויות שפוספסו בגלל פעילות תקולה של צינורות העיבוד.
"מהנדסי הנתונים הם למעשה הכוח המניע מאחורי קבלת החלטות המייצרות הכנסות, אולם הם עדיין נאלצים להתמודד עם צינורות עיבוד נתונים שבירים וקשים לתחזוקה. על הארגונים להיות מודעים לאתגרים עמם מתמודדים אנשי הדאטה, על מנת שיוכלו לספק להם נתונים מהימנים בצורה קלה יותר", אמר ג'ורג' פרייזר, מנכ"ל Fivetran. "Fivetran מספקת גישה מהימנה לנתונים באמצעות צינורות עיבוד נתונים מנוהלים במלואם והמרות ל-SQL – עם 99.9 אחוזי זמינות מובטחת. מה שמאפשר לעסקים להפעיל את הנתונים שלהם ולקבל החלטות באופן מהיר יותר, במקום לשרוף משאבים יקרים על בנייה ותחזוקה של הצינורות בעצמם".
בארגונים גדולים כמו בעסקים קטנים ובינוניים, גישה מיידית ומהימנה לנתונים היא גורם קריטי בקבלת החלטות. המחקר מראה שבעיות בצינורות עיבוד הנתונים ממשיכות להכביד על התהליך, וכתוצאה מכך הארגונים מחמיצים תובנות רבות-ערך.
מבין הממצאים הנוספים של המחקר: 79 אחוזים מהארגונים מתכננים לגייס מהנדסי נתונים נוספים בשנה הקרובה; 72 אחוזים מהארגונים משנעים את נתוני המקור באופן יומי או בתדירות גבוהה יותר; 59 אחוזים מהארגונים עושים שימוש ב-11 מקורות נתונים ומעלה; 91 אחוזים אומרים שבעיות עם זמינות המקור היא הסיבה לקריסה יומיומית של צינורות עיבוד הנתונים; 55 אחוזים מדווחים שדרוש יותר מיום עסקים אחד כדי לתקן צינור עיבוד תקול; 86 אחוזים משתמשים בפתרונות מרובים לבניית צינורות עיבוד נתונים חדשים; 41 אחוזים אומרים שהיעדר אסטרטגיית נתונים (מדיניות, תהליכים, טכנולוגיה) היא אתגר הנתונים הגדול ביותר עמו מתמודד הארגון שלהם.
לקבלת מידע נוסף ולהרשמה לאירוע – Data Engineer Appreciation Day 2021.
Fivetran (פייבטראן), הינה חברה פרטית מובילה במתן פתרונות אוטומטיים מנוהלים לאינטגרציית נתונים בענן המאפשרת לחברות לדייק את העבודה מונחית הנתונים שלהן באמצעות סנכרון רציף של נתונים ממקורות ויישומים שונים, ביצוע טרנספורמציית נתונים פנימית, טיוב נתונים, גיבוי נתונים והפקת דוחות ניתוח. המודל של Fivetran מאפשר לרכז נתונים ממערכות שונות כמו SAP, אורקל, סיילספורס, נטסוויט, בסיסי נתונים ארגוניים, כלי שיווק ועוד, ולאחד את כל הדאטה על ידי ממשק API במערכת אחת נגישה ונוחה לשימוש. הפתרון של Fivetran ניתן להתקנה תוך חמש דקות בלבד, לאחריהן הוא מתחיל באופן אוטומטי לבצע את תהליכי ניהול הנתונים.
החברה נוסדה ב-2013 מתוך האקלסטור Y combinator על ידי ג'ורג' פרייזר וטיילור בראון, ושוויה מוערך ב-1.2 מיליון דולר. עד כה, גייסה החברה 163 מיליון דולר בחמישה סבבי גיוס שונים ולאחרונה גם זכתה במעמד הייחודי של חברת "חד קרן" Unicorn)). החברה מעסיקה כיום למעלה מ-450 עובדים ברחבי העולם, כאשר מטה החברה ממוקם באוקלנד, קליפורניה.
מגזין "סטטוס" מופק ע"י:
Tags: חדשנות נתונים ענן
