כל ארגון מגיע בסופו של דבר לרגע שבו המערכת הוותיקה כבר לא עומדת בקצב. מערכות Legacy שנבנו לפני עשרות שנים על גבי מחשבים מרכזיים (Mainframe) ובסיסי נתונים סגורים מתקשות להתחבר לעולם הדיגיטל, לאינטרנט, לענן ולאפליקציות המובייל. הפתרון הוא הסבה למערכת פתוחה ומודרנית.

אבל הסבת מערכת היא לא רק החלפת תוכנה. היא העברה של הנכס היקר ביותר של הארגון: הנתונים. רשומות לקוחות, פוליסות, חשבונות, היסטוריית עסקאות, מלאי ועוד. אם הנתונים לא עוברים בשלמותם ובדיוק מלא, המערכת החדשה, מבריקה ככל שתהיה, תעבוד על בסיס פגום.

כאן נכנסות לתמונה בדיקות הסבת נתונים: התהליך שמוודא שכל רשומה, כל שדה וכל ערך הגיעו ליעד בדיוק כפי שתוכנן.

מהן בדיקות הסבת נתונים?

בדיקות הסבת נתונים (Data Migration Testing) הן תהליך שיטתי שבודק שהנתונים שהועברו ממערכת המקור למערכת היעד שלמים, מדויקים ותקינים. הבדיקה משווה בין המקור ליעד ובודקת שכללי ההמרה הופעלו נכון.

הבדיקות עונות על כמה שאלות מרכזיות:

• שלמות: האם כל הרשומות עברו? האם מספר הרשומות במקור זהה למספר ביעד?
• דיוק: האם הערך בכל שדה נשמר, או הומר בדיוק לפי חוקי ההמרה שהוגדרו?
• תקינות: האם נוצרו מפתחות כפולים, רשומות יתומות או שדות ריקים שלא היו אמורים להיות?
• עקביות: האם הקשרים בין הטבלאות נשמרו, למשל בין לקוח לפוליסות שלו?
• תפקוד: האם המערכת החדשה עובדת נכון עם הנתונים שהוסבו?

בדיקות ההסבה קשורות קשר הדוק לתהליכי ETL (שליפה, המרה וטעינה). אלא שכאן המטרה אינה רק להעביר נתונים, אלא להוכיח שההעברה הצליחה.

מה קורה כשמדלגים על בדיקות ההסבה?

הבעיה בטעויות הסבה היא שהן כמעט אף פעם לא מתגלות ביום העלייה לאוויר. המערכת עולה, המסכים נטענים, והכול נראה תקין. הטעויות מתגלות שבועות או חודשים אחר כך, כשלקוח מקבל חיוב שגוי או כשדוח רגולטורי לא מתאזן.

כמה תרחישים נפוצים:

• רשומות חסרות: לקוחות שנעלמו בדרך, לרוב בגלל ערך חריג שגרם לרשומה להידחות בשקט.
• המרות שגויות: תאריכים שהתהפכו, סכומים שאיבדו ספרות אחרי הנקודה העשרונית, קודים שמופו לערך הלא נכון.
• בעיות קידוד: טקסט בעברית שהפך לסימני שאלה או לג'יבריש.
• מפתחות כפולים: אותו לקוח שמופיע פעמיים ביעד, עם יתרות שונות.
• קשרים שבורים: פוליסות או חשבונות שאיבדו את הקשר ללקוח שלהם.

במגזרים כמו בנקאות, ביטוח ופנסיה, טעות כזו היא לא רק תקלה טכנית. היא עלולה להוביל לחשיפה רגולטורית, לתביעות ולפגיעה באמון הלקוחות.

שלבי בדיקות ההסבה ובדיקות הקבלה

בטסנת, בדיקות ההסבה נשענות על מתודולוגיה מובנית, על כלים תומכים ועל צוות מיומן שמכיר גם את עולם התוכן של הלקוח. מומחי החברה מתכננים ומבצעים בדיקות קבלה לכל אחד מהשלבים הקריטיים בפרויקט:

1. הבנת הנתונים והמיפוי: לימוד מבנה הנתונים במערכת הישנה ובחדשה, ואימות מסמך המיפוי וכללי ההמרה בין השדות.
2. תכנון הבדיקות: הגדרת היקף הבדיקה, קריטריוני הצלחה, דגימות ובדיקות מלאות, ותרחישי קצה.
3. בדיקות לפני ההסבה: ניתוח איכות הנתונים במקור, כדי לזהות מראש ערכים חריגים, כפילויות ושדות חסרים.
4. הסבות ניסיון: הרצת הסבות חוזרות בסביבת בדיקות, והשוואה מלאה בין המקור ליעד אחרי כל הרצה.
5. בדיקות פונקציונליות על הנתונים המוסבים: וידוא שתהליכים עסקיים, חישובים ודוחות במערכת החדשה עובדים נכון עם הנתונים שהוסבו.
6. ההסבה הסופית ובדיקות הקבלה: בדיקה מלאה ביום ההסבה עצמו, אישור הלקוח ומעבר לייצור.
7. בקרה אחרי העלייה לאוויר: מעקב אחר תקלות שמתגלות בשימוש אמיתי בתקופה הראשונה.

הסבות ניסיון חוזרות הן לב התהליך. כל הרצה חושפת בעיות חדשות במיפוי או בנתוני המקור, וכל תיקון מצריך בדיקה חוזרת. בלי כלי השוואה אוטומטי, זה הופך במהירות לצוואר בקבוק.

DATA VALIDATION: הכלי של טסנת לבדיקות הסבה

כדי לפתור את צוואר הבקבוק של השוואת הנתונים, פיתחנו בטסנת כלי ייעודי לבדיקות הסבה במערכות גדולות: DATA VALIDATION. הכלי משווה בין נתוני המקור ליעד ובודק את תקינות תהליך ההסבה כולו.

הכלי לא נבנה בחלל ריק. הוא פותח על בסיס ידע וניסיון שנצברו בפרויקטים רבים של בדיקות הסבה, ומתוך הבנה של מה שבודקי נתונים צריכים באמת.

מה מייחד את הכלי

• ידידותי ופשוט לתפעול: לא צריך להיות מתכנת כדי להשתמש בו.
• בנוי לצורכי בדיקות נתונים: כל יכולת בכלי נולדה מצורך אמיתי בפרויקטי הסבה.
• משרת את כל בעלי התפקידים: בודקים, מנתחי מערכות, אנשי הסבה, מנהלי פרויקטים ומשתמשים עסקיים.
• גמיש וניתן להתאמה: אפשר להוסיף יכולות ולהתאים אותו לצרכים הייחודיים של כל פרויקט.

יכולות עיקריות

• מבוסס Excel: סביבת עבודה מוכרת לכל משתמש בארגון, בלי תקופת למידה ארוכה.
• השוואת שדות פשוטים ומורכבים: כולל אימות של כללי ההמרה שהוגדרו בין המקור ליעד.
• הגדרות מהירות: הזנת הגדרות אוטומטית באמצעות רשימות נפתחות (Drop Down), שחוסכות זמן ומונעות טעויות הקלדה.
• שליפה נוחה של קבצים: מסך ייעודי לבחירת קבצי המקור והיעד.
• תוצאות ברורות עם קישורים: כל פער מוצג עם קישור (Link) ישיר לשדה הרלוונטי בקובץ המקור ובקובץ היעד, כך שאפשר לחקור כל ממצא בלחיצה אחת.
• נתונים סטטיסטיים: ספירת רשומות ושדות, זיהוי מפתחות כפולים, איתור רשומות חסרות ועוד.

השילוב הזה מאפשר להריץ השוואה מלאה אחרי כל הסבת ניסיון, במקום לבדוק מדגם קטן ולקוות לטוב.

למי מתאימות בדיקות הסבת נתונים?

כל ארגון שעובר ממערכת אחת לאחרת צריך בדיקות הסבה. הצורך חריף במיוחד בארגונים גדולים עם היסטוריית נתונים ארוכה ורגולציה מחמירה:

• בנקאות ופיננסים: מעבר למערכות ליבה חדשות, איחוד מערכות אחרי מיזוג והסבת היסטוריית עסקאות.
• ביטוח ופנסיה: הסבת פוליסות, תביעות וזכויות עמיתים, שבהן כל טעות בחישוב מתורגמת לכסף של לקוחות.
• ממשלה ומגזר ציבורי: הסבה של מערכות סגורות למערכות פתוחות, ומעבר למערכות ERP כמו SAP.
• בריאות: העברת תיקים רפואיים, שבה דיוק הנתונים הוא עניין של בטיחות מטופלים.
• תעשייה ולוגיסטיקה: מעבר למערכות ERP ו-WMS חדשות, כולל נתוני מלאי, ספקים והזמנות.

טסנת מלווה פרויקטי הסבה בכל המגזרים האלה, ומביאה גם ידע בבדיקות וגם היכרות עם עולם התוכן העסקי של כל לקוח.

שאלות נפוצות על בדיקות הסבת נתונים

1. מה ההבדל בין הסבת נתונים לבדיקות הסבה? הסבת הנתונים היא פעולת ההעברה עצמה. בדיקות ההסבה הן התהליך שמוכיח שההעברה הצליחה, ושהנתונים ביעד שלמים ומדויקים.

2. האם מספיק לבדוק מדגם של רשומות? מדגם יכול לחשוף בעיות שיטתיות, אבל הוא מפספס חריגים. בהסבות קריטיות, כמו בנקאות וביטוח, מומלץ להשוות את כל הרשומות, וזה בדיוק מה שכלי השוואה אוטומטי מאפשר.

3. מתי צריך להתחיל את בדיקות ההסבה? כמה שיותר מוקדם. מעורבות הבודקים כבר בשלב מסמך המיפוי חוסכת תיקונים יקרים בהמשך.

4. כמה הסבות ניסיון צריך לבצע? זה תלוי בגודל ובמורכבות של הפרויקט. בדרך כלל מבצעים כמה סבבים, עד שההשוואה בין המקור ליעד יוצאת נקייה ויציבה.

5. האם צריך ידע בתכנות כדי לעבוד עם כלי DATA VALIDATION? לא. הכלי מבוסס Excel ובנוי עם רשימות נפתחות, כך שכל בעלי התפקידים יכולים לעבוד איתו.

לסיכום: הסבה מוצלחת נמדדת בנתונים

הסבת מערכות היא אחד הפרויקטים המורכבים והרגישים ביותר שארגון עובר. המערכת החדשה טובה בדיוק כמו הנתונים שעוברים אליה. בדיקות הסבה מקצועיות, שמשלבות מתודולוגיה מובנית, צוות מנוסה וכלי השוואה ייעודי, הן מה שמבטיח שהמעבר לעידן הדיגיטלי לא יבוא על חשבון הדיוק.

מתכננים הסבת מערכות? צרו קשר עם טסנת ונשמח להציג לכם את מתודולוגיית בדיקות ההסבה שלנו ואת כלי DATA VALIDATION.