מקרה בוחן

מעקב אחרי קריסה בפעולה ממושכת עד דליפת handles: מקרה בוחן

מקרה בוחן טכני של קריסה שהופיעה רק אחרי חודש של פעולה, שצומצמה לחקירת דליפת handles באמצעות סידור נקודות התצפית והגברת הלוגים.

סקירת המקרה

המקרה עוסק ביישום Windows שקרס בפתאומיות רק אחרי כחודש של פעולה רציפה. התחלנו בסידור נקודות התצפית, ובסופו של דבר צמצמנו את החקירה לדליפת handles. הנקודה המרכזית הייתה לא רק הגורם עצמו, אלא ההחלטה אילו תצפיות להקים קודם.

תסמינים

  • הקריסה לא הופיעה בתוך כמה ימים, אלא רק אחרי פעולה ממושכת
  • קשה לקבוע לפי צורת החריגה בלבד אם מדובר בדליפה
  • התקלה הופיעה רק בשטח, ולכן במחשב הפיתוח היה צריך לצמצם את תנאי השחזור

אילוצים

  • המתנה של חודש לכל שחזור אינה מעשית
  • התקלה כללה חיבור מחדש של המצלמה ונתיבי כשל, ולכן לוגים של המסלול התקין בלבד לא הספיקו
  • היה צורך לעקוב באופן רציף אחרי המשאב שגדל

מה בחנו

  • heartbeat של Handle Count, ‏Private Bytes ו-Thread Count
  • לוגי גבול של תחילת סשן, חיבור מחדש וסיום
  • לוגי מחזור חיים מזווגים: create/open/register מול close/dispose/unregister

איך בודדנו את הבעיה

לא רדפנו אחרי ה”קריסה בפעולה ממושכת” כמות שהיא. קודם צמצמנו את השחזור לנתיבי הכשל סביב חיבור מחדש ו-timeout. בעקבות זאת הגענו למסקנה שהכיוון הסביר יותר הוא לחשוד בדליפת handles ולא ב-memory leak, והתמקדנו בתצפית בכיוון הזה.

איך שיפרנו

  • הוספנו פריטי ניטור, כדי לעקוב אחרי מגמת הגידול ולא רק אחרי רגע הקריסה
  • סידרנו את לוגי הגבול, כדי שיהיה קל יותר לעקוב איזה רכיב פתח ואיזה סגר
  • ארגנו את ממצאי החקירה כך שקל לחבר אותם לתשתית בדיקות לנתיבי שגיאה שבאה אחר כך

שירותים שקשורים למקרה הזה

המקרה קשור הן לחקירת באגים וניתוח גורם השורש, שמבודדת תקלות שמופיעות רק אחרי פעולה ממושכת, והן לפיתוח יישומי Windows, שמסדר מצד המימוש את הלוגים, החיבור מחדש והתצפית התפעולית.

התייעצו איתנו

אם יש לכם בעיה שדומה לתוכן העמוד הזה, התייעצו איתנו וצרפו את ההקשר הנוכחי ואת סוג הסיוע שאתם צריכים.

חזרה לדף הבית