LOGIN
התחברות או הרשמה
Avatar
להמשך הרשמה ידנית – לחץ על כפתור ההרשמה, להרשמה/כניסה מהירה בעזרת חשבון רשת חברתית – לחץ על הלוגו בכותרת

אפס סיסמה - שכחתי את שם המשתמש

שם משתמש
סיסמה
זכור אותי

he icon   en icon

בכדי להוסיף פוסט בבלוג יש להרשם או להתחבר - ההרשמה/כניסה מתבצעת מכותרת האתר.

,תכונות הטסט - מהירות

נכתב על ידי 
שני, 21 יולי 2014 13:48
דרגו כתבה זו
(1 הצבעה)

אחד הסיפורים שאני אוהב לחזור עליהם (שוב ושוב) הוא חווית ה TDD הראשונה שלי. לפני שנים רבות, סיימתי לקרוא את הספר המופלא של קנט בק "Test Driven Development by Example". הייתי בטוח ש TDD הוא התשובה לכל מכאוביי.

באותו זמן עבדתי על רכיב תקשורת, ואמרתי לעצמי: למה לא לנסות את הדבר החדש הזה על עצמי?

למען ההגינות אומר שכבר מהתחלה ביצעתי עבירת TDD, כי כבר החלטתי שהרכיב יהיה מבוסס על MSMQ. לא הייתי אמור להחליט על האפיון מראש, אבל לא זה העניין. MSMQ הוא שרות queueing של Windows, תשתית לשליחת וקבלת הודעות בצורה אסינכרונית. הוא גם קצת איטי.

הטסט הראשון שכתבתי, שלח הודעה ובדק שהגיעה.

משהו כזה:

אנחנו מדברים על מהירות. אם טסט כזה רץ כ-3 שניות, כמה זמן ייקח להריץ 100 כאלה?

הייתי כה מאושר שהטסט עבר, שלא שמתי לב לאורך הריצה. רוב האנשים שמתחילים לכתוב בדיקות יחידה לא שמים לב. הם צוברים טסטים שמאטים את הריצות עד שיום אחד הם מגיעים לנקודת שבירה.

ניקח לדוגמא ריצה שלוקחת כ- 15 דקות. ונניח שאני אדם סבלני מאד. נניח.

עד לנקודה הזאת, לא הייתה לי בעיה להריץ את כל הטסטים. אך בנקודת 15 הדקות, אני מחליט שהרצה כל שעה פוגעת לי בפרודוקטיביות. לכן, אני מחליט להריץ את כל הטסטים רק פעמיים ביום. ריצה אחת במהלך ארוחת הצהריים, ואת השנייה נתחיל לפני שאלך הביתה. כך לא אצטרך לבזבז זמן בלחכות לריצה שתסתיים ואוכל לבדוק את התוצאות כשאחזור לעבודה.

זה משאיר לי זמן לכתוב קוד (ואולי גם עוד טסטים). אז לאחר שאני חוזר מארוחת הצהריים, יש כמה טסטים אדומים. מכיוון שלא ברור מה בדיוק קרה (אני לא יודע אילו חלקים בקוד שכתבתי מהבוקר בצורה פרודוקטיבית גרמו לנפילה) אני אבלה בלדבג את הטסטים במשך שעה. ואחזור על התהליך מחר בבוקר ובארוחת הצהריים הבאה.

עד שאשים לב שאני מבזבז שעתיים בכל יום על תיקון טסטים, שזה בערך 25% מזמני שאני משקיע בטסטים – השקעה שאני לא רואה את התוצאה שלה. בנקודה זו אני מפסיק להריץ את הטסטים. ומיד אחר כך לכתוב נוספים.

אני קורא לזה "The Death Spiral of Doom". רבים וטובים נופלים בה. רבים לא מנסים לטפס שוב.

אם נהפוך את התהליך, נראה משהו מעניין. ככל שהריצה מהירה יותר (ברמה של שניות, ואפילו פחות) אני אריץ את הטסטים יותר פעמים. כשטסט נכשל, אני יודע איפה הבעיה, כי אני יודע שהיא נובעת משינוי שהכנסתי בדקות האחרונות. תיקון אפילו לא יצטרך debugging, כי הדברים טריים בראש. פיתו הופך חלק ומהיר יותר.

פידבק מהיר הוא חובה!

טסטים חייבים לרוץ מהר. אנחנו מדברים על מאות ואלפים ברמה של שניות. אם לא, אנחנו צריכים לטפל בבעיה.

פידבק מהיר הוא לא רק ערך אג'ילי חשוב. הוא הכרחי להגברת מהירות. אם לא נשקיע בו, רשת הביטחון שבנינו מטסטים תתרסק.

מה אפשר לעשות?

  • ניתוח. אורך הריצה מופיע בכל דוח הרצה. חפשו את הטסטים האיטיים והוציאו להרצה נפרדת.
  • סדר. פצלו הרצות לאיטיות ומהירות. השאירו את האיטיות לתהליך הבנייה האוטומטי, כדי שניתן יהיה לבצע הרצה מהירה על המכונה הלוקאלית.
  • זיוף. שימוש ב mocking עוזר רבות להגברת מהירות . אם יש תלות ברכיב איטי (כמו MSMQ), השתמשו בכלי mocking.
  • עוד קצת סדר. לא כל הטסטים חייבים להיות חלק ממערך הבדיקות לנצח. אם יש קוד שלא נוגעים בו, אבל ריצת הטסטים עליו אורכת 5 דקות, הפסיקו להריץ אותם, או העבירו אותם לריצת לילה.
  • שדרוג. תופתעו כמה עזרה נותנת חומרה משודרגת להרצה. המחיר של הוספת זכרון או דיסק מהיר יחסית למהירות שתקבלו הוא קטן.

תחזוקה של תהליך הרצה היא תהליך מתמשך. צריך להמשיך לנתח ולשפר. התוצאה היא פידבק מהיר ורשת ביטחון שמאפשרת שיפור מתמיד, שינויים, והכי חשוב – שאפשר לסמוך עליה.

הפוסט הזה הוא חלק מסדרת "תכונות הטסט". בפעם הבאה: דיוק.

הכותב מעביר הדרכות וליווי בנושאי בדיקות ואג'ייל – המעוניינים יכולים לפנות דרך האתר:http://www.gilzilberfeld.com/p/contact.html

 

Test Speed

שונה לאחרונה ב שלישי, 29 יולי 2014 10:37

חובה להיות משתמש רשום במערכת בכדי להגיב - ההרשמה/כניסה בכותרת האתר

חדשות מעולם הבדיקות

  • Five Blogs – 18 October 2018

    The (best) five blogs I read today. Check them out. What Is Data Democratization? A Super Simple Explanation And The Key Pros And Cons Written by: Bernard Marr What’s getting Agile down? Written by: Gary Watts Future of AI in Testing (Will You Be Replaced?) Written by: Joe Colantonio Jeff Hawkins Is Finally Ready to Explain His Brain Research Written by: Cade Metz Lower level Automation and testing? Be more precise! The Automation triangle revisited…again! Written by: Toyer Mamoojee Quote of the day: “When you’re young, being different is not cool. But when you’re older, it absolutely is.” -Lane Moore You can follow this page on Twitter

    17.10.2018 | 11:36 קרא עוד...
  • The Automated Regression Suite. Part 2 of 3. When to run the tests.

    Once you have your automated regression suite in place, you can create a scheduler to run them periodically, without any manual intervention. Mostly you will use Jenkins jobs (or some similar CI tool) to trigger them and have them running on an environment of your choice. Just because they are called “regression tests” it does not mean they are only meant to be run once before a release. They are in place to help validate your system, so you can run them as often as you want. But how often do you want to run them? That really depends on some factors like: how often are you releasing, how often are you committing, how many other services is your software dependent on, how often are those services also released, and so on. How often you are releasing determines the amount of new or changed code that needs to reach production. If you are releasing once a year, the amount of such code will be huge. If you release every two weeks you will have less such code, and in case a failure would occur in the software, it would be much easier to pinpoint the root of the problem (as compared to the one-year release cycle). If you are releasing rarely, with large amounts of time between releases, you really should run your tests at least once a week. From my experience, this test run frequency makes running these tests worth it, since you have a good amount of changed[…]

    17.10.2018 | 11:17 קרא עוד...
  • Let’s stop talking about testing, let’s start thinking about value

    Let’s stop talking about testing, let’s start thinking about value This year Alex Schladebeck and I did two keynotes titled “Let’s stop talking about testing, let’s start thinking about value” at QA Expo in Spain and TestNet in the Netherlands. This blogpost has the most important points we made in our talk. The keynote was inspired by some of our frustrations: “Testing is under appreciated” (Alex) and “Most testers are unable to explain what we do” (Huib). I wrote about my frustration back in 2016 already. This blogpost is about my frustration that most testers cannot come up with a decent definition of testing. And even worse: a big majority of the people who call themselves professional testers are not able to explain what testing is and how it works! They have trouble explaining what they are testing and why they are doing specifically the thing they are doing! How can anybody take a tester seriously who cannot explain what he is doing all day? Alex’s frustration is that testing is not valued by others. Developers are seen as the rockstars of the project because they create the software that adds value. But why are testers often not valued? Lowered expectations for testing expertise by stuff like ISO standards and ISTQB: I wrote about certification and standards before. ISTQB and standards put too much emphasis on process and documentation, rather than the real testing. By assuming there can be a standard, you say that there is one best way to organize and document your testing. But isn’t your test strategy[…]

    17.10.2018 | 5:05 קרא עוד...

טיפים

  • טיפים לאוטומציה יעילה - Dale Emery
    טיפים לאוטומציה יעילה - Dale Emery (How to Survive the Coming Test Automation Zombie Apocalypse (PDF slide deck By Dale Emery bit.ly/15XFGkp סט שקופיות מעולה המתאר את מרבית המחלות התוקפות פעילויות אוטומציה - ומדגיש כיצד לטפל בהן! על כל שקופית ניתן לפתוח…
    קרא עוד...
  • אל תחכה שיתנו לך הזדמנות
    אל תחכה שיתנו לך הזדמנות אם אתה רוצה להתפתח - אל תחכה שיתנו לך הזדמנות, קח אותה - למד, בצע והדגם הדבר בזמנך הפנוי - מישהו כבר יאמץ את זה וייתן לך את הקרדיט.   טיפים מחברי ITCB-AB
    קרא עוד...
לרשימה המלאה >>