code.vuplus.com Git - vuplus_webkit/blob - Tools/BuildSlaveSupport/build.webkit.org-config/public_html/TestFailures/scripts/FlakyTestBugForm_unittests.js

   1 /*
   2  * Copyright (C) 2011 Apple Inc. All rights reserved.
   3  *
   4  * Redistribution and use in source and binary forms, with or without
   5  * modification, are permitted provided that the following conditions
   6  * are met:
   7  * 1. Redistributions of source code must retain the above copyright
   8  *    notice, this list of conditions and the following disclaimer.
   9  * 2. Redistributions in binary form must reproduce the above copyright
  10  *    notice, this list of conditions and the following disclaimer in the
  11  *    documentation and/or other materials provided with the distribution.
  12  *
  13  * THIS SOFTWARE IS PROVIDED BY APPLE INC. AND ITS CONTRIBUTORS ``AS IS''
  14  * AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO,
  15  * THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR
  16  * PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL APPLE INC. OR ITS CONTRIBUTORS
  17  * BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR
  18  * CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF
  19  * SUBSTITUTE GOODS OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS
  20  * INTERRUPTION) HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN
  21  * CONTRACT, STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE)
  22  * ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF
  23  * THE POSSIBILITY OF SUCH DAMAGE.
  24  */
  25
  26 (function() {
  27
  28 module('FlakyTestBugForm');
  29
  30 function createTestForm(failingBuildNames, failingTest, oldestAnalyzedBuild, newestAnalyzedBuild, analyzedBuildCount) {
  31     var mockBuildbot = {};
  32     mockBuildbot.parseBuildName = function(buildName) {
  33         var match = /(\d+)/.exec(buildName);
  34         return {
  35             revision: parseInt(match[1], 10),
  36             buildNumber: parseInt(match[2], 10),
  37         };
  38     };
  39
  40     var mockBuilder = {};
  41     mockBuilder.name = '[BUILDER NAME]';
  42     mockBuilder.buildbot = mockBuildbot;
  43     mockBuilder.resultsPageURL = function(buildName) {
  44         return '[RESULTS PAGE URL ' + this.name + ', ' + buildName + ']';
  45     }
  46
  47     return new FlakyTestBugForm(mockBuilder, failingBuildNames, failingTest, oldestAnalyzedBuild, newestAnalyzedBuild, analyzedBuildCount);
  48 }
  49
  50 const testCases = [
  51     {
  52         oldestAnalyzedBuild: 'r1 (1)',
  53         newestAnalyzedBuild: 'r15 (8)',
  54         analyzedBuildCount: 8,
  55         failingBuildNames: [
  56             'r10 (5)',
  57             'r8 (2)',
  58         ],
  59         failingTest: 'css1/basic/class_as_selector.html',
  60         expectedDescription: 'css1/basic/class_as_selector.html failed 2 out of 8 times on [BUILDER NAME] between r1 and r15 (inclusive).\n\nFailures:\n\n[RESULTS PAGE URL [BUILDER NAME], r10 (5)]\n[RESULTS PAGE URL [BUILDER NAME], r8 (2)]\n',
  61         expectedTitle: 'css1/basic/class_as_selector.html sometimes fails on [BUILDER NAME]',
  62         expectedURL: '[RESULTS PAGE URL [BUILDER NAME], r10 (5)]',
  63     },
  64 ];
  65
  66 test('titles', 1, function() {
  67     testCases.forEach(function(testCase) {
  68         var form = createTestForm(testCase.failingBuildNames, testCase.failingTest, testCase.oldestAnalyzedBuild, testCase.newestAnalyzedBuild, testCase.analyzedBuildCount);
  69         equal(form.title, testCase.expectedTitle);
  70     });
  71 });
  72
  73 test('descriptions', 1, function() {
  74     testCases.forEach(function(testCase) {
  75         var form = createTestForm(testCase.failingBuildNames, testCase.failingTest, testCase.oldestAnalyzedBuild, testCase.newestAnalyzedBuild, testCase.analyzedBuildCount);
  76         equal(form.description, testCase.expectedDescription);
  77     });
  78 });
  79
  80 test('URLs', 1, function() {
  81     testCases.forEach(function(testCase) {
  82         var form = createTestForm(testCase.failingBuildNames, testCase.failingTest, testCase.oldestAnalyzedBuild, testCase.newestAnalyzedBuild, testCase.analyzedBuildCount);
  83         equal(form.url, testCase.expectedURL);
  84     });
  85 });
  86
  87 })();