Данные о сбоях браузера от Sauce Labs показывают, что, хотя в долгосрочной перспективе IE был худшим браузером, если учесть последнюю версию браузера, он значительно улучшил свою работу.
Как компания, предлагающая услуги «тестирование как услуга», Sauce Labs может определить, какие браузеры вызывают наибольшее количество ошибок.
Он объяснил свою методологию в недавнем сообщении в блоге:
Просматривая метаданные более 50 миллионов тестов, запущенных в Sauce, мы можем увидеть, какие браузеры вызывают больше всего ошибок.
Иногда наблюдаемые ошибки вызваны проблемами с подключением или ошибками в коде. Но иногда эти ошибки вызваны сбоем самого браузера. Sauce фактически перезагрузит браузер и перезапустит тест, когда это произойдет, без вашего ведома (волшебство!), Но мы записываем все случаи, когда это происходит. Отсюда мы можем увидеть частоту ошибок во всех поддерживаемых нами браузерах.
Если посмотреть на диаграмму всех тестов, когда-либо проводившихся на Sauce, за последние 4 года, IE лидирует с коэффициентом ошибок 0,25%.
(щелкните диаграмму, чтобы увеличить)
Однако, если вы разделите версии браузеров, сразу станет очевидно, что IE 6 и IE 7 являются основными виновниками с 0,31% и 0,29% соответственно.
И если вы посмотрите на частоту ошибок в последних версиях браузеров, IE больше не является наиболее подверженным ошибкам — эта награда теперь достается Safari 6 с уровнем ошибок 0,12, за ним следует Opera 12 с 0,08%, в то время как IE 10 имеет респектабельный 0,04%.
Из этой окончательной таблицы ясно, насколько надежнее последние версии браузеров. Chrome 27 имеет коэффициент ошибок 0,02%, а Firefox, который всегда был наиболее стабильным, имеет такой низкий уровень, что он даже не отображается на диаграмме.