IE8이 파이어폭스와 크롬보다 빠르다고?

마이크로소프트가 IE8과 파이어폭스, 크롬을 자체 비교테스트한 결과를 공개했는데 여기서 IE8이 가장 빠르다는 의외의 결과를 공개했습니다. 테스트 결과 보고서 제목이 "브라우저 성능 측정: 벤치마킹과 성능분석에서 나타난 이슈 이해하기"^[각주:1]라는 긴제목으로 되어 있는데 제목에서 알수 있듯이 그동안 있었던 벤치마킹 테스트 결과에 대한 마이크로소프트의 불편했던 감정이 녹아들어 있는것 같습니다.

보고서에는 각 브라우저와 네트워크 구성요소를 설명해 놓았고 이들이 벤치마킹시 어떻게 브라우저 성능에 영향을 미치는지를 설명해 놓았으며 각 벤치마킹 툴의 성능과 한계를 (마이크로소프트이 시각으로) 설명해 놓았으며 이런 문제를 피할수 있는 테스트를 만드는 방법도 설명해 놓았습니다.

이 보고서에는 아래와 같이 전세계 상위25까지의 웹사이트를 위에 언급한 세가지 브라우저를 이용해 테스트한 결과를 정리해 놓은 차트가 포함되어 있습니다. 언뜻 봐도 IE8이 다른 두 브라우저보다 빠르게 사이트에 접속한 경우가 더 많습니다. IE8이 12개 사이트에서 가장 빠른 로딩시간을 보였고 크롬이 9개, 파이어폭스가 4개 사이트에서 가장 빠르게 사이트를 로딩한 것으로 나타났습니다. 이 차트만 보면 IE8이 가장 빠른 웹브라우저가 맞는것 같군요.

그런데, 여기서 재미있는건 mozilla.com은 IE8이 가장 빠르고 microsoft.com은 파이어폭스가 가장 빠른 속도를 보여주었다는 점입니다. 또, google.com은 IE8이 가장 빠르고 msn.com은 크롬에서 가장 빠릅니다.

그런데, 이 테스트결과에서는 테스트한 웹사이트와 테스트 방법이 조금 문제인것 같습니다. MS는기존의 브라우저 테스트 방법인 SunSpider, Celtic Kane, V8 and iBench등이 자바스크립트 성능을 주로 테스트한다며 실제 웹페이지 로딩 테스트를 했는데, 이 방법도 일리는 있어보이지만 실제로 오늘날의 웹페이지들은 그렇게 간단한 구조로 되어 있지 않습니다. google.com의 메인 페이지는 별다른 멀티미디어 요소가 들어가지 않은 단순한 페이지로 google.com을 빨리 로딩했다고 브라우저 성능이 좋다고 말할수 없을겁니다. google.com을 로딩한 시간 차이는 IE8과 파이어폭스가 불과 0.02초 차이입니다. MS가 만들어 올린 비디오에서도 이 시간은 눈 한번 깜빡일 시간이라고 했습니다. yahoo.com이나 msn.com, live.com같은 사이트도 전세계에서 가장 많은 사람들이 찾는 사이트라 여러가지 브라우저에 이미 최적화가 되어 있는 상태입니다. 이런 사이트에서 빠른 속도를 보인다고 성능이 좋다고 말할수 있을까요? 복잡한 페이지도 빨리 로딩해야 진정 좋은 브라우저라고 할수 있을겁니다.

MS가 이번에 보고서를 공개한 것은 IE8의 출시에 맞추어 (아마 다음주 MIX09에서 RTM을 공개할것으로 보입니다.) 계속 하락세에 있는 IE의 점유율을 신경쓴 나머지 IT geek들보다는 일반 사용자들에게 어필하기 위한것 같다는 생각입니다. 디테일을 모르는 사용자들은 이런 단순한 테스트 방법만으로도 IE8이 좋다는 인식을 가질수 있을테니까요. 그리고, 테스트에 사파리와 오페라가 빠진것도 이상한 점입니다. 아마, 이 두 브라우저가 포함되었다면 IE8이 12개나 1위를 차지하는 일도 없었을것입니다. 점유율로 봐도 사파리가 크롬보다는 더 높은데 사파리가 빠진것은 아무래도 이해가 되지 않는 일이죠.

저도 IE8 RC버전을 가끔씩 쓰고 있는데 확실히 이전버전 보다는 빨라지긴 했지만 아직 파이어폭스나 크롬보다는 빠르지 않은것으로 여겨집니다. 이 세가지 브라우저를 다 사용해보신 여러분들은 어떻게 생각하시나요? IE8이 가장 빠른것 같나요? 저는 이렇게 말하겠습니다. "I don't think so!"

Microsoft's own speed tests show IE beating Chrome, Firefox (Updated)
IE8 faster than Firefox and Chrome? Hmmm ...
Measuring Browser Performance: Understanding issues in benchmarking and performance analysis
Performance analysis video by Microsoft

1. "원래 제목은 Measuring Browser Performance: Understanding issues in benchmarking and performance analysis 입니다." [본문으로]